Historia tej miejscowości sięga początku XVI wieku, kiedy to powstała niewielka świątynia prawosławna (przypuszczalnie 1513r). W 1627 roku utworzony zostaje zakon bazylianów. Kilkadziesiąt lat później przybywają tu bernardyni, a po nich dominikanie. Będący pod opieką zakonników obraz Matki Boskiej z Dzieciątkiem cudami słynący, rozsławił Krasnybór jako miejsce kult Matki Boskiej.
