Кръстова гора е бил един от основните духовни центрове на Балканите с голям манастир, който е действал активно по време на турското робство. Монасите са се молили и работили за освобождението на България. Башибозуците нападат манастира, разрушават го, запалват го и избиват всички монаси. Легендата разказва, че тогава на всяко дърво и камък се появява кръст - символ и свидетелство на големите страдания, през които са минали българите под турско робство. Само монасите знаели къде се е съхранявало парчето от Христовия кръст, но тайната се е съхранила и си е отишла заедно с тях. Лековитите сили на местността обаче станали още по-силни и лечебни, макар и всичко да било разрушено.
В началото на 30-те години на 20-и век Учителя Беинса Дуно - Петър Дънов изпраща там своя последовател Йордан Стойчев, по-известен като брат Йорданчо, да локализира с точност мястото на легендарната Кръстова гора. Брат Йорданчо получил видение, което му показва праведния път. Бог му прошепва да пусне два бели гълъба и където кацне първият от тях, там да се постави голям железен кръст. Където кацне вторият гълъб, трябва да се построи църква „Света Троица“ и олтар. Така и става.
Кръстът на Кръстова гора има също уникална история, свързана отново с Учителя. По това време сестрата на цар Борис III Евдокия се разболява тежко от епилепсия. Царското семейство търси съвет от Петър Дънов как може принцеса Евдокия да се излекува. Той я изпраща заедно с малкия син на приближения на царя офицер Величков, страдащ от същата болест, в Кръстова гора за един месец. И двамата оздравяват напълно. Царят и неговият офицер отиват да благодарят на Учителя, а той им казва да направят метален кръст, който да тежи точно 66 кг. и да го поставят на Кръстова гора. Те изпълняват заръката и освещаването на кръста става факт на 1 май 1939 г.

Цялото село Борово присъства на освещаването. По едно време бяло гълъбче каца на менчето със светена вода, а след това литва към западното възвишение на върха. Брат Йорданчо оповестява, че където кацне гълъбчето, там е било мястото на старото манастирско аязмо. Птицата каца на една скала. В долната ѝ част, след разчистване, бликва така търсената лековита вода.
Всяка година на 14 септември - Кръстовден, хиляди хора се стичат на Кръстова гора да търсят физическо и духовно изцеление. Поверието гласи, че поклонниците трябва да посетят святата местност в три последователни години за пречистване и посвещение. Счита се още, че Кръстова гора е част от свещен енергиен триъгълник, образуван още от древни времена между Кръстова гора, Караджов камък и Белинташ.
Според старо поверие Кръстова гора се смята за отражение на божественото и вярата, Караджов камък се свързва с отвъдното и със света на мъртвите, а Белинташ – с живота и познанието. Според местните хора в района се случват мистични и необясними неща, което се дължи на енергийните полета на трите свещенни места.