В Яунборне видна построенная на большом камне кирпичная часовня размером 2м х 1,5м х 2м с оцинкованной жестяной крышей. Наземные размеры валуна — 3, м х 2,5м х 0,9м . В сущности, часовня — это каменный столб с нишей, в которой в деревянной раме находится картина Девы Марии. На раме на польском языке — надпись: 15 октября 1907 года. Далее молитва к Божьей Матери о даровании здоровья. Под нишей табличка из латунной жести с надписью на польском языке “Matko Boska Nìeustajacej Pomocy Mòdl sìę za Nami” («Под твоим укрытием»).
О строительстве этой часовни имеется такая история: «В 1907 году на одного крестьянина посреди бела дня напали злоумышленники, чтобы его убить. Ему посчастливилось сбежать. Злоумышленники, в ярости, бросились за ним. Крестьянин упал в изнеможении у большого камня и зная, что злоумышленники его сейчас настигнут, начал читать молитву «Под твоим укрытием». Злоумышленники не заметили крестьянина и пробежали мимо, так как как-будто только что видели бегущего крестьянина. Крестьянин, в благодарность за спасение от верной смерти, построил храм во славу Божьей матери».
Вторая история гласит, что эту церковь возвела Яунборнская помещица Савицкая в память о муже, пропавшем без вести во время польского восстания в конце 19 века. В 1975 году около церкви упало большое дерево, которое не затронуло церковь. Специалисты по биоэнергетике и геодезисты (И. Викс), обследовали распятие и обнаружили, что фундамент находиться на пересечении сильного магического выброса. Учитывая этот факт, а также то, что рядом с камнем находятся источники и в нескольких сотнях метров от распятия по-прежнему работает довольно сильный источник (при костёле в Яунборне) можно выдвинуть гипотезу, что здесь существует древняя святыня. Как и в остальных местах в Латвии, для искоренения язычества, в таких святых местах часто были помещены христианские символы — кресты, распятия, часовни или даже строились храмы.