Katabi ng kastilyo ay ang maliit na simbahan ng Madonna della Rocca, na itinayo na may layuning protektahan ang mga taong tolfetano mula sa itaas. Dating tinawag na Santa Maria de Arce, ang santuario ng mga pinagmulan ng medieval, ito ay kumakatawan sa isa sa pinakamahalagang simbolo ng mga taong tolfetano na natagpuan ang kanlungan doon habang ipinapahayag ang kanilang debosyon sa Birhen. Ang santuario ay dumating sa kasalukuyang araw pagkatapos ng maraming pagpapanumbalik. Sa loob, ay itinatago ang mahalagang pagpipinta ng langis ng panlabing-anim na siglo na naglalarawan ng pag-aalis ng krus kasama ang Birheng Ina na nakaupo, na hawak sa kanyang dibdib ang katawan ng kanyang anak na inilatag lamang ng krus. Ang gawain ay maiugnay sa mga kapatid ng Carracci, kilalang pintor ng unang bahagi ng Baroque, mga may-akda bukod sa iba pang mga bagay ng ikot ng mga fresco ng Palazzo Farnese sa Roma. Ang nagpapataw na altar ng marmol, gayunpaman, ay dinisenyo ng Franciscan artist na si Padre Cosma Da Cori, sa ilalim ng gabay ng isang lay hermit, FRA' Giuseppe Catalini na nag-alay ng limampung taon ng kanyang buhay (1861-1911), sa pangangalaga ng santuario. Ang altar ay ginawa gamit ang mahalagang materyal Nina Ercole Alliata ng Civitavecchia at Luigi Martinelli ng Roma, kilalang mga marmol na artista. Si Fra ' Giuseppe Catalini, ay nag-ambag din, kasama ang paglikha ng sakristan at ang Via Matris, na nabuo mula sa pitong krus na sumisimbolo sa pitong kalungkutan ni Maria, at namamahala din sa pagtatayo ng kalsada at gate sa harap ng pintuan ng simbahan.