A sziklaszirt közelében található, szinte teljesen a sziklába vájt szentélyt ott építették, ahol a történet szerint 1000 körül egy campolemisi lánynak megjelent a Madonna. A szent képet, amelyet egy fűzfából készült szobor körvonalaz, amely még ma is létezik és az áhítat tárgya, Madonna della Penna néven tisztelik. A május hónapot hagyományosan a Madonnának szentelik, és sokan zarándokolnak fel a remeteségbe. Az élő szikla még mindig látható a presbitériumban és a sekrestyében, míg a kezdetleges kis templom a 14. századtól kezdve a Grotto Szűz hírnevének és tiszteletének növekedésével a bővítés és a szerkezetek és a miseruhák gazdagításának különböző fázisain ment keresztül. A 18. század elején épült meg a homlokzat kettős oszlopcsarnoka, és bővítették a barlangot, hogy a sekrestye is helyet kapjon benne. Öt évszázadon át, 1868-ig a calomini remeték vigyáztak rá, most pedig a luccai kapucinus atyák gondozását bízták rá.
