Smješteno blizu stjenovite litice i gotovo u cijelosti ukopano u stijenu, svetište je sagrađeno na mjestu gdje se govori o ukazanju Gospe djevojci iz Campolemisija oko 1000. godine. Sveta slika, skicirana u kipu od vrbovog drveta, još uvijek postoji i predmet je pobožnosti, časti se s imenom Madonna della Penna. Mjesec svibanj tradicionalno je posvećen Gospi i bilježi nazočnost mnogih ljudi koji odlaze u Ermitaž na hodočašće. Živa stijena je još uvijek vidljiva u prezbiteriju i sakristiji, dok je primitivna crkva prošla različite faze širenja i obogaćivanja struktura i ruha kako je rasla slava i štovanje Djevice iz Grota počevši od četrnaestog stoljeća. Početkom osamnaestog stoljeća izgrađena je dvostruka kolonada pročelja i proširena špilja za smještaj sakristije. Pustinjaci Calomini o njoj su se brinuli pet stoljeća, sve do 1868. godine, a sada je skrbništvo povjereno ocima kapucinima iz Lucce.
