Bhaja špilje izgrađene su budističke redovnice oko 200. godine prije Krista. Smješteni u Carly, ove špilje nalaze se na drevnom trgovačkom putu koji se proteže od istočne strane Arapskog mora do dekana. Bhaja špilje su poput Karlovih špilja u stilu i arhitektonskom dizajnu. Popularni su 22 uklesane u stijenama špilje, koje prikazuju različite skulpture poput princa u kolima, princa koji sjedi na slonu, tri naoružana ratnika i plesnih parova, među ostalima. Od 22 špilje uklesane u stijenu, prva špilja je stanište majstora špilja. Sljedećih deset su budistički Vihari, od kojih je jedna špilja Chaitya Hall (Chayatyagriha). Preostalih sedam špilja, s nefom i pridelom sa strane, imaju natpise koji uključuju detalje zaštitnika.