Iš pradžių jis buvo sumanytas kaip paprasta tvirtovė, skirta gintis nuo priešų antpuolių, tačiau laikui bėgant buvo sustiprintas ir palaipsniui paverstas turtingu dvaru, kuriame gyveno kelios kilmingos Sicilijos šeimos.Pirmosios istorinės žinios apie šią pilį siekia 1160 m. Istoriniai įvykiai persipynę su legendomis. Matteo Bonello, vienas pirmųjų pilies savininkų, buvo aršus karaliaus Vilhelmo I priešas, žinomas kaip "il Malo" (šis vardas jam suteiktas neatsitiktinai!). Nužudęs karaliaus patarėją, Bonello pasislėpė jo valdose, kol, paties karaliaus apgautas, buvo sugautas, nukankintas (jam buvo išdurtos akys ir nupjautos kulnų sausgyslės) ir paliktas mirti viename iš bokštų. Nuo to laiko Matteo Bonello vaiduoklis, pasak daugelio jį mačiusių žmonių, neramiai klaidžioja po pilį ieškodamas amžinosios ramybės!Atsiradus kilmingai Palermo Chiaramontės giminei, pilis buvo smarkiai sutvirtinta ir sustiprinta taip, kad beveik šimtmetį, nuo 1302 m. iki 1392 m., sugebėjo atsilaikyti prieš Aragoneso karališkosios valdžios puolimus.XV a. miestas išgyveno didžiausio spindesio laikotarpį - Sicilijos vicekaralius Jonas Alfonsas Henrikezas padovanojo Caccamo herbą, kuris, kaip teigiama, kadaise priklausė Kartaginai (žirgo galva) ir trys Sicilijos kojos.Tačiau po didžiausio spindesio laikotarpio prasidėjo ilgas ir lėtas nuosmukis. Iš pradžių Amatos, o paskui De Spuches bandė atkurti pilį, apgadindami kai kurias jos vietas, o daugelis brangių baldų buvo išvežti. 1923 m. žemės drebėjimas sukėlė virtinę griūčių, kurios sugriovė keletą patalpų.Nuo 1965 m. pilis yra Sicilijos regiono nuosavybė.