Pada mulanya dilahirkan sebagai kubu mudah untuk mempertahankan diri daripada serangan musuh, ia telah diperkukuh dari semasa ke semasa dan beransur-ansur berubah menjadi kediaman yang kaya yang telah mengalu-alukan beberapa keluarga bangsawan Sicily.Berita sejarah pertama yang berkaitan dengan istana ini bermula pada tahun 1160. Peristiwa sejarah yang saling berkaitan dengan legenda. Matteo Bonello, salah seorang pemilik pertama istana, adalah musuh ketat Raja William I yang dikenali sebagai il Malo (nama yang tidak diberikan kepadanya secara kebetulan!). Selepas membunuh penasihat raja, Bonello berlindung di ladangnya sehingga, ditipu oleh raja sendiri, dia ditangkap, diseksa (matanya dicungkil dan urat di tumitnya terputus) dan dibiarkan mati di salah satu menara. Sejak itu, hantu Matteo Bonello, menurut keterangan ramai yang mengatakan mereka pernah melihatnya, telah berkeliaran di sekitar istana dengan gelisah mencari kedamaian abadi!Dengan kedatangan keluarga Chiaramonte yang mulia dari Palermo, istana itu diperkuat dan diperkukuh secara meluas, sehingga hampir 1 abad, dari 1302 hingga 1392, ia berjaya menahan serangan kuasa diraja Aragonese.Abad ke-15 adalah tempoh kemegahan terbesar bandar itu sehingga Giovanni Alfonso Henriquez, raja muda Sicily, memberikan Caccamo lambang yang dipercayai Carthage pernah ada (kepala kuda), dengan penambahan tiga kaki. dari Sicily.Tetapi selepas tempoh kemegahan maksimum, penurunan yang panjang dan perlahan bermula. Mula-mula Amatos dan kemudian De Spuches akan cuba memulihkan istana, mencacatkan beberapa kawasan, manakala banyak perabot berharga telah diambil. Gempa bumi 1923 akan menyebabkan beberapa siri keruntuhan yang akan menjatuhkan beberapa kawasan.Sejak 1965 istana itu telah dimiliki oleh Wilayah Sicily.
