Początkowo pomyślany jako prosta forteca do obrony przed atakami wroga, z czasem został wzmocniony i stopniowo przekształcony w bogatą rezydencję, w której mieszkało kilka szlachetnych sycylijskich rodzin.Pierwsze historyczne wzmianki o tym zamku pochodzą z 1160 roku. Wydarzenia historyczne przeplatają się z legendą. Matteo Bonello, jeden z pierwszych właścicieli zamku, był gorzkim wrogiem króla Wilhelma I znanego jako "il Malo" (imię to nie zostało mu nadane przypadkowo!). Po zamordowaniu doradcy króla, Bonello schronił się w jego posiadłości do czasu, gdy podstępem przez samego króla został schwytany, poddany torturom (wydłubano mu oczy i przecięto ścięgna na piętach) i pozostawiony na śmierć w jednej z wież. Od tego czasu duch Matteo Bonello, zgodnie z zeznaniami wielu osób, które twierdzą, że go widziały, niespokojnie przemierza zamek w poszukiwaniu wiecznego spokoju!Wraz z pojawieniem się w Palermo szlachetnego rodu Chiaramonte, zamek został gruntownie ufortyfikowany i wzmocniony, do tego stopnia, że przez prawie sto lat, od 1302 do 1392 roku, zdołał odeprzeć ataki aragońskiej władzy królewskiej.XV wiek to okres największej świetności miasta, do tego stopnia, że Jan Alfons Henriquez, wicekról Sycylii, nadał Caccamo herb, który podobno należał kiedyś do Kartaginy (głowa konia), z dodanymi trzema nogami Sycylii.Jednak po okresie maksymalnej świetności rozpoczął się długi, powolny upadek. Najpierw Amatosowie, a potem De Spuches próbowali odrestaurować zamek, niszcząc niektóre miejsca, a wiele cennych elementów wyposażenia zostało zabranych. Trzęsienie ziemi w 1923 roku spowodowało serię zawaleń, które zburzyły kilka obszarów.Od 1965 roku zamek jest własnością Regionu Sycylii.
