Изначально задуманный как простая крепость для защиты от вражеских нападений, со временем он был укреплен и постепенно превратился в богатый особняк, в котором проживало несколько знатных сицилийских семей.Первые исторические упоминания об этом замке относятся к 1160 году. Исторические события переплетаются с легендой. Маттео Бонелло, один из первых владельцев замка, был злейшим врагом короля Вильгельма I, известного как "il Malo" (это имя было дано ему не случайно!). Убив советника короля, Бонелло укрылся в его поместье, пока сам король не обманул его, схватил, пытал (ему выкололи глаза и перерезали сухожилия на пятках) и оставил умирать в одной из башен. С тех пор призрак Маттео Бонелло, по свидетельству многих, кто утверждает, что видел его, беспокойно бродит по замку в поисках вечного покоя!С приходом в Палермо знатного рода Кьярамонте замок был значительно укреплен и усилен, причем настолько, что в течение почти целого столетия, с 1302 по 1392 год, ему удавалось противостоять нападениям арагонской королевской власти.XV век стал периодом наибольшего расцвета города, когда Иоанн Альфонсо Энрикес, вице-король Сицилии, подарил Каччамо герб, который, как говорят, когда-то принадлежал Карфагену (голова лошади) с тремя ногами Сицилии.Но после периода максимального великолепия начался долгий, медленный упадок. Сначала Амато, а затем Де Спуче пытались восстановить замок, изуродовав некоторые участки, в то время как многие ценные предметы обстановки были вывезены. Землетрясение 1923 года вызвало серию обвалов, разрушивших несколько помещений.С 1965 года замок является собственностью региона Сицилия.