Inicialmente concebida como uma simples fortaleza para se defender de ataques inimigos, foi ao longo do tempo reforçada e gradualmente transformada numa mansão rica que albergava várias famílias sicilianas nobres.Os primeiros registos históricos deste castelo datam de 1160. Os acontecimentos históricos estão entrelaçados com lendas. Matteo Bonello, um dos primeiros proprietários do castelo, era um inimigo amargo do Rei Guilherme I conhecido como 'il Malo' (um nome que não lhe foi dado por acaso!). Após assassinar o conselheiro do rei, Bonello refugiou-se na sua propriedade até que, enganado pelo próprio rei, foi capturado, torturado (os seus olhos foram arrancados e os tendões dos seus calcanhares cortados) e deixado a morrer numa das torres. Desde então, o fantasma de Matteo Bonello, de acordo com o testemunho de muitos que afirmam tê-lo avistado, tem vagueado incansavelmente pelo castelo em busca da paz eterna!Com o advento da nobre família Palermo de Chiaramonte, o castelo foi amplamente fortificado e reforçado, ao ponto de, durante quase um século, de 1302 a 1392, ter conseguido resistir aos ataques do poder real aragonês.O século XV foi o período de maior esplendor da cidade, ao ponto de João Alfonso Henríquez, vice-rei da Sicília, ter dado a Caccamo o brasão que se diz ter pertencido a Cartago (cabeça de cavalo), com as três pernas da Sicília acrescentadas.Mas após o período de máximo esplendor, começou um longo e lento declínio. Primeiro os Amatos e depois os De Spuches tentaram restaurar o castelo, desfigurando algumas áreas, enquanto muitos dos preciosos móveis foram levados embora. O terramoto de 1923 causou uma série de colapsos que demoliram várias áreas.Desde 1965, o castelo tem sido propriedade da Região da Sicília.