Ang unang nucleus ng kastilyo ay isang megalithic na istraktura, ang mga labi nito ay makikita sa base ng Lombard keep. Ang pag-unlad ng fortified complex ay naganap sa ikalawang kalahati ng ika-10 siglo; pinalakas ng bilang ng Lombard na si Paldefredo at ng kanyang mga kahalili ang kuta na may elevation ng quadrangular enclosure na may hindi bababa sa dalawang tore. Sa pagdating ng mga Norman, ang kastilyo at ang nayon ay nagdusa ng malawak na pinsala ng mga tropa ni Haring Roger II ng Altavilla.Sa panahon ng Angevin isang moat at ang tatlong malalaking pabilog na tore na may pinutol na base ng kono ay itinayo. Noong 1443, kasama ng mga Aragonese, ang kastilyo ay naipasa sa pamilya Pandone. Inatasan ni Count Francesco ang pagpapalawak ng moat at ang pagtatayo ng isang crenellated braga, habang si Enrico, sa simula ng ikalabing-anim na siglo, ay binago ang istraktura sa isang tirahan, pagkakaroon ng loggia, hardin, at ang mahalagang larawang palamuti na itinayo (1522 - 1527) na naglalarawan ng pinakamahusay na mga kabayo ng kanyang sikat na pag-aanak.Matapos ang pagpugot ng ulo ni Henry para sa kanyang pagkakanulo kay Charles V, ang away ay dumaan sa ibang mga pamilya kabilang ang mga Lannoy, na gumawa ng karagdagang mga pagbabago sa arkitektura at mga dekorasyon, na pinatingkad ang residential character ng kastilyo.