Oorspronkelijk gebouwd als uitkijktoren rond het jaar 1100-1200 door de Ceccano, werd het later bewoond door verschillende feodale families die de leiding van Maenza volgden, die elk enkele verbeteringen aan het Baron kasteel maakten. Maar de belangrijkste veranderingen zijn te wijten aan de graven van Ceccano die ervoor kozen het als een residentie transformeren van een eenvoudige wachttoren naar het huidige Baron Paleis. In 1274 liet Hannibal II de heilige Thomas van Aquino daar in het voorbijgaan verblijven terwijl hij naar Lyon ging voor het oecumenisch concilie dat door paus Gregorius werd bijeengeroepen. Rond 1500 werd het hele gebouw versterkt met de toevoeging van de twee torens om aanvallen met vuurwapens te kunnen weerstaan. Sinds 1965 is het eigendom van de provincie Latina en in 1986 werd het herenhuis gerenoveerd en vandaag de dag, gratis zichtbaar, wordt het gebruikt voor culturele initiatieven en herbergt het landschapsmuseum. Het bestaat uit vier verdiepingen en 25 kamers, niet te missen de ophaalbrug, de fresco ' s en de hal van St.Thomas. Het kasteel is alleen open op zaterdag en zondag
