De tidigaste källorna som dokumenterar slottets existens hänvisar till "Pallavicino Chronicle" från 1087, det år då Uberto, sonson till Adalberto, ärvde byggnaden. Familjen Pallavicino, en av de viktigaste aristokratiska familjerna i Parma och Piacenza, kontrollerade under flera århundraden de viktigaste kommunikationsvägarna mellan Toscana, Emilia och Ligurien genom ett omfattande nätverk av torn, slott och fästningar. Under århundradena har fästningen gått över i händerna på mäktiga familjer, bland annat familjerna Visconti och Farnese, hertigar av Parma och Piacenza. År 1828 tog familjen Grossardi, särskilt känd för sin Carbonara-verksamhet, över, och i början av 1900-talet bosatte sig familjen Levacher där. Sedan 2001 ägs slottet av kommunen Varano De' Melegari.
Top of the World