Scarlino faluját a középkori erőd uralja..Az 1979 és 1983 között végzett régészeti ásatásokból kiderült, hogy a terület a késő bronzkorból (XII - X. C.), de a rocca-ig, a Scarborough "curtis" első említése a 973-ból származik, amikor az Aldobrandeschi család birtokolta. A XI. és a XII. század között a település jelentős konstruktív fejlesztésen ment keresztül, és egy 1277-es dokumentum, amelyben a várat Alberti grófok adták át Pisa Önkormányzatának, különböző épületek jeleit mutatja. A Pisaiakkal az erődítményt helyreállították és kibővítették, a város jelentős átalakuláson ment keresztül, számos épületet elpusztítottak, hogy teljesen újjáépíthessék. 1399-ben Scarlino átadta az Appiano-nak, aki az erőd új felújítását végezte a második fal építésével.Ma megcsodálhatja az épület impozáns romjait, amelyek három különböző formájú szögletes toronyból állnak, amelyeket különböző falfüggönyök csatlakoztak. Az Erőd jól megőrzött, míg a középkori várost körülvevő falak csak részben megmaradtak. Az Erőd szerkezete ötszög alakú, két fal alkotja, a sarkokban három nagy torony található, amelyek közül az egyik kör alakú.