Byn Scarlino domineras av den medeltida fästningen..Från de arkeologiska utgrävningar som genomfördes mellan 1979 och 1983, har det visat sig att området var bebott från den sena bronsåldern (XII - X. C.), men så långt som rocca, det första omnämnandet av "curtis" Scarborough och går tillbaka till 973, när det i besittning var och en av Aldobrandeschi familj. Mellan XI och XII-talet bosättningen genomgick en betydande konstruktiv förbättring och ett dokument av 1277, år då slottet överlåtits av grevarna Alberti till kommunen Pisa, visar tecken på olika byggnader. Med Pisanerna återställdes och utvidgades fästningen, staden genomgick också stora omvandlingar och många byggnader förstördes för att helt byggas om. År 1399 gick Scarlino till Appiano som genomförde en ny renovering av fästningen med byggandet av den andra väggen.Idag kan du beundra de imponerande ruinerna av byggnaden, som består av tre vinkeltorn av olika former förenade med olika vägggardiner. Fästningen är välbevarad medan väggarna som omger den medeltida staden endast delvis bevaras. Fästningens struktur har en femkantig form och bildas av två väggar, i hörnen finns tre stora torn, varav en är cirkulär i form.
