Scarlino kaime dominuoja viduramžių tvirtovė..Iš 1979-1983 m. atliktų archeologinių kasinėjimų paaiškėjo, kad vietovė apgyvendinta nuo vėlyvojo bronzos amžiaus (XII-x A.), tačiau, kiek tai susiję su rocca, pirmasis Skarboro "kurtis" paminėjimas datuojamas 973 m., kai valdė Aldobrandeschi šeima. Nuo XI iki XII a. gyvenvietė gerokai patobulėjo, o 1277 m. dokumentas, kuriame pilį grafai Alberti perdavė Pizos savivaldybei, rodo įvairių pastatų požymius. Su Pisanais tvirtovė buvo atkurta ir išplėsta, miestas taip pat patyrė didelių transformacijų ir daugelis pastatų buvo sunaikinti, kad būtų visiškai atstatyta. 1399 m. Scarlino perėjo į Appiano, kuris atliko naują tvirtovės renovaciją su antrosios sienos statyba.Šiandien galite grožėtis įspūdingais pastato griuvėsiais, susidedančiais iš trijų skirtingų formų kampinių bokštų, sujungtų įvairiomis sienų užuolaidomis. Tvirtovė yra gerai išsaugota, o viduramžių miestą supančios sienos yra tik iš dalies išsaugotos. Tvirtovės struktūra turi penkiakampę formą ir yra sudaryta iš dviejų sienų, kampuose yra trys dideli bokštai, iš kurių vienas yra apvalios formos.
