We wsi Skarlino dominuje średniowieczna twierdza..Z wykopalisk archeologicznych przeprowadzonych w latach 1979-1983 wynika, że obszar ten był zamieszkany od późnej epoki brązu (XII - X wiek p. n. e.), ale jeśli chodzi o twierdzę, pierwsza wzmianka o "Curtis" Scarlino pochodzi z 973, kiedy posiadłość była Aldobrandeschi. Między XI a XII wiekiem osada przeszła znaczną poprawę konstrukcyjną i dokument z 1277 r., w którym zamek został przekazany przez hrabiów Alberti gminie Piza, informuje o różnych budynkach. Z pizańczyków twierdza została odnowiona i rozbudowana, miasto również przeszedł znaczną transformację, a wiele budynków zostały zniszczone, aby być w pełni odrestaurowany. W 1399 Scarlino przeszedł do Appiana, którzy przeprowadzili nową przebudowę twierdzy wraz z budową drugiego muru.Dziś można podziwiać imponujące ruiny budynku składającego się z trzech narożnych wież o różnych kształtach połączonych różnymi ścianami. Twierdza jest doskonale zachowana, a mury otaczające średniowieczne miasto są tylko częściowo zachowane. Struktura twierdzy ma kształt pięciokąta i składa się z dwóch ścian, w rogach znajdują się trzy duże wieże, z których jedna ma okrągły kształt.
