Det är den äldsta av de tre fästningarna i Porto Ercole (de andra två är Forte Filippo och Forte Stella), vars ursprung går tillbaka till medeltiden, till familjen Aldobrandeschi, även om den på den tiden var en liten sak jämfört med den storlek och komplexitet den fick med tiden. Utvidgningarna och omvandlingen till en riktig fästning började faktiskt på 1400-talet när sieneserna anlände, men det nuvarande utseendet, som ett riktigt befäst citadell, beror på spanjorerna, som tog den i besittning från 1500-talet. Konstruktionens komplexitet och vidsträckthet kan endast uppfattas på avstånd, särskilt från Fort Philip och Fort Stella, som tillsammans med dessa utgjorde ett enda system för observation och försvar/offensivering. I dag är komplexet nästan helt privat (de rum som en gång i tiden hade militära syften och som under en tid från slutet av 1800-talet även användes som fängelse har omvandlats till bostäder) och tillträdet till interiören är inte fritt, utan kan besökas vid vissa tider med ett kommunalt tillstånd som kan erhållas via turistbyrån. Slottet kan nås genom en avstickare till vänster från Panoramavägen som går runt berget Argentario, strax efter att man, också till vänster, lämnat ingången till Porto Ercoles antika centrum (Porta Senese). När man väl kommer dit, om man inte kan komma in i det inre, finns det naturligtvis väldigt lite att se.