És la més antiga de les tres fortaleses de Porto Ercole (les altres dues són Forte Filippo i Forte Stella), els orígens de la qual es remunten a l'edat medieval, a la família Aldobrandeschi, tot i que aleshores era una cosa insignificant en comparació amb la mida i la complexitat. va aconseguir amb el temps. Les ampliacions i la transformació en una autèntica fortalesa van començar en realitat al segle XV amb l'arribada dels siensos; l'aspecte actual, d'autèntica ciutadella fortificada, es deu, però, als espanyols, que en van prendre possessió a partir del segle XVI. La complexitat i la immensitat de la construcció només es poden percebre des de la distància, especialment des de Fort Philip i Fort Stella, juntament amb els quals va formar un únic sistema d'observació i defensa/atac.Avui el conjunt és quasi totalment privat (estances que antigament tenien finalitats militars i que, durant un temps de finals del 1800, també utilitzades com a presó, han estat reconvertides en habitatges) i l'accés a l'interior no és lliure; es pot visitar en determinats horaris amb permís municipal que es pot obtenir a través de l'oficina de turisme.Al castell s'hi arriba per un desviament a l'esquerra des de la carretera Panoràmica que circumnavega el Mont Argentario, poc després de deixar, també a l'esquerra, l'entrada de l'antic centre de Porto Ercole (Porta Senese). Per descomptat, un cop hi arribis, si no pots entrar a l'interior hi ha molt poc a veure.