Για να προστατεύσουν την πόλη, οι αραγονέζοι άρχοντες, ο βασιλιάς Φερδινάνδος Α της Νάπολης και ο γιος του Αλφόνσο, όταν οι Οθωμανοί πήραν το Οτράντο (1480), επέλεξαν το νησί Sant'andrea ως ιδανικό μέρος για να ελέγξουν την πρόσβαση από τη θάλασσα στην πόλη. Κατέλαβαν σχεδόν ολόκληρο το νησί για να χτίσουν το κάστρο, που ονομάζεται επίσης αλφόνσινο, ή "θαλάσσιο κάστρο", το οποίο με τον Φίλιππο Β ' του Αψβούργου (16ος αιώνας) έγινε απόρθητο χάρη στους τρεις προμαχώνες και τους ψηλούς και χοντρούς τοίχους. Μετά από εναλλασσόμενα γεγονότα που το είδαν να γίνει νοσοκομείο, Φάρος, σπίτι και στρατιωτική φρουρά, το φρούριο είναι προσωρινά κλειστό για εργασίες ανακαίνισης (αναμένεται να ξανανοίξει μέχρι το 2019: ελέγξτε την ιστοσελίδα τους για να δείτε αν έχει), αλλά εξακολουθούν να επισκέπτονται το νησί. Ακόμη και απλά θαυμάζοντας είναι ένα απίστευτο συναίσθημα: κατά το ηλιοβασίλεμα, η πέτρα του ηφαιστείου με την οποία χτίστηκε παίρνει ένα κοκκινωπό χρώμα που το καθιστά γοητευτικό, τόσο πολύ ώστε για πολλούς αυτό είναι απλά το "κόκκινο κάστρο".”
