Το κάστρο Angioino βρίσκεται στα ανατολικά της πόλης και χρονολογείται από τον 14ο αιώνα αν και έχει υποστεί σημαντικές αλλαγές, προσθήκες και ανακαινίσεις από τότε.
Το πρώτο σχέδιο του κάστρου ήταν τετράπλευρο, αλλά οι Αραγονέζοι στη συνέχεια πρόσθεσαν έναν τοίχο με πολυγωνικό σχέδιο, οχυρωμένο με κυλινδρικούς πύργους στις γωνίες. Το έργο αυτό πραγματοποιήθηκε στο σχεδιασμό του αρχιτέκτονα Francesco di Giorgio Martini της Sienese (1439-1501). Περαιτέρω έργα στην ισπανική εποχή περιλαμβάνουν το κτίριο του "Πύργου επιφυλακή", όταν το κάστρο πήρε ένα τετράπλευρο σχήμα με κορυφές ενισχύεται από τέσσερις πύργους. Ένας πέμπτος κυκλικός πύργος στη συνέχεια ανεγέρθηκε για να υπερασπιστεί τις επιθέσεις από τη θάλασσα στις αρχές του 16ου αιώνα. Το κάστρο παρέμεινε αναλλοίωτο μέχρι το δεύτερο μισό του 19ου αιώνα, όταν, στην περιοχή προς την πόλη, συμπληρώθηκε η τάφρος και θάφτηκαν οι καμάρες που στήριζαν την κινητή γέφυρα.
Σήμερα, το κάστρο της Καλλίπολης εξακολουθεί να έχει αυτή την τετράγωνη βάση και τέσσερις πύργους στις γωνίες: ο πέμπτος Πύργος, κατά τους καλοκαιρινούς μήνες, χρησιμοποιείται ως κινηματογράφος, ενώ στις μεγάλες αίθουσες διοργανώνονται εκθέσεις και άλλες πολιτιστικές εκδηλώσεις.
