Στο πάνω μέρος του Monte Sant'angelo βρίσκεται ένα άλλο πολύ ενδιαφέρον μέρος: το Κάστρο, ένα φρούριο που χρονολογείται από το πρώτο μισό του ένατου αιώνα που χτίστηκε με εντολή του Orso I, Επισκόπου του Benevento. Ιδιαίτερα εντυπωσιακό είναι ένα από τα παλαιότερα μέρη του, Ο Πύργος των γιγάντων ύψους περίπου 18 μέτρων και με τοίχους πάχους 3 μέτρων. Το κάστρο ήταν εξοπλισμένο με κατοικημένες περιοχές, αλλά δεν υπήρχε έλλειψη χώρων που προορίζονταν για Φυλακή. Η δομή με την πάροδο του χρόνου έχει υποστεί αρκετές αλλαγές, αρχικά Βυζαντινή, τον ΙΧ αιώνα, το φρούριο στη συνέχεια πλαισιώνεται από τον λεγόμενο Πύργο των γιγάντων. Κάτω από τον Φρειδερίκο Β ' επεκτάθηκε και βελτιώθηκε και έκανε το σπίτι του εραστή του αυτοκράτορα, Bianca Lancia, με τον οποίο έζησε για μερικά χρόνια και από τον οποίο είχαν τους δύο γιους τους Enzo και Manfredi. Από αυτή την περίοδο, εξακολουθεί να υπάρχει ένα όμορφο δωμάτιο, που ονομάζεται Αίθουσα θησαυρών, που χαρακτηρίζεται από θόλους ogival και έναν ισχυρό κεντρικό πυλώνα.
