Na szczycie Monte Sant ' Angelo znajduje się inne bardzo interesujące miejsce: Zamek, Twierdza pochodząca z pierwszej połowy IX wieku, zbudowana na rozkaz Orso I, biskupa Benevento. Szczególnie imponująca jest jedna z jego najstarszych części-Wieża gigantów o wysokości około 18 metrów i grubości 3 metrów. Zamek był wyposażony w pomieszczenia mieszkalne, ale brakowało pomieszczeń przeznaczonych na więzienie. Z czasem struktura Uległa kilku zmianom, początkowo bizantyjski Castrum, w IX wieku twierdza następnie dołączyła do tzw. wieży gigantów. Pod Fryderyka II został rozbudowany i ulepszony, a wykonany Dom kochanka cesarza, Bianca Lancia, z którym współistniały przez kilka lat i od którego współżycie miał dwóch synów Enzo i Manfredi. W tej epoce do dziś zachowała się elegancka sala zwana salą skarbów, charakteryzująca się sklepieniami ogniowymi i solidną centralną kolumną.
