e Palazzo dei Vicari est le résultat d'un processus de croissance successive autour d'un noyau originel constitué par la tour. Au cours du XIVe siècle, un noyau pour la résidence du capitaine a dû être ajouté à la tour ; en 1366, de nombreux travaux ont été effectués sur le château, notamment "alla camera del cassero", "restauro" del "saettamento" et "sula tore della guardia del chastagno si facino quattro merli che son disfatti e chaduti". Le XVIe siècle est un moment clé dans la configuration du palais ; à la suite du tremblement de terre de 1542, l'édifice subit d'importants dégâts, qui seront suivis de travaux de restauration qui donneront au palais une disposition définitive, proche de l'actuelle (du moins en ce qui concerne la résidence du vicaire et les salles de réception). La reconstruction a également conduit à la disposition définitive des prisons, logées dans les salles voûtées du rez-de-chaussée (aujourd'hui la loggia). Des modifications et des réparations ont été effectuées sur le Palazzo au cours des années 1600, suite à un nouveau séisme survenu le 8 septembre 1611. Les réparations furent achevées en août 1612, et à la fin des travaux, le palais avait partiellement changé d'aspect. Barbacani pour renforcer la maçonnerie, un toit en pente sur la façade, le plâtrage de la façade, la disposition et l'enroulement du grand mur latéral vers Porta S. Agata, sont les travaux les plus évidents à l'extérieur. Avec quelques autres changements, le palais a pris les caractéristiques morphologiques qui sont restées inchangées jusqu'au milieu du XIXe siècle, lorsque le bâtiment a été à nouveau soumis à des restaurations et des remaniements. Les dommages causés par le tremblement de terre de 1960, ainsi que la précarité du sol de fondation, ont entraîné d'importants travaux de consolidation et de restauration (à partir de 1980) qui se sont terminés en 1999 par la récupération des salles monumentales et la reconstruction de l'aile nord, qui abrite le Musée des outils de coupe.