הפאלאצו די ויקארי הוא תוצאה של תהליך של צמיחה מאוחרת סביב גרעין מקורי המורכב מהמגדל. במהלך שנת 300 היה על המגדל להתמזג לגרעין עבור מקום מגוריו של הקפטן; ב-1366 הוא המשיך לעשות עבודות רבות לטירה, כולל התערבויות "לחדרו של הקסארו", "שיקום" של ה - "saettamento" ו - "Sulla קרע את השומר של הפנים chastagno face ארבע ציפורים שחורות שבוטלו ו-chaduti". המאה השש-עשרה הייתה רגע מפתח בתצורת הבניין; בעקבות רעידת האדמה של 1542 נגרם, למעשה, נזק משמעותי לבניין, שלאחר מכן היה שיקום שנתן לבניין התיישבות סופית, ליד הנוכחי (לפחות על מה שנוגע למגורים של הכמרים והנציגים). השחזור גם הוביל למגורים סופיים של בתי הכלא, שוכנו בחדרים פנו בקומת הקרקע (היום אכסדרה). שינויים ותיקונים עדיין השפיעו על הארמון במהלך שנת 600, בעקבות אירוע סייסמי חדש התרחש ב-8 בספטמבר 1611. עבודות התיקון הסתיימו באוגוסט 1612, ובסוף ההתערבויות שינה הארמון באופן חלקי את הפיזיונומיה שלו. Barbacani לחזק את הקירות, גג משופע על החזית, טיח של החזית, סידור מסתלסל של הקיר בצד הגדול לכיוון פורטה S. Agata, הם העבודות הברורות ביותר מבחוץ. עם כמה שינויים אחרים הארמון לקח את המאפיינים המורפולוגיים שנותרו ללא שינוי עד אמצע המאה התשע עשרה, כאשר הבניין הושפע שוב על ידי שיקום ושיפוץ. הנזק שנגרם כתוצאה מרעידת האדמה ב-1960, יחד עם חוסר היציבות של אדמת היסוד, היו נושא לפרויקט ארוך ותובעני של איחוד ושיקום (מאז 1980), שהסתיים ב-1999 עם שחזור האזורים המונומנטליים והשיקום של האגף הצפוני, שבו שוכן המוזיאון dei Ferri Taglienti.
