La Rocca Albornoz est une imposante forteresse qui se dresse sur le Colle Sant'Elia, dans une position stratégique qui domine toute la vallée de Spoleto. Construite à partir de 1359, elle fait partie d'une série de forteresses commandées par le pape Innocent VI pour rétablir l'autorité du pape, qui vivait alors en Avignon, dans les territoires d'Italie centrale qui faisaient partie des États pontificaux. Pour réaliser son projet, le pape envoya en Italie le puissant cardinal espagnol Egidio Albornoz, dont le château de Spoleto porte le nom, qui confia à Matteo di Giovannello da Gubbio, dit "il Gattapone", la direction des travaux, qui se poursuivirent jusque vers 1370. La forteresse de Spoleto était donc le pivot du système défensif contrôlant la Flaminia et d'où partaient les actions militaires visant à reconquérir les territoires de l'Ombrie, des Marches et de la Romagne. Au fil des ans, elle est également devenue la résidence des recteurs du duché, des gouverneurs de la ville et des légats du pape. La forteresse a été enrichie de décorations et de fresques, dont beaucoup ont disparu à partir de 1816, lorsque la structure a été transformée en prison, fonction qu'elle a conservée jusqu'en 1982.