Castelul Alviano a fost construit în Evul Mediu ca o fortăreață militară, mai exact în jurul anului 995, de către contele Offredo, care venise din Germania. În 1490, curajosul condottiere și arhitect Bartolomeo d'Alviano a început reconstrucția, făcând întreaga structură funcțională pentru noile cerințe de locuire din acele secole. De fapt, este un exemplu tipic de castel renascentist care păstrează intacte caracteristicile unui bastion defensiv și ale unui palat rezidențial. Castelul are o poziție strategică proprie, deoarece domină valea Tibrului, și tocmai acest lucru l-a făcut să fie spectatorul multor bătălii locale, în special între gulfi și ghibelini. De la mijlocul secolului al XVI-lea până la sfârșitul secolului al XIX-lea, castelul a fost cumpărat la licitație de familia Pamphili și a devenit reședința acesteia. În prezent, acesta găzduiește Primăria la etajul superior și un important centru de conferințe la parter. La subsol se află în prezent Muzeul Civilizației Țărănești "Pământul și unealta", care expune cele mai importante unelte și ustensile folosite de familiile alvinene între sfârșitul secolului al XIX-lea și perioada postbelică. Tot la subsol se află și Muzeul Multimedia al lui Bartolomeo d'Alviano și al Căpitanilor de Noroc din Umbria: a fost inaugurat la 1 iulie 2000.