A Tramontano kastély egy kis dombon található, lapillo hill néven, kilátással Matera város történelmi központjára.
Aragóniai stílusban a kastélyt, amelynek központi hím és két kerek oldaltornya van, csipkézett és résekkel felszerelt, 1501-től Gian Carlo Tramontano Gróf, Matera feudális ura építette. Az új nápolyi király, II. Ferdinánd megígérte a matériaiaknak, hogy nem adják át a várost semmilyen feudális államnak, miután már többször megszabadult a feudális igától, amely több zsarnokot fizet, hogy szabad város maradjon egy autonóm ezrednek, vagyis közvetlenül függ a királyi koronától. Ehelyett Tramontano gróf, aki a királyi Kincstárral szemben követeléseket támasztott, 1496-ban Matera megyét kérte és szerezte meg.
A gróf hamarosan irigyelte az anyagiakat, mert az idő múlásával adósságokkal töltötte be magát, hogy megbirkózzon azzal, amellyel a lakosságot súlyos adókkal adóztatta. Így kezdődött az építőiparban a vár, amely található egy dombon, kilátással a városra, a város falain kívül, azzal a céllal, "feudális" ellenőrzése a környező föld helyett védelme a város maga. Úgy tűnik, hogy akkor az építkezésnek más védelmi tornyokat kellett volna tartalmaznia, amelyek közül az egyiket a Matera központi Piazza Vittorio Veneto alatt találták meg más Hypogean környezetekkel együtt. A vár építésére 25 000 dukátot költöttek, ami még nagyobb terhet jelentett a lakosság számára.
Így egyes polgárok, akik belefáradtak a folyamatos visszaélésbe, összegyűltek egy szikla mögött, amelyet azóta U pizzon' du mal consigghj-nak, azaz mal consigghj kőjének hívtak, és megszervezték a gyilkosságot. 1514.December 29-én a grófot, közvetlenül a katedrálisból, meggyilkolták ugyanazon mellékutcában, amelyet később ékesszólóan Via del Riscatto-nak hívtak. A vár ezért befejezetlen maradt.
