Dvorac Tramontano nalazi se na brežuljku zvanom Lapillo Hill, iznad povijesnog centra grada Matera.
U stilu Aragonskog dvorca, s muškarcem središnji i dva tornja su bočni okrugli, valoviti i opremljeni rolete, napravljen je za izgradnju, počevši od 1501 od grofa Gian Carlo Sunset, feudal di Matera. Novi kralj Napulja, Ferdinand II, obećao je materancima da više ne daju Grad bilo kojem feudalnom gospodaru, nakon što je nekoliko puta oslobodio feudalnog jaram, plaćajući nekoliko otkupnine kako bi ostali slobodni grad za autonomnu policu, to jest izravno ovisnu o kraljevskoj kruni. Umjesto toga, grof Tramontano, koji se hvalio tvrdnjama kraljevskog nasljednika, zatražio je i primio županiju Mater 1496.godine.
Grof je ubrzo saznao za materane, jer je s vremenom bio ispunjen dugovima koji su se nosili s kojima je oporezivao stanovništvo s teškim porezima. Tako je započela izgradnja dvorca koji je bio smješten na brežuljku koji dominira gradom izvan gradskih zidina, s ciljem "feudalne" kontrole okolnih zemalja više od obrane samog grada. Čini se da je tada izgradnja trebala uključivati i druge obrambene kule, od kojih je jedna pronađena ispod središnjeg Vittorio Veneto trga u Materi, zajedno s drugim hipogejskim okruženjima. Za izgradnju dvorca potrošeno je čak 25.000 dukata, a to je dodatno opterećivalo stanovništvo.
Dakle, neki građani umorni od stalnih premlaćivanja okupili su se skrivajući se iza gromada, koji je od tada nazvan u pizzon ' du mal consigghj, to jest mal consigghj kamen, i organizirali ubojstvo. Dana 29. prosinca 1514., grof koji je upravo izašao iz Katedrale ubijen je na bočnoj ulici, koji je kasnije rječito nazvan otkupninom. Dvorac je ostao nedovršen.
