Pirmie Vēsturiskie dati par Château de Villerouge-Termenès vietu datēti ar 12.gadsimtu. Tajā laikā un līdz Francijas revolūcijai narbonnes spēcīgie arhibīskapi bija pils un Villerouge - Termenès ciema kungi. Pat ja tā, pils bija daudz iekārojama un vairākas reizes okupēta. Patiešām, 1107. gadā pāvestam Paskālam II bija jāapstiprina arhibīskaps Ričards kā likumīgais Villerouge īpašnieks, kuru kopš 1070.gada okupēja Pjērs de Peirepertuse. Pēdējais deva pili kā pūru savai meitai, kad viņa apprecējās ar Pjēru Olivjē de Termesu. Tikai 1110. gadā Termes ģimene beidzot piekrita atdot īpašumu Narbonnes arhibīskapam. Bet cīņa starp Termes kungiem un Narbonnes arhibīskapiem neapstājās. 1227. gadā Pāvests Honorijs III mudināja savu legātu apstiprināt arhibīskapa tiesības pret krusta kara priekšnieku, Saimons de Montforts, un viņa vasalis, Alēns de Rucijs. Saimons de Montforts bija piešķīris Termes titulu un mantu de Roucy, kurš draudēja pārņemt arī Villerouge. Ciemats ir cieši saistīts ar Kataras baznīcas norietu: 1321.gadā Villerouge-Termenès dzīvs tika sadedzināts Guilhem Bélibaste, Pēdējais zināmais oksitāņu Cathar perfectus. Guilhem Bélibaste tika uzsākta Katarismā un kļuva par perfectus, slēpjoties Katalonijā. Tā kā reliģiju varēja pārraidīt tikai perfectii, ar roku uzlikšanas ceremoniju viņa nāve nozīmēja Katara reliģijas beigas.