Pagax Castle is gelegen in de voormalige provincie Rouergue en de grens van Quercy in de buurt. Het ziet uit over de vallei van de Lot op de hoogten van het dorp Flagnac in Aveyron. De architectuur is typisch voor de forten van de 12e en 13e eeuw, met een hoofdgebouw van vierkant plan hoog op drie verdiepingen boven een begane grond blind, geflankeerd door vier torens verbonden door kantelen. De vroegste definitieve vermelding van het kasteel dateert uit 1259 Pagax. Het werd opgericht om de Koninklijke autoriteit in de regio veilig te stellen. Hij behoorde ook tot de adellijke en machtige familie Montarnal van toen en ging vervolgens door erfenissen in de familie van Moret. Dit werd zeer belangrijk in de Rouergue en nabij Gevaudan en stond bekend om zijn enorme bezittingen, zijn diensten en militaire posten, onderscheiden door zijn allianties die hem verwantschap gaven met de eerste huizen van het Koninkrijk.