Chateau de Sommeres ka mundësi të jetë ndërtuar në shekullin e 10-të ose të 11-të nga familja fisnike Bermonde. Kështjella përbëhej nga dy kulla: Bermonde dhe Montaur, që datojnë që nga shekulli i 13-të. Vetëm kulla Bermonde është e paprekur, kulla Montlaur u shkatërrua pjesërisht gjatë rrethimit të qytetit në 1573 dhe më pas u shkatërrua.