Шато де Соммьер, вероятно, было построено в 10-м или 11-м веке благородной семьей Бермондов. Замок состоял из двух башен: Бермонда и Монлора, построенных еще в 13 веке. Сохранилась только башня Бермонде, башня Монлор была частично разрушена во время осады города в 1573 году и позже снесена.