Château de Sommières byl pravděpodobně postaven v 10.nebo 11. století šlechtickou rodinou Bermond. Hrad se skládal ze dvou věží: Bermonde a Montlaur, pocházející ze 13.století. Pouze věž Bermonde je neporušená, věž Montlaur byla částečně zničena během obléhání města v roce 1573 a později zbořena.