Замак герцагаў латарынгскіх (замак герцагаў латарынгскіх або замак Сярк), магчыма, быў Гала-Рымскім фортам, але першы гістарычны дакумент аб замку датуецца 1067 годам. Аднак ад гэтага першага замка, верагодна, нічога не засталося. Цяперашні замак быў пабудаваны арцыбіскупам Трырскім у 15 стагоддзі. Французская армія заваявала яго ў 17 стагоддзі, і з 1661 года ён стаў часткай праўлення Францыі. Замак страціў сваё абарончае прызначэнне і быў разбураны ў 1673 годзе. Пазней ўмацавання былі зноў ўмацаваныя і некалькі разоў прыходзілі ў заняпад. У 1866 годзе замак быў набыты горадам Серк-ле-Бэн.