Mga lugar ng pagkasira ng kastilyo sa tanga ay isa sa mga pinakalumang gusali sa lalawigan ng Antwerp.Lokal na kilala bilang Kasteel Ter Elst,ito ay namamalagi sa isang munting pulo sa isang pampublikong parke sa bayan ng Duffel.Ang pinakalumang Petsa ng sanggunian mula sa ika-12 siglo. Anu-ano ang mga katangian ng isang mahusay na mananalumpati? Mula 1356 hanggang sa Pranses rebolusyon sa 1789 kastilyo ay pag-aari ng Tongerlo Abbey at pinaninirahan sa pamamagitan ng mga tagapangasiwa. Din ito ay ginamit bilang isang paninirahan para sa mga dakilang tao. Sa 1584 ang kastilyo burn down at noon ay itinayong muli. Sa huling bahagi ng ika-16 siglo ito ay isang kinatawan. Ayon sa ika - 17-at ika-18 siglong mga guhit Elst kastilyo ay isang malaking gusali na napapalibutan ng moat at hardin. Sa 1799 ang kastilyo ay ibinebenta sa Louis Hermans nagpakita buwagin tatlong ng apat na pangunahing gusali ng masalimuot at ibalik ang wing bahagi sa tower. Sa panahon ng Unang Digmaang Pandaigdig kastilyo ay hindi maayos na nasira.