Ανά Elst Κάστρο ερείπια στο Duffel είναι ένα από τα παλαιότερα κτίρια στην επαρχία της Αμβέρσας.Τοπικά γνωστό ως Kasteel Ter Elst, βρίσκεται σε ένα νησάκι σε ένα δημόσιο πάρκο στο χωριό Duffel.Η παλαιότερη αναφορά χρονολογείται από τον 12ο αιώνα. Εκείνη την εποχή το κάστρο ανήκε στους αδελφούς Hildincshusen. Από το 1356 μέχρι τη Γαλλική Επανάσταση το 1789 το κάστρο ανήκε στη Μονή Tongerlo και κατοικήθηκε από τον διαχειριστή. Χρησιμοποιήθηκε επίσης ως κατοικία για την αριστοκρατία. Το 1584 το κάστρο κάηκε και στη συνέχεια ξαναχτίστηκε. Στα τέλη του 16ου αιώνα ήταν πρεσβύτερος. Σύμφωνα με τα σχέδια του 17ου και 18ου αιώνα Elst κάστρο ήταν ένα μεγάλο κτίριο που περιβάλλεται από τάφρο και κήπους. Το 1799 το κάστρο πωλήθηκε στον Louis Hermans και κατεδάφισε τρία από τα τέσσερα κύρια κτίρια του συγκροτήματος και αποκατέστησε το τμήμα της πτέρυγας με τους πύργους. Κατά τη διάρκεια του Πρώτου Παγκοσμίου Πολέμου Το κάστρο υπέστη σοβαρές ζημιές.