Ongeveer twee kilometer ten westen van Vorden ligt aan de weg naar Wichmond het kasteel Hackfort, dat in zijn huidige vorm gedeeltelijk uit de 16e en gedeeltelijk uit de 18e eeuw dateert. De kern van het tegenwoordige huis wordt gevormd door een min of meer vierkant hoofdgebouw met front naar het oosten. Dit hoofdgebouw is grotendeels het resultaat van een ingrijpende verbouwing in de 18e eeuw. Daarbij werden de in aanleg 16e-eeuwse torens op de noordoost- en zuidwesthoek ongemoeid gelaten. Het opvallende contrast tussen de bouwstijlen van de torens en het hoofdgebouw verleent het kasteel een enigszins tweeslachtig uiterlijk. De zuidwestelijke toren is door een schuin verbindingsstuk met de kern van het kasteel verbonden. De achterzijde van het huis is witgepleisterd: de voorgevel met zijn eenvoudige ingangspartij maakt een sobere, symmetrische indruk. Aan weerskanten van de trap staan schildhoudende leeuwen met de wapens van Van Westerholt en Von Oer. Vroeger flankeerden deze leeuwen de toegang tot de ophaalbrug over de gracht voor het poortgebouw: Die gracht is nu gedempt en het poortgebouw verdwenen. Het oudste kasteel Hackfort bestond vermoedelijk uit een bakstenen donjon op een vierkant grondplan. Van deze 14e-eeuwse toren is de benedenverdieping nog bewaard gebleven in de zuidelijke vleugel van het huis, als een uitspringend bouwdeel met een afzonderlijke bedaking. Na de 14e eeuw is de donjon waarschijnlijk geleidelijk uitgebreid tot een goed bewoonbaar en verdedigbaar kasteel. In 1586 is Hackfort tijdens de Tachtigjarige Oorlog grotendeels verwoest. Hoe het er in de jaren voorafgaande aan die verwoesting heeft uitgezien, is niet meer na te gaan. Bij de herbouw is 1598 heeft men waarschijnlijk gedeeltelijk gebruikt van de oude grondslagen en de nog overgebleven muurresten. In 1788 is Hackfort ten slotte ingrijpend verbouwd en kreeg het huidige vorm. Links voor het huis ligt nog steeds de oude waterradmolen, die uit het begin van de 18e eeuw dateert. De oudste vermelding van Hackfort stamt uit de 14e eeuw. Tot 1981 – toen Natuurmonumenten het landgoed erfde – was het onafgebroken familiebezit. Het kasteel en de erbij behorende landerijen en gebouwen werden aan natuurmonumenten nagelaten door Wijlen Jonkvrouwe C.E.B. Baronesse van Westerholt van Hackfort, haar twee zusters en haar broer Baron Arend van Westerholt.
