Het kasteel Middelborch, ook gekend als het "Spaanse huis" of de "Geuzenhoek", stond oorspronkelijk aan de rand van de Josaphatvallei, waar zich nu de boogschietbaan bevindt.
Het kasteel wordt in de 16de eeuw opgetrokken in opdracht van Pierre van Waelhem, voorzitter van de Rekenkamer.
Na het huwelijk van zijn dochter Claudine met ridder Laurens van Middelborch, kanselier van Gelderland, blijft het kasteel in handen van de famillie Middelborch tot het begin van de 17de eeuw.
Het oorspronkelijke lusthuis wordt rond 1600 omgebouwd tot een landbouwbedrijf. Het bestaat uit een hoofdgebouw met een veelhoekig torentje en diverse bijgebouwen.