Het kasteel Middelborch, ook gekend als het "Spaanse huis" of de "Geuzenhoek", stond oorspronkelijk aan de rand van de Josaphatvallei, waar zich nu de boogschietbaan bevindt.
Het kasteel wordt in de 16de eeuw opgetrokken in opdracht van Pierre van Waelhem, voorzitter van de Rekenkamer.
Na het huwelijk van zijn dochter Claudine met ridder Laurens van Middelborch, kanselier van Gelderland, blijft het kasteel in handen van de famillie Middelborch tot het begin van de 17de eeuw.
Het oorspronkelijke lusthuis wordt rond 1600 omgebouwd tot een landbouwbedrijf. Het bestaat uit een hoofdgebouw met een veelhoekig torentje en diverse bijgebouwen.
In 1835 erft graaf de Robiano het eigendom.
In de loop van de 19de eeuw wordt het pand gebruikt als parfumfabriek, als clandestiene stokerij door een zekere van Fransen, en tot slot als fabriek voor geëmailleerde platen en letters onder leiding van Edmond Busath.
Alle bijgebouwen worden vanaf 1890 gesloopt om plaats te maken voor de fabriek van Edmond Busath. Het hoofdgebouw wordt verbouwd (maar behoudt zijn toren).
In 1907 wordt het pand onteigend voor de heraanleg van de Josaphatvallei. In 1910 verdwijnt ook het hoofdgebouw onder de sloophamer.
