Schamele resten na havenuitbreidingen (zie Amerikadok) van noordelijke citadel van 1864; zwaartepunt van de 15 kilometer lange vestingwerken, de "Grote Stadsomwalling" van Brialmont van 1862.

In 1929 verwierf de stad ook de rest van het inmiddels militair waardeloos geworden Noordkasteel. Vanaf 1934 werd het een uitgestrekt ontspanningsoord, met zwem- en roeigelegenheid in de hoofdgracht. In 1938 werd in het domein de windmolen uit het gehucht Hoogbuul bij Olen (op het tracé van het ontworpen Albertkanaal) heropgericht; houten standaardmolen, vermoedelijk van 1727. In 1975 werd hij verplaatst bovenop het kruitmagazijn Noordkasteel I, op de plaats van de vroegere koepel met twee 24 centimeter scheepskanonnen, naar aanleiding van de geplande doch in 1973 als project geschrapte Boerinnesluis op die plaats. Gedemonteerd voor restauratie; wordt eerlang teruggeplaatst in Olen.

Vanaf 1970 werd het tot recreatiegebied omgevormde Noordkasteel gesloten voor het publiek in verband met de werken ter verbinding van Amerikadok en Vijfde Havendok, waartoe het domein grotendeels moest worden opgeofferd.