Der Abriss und verkleinerte Neubau des Hochschulgebäudes im Jahre 2004 half außerdem, den nördlichen Parkteil wieder mit dem zentralen Teil gartenarchitektonisch zu verbinden.
Um dem drohenden Verfall nach der Wohnungsräumung und eventuellen Abriss zu entgehen, wurden seit 1977 Sicherungsmaßnahmen durchgeführt sowie Bauforschung betrieben.
Nicht zuletzt wegen der Notzeiten der beiden Weltkriege dauerte die Diskussion um die Erweiterung und den teilweisen Abriss der alten Kirche fünf Jahrzehnte an.
Umstritten waren 2017 noch die Ausstattung der ohnehin sanierungsbedürftigen Flutschutzmauer am Hafen mit Glaselementen und der eigentlich schon beschlossene Abriss des alten Hafenmeisterhauses.