Afin de démontrer sa proximité avec les citoyens, le duc Guillaume décida de résider au centre-ville, établissant ainsi un lien historique avec ses ancêtres.

En raison du manque de place, le château a été construit contre les maisons voisines et sa taille est restée relativement modeste. En 1835, le duc Wilhelm von Nassau chargea le directeur général de l'architecture grand-ducale Georg Moller de concevoir le château de la ville, mais il ne put y emménager lui-même - il mourut en 1839. A la place, son fils Adolf devint en 1841 le premier et unique propriétaire permanent du château. Après le départ en exil du duc Adolf en 1866, le royaume de Prusse utilisa le château pour les séjours de l'empereur Guillaume Ier et de Guillaume II. En 1925, le château fut le siège de l'armée britannique du Rhin et en 1930, l'administration nationale prussienne des châteaux y installa un musée.

Après de graves destructions pendant la Seconde Guerre mondiale, le château a été restauré et est devenu le siège du Parlement du Land de Hesse.