Bol koncipovaný ako bohatý palácový komplex s rozsiahlymi, takmer nekonečnými záhradami, herným parkom a lesom.
Interiér paláca vyžaruje priam nádhernú kombináciu. Je navrhnutý v neskorých rokokových a raných neoklasických štýloch. Hlavná budova, výnimočne pôvabný pavilón v centre komplexu s dekoratívnymi a komplikovanými miestnosťami, bola zachovaná. Jeho vrcholom je Weisse Saal pod klenbou strechy. Bádensko-Württemberská miestna samospráva financovala rekonštrukciu budovy vrátane fresiek a stropných nástenných malieb v rokoch 1972 až 1983.
Solitude Palace bol tiež domov pre prestížnu školu Hohe Karlsschule pre synov popredných rodín z Württemberska. Jeho najslávnejším žiakom bol Friedrich Schiller. Od roku 1990 sa nachádza akadémia Schloss Solitude (Akadémia paláca Solitude), ktorá podporuje mladých umelcov, v jednej z budov lokality.