Das ursprüngliche Residenzschloss stand unterhalb der Burg Lobenstein. Es bestand aus zwei rechtwinklig zueinander liegenden Trakten mit zwei Treppentürmen an der Seite. Später wurde das Schloss um Nebengebäude und eine Schlosskapelle erweitert. Nach dem Stadtbrand wurden die Reste des Schlosses u.a. als Mälzhaus verwendet. Das neue Residenzschloss wurde nach dem Stadtbrand im NW des Ortes errichtet. Es ist ein schlichter Bau aus zwei quadratischen Eckbauten mit rechteckigem Verbindungsbau. Gegenüber dem Schloss befindet sich das fürstliche Wachgebäude, ein kleiner klasszistischer Bau.
