Der Gebäudekomplex entstand vermutlich nach dem Stadtbrand 1369. Der älteste Teil ist das südlich gelegene Hauptgebäude mit dem Kurfürstensaal. Der mit gotischen Wandmalereien verzierte Saal war Schauplatz feierlicher Staatsakte wie der Konsekration des Bischofs von Chur im Jahr 1417 und der Ablegung des Treueids auf den Kaiser durch Dietrich von Erbach, Erzbischof und Kurfürst von Mainz und Kanzler des Heiligen Römischen Reiches, 1435. 1948 wurde im Amtshof die FDP gegründet. Dem Hauptgebäude angebaut ist ein Kapellenerker und ein gotischer Treppenturm mit barocker Haube als Zugang zum Kurfürstensaal.