Das Government House diente in seinen verschiedenen Bauformen seit 1829 als Hauptresidenz des Vizekönigs von Westaustralien. Der erste Gouverneurssitz befand sich ursprünglich in einem Zeltlager auf Garden Insel, bevor ein provisorisches Holzgebäude im heutigen Stirling Gardens errichtet wurde. Das erste permanente Government House entstand in den heutigen Gärten, näher an der bestehenden Lodge, wurde aber 1863 durch das heutige Gebäude ersetzt, das seither als Residenz aller Gouverneure von Westaustralien dient.

Der Baustil wird als „Fonthill-Gotik“ bezeichnet. Die Ziegel stammen aus Tongruben in der Nähe der heutigen Queen’s Gardens in East Perth . Der Grundstein für das heutige Government House wurde am 17. März 1859 gelegt und ist noch heute an der Außenwand des Gouverneursbüros an der Vorhoffassade zu sehen.

Government House, Ballroom und Gardens wurden Anfang der 1990er Jahre in das Westaustralien Register of Heritage Places aufgenommen und vom National Trust klassifiziert.

Das Government House dient sowohl als Residenz des Gouverneurs als auch als Arbeitseinrichtung, die als Gouverneurseinrichtung bekannt ist und über eine kleine Belegschaft verfügt, die den Gouverneur und seine Aufgaben unterstützt.