Dieses flache, lange Feldsteingebäude (1705), das gegenüber dem Rathaus liegt, ist ein bemerkenswertes Beispiel für die Québecer Architektur des frühen 18. Jhs. Es wurde während der französischen Herrschaft für Claude de Ramezay, den elften Gouverneur von Montréal, erbaut. Trotz mehrerer Renovierungen ist seine äußere Erscheinung relativ unverändert geblieben. Nachdem es der britische Staat erworben hatte, diente es bis 1849 als offizielle Gouverneursresidenz. Es ist bereits seit 1895 ein Museum, in dem heute an die wirtschaftliche, politische und soziale Geschichte Montréals erinnert wird. Besonders sehenswert ist die kunstvoll geschnitzte Mahogoni-Täfelung aus Nantes (1725).