Frédéric Arthur Stanley, Baron de Preston, 16e Comte de Derby (1841-1908) a été Gouverneur Général du Canada de 1888 à 1893. Il est issu de l'aristocratie et de la classe politique anglaises, et son père a été trois fois Premier Ministre d'Angleterre.

Lord Stanley a lui-même eu une prestigieuse carrière politique au Parlement Britannique et à la Chambre des Lords; il s'est acquitté de ses responsabilités de Gouverneur Général du Canada avec soin et réserve et s'est distingué par son esprit de conciliation.

Au Canada, il est surtout connu pour la Coupe Stanley, qu'il a offerte en 1893 pour honorer les champions de hockey amateur.

En 1888, avec l'aide d'un charpentier nommé Reid, Lord Stanley s'est fait construire une maison à neuf milles de la Rivière Cascapédia où il pêchait le saumon. Le terrain appartenait au début à la famille Duthie; il a ensuite été vendu à John Robertson, puis à Andrew Fairservice en 1888, et la même année à Lord Stanley.

Bien que la maison soit avant tout associée à Frédéric Arthur Stanley, deux autres Gouverneurs Généraux y ont séjourné. John Campbell Gordon, premier marquis d'Aberdeen and Temair, Gouverneur Général de 1893 à 1898, l'a acheté en 1893 et y a passé quatre étés. Dans leurs mémoires, We Twa, publiés en 1925, John Campbell Gordon et son épouse, Lady Aberdeen décrivent en détail leurs étés à New-Richmond.

Le Comte de Minto, Gouverneur Général du Canada de 1898 à 1904, y a passé un été. D'autres propriétaires s'y sont succédé, dont John Reyburn, sénateur et maire de Philadelphie, puis Estelle et Roméo Lanctôt de Montréal, dont la fille, Olivia Billings Terrel de New-York, a hérité de la résidence en 1957 et en a fait don au Conseil des Arts du Canada en 1962.

Dès 1962, le Conseil des Arts du Canada y a organisé des séminaires et des rencontres pour les artistes et universitaires, mais des restrictions budgétaires ont mis fin à ces activités en 1984. Même s'il ne s'en servait plus, le Conseil avait confié à un gardien l'entretien régulier de la propriété jusqu'en 1996. C'est alors qu'un citoyen de New-Richmond, J.Edgar LeBlanc, s'en est porté acquéreur pour l'exploiter en tant que: L'Auberge La Maison Stanley.