John Cosser erwarb 1679 für 50 Pfund (heute ca. Pfund) das Grundstück, auf dem seit 1657 ein kleines Wohnhaus stand und wo sich heute das Union Oyster House befindet. Nach mehreren Eigentümerwechseln erwarb 1741 Phillips Chamberlain das Gebäude und Grundstück für 1800 Pfund (heute ca. Pfund) und verkaufte es ein Jahr später zum selben Preis an Thomas Stoddard weiter. Das Wohnhaus wurde dafür bekannt, dass Isaiah Thomas, Gründer der American Antiquarian Society, von dort aus ab 1771 den "Massachusetts Spy" veröffentlichte, bis er nach den Gefechten von Lexington und Concord im April 1775 aus der Stadt nach Worcester fliehen musste.