In einem Erholungsaufenthalt bei Lake George (New York), den er im Juni 1863 begonnen hatte, lernte er einige Landschaftsmaler der Hudson River School kennen. Mit Asher Brown Durand, einem der „Väter“ dieser Gruppe, entwickelte er in den Folgejahren ein besonders enges künstlerisches Verhältnis. Auch Richards, mit dem er 1855 gemeinsam nach Europa gereist war und mit dem er seit der Rückkehr nach Philadelphia ein Atelier geteilt hatte, gehörte in dieser Zeit zu seinem engsten Umfeld. Bis 1864 verbrachte er die Sommer in Elizabethtown (New York), dem in den Adirondack Mountains gelegenen Hauptort des Essex County. Im Oktober 1864 zog er nach New York City, wo er, abgesehen von einigen Reisen nach Philadelphia sowie Sommeraufenthalten in den Adirondacks und in den Gegenden des Hudson Valley, bis 1878 blieb. Diese Zeit markiert den Zenit seines künstlerischen Schaffens. Mit Ausnahme der Jahre 1867 und 1874 nahm er bis 1877 regelmäßig an den Ausstellungen der National Academy of Design teil. In der Centennial Exhibition, der Weltausstellung von 1876 in Philadelphia, wurden seine Gemälde "Autumn in the Hudson Highlands" und "Monk Playing a Violoncello" ausgestellt.