Na volta, enquanto ela permanecia nas Bahamas, ele partiu para outra expedição pelo Yellowstone e a área de Salt Lake City. Em 1881 estava de volta ao Yellowstone, e em 1882 sua mansão incendiou enquanto estava tentando vendê-la, perdendo-se pinturas e esboços. Vários jornais noticiaram o fogo, mas falando do artista, o "Utica Morning Herald" já se referia a ele no pretérito, como se sua carreira estivesse encerrada. De fato, para ele ficava difícil encontrar lugares para expor. Foi recusado em Londres em 1884 e em Washington D.C. em 1887. Tentou doar uma obra para um evento beneficente, mas ela foi rejeitada, o mesmo ocorrendo com "Os últimos búfalos", que tentou colocar na Exposição Universal de Paris, e com "Colombo pisa em terra", retirado da Feira Mundial de Chicago em 1893. Sua última viagem pelo oeste ocorreu em 1889, visitando as Montanhas Rochosas canadenses, Washington, Oregon e o Alaska.