El 25 de agosto de 1534 fue recibido en el Cuzco como teniente de gobernador general, y finalmente, decidió retirarse del Perú a principios de 1536, para buscar nuevas aventuras cuando Diego de Almagro escogió como su capitán a Rodrigo Orgóñez en su lugar para la infructuosa expedición que emprendió al misterioso reino de Chile.