No obstante, la llegada de vecinos enemistados con Valdivia desde Chile provoca un juicio de residencia a Pedro de Valdivia, quien ya había tomado el camino del sur, y tiene que volver desde Arequipa a enfrentarse a los cargos en su contra, entre ellos la unión ilégitima con Inés Suárez.