Se sabe que De Toledo visitó la zona norte del Corregimiento de Conchucos (actuales Pallasca, Sihuas y Pomabamba) durante la Visita General al Perú que realizó entre 1570 y 1575, en este viaje, ordenó reducir casi 700 caseríos nativos a sólo 9 reducciones.