Su lugar de nacimiento es incierto aunque en uno de los juicios que le siguió la Inquisición en Perú declaró haber nacido en Alcalá de Henares hacia 1532, otros biógrafos sostienen que fue Pontevedra, Galicia, de donde era su familia paterna.