Fue hijo ilegítimo del capitán Gonzalo Pizarro El Largo, quien lo engendró con María Alonso, una molinera de La Zarza, a unas cinco leguas de Trujillo.