Fue hermano por parte de padre de Francisco Pizarro, Gonzalo Pizarro y Juan Pizarro, todos ellos bastardos, como se denominaban entonces a los hijos nacidos fuera del matrimonio.