Los esposos tuvieron un hijo, Diego, que siguió la vida religiosa, y adoptaron una niña de siete años, natural de Bailén, Juana de la Peña, quien a la muerte de Catalina de Orozco (1655) se convirtió en compañera sentimental del pintor y madre de otros cinco hijos.