Díaz se hizo cargo de ellos solo hasta que se casó con Carmen Romero Rubio, quien se encargó de su cuidado y educación.