Su hijo César Olivares Ventura falleció en un accidente aéreo en abril de 1968 siendo gobernador de Aguascalientes y representando a su padre en el viaje inaugural de la ruta aérea México-Aguascalientes.