Sus padres fueron Domingo Cáceres y Oré, hacendado de Ayacucho, y Justa Dorregaray Cueva, hija del coronel español Demetrio Dorregaray.