Era nieto, por tanto, del que fuera alcalde de su ciudad natal Rafael Lataillade Aldecoa, y por parte de su padre descendía del general Castaños, héroe de la Guerra de la Independencia Española y I duque de Bailén, así como de Francisco de Carondelet, V barón de Carondelet y presidente de la Real Audiencia de Quito en el siglo XVIII.