Era hermano de Manuel de Cárdenas Pastor, uno de los arquitectos más destacados del primer tercio del siglo XX y de Ramón de Cárdenas, abogado, jugador de fútbol y cuarto presidente del Atlético de Madrid.