Se casó con Carmen Ibáñez Gallardo en 1929 (el mismo año que su hermana con Azaña) y tuvieron por hijos a Ramón, Enrique, Carlos y Susana de Rivas Ibáñez.