Fue hijo del pintor irlandés Cecil Crawford O'Gorman y de Encarnación O'Gorman Moreno, y hermano del historiador Edmundo O'Gorman.