Era el primogénito del matrimonio formado por Hugh Gerald Brenan que era un oficial del Ejército Británico, natural de Londres, y Helen Gertrude Graham, perteneciente a una familia acomodada irlandesa.