Toynbee era hijo de Harry Valpy Toynbee (1861-1941), secretario de la Charity Organization Society, y su esposa Sarah Edith Marshall (1859-1939); su hermana Jocelyn Toynbee era arqueóloga e historiadora del arte.