Nacido en 1896 en Nueva Rochelle, Nueva York, Robert era hijo de Arthur Murray Sherwood, un rico corredor de bolsa, y su esposa, Rosina Emmet, una ilustradora y retratista muy apreciada conocida como Rosina E.