Han ble født som Norman John Klugmann i 1912. Hans far var av jødisk bakgrunn og forhandler av pipetobakk. Hans søster Kitty ble også en hengiven kommunist, senere gift med Maurice Cornforth. Han hadde også en eldre bror ved navn Frank. De bodde i et viktoriansk hus i Haverstock Hill, Hampstead i London.