Rubinsteins mor og søster flyktet til Sverige i november i 1942. Hans brødre Salomon, David og Willy deltok i motstandskamp i Skottlandsbrigaden (David og Willy) og i britisk/sørafrikanske styrker (Salomon).