Det sovjetiske regimet konfiskerte familiens eiendom, og i 1922 utvandret hele familien til Latvia. Harel var med i en sionistisk ungdomsorganisasjon, og da han var 16 år gammel begynte han forberedelsene for å immigrere til det britiske mandatet Palestina.