Amir Peretz ble født som i byen Boujad i Marokko. Hans far var en lederskikkelse i det jødiske miljøet i Boujad, og eide en bensinstasjon. Familien emigrerte til Israel i 1956. De slo seg ned i byen Sderot, hvor Peretz gjennomførte grunnskole.