Sidney Arthurt Lumet ble født 25. juni 1924 i Philadelphia, USA. Foreldrene var jiddisch-talende jøder og hadde et par år tidligere innvandret fra Øst-Europa. Familien flyttet til New York City et par år etter at Sydney ble født. De bosatte seg i det fattige strøket Lower East Side som var dominert av jødiske innvandrere fra Øst-Europa. Lumet-familien var svært fattige da Sydney vokste opp.