Newman var eldst av ti barn i en jødisk familie fra trange kår og var et musikalsk vidunderbarn. Han begynte å lære pianospill av Sigismund Stojowski da han var fem år. Han kunne med tiden bidra til sin fattige families inntekter ved at spille på teatre og i restauranter. Han studerte også komposisjon med Rubin Gold.