Schwartz creció en uno de los barrios de Brooklyn, Bensonhurst, es un veterano de la Segunda Guerra Mundial y durante toda su vida un demócrata.