Singer nació en Pittstown, Nueva York, y era el hijo más joven del inmigrante sajón Adam Singer (nacido Reisinger) y de su primera esposa Ruth Benson.