Han vokste opp i Lockport i Niagara County, lengst vest i delstaten New York. Han var sønn av Edward J. Miller, som var fabrikkgulvvasker, og Elizabeth Hinch, som drev hattebutikk.