Grissom nació en Mitchell, Indiana, el 3 de abril de 1926, siendo el segundo hijo de Dennis David Grissom (1903-1994) y de Cecile King Grissom (1901-1995).