Se instalaron en una casa en Mermaid Avenue, en Coney Island, y tuvieron cuatro hijos —incluyendo a Cathy, que murió a los cuatro años en un incendio, lo que causó a Woody una fuerte depresión.