På denne tiden ble Ingmann kjent med sangeren Grethe Clemmensen, som han giftet seg med i 1956. I slutten av 1950-årene opptrådte han først med Jørgen Ingmann-kvartetten og senere med sin kone.