Ingvar Wixell var gift to ganger. Fra 1956 til 1964 var han gift med operasangeren Busk Margit Jonsson (1929–2011); med henne fikk han datteren Marit Wixell (født 1956). I 1968 giftet han seg på nytt med Margareta Henriksson (født 1937), som tidligere hadde vært gift med den tyske skuespilleren Wolfgang Neuss. Ingvar Wixell adopterte deres datter, Harriet «Jette» Neuss Wixell (født 1962).