El resto de la familia de Ian estuvo conformada por sus dos hermanos menores, Richard (1911-1977) y Michael (1913-1940), y una hermanastra pequeña por parte materna, la violonchelista Amaryllis Fleming (1925-1999), cuyo padre era el artista Augustus John.