Julian Glover ble gift for andre gang i 1966 med skuespiller Isla Blair. De har ett barn, skuespilleren Jamie Glover. Han var gift med skuespiller Eileen Atkins fra 1957 og frem til ekteskapet ble oppløst i 1966.