Joss Ackland ble gift i 1951 med skuespiller Rosemary Kirkcaldy (død i 2002). De fikk syv barn.