I 1966 ble det klart at Hartnells sviktende helse påvirket hans evne til å spille Doktoren. Savory hadde forlatt stillingen sin og hans etterfølger, Shaun Sutton, var vennligere innstilt når det gjaldt forandringer. Han lot den nye produsenten, Innes Lloyd, gjennomføre mange av forandringene som Wiles ikke fikk lov til. Lloyd diskuterte situasjonen med Hartnell og Hartnell var enig i at det var best at han sluttet i serien. Han sa dog senere at han ikke ville gå.