Colin Clark var sønn var kunsthistorikeren lord Clark av Saltwood (sir Kenneth Clark), og den yngre broen til politikeren og militærhistorikeren Alan Clark, fra Det konservative parti. De to brødrene hadde ikke alltid et godt forhold.