Han var kjent for å ha et rusproblem, og han var en nær venn av Jim Morrison, sanger i The Doors. Han døde av en rusmiddeloverdose, og det skapte forvirring i mediene. En annen Tom Baker, en britisk skuespiller, var mye mer berømt på grunn av at han spilte den fjerde Doktoren i (som ble vist på PBS i USA). Ettersom begge to hadde et rykte for å drikke mye, ble det antatt at det var den britiske skuespilleren som hadde dødd.