Joe Baker var manager i to perioder for Albion Rovers (1981/1982 og 1984/1985) med rimelig suksess. Senere drev han en pub og var Hibernians offisielle vert ved større arrangementer (en såkalt after dinner speaker). Han døde i en alder av 63 år av hjerteinfarkt, som han fikk under en golfturnering for et veldedig formål. Joe Baker sovnet inn kort tid etterpå på Wishaw General Hospital den 6. oktober 2003.