En 1963 Doherty estableció una estrecha amistad con Cass Elliot, cuando estaba en una banda llamada The Big 3.