Según Howard Sounes, el motivo pudo ser por el trabajo de Johnston con Leonard Cohen en "Songs from a Room" y "Songs of Love and Hate" y por su involucración en la posterior gira del músico, lo cual disminuyó su tiempo disponible para trabajar con Dylan.