Han kom på kant med både slektninger og det jødiske miljøet i Canada da han i 1963 kritiserte jødene i Canada for å ha blitt for materialistiske og å ha mistet det åndelige aspektet. Han eksperimenterte med marihuana, amfetamin, peyote og LSD (LSD var i 1960-årene ikke forbudt i henhold til den canadiske narkotikalovgivningen), også mens han arbeidet med tekst og musikk. Alkoholforbruket var i perioder stort.