Fra begynnelsen av 1968 begynte Brian Wilson å trekke seg mere og mere tilbake fra musikkbransjen. Hans narkotika-inntak og hans bipolare lidelse bidro til at han forfalt både som musiker og menneske. Tilstanden ble gradvis forverret mens han jobbet med SMiLE, og han fikk etter hvert for store vrangforestillinger om tekstene og musikken. Når han til slutt nektet å gjøre albumet ferdig, tilbragte han de nest fem årene inne på sitt eget soverom. Senere ble enkeltlåter som for eksempel «Surf's Up» og «Cabinessence», som var beregnet for albumet, omarbeidet og utgitt på andre album.