John Lennon og Paul McCartney hadde hver sine uferdige sanger. Lennon hadde en som midlertidig het «One of the Beautiful People»; som da ville utgjøre versene. McCartney hadde refrenget, og disse to melodistubbene ble koblet sammen i en og samme sang. Lennons del av sangen hadde sin inspirasjon fra alle avisartiklene som handlet om den voksende skaren av hippier som i media ble kalt «the beautiful people». Ellers la de inn ordspillet «naturally» som ble til «natural E». Sangen kan tolkes som en sang til manageren Brian Epstein, fordi det nevnes i sangen "keep all your money in a big brown bag". Etter The Beatles' konserter, brukte Epstein å ta med seg pengene i en brun pose. I siste vers kan du høre Lennon syng "Baby you're a Rich Fag Jew", fordi Epstein var homofil. Epstein døde senere samme år.