Teniendo en composición inspiración directa con 'Subterranean homesick blues' de Bob Dylan, Michael Stipe contó que escribió la canción después de soñar que estaba en una fiesta de cumpleaños donde todos los invitados tenían las iniciales L.B., razón de que en unos de los versos de la letra se mencione a Leonard Bernstein, Leonid Brézhnev, Lenny Bruce y Lester Bangs.