La Factory se convirtió en lugar de encuentro de músicos como Lou Reed, Bob Dylan, Nico (quién escribió "Factory Girl sobre la Factory)", Brian Jones o Mick Jagger.