Por la Factory pasaron muchas celebridades de las artes como Truman Capote, Allen Ginsberg, Salvador Dalí, Bob Dylan, Mick Jagger, Fernando Arrabal, Brian Jones o John Giorno.