Jon Spencer comenzó a estudiar semiótica en la Universidad Brown, donde conoció a Julia Cafritz y entró en contacto con bandas como The Birthday Party, The Stooges o los recopilatorios de "Back From The Grave".