Tras graduarse en el instituto, Williamson viajó a Nueva York en 1969 donde coincidió con la banda The Stooges, que estaban grabando su álbum de debut.