En 1991, la banda firmó con Caroline Records para lanzar su álbum debut, y Courtney le pidió a Kim Gordon de Sonic Youth que lo produjera mediante una carta, un broche de Hello Kitty, y copias de los primeros sencillos de la banda, a su vez mencionando que la banda admiraba mucho el trabajo de Gordon.