Imidlertid var begynnelsen på hitsene også faretruende nære slutten. Hun hadde suksess med sin første single i 1962 med «Tell Me What He Said», men deretter dalte hun nedover på listen. Dette skyldtes delvis uflaks og vanskelige plateselskaper. Hun ble nektet å synge sangen «Misery», som The Beatles skrev for henne, av sitt støtteapparat. Plateselskapet nektet å slippe hennes versjon av «It's My Party» før så lenge etterpå at den allerede var blitt kjent med Leslie Gore.