Posteriormente, en el mes de noviembre comenzaron a grabar lo que sería su segundo sencillo, «Please Please Me».