Faits : A. Par décision du 13 juillet 2007 de l'Office cantonal AI du Valais (ci-après: l'office AI), A._, née en 1958, s'est vu refuser l'octroi de prestations. Cette décision est entrée en force à la suite de recours successifs de l'assurée (jugement du Tribunal cantonal valaisan, Cour des assurances sociales, du 14 décembre 2009 et arrêt 9C_92/2010 du Tribunal fédéral du 23 juin 2010; jugement du Tribunal cantonal valaisan du 18 mai 2011 et arrêt 9C_519/2011 du Tribunal fédéral du 5 avril 2012). Par décision du 23 juin 2014, l'office AI a refusé d'entrer en matière sur la nouvelle demande de prestations déposée par l'intéressée le 2 décembre 2013, au motif que l'état de santé de celle-ci ne s'était apparemment pas aggravé depuis sa dernière décision. B. A._ a recouru contre cette décision auprès du Tribunal cantonal valaisan, Cour des assurances sociales, et a requis l'assistance judiciaire partielle, sous forme de dispense de l'avance de frais. Par décision incidente du 3 novembre 2014, la juridiction cantonale a rejeté sa requête d'assistance judiciaire, considérant que le recours était dénué de chances de succès. C. L'assurée interjette un recours en matière de droit public contre cette décision dont elle requiert l'annulation, concluant à l'octroi de l'assistance judiciaire partielle. Elle demande également d'être exemptée des frais judiciaires pour la procédure fédérale. Invité à se déterminer sur le recours, le tribunal cantonal ne s'est pas exprimé.