Les Anicinabek ont d'abord nommé cette rivière "Okikodasik Sibi", qui signifie "la rivière du pin gris" en anicinapemowin. Le nom "La Reine" provient du régiment de la Reine qui a servi sous le général français Montcalm lors de la bataille du Carillon de 1758 et lors du siège de Québec de 1759. Ce régiment créé en 1634 a été nommé en l’honneur de la reine Anne d’Autriche, épouse du roi Louis XIII de France. Le nom "La Reine" a également été attribué à la municipalité et le canton traversé par la rivière.