Baubewilligung Tankstelle, hat sich ergeben: A.- Vom 15. März bis zum 3. April 1997 legte der Stadtrat Rheinfelden ein Baugesuch der Y._ AG für den Abbruch der bestehenden Bauten und den Neubau einer Tankstelle mit Shop, Waschanlage, Lanzenwäsche, Hypometer (zwei Staubsauger) und Bürocontainer für den Occasionsverkauf von Fahrzeugen auf Parzelle Nr. XXX öffentlich auf. Diese Parzelle liegt gemäss geltendem Zonenplan der Stadt Rheinfelden vom 28. April 1983/26. November 1986 in der Zone Wohnen/Kleingewerbe (WG) 4A. Gemäss Art. 14 der Bau- und Nutzungsordnung der Stadt Rheinfelden (BNO) vom 31. März/14. November 1995 ist in der Zone WG 4A die folgende Nutzung zulässig: "Wohnen, wenig störendes Kleingewerbe mit Wohnbaucharakter". Gestützt auf Art. 43 der Lärmschutz-Verordnung vom 15. Dezember 1986 (LSV; SR 814. 41) wurde die Zone WG 4A der Empfindlichkeitsstufe (ES) III zugeordnet (Art. 48 Abs. 2 BNO). B.- Gegen das Bauvorhaben erhoben X._ und die Z._ AG Einsprache beim Stadtrat Rheinfelden. Gestützt auf die Teilentscheide der Baugesuchszentrale (heute: Koordinationsstelle Baugesuche) vom 21. Juli und 7. Oktober 1997 erteilte der Stadtrat Rheinfelden der Y._ AG mit Beschluss vom 8. Dezember 1997 die Baubewilligung unter verschiedenen Auflagen und Bedingungen und wies die Einsprachen von X._ und der Z._ AG ab. Die von diesen dagegen erhobenen Verwaltungsbeschwerden wies der Regierungsrat des Kantons Aargau mit Entscheid vom 17. Juni 1998 ab. Am 24. August 1998 focht X._ den Entscheid des Regierungsrates mit Verwaltungsgerichtsbeschwerde beim Verwaltungsgericht des Kantons Aargau an. Dieses wies die Beschwerde mit Urteil vom 8. Dezember 1999 ab. C.- Gegen den Entscheid des Verwaltungsgerichts erhob X._ am 13. Juni 2000 beim Bundesgericht sowohl Verwaltungsgerichtsbeschwerde als auch staatsrechtliche Beschwerde. Er stellt den Antrag, das vorinstanzliche Urteil sei vollumfänglich aufzuheben und die Baubewilligung des Stadtrates Rheinfelden vom 18. Dezember 1997 "abzuweisen", eventualiter sei auch der Entscheid des Regierungsrates des Kantons Aargau vom 17. Juni 1998 aufzuheben und die Sache zur Neubeurteilung an die Vorinstanzen zurückzuweisen. Zudem ersucht er um Erteilung der aufschiebenden Wirkung der Beschwerden. D.- Die Y._ AG beantragt in ihrer Vernehmlassung vom 29. Juni 2000, es sei auf die Verwaltungsgerichtsbeschwerde nicht einzutreten, eventualiter sei sie vollumfänglich abzuweisen. In ihrer Stellungnahme zur staatsrechtlichen Beschwerde verlangt sie deren vollumfängliche Abweisung. Der Stadtrat Rheinfelden stellt am 5. Juli 2000 den Antrag, die Beschwerden seien vollumfänglich abzuweisen. Das Verwaltungsgericht des Kantons Aargau verzichtet auf eine Vernehmlassung und verweist auf die Erwägungen im angefochtenen Entscheid. Das Bundesamt für Umwelt, Wald und Landschaft (BUWAL) hält in seiner Vernehmlassung vom 22. September 2000 zusammenfassend fest, dass keine gesamthafte Beurteilung der Lärmemissionen unter Berücksichtigung aller Anlageteile stattgefunden habe. Die vorliegende Lärmprognose sei somit ergänzungsbedürftig. Sämtlichen am Verfahren Beteiligten ist hierauf die Gelegenheit eingeräumt worden, sich dazu zu äussern. Die Y._ AG bringt in ihrer Stellungnahme vom 31. Oktober 2000 neu vor, dass sie auf den Occasionshandel verzichte und sie mit einer Einschränkung der Öffnungszeiten bis 20.00 Uhr für die Lanzenwaschanlage und den Hypometer einverstanden sei. E.- Mit Entscheid vom 19. Juli 2000 wies das präsidierende Mitglied der I. öffentlichrechtlichen Abteilung das Gesuch um aufschiebende Wirkung der Beschwerde ab. F.- Am 30. März 2001 führte eine Delegation des Bundesgerichts in Rheinfelden einen Augenschein an Ort und Stelle mit anschliessender Instruktionsverhandlung durch.