Sachverhalt: A. A.a. Die Schweizerische Erhebungsstelle für Radio- und Fernsehempfangsgebühren (Billag) stellte am 1. Juli 2011 A._ eine Rechnung für eine Jahresgebühr für den privaten Radio- und Fernsehempfang von Fr. 462.40 (inkl. 2,5 % Mehrwertsteuern; Rechnung Nr. 101.901.479.869). Mit Schreiben vom 31. Oktober 2011 erklärte A._ der Billag, er habe die Gebühr gemäss der erhaltenen Rechnung bezahlt, nicht aber die Mehrwertsteuer in der Höhe von Fr. 11.28. Bezüglich der Mehrwertsteuer verlangte er von der Billag bzw. vom Bundesamt für Kommunikation (BAKOM) eine anfechtbare Verfügung. A.b. Am 12. Februar 2013 verfügte die Billag, dass A._ seit dem 1. Januar 1998 ununterbrochen der Gebührenpflicht für den Radioempfang sowie seit dem 22. Dezember 1998 ununterbrochen der Gebührenpflicht für den privaten Fernsehempfang unterliege (Dispositiv-Ziff. 1 und 2 der Verfügung). Ferner ordnete sie an, dass sich die Jahresrechnung vom 1. Juli 2011 (Rechnung Nr. 101.901.479.869) aus den Empfangsgebühren für die Periode vom 1. Juni 2011 bis 31. Mai 2012 in der Höhe von Fr. 451.12 und der Mehrwertsteuer von 2.5 % (Fr. 11.28) zusammensetze (Dispositiv-Ziff. 3 der Verfügung) bzw. die Jahresrechnung vom 2. Juli 2012 (Rechnung Nr. 101.601.649.224) sich aus den Empfangsgebühren für die Periode vom 1. Juni 2012 bis 31. Mai 2013 in der Höhe von Fr. 462.40, der Mehrwertsteuer von 2.5 % (Fr. 11.28) sowie Mahngebühren für zwei Mahnungen in der Höhe von jeweils Fr. 5.- (inkl. Mehrwertsteuer von 8 % bzw. von je Fr. 0.37) zusammensetze (Dispositiv-Ziff. 4 der Verfügung). Mit Dispositiv-Ziff. 5 der Verfügung hielt die Billag sodann fest, dass die Restforderung der Rechnung Nr. 101.901.479.869 vom 1. Juli 2011 in der Höhe von Fr. 11.28 und der Rechnung Nr. 101.601.649.224 vom 2. Juli 2012 in der Höhe von Fr. 21.30 nach wie vor offen sei und geschuldet bleibe. Zur Begründung führte die Billag aus, sie müsse als Gebührenerhebungsstelle nach der massgebenden Verordnungsregelung des Bundesrates die Empfangsgebühren inklusive dem aktuell gültigen Mehrwertsteuersatz fakturieren. B. B.a. Mit Beschwerde vom 17. März 2013 stellte A._ beim BAKOM den Antrag, Dispositiv-Ziff. 3-5 der Verfügung der Billag vom 12. Februar 2013 seien unter Kosten- und Entschädigungsfolge zulasten der Billag aufzuheben und Letztere sei anzuweisen, die von ihm ab Ende Januar 2007 unter dem Titel Mehrwertsteuer geleisteten Zahlungen inkl. Zins zurückzuerstatten. In prozessualer Hinsicht beantragte er, das Rechtsmittel sei an die nächsthöhere Instanz weiterzuleiten, sollte die Billag vom BAKOM bzw. dem Eidgenössischen Departement für Umwelt, Verkehr, Energie und Kommunikation (UVEK) beauftragt worden sein, die Mehrwertsteuer einzuziehen. Materiell machte er geltend, dass die Gebühren für den Radio- und Fernsehempfang infolge hoheitlicher Tätigkeit von der Mehrwertsteuer befreit seien. B.b. Das Bundesverwaltungsgericht trat mit Urteil vom 11. September 2013 (A-4130/2013) auf die Beschwerde nicht ein und stellte fest, die Verfügung der Erstinstanz vom 12. Februar 2013 sei nichtig, soweit sie im Sinne der Erwägungen im Streit liege, da für die Beurteilung der Streitsache die Zivilgerichte zuständig seien. B.c. Dagegen erhoben A._, die Billag sowie das UVEK je Beschwerde in öffentlich-rechtlichen Angelegenheiten an das Bundesgericht. Dieses vereinigte die drei Beschwerdeverfahren, hiess sie mit Urteil vom 31. Januar 2014 (BGE 140 II 80) gut, soweit darauf einzutreten war, und wies die Sache zur materiellen Entscheidung an das Bundesverwaltungsgericht zurück. Es erwog im Wesentlichen, im Rahmen des öffentlich-rechtlichen Verhältnisses zwischen der Erhebungsstelle für Radio- und Fernsehempfangsgebühren und den Gebührenpflichtigen müsse auch über die damit verbundenen Mehrwertsteuerfragen im dafür vorgesehenen öffentlich-rechtlichen Verfahren entschieden werden. B.d. In der Folge nahm das Bundesverwaltungsgericht das Beschwerdeverfahren wieder auf. Mit Urteil vom 20. August 2014 wies es die Beschwerde ab. C. Mit Eingabe vom 28. September 2014 erhebt A._ Beschwerde in öffentlich-rechtlichen Angelegenheiten an das Bundesgericht. Er beantragt, in Aufhebung des angefochtenen Urteils sei die Beschwerde gutzuheissen und die Billag anzuweisen, die von ihm ab Ende Januar 2007 unter dem Titel Mehrwertsteuer geleisteten Zahlungen samt Zins zurückzuerstatten. Das Bundesverwaltungsgericht verzichtet auf Vernehmlassung. Das Bundesamt für Kommunikation äussert sich, ohne einen Antrag zu stellen. Die Billag und die Eidgenössische Steuerverwaltung beantragen Abweisung der Beschwerde.