Sachverhalt: A. Der Verein "Golfclub X._ " mit Sitz in Y._ (nachfolgend: der Steuerpflichtige) ist seit dem 24. März 1998 im Register der Mehrwertsteuerpflichtigen eingetragen. Er rechnet mit der Eidgenössischen Steuerverwaltung (nachfolgend: die ESTV) nach der effektiven ("gesetzlichen") Methode ab. Unter Herrschaft des Mehrwertsteuerrechts von 1999 bewilligte die ESTV am 28. Februar 2001 das Gesuch des Steuerpflichtigen um Versteuerung der von Gesetzes wegen steuerausgenommenen Turniergebühren, dies mit Wirkung ab dem 1. Januar 2001. In der Folge rechnete der Steuerpflichtige in den Abrechnungsperioden der Jahre 2001 bis 2009 die Turniergebühren zum reduzierten Steuersatz ab. B. Im Oktober 2012 führte die ESTV beim Steuerpflichtigen eine Kontrolle durch. Hinsichtlich der hier interessierenden Steuerperioden 2010 und 2011 stellte die ESTV fest, dass der Steuerpflichtige nebst dem statutarischen Jahresbeitrag und dem Beitrag an die "Association Suisse de Golf" alljährlich von seinen Mitgliedern einen "Turnierbeitrag Ehepaar-/Einzel-/Firmenmitglied" von Fr. 900.-- erhebt, wobei der Steuerpflichtige mit der ESTV in Ziff. 205 der Quartalsabrechnungen über die erlangten Turniergebühren abgerechnet und mit dem reduzierten Steuersatz erfasst hatte. Insoweit gab dies zu keinen Beanstandungen Anlass. Weiter zeigte sich, dass der Steuerpflichtige davon abgesehen hatte, in den Beitragsrechnungen an die Mitglieder auf Bestand und Höhe der Steuer hinzuweisen. In der Beurteilung der ESTV fehlte damit das Erfordernis des "offenen Ausweises der Steuer", weshalb sie die Umsätze aus Turnierbeiträgen als steuerausgenommen betrachtete. Zwecks Kürzung des Vorsteuerabzugs erliess die ESTV am 7. November 2012 die "Einschätzungsmitteilung Nr. 280'931 / Verfügung", mit welcher sie dem Steuerpflichtigen einen Steuerbetrag von Fr. 34'491.-- (2010: Fr. 17'927.--, 2011: Fr. 16'565.--), nebst Verzugszins, nachbelastete. C. Am 16. November 2012 kam der Steuerpflichtige der Zahlungsaufforderung nach und überwies den Betrag von Fr. 34'491.-- an die ESTV. Wenig später beglich er auch die Zinsrechnung vom 20. November 2012, ehe er am 5. Dezember 2012 Einsprache gegen die "Einschätzungsmitteilung / Verfügung" vom 7. November 2012 erhob. In verfahrensrechtlicher Hinsicht beantragte er, die Einsprache sei als (Sprung-) Beschwerde an das Bundesverwaltungsgericht weiterzuleiten. In der Sache selbst sei ihm der Betrag von Fr. 34'491.-- gutzuschreiben, unter Abrechnung über Vergütungs- und Verzugszinsen. Die ESTV stellte dem Bundesverwaltungsgericht am 19. Dezember 2012 Antrag, auf die Sprungbeschwerde sei nicht einzutreten. Mit Urteil A-6606/2012 vom 30. Januar 2013 erkannte das Bundesverwaltungsgericht, die streitbetroffene "Einschätzungsmitteilung / Verfügung" lasse sich nicht als "einlässlich begründet" bezeichnen. Aus diesem Grund sei auf die (Sprung-) Beschwerde nicht einzutreten und diese zuständigkeitshalber an die ESTV zu überweisen. D. Die nachfolgende materielle Beurteilung der Einsprache durch die ESTV führte mit Einspracheentscheid vom 29. Mai 2013 zur Abweisung. Dagegen gelangte der Steuerpflichtige erneut an das Bundesverwaltungsgericht. In seinem Urteil A-3779/2013 vom 9. Januar 2014 erwog dieses, der Steuerpflichtige habe die Option mangels offenen Ausweises der Steuer nicht rechtsgültig ausgeübt. Beim Erfordernis des offenen Ausweises handle es sich um eine unabdingbare Voraussetzung der Versteuerung, nicht um eine blosse Ordnungsvorschrift (Urteil E. 3.3.1). Die Deklaration in den jeweiligen Quartalsabrechnungen und die alljährliche Beschlussfassung der Generalversammlung über die Höhe des Turnierbeitrags vermöchten den vom Gesetz geforderten offenen Ausweis nicht zu ersetzen (Urteil E. 3.3.3 und 3.3.4). Der ESTV sei weder überspitzt formalistisches noch treuwidriges Verhalten anzulasten (Urteil E. 3.3.5). Das Erfordernis des offenen Ausweises der Steuer finde seine Berechtigung auch in der Verstärkung der Kontrollmöglichkeiten (Urteil E. 3.3.6). Dies alles führte zur Abweisung der Beschwerde. E. Mit Eingabe vom 27. Februar 2014 (Poststempel) erhebt der Steuerpflichtige beim Bundesgericht Beschwerde in öffentlich-rechtlichen Angelegenheiten. Er stellt Antrag, das angefochtene Urteil A-3779/2013 vom 9. Januar 2014 sei aufzuheben und es sei ihm der Betrag von Fr. 34'491.-- zuzusprechen, unter Abrechnung über Vergütungs- und Verzugszins. Die ESTV schliesst auf Abweisung der Beschwerde, während die Vorinstanz von einer Vernehmlassung absieht.