Sachverhalt: Sachverhalt: A. Die Politische Gemeinde Ermatingen hat vor, den ehemaligen Güterschuppen beim Bahnhof Ermatingen (Parzelle Nr. 404, im Eigentum der SBB) zu einem Jugendtreff umzubauen. Vorgesehen ist, dass die Gebäudehülle mit Ausnahme des Einbaus neuer Fenster praktisch unverändert bleibt. Im Innern sollen ein Mehrzweckraum mit Küche, ein Raum für WC/Putzen/Haustechnik sowie ein Büro-/Besprechungsraum realisiert werden. Zusätzlich sind ein unbeheizter Vorraum und ein Abstellraum geplant. Zur Lüftung und Beheizung des Mehrzweckraums und der Toilette ist vorgesehen, eine Lufterneuerungsanlage mit Wärmerückgewinnung einzubauen. Als Trägerschaft wirkt der Verein für Jugend und Freizeit Ermatingen, dem als Mitglieder die Politische Gemeinde Ermatingen sowie verschiedene Kirch- und Schulgemeinden angehören und mit welchem die SBB einen Mietvertrag bis 28. Februar 2015 abgeschlossen hat. Vorgesehen ist, den Jugendtreff an drei Abenden (bis 22.00 Uhr, resp. bis 23.00 Uhr) sowie am Mittwochnachmittag zu öffnen. Als Trägerschaft wirkt der Verein für Jugend und Freizeit Ermatingen, dem als Mitglieder die Politische Gemeinde Ermatingen sowie verschiedene Kirch- und Schulgemeinden angehören und mit welchem die SBB einen Mietvertrag bis 28. Februar 2015 abgeschlossen hat. Vorgesehen ist, den Jugendtreff an drei Abenden (bis 22.00 Uhr, resp. bis 23.00 Uhr) sowie am Mittwochnachmittag zu öffnen. B. Während der Auflage des Baugesuches erhob X._ als Eigentümer eines dem Projekt schräg gegenüber liegenden privaten Wohnhauses und eines Mehrfamilienhauses mit zehn Mietwohnungen Einsprache. Er rügte unter anderem das Fehlen eines Betriebskonzepts für den Jugendtreff. Ohne ein solches könne nicht überprüft werden, inwiefern sich die Zweckänderung des Schuppens nachteilig auf die Liegenschaften des Einsprechers auswirke. Da mit übermässigen Lärmimmissionen zu rechnen sei, sei das Baugesuch nicht zu bewilligen. Da die Politische Gemeinde Ermatingen selber Bauherrin ist, wurde die Angelegenheit an das Departement für Bau und Umwelt (DBU) zum Entscheid überwiesen. Dieses führte einen Augenschein durch, und es wurde eine Präzisierung zum Jugendtreff-Betrieb formuliert. Danach soll der Jugendtreff von Montag bis Donnerstag spätestens um 22.00 Uhr, von Freitag bis Sonntag spätestens um 23.00 Uhr geschlossen werden. Vorbehalten bleibt eine Anpassung an den SBB-Fahrplan: Je nachdem sollen die Öffnungszeiten um maximal eine halbe Stunde verlängert werden können. Die Nachtruhe ist nach 22.00 Uhr strikte einzuhalten. Zudem sind im Konzept die Pflichten des Aufsichtspersonals nach Schliessung des Treffs festgehalten. Weiter wurde die Möglichkeit offen gehalten, den Jugendtreff auch durch andere Institutionen (Mittagstisch, Lernhilfe) benutzen zu lassen, sofern die Mittagsruhe strikt beachtet wird. X._ unterzeichnete diese Präzisierungen zwar, zog aber seine Einsprache nicht zurück. Vielmehr teilte er dem DBU mit, er wünsche einen Einspracheentscheid mit der Ergänzung, es sei "eine Einigung in diesen Punkten" erzielt worden. Am 17. Juni 2005 wies das DBU die Einsprache ab, soweit sie nicht durch Vergleich erledigt worden war. Gleichzeitig erteilte es der Politischen Gemeinde Ermatingen die Baubewilligung unter zahlreichen Auflagen. Da die Politische Gemeinde Ermatingen selber Bauherrin ist, wurde die Angelegenheit an das Departement für Bau und Umwelt (DBU) zum Entscheid überwiesen. Dieses führte einen Augenschein durch, und es wurde eine Präzisierung zum Jugendtreff-Betrieb formuliert. Danach soll der Jugendtreff von Montag bis Donnerstag spätestens um 22.00 Uhr, von Freitag bis Sonntag spätestens um 23.00 Uhr geschlossen werden. Vorbehalten bleibt eine Anpassung an den SBB-Fahrplan: Je nachdem sollen die Öffnungszeiten um maximal eine halbe Stunde verlängert werden können. Die Nachtruhe ist nach 22.00 Uhr strikte einzuhalten. Zudem sind im Konzept die Pflichten des Aufsichtspersonals nach Schliessung des Treffs festgehalten. Weiter wurde die Möglichkeit offen gehalten, den Jugendtreff auch durch andere Institutionen (Mittagstisch, Lernhilfe) benutzen zu lassen, sofern die Mittagsruhe strikt beachtet wird. X._ unterzeichnete diese Präzisierungen zwar, zog aber seine Einsprache nicht zurück. Vielmehr teilte er dem DBU mit, er wünsche einen Einspracheentscheid mit der Ergänzung, es sei "eine Einigung in diesen Punkten" erzielt worden. Am 17. Juni 2005 wies das DBU die Einsprache ab, soweit sie nicht durch Vergleich erledigt worden war. Gleichzeitig erteilte es der Politischen Gemeinde Ermatingen die Baubewilligung unter zahlreichen Auflagen. C. Gegen den Entscheid des Departementes gelangte X._ ans Verwaltungsgericht des Kantons Thurgau. Zur Begründung machte er im Wesentlichen geltend, das Vorhaben sei nicht zonenkonform. Die betroffene Parzelle sei im Zonenplan weiss eingefärbt und als Bahnareal nicht dem Baugebiet zugeteilt. Weiter führte er u.a. an, durch das Projekt würden untolerierbare Lärmimmissionen entstehen und verlangte eine Lärmprognose. Das Verwaltungsgericht wies die Beschwerde mit Urteil vom 10. Mai 2006 ab. Das Verwaltungsgericht wies die Beschwerde mit Urteil vom 10. Mai 2006 ab. D. Mit Eingabe vom 29. August 2006 erhebt X._ Verwaltungsgerichtsbeschwerde beim Bundesgericht. Er beantragt die Aufhebung des angefochtenen Urteils vom 10. Mai 2006 und die Verweigerung der Baubewilligung. Gleichzeitig ersucht er um Gewährung der aufschiebenden Wirkung. Die Politische Gemeinde Ermatingen als Bauherrin und damit Beschwerdegegnerin, das Departement für Bau und Umwelt sowie das Verwaltungsgericht des Kantons Thurgau schliessen allesamt auf Abweisung der Beschwerde. Die Bundesämter für Umwelt (BAFU) und für Verkehr (BAV) haben sich ebenfalls zur Angelegenheit vernehmen lassen, während das Bundesamt für Raumentwicklung (ARE) auf Ausführungen verzichtet. In ihren Stellungnahmen halten die Parteien an ihren Anträgen fest. E. Mit Verfügung vom 28. September 2006 hat der Präsident der I. öffentlich-rechtlichen Abteilung des Bundesgerichts der Beschwerde die aufschiebende Wirkung zuerkannt.