פוגל שותף בכל שמונת משחקיה של שווייץ במסגרת מוקדמות יורו 2004, בסיומם סיימו השווייצרים בראש הבית והעפילו לטורניר הגמר, שהיה הטורניר המשמעותי הראשון של הנבחרת מזה שמונה שנים. פוגל זומן לסגל הנבחרת על ידי המאמן קובי קון, ופתח בהרכב במשחק הפתיחה מול . פוגל ספג כרטיס צהוב כבר בדקה הרביעית, ובדקה החמישים ספג את הצהוב השני והורחק בכרטיס אדום. המשחק הסתיים בשוויון 0-0, ופוגל נאלץ להחמיץ את המשחק מול אנגליה בו הובסה שווייץ 0–3. הוא שב להרכב במשחק האחרון מול , אך לא הצליח לסייע לנבחרתו שהפסידה 1–3 בסיום בדרך להדחה בשלב הבתים.