Уолтер Браун родился в небольшом городке Хопкинтон (штат Массачусетс), недалеко от Бостона, посещал латинскую школу Бостона с 1922 по 1923 годы, а также академию Филлипса в Эксетере с 1923 по 1926 годы. Браун сыграл важную роль в развитии хоккея. На заре своей карьеры тренировал любительскую команду «Бостон Олимпикс», выступавшую в Восточной хоккейной лиге, выиграв с ней пять чемпионских титулов. Руководил национальной сборной США, которую впервые в её истории привёл к золотым медалям на чемпионате мира в Чехословакии в 1933 году. Помимо этого он был директором спортивной арены «Бостон-гарден», сменив на этом посту в 1937 году своего отца Джорджа Брауна, и менеджером профессиональной команды НХЛ «Бостон Брюинз» с 1951 года. В 1948 году Браун оказался в центре событий на зимних Олимпийских играх в Санкт-Морице, когда разразился грандиозный скандал, связанный с выступлением сборной США, за которую выступали одни профессионалы, за что она была дисквалифицирована. С 1954 по 1957 годы работал на должности президента ИИХФ.