George V. Brown war einer der Mitbegründer des 1897 erstmals ausgetragenen Boston Marathon, den er in elf Jahren im Zeitraum von 1905 bis 1937 auch selbst als Manager organisierte. Von 1918 bis 1937 war er parallel Manager des Boston Garden. Diesen Posten übernahm nach seinem Tod sein Sohn Walter A. Brown. Brown, der zuvor selbst im Eishockey eine Amateurmannschaft trainiert hatte, betreute die US-amerikanische Eishockeynationalmannschaft bei den Olympischen Winterspielen 1924 in Chamonix, bei der sie die Silbermedaille gewann, als Manager. Von 1908 bis 1920 war er zudem Mitglied des United States Olympic Committee. Für das Olympia-Leichtathletik-Team der USA nahm Brown an den Olympischen Spielen 1924, 1928 und 1936 als Assistenztrainer, sowie 1932 als Offizieller teil.