Da Hovland Olsen var 20 år ble han spurt om å være kasserer i styret til Bragerøen. Dette var innledningen på en lang lederkarriere. I 1986 ble Hovland Olsen for første gang valgt inn i Norges Bandyforbunds hovedstyre og var en stund visepresident, før han i 1996 ble valgt til president. Dette vervet hadde han i ti år fram til 2006. Han er den som har sittet lengst som president siden forbundet ble stiftet i 1920. Samme år som han gikk av ble han tildelt bandyforbundets gullmerke. Hovland Olsen har også sittet i styret i det internasjonale bandyforbundet (FIB).