Nilsen var en tid formann i Fredrikstad Fotballklubb. I 1972 ble han utnevnt til ridder av St. Olavs Orden. Han har en gate oppkalt etter seg sentralt i hjembyen.