I en opphetet kamp mot Storhamar på Jordal Amfi i 1996 endte Olsen i klammeri med daværende Storhamartrener Göran Sjöberg etter at Sjöberg å ha fått matchstraff for å ha kranglet med dommerenbortvist fra benken etter å protestert for hardt mot dommeren, På vei ut havnet Sjöberg i basketak med Olsen og Sjöberg ble senere også nedslått av en tilskuer på Jordal Amfi. Sjöberg ble umiddelbart løst fra stillingen som Storhamartrener.