Navnet Olsenfestivalen spiller på to ting. Forsvarets første musikkinspektør og komponist het Ole Olsen, og ca. 53 000 nordmenn heter Olsen og de skal alle finne noe de vil like i festivalprogrammet.