Larsen startet Risør Kammermusikkfestival sammen med Lars Anders Tomter i 1991. Etter noen år ble også Leif Ove Andsnes med på å arrangere festivalen. Sammen bygde de opp festivalen til å bli en internasjonalt anerkjent kammermusikkfestival. Han var direktør for Det Norske Kammerorkester fra 1993.