Bye er med i Frode Berg kvartett (, 2003), i Bugge Wesseltofts serie New Conception of Jazz (2004), i Sigurd Køhn kvartett (, 2004), i Elvira Nikolaisens orkester (2005), i Anders Aarum trio (, 2006), i Jazzmob (, 2006), i Nils Olav Johansen band (, 2007) og i Roy Powell trio (, 2007). Videre har han deltatt i Sharp 9, samt spiller med Jon Eberson i «New High Quartet», i «Montée» i Michael Bloch trio, i Ketil Gutvik F E M, i gruppa Moment med Jens Fossum, Tore Brunborg og Jørn Øien, Barth & Johnsen Trio med Frode Barth og Harald Johnsen, Christian Reim samt medvirket på Lars Martin Myhre (, 2006). Med Astor Andersen har han også utgitt ( 1997; 2006).