Innimellom innspillingene og turneene med Harvey har han vært involvert i en lang rekke andre prosjekter. Hans egne komposisjoner, som best kan beskrives som noe lignende den moderne «klassiske» musikken, er gitt ut på to innspillinger; fra 2000 og fra 2004. Bandet hans, Spleen, har spilt inn tre album: fra 1996, fra 1998 og fra 2006, og han har også spilt inn musikk under pseudonymet «Christmas».