I 2004 lanserte de den akustiske EP-en , som kom sammen med en DVD. Formålet med lanseringen var blant annet å vise at bandet ikke trenger elektriske gitarer for å lage god musikk, og for å komme kritikere som hevdet at tidens punk-/emo-band ikke kunne lage musikk, men bare meningsløs støy i møte. EP-en inneholder blant annet akustiske versjoner av «Nobody Puts Baby In the Corner» og «Grand Theft Autumn/Where Is Your Boy».