La banda se formó en diciembre de 1996 con Matt Skiba a la cabeza (después de pasar previamente como batería por grupos como Jerkwater o The Traitors) de las voces y la guitarra principal, Rob Doran como bajo y voces, y Glenn Porter en la batería.