El dúo llamó al baterista de Isocracy, John Kiffmeyer y al bajista Sean Hughes para dar nacimiento a un grupo bajo el nombre de Sweet Children, en un principio Armstrong y Dirnt eran los guitarristas.