En 1900, Riazanov se exilió. El año siguiente en Berlín, Riazanov y sus co-pensadores establecieron un pequeño grupo marxista llamado "Borba" (Lucha), que intentó unir a los marxistas rusos emigrados. El grupo de Riazanov fue excluido del 2º Congreso del Partido Obrero Socialdemócrata Ruso que se celebró en Londres y Bruselas en el verano de 1903. Con el partido dividido entre las alas bolchevique y menchevique a raíz de esta convención histórica, Riazanov y sus co-pensadores se negaron deliberadamente a unirse a ninguna de las dos facciones.