Nach der zweiten Teilung Polens unterstützte Joselewicz den polnischen Aufstand unter Tadeusz Kościuszko, in der Hoffnung, dieser würde den Juden die Gleichstellung mit den Christen im Königreich Polen bringen. 1794 wurde auf seine und Jozef Aronowiczs Initiative eine jüdische Kavallerieeinheit gebildet. Im September ernannte ihn Kościuszko zum Oberst. In einem Aufruf im Oktober wandte sich Joselewicz in biblischen Worten an die Juden Polen-Litauens, sich dem Regiment anzuschließen. Die Zahl der jüdischen Kämpfer, die seinem Aufruf folgten, ist nicht bekannt, viele von ihnen fielen beim russischen Angriff auf Praga am 4. November 1794. Der Rest des Regiments schlug sich nach Frankreich durch, schloss sich der polnischen Legion unter Napoleon an und beteiligte sich später an der Errichtung des Herzogtums Warschau. Joselewicz ließ sich dagegen in Lemberg im nun zur Österreichischen Monarchie gehörenden Galizien nieder. Sein Vorschlag, eine Truppe von jüdischen Freiwilligen innerhalb der österreichischen Armee zu bilden, wurde in Wien abgelehnt.