東洋社会党
樽井は1874年に岩倉具視に社会主義的な政策の提言をするが受け入れられず、西南戦争で西郷側に立つも敗北して潜行したのち、無人島に理想の村をつくろうと植民に取り組むも失敗するなどしていた。長崎に転じた際、外国帰りの人物から、樽井の主張は西洋の「社会主義」に近いと教えられ、以降「東洋社会党」の結成を模索するようになった。社会主義の具体的行動方針については樽井の手に余るものであり、武富時敏に助言を乞い、スペンサーの説や優生学を取り入れた。
1882年3月2日、『錦江新誌』号外(創刊準備号の意)が発行された。樽井はこれに1月に長崎で行った演説の書き起こしとして「東洋の虚無党」と題する文章を掲げ、「虚無党の発生は圧制政治に原因がある」と主張した。ここにおいて樽井は、東洋の虚無党は老荘思想などに由来し、西洋の虚無主義と本質は変わらないが政府に対抗するようなことはなかったこと、西洋虚無党の「逆族」を未然に排除するためには別の思想で対抗しなければならないことを主張した。ここにはカール・マルクスについて「孛国の一学士」としか出ておらず、社会主義を志向する樽井にすら未だマルクスの論が伝わっていないことがわかる。
1882年(明治2年)、樽井は東洋社会党の結成に着手する。4月18日に赤松ら数名の同志とともに準備会を開き、5月25日島原江東寺(十善寺とも)にて東洋社会党第一部第一同盟会が開かれ、樽井を発起人として「東洋社会党」が正式に発足した。党名は「立憲急進党」「突飛党」などの案が挙がったが、結局「東洋社会党」となった。これは、日本で初めて「社会党」の名を冠した政党である。