三田平凡寺
そして、お堂があるのだからということで、お寺に擬して「趣味山平凡寺」と名乗ることにした。そこに蒐集品を集めて1908年11月4日、趣味山平凡寺を名乗り、1909年に開祖となって1919年6月に10ケ寺の会員を集めて趣味人の会である我楽多宗(がらくたしゅう)を設立、絵馬、土俗玩具、干支玩具などの収集趣味同好者を全国に募った。翌1920年には斎藤昌三、宮崎線外、田中緑紅、稲垣豆人、スタール博士らが集い25名に増加、8月に機関誌『趣味と平凡』を創刊(1940年頃に廃刊)。後に西国三十三ケ所札所にちなんで会費33銭の月例会を開催、各種の趣味品交換などを行った。会員にはほかに旧福井藩主松平康荘侯爵(北越山文殊寺)や沢田五猫庵、河村目呂二、河村すの子、インド人G・シングらがいた。また、ポーランド詩人ルビエンスキー、宮武外骨やアントニーン・レイモンドとも家族ぐるみの親交があった。
蒐集品はあらゆる分野に及んだが、とりわけ色道に造詣が深く、「廃物堂」と名付けた天井裏に蒐集品を陳列し、訪問客に観覧させた。太平洋戦争中は岩手県盛岡市に疎開。膨大な蒐集品は、この疎開に際して自宅の庭に埋めておいたところ、帰宅後には全て紛失していた。
易の道にも秀で、晩年は建築設計の依頼を受けたこともある。夏目漱石を尊敬し、『吾輩は猫である』のパロディ『吾輩も猫である』を著した。その他の著書に『放屁論』など。