山健組
2015年(平成27年)8月27日、井上は宅見組組長・入江禎や池田組組長・池田孝志らとともに六代目山口組を離脱した。井上は離脱した十数団体を纏めて新団体神戸山口組を結成し、組長に就任した。なお、同日付けで山口組執行部から絶縁処分を受けた。
2017年(平成29年)4月30日、山健組副組長・織田絆誠が複数の直参とともに山健組を離脱し、新たに任侠団体山口組(現:絆會)を組織した。井上は織田を含む離脱した直参全員に処分を下した。
警察当局の資料によれば構成員の総数は2005年頃に約4,000人と推定され、本部直参は約78人、構成員・準構成員ともに約2,000人ずつの大勢力となっていた。一時は山口組において「ヤマケンにあらざれば、ヤマグチにあらず」と言われるほどの勢力を誇った。
2015年夏の山口組分裂以降、新団体・神戸山口組の中核となったものの、2020年には五代目組長・中田浩司が半数以上の直参を率いて神戸山口組を脱退するなど混乱状態にある。