1964年3月、山口組田中組（組長は田中敏男）が解散した。1965年（昭和40年）4月7日、山口組山陰柳川組（組長は柳川甲録。本名は柳甲録）が解散した。同日、田岡一雄は、柳川甲録を破門にした。同年5月21日、田岡一雄は東京芝高輪のプリンスホテルで行われた「全国港湾荷役振興協会」の会議に出席した。同日夜、赤坂のちゃんこ屋で、高倉健・江利チエミ夫婦、清川虹子、宮城千賀子らと会食した。同日12時ごろ、竹中正久にめまいと胃痛と肩こりを訴えた。  同年5月23日、田岡一雄は清川虹子の勧めで、渋谷のセントラル病院に入院した。狭心症だった。同年5月、山口組石井組幹部・秋山潔（後の二代目石井組組長）が、恐喝、銃刀不法所持で服役した。同年8月1日、岡山市の山口組現金屋（組長は三宅芳一。本名は三宅一巳）が解散した。同年8月4日、田岡一雄は東京女子医科大学病院に転院した。同年9月9日、田岡一雄は夜行寝台「銀河」で大阪駅に向かった。同年9月10日午前10時、田岡一雄は関西労災病院新館5階517号室に転院した。田岡一雄担当医師の中山英男は、兵庫県警本部の要請に応じて、田岡の診断証明書を、兵庫県警本部に提出した。田岡の診断証明書はマスコミに漏れたため、中山英男は兵庫県警刑事部長に釈明を求めた。兵庫県警は、まず山口組舎弟筆頭格だった岡精義に狙いを定め、山口組解散と田岡一雄の引退を目指すことにした。同年9月24日、兵庫県警刑事部・山本昇一捜査課長が、文書で中山英男に謝罪した。同年9月、兵庫港が台風23号に襲われ、横浜海運倉庫と築港興業の2社のドラム缶1485本が流失、それが山口組舎弟の岡精義が社長・工業取締役だった神戸生コン運輸と神戸生コン工業の機械を破損したとして、岡精義は両社から現金150万円と約束手形2200万円を受け取った。しかし現金と約束手形を脅し取ったと判断された。同年10月、岡山県警は、岡山市の竹中組・竹中武（後の四代目山口組若頭補佐。四代目山口組・竹中正久組長の弟）組長を野球賭博容疑で逮捕した。その後、竹中武は、姫路警察署に移管された。姫路警察署は、1965年（昭和40年）4月から竹中組で野球賭博が行われていることを知った。同年12月31日、初代細田組・細田利光組長が死亡した。1966年（昭和41年）2月、兵庫県警は、山口組竹中組・竹中正久組長（後の山口組四代目）を野球賭博容疑で逮捕した。竹中正久は1年間服役した。同年2月23日、山口組渋谷組・渋谷文男組長が死亡した。同年3月、金堀一男が兵庫県警本部長に就任した。金堀は田岡との全面対決姿勢を明確にした。同年4月19日、岡精義は兵庫県警に逮捕された。岡精義は容疑を認め田岡一雄は兵庫県警捜査四課から、岡精義の引退届けを受け取った。同年5月2日、田岡一雄は、岡精義の引退を認めた。同日、田岡一雄は、入院中の病室に、山口組若頭・地道行雄を呼び、地道行雄に「港湾荷役関係者は、全員山口組から脱退し、事業に専念するように」と伝えた。同年5月3日、田岡一雄の舎弟・安原武夫（安原運輸社長）や青井照日出（住井運輸社長）らは、神戸市海岸通の全国港湾荷役振興協会事務所で、山口組からの脱退を決議した。同年5月5日、岡精義は兵庫県警捜査四課長に、山口組との絶縁を伝える文書を送った。同日、田岡一雄の舎弟10人と若衆9人が、山口組から脱退した。脱退したのは、岡精義、名古屋市の鈴木組・鈴木光義組長（中森光義とも名乗った）、安原武夫、青井照日出、全国港湾荷役振興協会理事兼大阪支部長・広田敬次（大阪港湾作業社長）、上栄運輸社長・白石幸吉、昭和運輸社長・大楠正道、金本運輸社長・日笠寿明、富栄運輸専務取締役・栗田達之助、(第一交通社長。神光工業社長）、日栄運輸取締役・山内誠次郎、岡村運輸社長・岡村徳造、双和運輸社長・高砂嘉之、扇港海運作業取締役・田中晋治、山一運輸社長・蟹谷勲、日栄運輸社長・吉川明、藤海運社長・石井基弘（石井商会社長）、上栄運輸取締役・白石敏夫、山の内運輸常務取締役・堀川弘一。これにより、田岡は港湾事業からのしのぎの大部分を失った。鈴木組若頭・弘田武志が鈴木組を引き継ぎ、弘田組を結成した。弘田武志は、山口組直参となった。その後、弘田武志は、司忍（後の六代目山口組組長）を、弘田組若頭に据えた。同年5月10日、井志繁雄は、山口組井志組を解散させたが、ヤクザからは引退しなかった。同年5月、西岡勇は、山口組西岡組を解散させたが、ヤクザからは引退しなかった。同月、地道行雄は、田岡一雄に山口組解散を直訴し、若頭辞任を願い出た。田岡は、地道の若頭辞任を留意した。地道は、地道組若頭・佐々木道雄に、地道組傘下組織の解散奨励を伝えた。同年6月2日、兵庫県警は、神戸市の21官庁の協力を得て、「山口組壊滅対策官公庁連絡協議会」を発足させ、2日後には「広域暴力団山口組幹部による企業暴力事件捜査本部」を設置した。同年6月7日、田岡一雄は甲陽運輸社長を辞任した。これにより、田岡は港湾事業からのすべてのしのぎを失った。同年6月13日、山口組長谷組（組長は長谷一雄）が解散した。同年6月23日、山口組渋谷組が解散した。同年6月下旬頃から、1963年に神戸市三ノ宮駅前に建設が決定されていた「さんちか」の建設をめぐり、恐喝容疑で吉川勇次と地道行雄が指名手配され、岡精義や山口組舎弟頭・松本一美ら数人が逮捕された。兵庫県警須磨警察署の取調べで、岡精義は「田岡一雄も恐喝に参加している」ことを供述した。同年6月28日、吉川勇次が逮捕された。同月、竹中組が1965年（昭和40年）4月から1966年（昭和41年）5月までに行った野球賭博で、竹中組若頭・坪田英和、竹中組幹部・上野武信、竹中組組員・笹井啓三、同組組員・沖田義明、同組組員・中西要、竹中正久の弟・竹中英男の元運転手・富士原俊信、賭博客37人が逮捕された。同年7月1日、地道行雄が、警察に出頭し、逮捕された。同年7月9日、岡精義は、兵庫県警須磨警察署の取調べで「田岡一雄が、さんちかタウン建設での恐喝に介入していた。自分は恐喝して500万円を手に入れた。そのうちの300万円を田岡一雄に渡した。自分が田岡一雄に300万円を渡す際に、地道行雄が同席していた」と供述した。同年7月15日、山口組舎弟頭・松本一美が入院中の病院で検挙された。松本一美は、肝炎と糖尿病で入院中だった。同年7月21日、地道行雄は、さんちかタウン建設での恐喝を認め、「岡精義が、恐喝で手に入れた300万円を、田岡一雄に渡した。その現場に立ち会った」と供述した。同年8月23日、田中禄春は、自身が顧問をする山口組一心会を解散させ、ヤクザから引退した。同年8月28日、山口組企業暴力事件の第2回公判が、神戸地裁で行われた。検察側は、冒頭陳述で、「さんちかタウン建設の際に恐喝で奪った500万円のうちの300万円が田岡一雄に渡った」と公表した。同年9月17日、山口組山博組（組長は山本博）が解散した。同月、兵庫県警は、神戸市灘区篠原本町の田岡一雄の自宅を家宅捜索した。同年9月1日、東声会・町井久之会長は東声会の解散声明を発表した。同年9月8日、東京の池上本門寺で東声会解散式が行われた。町井久之は、やくざ社会の表舞台から去った。同年10月24日、山口組鹿島組（組長は加島正夫）が解散した。同年10月18日、十九組（組長は松本国松）が解散した。同年10月28日、神戸市兵庫区の山口組坂口組・坂口啓三組長が、兵庫県警に、組解散を届け出て、ヤクザから引退した。同年11月初旬、地道行雄は、義父の葬儀のため、4日間勾留の執行を停止された。同年11月7日、長野刑務所に服役中だった山口組石井組・石井一郎組長は、石井組の解散を宣言した。同年12月5日、山口組舎弟・藤村唯夫は、国立大阪病院で、肝臓疾患により死亡した。同月、田岡一雄は、甲陽運輸の脱税で起訴された。1967年（昭和42年）1月、竹中正久が、神戸刑務所から出所した。同年1月、田岡一雄の舎弟・菅安次郎が山口組から脱退した。同年2月、極東愛桜連合会が解散した。同年4月5日、山口組小塚組（組長は小塚斉）が解散した。同年4月、山口組山健組・山本健一組長（夜桜銀次事件での凶器準備集合罪で服役）が出所した。すぐに山本健一は、警察に起訴された。山本健一は肝臓病により神戸市須磨区の野村病院で加療中だった。同年、山本健一は、さんちかタウン建設の際に起こった恐喝事件での、裁判記録を取り寄せた。山本健一は、地道行雄の供述（「さんちかタウン建設の際に恐喝で奪った500万円のうちの300万円が田岡一雄に渡った」）に立腹し、神戸市花隈の山本宅で、竹中正久と二代目細田組・細田利明とともに、地道行雄暗殺を謀議した。竹中と細田は、地道暗殺の実行犯役を買って出た。同年5月1日、姫路市の竹中組事務所前で、竹中組組員・北村孝一が、タクシーの運転手と口論となった。運転手が竹中組事務所の入り口のガラス戸を割ったため、北村孝一は運転手を竹中組事務所に引っ張りこんで暴行を加え、全治2週間の怪我を負わせた。姫路警察署は、北村を傷害容疑で逮捕した。同年5月2日、姫路警察署の小林幸三暴力犯係長は、北村孝一の逮捕にからみ、証拠物件差し押さえ令状を取り、21人の警察官とともに、竹中組事務所に踏み込もうとした。竹中正久や竹中組組員は、立会いを拒否し、刑事訴訟法114条2項を盾にして、姫路警察署の強制捜査に抵抗した。小林幸三は姫路消防署署員2人に立会いを依頼したが、竹中組組員が消防署職員に住所と氏名を教えるように脅したため、消防署署員は立会いを拒否した。小林は、姫路警察署刑事課長・江見亨ら20人の刑事の応援を呼んだ。姫路警察署は、姫路市の湊組・湊芳治組長（田岡一雄の舎弟）に、竹中正久を説得させた。竹中は、湊芳治に説得されて、姫路警察署の捜査に応じた。同年5月初旬、田岡一雄邸の2階大広間で、山口組直系組長70人弱が集まり、山口組直系組長会が開かれた。山口組直系組長会では、山口組解散について議論された。地道行雄は山口組解散を主張した。中山美一が地道に「山口組の解散は、田岡一雄の了承を得ているのか」と訪ねた。地道は「自分の独断だが、田岡から承認を受ける自信はある」と答えた。採決では、50人が山口組解散に賛成し、菅谷政雄、山本健一、小西音松、竹中正久、細田利明、中山美一、江口実ら20人弱が、解散に反対した。しかし、解散反対派が、田岡の意向を聞くように食い下がり、山口組直系組長会では結論が出なかった。関西労災病院で、織田組・織田譲二組長（本名は伊藤豊彦）が、入院中の田岡一雄に、山口組解散の意思を確認した。田岡一雄は、山口組解散を否定した。同月、関西労災病院で、山本健一は、田岡一雄に、地道暗殺を謀議したことを告白した。田岡は、竹中正久と細田利明を関西労災病院に呼び、地道暗殺を止めさせた。同年11月、兵庫県警は、さんちかタウン建設をめぐる恐喝で、田岡一雄を、関西労災病院で、臨床尋問した。臨床尋問は、医者の要請を受けて、途中で打ち切られた。同年12月15日、安原会（会長は安原政雄）が解散した。1968年（昭和43年）1月29日、兵庫県警は、さんちかタウン建設をめぐる恐喝・威力業務妨害・港湾法違反など4つの共犯容疑で、田岡一雄を、神戸地裁に書類送検した。同年2月7日、田岡一雄は、地道行雄を若頭から解任した。後任の若頭に、梶原清晴を据えた。若頭補佐には、山本健一、山本広、中山美一、白神英雄（白神一朝とも名乗った）、小田秀臣、小田芳一（小田吉一とも名乗った）が任命された。同年6月、田岡一雄は、兵庫県警から、神戸芸能社の無許可営業について、臨床尋問を受けた。同年、山健組組員が有馬温泉の賭場で勝ち、一部の儲けを山本健一に上納した。山本健一は、山健組組員で山健組の拳銃管理担当だった松下靖男（後の五代目山口組若中）に指示して2丁の拳銃を出させ、山健組若頭・東徳七郎に指示して、上納金を納めた山健組組員に、拳銃2丁を贈答した。その後、拳銃をもらった山健組組員は、喧嘩を起こし、山本からもらった拳銃で相手を殴り倒して、大阪府警に逮捕された。大阪府警は、拳銃の入手先を追及したが、自供しなかった。しかし、大阪府警は、逮捕した山健組組員の妻から、拳銃が山本健一から渡ったものだという供述を引き出した。1969年3月、山本健一、東徳七郎ら山健組組員5人が銃砲刀剣類所持等取締法違反で逮捕された。山本の舎弟・尻池実や松下靖男ら山健組組員4人が指名手配された。同年4月14日から同年4月17日まで、神戸地裁は、関西労災病院で、田岡一雄を取り調べた。同年4月25日、梶原清晴が、恐喝容疑で兵庫県警に逮捕された。同日、神戸地裁は、田岡一雄を、恐喝や威力業務妨害容疑で在宅起訴した。しかし、兵庫県警は、田岡一雄を刑務所に送ることはできなかった。