1983年12月には、第63代衆議院議長(在任期間・1983年12月28日-1985年1月24日)に就任したが、体力の衰えが進行していた1984年12月1日召集の第102通常国会では議事内容の読み違いをした上、1985年1月には国会の開会式のリハーサルで、玉座から後ろ向きに階段を下りる「右進退左」の所作がうまくできない(天皇に尻を向けてしまうことになるため)ということもあって、議長を辞任した。