Après la lourde défaite du PDJ et le retour au pouvoir du PLD mené par Shinzō Abe lors des élections législatives du , il retourne donc dans l'opposition. Il prend alors de nouveau des responsabilités à la Chambre des conseillers, en étant président de la commission de la Discipline de 2012 à 2014 puis de celle des Politiques nationales fondamentales en 2016. Suite au renouvellement de la moitié des membres de la chambre haute du , qui voit le PDJ perdre son statut de première formation de cette assemblée et la coalition PLD-"Kōmeitō" y retrouver une majorité, il tente en de se faire élire à la présidence du groupe démocrate mais il est battu par l'ancien ministre de l'Agriculture Akira Gunji, par contre 33. Il décide de ne pas se représenter à un nouveau mandat lors du scrutin du et il se retire à cette occasion de la vie politique.