当大臣，2005年当选自民党龟井派会长，该派因此改名伊吹派，曾卷入KSD事件但安然脱身。是日本首相小泉纯一郎的坚定支持者之一。但也因此受到派系内支持龟井静香一派的反对，其在派系内部影响力因此受到严重影响。2006年9月，担任安倍内阁的文部科学大臣。福田康夫出任首相后，担任自民党干事长。2008年8月至9月，担任福田改造内阁的财务大臣。2012年大选自民党夺回政权后，被选举为众议院议长。