进行外廓扩张的工程，并将城廓改造的更为坚固，且增建了御殿。彦根城约在1622年正式完工，一共花了近20年的建造时间。在1633年，直孝受封35万石，是德川家康下谱代大名中受封最高的将领。1677年，井伊氏更以唐玄宗的离宫庭园为概念，在彦根城中兴建了玄宫园。园内的凤翔台可从下往上眺望彦根城，是藩主招待贵宾之处（现已成为日式茶道的茶室）。幕府末年，1850年，井伊氏第14代中有名的大老井伊直弼成为彦根城的末期藩主之一。其子井伊直宪即彦根城最后一代藩主，日本废藩置县之后，井伊氏与彦根城的关系依然相当紧密，