成长中政务由保守派的重臣辅佐，齐昭被禁止干涉藩政。幕府在马休·佩里率领美国军舰队来航要求通商后与13代将军德川家定的将军后继问题引起了御三卿之一的一桥家的养子庆喜（德川庆喜）与纪州德川家德川庆福（后来的德川家茂）在推举上与南纪派对立。一桥派的支持者老中阿部正弘去世，安政5年（1858年）井伊直弼成为大老，井伊对于一桥派开始展开安政大狱弹压。庆笃与其父齐昭及尾张藩主德川庆恕登城对井伊诘问，结果齐昭被下了隐居幽闭的处分，而庆笃则是停止登城。文久2年（1862年）藩内的过激派发动坂下门外之变，袭击老中安藤信正