弘化3年(1846年)斉昭が幕府より謹慎を命じられ、自らも蟄居となった。