これを機に反対派が強くなって12月には隠居させられ、天保11年(1840年)には領外追放になった。