寛政8年(1796年)、幼少の徳川家慶の付属となり西丸勤務となる。