宝永元年(1704年)、家宣が江戸城西の丸入りすると、兄たちと同じく幕臣に取り立てられ、西の丸小姓になった。