文化2年(1805年)、島津斉宣の命により、家老に就任。