에도 성
그 후 다카토라는 에도 막부의 중신이 되었다. 에도 성 개축 등에도 힘썼기 때문에 게이초 13년(1608년) 이카 일국 및 이세 8개 군 22만 석에 가증 이동된다. 이세 쓰 번의 번주가 되었다. 이에야스는 다카토라의 능력과 충의를 높게 평가해서, 도자마 다이묘임에 불구하고 대우는 후다이 다이묘로 중용한다.