藩主富田信高转封至伊予宇和岛藩，将今治周边的越智郡2万石、伊贺一国以及伊势8郡22万石均加封予高虎。家康对高虎的才能与忠义都有很高的评价，使得高虎虽然身为外样大名，却与谱代大名有同规格的待遇（别格谱代），是第一代伊势国津藩藩主。大坂夏之阵中，面对长宗我部盛亲的军队时陷入苦战，家臣藤堂良胜与藤堂高刑等600人因而战死，后来因长宗我部盛亲主动撤退下才获胜利。战后因功绩增加为32万石，同年闰6月陞任从四位下。然而，此战因与独断专行的家臣渡边了有所冲突，因此相互决别。家康死去之际，是唯一随侍在侧的外样大名。