水野家の後は松平康長にはじまる戸田松平家(戸田氏の嫡流)が代々居城とした。