Карија је био град тврђава за време Сенгоку периода, у зони сукоба између Имагава клан, Ода клан и разних локалних господара рата, укључујући и Нике клан и Мацудаира клан. Токугава Иејасу деда по мајци Мизуно Тадамаса обновио је Карија дворц средином 16. века. Мизуно клан вешто мењао оданост између Имагава клан, Ода Нобунага и Тојотоми Хидејоши, који пресељава клан у провинцију Исе. Међутим, Мизуно Кацунари, унуку Тадамаса је дозвољено да се врати на територију клана својг предка Иејасуа након битке код Секигахаре и даимјо од Карија власти феудал хан под Токугава Шогунатом. Власт је пребачена многобројним клановима током Едо периода, али је задржана од стране Дои клана од 1734. до Меиџи револуције.