2年九鬼守隆过世后由于家族内发生继承问题，遭改封至其他地方，此后的一百年内，本地先后由、、、、入主；直到1725年被封至此地后，才由治理到江户时代结束。19世纪末明治维新后，在1871年实施废藩置县改隶属鸟羽县，但1872年的第一次府县整併中被併入度会县，1876年的第二次府县整併后再随着度会县一同被併入三重县。1889年日本实施町村制，现在的志摩市辖区在当时分属、答志村、、、、、共七个行政区划，其中答志村在1897年又被拆分出菅岛村和桃取村，坂手村则在1942年先併入鸟羽町；1954年这八个行政区