后成为战国大名的北畠氏在伊势北部的重要据点。在南北朝时，城池乃南朝北畠氏的势力范围，在称光天皇即位后北畠氏在城池举兵，并且与足利幕府军队交战，虽然最终战败，但是以米洗马的传说却流存至今。尽管，北畠氏在阿坂城战况失利，但最终成功与幕府和解而存续下来。进入战国时代后，织田氏家臣泷川一益曾经再三拒绝攻打阿坂城，而丰臣秀吉攻打城池期间亦曾经被箭射中，这是他生涯唯一一次在战事中受伤。1982年，城迹以阿坂城迹附高城迹枳城迹（）之名获指定为日本国史迹。
概要.城池在《满济准后日记》中写作浅香城