14世纪后为北畠氏在伊势国崛起，取代了伊势神宫成为此地的实质支配者。江户时代后大部分区域成为津藩领地，另有部分区域属于和纪州藩；19世纪末明治维新实施废藩置县后，这些区域分别给隶属津县、鸟羽县和和歌山县，直到1872年的第一次府县整併中，全数被划入度会县，但在1876年的第二次整併中又随着度会县一同併入三重县。在1879年实施时，正式的设置了近代的行政区划「饭野郡」，并在松坂城下（位于现在的松坂市）设置「饭高饭野郡役所」，同时负责管辖饭高郡和饭野郡。