河瀬村の南部に位置し、1500年代より河瀬氏が郡家として周辺一帯を統治していたのが由来。