制国时代属于近江国，根据10世纪完成的《和名类聚抄》，在当时高岛郡下有木津乡、鞆结乡、善积乡、河上乡、角野乡、三尾乡存在，而后本地的木津庄则是延历寺天台座主直辖庄园，曾为延历寺的主要经济来源，在当时木津野市琵琶湖西岸的主要港口。12世纪后，近江国为佐佐木氏所控制，将高岛郡安排给次男高信，此后成为高岛高信，在此建立，成为的始祖，其子孙在分散到高岛郡各地后，又陆续分衍出、、、横山氏、田中氏、的分支家族。16世纪初浅井亮政崛起掌控了北近江以浅井郡的区域后，将势力往西扩张至此，高岛氏一族因而臣服于浅井氏，直