日本海，是桧山振兴局办公室的所在地。由于町名发音与同样位于北海道的枝幸町同为，因此常以「桧山江差」的称唿来区别。町名源自阿伊努语的「e-sas-us」，意思是昆布。或者是「e-sa-us-i」，意思是海岬。
历史.江差町与函馆市、松前町同为日本人进入北海道最早开发的地区，江户时代因为附近有鲱鱼渔场以及成为「北前船」的商船航线的航点之一，开始繁荣。在1869年先后隶属函馆县、弘前县、青森县管辖，直到1872年北海道地区设置北海道开拓使后改隶属北海道开拓使管辖，并数制户长役场。