厅志》曾记载：明郑时期，相传郑军北伐至此处，荷兰人因此遭到驱离，当时汉人对荷兰人等都泛称红毛番，而把港口命名为红毛港。除了这个说法外，关于红毛港的命名来由还有其他说法，包括昔时有生番数人架小屋居港南凤鼻尾附近，其发红，故将本港称为红毛港。另一说嘉庆年间英国人採购樟脑在此港运出，故人称该港曰红毛港，但此说不可信，因《干隆台湾舆图》就已记载红毛港之地名。清初时，红毛港为北部对大陆地区主要的出纳港口之一，出口以樟脑、米、茶等为大宗，并进口肥料、棉花、布、酒等等，成为西北沿岸台湾物资集散地之一，是当地客家移民