大甲郡大肚庄人（现台中市大肚区大东里），人称「大只牛港」。中学毕业后，在台中市以木炭商为业。自1924年起，赵港不满家族世代耕作的土地放领给内地退职官员，继而展开一连串抗争活动，之后于1926年筹组「大甲农民组合」，成为中部农民运动先驱，与凤山地区的简吉并称台湾日治时期农民运动的领袖人物。1928年受到谢雪红的影响，加入台湾共产党。1931年因「台共案」入狱，被判12年。1935年尚在刑期，但病重难癒，获准出狱，不久病死家中。1946年6月17日，赵港入祀新竹县忠烈祠（今桃园市忠烈祠）。Se