民皆郑姓，先世原居福建省长乐县，于明末清初之际南迁，至今已有二十四代，已有约三百多至四百年历史。郑氏祖先至本区后，先居于沙田围一带，今郑氏之祖坟仍可见于圆洲角、河畔花园之后；及七、八十年后，由于该处之土地多为盐田，不宜耕种，乃迁往别处，分别迁往香輋、大輋及茅笪。「香輋」中的「輋」字，据说表示乃无水或缺水之田地，通常此等土地只适宜种植花生或麻等，此类坚实而瘠的黄土，更适宜种植香树，可能由于村民在该处种植香树，因而取名「香輋」。香輋之旁为今之黄泥头，本是一片黄土之地，故取名黄泥头，及后，郑姓人家再从香輋