，1810年的皇室文献则把槟城称为「劬劳藁」，意义与「槟榔屿」相同。从1840年代起，包括思想家张永记在内的越南天主教徒便开始前往槟城，修读神学。当时来自南圻的华人会航行到西南方的登嘉楼苏丹国，售卖家禽和稻米，有的甚至会留下来，融入当地的华人社会。胡志明曾经在1920年末、1930年代初协助马来亚的共产主义者成立南洋共产党（后来的马来亚共产党，即马共），在这件事上发挥了关键的作用。他到过马来亚几次，曾经在1930年4月到柔佛巫罗加什主持马来亚共产党的成立典礼。同样来自越南的莱特曾经在1934年至1938