第四个孩子。卢永根的祖父是广州花县人，因年轻时家贫，辗转至香港谋生，起初在海味店当伙计，后经打拼，得以在香港立足，家境逐渐殷实。卢永根的父亲卢国棉兼受中西教育，是香港一家英国律师行的高级职员。卢永根的母亲则出身贫苦农村家庭。1936年开始，卢永根入读香港粤华中学附属小学，受到较好的教育。但1941年，卢永根读四年级时，香港沦陷，香港被日军占领。香港局势紧张，卢永根的父亲卢国棉失业了，卢永根与兄弟姐妹被送回故乡广州花县避难。但是当时花县也沦陷了，时常有日军到乡下骚扰，生活并不安宁，而且家乡的物质生活非常贫