同父异母的妹妹冯宝宝亦是香港着名演员。而已故弟弟冯克安是70至80年代功夫电影演员及武术指导。另一名弟弟冯治安曾干犯伪造文书及讹骗罪。由于自小出入片场的关系，冯素波自小已经认识已故演员伊秋水和冯应湘。她于广东省中山县石岐出世，后来前往香港读姨婆与友人在太子道369号楼下开设的洁莹幼稚园。七岁，即1951年起于钻石山大磡村对面永康园入读永康中学附属小学（小一）。后分别就读深水埗德贞小学、般含道一带的西南学校、皇后大道西506-508号凯铭学校、英皇道琴行街钖光学校、香港培道小学（小五）以及广州至宝桥五中心小学