安仁原籍河南上蔡。但刘华的墓志称家族出于东晋时南渡的彭城刘氏，“而家于五羊，今为封州贺水（註：五羊即广州，贺水亦在广东）人也”。藤田丰八在1935年考证，认为他是大食（阿拉伯帝国）商人后裔，从西亚到福建泉州，谎称河南上蔡籍，而唐宋蕃客中刘姓多为伊斯兰的穆斯林。藤田氏此说遭桑原骘藏质疑。桑原认为，关于宋元祐间广州蕃坊娶宗女的刘姓人为阿拉伯人的说法，不能用以证明南汉刘氏是阿拉伯人的后裔，相反，宋元祐间广州蕃客的刘姓，可能是南汉所赐。陈寅恪在1939年撰文《刘复愚遗文中年月及其不祀祖问题》考证，「家世无九品之