系辞》云：「河出图，洛出书，圣人则之。」在宋朝之前，洛书的记述只有文字。九宫图实物最早发现于西汉，1977年中国考古学家在安徽阜阳县双古堆西汉古墓中发现汉文帝七年（前173年）的太乙九宫占盘，乃是中国汉代幻方的实物。东汉《数术记遗》也有记载。后来陈抟以降认为河图洛书的洛书代表九宫图，为formula_13这formula_14个数，而formula_15行、formula_15列以及两对角线上各自的数之和均为15。
杨辉纵横图.南宋数学家杨辉着《续古摘奇算法》把类似于九宫图