但是古坟经宫内厅指定为第48代称德天皇（亦是第46代孝谦天皇）之墓。按《续日本纪》记载，称德天皇在宝龟元年（770年）8月4日于西宫寝殿驾崩，同日任命了作山陵司等各司，动员畿内和役夫共6,300人在高市皇子次子的旧宅兴建陵墓，在8月17日时下葬于大和国添下郡佐贵乡的「高野山陵」。按《延喜式》记载则称为远陵的「高野陵」，兆域是东西5町乘以南北3町，守墓人为5人。按《西大寺资财流记帐》记载，古坟并非是称德天皇的真正陵墓，真正的是在西大寺寺域西边的地方。然而，后来这份资料失传，以鎌仓时代德治2年（1307年）