后来的石上氏）是同一祖先。阿刀氏这个姓氏是来自于物部守屋在阿都（河内国涩川郡迹部乡，现大坂府八尾市迹部一带）的而得名。天武天皇元年（672年）开始，阿刀氏首次出现在历史文献上，因此可能是当时物部氏衍生而成的分支。
历史.阿刀氏的姓最初是，其后天武天皇13年（684年）制定八色姓时，宗家的阿刀氏便获赐姓为宿祢。然而，在8世纪之后仍然存在以「连」或「造」等为姓的分支阿刀氏。阿刀氏的居住地分别是山背国爱宕郡（现京都市左京区和北区一带）、山背国相乐郡（现京都府相乐郡）、摄津国丰岛郡（现