すると、それに耐えかねた一言主は、天皇に役行者が謀叛を企んでいると讒訴したため、役行者は彼の母親を人質にした朝廷によって捕縛され、伊豆大島へと流刑になった。