根据《平家物语》的记载，当时鬼界岛与日本少有船只往来，人烟稀少，居民肤色很黑，语言难懂，男不戴冠、女不披发；不耕田、养蚕、织布，惟知渔猎；岛中四处都是高山，常年喷着火焰，四处充满硫磺，所以又被称作「硫磺岛」。1178年，藤原成经和平康赖先后被赦免回到京都，只有俊宽未获赦免，最终病死鬼界岛。根据现代日本学者的考证，认为鬼界岛可能是下列两座岛屿之一：