执政时期更就任为五大老，势力一时无两。然而，随着关原之战失利后，宇喜多氏被流放至八丈岛，直至明治政府成立约一年后才获赦免，重回日本本土。
由来.按《宇喜多能家寿像画赞》记载，宇喜多氏是出自百济王氏的前往儿岛后冠姓宇喜多而来，而冈山藩士土肥经平编撰的《备前军记》亦提及此说法，但是指出《日本书纪》和《新撰姓氏录》中记载三宅氏为新罗王子的后裔，而非百济，并且主张三宅氏是天日枪的后裔，儿岛高德之子儿岛高秀才是宇喜多氏之祖。另外，《备前军记》亦指出按或的记载，孝灵天皇之子有三子，其中一子是三