島津氏
1879年(明治12年)には和館が建設されたが、それが老朽化した後の1906年(明治39年)には日本政府の招きで来日し工部大学校建築学科教授を務めていた英国人ジョサイア・コンドルに洋館の設計を委嘱。その後数度の設計変更を経て、1915年(大正4年)に竣工が開始されて1917年(大正6年)に洋館が完成した。完成と共に大正天皇、貞明皇后の行幸啓を賜った。敷地は2万8000坪あったが、昭和恐慌で維持が困難になり、1929年(昭和4年)に8000坪を残して他を売却。第二次世界大戦中には戦争の激化で大邸宅の維持も困難になり、邸宅を日本銀行に売却した。しかし、邸宅は戦災を受けるのを免れ、占領中には駐留軍の宿所に使用されていた。1961年(昭和36年)7月に清泉女子大学が日本銀行からこの土地と建物を購入しており、この翌年から現在まで同大学の校舎として使用されている。邸宅は重要文化財に指定されている。
島津忠重公爵の長男である島津忠秀はアユを専門とする水産学者だった。
皇室との縁戚関係も深く、昭和天皇第5皇女である清宮貴子内親王は佐土原島津家の島津久永に嫁いで島津貴子となった。第125代天皇明仁から見ると、自身の祖母が島津家(島津忠義の七女・俔子が香淳皇后の母)であり、かつ自身の妹の清宮貴子内親王が島津家に降嫁している。2003年(平成15年)には当時在位中だった明仁が沖縄県を訪問するにあたって自身が島津家の血を引くことについて触れている。
室町時代後期に入ると、領域内各地の国人や他の島津一族による闘争が加速化され、さらに薩摩大隅日向守護家は衰退する。
そして島津氏一族の中から相州家の島津貴久と薩州家の島津実久が台頭して他家を上回った。
貴久は一時期薩摩大隅日向守護家の14代・忠兼(後の勝久、12代・忠治、13代・忠隆の弟)の養子として迎えられる。しかし勝久は実久に誑かされ、守護復帰を目論んで貴久との養子縁組を解消した。ただし、近年の研究では傍流から当主になった勝久と重臣達の確執の存在や勝久に反発する重臣たちの中には貴久や実久を擁立する動きがあったこと、実久が一時期守護家当主および薩摩大隅日向守護として迎えられて国内をほぼ掌握していた時期が存在したことが明らかになっている。
その後、勝久は実久により薩摩を逐われて、母方の実家である大友氏を後ろ盾として頼み豊後国へと亡命する。
貴久は実久と守護職を争い、遂にはこれを武力で退け、薩摩・大隅を制圧した。前述の研究では、この際に実久が重臣たちの擁立によって勝久に代わって守護に就任した事実は消されて、反逆行為として書き直されたと考えられている。
さらに島津公爵家の分家として島津忠弘家、島津忠備家、玉里島津公爵家の分家として島津忠欽家、佐土原島津伯爵家の分家として島津健之助家、薩摩藩の一門家臣だった重富島津家の島津珍彦、垂水島津家の島津貴暢、宮之城島津家の島津長丸、日置島津家の島津久明、都城島津家の島津久家、今和泉島津家の島津隼彦、加治木島津家の島津久賢が男爵に叙された。島津家から出た華族家は合計14家にも及び、この数は松平家(29家)に次ぐ。
1891年(明治24年)5月6日に島津忠義公爵は訪日中のロシア皇太子ニコライ(後のロシア皇帝ニコライ2世)を鹿児島の邸宅(仙巌園)に招いた。忠義は洋服を着ない外国人嫌いで知られたが、この時には自ら接待を買って出て旧家臣の老武士170人とともにニコライを迎えた。旧家臣たちは先祖伝来の甲冑を身に着けて侍踊りを披露し、忠義自身は犬追物を披露した。皇太子に随伴していたエスペル・ウフトムスキー(ロシア語版、英語版)公爵は封建主義の残滓とこれに不快感を覚えているが、ニコライ皇太子は楽しんでいた。ニコライと島津家の友好はその後も数年間維持された。
1898年(明治31年)の日本国内の高額所得者ランキングによれば宗家の島津公爵家の年間所得は21万7504円に及び、5位にランクインしている(旧大名華族でこれより上位なのは前田侯爵家の3位26万6442円のみ)。
島津公爵家の邸宅は東京市品川区五反田袖ヶ崎にあった。