由仓敷代官所负责管理，直岛城后来亦因大火而毁灭。在江户时代末期，直岛先后交由高松藩、土佐藩管理，在废藩置县后，亦曾先后隶属仓敷县（现已合併为冈山县）、丸龟县，最后随着丸龟县一同併入香川县。1917年三菱财阀在此设置直岛制鍊所（后转移给），在此生产铜，并成为岛上的主要产业。1960年代后，岛上开始朝观光产业发展，设立露营场。1987年起开始在岛上收购土地，先后设立的研修所、露营场，并决定在直岛南部建立一个文化村，在1992年成立了同时兼具美术馆及旅馆功能的。2005年起又陆续开设了地中美术馆、。