即日后的大正天皇登基后改称为「赤坂离宫」。旧东宫御所建于1909年（明治42年），是由宫廷建筑家片山东熊所设计，宫殿採用当时风靡全球的欧陆风格，再融入日本传统特色，如正面玄关屋顶的装饰、屋顶的设计，是该时期日本建筑的代表作。建成之初的旧东宫御所有独立的发电机以提供电力，支持着整个宫殿内的电灯、电暖气机的负荷。被旧东宫御所使用过的家具目前有一部分仍保留在明治村博物馆。第二次世界大战后，日本皇室将赤坂离宫让出予政府。这段时期赤坂离宫曾经被日本国立国会图书馆、法务厅法制意见长官、裁判官弹劾裁判所、内阁宪法调查