，此地周遭为大名屋敷。1856年（安政3年）的绘图中可见纪伊和歌山藩德川家上屋敷、尾张名古屋藩德川家中屋敷、近江彦根藩中屋敷。此外，纪尾井坂往南至辨庆桥的低地因有清水涌出而称「清水谷」。明治以后此地陆续设立政府用地、北白川宫邸（现赤坂王子大饭店）与伏见宫邸 （现新大谷饭店）、行政裁判所（现城西大学）、尾张德川邸（现上智大学）等。1874年（明治7年），岩仓具视在赤坂喰违附近遭到袭击。1878年（明治11年），当时的内务卿大久保利通在清水谷前的道路遭到暗杀。事后，现场附近设立大久保利通哀悼碑，后改建为。