後に渋谷村となる地区には、近世末には上渋谷村、上豊沢村、中渋谷村、中豊沢村、下渋谷村、下豊沢村の6村と渋谷広尾町、渋谷宮益町、麻布広尾町などの町地があった(他にいくつかの小規模な町があったが、明治初期までに廃止されている)。