皇居より西に位置する領域。南の新宿通り、北の靖国通りに挟まれ、東端は半蔵濠から牛込見附、西端はJR東日本中央線が走る旧江戸城の外濠（跡）である。明治初期に四番町の大半が富士見町として独立し、昭和初期の街区改正によって九段（南北三・四丁目）が設定されて番町地域から分立した。
歴史.
江戸時代の旗本のうち、将軍を直接警護するものを大番組と呼び、大番組の住所があったことから番町と呼ばれた。大番組は設立当初、一番組から六番組まであり、これが現在も名目だけ一番町から六番町に引き継がれている。しかし江戸時代の大番組の組番号と、現在の町目の区画は一致しない。江戸時代の番町の区画は、通りに面して向かい合う二連一対の旗本屋敷の列を基準に設定されたものだからである。
概念的に説明すると、江戸城の内堀に面する縦軸の番町として、千鳥ヶ淵に沿った南北に走る道（現青葉通り）を基準に一／二番町（新道一／二番町）が置かれた。次に江戸開府以前からの古道である、東西に走る麹町通り（新宿通り）を横軸にし、それに平行する道路を基準に、麹町通り側から北上して、裏／表二番町、裏／表六番町（表六番町は現在の二七通り沿い）、三番町（現在の靖国通り沿い）、表／裏四番町（靖国神社境内の北半分から富士見町一帯）と配置されていた。
五番町だけは新道一番町の南側に続く半蔵壕に面した地区（現英国大使館とその裏側）とされ面積も狭い。西に連なる麹町通りの北側は、千鳥ヶ淵に連続する水面を埋め立てた谷間の低地（麹町谷町）を中心にして元園町とされているが、江戸切絵図（尾張屋版「番町大絵図」など）によれば、さらに西側の四谷見附寄り（現在の千代田区二番町と麹町四丁目の境界付近）まで五番町と表示されているところから、本来の五番町は、麹町通りの町人地の北側に沿って細長く設定されていたものと考えられる。
また直線状の区画から外れた堀端の三角地帯を、土手三番町（現五番町）や土手四番町（現富士見二丁目一帯）、堀端一番町（現千鳥ヶ淵戦没者墓苑一帯）などと呼んで、番町の独立した一街区とした。