以元禄赤穂事件闻名的赤穂藩浅野家藩邸。前野良泽等人在中津藩奥平家中屋敷完成解体新书，为兰学事始之地。1858年（安政5年），福泽谕吉在同地开办兰学塾，也就是庆应义塾的前身。
明治期.1869年（明治2年）设置筑地居留地，为文明开化的中心。同年，本地的运上所（现东京税关）内设置电信机役所，连结横滨裁判所（现横滨地方裁判所）的电报线路是日本第一条公共电报线路，为电信创业之地。英国传教士亨利·福尔兹滞留此地，因日本有拇印的习惯而开始研究指纹，是指纹研究发源地。明石町除了前述的