二の丸の建物は1887年(明治20年)取り払われ、建物一部の瓦は寺院や民家に使用された。