Zamek był główną siedzibą rodziny Asano przez 12 pokoleń, aż do upadku systemu feudalnego w 1871 r. i przejęty przez rząd w okresie Meiji. Zamek Hiroshima stał się siedzibą wojsk cesarskich i główną kwaterą dowodzenia w wojnie chińsko-japońskiej w latach 1894–1895. W 1945 r. zamek został zniszczony w wyniku zrzucenia bomby atomowej. W latach 1957–1958 został odbudowany i teraz prezentuje historyczne artefakty z miasta Hiroszima.