El actual "Santuario menor" fue construido en 1828 por Ienari Tokugawa, el 11.º shōgun del Shogunato Tokugawa.