Entre los visitantes más notables que ha recibido esa edificación destacan Alexander von Humboldt y Aimé Bonpland en 1799 y Simón Bolívar en 1827, además fue casa dormitorio presidencial entre 1860 y 1861, luego la edificación sería utilizada como sede del Ministerio de Guerra y Marina.