Carlos Francisco de Croix, respondió al temor de un posible ataque inglés después de que estos invadieran La Habana en 1762. Durante la guerra de Independencia sirvió de resguardo para los regimientos de España, posteriormente albergó al primer Colegio Militar y se mandó destruir en la década de 1850 sin éxito, para permanecer abandonada hasta la época post-revolucionaria cuando fue habilitada como cárcel estatal hasta 2008 cuando se empezó a rescatar para museo; sin embargo actualmente no recibe ningún mantenimiento por parte del gobierno.