Su fundación fue impulsada por el director del Real Colegio de Cirugía de la Armada, Pedro Virgili, quien el 22 de abril de 1749, aún con el edificio del colegio en construcción, solicitó al marqués de la Ensenada un terreno para cultivar plantas.