Mye på grunn av det nøytrale danske flagget og byens status som frihavn ble Charlotte Amalie et av Vestindias viktigste handelssentra. Byen hadde i perioden 1750–1850 et sterkt kosmopolitisk preg og ble på 1800-tallet Danmarks nest største by.