La construcción de las torres empezó en 1808 y terminó en 1812; fueron construidas por James Henry Craig.