I 1862 flyttet tolletaten til Wall Street, og bygningen fungerte som et av seks underavdelinger av Finansdepartementet. Millioner av dollar i gull og sølv ble lagret i hvelvene i kjelleren under Federal Reserve Banks Sub-Treasury-system i 1920.