Midt på 1800-tallet ekspanderte klippfiskproduksjonen ut over det fiskeriene på Nordmøre, Romsdal og Trøndelag ga av råstofftilgang. Byens kjøpmenn måtte satse på oppkjøp av råfisk i Lofoten og Finnmark for å tilfredsstille etterspørselen. Byen fikk en stor flåte av små seilfartøyer, jakter og galeaser til denne trafikken. Markedet ble også utvidet, blant annet til Amerika. Byens klippfiskkjøpmenn tjente godt og Nicolai H. Knudtzon ble på slutten av 1800-tallet regnet som Norges rikeste mann.