Etter at torget og rådhuset, «stemnestova», ble flyttet på 1500-tallet, ble Bryggen et helt tyskdominert område. Dermed mistet allmenningen mye av sin betydning. Bryggegården Kappen ble utvidet sørover på allmenningen som dermed ble vesentlig smalere og fikk navnet Smedsmuget. (Trolig var det gullsmedene som holdt til der; grovsmeder drev et ildsfarlig yrke som ble henvist til mer perifere bydeler.) Kommunen vedtok i 1852 å utvide Smedsmuget til 60 alen «når leilighet dertil gives». I 1865 kjøpte kommunen Kappen (nord for allmenningen) og rev bygget, samt Kjøpmannsstuen (sør for allmenningen) for å utvide gateløpet, som så fikk navnet Nikolaikirkeallmenningen tilbake også nedenfor Øvregaten. På torget kunne alle varer omsettes, unntatt plasskrevende gjenstander som tømmer og kvernsteiner. Byen hadde vokst sørover, og utover Strandsiden av Vågen (dvs. Nordnes), slik at det var behov for en mer sentral plassering av torget, som nå ble flyttet med kongens tillatelse. mini|Bryggen deles i to av Nikolaikirkeallmenningen som går mellom den høye og nyere murbebyggelsen til høyre. og de eldre lavere bryggegårdene til venstre. Foto fra etter 1910 da halve allmenningen ble hevet som en rampe til Rosenkrantzgatens nivå.