Helst så han at det ble oppført stenhus, men avfant seg med at kjøpmenn og borgere fra Væ gjenoppførte bindingsverkshus med materialer fra den nedlagte byen. De fornemste tomtene ved Store Torv, nær den påtenkte slottsbygningen, var forbeholdt fremtredende personer, mens kjøpmenn holdt til omkring Lille Torv. Håndverkerne ble henvist til mindre representative bakgater.