Det første byggetrinn ble reist i 1697, byggherren var trolig handelsmannen Mads Wiel. Datteren til Mads Wiel, Anne Cathrine, giftet seg i 1716 med trelasthandler og skipsreder Peter Petersen Arbo (12. Juni 1689–25. November 1761). Paret flyttet inn i gården og da Arbo bygde seg opp til å bli ladestedets ledende borger, sørget han for at gården gjenspeilte hans posisjon i samfunnet. Han forlenget i 1718 hovedbygningen østover med en skreddersydd sal i andre etasje. Senere i 1767, ble gatefasaden og storstua modernisert i rokokkostil av amtmann Andreas Fieldsted. Det var på denne tiden at den utformede hovedinngangsdøra ble satt inn som blikkfang på gatefasaden. I 2019 ble eiendommen seksjonert så den nå består av seks leiligheter og to næringsseksjoner.