Byggearbeidene på Harmonien var i gang i 1769. Nøyaktig årstall for ferdigstillelse er ikke kjent. Over portalen mot Munkegaten var årstallet 1770 utskåret, men hovedbygningen var ennå ikke ferdig innredet, selv om det i desember dette året ble holdt branntakstforretning over de nye bygningene. I branntaksten ble de beskrevet slik: «1. Huus Bygning i Øster uinnredet med 2. En Siide Bygning i Nord, sammentømrede 3. En Tverbygning i Vester. 4. Et dobbelt Vognskiul i Søer. 5. Et Stabur i Baggaarden. 6. Et dito væst ved.» slektsforskeren Otto Delphin Amundsen siterer i sin avisartikkel om Harmonien en kilde fra 1771, uten å oppgi hvilken, der det sto at «bygningerne ikke blir færdig til beboelse dette aar».