Gjennom de neste generasjonene var huset i Moltkefamiliens eie, men med fremskritt i infrastruktur og teknologi ble behovet for en egen residens i København mindre nødvendig. På 1920-tallet kunne en reise fra familiens gods Bregentved til København, som tidligere hadde tatt to dager med hest og vogn, gjøres på mindre enn to timer og forretningsvirksomheten kunne ofte håndteres ved hjelp av telefonen. Moltkefamilien besluttet seg derfor for å selge huset og i 1930 ble det solgt til Håndværkerforeningen.