I januar 1798 ble paret separert ved kongelig bevilling. Sønnene fikk føle farens stokk, og under dramatiske omstendigheter flyktet også de fra ham i 1799 og reiste via Norge etter moren, som de gjenså i Esrom på Sjælland.