Høegh fikk etterhvert problemer med å livnære seg som arkitekt. I 1848 ble han syk, konen døde og han måtte selge huset sitt. I 1849 ble han erklært sinnssyk og året etter ble han umyndiggjort. Han døde to år etterpå, 44 år gammel.