Dårlig helse og/eller økonomiske problemer skal ha vært bakgrunnen for at Grøgaard med familie dro til USA, nærmere bestemt Texas, på 1840-tallet. Der døde han dessverre, og etterlot seg kone og barn. Det var egentlig meningen at Grøgaard skulle være de norske kolonistenes prest og lærer, men han endte opp med å drive butikk isteden.