Grimm deltok aktivt i den ungarske revolusjonen i 1848/49. Etter at oppstanden var slått ned flyktet han til Tyrkia der tegneferdighetene sikret ham arbeid som kartograf i den osmanske generalstaben i Aleppo, seinere i Konstantinopel. I 1868 vendte han tilbake til Pest hvor han bodde til sin død.