Gelert var i 2 år elev hos billedskjærer C.A. Berg i København før han i 1870 begynte ved Kunstakademiet, hvor han i 1875 tok eksamen som modellerer og billedhugger. Kort etter avgangen fra Kunstakademiet stilte han ut en barnegruppe og en statue av sjøhelten Iver Huitfeldt på Charlottenborg. Han emigrerte til USA i 1887 og bosatte seg i Chicago. Han fikk etter hvert mange bestillinger og kunne bygge sitt eget ateliér. Han ble amerikansk statsborger i 1892.