Grosch var født og oppvokst i Lübeck i Tyskland hvor faren var klokker i Petri kirke. 27 år gammel kom han til København og begynte å studere ved Det Kongelige Danske Kunstakademi.