Philipp Grimm ble i 1791 utnevnt som amtmann (dommer og borgermester) i sitt fødested Steinau ved elven Kinzig. Da far døde i 1796 i en alder av 45 år, sendte moren dem til deres tante i Kassel. Selv flyttet hun etter til Kassel i 1805. Fra 1798 gikk begge brødrene på Lyceum Fridericianum. Jacob begynte 1802 å studere jus ved universitetet i Marburg, men fullførte aldri studiene. Wilhelm fulgte ham et år senere på den samme studievei og samme sted.