Grimstad vokste fram i middelalderen som et strandsted til gården Grøm. Stedet er nevnt i 1528, og skal være avmerket på hollandske kart tidlig på 1600-tallet. I 1791 ble Grimstad ladested.