Goldthwaite er likesom mange andre byer i Texas oppkalt etter en jernbaneansatt: Joe C. Goldthwaite fra Gulf, Colorado and Santa Fe Railway. Postkontoret ble åpnet i 1886, det første fengselet i 1888 og rettsbygningen i 1890.