カリフォルニア州サンガブリエル（San Gabriel）生まれ。祖父ジョージ・パットン・シニアは南北戦争における連合国陸軍（南軍）の将校で、オペクォンの戦いで戦死している。またアメリカ独立戦争で戦ったヒュー・マーサー准将の血も引き継いでおり、アメリカ合衆国設立当初から続いている由緒正しい軍人一家の一員であり、パットン本人もそれを非常に意識していた。バージニア州立軍事学校（Virginia Military Institute）およびウェストポイント陸軍士官学校で教育を受けた。