Elmira, New York
1953年3月24日、ニューヨーク州エルマイラにて、時計職人でドイツ系スイス人移民の父リチャードと、アイルランド移民の子孫である母バージニアの間に生まれた。リチャードとバージニアの間には9子あり、ヒルフィガーはその第2子だった。