妻は女優のキャシー・ヒルトン（キャシー・リチャーズ）、キャシーとの間に2男2女あり、長女はパリス・ヒルトン、次女はニッキー・ヒルトン、長男はバロン・ニコラス・ヒルトン、次男はコンラッド・ヒューズ・ヒルトン。
芭黎丝出生于美国纽约市，父母是著名希尔顿酒店集团主席巴伦·希尔顿的第六子理查德·希尔顿与著名的凯西·希尔顿，家中有四兄弟姊妹，以芭黎丝排行最大，其次是她的妹妹妮姬·希尔顿，排行第三的弟弟是巴伦·希尔顿二世，年纪最小的弟弟是康拉德·希尔顿三世。