ペンブルック伯
第2代ペンブルック伯爵とその妻での娘の間の次男として生まれる。母方の伯父にフィリップ・シドニーがおり、彼にちなんで名付けられた。また第3代ペンブルック伯ウィリアム・ハーバートは兄で、1623年にウィリアム・シェイクスピアの作品集『ファースト・フォリオ』を編集したジョン・ヘミングスとヘンリー・コンデルから献呈され、兄共々「世に並ぶものなき兄弟」と称えられた。