Elisabeth dari Vermandois

Philippe dan Elisabeth tidak memiliki keturunan. Pada tahun 1175, Philippe memergoki Elisabeth berzinah dan membuat kekasihnya, Gautier de Fontaines, dipukuli sampai mati. Philippe kemudian memperoleh kendali penuh atas tanahnya di Vermandois dari Raja Louis VII dari Perancis. Pada tahun 1177, ketika Philippe berangkat ke Tanah Suci, ia menunjuk saudarinya Marguerite dan suami keduanya, Baudouin V, Comte Hainaut, sebagai ahli warisnya.