Han var født i Poissy, som sønn av Ludvig XI og Margrete av Provence. Før han besteg tronen var han greve av Orléans. Han fulgte sin far på Det åttende korstog i 1270. Hans far døde i Tunis og der ble Filip utropt til ny fransk konge 25 år gammel. Tross tilnavnet, som viste til hans evner i kamp og på hesteryggen, regnes han ikke som noen sterk konge. Som konge var han dominert av Pierre de la Broce og deretter av onkelen Karl I av Sicilia.