Филиппа происходила из англонормандского рода Бассетов, представители которой в XII—XIII веках верно служили королям Англии. Её дед, Томас Бассет (I), находился на королевской службе с 1163 года и занимал при дворе Генриха II Плантагенета разные административные и судебные посты. В 1163—1181 годах он был одним из баронов казначейства, а также был одним из королевских юстициариев, который проводил выездные сессии королевского суда на юге и западе Англии. Его жена, Аделиза, происходила из англонормандского рода Данстанвилей, имевшего владения в Уилтшире, Шропшире, Сассексе, Корнуолле и Оксфордшире. Её отец Алан I де Данстанвиль и его брат Роберт во время гражданской войны в Англии были сторонниками императрицы Матильды, благодаря чему оказались сначала при её дворе, а потом при дворе её сына, будущего короля Генриха II Плантагенета. От брака Томаса и Аделизы родилось 3 сына и дочь, отцом Филиппы был его второй сын, Томас Бассет (II). Как и его отец, Томас II находился на королевской службе (с 1180-х годов), служил четырём королям Англии, получив за это от них ряд владений. От короля Ричарда I Львиное Сердце он поручил маноры Колитон и Уитфорд в Девоне, а от Иоанна Безземельного — феодальную баронию в Оксфордшире, которую он удерживал а виде единого рыцарского фьефа, приносившего ему доход в 20 фунтов в год. Также ему была предоставлена опека над несколькими манорами, конфискованными у нормандских землевладельцев, перешедших на сторону французов после конфискации Нормандии королём Филиппом II Августом. Также он унаследовал манор Норт-Сток в Оксфордшире.