Toulouse ble vunnet tilbake av Vilhelm IX for sin hustru i 1113, etter at Bertrand døde i Syria i 1112. Hans arving var hans halvbror, den ni år gamle Alfonso Jordan, som Vilhelm IX rimeligvis ikke fikk motstand fra. Fra 1114 tilbrakte Filippa det mest av sin tid som hersker i Toulouse. Etter sigende var hun svært misfornøyd da hun kom tilbake Poitiers fra Toulouse og oppdaget at hennes ektemann hadde flyttet sin elskerinne Dangereuse de L' Isle Bouchard inn i hennes palass. Filippa appellerte til venner og til kirken for å støtte til å få elskerinnen kastet ut, men forgjeves – ingen kunne eller våget å overtale hertugen om å oppgi sin elskerinne.