In 1474 en 1475 nam hij deel in de Bourgondische belegeringen van Neuss en Nancy en in 1476 vocht hij aan de zijde van Karel de Stoute aan de Slag bij Grandson en de Slag bij Murten. Nadat Karel de Stoute in 1477 verslagen werd bij de Slag bij Nancy, beëindigde Filips het bondgenootschap met Bourgondië en sloot hij een bondgenootschap met Frankrijk in een poging om gebiedsverlies in het vrijgraafschap Bourgondië te voorkomen. Hij bereikte echter het omgekeerde: door zijn dichte politieke connecties aan het Franse hof verloor Filips in 1493 zijn bezittingen in het vrijgraafschap Bourgondië. Om dit gebiedsverlies te compenseren, benoemde de Franse koning hem tot gouverneur en groot-seneschalk van Provence.