Balduin (på engelsk kjent som ) var sønn av Balduin V av Hainaut, og Margarete I, grevinne av Flandern, og søster av grev Filip av Alsace. Da den barnløse Filip dro på sitt første korstog i 1177 utpekte han sin svoger Balduin V som sin arving. Da Filip kom tilbake i 1179 etter en ikke suksessfull beleiring av Harim i løpet av sitt hærtokt for fyrstedømmet Antiokia ble han utpekt som fremste rådgiver for prins Filip II August av dennes syke far kong Ludvig VII av Frankrike. Et år senere fikk Filip av Alsace sin protesjé giftet med sin niese Isabella av Hainaut, og ga grevskapet Artois og andre områder i Flandern som medgift, dette til stor misnøye for Balduin V. I 1180 brøt det ut krig mellom Filip II August og hans mentor, noe som førte til ødeleggelsen av Picardie og Île-de-France. Kong Filip II August nektet å gå i åpen kamp og fikk overtaket, og Balduin V, først alliert med sin svoger, men gikk til aksjon på vegne av sin svigersønn i 1184 i støtte for sin datters interesser.