Същата година Балдуин и неговата съпруга дават в църквата на Свети Донатус в Брюге кръстоносна клетва. И така Балдуин напуска на 14 април 1202 г. своето графство, за да се присъедини към Четвъртия кръстоносен поход (1202 – 1204 г.), който по подбуда на Венеция няма за цел спасяване на Светата земя, а превземане столицата на Византия – Константинопол. По време на неговото отсъствие съпругата му Мария Шампанска получава регентството над Фландрия и Хенегау.