Hijo de Balduino I de Flandes y de Judith, una hija de Carlos el Calvo, los primeros años de su reinado fueron funestos por las continuas y devastadoras incursiones vikingas a las que Balduino reaccionó construyendo nuevas fortalezas, reforzando las murallas de las ciudades y confiscando todas las tierras que habían sido abandonadas, con lo que logró controlar un territorio muy superior al que había heredado de su padre.