4 июня 1337 года в Париже он женился на Жанне де Пентьевр, дочери Ги Бретонского, племяннице герцога Жана III, внучке герцога Артура II Бретонского. Таким образом по праву жены был признан герцогом Бретани. Вместе Карл и Жанна, при поддержке короля Франции, боролись в войне за Бретонское наследство (1341—1364) с дядей Жанны Жаном де Монфор (1293—1345), его женой Жанной Пламенной (1295—1374) и их сыном Жаном Доблестным (1339—1399), поддержанных англичанами. Война за бретонское наследство таким образом явилась составной частью первого этапа Столетней войны.