Vers 1147, le duc Conan III marie sa fille Berthe à Eudon II de Porhoët et lui laisse en apanage le comté de Vennes. L'année suivante, Conan III décède et Eudon gouverne le duché au nom de Conan IV, le fils de Berthe d'un premier mariage. En 1154, à la majorité de Conan IV, Eudon refuse de lui céder le duché ; il s'enfuit en Angleterre réclamer de l'aide de Henri II Plantagenêt. Entre 1156 et 1175, Vennes est donc la cible successive des deux belligérants et est assiégée au moins cinq fois. C'est Henri II en personne qui mène le siège à deux reprises, en 1168 et 1175. La ville doit encore une fois se reconstruire, et c'est l'évêque Guéthenoc qui reconstruit la cathédrale dans le style roman tardif.