A pesar de haber profedado formalmente los votos perpetuos de celibato, tenía una amante llamada Gertrudis de Plettenberg, para la cual construyó cerca del palacio obispal de Arnsberg la residencia "Landsberger Hof".