I motsetning til en del andre gifte biskoper som hadde vært munker ble han ikke beskyldt for å ha brutt et sølibatsløfte, hvilket tyder på at han kanskje ikke hadde en bakgrunn fra klosterlivet. I sine brev til Heinrich Bullinger er han underlig taus om denne delen av sitt liv. Han nevner at han var sin fars eneste arving, og at han fryktet å miste sin arv dersom han gikk over til den reformerte troen.