Carl Deichman har opptegnet en anekdote om Herman Hanssøn blant sine manuskripter. Ifølge Deichman fantes det i en gammel bibel «ensteds paa Oplandene» en opptegnelse om at Herman Hanssøn en gang i et bryllup hadde gjennomstukket et bilde av Martin Luther og uttalt: «Du Munk kunde have holdt din Mund, saa havde mangen Præst ei været saa bryd som nu».