Вполне ожидаемое поведение женатого мужчины. Семья для него - это ответственность и долг. Любовница - любовь и эмоции. Если мужчина из семьи не уходит, значит ответственность для него выше любви. И ставить под угрозу спокойствие своих семейных отношений он явно не будет ни при каких обстоятельствах, даже если с вами лично что-то случится.