Ваши "мысли" ему до лампочки. Все любовницы (незамужние) рано или поздно начинают требовать от любовника решения в ее пользу. Это старо как мир. И Ваш любовник не вчера родился, скумекать-то поди может, что лучше иметь замужнюю любовницу.