С этого нужно было и начинать. Если вы замужем, то похоже он хочет сохранить статус-кво. Не нужно ему, чтобы вы с мужем разводились. Иначе он бы каждую встречу начинал с того, что поднимал вопрос о разводе. При этом не факт, что даже при таком раскладе он реально хотел бы серьезных отношений с вами. А тут ...