Правильно что вам не нравится. Ни кому такое понравится не может. Для здоровья ....мммм  ....нельзя использовать человека и вы сама это прекрасно понимаете. С человеком помимо секса должно быть что-то еще. Что-то , ради чего стоило бы с ним общаться. Желание быть вместе и встречать закаты и рассветы совсем не относится к принципу "надо быть замужем", это просто из другой сферы, не сферы "так принято", а из личностных потребностей. И именно эти потребности этот полюбовник у вас не удовлетворяет. Человек существо стайное и ему нужна пара, а не жизнь с детьми и встречи не пойми с кем, это очень-очень тоскливо, хотя мнимая такая свобода выглядит привлекательно.