Поведение мужчины совершенно нормальное.Он просто проверяет, годитесь вы в любовницы или нет. "Годиться в любовницы" в его понимании это поддержание такого режима встреч, которым он будет управлять сам. Захотел - свистнул, вы прибежали; не захотел, вы сидите тихо, желательно также объясняетесь ему в любви, выражаете свое желание видеться с ним, но, пока он не свистнет, никаких действий не предпринимаете. Ему нужна УДОБНАЯ любовница, другими словами бесплатная женщина по вызову, которая из любви к нему драгоценному будет всегда готова одарить сексом и положительными эмоциями, не вмешиваясь в его жизнь.  Он хочет иметь отношения на стороне, но так, чтобы они не доставляли никаких хлопот, чтобы ничем не нужно было себя стеснять, чем-то поступаться. Отсюда и исходите, определяя свою тактику поведения, если, конечно, вас устраивает такое положение вещей.Вы должны стать любовницей на ЕГО условиях. Вот, что от вас требуется. Не вносить никакой сумятицы в его жизнь. Чем больше вы будете выражать недовольство, тем дальше он будет откатываться, ему проблемы не нужны.Другой наиболее вероятный вариант совсем грустный, но его уже озвучили.