Вмешайтесь, вмешайтесь. Я бы вмешалась. Когда мужик активизируется, вы отреагируйте как-то. Типа - это кто там детьми инересуется и в гости зазывает? А детям скажите - знаете, что такое и как называется, когда взрослые интересуются такими как вы? Вы их просто на мысль натолкните, они быстро поймут, что к чему, когда от вас получат адекватную оценку происходящему.  А то они 100% думают, что ничего такого, ну подумаешь - в гости зовет и комплименты отвечшивает. Надо им дать понять точно , что это ненормально.