Можно попробовать сделать перерыв в разговорах, а там видно будет. Еще важно, как и что вы говорите. Если что-то типа как вы скучаете, как жаль, что не можете приехать, - в этом может быть дело. У нас такие разговоры плохо влияли, а уверенный конструктив на тему "как дела" идет совершенно без проблем.