Представьте себе танец. Вы стоите, не двигаясь с кислым лицом, он топчется рядом, пытается "вести". Вы кривите лицо еще больше. Он перестает даже топтаться.Ну если Вам не нравится как общение складывается - делайте что-нибудь. Переведите тему на интересную Вам, разрядите обстановку шуткой, если совсем не нравится - под благовидным предлогом заканчивайте бодягу.