Ну вы же с ним перекидываетсь парой фраз в начале? Вот он и смотрит, считает, что ему можно. Может быть у вас такой вид, как будто вы ожидаете от мужчины продолжения. Если вам некомфортны эти взгляды, почаще поворачивайтесь к нему спиной, делайте вид, что вы в домике. Выше вам наушники рекомендовали, они тоже помогают