Не специально - это подсознательно - ясен пень, Вы хотите сократить дистанцию...А вот он по какой-то причине не очень-то этого жаждет,или настолько зашорен возможными комплексами, что они действуют на его подсознательную реакцию  - отдёргивание руки и пр.(Вообще наблюдение за реакциями подобного рода дельная штука,язык тела говорит о многом.)Кстати, то, что человек женат, ещё ничего не значит Мало тем, что ли, на форуме было про половые проблемы в семье (а может, и не только в семье, но и в частности...хотя это разбор для уже другой темысама суть ведь понятна?)?