Может вы и правда очень разные. Что значит не выходит на контакт и что конкретно вас не устраивает в общении с ним? Вы хотите обсуждать с ним прошедший день, а он уходит, не дослушав? Можете пример привести? Может быть менять нужно вам обоим, так часто бывает. Либо вы усложняете?