Может, с ним не разговаривать? не принципиально молчать, а не пытаться "поговорить по дуахам", мнения не спрашивать (типа "как я выгляжу?", "что ты думаешь о …." и пр.). Общайтесь как общались бы с соседом по коммуналке. Мне в свое время помогло.