Я могу ошибаться, но чаще всего "бесит" ( если это именно самое подходящее слово для реакции мужа) не сама точка зрения, отличная от его, а _источник_ этой точки зрения. То-есть, возможно он предполагает влияние на Вас какого-то конкретного человека, к которому испытывает негатив.