Раздражает Вас не муж. Муж - это объект Ваших выплесков, который доступнее всего, ИМХО. Это все-равно что, извините за сравнение, если Вам плохо и тошнит, вы все спускаете в ближайшее подходящее доступное место  Ищите нелады с собой. Чем Вы по жизни не удовлетворены, физ.состояние, мед.проблемы, высыпание и отдых, нереализ.идей и т.д.