Да ситуация стандартная. Муж/партнер/сожитель начал раздражать. Все через это проходят в той или иной мере. И не имеет значения, дома он сидит сиднем или на работе с 9 до 18. Если бы он зачитывался Достоевским и слушал Битлз,  вы злились бы не меньше. Вариантов два - переждать, занять свою жизнь чем-то интересным, а его оставить в покое.  На время, на год, два. Потом посмотреть, что и как. Второй - разойтись. Но не факт, что позже вы не пожалеете.