Да я все понимаю, вы привыкли, у вас свой режим и т.д и т.п. У меня муж  вовсе уезжал в длительные командировки, сначала скучаешь, потом привыкаешь, потом уже находишь в этом преимущества , а когда возвращается вся цепочка в обратную сторону...Но слово "раздражает" меня бы задело.Представляете, если бы он уходил на работу, в том числе потому, что его Ваше присутствие раздражает???? Ну жили бы вы с человеком с этим знанием?