Автор, не обижайтесь, я с мужской стороны скажу.Что то мне кажется что муж не очень спешит домой. Не комфортно ему почему то.Постарайтесь выяснить аккуратно почему. Понаблюдайте, поговорите аккуратно вокруг да около.Вспомните, наверняка он говорил, только Вы не обратили внимания.Это может быть шумные дети, может быть бардак в его комнате, может быть ужин не вкусный.Не обижайтесь, это предположения.Радует то что сексом он вам часто спать не дает, это очень хороший признак. Расширяйте работу в этом направлении