Если прямого разговора не будет, то он вполне может такое поведение воспринять, как угасание отношений. И если он не умеет разговаривать на "серьезные" темы, то может тоже начать отдаляться.Может лучше выпросить полку для вещей?  Посмотреть на реакцию, а потом уже продолжить наступление