А это уже его право как пользоваться тем, что ЕМУ дали и подарили. Если бы у вашего мужа была добрачная квартира, вы бы тоже считали себя не вправе в ней жить? Или считали бы себя обязанной свекрови в ножки кланяться за то что она когда-то своему сыну квартиру купила?