Чего сейчас бучу поднимать и на конфликт идти? Придет когда мужик жить, тогда хозяин квартиры  с ним и поговорит: "дядя ты кто такой, я собственник и я против твоего тут проживания, вали давай, завтра же чтобы тебя тут не было". Потому что еще неизвестно, может там новый муж сам в эту квартиру не пойдет, а вы уже с бывшей невесткой поссоритесь. Если уж предстоит конфликт, то бить наверняка, когда иного пути нет. И направлен удар будет на конкретного мужика, а не на внуков и их мать. Кстати, и дети вряд ли на вас обидятся, если чужому дядьке жить с ними не позволите, это не равно "выгнать мать из дома".