Если инициатива исходит от вас - развод получите. Могут дать какое-то время на приирение, но разведут. Это ОН не сможет получить развод по своей инициативе. Он, но не вы. Болтает - да пускай болтает. Нет рядом мужчин, которые помогли бы его выставить из квартиры?