А ему было удобно вас бросать и ваши общие деньги на любовницу тратить?.. Кто везёт на том и едут.  Идите к юристу,  узнавайте,  что можно сделать с жильём и как вам развестись с наименьшими для себя потерями.  Вот прямо завтра,  потому что за первой феей как правило следует вторая.