Будет хуже с работой - сам виноват значит, никто его за язык не тянул. Реально хуже не должно быть, максимум разговоры за спиной, да и то, улягутся быстро. А браку скорее всего придется сказать "до свидания" после подачи на алименты, к этому надо будет быть готовой жене вашего брата.