Зависит от того, какие насколько братские отношения у Вашего мужа с братом, и отношение Вашего мужа к поступку бывшей жены брата. Если ему пофиг, типа сам виноват, то общение уместно. А если наоборот, брата жалеет, ее осуждает, то держитесь от той дамы подальше, неизвестно, как эта дружба может повлиять уже на Ваши отношения с мужем.