Скажите им, что Вы готовы общаться с их семьей, Вы одна, без своих мужа-детей. Если их устраивает - хорошо, если нет - это их выбор. Принуждать к общению у мужа Б нет права, равно как и что-то там выговаривать о порядке общения. Если бы на меня наскакивал вот такой молодец, я бы ему открытым текстом сказала - или так, или никак, и никаких претензий в мой адрес чтобы я не слышала.