Ваш муж прав в том, что это его мама, а вы его жена, и для него вы дороги обе. Вы правы в том, что если человек вам неприятен и вы от него не зависите, то общаться с ним вы не обязаны. А реальность такова, что если вы не найдете и не пойдете на компромисс, то можете разрушить свою семью. Так что решайте сами что для вас дороже.