Ну мало ли с кем связан ваш муж. Это же не значит, что вы должны улыбаться неприятным вам людям  в неформальной обстановке. Встретитесь на работе с ним - поздороваетесь. Больше ничего не надо. А уж с ней вас и вовсе ничего не связывает.