Тогда постарайтесь избегать таких разговоров совсем, и ни как на них не реагируйте. Тут только держатся Вам. Что делать. Другого выхода нет. Может он перебесится, и найдёт себе кого-нибудь а Вас оставит в покое. Плохо конечно, что он на ребёнке своё зло вымещает. А у Вас никакого родственника мужского пола нет, что бы с мужем Вашим по душам поговорил, и постарался убедить оставить Вас в покое?