Если решитесь, то можно подать в суд иск об определении порядка общения с ребенком, в исковом заявлении вы должны подробно изложить ваши требования (сколько раз в месяц встречаться, где, на сколько часов и т.д.), тогда никаких проблем не будет у вас с бывшим мужем, судом будет вынесено решение, согласно которому и будет определен порядок и его уже нельзя нарушать. Некоторые мамы подают иски в суд о лишении родительских прав на бывших мужей, но на мой взгляд это слишком жестоко, все таки если семья распалась, родители должны как то найти компромисс