Зачем вообще сохраняли отношения с мужем бывшим, если он как человек говно и деньги ребенку  только по чекам, да и то - не всегда? Ваш БМ удобно устроился, посадив своего ребенка на чужую шею. Поговорите с ним четко, либо он участвует морально и финансово в жизни ребенка так, как это делает нормальный отец, т.е. берет на выходные, оплачивает секции, водит на кружки и занятия, живет его интересами, либо вы сокращаете общение. А то легко быть добреньким папой издалека.