У вас вполне нормальная ситуация. Если отец нормальный, а вы работающая мама и видитесь с ребенком по выходным и празникам, то никаких проблем нет. Главное, "разрешить" себе так жить. Любите сына и полноценно проводите с ним то время, которое можете проводить.