ИМХО, до трех лет некритично, сколько времени они проводят с папой, особенно, если папа приходит регулярно, всегда можно приподнести, что "так и надо": прогулки, игры и занятия с папой два раза в неделю, в остальное время у папы свои дела, у вас с ними - свои(и в полных семьях много работающие папы, бывает, чаще видят детей спящими). После трех хорошо бы, чтоб у папы голова болела о "мужском воспитании" и привычный уже график, если и нарушался, то в сторону увеличения совместного времени. Т.е. не стремитесь брать на себя слишком много, если есть, на кого "свалить" эту часть.