У вас просто особый случай, такое тоже бывает, у меня все было гораздо проще,но мог  быть и другой вариант, до рождения ребенка, когда вы согласились на расклад "в случае чего ребенок останется с отцом", вы ведь не знали на кого ребенок будет похож и кто его будет лучше понимать.