У родителей равные права, поэтому отец может их забрать к себе, как и вы. Решение примет суд. Если вы опасаетесь этого, то можно на предварительном заседании заявить о вынесении определения. Но это затянет процесс, так как опека должна также высказать свое мнение. Иногда проще завершить сам процесс