Так это вы с ним должны говорить и прикидывать, как оно возможно будет. Как мужчина относится к вашему ребенку, а ребенок к нему. Где его дети на выходные,  общаются ли его дети и ваш ребенок. Или папа идет к ним и всё, никаких точек пересечения? Какой объем трат на содержание, что будет когда дойдет до поступления. Насколько возможен вариант, когда мама детей говорит - а теперь они живут у тебя ?