Определите ему время, раз просит. Расскажите о режиме дня - когда ест, когда спит, когда гуляет. Пусть приезжает и пробует забирать. Думаю, учитывая его богатейший опыт общения с ребёнком один на один, и его поведение после разъезда, не будет и одной встречи . Не вступайте в баталии - сам отвалится!