Отец пока тоже ничего не должен делать. До тех пор, пока о некомфортности для его сына не встанет вопрос. Если встанет - в суд за определением места жительства с ним, отмене алиментов с него и назначении алименты с бывшей в его пользу. А дальше уже можно самим решать так, как захочется. Хоть все выплаченные бывшей алименты отдавать ей обратно.