Так он вам чужой, а чужих не любят. Вы его не воспитываете, он вам только дискомфорт создаёт. Возьмите отпуск, отпустите няню и с ним с утра до вечера. Только лучше года в 3. Глядишь и полюбите. Если нет, тогда ой. Лучше уж и правда отдать.