мой тоже также относился к малышам, когда ему было  лет пять. Причем они даже его не просто раздражали, а как мне кажется - пугали. Он мне говорил, что ему не по себе, когда они на него смотрят, как будто это инопланетяне какие-то. Сейчас ничего такого за ним не наблюдаю. Прошло видимо. Даже наоборот -  вижу что у него к детям есть определенный интерес.