Конечно, правы. Маленькие дети вообще не обязаны спать в полной тишине. Но если уж приучили, не соседи должны думать, как вам устроить тишину, а ищите пути сами. Просыпается на улице - унеси в дом. Шумно на участке - прогуляйся с коляской в тихое место.