Не приходилось с младенцами бороться, потому что у соседей никто не рождался. Что касается всех остальных шумов, то таки да - если есть способ от шума избавиться(разговором с хозяином, если речь об арендаторах, вызов милиции, включение громкой музыки в отместку  и т.д.), то как раз таки адекватный человек будет бороться, потому что постоянные шумы - это прежде всего вред здоровью.