Точно не помню нормативы, но соседи ваши правы.Три метра недопустимо по противопожарной безопасности. Вам не дадут разрешение на строительство. Нормативы достаточно высоки и зависят от материала, из которого построены дома.В городе вопрос решает отдел архитектуры. А если невозможно соблюсти нормативы, например, узкий участок, то нужно согласие соседей письменное.Поэтому с соседями постарайтесь не конфликтовать.