Если предварительно с вами не согласовывали забор, общую сумму и т.д., то вы ничего не должны. Мы строились одними из первых в нашем СНТ, соответственно, забор ставили со всех сторон. Даже в голову бы не пришло потом спрашивать с соседей деньги.