Чужое дерево Вам опасно только тенью, если конечно оно здоровое и не заваливается на Ваш участок. Ну представьте, разбили Вы свои неск грядок, проходит неск лет и грядки оказываются в плотной тени. Не катастрофа, но неприятно и придется решать проблему. На участке рослые плодовые деревья (яблони, груши) сажают как мин в 3-х м друг от друга, а лучше в 4-х. На карликовых и полукарликовых подвоях - можно ближе. Яблони, сливы - тоже примерно в 3 м. Кусты плодовые любят солнце. Полутень выносит жимолость, ч смородина тоже расти будет, но на солнце ягоды слаще. Малина  - на солнце и считается, что плохо соседствует с яблоней.Забор 2 м - это конечно высокий, но соседский дом в 2 этажа вряд ли полностью скроет. И скорее всего Вам не захочется валяться в шезлонге или загорать там, куда смотрят соседские окна. Или у соседа мб стоянка для машины и оживленный трафик , даже через забор от него не очень хорошо будет размещать площадку для малыша. Надо побродить по участку и посмотреть, откуда что видно, еще лучше сфотографировать существующий вид с разных точек участка, а так же из окон, где чаще бываете в доме. Вот я о чем.