Если от официальной границы участков отступили 15-20 см - то забор полностью находится на территории хозяев и полностью принадлежит им, так же как и полоса земли в 15-20, оставшаяся за забором. Т.е да - нельзя красить. И прислонять к нему  тоже ничего нельзя. Он находится на чухой территории.  Например - если у вас сарайчик стоит на вашей территории в метре от межи и задняя сторона сарайчика мозолит глаза соседям, то это не значит, что они имеют право пойти и покрасить стену вашего сарая, которая вид им портит.