У нас так на даче было (живем все с ранней весны до поздней осени). Пока несколько раз прямо не сказали, ничего соседи (пожилая пара семейная) не понимали, вот надо им и все. Детей своих им напрягать неудобно было, а нас запросто. Я из-за них уже во двор лишний раз выйти боялась. В общем, надо отказывать довольно категорично, и не вдаваться в объяснения, почему вы отказываете. Нет, не могу и все.