А что вам мешает сказать, что у вас другие планы и когда вашим детям будет нужна компания для купания они сами пригласят. Вот не робейте, с такими надо прямо говорить. У вас свои дела, своя жизнь, свои планы и это надо озвучить. У меня такие же незамутненные соседки: "ой, как жарко, пусть покупается у вас, только он плавать не умеет, присмотришь", отвечаю: "хорошо, но не сейчас, а когда мои позовут и приходи сама следить за ребенком, мне некогда".