Вот так и сказать: помнишь, как дедушка не очень хорошо себя чувствовал и странно себя вел? ему надо отдохнуть, ему сложно. когда вокруг много других людей - видишь, ему нормально общаться сложно. Потому пока мы туда ездить не будем.