У него там нет друзей,поэтому ему там плохо.Ходить туда необходимо,это социальная адаптация перед школой.Может водить его на несколько часов,втягивать в разные игры? Знакомиться с рядом живущими садовцами из его группы,гулять с ними по вечерам. Он тогда будет ждать похода в сад чтобы поиграть с ними.