У нас у старшего что-то похожее было в 4-5 месяцев, у него на ножках, а у меня в то же время на руках. Купания нам не говорили прекращать, мальчик вроде не жаловался, т.е. беспокойства после купания не проявлял, а у меня руки действительно хуже становились после воды. Кремы не помогали, в тот год все прошло только в мае с началом тепла буквально за пару дней. На следующий год при первых признаках шершавой кожи купили увлажнитель, и проблема решилась.