Смотря что вы ждете от поездки. Природа там, действительно, красивая. Мы жили в гостинице "Валдайские Зори". Все можно простить за вид на озеро. Если погулять/перезагрузиться, почему бы и нет. Можно съездить в монастырь, там тоже красиво и вкусная выпечка. Музеи колоколов, по городу погулять. Посидеть на берегу с книжкой или покататься на велосипеде. Возможно, 5 дней много, но в режиме релакса может быть неплохо.