Оно тока в ваших кругах и устоялось. Ничего ОСОБОГО в даунах нет. Дауны как дауны. Зачем использовать эвфемизмы, когда есть точная терминология? Ничего обидного в слове, скажем, "имбецил" нет, если речь действительно об имбециле. Не олигофреном же его обзывают.