根据MAP的VALUE进行排序
把多个词典合并为一个
对二元模型和三元模型进行归一化，然后去除非中文字符记录
人工标注语料库
语料库工具，用于构建二元模型和三元模型并做进一步的分析处理，同时把语料库中的新词加入词典