add db design
add scrapy setting to django setting
移除scrapy的配置
add django celery
update model, so spider item can use update method
网站改版 升级爬虫，fix me: data 截断
更改model长度
keywords不规范页面处理
request use callback hook
将原始数据改为一个表
model添加学科
配置文件加强延迟间隔等，增加蜘蛛健壮性
去掉不必要的log，新版网页重定向的另一种形式