使用maven-shade打包; 修复打开文件太多的错误
删除assembly, 改用maven-shade
将循环中的获取爬虫工作路径修改成每次程序开始运行就确定，否则生成的目录太多了
一个蜘蛛必须有pipeline, 否则会出错NullPointerException
自定义的pipeline