添加了对爬虫agent请求的http访问支持