GitHub repository: qinghuacoder/management
Primary language: Java
Created: 2019-09-02T15:15:18Z
Description: 基于JAVA实现的爬虫实例:使用了代理IP+HTTPCLIENT+JSOUP等技术实现，持久化Mysql+Mongodb+Redis去重，平均处理数据速度可以达到20W条数据每秒