基于hadoop写的一个爬虫，虽然功能待遇提高，仍然奉献出来吧