クローラのプロタイプ
Merge pull request #20 from oreno4649/add-crawler

クローラのプロタイプ
クローラーのバグを修正
Merge pull request #21 from oreno4649/fix-crawler

クローラーのバグを修正
wikipediaをクローラーにかけた結果
time,yahoo.news,bbcにクローラーを当てる
add optimization
dbを削除
Merge branch 'master' into add-optimization

Conflicts:
	searchengine/do_crawler.py
Merge pull request #27 from oreno4649/add-optimization

Add optimization