Common Crawl
Common Crawl, web 'de gezinen ve arşivlerini ve veri kümelerini halka açık bir şekilde sağlayan; ABD federal yasalarına göre de vergiden muaf olan, 501(c)(3) tipi bir kâr amacı gütmeyen kuruluştur. Common Crawl web arşivi, 2011'den beri toplanan petabaytlarca veriden oluşur. Genelde her ay taramaları tamamlar.