thomasmds/PHPCrawler — pull request #3 by edimitchel (2013-05-07 15:24:00+00:00)
Title: Évite les mauvais liens et enlève index.(html|php)

Mauvais liens : .pdf, .ico, tel:, mailto:, sms:
Remplace index.{ext} par rien