Migliorato riconoscimento estensioni, Migliorata indicizzazione

Sono state aggiunte alcune righe per riconoscere l'estensione del file
e quindi capire se si tratta di un tld o di un file. Aggiugta una riga
allo script linkfinder per aumentare il numero di pagine indicizzato.

TO DO: -SISTEMARE RICONOSCIMENTO PROTOCOLLO (HTTP O HTTPS)
- Migliorare criterio di salvataggio, può non salvare alcune pagine
perché le crede già scaricate