Purtroppo non è possibile risolvere questo problema. Qualsiasi proprietario di un sito web può bloccare i bot dal crawling del suo sito web in robots.txt, .htaccess o utilizzando altri metodi. Sitecheckerbot segue le regole del file robots.txt e solo i proprietari di siti web verificati possono ignorarle.