Banada gelmiyor artık kurtuldum sonunda

robot. txt den asagidaki komutlari kullanarak engelleyebilirsin. User-agent: Googlebot Disallow: /admin/ User-agent: yahoobotununadineyseburayayaziyoz Disallow: /anadizin veya index. php veya default. asp veya index.html htm/ Diger robotlarin listesi: BizBot04 kirk. overleaf.com HappyBot CaliforniaBrownSpider EI Net/0.1 libwww/0.1 Ibot/1.0 libwww-perl/0.40 Merritt/1.0 StatFetcher/1.0 TeacherSoft/1.0 libwww/2.17 WWW Collector processor/0.0ALPHA libwww-perl/0.20 wobot/1.0 from 206.214.202.45 Libertech-Rover www.libertech.com? WhoWhere Robot ITI Spider w3index MyCNNSpider SummyCrawler OGspider linklooker CyberSpyder ( ) SlowBot heraSpider Surfbot Bizbot003 WebWalker SandBot EnigmaBot spyder3. microsys.com www.freeloader.com.

garanti olsun diye tiva'nın yazdığını kullanın ama ikisini de kabul ediyor yahoo. kendi bloglarını inceleyebilirsiniz ayrıntı için : http://www.ysearchblog.com/archives/000372.html &quot; Yes, 'Slurp' also works as the user-agent. Essentially we look for the presence of 'Slurp' in the user-agent string. Please refer &quot; http://help.yahoo.com/help/us/ysearch/slurp/slurp-02.html

yahoo User-agent: Slurp Disallow: / User-agent: Disallow: bu tarz bir robots. txt dosyası işinizi görecektir.

forum sitemde online kullanıcılara baktımda 20 tane falan yahoo robotu var http://www.forumselcuk.com/forum/active_users. asp siteyi tarıyor zaten ziyaretçi yolladığı yok robotların siteye girmesini nasıl engellerim

robots. txt içerisine User-Agent: Yahoo! Slurp Disallow:/

www.tebesir.org/robots. txt Ben bu sitede Yahoo Bot'u engelledim. %100 sonuç verdi. Useragentlar IPB için tanımlı YahooBotlardır.