質問: yahoo searchは現在bing searchと同じですか? 過去にyahooの(信じられないほど)ひどく書かれたクモ にいくつかの深刻な問題があり、結果としてそれらをブロックしました。 tumblrのmarco armentも、2009年8月31日にフラストレーションを私たちと共有しました。 [yahoo's spider]は、米国東部標準時の午前5時30分頃から1秒あたり70〜200件のリクエストを殺到しています。過去に私たちを虐待してきた不正な「実験的」なクローラーからでさえ、私はこのようなものを見たことがありません。 robots.txtの禁止は十分ではありません。ロードバランサーレベルでipによってブロックする必要があります。過去にstack overflowを悪用してきたので、知りたいと思うかもしれません。 yahooのウェブ検索は「powered by bing!」のようです。今。 bingのスパイダー(msnbotとも呼ばれます)で問題が発生したことがないため、これは良いことです。ヤフーの検索は現在bingの検索と同じですか、それとも何らかの形で何らかの形で吸い込みを止めた場合にブロックを解除する可能性を検討すべきでしょうか?
回答: 参考までに、 8月23日(月曜日)(またはそれから数日以内)yahooはbing検索結果の提供を正式に開始します。