質問: ロボット検索にヒットされない仕組みについて はじめまして、こんにちは。 ロボット検索にヒットされない仕組みについて教えてください。 はじめにyahooのようなロボット検索でないものは申請がいるのでよね?とゆ~ことは申請さえしていなけれyahoonの検索にヒットすることはないって考えてよかったのでしょうか? それとgoogleのようなロボット検索の場合ですが、これは基本的に申請されているページからリンクをたどってgoogleのdbにサイトを登録していくのでしょうか? もしリンクをたどっていくのなら申請もしてなくて、どこからもリンクされていないページをアップしていた場合はどんなキーワードで検索してもヒットしないのでしょうか? よろしくお願いします。
回答: ヤフーもロボット検索しますよ。 googleにしても登録しなくてもヒットします。 そんで、ロボットを避けるためには特別なコードを入力しなくてはなりません。 メタタグと言われているタグなので見た目にはロボットよけのコードを入れられているのか分かりません。 まあ、こういうのを全部のページに差し込めばロボットをよけることは可能です。