質問: ロボット型サーチエンジンにサーチされたくない 本来はこういう質問こそ俺の専門分野なので、無茶と知っての質問です。ですんで、無理な場合ははっきり無理と言ってくださいませ。 えとですね。 事情があってうちのホームページに隠しページを作りました。 そのページはパスワードの入力が必要で、そのページに飛ぶとperlのcgiによるチェックが入ります。で、その中でパスワードが一致するとlocation:ヘッダで飛びますが、クッキーの保存が必要なときだけはメタタグのリフレッシュを使って飛んでいます。 ただし、htmlファイルは、index.htmファイルと同じディレクトリに普通に存在していて、そのページにリンクされているデータも、他の一般公開データと同じディレクトリにhtml形式で存在しています(別途index.htmによってフタをかぶせていますが)。ですんで、これらのファイルにダイレクトジャンプされたらおしまいです。 このような状況下において、ロボット型検索エンジンは、うちの隠しページを探り当てることがありえるのでしょうか? また、探り当てられてしまうとしたら、それを回避する方法はあるのでしょうか? ちょっと見には探り当てえないとは思うんですが、友人で一人「ロボットエンジンはキーワードなんか適当にもってくる」と言っていたので。 んーな馬鹿な!? とは思うんですけどね(笑) 安心したかったので質問させていただきました。 ま、掲載されてたら苦情を出して消してもらうというのも手でしょうけど、それじゃあちょっと遅いので。
回答: ロボットに検索されてほしくない場合ですが、一応ふたつの方法で抑制できることになっています。 ひとつはrobots.txtを利用する方法。 もうひとつは、 を使う方法です。 詳しくは以下のページを見てください。