"1つ以上の広告ターゲット特定キーワードを決定する方法であって、a少なくとも1つのカテゴリを受け入れることと、b前記受け入れられた少なくとも1つのカテゴリを用いて1つ以上のキーワードを決定することと、c前記決定された1つ以上のキーワードの少なくも一部を1つ以上の広告ターゲット特定キーワードとして提供すること、とを具備する方法。前記1つ以上の広告ターゲット特定キーワードの少なくとも1つは、ネガティブキーワードである、請求項1に記載の方法。少なくとも1つのカテゴリを決定する前記行為は、広告クリエイティブ情報を使用する、請求項1に記載の方法。少なくとも1つのカテゴリを決定する前記行為は、広告のランディングウェブページからの情報を使用する、請求項1に記載の方法。1つ以上のキーワードを決定する前記行為は、カテゴリがキーワードに関するルックアップキーとして提供される反転キーワードインデックスを使用する、請求項1に記載の方法。前記決定された1つ以上のキーワードに関する資格試験を実施して、キーワードは広告ターゲット特定キーワードとして使用する上で適格であるか又は不適格であるかを判定することをさらに具備し、1つ以上の広告ターゲット特定キーワードとして提供される前記決定された1つ以上のキーワードの前記少なくとも一部の各々は、適格であると判定されたキーワードである、請求項1に記載の方法。前記決定された1つ以上のキーワードに関する資格試験を実施する前記行為は、前記キーワードを広告ターゲット特定キーワードとして使用して提供された広告のパフォーマンスを追跡する、請求項6に記載の方法。広告の前記パフォーマンスは、全カテゴリにわたって一般的に追跡される、請求項7に記載の方法。広告の前記パフォーマンスは、1つ以上の特定のカテゴリにわたって追跡される、請求項7に記載の方法。前記1つ以上の特定のカテゴリは、受け入れられた前記少なくとも1つのカテゴリを含む、請求項9に記載の方法。前記決定された1つ以上のキーワードに関する資格試験を実施する前記行為中に前記キーワードを広告ターゲット特定キーワードとして使用して提供される前記広告は、本来であれば未使用になる広告スポットにおいてしか提供されない、請求項7に記載の方法。前記決定された1つ以上のキーワードの少なくとも一部を1つ以上のターゲット特定キーワードとして提供する前記行為は、前記決定された1つ以上のキーワードを、未使用在庫情報を用いて決定された順序で提供する、請求項1に記載の方法。前記決定された1つ以上のキーワードの少なくとも一部を1つ以上の広告ターゲット特定キーワードとして提供する前記行為は、未使用在庫情報を用いて決定された順序で前記1つ以上のキーワードを提供し、それによって、より少ない数の未使用広告スポットに対応する別のキーワードよりも前により大きな数の未使用広告スポットに対応するキーワードが提供されるようにする、請求項1に記載の方法。1つ以上の広告ターゲット特定キーワードを決定する方法であって、a少なくとも1つのカテゴリを受け入れることと、b前記受け入れられた少なくとも1つのカテゴリを用いて1つ以上のキーワードを決定することと、c前記決定された1つ以上のキーワードを提案されたターゲット特定キーワードとして広告主に提供することと、d前記提案されたターゲット特定キーワードに応答した広告主の入力を受け入れることと、e前記受け入れられた広告主の入力を用いて、前記決定された1つ以上のキーワードの少なくとも一部を広告に関するターゲット特定キーワードとして提供するかどうかを決定すること、とを具備する方法。前記1つ以上の広告ターゲット特定キーワードの少なくとも1つは、ネガティブキーワードである、請求項14に記載の方法。少なくとも1つのカテゴリを決定する前記行為は、広告クリエイティブ情報を使用する、請求項14に記載の方法。少なくとも1つのカテゴリを決定する前記行為は、広告のランディングウェブページからの情報を使用する、請求項14に記載の方法。1つ以上のキーワードを決定する前記行為は、カテゴリがキーワードに関するルックアップキーとして提供される反転キーワードインデックスを使用する、請求項14に記載の方法。前記決定された1つ以上のキーワードに関する資格試験を実施して、キーワードは広告ターゲット特定キーワードとして使用する上で適格であるか又は不適格であるかを判定することをさらに具備し、提案されたターゲット特定キーワードとして広告主に提供される前記決定された1つ以上のキーワードの前記少なくとも一部の各々は、適格であると判定されたキーワードである、請求項14に記載の方法。前記決定された1つ以上のキーワードに関する資格試験を実施する前記行為は、前記キーワードを広告ターゲット特定キーワードとして使用して提供された広告のパフォーマンスを追跡する、請求項19に記載の方法。広告の前記パフォーマンスは、全カテゴリにわたって一般的に追跡される、請求項20に記載の方法。前記1つ以上の特定のカテゴリは、受け入れられた前記少なくとも1つのカテゴリを含む、請求項21に記載の方法。広告の前記パフォーマンスは、1つ以上の特定のカテゴリにわたって追跡される、請求項20に記載の方法。前記決定された1つ以上のキーワードに関する資格試験を実施する前記行為中に前記キーワードを広告ターゲット特定キーワードとして使用して提供される広告は、本来であれば未使用になる広告スポットにおいてしか提供されない、請求項20に記載の方法。前記決定された1つ以上のキーワードを提案されたターゲット特定キーワードとして広告主に提供する前記行為は、前記決定された1つ以上のキーワードを、未使用在庫情報を用いて決定された順序で提供する、請求項14に記載の方法。前記決定された1つ以上のキーワードを提案されたターゲット特定キーワードとして広告主に提供する前記行為は、未使用在庫情報を用いて決定された順序で前記1つ以上のキーワードを提供し、それによって、より少ない数の未使用広告スポットに対応する別のキーワードよりも前により多い数の未使用広告スポットに対応するキーワードが提供されるようにする、請求項14に記載の方法。広告ターゲット特定キーワードとして使用するための候補として1つ以上のキーワードを生成する方法であって、a広告情報を受け入れることと、b前記受け入れられた広告情報を用いて1つ以上のカテゴリを決定することと、c前記決定された1つ以上のカテゴリから1つ以上のキーワードを決定すること、とを具備する方法。前記1つ以上の広告ターゲット特定キーワードの少なくとも1つは、ネガティブキーワードである、請求項27に記載の方法。少なくとも1つのカテゴリを決定する前記行為は、広告クリエイティブ情報を使用する、請求項27に記載の方法。少なくとも1つのカテゴリを決定する前記行為は、広告のランディングウェブページからの情報を使用する、請求項27に記載の方法。1つ以上のキーワードを決定する前記行為は、カテゴリがキーワードに関するルックアップキーとして提供される反転キーワードインデックスを使用する、請求項27に記載の方法。前記決定された1つ以上のキーワードに関する資格試験を実施して、キーワードは広告ターゲット特定キーワードとして使用する上で適格であるか又は不適格であるかを判定することをさらに具備し、候補のターゲット特定キーワードとして提供される前記決定された1つ以上のキーワードの前記少なくとも一部の各々は、適格であると判定されたキーワードである、請求項27に記載の方法。前記決定された1つ以上のキーワードに関する資格試験を実施する前記行為は、前記キーワードを広告ターゲット特定キーワードとして使用して提供された広告のパフォーマンスを追跡する、請求項32に記載の方法。広告の前記パフォーマンスは、全カテゴリにわたって一般的に追跡される、請求項33に記載の方法。広告の前記パフォーマンスは、1つ以上の特定のカテゴリにわたって追跡される、請求項33に記載の方法。前記1つ以上の特定のカテゴリは、受け入れられた前記少なくとも1つのカテゴリを含む、請求項35に記載の方法。前記決定された1つ以上のキーワードに関する資格試験を実施する前記行為中に前記キーワードを広告ターゲット特定キーワードとして使用して提供される前記広告は、本来であれば未使用になる広告スポットにおいてしか提供されない、請求項33に記載の方法。前記決定された1つ以上のキーワードを候補のターゲット特定キーワードとして提供する前記行為は、前記決定された1つ以上のキーワードを、未使用在庫情報を用いて決定された順序で提供する、請求項27に記載の方法。前記決定された1つ以上のキーワードを候補のターゲット特定キーワードとして提供する前記行為は、未使用在庫情報を用いて決定された順序で前記決定された1つ以上のキーワードを提供し、それによって、より少ない数の未使用広告スポットに対応する別のキーワードよりも前により多い数の未使用広告スポットに対応するキーワードが提供されるようにする、請求項27記載の方法。d前記候補キーワードを広告提供制限事項に加えることをさらに具備する、請求項27に記載の方法。d前記候補キーワードを広告ターゲット特定キーワードとして広告主に提供することと、e前記提案されたターゲット特定キーワードに応答した広告主の入力を受け入れることと、f前記受け入れられた広告主の入力を用いて、前記候補キーワードの少なくとも一部を広告に関するターゲット特定キーワードとして提供するかどうかを決定すること、とをさらに具備する、請求項27に記載の方法。1つ以上の広告ターゲット特定キーワードを決定する装置であって、a少なくとも1つのカテゴリを受け入れる入力部と、b前記受け入れられた少なくとも1つのカテゴリを用いて1つ以上のキーワードを決定する手段と、c前記決定された1つ以上のキーワードの少なくも一部を1つ以上の広告ターゲット特定キーワードとして提供する手段と、を具備する装置。前記1つ以上の広告ターゲット特定キーワードの少なくとも1つは、ネガティブキーワードである、請求項42に記載の装置。少なくとも1つのカテゴリを決定する前記手段は、広告クリエイティブ情報を使用する、請求項42に記載の装置。少なくとも1つのカテゴリを決定する前記手段は、広告のランディングウェブページからの情報を使用する、請求項42に記載の装置。1つ以上のキーワードを決定する前記手段は、カテゴリがキーワードに関するルックアップキーとして提供される反転キーワードインデックスを使用する、請求項42に記載の装置。前記決定された1つ以上のキーワードに関する資格試験を実施して、キーワードは広告ターゲット特定キーワードとして使用する上で適格であるか又は不適格であるかを決定する手段をさらに具備し、1つ以上の広告ターゲット特定キーワードとして提供される前記決定された1つ以上のキーワードの前記少なくとも一部の各々は、適格であると判定されたキーワードである、請求項42に記載の装置。前記決定された1つ以上のキーワードに関する資格試験を実施する前記手段は、前記キーワードを広告ターゲット特定キーワードとして使用して提供された広告のパフォーマンスを追跡する、請求項47に記載の装置。広告の前記パフォーマンスは、全カテゴリにわたって一般的に追跡される、請求項48に記載の装置。広告の前記パフォーマンスは、1つ以上の特定のカテゴリにわたって追跡される、請求項48に記載の装置。前記1つ以上の特定のカテゴリは、受け入れられた前記少なくとも1つのカテゴリを含む、請求項50に記載の装置。前記決定された1つ以上のキーワードに関する資格試験を実施する前記手段によって前記キーワードを広告ターゲット特定キーワードとして使用して提供される前記広告は、本来であれば未使用になる広告スポットにおいてしか提供されない、請求項48に記載の装置。前記決定された1つ以上のキーワードの少なくとも一部を1つ以上の広告ターゲット特定キーワードとして提供する前記手段は、前記決定された1つ以上のキーワードを、未使用在庫情報を用いて決定された順序で提供する、請求項42に記載の装置。前記決定された1つ以上のキーワードの少なくとも一部を1つ以上の広告ターゲット特定キーワードとして提供する前記手段は、未使用在庫情報を用いて決定された順序で前記決定された1つ以上のキーワードを提供し、それによって、より少ない数の未使用広告スポットに対応する別のキーワードよりも前により多い数の未使用広告スポットに対応するキーワードが提供されるようにする、請求項42に記載の装置。1つ以上の広告ターゲット特定キーワードを決定する装置であって、a少なくとも1つのカテゴリを受け入れるための入力部と、b前記受け入れられた少なくとも1つのカテゴリを用いて1つ以上のキーワードを決定する手段と、c前記決定された1つ以上のキーワードを提案されたターゲット特定キーワードとして広告主に提供する手段と、d前記提案されたターゲット特定キーワードに応答した広告主の入力を受け入れる手段と、e前記受け入れられた広告主の入力を用いて、前記決定された1つ以上のキーワードの少なくとも一部を広告に関するターゲット特定キーワードとして提供するかどうかを決定する手段と、を具備する装置。前記1つ以上の広告ターゲット特定キーワードの少なくとも1つは、ネガティブキーワードである、請求項55に記載の装置。少なくとも1つのカテゴリを決定する前記手段は、広告クリエイティブ情報を使用する、請求項55に記載の装置。少なくとも1つのカテゴリを決定する前記手段は、広告のランディングウェブページからの情報を使用する、請求項55に記載の装置。1つ以上のキーワードを決定する前記手段は、カテゴリがキーワードに関するルックアップキーとして提供される反転キーワードインデックスを使用する、請求項55に記載の装置。前記決定された1つ以上のキーワードに関する資格試験を実施して、キーワードは広告ターゲット特定キーワードとして使用する上で適格であるか又は不適格であるかを判定する手段をさらに具備し、提案されたターゲット特定キーワードとして広告主に提供される前記決定された1つ以上のキーワードの前記少なくとも一部の各々は、適格であると判定されたキーワードである、請求項55に記載の装置。前記決定された1つ以上のキーワードに関する資格試験を実施する前記手段は、前記キーワードを広告ターゲット特定キーワードとして使用して提供された広告のパフォーマンスを追跡する、請求項60に記載の装置。広告の前記パフォーマンスは、全カテゴリにわたって一般的に追跡される、請求項61に記載の装置。前記1つ以上の特定のカテゴリは、受け入れられた前記少なくとも1つのカテゴリを含む、請求項62に記載の装置。広告の前記パフォーマンスは、1つ以上の特定のカテゴリにわたって追跡される、請求項61に記載の装置。前記決定された1つ以上のキーワードに関する資格試験を実施する前記手段によって前記キーワードを広告ターゲット特定キーワードとして使用して提供される広告は、本来であれば未使用になる広告スポットにおいてしか提供されない、請求項61に記載の装置。前記決定された1つ以上のキーワードを提案されたターゲット特定キーワードとして広告主に提供する前記手段は、前記決定された1つ以上のキーワードを、未使用在庫情報を用いて決定された順序で提供する、請求項55に記載の方法。前記決定された1つ以上のキーワードを提案されたターゲット特定キーワードとして広告主に提供する前記手段は、未使用在庫情報を用いて決定された順序で前記決定された1つ以上のキーワードを提供し、それによって、より少ない数の未使用広告スポットに対応する別のキーワードよりも前により多い数の未使用広告スポットに対応するキーワードが提供されるようにする、請求項55に記載の装置。広告ターゲット特定キーワードとして使用するための候補として1つ以上のキーワードを生成する装置であって、a広告情報を受け入れるための入力部と、b前記受け入れられた広告情報を用いて1つ以上のカテゴリを決定する手段と、c前記決定された1つ以上のカテゴリから1つ以上のキーワードを決定する手段と、とを具備する装置。前記少なくとも1つの広告ターゲット特定キーワードの少なくとも1つは、ネガティブキーワードである、請求項68に記載の装置。少なくとも1つのカテゴリを決定する前記手段は、広告クリエイティブ情報を使用する、請求項68に記載の装置。少なくとも1つのカテゴリを決定する前記手段は、広告のランディングウェブページからの情報を使用する、請求項68に記載の装置。1つ以上のキーワードを決定する前記手段は、カテゴリがキーワードに関するルックアップキーとして提供される反転キーワードインデックスを使用する、請求項68に記載の装置。前記決定された1つ以上のキーワードに関する資格試験を実施して、キーワードは広告ターゲット特定キーワードとして使用する上で適格であるか又は不適格であるかを判定する手段をさらに具備し、候補のターゲット特定キーワードとして提供される前記決定された1つ以上のキーワードの前記少なくとも一部の各々は、適格であると判定されたキーワードである、請求項68に記載の装置。前記決定された1つ以上のキーワードに関する資格試験を実施する前記手段は、前記キーワードを広告ターゲット特定キーワードとして使用して提供された広告のパフォーマンスを追跡する、請求項74に記載の装置。広告の前記パフォーマンスは、全カテゴリにわたって一般的に追跡される、請求項74に記載の装置。広告の前記パフォーマンスは、1つ以上の特定のカテゴリにわたって追跡される、請求項74に記載の装置。前記1つ以上の特定のカテゴリは、受け入れられた前記少なくとも1つのカテゴリを含む、請求項76に記載の装置。前記決定された1つ以上のキーワードに関する資格試験を実施する前記手段によって前記キーワードを広告ターゲット特定キーワードとして使用して提供される前記広告は、本来であれば未使用になる広告スポットにおいてしか提供されない、請求項74に記載の装置。前記決定された1つ以上のキーワードを候補のターゲット特定キーワードとして提供する前記手段は、前記決定された1つ以上のキーワードを、未使用在庫情報を用いて決定された順序で提供する、請求項68に記載の装置。前記決定された1つ以上のキーワードを候補のターゲット特定キーワードとして提供する前記手段は、未使用在庫情報を用いて決定された順序で前記決定された1つ以上のキーワードを提供し、それによって、より少ない数の未使用広告スポットに対応する別のキーワードよりも前により多い数の未使用広告スポットに対応するキーワードが提供されるようにする、請求項68記載の装置。d前記候補キーワードを広告提供制限事項に加える手段をさらに具備する、請求項68に記載の装置。d前記候補キーワードを広告ターゲット特定キーワードの提案として広告主に提供する手段と、e前記提案されたターゲット特定キーワードに応答した広告主の入力を受け入れる手段と、f前記受け入れられた広告主の入力を用いて、前記候補キーワードの少なくとも一部を広告に関するターゲット特定キーワードとして提供するかどうかを決定する手段と、を含む、請求項68に記載の装置。本発明は、広告のターゲットを特定するために用いられるキーワード広告特定キーワードと呼ばれるを提案及び/又は提供するための斬新な方法、装置、メッセージフォーマット及び/又はデータ構造を含むものである。以下の説明は、当業者が本発明を製造及び使用するのを可能にすることを目的とするものであり、特定の用途及びその要件に関して示されている。開示された実施形態は様々な修正が可能であることが当業者に明確になり、更に、下記の一般原理はその他の実施形態及び用途に対しても応用可能である。従って、本発明は、示されている実施形態に限定することを意図するものではなく、更に、本発明の発明者は、本発明が特許権を取得可能な主題であるとみなしている。以下では、本発明が動作することができる環境、又は本発明が動作時に並存することができる環境が第4.1項において説明される。本発明の典型的実施形態が第4.2項において説明される。本発明の典型的実施形態の動作例が第4.3項に示されている。最後に、本発明に関する幾つかの結論が第4.4項に示されている。4.1本発明が動作可能な環境又は本発明が動作時に並存することができる環境4.1.1典型的広告環境図1は、広告環境を示した高位概略図である。該環境は、広告を入力、維持及び引き渡すシステム120を含む。広告主110は、直接または間接的に、システム120内に広告情報を入力すること、及びシステム120において広告情報を維持及び追跡することができる。広告は、グラフィック広告いわゆるバナー広告、テキストのみの広告、画像広告、音声広告、映像広告、これらの構成要素のうちのいずれかを1つ以上組み合わせた広告、等の形態をとることができる。更に、該広告は、埋め込まれた情報リンク、等及び/又は機械によって実行可能な命令を含むこともできる。広告消費者130は、広告要求をシステム120に出すこと、自己の要求に対応した広告をシステム120から受け取ること、及び使用情報をシステム120に提供することができる。図示されていないが、その他のエンティティは、使用情報広告に関連するコンバージョン又はクリックスルーが発生しているかどうか、等をシステム120に提供することができる。更に、この使用情報は、提供されている広告に関連する測定された又は観察されたユーザーの行動を含むことができる。広告消費者130の一例は、コンテンツ記事、ディスカッションスレッド、音楽、映像、グラフィック、検索結果、ウェブページリスト、等の要求を受け取り、該要求に対応して要求コンテンツを検索するか又はその他の形で該要求に対応する汎用コンテンツサーバーである。該コンテンツサーバーは、システム120に広告要求を出すことができる。該広告要求は、希望される複数の広告を含むことができる。更に、該広告要求は、コンテンツ要求情報を含むこともできる。この情報は、コンテンツ自体ページ、等、コンテンツ又はコンテンツ要求に対応するカテゴリ芸術、ビジネス、コンピュータ、芸術-映画、芸術-音楽、等、コンテンツ要求の一部又は全体、コンテンツの日付、コンテンツの種類テキスト、グラフィックス、映像、音声、組合せ媒体、等、ジオロケーション情報、等を含むことができる。該コンテンツサーバーは、要求されたコンテンツを、システム120によって提供された広告のうちの1つ以上の広告と組み合わせる。次に、コンテンツ及び広告を含むこの組合せ情報が、該コンテンツを要求したエンドユーザーに提示するために該ユーザーに向けて送られる。最後に、該コンテンツサーバーは、広告に関する情報と、広告の提供方法、提供日時、及び/又は提供場所に関する情報掲載位置、クリックスルーの有無、インプレッション時間、インプレッション日、サイズ、コンバージョンの有無、等を、システム120に戻す。その代替として、又はその追加として、該情報は、その他のいくつかの手段によってシステム120に戻すことができる。広告消費者130のもう1つの例は、検索エンジンである。検索エンジンは、検索結果に関する問い合わせを受け取る。検索エンジンは、該問い合わせに対応して、関連する検索結果を例えばウェブページ索引、等から検索する。オーストラリアのブリスベーンで開催された第7回国際WWW会議においてS.ブリン及びL.ページによって発表された、TheAnatomyofaLargeScaleHypertextualSearchEngine大規模なハイパーテキスト検索エンジンの解剖という題名の論文、及び米国特許No.6,285,999において、1つの典型的な検索エンジンが説明されているこれらの参考文献は、本明細書において参照することによって本明細書に組み入れられている。該検索結果は、例えば、ウェブページタイトルを記載したリスト、これらのウェブページから抜粋されたテキストのスニペット、及びこれらのウェブページへのハイパーテキストリンクを含むことができ、更に、予め決められた数の例えば10の検索結果に分割することができる。検索エンジンは、広告要求をシステム120に出すことができる。該広告要求は、希望される複数の広告を含むことができる。この数は、検索結果、検索結果によって占有される画面面積又はページスペース、広告のサイズと形、等に依存する。一実施形態においては、希望される広告数は、1乃至10であり、更に、好ましいことに3乃至5である。広告要求は、問い合わせ入力された問い合わせ又は構文解析された問い合わせ、該問い合わせに基づいた情報ジオロケーション情報、該問い合わせがアフィリエイトからのものであるかどうか、及び該アフィリエイトの識別子、等、及び/又は、検索結果に関係するか又は検索結果に基づいた情報も含むことができる。該情報は、例えば、検索結果に関連する識別子ドキュメント識別子又はdocID、等、検索結果に関連する点数問い合わせ及びドキュメントに対応する特徴ベクトルのドット積、等の情報検索IR点数、ページランク点数、及び/又はIR点数とページランク点数の組合せ、等、識別されたドキュメントウェブページ、等から抜粋されたテキストのスニペット、識別されたドキュメントの全テキスト、識別されたドキュメントの特徴ベクトル、等を含むことができる。検索エンジンは、検索結果を、システム120によって提供された広告のうちの1つ以上の広告と組み合わせることができる。次に、検索結果と広告を含むこの組合せ情報は、コンテンツを要求したユーザーに対して提示するために、該ユーザーに向けて送られる。好ましいことに、これらの検索結果は、有料広告及び中立的と推測される検索結果のいずれであるかについてユーザーを混乱させないようにするために、広告とは異なる情報として維持される。最後に、検索エンジンは、広告に関する情報と、広告の提供日時、提供場所、及び/又は提供方法に関する情報位置、クリックスルーの有無、インプレッション時間、インプレッション日、サイズ、コンバージョンの有無、等をシステム120に戻す。その代替として、又はその追加として、該情報は、その他のいくつかの手段によってシステム120に戻すことができる。4.1.2典型的な広告入力維持引渡し環境図2は、本発明とともに使用することができる典型的広告システム120’、又は本発明を使用時に並存することができる典型的広告システム120’を示した図である。典型的広告システム120’は、在庫システム210を含み、更に、広告情報205及び使用情報245を保存することができる。典型的広告システム120’は、広告情報入力管理動作215、キャンペーンターゲット特定、等援助動作220、会計課金動作225、広告提供動作230、関連性決定動作235、最適化動作240、相対的提示属性割当て掲載位置順設定、等動作250、不正発見動作255、及び結果インタフェース動作260をサポートする。広告主110は、広告情報入力管理動作215を通じてシステム120’とインタフェースすることができるインタフェース216。広告消費者130は、広告提供動作230を通じてシステム120’とインタフェースすることができるインタフェース231。更に、広告消費者130及び/又はその他のエンティティ図示されていないは、結果インタフェース動作260を通じてシステム120’とインタフェースすることもできるインタフェース261。広告プログラムは、アカウント、キャンペーン、クリエイティブ、ターゲット特定、等に関する情報を含むことができる。アカウントは、所定の広告主に関する情報一意の電子メールアドレス、パスワード、課金情報、等に関わる用語である。キャンペーン又は広告キャンペーンは、1つ以上の広告から成る1つ以上のグループを意味しており、開始日、終了日、予算情報、ジオターゲティング情報、シンジケーション情報、等を含む。例えば、ホンダは、自社の自動車製品に関する1つの広告キャンペーン、及び自社の自動二輪に関する別個の広告キャンペーンを有することができる。更に、自動車製品に関するキャンペーンは、各々が1つ以上の広告を含む1つ以上の広告グループを有している。各広告グループは、一組のキーワード、及び最大コスト1回のクリックスルー当たりのコスト、1回のコンバージョン当たりのコスト、等を含むことができる。その代替として、又はその追加として、各広告グループは、平均コスト1回のクリックスルー当たりの平均コスト、1回のコンバージョン当たりの平均コスト、等を含むことができる。従って、単一の最大コスト及び/又は単一の平均コストを、1つ以上のキーワードと関連させることができる。既述のように、各広告グループは、1つ以上の広告又はクリエイティブ即ち、究極的にエンドユーザーに提供される広告コンテンツを有することができる。当然のことであるが、広告情報205はこれよりも多くの情報又はこれよりも少ない情報を含むことができ、更に、いくつかの異なった方法で構成することができる。広告情報205は、広告情報入力管理動作215を通じて入力及び管理することができる。キャンペーンターゲット特定、等援助動作220は、広告主110が有効な広告キャンペーンを生成するのを援助するために採用することができる。例えば、キャンペーン援助動作220は、在庫システム210によって提供される情報を用いることができ、在庫システム210は、検索エンジンとともに用いる広告という意味において、可能性があるすべての広告インプレッション、既に予約されている広告インプレッション、及び所定のキーワードに関して入手可能な広告インプレッションを追跡することができる。広告提供動作230は、広告消費者130からの広告要求に対応する。広告提供動作230は、関連性決定動作235を用いて、所定の要求に関する候補広告を決定する。次に、広告提供動作230は、最適化動作240を用いて、最終的な一組の1つ以上の候補広告を選択する。次に、広告提供動作230は、相対的提示属性割当動作250を用いて、返送する広告の提示順序を定める。会計/課金動作225は、広告の提供に関連する料金を追跡するため及び広告主に課金するために使用することができる。不正発見動作255は、例えば広告主が盗まれたクレジットカードを使用することによる広告システムの不正使用を減らすために用いることができる。最後に、結果インタフェース動作260は、実際に提供された広告に関する結果情報例えば、クリックスルーが発生したかどうか、コンバージョンが発生したかどうか例えば、広告された品目又はサービスの販売が、該広告の提供時以降における予め決められた時間内に開始されたか又は完遂されたかどうか、等を広告消費者130から又はその他の何らかのエンティティから受け入れるために使用される。該結果情報は、インタフェース261において受け入れられ、広告自体と該広告の提供時間を識別するための情報、及び関連する結果を含む。以下の説明から理解されるように、キャンペーンターゲット特定援助動作220には本発明の様々な側面を当てはめることができる。4.1.3定義オンライン広告例えば、図1及び図2を参照して上述されている典型的システム又はその他のシステムにおいて用いられる広告、等は、様々な固有の機能を有することができる。これらの機能は、アプリケーションによって指定すること及び/又は広告主が指定することができる。以下では、これらの機能は広告機能と呼ばれている。例えば、テキスト広告の場合は、広告機能は、タイトル行、広告用テキスト、及び埋め込まれたリンクを含むことができる。画像広告の場合は、広告機能は、画像、実行可能コード、及び埋め込まれたリンクを含むことができる。広告機能は、オンライン広告の種類に依存して、テキスト、リンク、音声ファイル、映像ファイル、画像ファイル、実行可能コード、埋め込み情報、等のうちの1つ以上を含むことができる。オンライン広告を提供時には、1つ以上のパラメータを用いて該広告の提供方法、提供日時、及び/又は提供場所を記述することができる。これらのパラメータは、以下では広告提供パラメータと呼ばれている。広告提供パラメータは、例えば、広告が提供されたページの特長該ページにおける情報を含む、広告の提供と関連された検索問い合わせ又は検索結果、ユーザーの特徴地理上の所在場所、ユーザーの使用言語、使用されたブラウザーの種類、それ以前におけるページ閲覧、それ以前の行動、要求を開始させたホストサイト又はアフィリエイトサイトAmericaOnline、Google、Yahoo、等、該広告が提供されたページ上における該広告の絶対位置、提供されたその他の広告との関係における該広告の位置空間的位置又は時間的位置、該広告の絶対サイズ、その他の広告と比較した場合における該広告のサイズ、該広告の色、提供されたその他の広告数、提供されたその他の広告の種類、提供時刻、提供曜日、提供日、等のうちの1つ以上を含むことができる。当然のことであるが、本発明の適用範囲内において使用できるその他の広告提供パラメータも存在する。広告提供パラメータは、広告機能にとって本質的なものではないが、広告提供条件又は制限事項として広告と関連させることができる。該広告提供パラメータは、広告提供条件又は制限事項として使用時には、単に広告提供制限事項又はターゲット特定基準と呼ばれる。例えば、いくつかのシステムにおいては、広告主は、平日のみに提供する、ある一定の掲載位置よりも低くしない、ある一定の所在地のユーザーのみに提供する、等の条件を指定することによって自己の広告の提供ターゲットを特定することができる。もう1つの例として、いくつかのシステムにおいては、広告主は、ページ又は検索問い合わせがある一定のキーワード又は句を含む場合のみに広告が提供されるように指定することができる。さらにもう1つの例として、いくつかのシステムにおいては、広告主は、提供対象ドキュメントが一定の話題又は概念を含む場合のみに、又は1つの又は複数の特定のクラスタの下に入るか若しくはその他の1つの又は複数の分類の下に入る場合のみに、自己の広告が提供されるように指定することができる。ターゲット特定広告において、ターゲット特定キーワードは、広告が表示される資格を有するときを指定する又は制限することによって広告の提供ターゲットを特定する1つの識別されたキーワード又はキーワードのグループ句、又はネガティブキーワードを含むであることができる。幾つかの広告提供システムにおいては、広告主は、一致パターンを指定することによって、広告の提供を決定する際に自己のキーワードをどのように使用すべきかを指定することができる。例えば、広告主が広範な一致パターンデフォルト時の設定にすることができるを指定する場合は、該広告主は、一般的なキーワード又はキーワードの句例えばテニスシューズ、等を自己のキーワードリスト内に含めることができる。この例においては、該広告主の広告は、ユーザーがテニス及びシューズという言葉いずれの順序であるかは問わないをおそらくその他の言葉といっしょに検索時に提供される資格を有する。更に、該広告主の広告は、拡大された一致複数形及び関連する変形、等の対象にすることも可能である。その他の広告主が、広告を提供するきっかけとなる同じ広範な一致キーワードの組合せに関して競合している可能性があるため、広範なターゲット特定キーワードを用いることは、コストを増大させる場合がある。このため、後述されている正確な一致、句の一致、又はネガティブな一致を用いることは、広告主がコストを最小にするのを援助することができる。広告主は、例えば、テニスシューズのようにキーワードを引用符でくくることによって句による一致パターンを指定することができる。この場合は、該広告主の広告は、ユーザーがテニスシューズの順序でおそらくその他の言葉といっしょにテニスシューズという句を検索時に提供する資格を有することになる。例えば、該広告主の広告は、テニスのためのシューズではなく赤いテニスシューズという問い合わせに関して提供される資格を有することになる。句を一致させることは、広範な一致よりもターゲットが特定されるが、正確な一致よりも多少柔軟である。広告主は、例えば、テニスシューズのように自己のキーワードを角括弧でくくることによって正確な一致パターンを指定することができる。この場合は、該広告主の広告は、ユーザーが特定の句であるテニスシューズをこの順序でかつその他の言葉を含めないで検索時に提供される資格を有する。例えば、該広告主の広告は、赤いテニスシューズという問い合わせの場合は提供される資格を有さない。更に、広告主は、ネガティブキーワードを指定することもできる。例えば、広告主のキーワードがテニスシューズであり、さらにネガティブキーワードの赤いを加えた場合は、該広告主の広告は、ユーザーが赤いテニスシューズという句を検索した場合は提供される資格を有さないことになる。当然のことであるが、その他の種類のターゲット特定キーワードを指定することも可能である。ジオロケーション情報は、1つ以上の国、1つ以上の国間の地域、1つ以上の州、1つ以上の地下鉄区域、1つ以上の都市、1つ以上の町、1つ以上の自治区、共通の郵便番号を有する1つ以上の区域、共通の市外局番を有する1つ以上の区域、共通のケーブルヘッドエンド局によって対応される1つ以上の区域、共通のネットワークアクセスポイント又はノードによって対応される1つ以上の区域、等のうちの1つ以上を指定する情報を含むことができる。ジオロケーション情報は、上記の緯度及び/又は経度、又は範囲を含むことができる。更に、ジオロケーション情報は、ユーザーの所在場所を推定することができる情報IPアドレス、等を含むことができる。広告情報は、広告機能、広告提供制限事項、広告機能又は広告提供制限事項から導き出すことが可能な情報広告派生情報と呼ばれる、及び/又は広告に関連する情報広告関連情報と呼ばれる、更には該情報の敷衍情報広告関連情報から導き出される情報、等のあらゆる組合せを含むことができる。ドキュメントは、機械によって読み取り可能であり更に機械によって保存可能なあらゆる作業成果物を含むと広義に解釈すべきである。ドキュメントは、ファイル、ファイルの組合せ、その他のファイルへのリンクが埋め込まれた1つ以上のファイル、等である。これらのファイルは、テキスト、音声、画像、映像、等のあらゆる種類のファイルである。1つのドキュメントのうちでエンドユーザーに提供される部分は、該ドキュメントのコンテンツであると考えることができる。ドキュメントは、コンテンツ単語、写真、等及びそのコンテンツの意味の表示電子メールフィールドとその関連データ、HTMLタグとその関連データ、等の両方を含む構造化データを含むことができる。ドキュメント内における広告スポットは、埋め込まれた情報又は命令によって定義することができる。インターネットの観点においては、1つの共通ドキュメントはウェブページである。ウェブページは、コンテンツを含むことがしばしばあり、埋め込まれた情報メタ情報、ハイパーリンク、等及び/又は埋め込まれた命令Java登録商標script、等を含むことができる。多くの場合においては、ドキュメントは、一意の、アドレス指定可能な記憶場所を有しており、このため、このアドレス指定可能記憶場所によって一意で識別することができる。ユニバーサルリソースロケーターURLは、インターネット上の情報にアクセスするために用いられる一意のアドレスである。ドキュメント情報は、ドキュメントに含まれているすべての情報、ドキュメントに含まれている情報から導き出すことができる情報ドキュメント派生情報と呼ばれる、及び/又はドキュメントに関連する情報ドキュメント関連情報と呼ばれる、並びに該情報の敷衍情報関連情報から導き出される情報、等を含む。ドキュメント派生情報の一例は、ドキュメントのテキストに関するコンテンツに基づく分類である。ドキュメント関連情報例は、インスタントドキュメントへのリンクを有するその他のドキュメントからのドキュメント情報、及び、インスタントドキュメントがリンクしているその他のドキュメントからのドキュメント情報、等である。ドキュメントのコンテンツは、コンテンツ提供アプリケーション又はデバイスで提供することができる。コンテンツ提供アプリケーション例は、インターネットブラウザーExplorer、Netscape、等、メディアプレーヤーMP3プレーヤー、Realnetworksストリーミング音声ファイルプレーヤー、等、ビューワーAdobeAcrobatpdfリーダー、等、等である。コンテンツオーナーは、ドキュメントのコンテンツに対して何らかの所有権を有する人またはエンティティである。コンテンツオーナーは、該コンテンツの著者であることができる。さらに加えて、又は代替として、コンテンツオーナーは、コンテンツを複製する権利、コンテンツの派生品を準備する権利、コンテンツを公開するか又は公に実施する権利、及び/又は法律によって保護されているその他のコンテンツ権を有することができる。コンテンツサーバーは、提供するドキュメントのコンテンツに関するコンテンツオーナーであることができるが、コンテンツオーナーである必要はない。ユーザー情報は、ユーザーの行動に関する情報及び/又はユーザープロフィール情報を含む。更に、ユーザー情報は、ユーザーの地理上の所在場所、又はユーザーの地理上の所在場所の推定も含むことができる。電子メール情報は、電子メールに含まれているあらゆる情報内部電子メール情報とも呼ばれる、電子メールに含まれている情報から導き出すことが可能な情報及び/又は電子メールに関連する情報、更に加えて該情報の敷衍情報関連情報から導き出された情報、等を含む。電子メール情報から導き出された情報の一例は、電子メールの件名行から抽出された項目によって構成される検索問い合わせに対応して返送された検索結果から抽出されるかまたはその他の形で導き出された情報である。電子メール情報に関連する情報例は、ある所定の電子メールを送信した送信者と同じ送信者によって送信された1つ以上のその他の電子メールに関する電子メール情報、又は、電子メール受信者に関するユーザー情報を含む。電子メール情報から導き出される情報又は電子メール情報に関連する情報は、外部電子メール情報と呼ぶことができる。本発明の様々な典型的実施形態が第4.2項において説明される。4.2典型的実施形態上述されているように、本発明は、広告のターゲットを特定するために用いられるキーワードを提案及び/又は提供するために使用することができる。以下では、キーワードとカテゴリを関連づける典型的実施形態が第4.2.1項において説明される。次に、該関連づけを用いてキーワードを提案及び/又は提供するための典型的実施形態が第4.2.2項において説明される。更に、幾つかの可能な改良及び代替実施形態が第4.2.3項において説明される。最後に、本発明の様々な側面を実施するために使用することができる典型的装置が第4.2.4項において説明される。4.2.1キーワードとカテゴリの関連づけ図3は、本発明と一致する形で実施することができる動作、及び、本発明と一致する形で使用又は保存することができる情報、を例示した泡図である。より具体的には、図3の動作は、キーワードとカテゴリとの間における関連性を生成するために使用される。例えば、キーワード分類動作320は、キーワードインデックス330をキーワード310から生成するために使用される。キーワード310は、例えば検索問い合わせから得ることができる。キーワードインデックス330は、キーワード332を、1つ以上の関連づけられたカテゴリ334に関するルックアップキーとして使用する。ソート動作360は、キーワードインデックス330のエントリをソートするために使用される。例えば、これらのエントリは、キーワード332の使用回数に基づいてソートすることができる。最後に、インデックス反転動作340は、キーワードインデックス330からキーワード反転インデックス350を生成するために使用される。キーワード反転インデックス350は、カテゴリ352を、関連キーワード354に関するルックアップキーとして使用することができる。4.2.2キーワードとカテゴリの関連づけを用いたキーワードの提案及び/又は提供図4は、広告のターゲットを特定するためのキーワードを提案するために及び/又は自動的に供給するために用いることができる本発明と一致した動作を示した泡図である。この図において、カテゴリ決定動作410は、広告情報420を用いて1つ以上のカテゴリ450を決定する。カテゴリ決定動作410は、次の手法のうちの1つ以上を用いてカテゴリを決定する。例えば、1つの手法を用いた場合において、広告情報420が1つ以上のキーワードを含む場合は、カテゴリ決定動作410は、キーワード-カテゴリ関連づけ情報キーワードインデックス330、等を用いて、これらの1つ以上のキーワードと関連づけられた1つ以上のカテゴリ334を決定する。決定された1つ以上のカテゴリは、ユーザーインタフェース動作440に提供される。ユーザーインタフェース動作440は、i決定されたカテゴリを広告主、又はその代理人以下単純に広告主とするに提示するため、及びii提示されたカテゴリに関するフィードバックを広告主から受け取るために、使用することができる。例えば、幾つかの候補カテゴリを広告主に提示することができる。広告主は、該提示に応答して、これらの候補カテゴリのうちのいずれが適切であるか及び/又は適切でないかを示すことができる。別の手法においては、広告情報410は、クリエイティブ又はランディングウェブページへのリンクを含むことができる。カテゴリ決定動作410は、該情報及びその他の情報405を用いて、1つ以上のカテゴリを決定する。例えば、DETERMININGCONTEXTUALINFORMATIONFORADVERTISEMENTSANDUSINGSUCHDETERMINEDCONTEXTUALINFORMATIONTOSUGGESTTARGETINGCRITERIAANDORINTHESERVINGOFADVERTISEMENTS広告に関するコンテキスト情報の決定、及び該決定されたコンテキスト情報を用いたーゲット特定基準の提案及び/又は広告の提供という題名を有し、アミットシンハル、メーランサハミ、アミットパテル及びスチーブローレンスを発明者として記載する米国特許出願一連番号10/419,692出願日:2003年4月21日本明細書において参照することによって本明細書に組み入れられているを参照すること。該特許出願では、生成された広告コンテキスト情報は、広告主がキーワード等の追加の広告提供制限事項を検討するのを援助するために使用することができる、と述べている。使用される手法複数の手法を含むにかかわらず、1つ以上のカテゴリ450が生成される。キーワード提案/提供動作460は、1つ以上の生成されたカテゴリ450を用いて1つ以上のキーワード465を生成する。例えば、キーワード提案/提供動作460は、1つ以上のカテゴリ450を、キーワード反転インデックス350内のルックアップキーワード354に関するキー352として使用することができる。決定されたキーワード476は、提案されたキーワードとしてユーザーに提供することができ、又は、ターゲット特定キーワードとして自動的に広告と関連づけることができる。しかしながら、下記の本発明の一実施形態においては、キーワード資格試験が最初に実施される。本発明の一実施形態においては、キーワード提案/提供動作460は、キーワードを決定する際に未使用在庫情報455を使用する。例えば、該未使用在庫情報455は、ある一定の時間における幾つかの未使用広告スポットとキーワードを関連づけることができる。生成されたターゲット特定キーワード465は、これらのキーワードと関連づけられた幾つかの未使用広告スポットに基づいて順序を定めることができる。このように、ターゲット特定キーワードとして使用された場合に、本来ならば未使用である数多くの広告スポットを埋めることになるキーワードを、本来ならば未使用である広告スポットをほとんど埋めないキーワードよりも優先させることができる。図5において、未使用在庫情報560は、ページアセンブリ動作510によってコンパイルされる。これらの動作510は、基本的には、ウェブページ情報例えば検索結果530、問い合わせ情520及び広告例えば広告サーバーからの広告540を組み合わせて、広告550を有するウェブページを生成する。該ウェブページが10の広告スポットを有しており更に10の広告が提供されると仮定すると、この場合は、未使用広告スポットは存在せず、情報560は更新する必要がない。しかしながら、該ウェブページが10の広告スポットを有していて3つの広告のみが提供されている場合は、7つの未使用広告スポットが存在する。この場合は、情報560のうちで問い合わせ520内において見つかったキーワード562に対応するエントリに関して、関連づけられた数の未使用広告スポット564を増やすことができる。従って、未使用広告スポット数564は、幾つかのページ提供における未使用広告スポットの和に相当する。未使用広告スポット数564は、臨時の合計であることができ、例えば、過去2週間におけるページ提供に基づいて時間窓関数を当てはめることができ、その他のである。未使用在庫情報560は、未使用広告スポット数に基づいて時折順序を設定することができる。再度図4において、上述されているように、決定されたキーワードは、単純に広告主に提案すること、又はキーワードターゲットとして広告に提供することができるが、これらのキーワードの資格を最初に試験することが望ましい場合がある。キーワードの資格が試験される実施形態においては、キーワードステータス確認動作470は、検討対象キーワード465のキーワードステータス確認情報例えば、広告主の承認を得る必要なしに広告ターゲット特定情報として使用する上で適格であると判定された、広告ターゲット特定情報として使用する上で適格であると判定されたが広告主の承認を必要とする、適格であると判定されずかつ不適格であるとも判定されていない、又は、広告ターゲット特定情報として使用する上で不適格であると判定されている、のうちのいずれか1つ以上を確認することができる。キーワードステータス情報475は、例えば、広告のカテゴリに留意せずにキーワード一般に関して維持することができ、及び/又は1つ以上の特定のカテゴリとの関係におけるキーワードに関して維持することができる。図4には示されていないが、キーワードステータス情報475は、キーワード反転インデックス350内に保存すること、又はその他の形でキーワード反転インデックス350とリンクさせることができる。キーワードが広告主の承認を得る必要なしに広告ターゲット特定情報として使用する上で適格であると判定された場合は、ターゲット特定キーワードとして広告情報に加えられる。キーワードが広告ターゲット特定情報として使用する上で適格であると判定されたが広告主の承認を要する場合は、広告主に提示するためにユーザーインタフェース動作440に提供される。キーワードが不適格であると判定された場合は、検討対象から外すべきである。最後に、キーワードが適格でも不適格でもない例えば、該キーワードに関する資格判定情報が存在しない場合は、キーワード試用動作480に渡すことができる。キーワード試用動作480は、該キーワードをターゲット特定キーワードとして使用して広告485を提供することによって該広告のパフォーマンスを調べる。この試用は、本来であれば未使用の在庫に限定することができる。一般的には、広告のパフォーマンスが良い場合は、該広告は適格と判定され、該広告のパフォーマンスが悪い場合は、不適格と判定され、キーワードステータス情報475が適宜更新される。この場合、様々なステータスレベルを様々な試用パフォーマンスレベルと関連づけることができる。キーワードが適格又は不適格であると判定する方法については、その他の方法も使用することができる。検討対象となっているが資格判定情報を有さない幾つかのキーワードが存在する場合は、キーワード試用動作480は、未使用在庫量が最も多いキーワードを最初に試用する。その後にさらなるキーワードを試用することができる。本発明の一実施形態においては、これらのさらなるキーワードは、未使用在庫が多いほうのキーワードを先に試用して未使用在庫が少ないほうのキーワードをその後に試用することができる。本発明に従って実施することができる動作を紹介後は、これらの動作を実施するための幾つかの典型的な方法について説明される。図6は、本発明と一致する形でキーワード提案/提供動作460を実施するために使用することができる典型的方法600の流れ図である。方法600では、1つ以上のカテゴリが受け入れられる。ブロック610次に、これらの受け入れられたカテゴリを用いて1つ以上のキーワードが決定される。ブロック620。この決定は、キーワードインデックス330を用いて行うことができることを思い出すこと。決定されたキーワードは、未使用在庫情報を用いて順序が決定される。ブロック630このようにして、ターゲット特定キーワードとして用いられた場合により多くの広告スポットを埋めることになるキーワードを最初に検討することができる。ループ640乃至660によって示されているように、決定されたキーワードの各々に関して、又は少なくとも検討対象となっている決定キーワードの各々に関して、幾つかの行為を行うことができる。本発明の一実施形態においては、キーワードが単純に広告主に対して提案されるか又はターゲット特定キーワードとして提供される。ブロック650本発明の代替実施形態においては、キーワードステータスが確認される。例えば、キーワードが適格であるかどうかを決定することができる。決定ブロック680適格であることが決定された場合は、方法600は、既に説明されているブロック650に進む。キーワードが適格でなくかつ不適格にもされてない場合は、資格試験のための試用動作にパスワードを渡すことができる。ブロック690すべてのキーワードを処理後は、方法600から出る。ブロック670図7は、本発明と一致する形でユーザーインタフェース動作440を実施するために使用することができる典型的方法700の流れ図である。ブロック710によって示されるように、様々なイベントの発生に対応して方法700の様々な分枝を実施することができる。より具体的には、例えば、カテゴリ決定動作410によって1つ以上の候補カテゴリが提供された場合は、これらの候補カテゴリは、広告主による受け入れ又は拒否を行うために広告主に提示されブロック720、その後に方法700はブロック710に戻る。例えば、キーワード提案動作460によって1つ以上の候補キーワードが提供された場合は、これらの候補キーワードは、広告主による受け入れ又は拒否を行うために広告主に提示されブロック320、その後に方法700はブロック710に戻る。1つ以上のカテゴリが広告主によって受け入れられた場合は、これらのカテゴリは、キーワード提案/提供動作例えば、図4のキーワード提案/提供動作に渡されブロック740、その後に方法700はブロック710に戻る。1つ以上のキーワードが広告主によって受け入れられた場合は、これらのキーワードは、ターゲット特定キーワードとして広告情報に追加されブロック750、その後に方法700はブロック710に戻る。方法700から出る条件が生じた場合は、方法700は終了することができる。ノード760図8は、キーワードがターゲット特定キーワードとして適格であるかどうかを試用するために本発明と一致する形で使用できる典型的方法800の流れ図である。最初に、1つのキーワード又は2つ以上のキーワードが受け入れられる。ブロック810試用動作は、1つの広告さらには1つのグループの広告を提供する際に1つ以上のキーワードをターゲット特定キーワードとして使用しブロック820、更に、これらの広告のパフォーマンスは追跡することができるブロック830。本発明の一実施形態においては、試用ターゲット特定キーワードを用いた広告の提供は、本来ならば未使用である広告スポット在庫に限定することができる。ある一定の時間が経過後及び/又はある一定の数の広告提供後は、様々なパフォーマンスレベルに応じて方法800の様々な分枝を実施することができる。キーワードのパフォーマンスが一般的に、又は特定のカテゴリに関して良い場合は、一般的に、又は該特定のカテゴリに関する提案対象キーワードとして及び/又は適格キーワードとして印が付けられ、その後に方法800を出るノード870。実際上は、適格なターゲット特定キーワードを有する一般的クリエイティブ例えば、一定の広告主情報が挿入されたクリエイティブテンプレートが急ぎの承認を得る対象となる可能性がある。他方、一般的に、又は特定のカテゴリに関してキーワードのパフォーマンスが悪い場合は、一般的に、又は該特定のカテゴリに関して不適格と判定されて使用不能として印が付けられ、その後に方法800から出るノード870。このようにして、広告主は、パフォーマンスが悪いキーワードを用いて自己の広告のターゲットを特定するという欲求不満を回避することができる。図示されていないが、キーワードは、様々なパフォーマンスレベルと関連づけられた様々なステータスレベルを割り当てることができる。一実施形態においては、1つ以上のキーワードをターゲット特定キーワードとして用いることに従って提供された広告が、最良のキーワード例えば、既に使用中のキーワードであると販売員及び/又は顧客が既にみなしているキーワードに匹敵するパフォーマンス例えば、クリックスルー率を有する場合は、これらのキーワードに関するパフォーマンスは良いとみなすことができる。4.2.3改良点及び代替方法広告提供エンティティが例えば、特定のキーワードターゲットに依らずに不透明な広告パフォーマンス報告を提供したほうが望ましい場合がある。このように、キーワードによるターゲット特定上の知識基盤を保護すること及びデータを企業秘密として取り扱うことが可能である。該実施形態においては、広告主は、使用されているキーワード式ターゲット特定に関する詳細について知る必要なしに自己の広告キャンペーンのパフォーマンスが良いことを知って満足することができる。このことは、代替のキーワード式ターゲット特定広告提供会社を広告主にとって魅力の小さいものにすることができる。適格キーワードは、例えばネガティブキーワード、等のあらゆる種類のキーワードであることができることに注目すること。4.2.4典型的装置図9は、上述されている1つ以上の動作を実施すること及び様々な情報を保存することができる機械900の高位ブロック図である。機械900は、基本的には、プロセッサ910と、入力/出力インタフェース装置930と、記憶装置920と、結合された要素間における情報伝達を容易にするためのシステムバス又はネットワーク940と、を含む。入力/出力装置930には、入力装置932及び出力装置934を結合させることができる。プロセッサ910は、本発明の1つ以上の側面を実施するために、機械によって実行可能な命令例えば、カリフォルニア州パロアルトに所在するサンマイクロシステムズインクから入手可能なSolarisオペレーティングシステム上で又はノースカロライナ州ダラムに所在するレッドハットインク、等のいくつかの販売業者から幅広く入手可能なLinux登録商標オペレーティングシステム上で走るC又はC、等を実行することができる。これらの機械で実行可能な命令の少なくとも一部は、記憶装置920に一時的に又はそれよりも永続的に格納することができ、及び/又は入力インタフェース装置930を通じて外部源から受け取ることができる。一実施形態においては、機械900は、1つ以上の従来のパソコンであることができる。この場合は、処理装置910は、1つ以上のマイクロプロセッサであることができる。バス940は、システムバスを含む。記憶装置920は、読取専用メモリROM及び/又はランダムアクセスメモリRAM、等のシステムメモリを含む。更に、記憶装置920は、ハードディスクからの読み取り及びハードディスクへの書き込みを行うためのハードディスクドライブ、例えば取り外し可能な磁気ディスクからの読み取り又は例えば取り外し可能な磁気ディスクへの書き込みを行うための磁気ディスクドライブ、取り外し可能な磁気光学ディスクコンパクトディスク、等又はその他の磁気光学媒体からの読み取り又は該光学ディスク又は光学媒体への書き込みを行うための光学ディスクドライブを含む。ユーザーは、例えばキーボード及びポインティング装置例えばマウス、等の入力装置932を通じてコマンド及び情報をパソコンに入力することができる。更に、その他の入力装置マイク、ジョイスティック、ゲームパッド、衛星放送アンテナ、スキャナ、等も追加で又は代替として含むことができる。これらの入力装置及びその他の入力装置は、システムバス940に結合された適切なインタフェース930を通じて処理装置910に接続されることがしばしばある。出力装置934は、同じく適切なインタフェースを通じてシステムバス940に接続することができるモニター又はその他の型の表示装置を含む。パソコンは、該モニターに加えて又は該モニターの代わりに、スピーカー及びプリンタ等のその他の周辺出力装置図示されていないを含む。4.3動作例次に、本発明の典型的動作を示した一例が提供される。ここでは、広告主がジャガー車のディーラーであると仮定する。単語ジャガーは、広告情報420として提供される。該単語は、入力されたクリエイティブ情報、広告内において指定されたランディングウェブページからの情報、及び/又は入力されたターゲット特定キーワード、等から取り出しておくことができる。カテゴリ決定動作410は、以下のような様々なそして関連している可能性があるカテゴリ及びサブカテゴリを決定することができる。自動車...コンピュータ...オペレーティングシステム音楽...ポピュラー音楽音楽...楽器動物...ほ乳類...ネコ科映画...外国映画旅行...リゾートスポーツ及び娯楽...シュノーケルによる遊泳...スキューバダイビング...スポーツ及び娯楽...フットボール...ペット...魚例えば、ジャガーは、高級車、アップル社のマッキントッシュ登録商標のオペレーティングシステム、レコーディングアーティストジャガーライト氏又はジェットジャガー氏、外国映画エイミーとジャガー、ベリーズの環礁、アメリカンフットボールのチーム、又は淡水魚のシクリッド、に該当する可能性がある。決定されたカテゴリは、ユーザーインタフェース動作440を通じて広告主に提供することができ、広告主は、自動車のカテゴリのみが該当するように指定することができる。これで、自動車のカテゴリが、キーワード提案/提供動作460に提供され、該動作460は、以下のような1つ以上のキーワードを生成する。車、部品、サービス、ディーラー、融資者、X型、S型、XJ、等生成されたキーワードは、aターゲット特定キーワードとして広告に加えること、bターゲット特定キーワードとして広告主に提案すること、又はc試験することまだ適格であると判定されていない場合ができる。キーワード試用動作480は、広告を対象キーワードとともに掲載し、対象となる1つ以上のキーワードを基準にした広告のパフォーマンスを追跡することができる。パフォーマンスが良いキーワードは、aターゲット特定キーワードとして広告に加えること、又はbターゲット特定キーワードとして広告主に提案すること、ができる。パフォーマンスが良くないキーワードは、一般的に不適格であると判定するか又は自動車のカテゴリに関して不適格であると判定することができる。4.4.結論上記の開示から理解できるように、本発明は、i広告のターゲット特定能力を向上させること及び本来であれば逸することになる関連広告提供機会を利用することを目的としてターゲット特定基準を提案又は提供することによって、及びiiターゲットの特定が不良である広告を広告主が排除するのを援助することによって、オンライン広告主及びエンティティによるオンライン広告の提供を援助するために使用することができる。上述されている様々な手法は、組み合わせて又は提携して使用することができる。本発明の幾つかの実施形態は、広告主がキーワード式ターゲット特定の詳細を学ぶ必要がないようにするものである。更に、本来であれば広告がほとんど提供されない問い合わせから貴重な情報が学ばれる。本発明は、広告のターゲット特定を向上させること、顧客の経験を高めること、顧客のサポートに関する負担を軽減すること、及び収入を増大させることができる。"