(57)【要約】【課題】  音声広告を挿入するための方法、装置、デバイス及びシステムを提供する。【解決手段】  本発明は、音声広告を挿入するための方法、装置、デバイス及びシステムを提供する。本発明は、音声広告が挿入される音声の特徴情報に従って、音声を再生する際の音声広告の挿入時点を特定し、ユーザ機器において挿入時点で音声広告の挿入と関連付けられた操作を実行する。本発明は、ユーザエクスペリエンスを高めるため、適切な時点で音声広告を音声に挿入して音声広告の不釣り合いを少なくすることを可能にする。その上、本発明は、ユーザエクスペリエンスと収益要件の両方をより良く満たすため、大量のインターネット広告を素早く配信できるように、リアルタイムで広告コンテンツを迅速に更新することができる。【選択図】      図１
2015212928.tif 000002
【特許請求の範囲】
【請求項１】
ネットワークデバイスにおいて、ユーザ機器による音声広告の挿入を支援するための方法であって、
−  前記音声広告が挿入される音声の特徴情報に従って、前記音声を再生する際の前記音声広告の挿入時点を特定するステップと、
−  前記音声に挿入されるべき前記音声広告、前記挿入時点、及び指示情報を前記ユーザ機器に提供するステップであって、前記指示情報は、前記挿入時点で前記音声広告の前記挿入と関連付けられた操作を実行するように前記ユーザ機器に指示するために使用されるステップと
を含むことを特徴とする方法。
【請求項２】
前記音声は、前記ユーザ機器で再生されなければならず、前記指示情報は、前記挿入時点に到達すると、前記音声の前記再生をポーズし、前記音声広告を挿入するように前記ユーザ機器に指示するために使用されることを特徴とする、請求項１に記載の方法。
【請求項３】
前記音声はライブ音声であり、前記指示情報は、音声広告を現在挿入することができるというプロンプト情報をユーザに表示するように前記ユーザ機器に指示するために使用されることを特徴とする、請求項１に記載の方法。
【請求項４】
前記特徴情報に従って前記挿入時点を特定する前記ステップは、
−  現時点に至るまでにリアルタイム分析によって得られた前記ライブ音声の特徴情報に従って、前記音声広告を挿入することが適切であるかどうかを判定するステップと、
−  前記音声広告を挿入することが適切であると判定された場合、前記現時点又は前記現時点の後の近接時点を前記挿入時点として使用するステップと
を含むことを特徴とする、請求項３に記載の方法。
【請求項５】
前記特徴情報に従って前記挿入時点を特定する前記ステップは、
−  前記音声広告の特徴情報及び／又は前記音声を好むユーザのユーザ属性情報と組み合わせて、前記音声の前記特徴情報に従って、前記音声を再生する際の前記音声広告の前記挿入時点を特定するステップ
を含むことを特徴とする、請求項１に記載の方法。
【請求項６】
前記音声の前記特徴情報は、
−  前記音声の固有のデータ特徴情報、及び、
−  前記音声の人感的特徴情報
の少なくとも１つを含むことを特徴とする、請求項１〜５のいずれか一項に記載の方法。
【請求項７】
前記特徴情報に従って前記挿入時点を特定する前記ステップの前に、
−  前記音声に従って、前記音声の前記データ特徴情報を特定するステップと、
−  前記データ特徴情報に従って、前記音声の前記人感的特徴情報を特定するステップと
を更に含むことを特徴とする、請求項６に記載の方法。
【請求項８】
前記特徴情報に従って前記挿入時点を特定する前記ステップの前に、
−  前記音声の広告挿入と関連付けられた情報に従って、複数の音声広告から、前記音声に挿入されるべき音声広告を選択するステップ
を更に含むことを特徴とする、請求項１〜７のいずれか一項に記載の方法。
【請求項９】
前記特徴情報に従って前記挿入時点を特定する前記ステップの前に、
−  前記音声の前記特徴情報及び複数の音声広告の各音声広告の特徴情報に従って、前記複数の音声広告から、前記音声に挿入されるべき音声広告を選択するステップ
を更に含むことを特徴とする、請求項１〜７のいずれか一項に記載の方法。
【請求項１０】
ユーザ機器において広告を挿入するための方法であって、
−  ネットワークデバイスによって提供され、再生されている音声に挿入されるべき音声広告、前記音声を再生する際の前記音声広告の挿入時点、及び指示情報を受信するステップと、
−  前記指示情報に従って、前記挿入時点で前記音声広告の前記挿入と関連付けられた操作を実行するステップと
を含むことを特徴とする、方法。
【請求項１１】
前記音声は、前記ユーザ機器で再生されており、前記指示情報に従って前記操作を実行する前記ステップは、
−  前記指示情報に従って、前記挿入時点に到達すると、前記音声の前記再生をポーズし、前記音声広告を挿入するステップ
を含むことを特徴とする、請求項１０に記載の方法。
【請求項１２】
前記受信するステップの前に、
−  前記音声のコンテンツ情報を取得して再生するステップ
を更に含むことを特徴とする、請求項１１に記載の方法。
【請求項１３】
前記音声はライブ音声であり、前記指示情報に従って前記操作を実行する前記ステップは、
−  前記指示情報に従って、前記挿入時点で又は前記挿入時点の後に、音声広告を現在挿入することができるというプロンプト情報をユーザに表示するステップ
を含むことを特徴とする、請求項１０に記載の方法。
【請求項１４】
前記指示情報に従って前記操作を実行する前記ステップの後に、
−  前記ユーザが前記広告の挿入を確認すると、前記音声の前記再生をポーズし、前記音声広告を挿入するステップ
を更に含むことを特徴とする、請求項１３に記載の方法。
【請求項１５】
ネットワークデバイスにおいて、ユーザ機器による音声広告の挿入を支援するための補助装置であって、
前記音声広告が挿入される音声の特徴情報に従って、前記音声を再生する際の前記音声広告の挿入時点を特定するための第１の特定手段と、
前記音声に挿入されるべき前記音声広告、前記挿入時点、及び指示情報を前記ユーザ機器に提供するための提供手段であって、前記指示情報は、前記挿入時点で前記音声広告の前記挿入と関連付けられた操作を実行するように前記ユーザ機器に指示するために使用される提供手段と
を備えることを特徴とする、補助装置。
【請求項１６】
前記音声は、前記ユーザ機器で再生されなければならず、前記指示情報は、前記挿入時点に到達すると、前記音声の前記再生をポーズし、前記音声広告を挿入するように前記ユーザ機器に指示するために使用されることを特徴とする、請求項１５に記載の補助装置。
【請求項１７】
前記音声はライブ音声であり、前記指示情報は、音声広告を現在挿入することができるというプロンプト情報をユーザに表示するように前記ユーザ機器に指示するために使用されることを特徴とする、請求項１５に記載の補助装置。
【請求項１８】
前記第１の特定手段は、
現時点に至るまでにリアルタイム分析によって得られた前記ライブ音声の特徴情報に従って前記音声広告を挿入することが適切であるかどうかを判定するための判定手段と、
前記音声広告を挿入することが適切であると判定された場合、前記現時点又は前記現時点の後の近接時点を前記挿入時点として使用するための第１のサブ特定手段と
を備えることを特徴とする、請求項１７に記載の補助装置。
【請求項１９】
前記第１の特定手段は、
前記音声広告の特徴情報及び／又は前記音声を好むユーザのユーザ属性情報と組み合わせて、前記音声の前記特徴情報に従って、前記音声を再生する際の前記音声広告の前記挿入時点を特定するための第２のサブ特定手段
を備えることを特徴とする、請求項１５に記載の補助装置。
【請求項２０】
前記音声の前記特徴情報は、
−  前記音声の固有のデータ特徴情報、及び、
−  前記音声の人感的特徴情報
の少なくとも１つを含むことを特徴とする、請求項１５〜１９のいずれか一項に記載の補助装置。
【請求項２１】
前記第１の特定手段の前に、操作を実行するための以下の手段、即ち、
前記音声に従って、前記音声の前記データ特徴情報を特定するための第２の特定手段と、
前記データ特徴情報に従って、前記音声の前記人感的特徴情報を特定するための第３の特定手段と
を更に備えることを特徴とする、請求項２０に記載の補助装置。
【請求項２２】
前記第１の特定手段の前に、操作を実行するための以下の手段、即ち、
前記音声の前記広告挿入と関連付けられた情報に従って、複数の音声広告から、前記音声に挿入されるべき音声広告を選択するための第１の選択手段
を更に備えることを特徴とする、請求項１５〜２１のいずれか一項に記載の補助装置。
【請求項２３】
前記第１の特定手段の前に、操作を実行するための以下の手段、即ち、
前記音声の前記特徴情報及び複数の音声広告の各音声広告の特徴情報に従って、前記複数の音声広告から、前記音声に挿入されるべき音声広告を選択するための第２の選択手段
を更に備えることを特徴とする、請求項１５〜２１のいずれか一項に記載の補助装置。
【請求項２４】
ユーザ機器において広告を挿入するための挿入装置であって、
ネットワークデバイスによって提供され、再生されている音声に挿入されるべき音声広告、前記音声を再生する際の前記音声広告の挿入時点、及び指示情報を受信するための受信手段と、
前記指示情報に従って、前記挿入時点で前記音声広告の前記挿入と関連付けられた操作を実行するための実行手段と
を備えることを特徴とする、挿入装置。
【請求項２５】
前記音声は、前記ユーザ機器で再生されており、前記実行手段は、
前記指示情報に従って、前記挿入時点に到達すると、前記音声の前記再生をポーズし、前記音声広告を挿入するための第１のサブ実行手段
を備えることを特徴とする、請求項２４に記載の挿入装置。
【請求項２６】
前記受信手段の前に、操作を実行するための以下の手段、即ち、
前記音声のコンテンツ情報を取得して再生するための第１の再生手段
を更に備えることを特徴とする、請求項２５に記載の挿入装置。
【請求項２７】
前記音声はライブ音声であり、前記実行手段は、
前記指示情報に従って、前記挿入時点で又は前記挿入時点の後に、音声広告を現在挿入することができるというプロンプト情報をユーザに表示するための第２のサブ実行手段
を備えることを特徴とする、請求項２４に記載の挿入装置。
【請求項２８】
前記実行手段の後に、操作を実行するための以下の手段、即ち、
前記ユーザが前記広告の挿入を確認すると、前記音声の前記再生をポーズし、前記音声広告を挿入するための第２の再生手段
を更に備えることを特徴とする、請求項２７に記載の挿入装置。
【請求項２９】
請求項１５〜２３のいずれか一項に記載の補助装置を備える、ネットワークデバイス。
【請求項３０】
請求項２４〜２８のいずれか一項に記載の挿入装置を備える、ユーザ機器。
【請求項３１】
請求項２９に記載のネットワークデバイスと、請求項３０に記載のユーザ機器とを備える、システム。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、コンピュータの技術分野に関し、具体的には、音声広告を挿入するための方法、装置、デバイス及びシステムに関する。
【背景技術】
【０００２】
先行技術では、インターネット広告は、主に、テキスト、写真、映像又はリンクの形式であり、音声広告が現れることはほとんどない。その上、先行技術では、広告を再生すると、広告は、一般に、広告が挿入される映像の先頭又は末尾に単に追加される。この方法では、広告の外観は、いささか不釣り合いなものであり、一般に、映像環境とは調和せず、従って、ユーザエクスペリエンスを損なう。その上、この方法では、リアルタイムで広告コンテンツを更新することができず、従って、大規模な広告の需要を満たすことは難しい。
【発明の概要】
【発明が解決しようとする課題】
【０００３】
本発明の目的は、音声広告を挿入するための方法、装置、デバイス及びシステムを提供することである。
【課題を解決するための手段】
【０００４】
本発明の一態様によれば、ネットワークデバイスにおいて、ユーザ機器による音声広告の挿入を支援するための方法であって、
ａ）音声広告が挿入される音声の特徴情報に従って、音声を再生する際の音声広告の挿入時点を特定するステップ
を含み、
ｉ）音声に挿入されるべき音声広告、挿入時点、及び指示情報をユーザ機器に提供するステップであって、指示情報は、挿入時点で音声広告の挿入と関連付けられた操作を実行するようにユーザ機器に指示するために使用される、ステップ
を更に含む、方法が提供される。
【０００５】
本発明の別の態様によれば、ユーザ機器において広告を挿入するための方法であって、
Ａ）ネットワークデバイスによって提供され、再生されている音声に挿入されるべき音声広告、音声を再生する際の音声広告の挿入時点、及び指示情報を受信するステップと、
Ｂ）指示情報に従って、挿入時点で音声広告の挿入と関連付けられた操作を実行するステップと
を含む、方法も提供される。
【０００６】
本発明の別の態様によれば、ネットワークデバイスにおいて、ユーザ機器による音声広告の挿入を支援するための補助装置であって、
音声広告が挿入される音声の特徴情報に従って、音声を再生する際の音声広告の挿入時点を特定するための第１の特定手段と、
音声に挿入されるべき音声広告、挿入時点、及び指示情報をユーザ機器に提供するための提供手段であって、指示情報は、挿入時点で音声広告の挿入と関連付けられた操作を実行するようにユーザ機器に指示するために使用される、提供手段と
を備える、補助装置も提供される。
【０００７】
本発明の別の態様によれば、ユーザ機器において広告を挿入するための挿入装置であって、
ネットワークデバイスによって提供され、再生されている音声に挿入されるべき音声広告、音声を再生する際の音声広告の挿入時点、及び指示情報を受信するための受信手段と、
指示情報に従って、挿入時点で音声広告の挿入と関連付けられた操作を実行するための実行手段と
を備える、挿入装置も提供される。
【０００８】
先行技術と比較すると、本発明は、以下の利点を有する。即ち、１）ユーザエクスペリエンスを高めるため、適切な時点で音声広告を音声に挿入して音声広告の不釣り合いを少なくし得るように、音声広告挿入解決策を提供すること、２）本発明は、オリジナルの音声を変更することなく音声広告を正常に再生できるように、音声広告が挿入される際、音声広告を音声に書き込むよりむしろ、オリジナルの音声の再生をポーズするように選択し、その上、この方法により、音声広告の頻繁な変更のニーズにうまく適合するように音声広告を変更することが非常に簡単であること（例えば、同じ音声において挿入される音声広告は、ほんの５分後に異なり得る）、３）本発明は、生中継の場合に音声広告を正しく挿入できる可能性を提供することができること、４）挿入された音声広告が音声とうまく釣り合い、ユーザエクスペリエンスを更に高めるように、音声広告を挿入する必要がある音声の広告挿入関連情報に従って、音声広告を選択することができること。
【０００９】
添付の図面を参照して、非限定的な実施形態に関する以下の詳細な説明を読み進めることによって、本発明の他の特徴、目的及び利点がより明らかになるであろう。
【図面の簡単な説明】
【００１０】
【図１】本発明の実施形態による、音声広告を挿入するための方法のフローチャート
【図２】本発明の別の実施形態による、音声広告を挿入するための方法のフローチャート
【図３】本発明の別の実施形態による、音声広告を挿入するための方法のフローチャート
【図４】本発明の実施形態による、音声広告を挿入するためのシステムの構造概略図
【図５】本発明の別の実施形態による、音声広告を挿入するためのシステムの構造概略図
【図６】本発明の別の実施形態による、音声広告を挿入するためのシステムの構造概略図
【発明を実施するための形態】
【００１１】
添付の図面の同じ又は同様の参照番号は、同じ又は同様のコンポーネントを示す。
【００１２】
以下では、添付の図面と併せて、本発明について更に詳細に説明する。
【００１３】
図１は、本発明の実施形態による、音声広告を挿入するための方法のフローチャートである。
【００１４】
この実施形態の方法は、主に、ネットワークデバイス及びユーザ機器を通じて実装される。ネットワークデバイスは、これらに限定されないが、単一のネットワークサーバ、複数のネットワークサーバから構成されるサーバグループ、又は、クラウドコンピューティングに基づく多くのコンピュータ若しくはネットワークサーバから構成されるクラウドを含み、クラウドコンピューティングは、分散コンピューティングの一種であり、疎結合のコンピュータセットのクラスタによって形成された超仮想コンピュータである。ユーザ機器は、これらに限定されないが、ＰＣ、タブレットコンピュータ、スマートフォン、ＰＤＡ、ＩＰＴＶ、又は、本発明の方法を実装することができる任意のインテリジェントデバイスを含む。ネットワークデバイス及びユーザ機器が位置するネットワークは、これらに限定されないが、インターネット、広域ネットワーク、メトロポリタンエリアネットワーク、ローカルエリアネットワーク、ＶＰＮネットワークなどを含む。
【００１５】
ユーザ機器、ネットワークデバイス及びネットワークは単なる例であり、本発明に適用可能な場合は、他の既存の又は将来出現する可能性のあるコンピューティングデバイス又はネットワークも、参照により本明細書に組み込まれる本発明の保護の範囲内に含めるものとすることに留意するものとする。
【００１６】
この実施形態による方法は、以下のステップＳ１、Ｓ２、Ｓ３及びＳ４を含む。
【００１７】
ステップＳ１では、ネットワークデバイスは、挿入されるべき音声広告の特徴情報及び音声広告が挿入される音声の特徴情報に従って、音声を再生する際の音声広告の挿入時点を特定する。
【００１８】
以下では、最初に、音声及びその特徴情報について説明する。
【００１９】
音声は、任意の音のネットワークリソースを含み、例えば、音声は、音楽、歌、クロストーク、朗読、トークショーなどを含み得る。その上、音声は、ライブ音声でも非ライブ音声でもよく、例えば、音声は、生放送のトークショーでも事前に記録された歌などでもよい。
【００２０】
音声がライブ音声の場合、ステップＳ１は、一般に、ライブ音声の再生の間、リアルタイムで実行され、音声がライブ音声でない場合、ステップＳ１は、ユーザ機器に音声が提供されて再生される際にリアルタイムで実行することも、ユーザ機器が音声を再生する前に実行することもできることに留意するものとする。
【００２１】
音声の特徴情報は、音声の特徴の反映が可能ないかなる情報も含む。好ましくは、音声の特徴情報は、以下の少なくとも１つを含む。
【００２２】
１）音声の固有のデータ特徴情報
音声の固有のデータ特徴情報は、音声のデータで直接表すことができる特徴を示す。例えば、音声の固有のデータ特徴情報は、これらに限定されないが、音量、振幅変化、ゼロ交差率、ＭＦＣＣ、強度、スペクトル分析結果などを含み得る。
【００２３】
音声の固有のデータ特徴情報は、音声のデータを分析することによって得ることができる。
【００２４】
２）音声の人感的特徴情報
音声の人感的特徴情報は、人間による音声の理解又は定義を示すことができる。例えば、音声の人感的特徴情報は、これらに限定されないが、音声によって表現される感情（例えば、幸福、痛み又は絶望）、音声が属する芸術分類（例えば、クロストーク、朗読又は歌）及び音声が属する言語領域分類（例えば、英語、広東語又は他の方言）を含む。
【００２５】
音声の人感的特徴情報は、手動による注釈付けによって又は音声のデータを分析することによって得ることができる。
【００２６】
好ましい解決策として、ステップＳ１の前に、ネットワークデバイスは、音声に従って音声のデータ特徴情報を特定し、データ特徴情報に従って音声の人感的特徴情報を特定することができることに留意するものとする。
【００２７】
例えば、最初に、ネットワークデバイスは、音声の音量、振幅変化、ゼロ交差率、ＭＦＣＣ、強度、スペクトル分析結果などのデータ特徴情報を得るため、音声のデータを分析し、次いで、ネットワークデバイスは、音声によって表現される感情及び芸術分類などの人感的特徴情報を得るため、得られたデータ特徴情報を事前に訓練された分類子に入力する。１つ又は複数の分類モデルは、事前に訓練された分類子を得るため、人感的特徴情報で注釈付けされた大量の音声を使用して訓練することができる。
【００２８】
上記の例は、本発明の技術的解決策を限定するよりむしろ、単に、本発明の技術的解決策を説明するために使用されることに留意するものとし、当業者であれば、音声の特徴情報を得るためのいかなる実装形態も本発明の範囲に含まれることを理解するものとする。
【００２９】
以下では、ステップＳ１の特定の実装形態について説明する。
【００３０】
具体的には、ネットワークデバイスが、音声広告が挿入される音声の特徴情報に従って、音声を再生する際の音声広告の挿入時点を特定する方法は、これらに限定されないが、以下を含む。
【００３１】
１）ネットワークデバイスは、単に音声広告が挿入される音声の特徴情報に従って、音声を再生する際の音声広告の挿入時点を特定する。
【００３２】
例えば、音声の特徴情報は、音声が属する芸術分類がニュースであることを示し、次いで、ネットワークデバイスは、音声の芸術分類がニュースであるなどの状況に従って、音声中のより早い時点を挿入時点として選択する。
【００３３】
別の例として、音声がライブ音声の場合、ネットワークデバイスは、現時点に至るまでにライブ音声において音声の強度が突然２倍に増したと分析される（生中継では、称賛の声を上げるか又は大きな歓声を上げるなど、ユーザの気分の高揚が２倍にも思われることを示す場合がある）という状況に従って、現時点が挿入時点であると特定する。
【００３４】
好ましくは、ネットワークデバイスは、単に音声広告が挿入される音声の特徴情報に従って、音声を再生する際の音声広告の挿入時点として、音声の隣接時間帯に対応する特徴情報が既定の挿入条件と一致する時点を選択する。隣接時間帯は、時点の前又は時点の後の時間帯を含み得る。
【００３５】
例えば、既定の挿入条件は、時点の前の１５秒間の音声の波形の振幅の変化が既定の閾値より小さいことを含む。ネットワークデバイスが、音声の時点の前の１５秒間の波形の振幅の変化が既定の閾値より小さいと分析すると、この時点は、音声を再生する際の音声広告の挿入時点として使用される。この例では、既定の挿入条件は、音声の人感的特徴情報に従って挿入時点の選択を調整するように定義することもでき、例えば、ニュース音声の挿入時点は早い方、クロストーク音声の挿入時点は遅い方などとすることができる。
【００３６】
この実装形態では、音声がライブ音声ではない場合、ネットワークデバイスは、ユーザ機器に音声を提供する前若しくは提供した後、又は、ユーザ機器が音声を再生していることを知る前若しくは知った後、実装形態１）の解決策を実行することができる。即ち、音声がライブ音声ではない場合、実装形態１）の解決策をオフラインで実行することも、ユーザ機器で音声が再生される際にリアルタイムで実行することもできることに留意するものとする。音声がライブ音声の場合、実装形態１）は、一般に、リアルタイムで実行する必要があり、ステップＳ１は、ネットワークデバイスが、現時点に至るまでにリアルタイム分析によって得られたライブ音声の特徴情報に従って音声広告を挿入することが適切であるかどうかを判定し、音声広告を挿入することが適切であると判定された場合、現時点又は現時点の後の近接時点を挿入時点として使用するステップを更に含み得る。
【００３７】
近接時点は、現時点の後の、現時点に近い時点である。この近接時点は、現時点及び時間の長さを追加することによって得ることができ、この時間の長さは、事前に決定することも、ネットワークデバイスとユーザ機器との間のネットワーク状態に従ってネットワーク遅延を推定することによって決定することもできる。この近接時点を通じて、ステップＳ２においてユーザ機器がネットワークデバイスによって送信された挿入時点を受信する際、ネットワーク遅延などの要因により挿入時点が経過してしまう可能性をできる限り低減することができる。
【００３８】
ネットワークデバイスが、現時点に至るまでにリアルタイム分析によって得られたライブ音声の特徴情報に従って音声広告を挿入することが適切であるかどうかを判定するステップは、音声の生中継の間、音声広告を現在挿入することが適切であると判定され、音声広告を音声に挿入する回数の規定数に到達するか、又は、音声の生中継が終了するまで、繰り返し実行することができる。なお、ネットワークデバイスが、現時点に至るまでにリアルタイム分析によって得られたライブ音声の特徴情報に従って音声広告を挿入することが適切であるかどうかを判定するステップは、上記で言及されるような、単に音声広告が挿入される音声の特徴情報に従って、音声を再生する際の音声広告の挿入時点を特定する方法と同じか又は同様であるため、ここでは説明しない。
【００３９】
２）ネットワークデバイスは、音声広告の特徴情報及び／又は音声を好むユーザのユーザ属性情報と組み合わせて、音声の特徴情報に従って、音声を再生する際の音声広告の挿入時点を特定する。
【００４０】
音声広告は、音声に挿入することができ、音の形式で表されるいかなる広告も含む。音声広告の特徴情報は、音声広告の特徴の反映が可能ないかなる情報も含む。好ましくは、音声広告の特徴情報は、これらに限定されないが、音声広告の固有のデータ特徴情報、音声広告の人感的特徴情報などを含む。音声広告の特徴情報は、音声の特徴情報と同じか又は同様であり、音声広告の特徴情報を得るための方法は、音声の特徴情報を得るための方法と同じか又は同様であるため、ここでは説明しない。
【００４１】
ユーザのユーザ属性情報は、ユーザ属性の反映が可能ないかなる情報も含む。好ましくは、ユーザ属性情報は、これらに限定されないが、ａ）ユーザの個人情報（これらに限定されないが、ユーザの性別、年齢、教育レベルなどを含む）、ｂ）ユーザの現在位置の環境情報（これらに限定されないが、ユーザの位置の時間情報、ユーザの位置情報などを含む）、及び、ｃ）ユーザの音声傾聴履歴（この履歴は、これらに限定されないが、過去にユーザが音声を傾聴した回数、聴いた音声のリスト及び音声を傾聴するための環境の情報を含む）を含む。ユーザ属性情報のユーザの個人情報は、ユーザが積極的に提供することも、ユーザ識別情報に従ってユーザのアイデンティティを特定した後で得ることもでき、ユーザ識別情報は、これらに限定されないが、ユーザのログイン情報、ユーザが使用するユーザ機器の識別情報などを含み得る。ユーザ属性情報のユーザの現在位置の環境情報は、ユーザ機器が提供することも、ユーザの現在のアドレス情報に従って推定することもできる。ユーザ属性情報の音声傾聴履歴は、ユーザの識別情報に従ってユーザのアイデンティティを特定した後で得ることができる。
【００４２】
音声を好むユーザのユーザ属性情報は、過去に音声を傾聴したユーザのユーザ属性情報に従って得ることができる。好ましくは、音声とユーザの関連性を確立するため、音声の特徴情報及び過去に音声を傾聴したユーザのユーザ属性情報に従って、音声及びユーザ属性モデルを確立することができ、その結果、コンピュータは、音声がターゲットとするユーザグループを問い合わせることができる。例えば、音声及びユーザ属性モデル内のエントリの１つは、音声識別子、音声形式−高ビットレートａａｃ、芸術タイプ−クロストーク、再生時間−正午、及び、再生範囲−オフィスビルを含み得る。
【００４３】
具体的には、ネットワークデバイスが、音声広告の特徴情報及び／又は音声を好むユーザのユーザ属性情報と組み合わせて、音声の特徴情報に従って、音声を再生する際の音声広告の挿入時点を特定する方法は、これらに限定されないが、以下を含む。
【００４４】
ａ）ネットワークデバイスは、単に挿入されるべき音声広告の特徴情報及び音声広告が挿入される音声の特徴情報に従って、音声を再生する際の音声広告の挿入時点として、音声の隣接時間帯に対応する特徴情報が音声広告の特徴情報と高度に一致する時点を選択する。
【００４５】
例えば、音声広告の特徴情報が音声広告は心が安らぐ音楽であることを示し、ネットワークデバイスが、音声の特徴情報に従って、音声は音声の時点８：４５の前後１分間ずつは心が安らぐ音楽であると特定した場合、ネットワークデバイスは、音声を再生する際の音声広告の挿入時点として時点８：４５を使用する。
【００４６】
ｂ）ネットワークデバイスは、単に挿入されるべき音声広告の特徴情報及び音声を好むユーザのユーザ属性情報に従って、音声を再生する際の音声広告の挿入時点を特定する。
【００４７】
例えば、ネットワークデバイスは、最初に、ユーザ属性情報に従って、音声広告を挿入することができる音声の時間範囲を選択し、次いで、音声の特徴情報に従って、選択された時間範囲内の挿入時点を特定する。ユーザ属性情報に記録されたユーザが傾聴している音声の時間の平均の長さが７：１８秒である場合、ネットワークデバイスは、最初に、音声広告を挿入することができる音声の時間範囲が０：００〜７：１８であると特定し、次いで、音声の特徴情報に従って、選択された時間範囲内の挿入時点を特定する。
【００４８】
別の例として、ネットワークデバイスは、最初に、音声の特徴情報に従って、音声広告を挿入することができる音声の時間範囲を特定し、次いで、ユーザ属性情報に従って、特定された時間範囲内の挿入時点を選択する。例えば、ネットワークデバイスは、最初に、音声の特徴情報に従って、既定の音量閾値より低い音量を有する音声部分が対応する音声の時間範囲を特定し、次いで、現在の時間情報及びユーザの位置情報に従って、ユーザがラッシュアワー時にいると判定し、特定された時間範囲からより早い時点を挿入時点として選択する。
【００４９】
ｃ）ネットワークデバイスは、音声の特徴情報、音声広告の特徴情報及び音声を好むユーザのユーザ属性情報に従って、音声を再生する際の音声広告の挿入時点を特定する。
【００５０】
例えば、ネットワークデバイスは、音声の特徴情報及び音声広告の特徴情報に従って、音声広告に適合し、かつ音声広告を挿入することができる音声部分に対応する音声の時間範囲を特定し、次いで、ユーザ属性情報に従って、特定された時間範囲から挿入時点を選択する。
【００５１】
別の例として、ネットワークデバイスは、音声の特徴情報及びユーザ属性情報に従って、音声広告を挿入することができる音声の時間範囲を特定し、次いで、音声広告の特徴情報に従って、特定された時間範囲から挿入時点を選択する。
【００５２】
実装形態１）と同様に、音声がライブ音声ではない場合、ネットワークデバイスは、ユーザ機器に音声を提供する前若しくは提供した後、又は、ユーザ機器が音声を再生していることを知る前若しくは知った後、実装形態２）の解決策を実行することができる。即ち、音声がライブ音声ではない場合、実装形態２）の解決策をオフラインで実行することも、ユーザ機器で音声が再生される際にリアルタイムで実行することもできることに留意するものとする。音声がライブ音声の場合、実装形態２）は、一般に、リアルタイムで実行する必要があり、ステップＳ１は、ネットワークデバイスが、音声広告の特徴情報及び／又は音声を好むユーザのユーザ属性情報と組み合わせて、現時点に至るまでにリアルタイム分析によって得られたライブ音声の特徴情報に従って音声広告を挿入することが適切であるかどうかを判定し、音声広告を挿入することが適切であると判定された場合、現時点又は現時点の後の近接時点を挿入時点として使用するステップを更に含み得る。
【００５３】
上記の例は、本発明の技術的解決策を限定するよりむしろ、単に、本発明の技術的解決策を説明するために使用されることに留意するものとし、当業者であれば、音声広告が挿入される音声の特徴情報に従って、音声を再生する際の音声広告の挿入時点を特定するためのいかなる実装形態も本発明の範囲に含まれるものとすることを理解するものとする。
【００５４】
ステップＳ２では、ネットワークデバイスは、音声に挿入されるべき音声広告、音声への音声広告の挿入時点、及び指示情報をユーザ機器に提供し、指示情報は、挿入時点で音声広告の挿入と関連付けられた操作を実行するようにユーザ機器に指示するために使用される。
【００５５】
ネットワークデバイスが音声広告をユーザ機器に提供する方法は、これらに限定されないが、１）ネットワークデバイスが音声広告のコンテンツ情報をユーザ機器に直接提供すること、及び２）ユーザ機器が音声広告をダウンロードできるようにするため、ネットワークデバイスが音声広告のダウンロードリンク情報をユーザ機器に提供することを含む。
【００５６】
好ましくは、挿入時点での音声広告の挿入と関連付けられた操作は、これらに限定されないが、１）挿入時点に到達すると、音声の再生をポーズし、音声広告を挿入すること、及び２）音声広告を現在挿入することができるというプロンプト情報をユーザに表示することを含む。
【００５７】
ネットワークデバイスによって送信された指示情報は、異なる事例に応じて異なる。具体的には、以下の通りである。
【００５８】
１）ユーザ機器で音声を再生する必要がある事例では、指示情報は、挿入時点に到達すると、音声の再生をポーズし、音声広告を挿入するようにユーザ機器に指示するために使用される。
【００５９】
好ましくは、この事例では、ステップＳ２が実行される際、ユーザ機器で音声を再生することができる。好ましくは、この事例では、ユーザ機器を使用するユーザは、一般に、音声広告が配信されるユーザである。その上、指示情報は、音声広告の挿入が終了した後に音声の再生を再開するようにユーザ機器に更に指示することもできる。
【００６０】
２）音声がライブ音声の場合、指示情報は、音声広告を現在挿入することができるというプロンプト情報をユーザに表示するようにユーザ機器に指示するために使用される。
【００６１】
好ましくは、この事例では、ユーザ機器を使用するユーザは、一般に、ライブ音声作成者であり、リアルタイムでのこの音声の作成及び公衆へのこの音声の提供に関与するいかなるスタッフも含む。好ましくは、作成者は、これらに限定されないが、ライブ音声のホスト、ライブ音声の裏方などを含む。
【００６２】
ステップＳ２では、同時に音声をユーザ機器に提供することもできることに留意するものとする。或いは、好ましくは、音声は、ステップＳ２の前にユーザ機器に提供されるか又はユーザ機器で再生される。或いは、音声がライブ音声の場合、ユーザが、ユーザ機器を使用してこの音声を現在記録している場合がある。
【００６３】
ステップＳ１とステップＳ２との間には長い間隔があり得、例えば、音声がライブ音声ではない場合、ネットワークデバイスは、最初に、ステップＳ１を実行し、挿入時点を特定することができ、次いで、一定時間後に、ユーザ機器から音声を再生するという要求を受信するか、又は、別のデバイスによって提供された音声がユーザ機器で既に再生されているという通知を受信すると、ステップＳ２が実行されることに留意するものとする。即ち、この事例では、ステップＳ１はオフラインで実行される。或いは、ステップＳ１が実行された直後にステップＳ２が実行され、例えば、ネットワークデバイスは、音声をユーザ機器に提供するか又はユーザ機器が音声を再生していることを知った後にステップＳ１を実行し、その直後にステップＳ２を実行する。即ち、この事例では、ステップＳ１はリアルタイムで実行される。
【００６４】
ネットワークデバイスによって提供された、音声広告、挿入時点、及び指示情報は、ネットワークを介してユーザ機器に到達する。
【００６５】
ステップＳ３では、ユーザ機器は、ネットワークデバイスによって提供され、再生されている音声に挿入されるべき音声広告、音声を再生する際の音声広告の挿入時点、及び指示情報を受信する。
【００６６】
再生されている音声は、１）ユーザ機器で再生されているか又はユーザ機器で再生されるべき音声、及び、２）ユーザ機器を使用して作成者によって記録され、公衆のために再生されている音声を含み得る。
【００６７】
ユーザ機器がネットワークデバイスによって提供される音声広告を受信する方法は、これらに限定されないが、１）ユーザ機器がネットワークデバイスによって提供される音声広告のコンテンツ情報を直接受信すること、及び２）ユーザ機器がネットワークデバイスによって提供される音声広告のダウンロードリンク情報を受信し、音声広告をダウンロードすることを含む。
【００６８】
次いで、ステップＳ４では、ユーザ機器は、指示情報に従って挿入時点で音声広告の挿入と関連付けられた操作を実行する。
【００６９】
ユーザ機器は、異なる事例では、ネットワークデバイスによって送信された異なる指示情報に従って、対応する異なる操作を実行する。具体的には、以下の通りである。
【００７０】
１）ユーザ機器で音声が再生されている事例では、ネットワークデバイスによって送信された指示情報は、挿入時点に到達すると、音声の再生をポーズし、音声広告を挿入するようにユーザ機器に指示するために使用され、ユーザ機器は、指示情報に従って、挿入時点に到達すると、音声の再生をポーズし、音声広告を挿入する。
【００７１】
好ましくは、この事例では、ステップＳ２の前にユーザ機器に音声が提供される場合、ユーザ機器は、ステップＳ３の前に音声のコンテンツ情報を取得して再生するステップを実行することができる。音声は、ネットワークデバイス又は別のデバイスによってユーザ機器に提供することができ、音声を提供するための方法は、音声広告を提供するための方法と同じか又は同様であり得るため、ここでは説明しない。
【００７２】
２）音声がライブ音声の場合、指示情報は、音声広告を現在挿入することができるというプロンプト情報をユーザに表示するようにユーザ機器に指示するために使用され、ユーザ機器は、指示情報に従って、挿入点で現在又は挿入点の後に、音声広告を挿入することができるというプロンプト情報をユーザに表示する。
【００７３】
挿入時点の後に、音声広告を現在挿入することができるというプロンプト情報をユーザに表示する事例は、一般に、ステップＳ３でユーザ機器が情報を受信する際、ネットワーク遅延などの要因により挿入時点が経過してしまった事例によって生じ得る。この事例では、ユーザ機器は、ステップＳ３で情報を受信した直後に、音声広告を現在挿入することができるというプロンプト情報をユーザに表示する操作を実行することができる。
【００７４】
好ましくは、この事例では、ユーザが広告の挿入を確認すると、ユーザ機器は、音声の再生をポーズし、音声広告を挿入する。
【００７５】
この実施形態で提供される音声広告の挿入解決策によって、ユーザエクスペリエンスを高めるため、適切な時点で音声広告を音声に挿入して音声広告の不釣り合いを少なくすることができる。その上、この実施形態は、オリジナルの音声を変更することなく音声広告を正常に再生できるように、音声広告が挿入されると、音声広告を音声に書き込むよりむしろ、オリジナルの音声の再生をポーズするように選択する。その上、この方法では、音声広告の頻繁な変更のニーズにうまく適合するように音声広告を変更することが非常に簡単である（例えば、同じ音声に挿入される音声広告は、ほんの５分後に異なり得る）。その上、この実施形態の解決策は、生中継の場合に音声広告を正しく挿入できる可能性を提供することもできる。
【００７６】
図２は、本発明の別の実施形態による、音声広告を挿入するための方法のフローチャートである。この実施形態の方法は、ステップＳ５、ステップＳ１、ステップＳ２、ステップＳ３及びステップＳ４を含む。ステップＳ１、ステップＳ２、ステップＳ３及びステップＳ４は、図１に示される実施形態を参照して詳細に説明されているため、ここでは説明しない。
【００７７】
ステップＳ５は、ステップＳ１の前に実行される。ステップＳ５では、ネットワークデバイスは、音声広告を挿入する必要がある音声の広告挿入と関連付けられた情報に従って、複数の音声広告から、音声に挿入されるべき音声広告を選択する。
【００７８】
音声の広告挿入と関連付けられた情報は、音声と関連付けられ、音声への音声広告の挿入に関与するいかなる情報も含む。好ましくは、音声の広告挿入と関連付けられた情報は、これらに限定されないが、以下を含む。
【００７９】
１）音声に挿入できる広告の数
音声の広告挿入と関連付けられた情報が音声に挿入できる広告の数を含む際、ネットワークデバイスは、複数の音声広告から、挿入できる広告の数を超えない数の音声広告を無作為に選択することも、複数の音声広告から、音声広告のソーティングに従って挿入できる広告の数を超えない数の音声広告を無作為に選択することもできる。
【００８０】
２）音声再生環境
音声の再生環境は、これらに限定されないが、音声の再生時間及び音声を再生する際のカバレッジなどを含む。
【００８１】
音声の広告挿入と関連付けられた情報が音声の再生環境を含む際、ネットワークデバイスは、複数の音声広告から、音声再生環境と高度に一致する環境に位置するユーザに的を絞った音声広告を選択するため、音声再生環境を、複数の音声広告がターゲットとするユーザの位置又は可能な位置の環境と一致させることができる。
【００８２】
例えば、音声再生環境がオフィスビルで再生することを含む場合、ネットワークデバイスは、複数の音声広告から、オフィスビルにいるユーザ又はオフィスビルで働いている可能性のあるユーザ（例えば、文書業務に携わるユーザ）などに的を絞った音声広告を選択することができる。
【００８３】
３）音声を好むユーザのユーザ属性情報
音声の広告挿入と関連付けられた情報が音声を好むユーザのユーザ属性情報を含む際、ネットワークデバイスは、複数の音声広告から、音声を好むユーザと高度に一致するユーザに的を絞った音声広告を選択するため、音声を好むユーザのユーザ属性情報を、複数の音声広告がターゲットとするユーザのユーザ属性情報と一致させることができる。
【００８４】
例えば、音声を好むユーザのほとんどが男性である場合、ネットワークデバイスは、複数の音声広告から、男性に的を絞った音声広告を選択することができる。
【００８５】
好ましくは、ネットワークデバイスは、確立された音声及びユーザ属性モデルを通じて、音声を好むユーザのユーザ属性情報を得ることができる。
【００８６】
音声の広告挿入と関連付けられた情報が複数の情報を含む際、ネットワークデバイスは、複数の情報を合成して、複数の音声広告から１つの音声広告を選択することができることに留意するものとする。例えば、音声に挿入できる広告の数が２であり、音声再生環境がオフィスビルで再生することを含み、音声を好むユーザのほとんどが男性である場合、ネットワークデバイスは、複数の音声広告から、オフィスビルで働いているか又はオフィスビルで働いている可能性のある男性のユーザに的を絞った２つの音声広告を選択する。
【００８７】
上記の例は、本発明の技術的解決策を限定するよりむしろ、単に、本発明の技術的解決策を説明するために使用されることに留意するものとし、当業者であれば、音声に挿入されるべき音声広告の広告挿入と関連付けられた情報に従って、複数の音声広告から、音声に挿入されるべき音声広告を選択するためのいかなる実装形態も本発明の範囲に含まれるものとすることを理解するものとする。
【００８８】
この実施形態では、挿入された音声広告が音声とうまく釣り合い、ユーザエクスペリエンスを更に高めるように、音声に挿入されるべき音声広告の広告挿入と関連付けられた情報に従って音声広告を選択することができる。
【００８９】
図３は、本発明の別の実施形態による、音声広告を挿入するための方法のフローチャートである。この実施形態の方法は、ステップＳ６、ステップＳ１、ステップＳ２、ステップＳ３及びステップＳ４を含む。ステップＳ１、ステップＳ２、ステップＳ３及びステップＳ４は、図１に示される実施形態を参照して詳細に説明されているため、ここでは説明しない。
【００９０】
ステップＳ６は、ステップＳ１の前に実行される。ステップＳ６では、ネットワークデバイスは、音声の特徴情報及び複数の音声広告の各音声広告の特徴情報に従って、複数の音声広告から、音声に挿入されるべき音声広告を選択する。
【００９１】
具体的には、ネットワークデバイスは、音声の特徴情報及び複数の音声広告の各音声広告の特徴情報に従って、複数の音声広告から、音声に挿入されるべき音声広告として音声と高度に一致する音声広告を選択する。
【００９２】
ネットワークデバイスは、その特徴情報が音声全体の特徴情報と高度に一致する音声広告を選択することも、その特徴情報が音声の一部の特徴情報と高度に一致する音声広告を選択することもできる。
【００９３】
この実施形態では、挿入された音声広告が音声とうまく釣り合い、ユーザエクスペリエンスを更に高めるように、音声及び音声広告の特徴情報と組み合わせて音声広告を選択することができる。
【００９４】
図２に示される実施形態に関するステップＳ５は、図３に示される実施形態に関するステップＳ６と組み合わせることができることに留意するものとする。即ち、ネットワークデバイスは、音声の特徴情報及び複数の音声広告の各音声広告の特徴情報と組み合わせて、音声の広告挿入と関連付けられた情報に従って、複数の音声広告から、音声に挿入されるべき音声広告を選択することができる。
【００９５】
例えば、音声に挿入できる広告の数が２であり、音声の再生環境がオフィスビルで再生することを含み、音声を好むユーザのほとんどが男性であり、音声の特徴情報が音声の波形の振幅における小さな変化を反映する場合、ネットワークデバイスは、複数の音声広告から、オフィスビルで働いているか又はオフィスビルで働いている可能性のある男性のユーザに的を絞った、波形の振幅における小さな変化を有する２つの音声広告を選択するなどである。
【００９６】
図４は、本発明の実施形態による、音声広告を挿入するためのシステムの構造概略図である。この実施形態のシステムは、ネットワークデバイスと、ユーザ機器とを備え、ネットワークデバイスは、第１の特定手段１と、提供手段２とを備える補助装置を備え、ユーザ機器は、受信手段３と、実行手段４とを備える挿入装置を備える。
【００９７】
ネットワークデバイスの第１の特定手段１は、挿入されるべき音声広告の特徴情報及び音声広告が挿入される音声の特徴情報に従って、音声を再生する際の音声広告の挿入時点を特定する。
【００９８】
以下では、最初に、音声及びその特徴情報について説明する。
【００９９】
音声は、任意の音のネットワークリソースを含み、例えば、音声は、音楽、歌、クロストーク、朗読、トークショーなどを含み得る。その上、音声は、ライブ音声でも非ライブ音声でもよく、例えば、音声は、生放送のトークショーでも事前に記録された歌などでもよい。
【０１００】
音声がライブ音声の場合、第１の特定手段１は、一般に、ライブ音声の再生の間、リアルタイムで操作を実行し、音声がライブ音声でない場合、第１の特定手段１は、ユーザ機器に音声が提供されて再生される際にリアルタイムで操作を実行することも、ユーザ機器が音声を再生する前に操作を実行することもできることに留意するものとする。
【０１０１】
音声の特徴情報は、音声の特徴の反映が可能ないかなる情報も含む。好ましくは、音声の特徴情報は、以下の少なくとも１つを含む。
【０１０２】
１）音声の固有のデータ特徴情報
音声の固有のデータ特徴情報は、音声のデータで直接表すことができる特徴を示す。例えば、音声の固有のデータ特徴情報は、これらに限定されないが、音量、振幅変化、ゼロ交差率、ＭＦＣＣ、強度、スペクトル分析結果などを含み得る。
【０１０３】
音声の固有のデータ特徴情報は、音声のデータを分析することによって得ることができる。
【０１０４】
２）音声の人感的特徴情報
音声の人感的特徴情報は、人間による音声の理解又は定義を示すことができる。例えば、音声の人感的特徴情報は、これらに限定されないが、音声によって表現される感情（例えば、幸福、痛み又は絶望）、音声が属する芸術分類（例えば、クロストーク、朗読又は歌）及び音声が属する言語領域分類（例えば、英語、広東語又は他の方言）を含む。
【０１０５】
音声の人感的特徴情報は、手動による注釈付けによって又は音声のデータを分析することによって得ることができる。
【０１０６】
好ましい解決策として、補助装置は、第１の特定手段１の前に操作を実行するための第２の特定手段（図示せず）及び第３の特定手段（図示せず）を更に備えることに留意するものとする。第２の特定手段は、音声に従って音声のデータ特徴情報を特定することができ、第３の特定手段は、データ特徴情報に従って音声の人感的特徴情報を特定する。
【０１０７】
例えば、最初に、第２の特定手段は、音声の音量、振幅変化、ゼロ交差率、ＭＦＣＣ、強度、スペクトル分析結果などのデータ特徴情報を得るため、音声のデータを分析し、次いで、第３の特定手段は、音声によって表現される感情及び芸術分類などの人感的特徴情報を得るため、得られたデータ特徴情報を事前に訓練された分類子に入力する。１つ又は複数の分類モデルは、事前に訓練された分類子を得るため、人感的特徴情報で注釈付けされた大量の音声を使用して訓練することができる。
【０１０８】
上記の例は、本発明の技術的解決策を限定するよりむしろ、単に、本発明の技術的解決策を説明するために使用されることに留意するものとし、当業者であれば、音声の特徴情報を得るためのいかなる実装形態も本発明の範囲に含まれるものとすることを理解するものとする。
【０１０９】
以下では、第１の特定手段１の特定の実装形態について説明する。
【０１１０】
具体的には、第１の特定手段１が、音声広告が挿入される音声の特徴情報に従って、音声を再生する際の音声広告の挿入時点を特定する方法は、これらに限定されないが、以下を含む。
【０１１１】
１）第１の特定手段１は、単に音声広告が挿入される音声の特徴情報に従って、音声を再生する際の音声広告の挿入時点を特定する。
【０１１２】
例えば、音声の特徴情報は、音声が属する芸術分類がニュースであることを示し、次いで、第１の特定手段１は、音声の芸術分類がニュースであるなどの状況に従って、音声中のより早い時点を挿入時点として選択する。
【０１１３】
別の例として、音声がライブ音声の場合、第１の特定手段１は、現時点に至るまでにライブ音声において音声の強度が突然２倍に増したと分析される（生中継では、称賛の声を上げるか又は大きな歓声を上げるなど、ユーザの気分の高揚が２倍にも思われることを示す場合がある）という状況に従って、現時点が挿入時点であると特定する。
【０１１４】
好ましくは、第１の特定手段１は、単に音声広告が挿入される音声の特徴情報に従って、音声を再生する際の音声広告の挿入時点として、音声の隣接時間帯に対応する特徴情報が既定の挿入条件と一致する時点を選択する。隣接時間帯は、時点の前又は時点の後の時間帯を含み得る。
【０１１５】
例えば、既定の挿入条件は、時点の前の１５秒間の音声の波形の振幅の変化が既定の閾値より小さいことを含む。第１の特定手段１が、音声の時点の前の１５秒間の波形の振幅の変化が既定の閾値より小さいと分析すると、この時点は、音声を再生する際の音声広告の挿入時点として使用される。この例では、既定の挿入条件は、音声の人感的特徴情報に従って挿入時点の選択を調整するように定義することもでき、例えば、ニュース音声の挿入時点は早い方、クロストーク音声の挿入時点は遅い方などとすることができる。
【０１１６】
この実装形態では、音声がライブ音声ではない場合、第１の特定手段１は、ネットワークデバイスがユーザ機器に音声を提供する前若しくは提供した後、又は、ユーザ機器が音声を再生していることを知る前若しくは知った後、実装形態１）の操作を実行することができる。即ち、音声がライブ音声ではない場合、実装形態１）の操作をオフラインで実行することも、ユーザ機器で音声が再生される際にリアルタイムで実行することもできることに留意するものとする。音声がライブ音声の場合、実装形態１）は、一般に、リアルタイムで実行する必要があり、第１の特定手段１は、判定手段（図示せず）と、第１のサブ特定手段（図示せず）とを更に備え、判定手段は、現時点に至るまでにリアルタイム分析によって得られたライブ音声の特徴情報に従って音声広告を挿入することが適切であるかどうかを判定し、音声広告を挿入することが適切であると判定された場合、第１のサブ特定手段は、現時点又は現時点の後の近接時点を挿入時点として使用する。
【０１１７】
近接時点は、現時点の後の、現時点に近い時点である。この近接時点は、現時点及び時間の長さを追加することによって得ることができ、この時間の長さは、事前に決定することも、ネットワークデバイスとユーザ機器との間のネットワーク状態に従ってネットワーク遅延を推定することによって決定することもできる。この近接時点を通じて、ユーザ機器が提供手段２によって送信された挿入時点を受信する際、ネットワーク遅延などの要因により挿入時点が経過してしまう可能性をできる限り低減することができる。
【０１１８】
判定手段が、現時点に至るまでにリアルタイム分析によって得られたライブ音声の特徴情報に従って音声広告を挿入することが適切であるかどうかを判定する操作は、音声の生中継の間、音声広告を現在挿入することが適切であると判定され、既定の回数だけ音声広告が音声に既に挿入されているか、又は、音声の生中継が終了するまで、繰り返し実行することができる。なお、判定手段が、現時点に至るまでにリアルタイム分析によって得られたライブ音声の特徴情報に従って音声広告を挿入することが適切であるかどうかを判定する方法は、上記で言及されるような、第１の特定手段１が、単に音声広告が挿入される音声の特徴情報に従って、音声を再生する際の音声広告の挿入時点を特定する方法と同じか又は同様であるため、ここでは説明しない。
【０１１９】
２）第１の特定手段１は、第２のサブ特定手段（図示せず）を備える。第２のサブ特定手段は、音声広告の特徴情報及び／又は音声を好むユーザのユーザ属性情報と組み合わせて、音声の特徴情報に従って、音声を再生する際の音声広告の挿入時点を特定する。
【０１２０】
音声広告は、音声に挿入することができ、音の形式で表されるいかなる広告も含む。音声広告の特徴情報は、音声広告の特徴の反映が可能ないかなる情報も含む。好ましくは、音声広告の特徴情報は、これらに限定されないが、音声広告の固有のデータ特徴情報、音声広告の人感的特徴情報などを含む。音声広告の特徴情報は、音声の特徴情報と同じか又は同様であり、音声広告の特徴情報を得るための方法は、音声の特徴情報を得るための方法と同じか又は同様であるため、ここでは説明しない。
【０１２１】
ユーザのユーザ属性情報は、ユーザ属性の反映が可能ないかなる情報も含む。好ましくは、ユーザ属性情報は、これらに限定されないが、ａ）ユーザの個人情報（これらに限定されないが、ユーザの性別、年齢、教育レベルなどを含む）、ｂ）ユーザの現在位置の環境情報（これらに限定されないが、ユーザの位置の時間情報、ユーザの位置情報などを含む）、及び、ｃ）ユーザの音声傾聴履歴（この履歴は、これらに限定されないが、過去にユーザが音声を傾聴した回数、聴いた音声のリスト及び音声を傾聴するための環境の情報を含む）を含む。ユーザ属性情報のユーザの個人情報は、ユーザが積極的に提供することも、ユーザ識別情報に従ってユーザのアイデンティティを特定した後で得ることもでき、ユーザ識別情報は、これらに限定されないが、ユーザのログイン情報、ユーザが使用するユーザ機器の識別情報などを含み得る。ユーザ属性情報のユーザの現在位置の環境情報は、ユーザ機器が提供することも、ユーザの現在のアドレスに従って推定することもできる。ユーザ属性情報の音声傾聴履歴は、ユーザの識別情報に従ってユーザのアイデンティティを特定した後で得ることができる。
【０１２２】
音声を好むユーザのユーザ属性情報は、過去に音声を傾聴したユーザのユーザ属性情報に従って得ることができる。好ましくは、音声とユーザの関連性を確立するため、音声の特徴情報及び過去に音声を傾聴したユーザのユーザ属性情報に従って、音声及びユーザ属性モデルを確立することができ、その結果、コンピュータは、音声がターゲットとするユーザグループを問い合わせることができる。例えば、音声及びユーザ属性モデル内のエントリの１つは、音声識別子、音声形式−高ビットレートａａｃ、芸術タイプ−クロストーク、再生時間−正午、及び、再生範囲−オフィスビルを含み得る。
【０１２３】
具体的には、第２のサブ特定手段が、音声広告の特徴情報及び／又は音声を好むユーザのユーザ属性情報と組み合わせて、音声の特徴情報に従って、音声を再生する際の音声広告の挿入時点を特定する方法は、これらに限定されないが、以下を含む。
【０１２４】
ａ）第２のサブ特定手段は、単に挿入されるべき音声広告の特徴情報及び音声広告が挿入される音声の特徴情報に従って、音声を再生する際の音声広告の挿入時点として、音声の隣接時間帯に対応する特徴情報が音声広告の特徴情報と高度に一致する時点を選択する。
【０１２５】
例えば、音声広告の特徴情報が音声広告は心が安らぐ音楽であることを示し、第２のサブ特定手段が、音声の特徴情報に従って、音声は音声の時点８：４５の前後１分ずつは心が安らぐ音楽であると特定した場合、第２のサブ特定手段は、音声を再生する際の音声広告の挿入時点として時点８：４５を使用する。
【０１２６】
ｂ）第２のサブ特定手段は、単に挿入されるべき音声広告の特徴情報及び音声を好むユーザのユーザ属性情報に従って、音声を再生する際の音声広告の挿入時点を特定する。
【０１２７】
例えば、第２のサブ特定手段は、最初に、ユーザ属性情報に従って、音声広告を挿入することができる音声の時間範囲を選択し、次いで、音声の特徴情報に従って、選択された時間範囲内の挿入時点を特定する。ユーザ属性情報に記録されたユーザが傾聴している音声の時間の平均の長さが７：１８秒である場合、第２のサブ特定手段は、最初に、音声広告を挿入することができる音声の時間範囲が０：００〜７：１８であると特定し、次いで、音声の特徴情報に従って、選択された時間範囲内の挿入時点を特定する。
【０１２８】
別の例として、第２のサブ特定手段は、最初に、音声の特徴情報に従って、音声広告を挿入することができる音声の時間範囲を特定し、次いで、ユーザ属性情報に従って、特定された時間範囲内の挿入時点を選択する。第２のサブ特定手段が、最初に、音声の特徴情報に従って、既定の音量閾値より低い音量を有する音声部分が対応する音声の時間範囲を特定し、次いで、現在の時間情報及びユーザの位置情報に従って、ユーザがラッシュアワー時にいると判定する場合、特定された時間範囲からより早い時点が挿入時点として選択される。
【０１２９】
ｃ）第２のサブ特定手段は、音声の特徴情報、音声広告の特徴情報及び音声を好むユーザのユーザ属性情報に従って、音声を再生する際の音声広告の挿入時点を特定する。
【０１３０】
例えば、第２のサブ特定手段は、音声の特徴情報及び音声広告の特徴情報に従って、音声広告に適合し、かつ音声広告を挿入することができる音声部分に対応する音声の時間範囲を特定し、次いで、ユーザ属性情報に従って、特定された時間範囲から挿入時点を選択する。
【０１３１】
別の例として、第２のサブ特定手段は、音声の特徴情報及びユーザ属性情報に従って、音声広告を挿入することができる音声の時間範囲を特定し、次いで、音声広告の特徴情報に従って、特定された時間範囲から挿入時点を選択する。
【０１３２】
実装形態１）と同様に、音声がライブ音声ではない場合、第２のサブ特定手段は、ユーザ機器に音声を提供する前若しくは提供した後、又は、ユーザ機器が音声を再生していることを知る前若しくは知った後、実装形態２）の操作を実行することができる、即ち、音声がライブ音声ではない場合、実装形態２）の操作をオフラインで実行することも、ユーザ機器で音声が再生される際にリアルタイムで実行することもできることに留意するものとする。音声がライブ音声の場合、実装形態２）は、一般に、リアルタイムで実行する必要があり、第２のサブ特定手段は、音声広告の特徴情報及び／又は音声を好むユーザのユーザ属性情報と組み合わせて、現時点に至るまでにリアルタイム分析によって得られたライブ音声の特徴情報に従って音声広告を挿入することが適切であるかどうかを判定し、音声広告を挿入することが適切であると判定された場合、現時点又は現時点の後の近接時点を挿入時点として使用する。
【０１３３】
上記の例は、本発明の技術的解決策を限定するよりむしろ、単に、本発明の技術的解決策を説明するために使用されることに留意するものとし、当業者であれば、音声広告が挿入される音声の特徴情報に従って、音声を再生する際の音声広告の挿入時点を特定するためのいかなる実装形態も本発明の範囲に含まれることを理解するものとする。
【０１３４】
提供手段２は、音声に挿入されるべき音声広告、音声への音声広告の挿入時点、及び指示情報をユーザ機器に提供し、指示情報は、挿入時点で音声広告の挿入と関連付けられた操作を実行するようにユーザ機器に指示するために使用される。
【０１３５】
提供手段２が音声広告をユーザ機器に提供する方法は、これらに限定されないが、１）提供手段２が音声広告のコンテンツ情報をユーザ機器に直接提供すること、及び２）ユーザ機器が音声広告をダウンロードできるようにするため、提供手段２が音声広告のダウンロードリンク情報をユーザ機器に提供することを含む。
【０１３６】
好ましくは、挿入時点での音声広告の挿入と関連付けられた操作は、これらに限定されないが、１）挿入時点に到達すると、音声の再生をポーズし、音声広告を挿入すること、及び２）音声広告を現在挿入することができるというプロンプト情報をユーザに表示することを含む。
【０１３７】
提供手段２によって送信された指示情報は、異なる事例に応じて異なる。具体的には、以下の通りである。
【０１３８】
１）ユーザ機器で音声を再生する必要がある事例では、指示情報は、挿入時点に到達すると、音声の再生をポーズし、音声広告を挿入するようにユーザ機器に指示するために使用される。
【０１３９】
好ましくは、この事例では、提供手段２が操作を実行する際、ユーザ機器で音声を再生することができる。好ましくは、この事例では、ユーザ機器を使用するユーザは、一般に、音声広告が配信されるユーザである。その上、指示情報は、音声広告の挿入が終了した後に音声の再生を再開するようにユーザ機器に更に指示することもできる。
【０１４０】
２）音声がライブ音声の場合、指示情報は、音声広告を現在挿入することができるというプロンプト情報をユーザに表示するようにユーザ機器に指示するために使用される。
【０１４１】
好ましくは、この事例では、ユーザ機器を使用するユーザは、一般に、ライブ音声作成者であり、リアルタイムでのこの音声の作成及び公衆へのこの音声の提供に関与するいかなるスタッフも含む。好ましくは、作成者は、これらに限定されないが、ライブ音声のホスト、ライブ音声の裏方などを含む。
【０１４２】
提供手段２は、同時に音声をユーザ機器に提供することもできることに留意するものとする。或いは、好ましくは、音声は、提供手段２が操作を実行する前にユーザ機器に提供されるか又はユーザ機器で再生される。或いは、音声がライブ音声の場合、ユーザが、ユーザ機器を使用してこの音声を現在記録している場合がある。
【０１４３】
第１の特定手段１と提供手段２との間には長い間隔があり得、例えば、音声がライブ音声ではない場合、第１の特定手段１は、最初に、操作を実行し、挿入時点を特定することができ、次いで、一定時間後に、ユーザ機器から音声を再生するという要求を受信するか、又は、別のデバイスによって提供された音声がユーザ機器で既に再生されているという通知を受信すると、提供手段２が操作を実行することに留意するものとする。即ち、この事例では、第１の特定手段１はオフライン操作を実行する。或いは、第１の特定手段１による実行の直後に、提供手段２は操作を実行することができ、例えば、ネットワークデバイスが音声をユーザ機器に提供するか又はユーザ機器が音声を再生していることを知った後に、第１の特定手段１は操作を実行し、その直後に提供手段２は操作を実行する。即ち、この事例では、第１の特定手段１はリアルタイム操作を実行する。
【０１４４】
提供手段２によって提供された、音声広告、挿入時点、及び指示情報は、ネットワークを介してユーザ機器に到達する。
【０１４５】
ユーザ機器の受信手段３は、ネットワークデバイスによって提供され、再生されている音声に挿入されるべき音声広告、音声を再生する際の音声広告の挿入時点、及び指示情報を受信する。
【０１４６】
再生されている音声は、１）ユーザ機器で再生されているか又はユーザ機器で再生されるべき音声、及び、２）ユーザ機器を使用して作成者によって記録され、公衆のために再生されている音声を含み得る。
【０１４７】
受信手段３が提供手段２によって提供される音声広告を受信する方法は、これらに限定されないが、１）受信手段３が提供手段２によって提供される音声広告のコンテンツ情報を直接受信すること、及び２）受信手段３が提供手段２によって提供される音声広告のダウンロードリンク情報を受信し、音声広告をダウンロードすることを含む。
【０１４８】
次いで、実行手段４は、指示情報に従って挿入時点で音声広告の挿入と関連付けられた操作を実行する。
【０１４９】
実行手段４は、異なる事例では、提供手段２によって送信された異なる指示情報に従って、対応する異なる操作を実行する。具体的には、以下の通りである。
【０１５０】
１）実行手段４は、第１のサブ実行手段（図示せず）を備える。ユーザ機器で音声が再生されている事例では、提供手段２から送信された指示情報は、挿入時点に到達すると、音声の再生をポーズし、音声広告を挿入するようにユーザ機器に指示するために使用され、第１のサブ実行手段は、指示情報に従って、挿入時点に到達すると、音声の再生をポーズし、音声広告を挿入する。
【０１５１】
好ましくは、ユーザ機器は、第１の再生手段（図示せず）を更に備える。この事例では、提供手段が操作を実行する前にユーザ機器に音声が提供される場合、受信手段３が操作を実行する前に、第１の再生手段は、音声のコンテンツ情報を取得して再生することができる。音声は、ネットワークデバイス又は別のデバイスによってユーザ機器に提供することができ、音声を提供するための方法は、音声広告を提供するための方法と同じか又は同様であるため、ここでは説明しない。
【０１５２】
２）実行手段４は、第２のサブ実行手段（図示せず）を備える。音声がライブ音声の場合、指示情報は、音声広告を現在挿入することができるというプロンプト情報をユーザに表示するようにユーザ機器に指示するために使用され、第２のサブ実行手段は、指示情報に従って、音声広告を現在挿入することができるというプロンプト情報をユーザに表示する。
【０１５３】
挿入時点の後に、音声広告を現在挿入することができるというプロンプト情報をユーザに表示する事例は、一般に、受信手段３が情報を受信する際、ネットワーク遅延などの要因によりユーザ機器のための挿入時点が経過してしまったという事実によって生じ得る。この事例では、受信手段３が情報を受信した直後に、第２のサブ実行手段は、挿入時点で現在又は挿入時点の後に、音声広告を挿入することができるというプロンプト情報を表示する。
【０１５４】
好ましくは、ユーザ機器は、第２の再生手段（図示せず）を更に備える。この事例では、ユーザが広告の挿入を確認すると、第２の再生手段は、音声の再生をポーズし、音声広告を挿入する。
【０１５５】
この実施形態で提供される音声広告の挿入解決策によって、ユーザエクスペリエンスを高めるため、適切な時点で音声広告を音声に挿入して音声広告の不釣り合いを少なくすることができる。その上、この実施形態は、オリジナルの音声を変更することなく音声広告を正常に再生できるように、音声広告が挿入されると、音声広告を音声に書き込むよりむしろ、オリジナルの音声の再生をポーズするように選択する。その上、この方法では、音声広告の頻繁な変更のニーズにうまく適合するように音声広告を変更することが非常に簡単である（例えば、同じ音声において挿入される音声広告は、ほんの５分後に異なり得る）。その上、この実施形態の解決策は、生中継の場合に音声広告を正しく挿入できる可能性を提供することもできる。
【０１５６】
図５は、本発明の別の実施形態による、音声広告を挿入するためのシステムの構造概略図である。この実施形態のシステムは、ネットワークデバイスと、ユーザ機器とを備え、ネットワークデバイスは、第１の選択手段５と、第１の特定手段１と、提供手段２とを備える補助装置を備え、ユーザ機器は、受信手段３と、実行手段４とを備える挿入装置を備える。第１の特定手段１、提供手段２、受信手段３及び実行手段４は全て、図４に示される実施形態を参照して詳細に説明されているため、ここでは説明しない。
【０１５７】
第１の選択手段５は、第１の特定手段１の前に操作を実行する。第１の選択手段５は、音声に挿入されるべき音声広告の広告挿入と関連付けられた情報に従って、複数の音声広告から、音声に挿入されるべき音声広告を選択する。
【０１５８】
音声の広告挿入と関連付けられた情報は、音声と関連付けられ、音声への音声広告の挿入に関与するいかなる情報も含む。好ましくは、音声の広告挿入と関連付けられた情報は、これらに限定されないが、以下を含む。
【０１５９】
１）音声に挿入できる広告の数
音声の広告挿入と関連付けられた情報が音声に挿入できる広告の数を含む際、第１の選択手段５は、複数の音声広告から、挿入できる広告の数を超えない数の音声広告を無作為に選択することも、複数の音声広告から、音声広告のソーティングに従って挿入できる広告の数を超えない数の音声広告を無作為に選択することもできる。
【０１６０】
２）音声再生環境
音声の再生環境は、これらに限定されないが、音声の再生時間及び音声を再生する際のカバレッジを含む。
【０１６１】
音声の広告挿入と関連付けられた情報が音声の再生環境を含む際、第１の選択手段５は、複数の音声広告から、音声再生環境と高度に一致する環境に位置するユーザに的を絞った音声広告を選択するため、音声再生環境を、複数の音声広告がターゲットとするユーザの位置又は可能な位置の環境と一致させることができる。
【０１６２】
例えば、音声再生環境がオフィスビルで再生することを含む場合、第１の選択手段５は、複数の音声広告から、オフィスビルにいるユーザ又はオフィスビルで働いている可能性のあるユーザ（例えば、文書業務に携わるユーザ）などに的を絞った音声広告を選択することができる。
【０１６３】
３）音声を好むユーザのユーザ属性情報
音声の広告挿入と関連付けられた情報が音声を好むユーザのユーザ属性情報を含む際、第１の選択手段５は、複数の音声広告から、音声を好むユーザと高度に一致するユーザに的を絞った音声広告を選択するため、音声を好むユーザのユーザ属性情報を、複数の音声広告がターゲットとするユーザのユーザ属性情報と一致させることができる。
【０１６４】
例えば、音声を好むユーザのほとんどが男性である場合、第１の選択手段５は、複数の音声広告から、男性に的を絞った音声広告を選択することができる。
【０１６５】
好ましくは、ネットワークデバイスは、確立された音声及びユーザ属性モデルを通じて、音声を好むユーザのユーザ属性情報を得ることができる。
【０１６６】
音声の広告挿入と関連付けられた情報が複数の情報を含む際、第１の選択手段５は、複数の情報を合成して、複数の音声広告から１つの音声広告を選択することができることに留意するものとする。例えば、音声に挿入できる広告の数が２であり、音声再生環境がオフィスビルで再生することを含み、音声を好むユーザのほとんどが男性である場合、第１の選択手段５は、複数の音声広告から、オフィスビルで働いているか又はオフィスビルで働いている可能性のある男性のユーザに的を絞った２つの音声広告を選択する。
【０１６７】
上記の例は、本発明の技術的解決策を限定するよりむしろ、単に、本発明の技術的解決策を説明するために使用されることに留意するものとし、当業者であれば、音声に挿入されるべき音声広告の広告挿入と関連付けられた情報に従って、複数の音声広告から、音声に挿入されるべき音声広告を選択するためのいかなる実装形態も本発明の範囲に含まれるものとすることを理解するものとする。
【０１６８】
この実施形態では、挿入された音声広告が音声とうまく釣り合い、ユーザエクスペリエンスを更に高めるように、音声に挿入されるべき音声広告の広告挿入と関連付けられた情報に従って音声広告を選択することができる。
【０１６９】
図６は、本発明の別の実施形態による、音声広告を挿入するためのシステムの構造概略図である。この実施形態のシステムは、ネットワークデバイスと、ユーザ機器とを備え、ネットワークデバイスは、第２の選択手段６と、第１の特定手段１と、提供手段２とを備える補助装置を備え、ユーザ機器は、受信手段３と、実行手段４とを備える挿入装置を備える。第１の特定手段１、提供手段２、受信手段３及び実行手段４は全て、図４に示される実施形態を参照して詳細に説明されているため、ここでは説明しない。
【０１７０】
第２の選択手段６は、第１の特定手段１の前に操作を実行する。第２の選択手段６は、音声の特徴情報及び複数の音声広告の各音声広告の特徴情報に従って、複数の音声広告から、音声に挿入されるべき音声広告を選択する。
【０１７１】
具体的には、第２の選択手段６は、音声の特徴情報及び複数の音声広告の各音声広告の特徴情報に従って、複数の音声広告から、音声に挿入されるべき音声広告として音声と高度に一致する音声広告を選択する。
【０１７２】
第２の選択手段６は、その特徴情報が音声全体の特徴情報と高度に一致する音声広告を選択することも、その特徴情報が音声の一部の特徴情報と高度に一致する音声広告を選択することもできる。
【０１７３】
この実施形態では、挿入された音声広告が音声とうまく釣り合い、ユーザエクスペリエンスを更に高めるように、音声及び音声広告の特徴情報と組み合わせて音声広告を選択することができる。
【０１７４】
図５に示される実施形態に関する第１の選択手段５は、図６に示される実施形態に関する第２の選択手段６と組み合わせることができることに留意するものとする。即ち、音声の特徴情報及び複数の音声広告の各音声広告の特徴情報と組み合わせて、音声の広告挿入と関連付けられた情報に従って、複数の音声広告から、音声に挿入されるべき音声広告を選択することができる。
【０１７５】
例えば、音声に挿入できる広告の数が２であり、音声の再生環境がオフィスビルで再生することを含み、音声を好むユーザのほとんどが男性であり、音声の特徴情報が音声の波形の振幅における小さな変化を反映する場合、複数の音声広告から、オフィスビルで働いているか又はオフィスビルで働いている可能性のある男性のユーザに的を絞った、波形の振幅における小さな変化を有する２つの音声広告を選択することができる。
【０１７６】
本発明は、ソフトウェア及び／又はソフトウェアとハードウェアの組合せで実装することができ、例えば、本発明における各装置は、特定用途向け集積回路（ＡＳＩＣ）又は他の任意の同様のハードウェアデバイスを使用して実装することができることに留意するものとする。実施形態では、上記のステップ又は機能を実装するため、本発明のソフトウェアプログラムが、プロセッサによって実行され得る。同様に、本発明のソフトウェアプログラム（関連データ構造を含む）は、例えば、ＲＡＭ、磁気若しくは光学ドライバ、フロッピー（登録商標）ディスク、又は、同様のデバイスなどのコンピュータ可読記録媒体に格納することができる。その上、本発明の幾つかのステップ又は機能は、例えば、各ステップ又は機能を実行するためにプロセッサと協働する回路などのハードウェアを使用して実装することができる。
【０１７７】
当業者にとって、本発明は上記の例示的な実施形態の細部に限定されず、本発明の精神又は基本的特徴から逸脱することなく、他の実施形態によって本発明を実装できることは明らかである。従って、いかなる形でも、実施形態は、限定するよりむしろ、例示と見なすものとする。本発明の範囲は、上記の記述の代わりに、添付の請求項によって限定される。従って、請求項と均等な要素の意味及び範囲に収まる全ての変形形態は、本発明内に包含されるものとする。請求項の引用符号は、関与する請求項を限定するものと見なしてはならない。それに、用語「備える、含む」は他のユニット又はステップの存在を排除せず、単数形は複数形の存在を排除しないことは明らかである。システム請求項に記載される複数のユニット又は手段は、ソフトウェア又はハードウェアを通じて単一のユニット又は手段によって実装することもできる。第１の及び第２のなどの用語は、名称を示すために使用されるが、いかなる特定の順番も示さない。
【符号の説明】
【０１７８】
１  第１の特定手段
２  提供手段
３  受信手段
４  実行手段
５  第１の選択手段
６  第２の選択手段
【図１】
2015212928.tif 000003
【図２】
2015212928.tif 000004
【図３】
2015212928.tif 000005
【図４】
2015212928.tif 000006
【図５】
2015212928.tif 000007
【図６】
2015212928.tif 000008
【外国語明細書】
2015212928000001.pdf