(57)【要約】【課題】リアルタイム伝送のためにマルチメディアコンテンツのパラメータを調整する方法を提供する。【解決手段】マルチメディアコンテンツのストリームをプロバイダサーバからユーザ装置２０へ送信する方法であって、該マルチメディアコンテンツが該プロバイダサーバからユーザへリアルタイムに送出されるようにマルチメディアコンテンツを該プロバイダサーバから該ユーザ装置へ通信ネットワーク１０を介して送信するステップ及び該マルチメディアコンテンツを該ユーザ装置から該ユーザへ該ユーザ装置の出力部を介して出力するステップを含む方法である。送信中に前記ユーザが前記ユーザ装置の出力部に向ける注目の度合いが絶えず決定され、前記プロバイダサーバのパラメータ調整モジュール３２が前記注目の度合いに応じて前記マルチメディアコンテンツのパラメータを調整する。【選択図】図１
2011172250.tif 000002
【特許請求の範囲】
【請求項１】
マルチメディアコンテンツをリアルタイムに配信する方法であって、
（ａ）  マルチメディアコンテンツのストリームをプロバイダサーバからユーザ装置へ通信ネットワークを介して送信し、前記マルチメディアコンテンツを前記ユーザ装置においてリアルタイムに出力するステップと、
（ｂ）  前記ステップ（ａ）の間、前記ユーザ装置の出力部にユーザが注目しているか否かを絶えず決定するステップと、
（ｃ）  前記ステップ（ｂ）において、前記ユーザの注目が前記ユーザ装置の出力部に向けられていないと決定される場合、前記ステップ（ａ）における前記マルチメディアコンテンツの送信に使用可能な帯域幅を前記プロバイダサーバにおいて調整するステップとを含むことを特徴とする方法。
【請求項２】
前記ステップ（ｂ）における前記ユーザ装置の出力部にユーザが注目しているか否かを絶えず決定するステップは、前記ユーザの注視及び頭部の向きのうちの１つを決定するステップを有することを特徴とする請求項１に記載の方法。
【請求項３】
前記ステップ（ｂ）における前記ユーザ装置の出力部にユーザが注目しているか否かを絶えず決定するステップは、前記ユーザの眼の位置を追跡するステップを有することを特徴とする請求項１に記載の方法。
【請求項４】
前記ステップ（ｂ）が、前記ユーザの注目が前記ユーザ装置の前記出力部に向けられていないと決定される場合に前記プロバイダサーバに非注目信号を送るステップを更に有することを特徴とする請求項１に記載の方法。
【請求項５】
前記ステップ（ｃ）が、前記ステップ（ａ）のために必要とされる帯域幅を低減させるために前記マルチメディアコンテンツの少なくとも一部の品質レベルを低減させるステップを有することを特徴とする請求項１に記載の方法。
【請求項６】
前記ステップ（ｃ）が、前記マルチメディアコンテンツのうちの、オーディオコンテンツ及びビデオコンテンツのうちの一方の少なくとも一部の品質レベルを低減させるステップを有することを特徴とする請求項５に記載の方法。
【請求項７】
前記ステップ（ｂ）は、前記ユーザの注目が前記ユーザ装置の前記出力部に向けられていないと決定される場合に非注目信号を前記プロバイダサーバに送るステップを更に有し、前記ステップ（ｃ）は、前記非注目信号がある場合には前記マルチメディアコンテンツの送信に使用可能な帯域幅を低減品質レベルに調整し、前記非注目信号がない場合には前記マルチメディアコンテンツの送信に使用可能な帯域幅を標準品質レベルに調整するステップを有することを特徴とする請求項１に記載の方法。
【請求項８】
前記ユーザ装置がスクリーンセーバモードを持ち、前記方法が、前記ユーザ装置が前記スクリーンセーバモード中である場合には、前記ステップ（ａ）における前記マルチメディアコンテンツの送信に使用可能な帯域幅を前記プロバイダサーバにおいて調整するステップを更に有することを特徴とする請求項１に記載の方法。
【請求項９】
前記ユーザ装置がユーザのコマンドを受け取るための入力部を持ち、前記方法が、前記入力部において入力されるユーザのコマンドに応じて、前記ステップ（ａ）における前記マルチメディアコンテンツの送信に使用可能な帯域幅を前記プロバイダサーバにおいて調整するステップを更に有することを特徴とする請求項１に記載の方法。
【請求項１０】
前記ステップ（ｂ）における前記ユーザが注目しているか否かを絶えず決定するステップが、前記ユーザ装置の前方の領域内の前記ユーザの存在、前記ユーザの前記ユーザ装置からの距離、及び前記ユーザの身体の向きのうちの１つを決定するステップを有することを特徴とする請求項１に記載の方法。
【請求項１１】
マルチメディアコンテンツをネットワークを介してリアルタイムに配信するシステムであって、
−  当該システムは、ユーザ装置の出力部にユーザが注目しているか否かを決定する検出器を有し、前記ユーザ装置は、マルチメディアコンテンツのストリームをプロバイダサーバから受け取り、前記マルチメディアコンテンツをユーザにリアルタイムに出力するためにネットワークに接続可能であり、前記プロバイダサーバは、前記マルチメディアコンテンツのストリームをリアルタイムに前記ユーザ装置に送信するために前記ネットワークに接続されており、
−  当該システムは、前記プロバイダサーバにおいて、前記検出器によって決定される前記ユーザが注目しているか否かに応じて、前記マルチメディアコンテンツの送信に使用可能な帯域幅を調整するパラメータ調整モジュールを有することを特徴とするシステム。
【請求項１２】
前記検出器が、前記ユーザの注視及び向きのうちの１つを検出するよう構成されるカメラ及び赤外線検出器のうちの少なくとも１つを有することを特徴とする請求項１１に記載のシステム。
【請求項１３】
前記検出器が、前記ユーザの眼の位置を追跡するよう構成されるカメラ及び赤外線検出器のうちの少なくとも１つを有することを特徴とする請求項１１に記載のシステム。
【請求項１４】
前記パラメータ調整モジュールが、前記マルチメディアコンテンツのストリームを送信するために必要とされる帯域幅が低減されるように、前記検出器によって決定されるユーザ装置の出力部にユーザが注目しているか否かに応じて、前記ユーザ装置に送信されている前記マルチメディアコンテンツのストリームの少なくとも一部の品質レベルを低減させることを特徴とする請求項１１に記載のシステム。
【請求項１５】
前記検出器が、前記ユーザの注目が前記ユーザ装置の前記出力部の少なくとも一部には向けられていないと決定される場合に非注目信号を出力するよう動作的に構成されることを特徴とする請求項１１に記載のシステム。
【請求項１６】
前記パラメータ調整モジュールが、前記非注目信号がある場合には前記ユーザ装置による前記マルチメディアコンテンツの送信に使用可能な帯域幅を低減品質レベルに調整し、該非注目信号がない場合には前記使用可能な帯域幅を標準品質レベルに調整するよう動作的に構成されることを特徴とする請求項１５に記載のシステム。
【請求項１７】
前記ユーザ装置がスクリーンセーバモードを持ち、前記パラメータ調整モジュールが、前記ユーザ装置が前記スクリーンセーバモード中である場合には、前記マルチメディアコンテンツの送信に使用可能な帯域幅を調整するよう構成されることを特徴とする請求項１１に記載のシステム。
【請求項１８】
前記ユーザ装置がユーザのコマンドを受け取るための入力部を有し、前記パラメータ調整モジュールが、前記ユーザのコマンドに応じて、送信されている前記マルチメディアコンテンツの送信に使用可能な帯域幅を調整するよう構成されることを特徴とする請求項１１に記載のシステム。
【請求項１９】
前記検出器が、前記ユーザ装置の前方の領域内の前記ユーザの存在、前記ユーザの前記ユーザ装置からの距離、及び前記ユーザの身体の向きのうちの１つを検出することを特徴とする請求項１１に記載のシステム。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、ユーザへのリアルタイム配信(distribution)及び伝送のためにマルチメディアコンテンツを管理する方法に関する。
【背景技術】
【０００２】
ビデオ・オン・デマンド及びインターネット関連のアプリケーションのためのマルチメディアコンテンツのリアルタイム伝送の要求が増大している。それに応じて、リアルタイムマルチメディアコンテンツの配信が増加傾向にあり、新しいマルチメディアコンテンツは、より多様なコンテンツタイプを持つであろう。
【０００３】
マルチメディアコンテンツは、ユーザ取り込みアプリケーション(user pull application)及びプロバイダ・ブロードキャスト・アプリケーション(provider broadcast application)を介してアクセスされ得る。ユーザ取り込みアプリケーションにおいては、ユーザは、遠隔アクセスされるべきコンテンツを手動選択する。プロバイダ・ブロードキャスト・アプリケーションにおいては、リアルタイムマルチメディアコンテンツが全ユーザに配信され、ユーザは、例えばケーブルテレビシステムのセット・トップ・ボックスなどを介して何にアクセスされるべきかを局所的に選択する。（以下に更に詳細に記載する）マルチメディアコンテンツにアクセスする新しい方法は、プロ用（professional）、商用(commercial)及び民生用(consumer)のアプリケーションのために絶えず開発されている。
【０００４】
リアルタイムマルチメディアコンテンツ送出(delivery)は、インターネット又はケーブルテレビシステムなどのネットワークを介して該ネットワークに接続されたユーザに対してなされる。ユーザは、高い帯域幅の接続（即ちDSL及びケーブルの接続）又は低い帯域幅の接続（即ち無線接続）を介してネットワークに接続され得る。更に、ユーザは、移動体電話、ポケベル(pager)及び携帯情報端末(Personal Digital Assistant)などの移動局、並びにパソコン及びネットワーク端末などのワークステーションを含むネットワークにアクセスするための多くの異なるタイプの局(station)を用いる。
【０００５】
プロバイダは、要求あり次第ユーザにマルチメディアコンテンツを供給するために１つ以上のネットワークに接続される装置を用いる。しかしながら、プロバイダの装置、及びプロバイダとユーザとの間の伝送路は、各々限られた容量を持つ。プロバイダが伝送路中の装置の容量限度一杯で送信していると、プロバイダは、該装置自体を他のユーザが利用できないようにするか、又は該装置の容量を増大させなければならない。拡張性問題(scalability issue)に対する既知の解決策は、装置の容量に基づく各ユーザに対して利用可能な帯域幅によって制限される。
【発明の概要】
【発明が解決しようとする課題】
【０００６】
本発明の目的は、リアルタイム伝送のためにマルチメディアコンテンツのパラメータを調整する方法を提供することにある。
【課題を解決するための手段】
【０００７】
本発明の目的は、マルチメディアコンテンツのリアルタイム送出中に該マルチメディアコンテンツに対するユーザの注目(attention)の度合いを決定し、それに応じて前記マルチメディアコンテンツのパラメータを調整することにより達成される。本発明は、前記マルチメディアコンテンツの前記リアルタイム送出中に該マルチメディアコンテンツに対してユーザが向ける注目を利用する。ユーザは、前記マルチメディアコンテンツの一部を見る、読む又は聞くかもしれないが、普段は前記コンテンツを熱心には見ない。それよりむしろ、前記ユーザは、並行して他の活動をするかもしれず、又はただ単に前記マルチメディアコンテンツの特定の部分に無関心であるかもしれない。これらの相対的に注目していない期間には、前記ユーザは、前記マルチメディアに対して完全には注意を払わず、それどころか、前記マルチメディアコンテンツを表示する出力装置の近傍を離れるかもしれない。更に、前記ユーザは、該ユーザの前記注目がディスプレイの小さな部分に向けられるように前記出力装置において表示されるものの特定の部分にしか関心がないかもしれない。注目の度合いの変動の結果として、前記マルチメディアコンテンツは、該マルチメディアコンテンツにおける前記ユーザの検出される前記注目の度合いに応じて、送出される該コンテンツの品質レベルを適合させることにより管理され得る。
【０００８】
好ましい実施例においては、マルチメディアコンテンツの品質レベルが、ユーザの注目が該コンテンツからそらされていると決定される場合に、低減され、それによって、該マルチメディアコンテンツのデータ送出の割合を低下させ、それによって、利用可能な帯域幅を増大させる。結果として、このユーザによる注目がより低い期間中にはより多くの帯域幅が他の潜在的なユーザ(other potential user)にとって利用可能となる。特定のユーザに対する品質レベルの低減は、例えば、該ユーザによるより低い注目が検出される期間中の出力のビデオ部分及び／又はオーディオ部分の解像度を低減させることによって達成され得る。
【０００９】
本発明の他の目的及び特徴は、添付図面と関連して考慮されている以下の詳細な記載から明らかになるであろう。しかしながら、前記図面は、本発明の限定の定義づけとしてではなく、ただ単に本発明の説明の目的のために描かれており、本発明の限定に対する参照は、添付されている特許請求の範囲に対してなされるべきであることを理解されたい。更に、前記図面は必ずしも縮尺どおりには描かれておらず、特に指示する場合を除き、前記図面は、単に、本願明細書に記載の構成及び手順を概念的に図示せんとするものに過ぎないことを理解されたい。
【００１０】
図面において、幾つかの図を通して同様の参照符号は同様の要素を示す。
【図面の簡単な説明】
【００１１】
【図１】マルチメディアコンテンツをリアルタイムに配信するためのシステムを示す概略図である。
【図２】本発明の実施例によるユーザ装置の正面図である。
【図３】本発明の別の実施例によるユーザ装置の斜視図である。
【発明を実施するための形態】
【００１２】
本発明によるユーザ装置２０が図１に示されている。ユーザ装置２０は、有線接続又は無線接続であり得る接続４０を介して通信ネットワーク１０に接続可能である。ユーザ装置２０は、例えばテレビ、セット・トップ・ボックス、移動体電話、携帯情報端末(PDA)、ポケベル、コンピュータ及びネットワーク・ワークステーションなどの通信ネットワーク１０に接続することが出来るあらゆる既知の構成要素であり得る。ネットワーク１０は、例えば、インターネット又はケーブル／衛星テレビシステムなどのビデオ・オン・デマンドのプロバイダを含み得る。インターネットサーバ又はテレビプロバイダなどのプロバイダサーバ３０がネットワーク１０に接続される。ユーザは、ユーザ装置２０を用いてプロバイダサーバ３０からリアルタイムに送出されるマルチメディアコンテンツにアクセスすることを望み得る。データのリアルタイム伝送は、ウェブページからマルチメディアダウンロードを選択するなどによって作動されるべきコンテンツを遠隔選択することにより、ユーザ（即ち、ユーザ取り込み装置(user pull arrangement)）によって開始され得る。他の例においては、マルチメディアコンテンツは、ユーザが該コンテンツにアクセスすべきか否かを局所的に選択したように、ブロードキャスト伝送を介してプロバイダサーバ３０によって配信されても良く、前記コンテンツは、セット・トップ・ボックスにおいてユーザによって選択されたケーブルテレビ放送などである。
【００１３】
ユーザ装置２０は、入力部２８、出力部２４及びプロセッサ２２を含む。入力部２８は、キーボード、マウス、遠隔制御装置、又はユーザがユーザ装置２０を制御するためにコマンドを入力することを可能にするあらゆる他の装置を含み得る。出力装置２４は、ディスプレイ及びスピーカ並びに例えばユーザが出力を感じることを可能にする仮想現実装置などのユーザにマルチメディアコンテンツを呈示するのに必要なあらゆる他の装置を含み得る。入力部２８及び出力部２４は、これらの装置を制御するプロセッサ２２、即ちマイクロプロセッサに接続される。
【００１４】
メディアコンテンツのリアルタイム送出に必要とされるデータの絶え間ないストリームは帯域幅の使用を必要とし、前記帯域幅は前記メディアコンテンツのリアルタイム送出の期間中には別のユーザによって用いられ得ない。多くの場合、ユーザは、出力の期間中マルチメディアコンテンツの出力に該ユーザの全注目を向けてはいないであろう。ユーザが完全には注目していない期間の全帯域幅の使用は、他のユーザのために用いられ得る帯域幅の非効率的な使用又は浪費である。帯域幅の使用を最大化するため、本発明は、ユーザがマルチメディアコンテンツに注目していない時を検出するためにユーザ装置２０に接続される検出器２６を含む。検出器２６は、ユーザ装置２０と接続される分離部分(separate part)を有しても良く、又はユーザ装置２０の一体部分(integral piece)を有しても良い。検出器がユーザが注目していないと決定する場合に、検出器２６は信号を出力し、前記信号はネットワーク１０を介してプロバイダサーバ３０に送信される。検出器２６による信号出力は、注目状態(attentive state)又は非注目状態(not attentive state)のいずれかを知らせる１ビット信号であり得る。以下に記載するより複雑な実施例においては、この信号出力は１ビットより大きくなり得る。
【００１５】
プロバイダサーバ３０中のパラメータ調整モジュール３２は、非注目(inattentiveness)の期間中にはマルチメディアコンテンツを送信するのに用いられる帯域幅が低減されるように、マルチメディアコンテンツのデータストリームを管理する。パラメータ調整モジュール３２は、例えば、プロバイダサーバ３０のソフトウェアモジュールを有し得る。
【００１６】
データを管理するため、パラメータ調整モジュール３２は、ユーザ装置２０に送信されているオーディオ信号の品質を維持しながらビデオ信号の解像度（品質レベル）を低減させ得る。他の例においては、ビデオ信号の品質が維持され、オーディオ信号の品質が低減されても良い（これは、ユーザ装置がオーディオ出力が弱められているテレビである場合に適用可能であり得る）。解像度の低減は、単位時間毎に送信されることを必要とされる情報の量、即ち伝送レートを低減させ、それによって、プロバイダサーバ３０とユーザ装置２０との間の経路に沿った利用可能な帯域幅を増大させる。マルチメディアコンテンツのデータストリームはリアルタイムに送出されていることから、ユーザが注目状態に戻ると、パラメータ調整モジュール３２はもはや非注目信号を受信せず、プロバイダサーバ３０は、直ちに標準品質レベルのデータ伝送を再開し得る。従って、ユーザは、マルチメディアコンテンツの品質レベルの変化に気付かない。更に、パラメータ調整モジュール３２は、該パラメータ調整モジュールが解像度を低減させるのに先立って、当該時間遅延の期間中にはユーザが非注目状態でなければならないような時間遅延を含み得る。
【００１７】
他の例において又は付加的に、検出器はユーザ装置２０のスクリーンセーバの状態を監視し得る。この実施例において、検出器２６は、スクリーンセーバがオン状態にされる場合及びスクリーンセーバがオン状態のままである間に非注目信号を出力する。
【００１８】
マルチメディアコンテンツのデータストリームの管理が好ましくは自動である一方、入力部２８もまたパラメータ調整装置３２にコマンドを送るために用いられ得る。例えば、ユーザが他のマルチメディアアイテム(mutimedia item)で表示される特定のマルチメディアコンテンツアイテムをダウンロード及び／又はセーブしたい場合には、ユーザは、これが行なわれている間高解像度の前記他のマルチメディアコンテンツアイテムを座って見る必要なしに、最高品質のものが可能な限り高速にセーブされることを欲するかもしれない。この場合には、ユーザは、パラメータ調整モジュール３２を無効にする(override)ために入力部２８を用いることが出来る。入力装置２８はまた、標準モードと低品質モード（即ち、帯域幅節約モード）との間の手動切り換えをするためにも用いられ得る。他の例において又は付加的に、入力装置２８は、ユーザの非注目が検出された後の開始(onset)の時間の調整といった、その品質の表示信号が出力される場合を決定するパラメータを調整するために用いられ得る。
【００１９】
注目を決定するために、検出器２６は、人の存在又は不在を検出しても良い。人の存在は、ユーザ装置２０の前方の領域の画像を評価し、人のシルエット(silhouette)が検出画像中にあるか否かを決定することにより決定され得る。この人の存在を検出する方法は、例えばHydra, Multiple People Detection and Tracking Using Silhouettes, Haritaoglu, D. Harwood, L. Davis, Computer Vision and Pattern Recognition (CVPR 1999) Second Workshop of Video Surveillanceにおいて開示されている。本発明の単純な実施例においては、シルエットの存在が注目を示し、シルエットの不在が非注目を示す。
【００２０】
検出器２６による人の存在の検出は、多くの異なる方法で行なわれ得る。検出器２６は、部屋の画像を検出し、形状、色及び動きなどの特定の特性について画像を分析し、人が存在するかどうかを決定するためにモデルと画像の特性を比較する。前記特性は、上記のシルエットなどの形状、肌の色調(skin tone)などの色、及び／又は歩きぶり(gait)などの人の特定の動きを有し得る。前記モデルは、人の存在を示す人のあらゆる特性を有し得る。
【００２１】
モデルと画像を比較する代わりとして又は該比較に加えて、検出器２６はまた、セキュリティシステムにおいて動きを検出するために用いられる動き検出器などの動き検出器も有し得る。この実施例において、動きの検出は、部屋における人間の活動を示す。この動きだけで注目を示すことができ、さもなければ、装置は、更に注目の度合いを規定するために以下に記載するような他の検出を用い得る。
【００２２】
更に、ユーザとシステムとの間の距離も注目を評価するために用いられ得る。この実施例において、ユーザの注目は、ユーザ装置からの距離が増大するにつれて減少する。ユーザがユーザ装置２０からより遠くに遠ざかるほど、ユーザは高レベルの品質を必要としなくなる。ユーザのユーザ装置２０からの距離を評価するため、検出画像におけるシルエットの大きさ又はシルエットの見掛けの高さが評価され得る。この実施例においては、或る距離が規定され、前記或る距離の地点を越えるとユーザは注目していないと考えられても良い。他に例においては、ユーザからユーザ装置２０までの距離が増大するにつれて、ユーザ装置２０に送られる信号の品質のレベルが徐々に低減され得る。
【００２３】
シルエットは、身体の向きを決定するために更に分析され得る。即ち、ユーザは、ユーザの身体がユーザ装置と対面している場合には注目しているとみなされ、ユーザの身体の向きがユーザ装置からそれている場合には注目していないとみなされる。
【００２４】
勿論、身体がディスプレイと対面していない一方で、ユーザの顔がディスプレイと対面していることはあり得る。この場合には、ユーザが実際に画面を見ているのかを否かを決定するために頭部の向きが検出されなければならない。頭部の向きを決定するための既知の方法は、S. Iwasawa, J. Ohya, K. Takahashi, T. Sakaguchi, S. Kawato, K. Ebihara, and S. Morishima, Real-time 3D Estimation of Human Body Postures from Trinocular Images, ICCV '99によって開示されている方法などを用いられ得る。これらの技術を用いて、存在、距離及び向きが、ユーザの注目の度合いを評価するために全て用いられる。
【００２５】
更に、視聴者の特性に基づいて視聴者に対する情報のコンテンツを調整するための技術は、"Method and Apparatus for Tuning Content of Information Presented to an Audience"と題されている米国特許出願番号第09/603,532号において開示されており、前記出願の全内容は、参照により本願明細書に明示的に盛り込まれる。この出願において開示されている技術は視聴者向けである。しかしながら、視聴者の特性を決定するために用いられる技術の幾つかは、メディアに対するユーザの注目についての情報を決定するために本発明に適用され得る。
【００２６】
図２はユーザ装置２０ａの実施例を示しており、ユーザ装置２０ａにおいて、検出器２６ａは、表示画面を有する出力部２４ａに関してユーザ５０の注視(gaze)及び／又は頭部の向きを決定するよう構成される。この出願の目的のために、頭部の向きは個人の頭部の姿態(head pose)に関連づけられ、ユーザの注視はユーザの眼が見ている方向に関連づけられる。向き又は注視の決定は、例えば米国特許番号第6,154,559号及び米国特許番号第5,561,718号において開示されているコンピュータビジョン(Computer Vision)技術などのコンピュータビジョン技術を用いて行なわれ、前記出願の全内容は、参照により本願明細書に明示的に盛り込まれる。この実施例においては、検出器２６ａは、顔の特徴の検出、及び幾何学的推理(geometrical reasoning)の使用と、フィッティング動作(fitting operation)を行なうための3-Dモデルの適用と、2-D又は3-Dの対面モデル(facing model)／非対面モデル(not facing model)の学習と、及び顔の内側の肌の色調の割合(skin tone percentage)の検出とのうちの１つといった頭部の向きを決定するための技術の少なくとも１つを用いるカメラ又は赤外線検出器を有し得る。これらの技術は全てユーザの頭部の姿態を決定するために用いられる。例えば、検出された顔の特徴、フィッティング動作及び対面モデル／非対面モデルが、（１）ユーザの頭部が存在するのか否かと、（２）ユーザの頭部の向きとを決定するために用いられる。更に、肌の色調の割合の検出もまた、ユーザが存在するのか否か及びユーザの頭部の向きの指標を与える。肌の色調の割合は、ユーザが出力部２４ａと対面している場合に最も高い。ユーザが該ユーザの頭部をそらす場合には、ユーザの頭部の側部又は後部が出力部２４ａ及び検出器２６ａと対面し、故により低い肌の色調の割合が検出される。この情報から、検出器２６ａは、ユーザが、出力部と対面しているのか否か、即ち、注目しているのか否かを決定する。
【００２７】
検出器２６ａはまた、出力装置２４ａ上の、ユーザの注目が向けられる位置を決定するためにユーザの眼の注視を追跡するのに用いられ得る。この実施例において、検出器２６ａは、LC technologies, Inc.(Fairfax, Virginia)のEyegaze Development Systemの検出器などのプロセッサに接続される単一のカメラ又は赤外線検出器を有し得る。図３に示されている他の実施例においては、検出器２６ｂはまた２カメラシステムを有し得る、前記２カメラシステムにおいては、「頭部」カメラ２８ｂがユーザの頭部の位置を決定し、「眼」カメラ２９ｂがMetrovision(Perenchies, FR)のビジオボード注視通信システム(Visioboard gaze communication system)などの頭部カメラからの出力に基づいて眼に焦点を合わせる。頭部の向きを検出するための上記の技術に加えて、眼を追跡する実施例もまた、較正段階(calibration phase)の間に特定のユーザに適合させるために、眼の特徴を検出し、幾何学的推理及び学習技術を用いる。これは、検出器２６ｂがユーザの眼が見ている方向を決定することを可能にする。
【００２８】
眼を追跡する実施例においては、パラメータ調整装置３２は、出力部の、ユーザが注意を払っていない領域中のビデオコンテンツの品質レベルを低減させ得る。例えば、ユーザが画面の左下側部分しか見ていない場合には、パラメータ調整装置３２は、画面の４分の１しか最高品質では送出されないように画面の他の四半分の中のビデオコンテンツの品質レベルを低減させ得る。パラメータ調整装置３２は、当該時間遅延の期間の間ユーザの注視が画面の或る部分に固定された後にしかこの低減をしないように時間遅延を含み得る。ユーザが該ユーザの注視を出力部の残りの部分に動かすと、マルチメディア出力全体が最高品質で送信される。この実施例においては、検出器による非注目信号出力は、ユーザが注目していない場所の指標を含まなければならない。従って、この位置情報を含むために、非注目信号は１ビットより大きくなければならない。
【００２９】
この実施例はまた、ユーザが検出器２６ｂの視界外又は範囲外に動く場合でも高品質の伝送を維持するためにユーザが入力部２８を用いることが出来るパラメータ調整装置３２に対する手動無効化(manual override)を含み得る。他の例においては、ユーザが予めマルチメディアコンテンツのどの部分が関心のある部分かを知っている場合には、ユーザは、特定の部分に対して高品質伝送を維持するようパラメータ調整装置３２に指示し得る。入力部２８はまた、マルチメディアコンテンツのデータストリームの伝送中にユーザの要求で高品質伝送に手動で戻すためにも用いられ得る。
【００３０】
このようにして、本発明の好ましい実施例に適用されるような本発明の基本的な新規な特徴が、示され、記載され、指摘されているが、当業者によって、本発明の趣旨を逸脱しない範囲内で、図示されている装置の形態及び詳細並びに該装置の動作における様々な省略、置き換え及び変更がなされ得ることは理解されるであろう。例えば、同じ結果を達成するために実質的に同じように実質的に同じ機能を果たす要素及び／又は方法のステップの全ての組み合わせが本発明の範囲内であることを明示的に意図する。更に、本発明のあらゆる開示されている形態又は実施例と関連して示されている且つ／又は記載されている構成及び／又は要素及び／又は方法のステップが、設計上の選択の一般的な事項としてあらゆる他の開示されている又は記載されている又は示唆されている形態又は実施例に組み込まれ得ることを認識されたい。それ故、本願明細書に添付されている特許請求の範囲によって示されているようにのみ限定されることを意図する。
【図１】
2011172250.tif 000003
【図２】
2011172250.tif 000004
【図３】
2011172250.tif 000005