(57)【要約】  複数のチャネルのオーディオ信号（例えば、ステレオオーディオ）は、他の信号（反射または反響した音）に対する推定されたダイアログ信号（例えば、映画で俳優が話すダイアログ）の利得（例えば、音量レベルまたは音の大きさ）を変更するよう処理される。一実施例において、主音量又はダイアログ音量を制御するためにコントローラが用いられる。一実施例において、音量レベル及び他の情報を示すために一つ以上のグラフィックオブジェクト及び／又はユーザインタフェースエレメントが用いられる。【選択図】図８
2010515290.tif 000002
【特許請求の範囲】
【請求項１】
ダイアログ音量制御部；
主音量制御部；及び
前記ダイアログ音量制御部及び主音量制御部と動作可能に結合され、オーディオ信号の前記ダイアログ音量及び前記主音量をそれぞれ個別に調節するためのダイアログ音量調節信号及び主音量調節信号を個別に生成するように構成される回路部を含むことを特徴とする装置。
【請求項２】
前記ダイアログ音量調節信号は、主音量レベルまたは一つ以上の他のオーディオ信号の音量レベルに比例してオーディオ信号のダイアログ音量レベルを調整するために用いられることを特徴とする請求項１に記載の装置。
【請求項３】
前記ダイアログ音量調節信号は、ダイアログ音量を増加または減少させることを特徴とする請求項１または２に記載の装置。
【請求項４】
前記ダイアログ音量制御部とのユーザインタラクションに応答して、予め設定された量だけ前記オーディオ信号の前記ダイアログ音量を漸進的に増加または減少させることを特徴とする請求項１乃至３のうち何れか１項に記載の装置。
【請求項５】
前記ダイアログ音量制御部または主音量制御部の視覚的な形態は、その機能または動作を表すために変更されることを特徴とする請求項１乃至４のうち何れか１項に記載の装置。
【請求項６】
前記ダイアログ音量制御信号は、ダイアログ音量レベルを表す視覚的なフィードバックを提供するためにディスプレイ装置に一つまたはそれ以上のグラフィクオブジェクトを生成するのに用いられることを特徴とする請求項１乃至５のうち何れか１項に記載の装置。
【請求項７】
第１のグラフィクオブジェクトは主音量レベルを表し、第２のグラフィックオブジェクトは、主音量レベル、または他のオーディオ信号の音量レベルに対するダイアログ音量レベルを表すことを特徴とする請求項６に記載の装置。
【請求項８】
前記ダイアログ音量調節信号は、前記ダイアログ音量制御部が動作していることを表すインジケータを生成するのに用いられることを特徴とする請求項１乃至７のうち何れか１項に記載の装置。
【請求項９】
音量制御部；
ダイアログ音量調節選択部；及び
前記音量制御部と動作可能に結合され、前記ダイアログ音量調節選択部が動作するとき、ダイアログ音量調節信号を生成し、前記ダイアログ音量調節選択部が動作しないとき、主音量調節信号を生成するように構成される回路部を含むことを特徴とする装置。
【請求項１０】
オーディオ信号の前記ダイアログ音量は、前記ダイアログ音量部とのユーザインタラクティブに応答して、予め設定された量だけ漸進的に増加または減少することを特徴とする請求項９に記載の装置。
【請求項１１】
前記音量制御部または前記ダイアログ音量調節選択部の視覚的な形態は、その機能を表すために変更されることを特徴とする請求項９または１０に記載の装置。
【請求項１２】
前記ダイアログ音量調節信号は、装置または他の装置によって表示するためにダイアログ音量制御部が動作していることを表すインジケータを生成するのに用いられることを特徴とする請求項９乃至１１のうち何れか１項に記載の装置。
【請求項１３】
第１の音量調節信号を受信する段階；
第２の音量調節信号を受信する段階；
前記第１の音量調節信号に応答して第１の音量レベルを表す第１のグラフィックオブジェクトを表示する段階；及び
前記第２の音量調節信号に応答して第１の音量レベルに対する第２の音量レベルを表すために、第２のグラフィックオブジェクトを前記第１のグラフィックオブジェクトに含まれるか隣接するように表示する段階を含むことを特徴とする方法。
【請求項１４】
前記第１のグラフィックオブジェクトはバーであり、前記第２のグラフィックオブジェクトは、前記第１の音量に対する前記第２の音量レベルを視覚的に表すように前記バーの内部に延長された線であることを特徴とする請求項１３に記載の方法。
【請求項１５】
前記第１の音量レベルは、複数のチャネルオーディオ信号の主音量レベルであり、前記第２の音量レベルは、前記主音量レベルに対するダイアログ音量レベルであることを特徴とする請求項１３または１４に記載の方法。
【請求項１６】
複数のチャネルオーディオ信号を獲得する段階；
前記オーディオ信号を用いてセンターチャネル信号と少なくとも左右のチャネル信号を推定する段階；
前記ダイアログ音量制御部で生成された利得係数を用いて前記センターチャネル信号の第１の利得を変更する段階；
前記左右のチャネル信号と前記変更されたセンターチャネル信号を含む結合されたチャネル信号を生成する段階；及び
主音量制御部を用いて前記結合されたチャネル信号の第２の利得を変更する段階を含むことを特徴とする方法。
【請求項１７】
ダイアログ音量調節信号を生成するように構成されるコントローラ；及び
前記ダイアログ音量調節信号を受信し、前記ダイアログ音量調節信号を用いるために、前記複数のチャネルオーディオ信号の少なくとも一部分の音量レベルを変更することなく、テレビジョン受信機によって処理された複数のチャネルオーディオ信号のダイアログ音量レベルを変更するレシーバーを含むことを特徴とするシステム。
【請求項１８】
前記レシーバーと動作可能に結合され、第１の音量レベルと前記第１の音量レベルに対する第２の音量レベルを表す一つまたはそれ以上のグラフィックオブジェクトを表示する表示部をさらに含むことを特徴とする請求項１７に記載のシステム。
【請求項１９】
前記第１のグラフィックオブジェクトはバーであり、第２のグラフィックオブジェクトは、前記第１の音量に対する前記第２の音量レベルを視覚的に表すために前記バーの内部に延長された線であることを特徴とする請求項１８に記載のシステム。
【請求項２０】
前記第１の音量レベルは、複数のチャネルオーディオ信号の主音量レベルであり、前記第２の音量レベルは、前記主音量レベルに対するダイアログ音量レベルであることを特徴とする請求項１８または１９に記載のシステム。
【請求項２１】
前記コントローラは、
ダイアログ音量制御部；及び
前記音量制御部と動作可能に結合され、前記ダイアログ音量制御部とのユーザインタラクティブに応答して、前記ダイアログ音量調節信号を生成する回路部をさらに含むことを特徴とする請求項１７乃至２０のうち何れか１項に記載のシステム。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、同時係属中の下記の米国仮出願を優先権として主張する。
【０００２】
２００６年９月１４日に出願された発明の名称“Ｍｅｔｈｏｄ  ｏｆ  Ｓｅｐａｒａｔｅｌｙ  Ｃｏｎｔｒｏｌｌｉｎｇ  Ｄｉａｌｏｇｕｅ  Ｖｏｌｕｍｅ、”、米国仮出願番号６０／８４４，８０６、代理人管理番号１９８１９−０４７Ｐ０１、
【０００３】
２００７年１月１１日に出願された発明の名称“Ｓｅｐａｒａｔｅ  Ｄｉａｌｏｇｕｅ  Ｖｏｌｕｍｅ（ＳＤＶ）、”、米国仮出願番号６０／８８４，５９４、代理人管理番号１９８１９−１２０Ｐ０１及び
【０００４】
２００７年６月１１日に出願された発明の名称“Ｅｎｈａｎｃｉｎｇ  Ｓｔｅｒｅｏ  Ａｕｄｉｏ  ｗｉｔｈ  Ｒｅｍｉｘ  Ｃａｐａｂｉｌｉｔｙ  ａｎｄ  Ｓｅｐａｒａｔｅ  Ｄｉａｌｏｇｕｅ、”、米国仮出願番号６０／９４３，２６８、代理人管理番号１９８１９−１６０Ｐ０１。
【０００５】
前記各仮出願は、参照により全体が本明細書に統合される。
【０００６】
本発明は、一般的な信号処理に関するものである。
【背景技術】
【０００７】
オーディオエンハンスメント技術は、しばしば家庭内の娯楽システム、立体音響及びその他の消費者の電子機器で低周波信号をエンハンスし、多様な聴取環境（例えば、コンサートホール）を具現するために使用される。例えば、一部の技術は、高周波信号を挿入することで、映画ダイアログをより明確にするために使用されることもある。しかしながら、如何なる技術においても、ダイアログを周辺環境や他の成分の信号に対してエンハンスする技術を開示していない。
【発明の概要】
【発明が解決しようとする課題】
【０００８】
複数のチャネルのオーディオ信号（例えば、ステレオオーディオ）は、他の信号（反射または反響した音）に対する推定されたダイアログ信号（例えば、映画で俳優が話すダイアログ）の利得（例えば、音量レベルまたは音の大きさ）を変更するよう処理される。一実施例において、主音量又はダイアログ音量を制御するためにコントローラが用いられる。一実施例において、音量レベル及び他の情報を示すために一つ以上のグラフィックオブジェクト及び／又はユーザインタフェースエレメントが用いられる。
【０００９】
方法、システム及びコンピュータ読出し可能な記録媒体を含む他の具現例が開示される。
【図面の簡単な説明】
【００１０】
【図１】二つのスピーカを用いた仮装音源の位置の関数としてチャンネル利得を表すモデルを示す図である。
【図２】入力信号のダイアログをエンハンスするダイアログエスティメータ及びオーディオコントローラの一例のブロック図である。
【図３】フィルターバンク及び逆変換を含む、入力信号のダイアログをエンハンスするダイアログエスティメータ及びオーディオコントローラの一例のブロック図である。
【図４】オーディオ信号又は推定されたダイアログ信号に含まれる信号成分を分類する分類器を含む、入力信号のダイアログをエンハンスするダイアログエスティメータ及びオーディオコントローラの一例のブロック図である。
【図５Ａ】ダイアログエンハンスメント処理における分類器の種々のあり得る位置を示すブロック図である。
【図５Ｂ】ダイアログエンハンスメント処理における分類器の種々のあり得る位置を示すブロック図である。
【図５Ｃ】ダイアログエンハンスメント処理における分類器の種々のあり得る位置を示すブロック図である。
【図６】時間軸に適用される分類器を含む、ダイアログエンハンスメントのシステムの例のブロック図である。
【図７】ダイアログ音量を調節する個別の制御装置を含む、一般的なＴＶ受信機又は他の装置と通信を行うリモートコントローラの一例を示す図である。
【図８】オーディオ信号に対する主音量及びダイアログ音量の制御に適用するシステムの一例のブロック図である。
【図９】ダイアログ音量をオンオフするリモートコントローラの一例を示す図である。
【図１０】ダイアログ音量制御情報を表示するＴＶ受信機のオンスクリーンディスプレイ（ＯＳＤ）の一例を示す図である。
【図１１】ダイアログをあらわすためのグラフィックオブジェクトを表示する方法の一例を示す図である。
【図１２】装置のディスプレイにダイアログ音量制御のダイアログ音量レベル及びオンオフ状態を表示する方法の一例を示す図である。
【図１３】制御される音量の種類及びダイアログ音量制御のオンオフ状態を表す個別のインジケータを示す図である。
【図１４】図１〜１３を参照して説明された機能とプロセスが行われるデジタルテレビジョンシステムの例を示したブロック図である。
【発明を実施するための形態】
【００１１】
ダイアログエンハンスメント技術
図１は、二つのスピーカを用いた仮装音源の位置の関数としてチャンネル利得を表すモデルを示す図である。一部の実施例において、オーディオ／ビデオ信号に含まれるダイアログ信号の音量のみを制御する方法は、テレビジョン（ＴＶ）受信機、デジタルマルチメディア放送（ＤＭＢ）プレーヤ又はパーソナルマルチメディアプレーヤ（ＰＭＰ）を含む種々のオーディオ信号再生装置におけるユーザの要求にしたがってダイアログ信号を有効に制御することができる。
【００１２】
ダイアログ信号のみが、バックグランドノイズ又はトランスミッション騒音が生じない環境で送信されるとき、聴取者は、送信されたダイアログ信困難なく聴くことができる。送信されたダイアログの音量が小さい場合、聴取者は、音量を上げることによってダイアログを聴くことができる。映画、ドラマ又はスポーツを再生する映画館又はテレビジョン受信機の種々の音響効果とともにダイアログが再生される環境において、聴取者は、音楽、音響効果及び／又はバックグランドノイズ又はトランスミッション騒音のためにダイアログを聴くのが困難になる。この場合、ダイアログ音量を上げるために主音量を上げると、バックグランドノイズ、音楽及び音響効果の音量も上がり、その結果、不快な音が生じる。
【００１３】
一部の実施例において、送信されたマルチチャンネルオーディオ信号がステレオ信号である場合、中央チャンネルを仮想的に生成することができ、利得を、仮想中央チャンネルに付与することができ、仮想中央チャンネルを、マルチチャンネルオーディオ信号の左及び右（Ｌ／Ｒ）チャンネルに加えることができる。仮想中央チャンネルを、Ｌチャンネル及びＲチャンネルに加えることによって生成することができる。
【００１４】
【数１】
2010515290.tif 000003
【００１５】
この場合、Ｌin及びＲinは、Ｌチャンネル及びＲチャンネルの入力を表し、Ｌout及びＲoutは、Ｌチャンネル及びＲチャンネルの出力を表し、Ｃvirtual及びＣoutは、仮想中央ちゃん得る及び処理された仮想中央チャンネルの出力をそれぞれ表し、これらの両方は、中間処理で用いられる値であり、Ｇcenterは、仮想中央チャンネルのレベルを決定する利得値を表し、ＧL及びＧRは、Ｌチャンネル及びＲチャンネルの入力値に適用される利得値を表す。この例において、ＧL及びＧRは１であると仮定される。
【００１６】
さらに、特定周波数を増幅又は減衰する一つ以上のフィルター（例えば、帯域通過フィルター）を適用するとともに利得を仮想中央チャンネルに付与する方法を用いることができる。この場合、関数ｆcenterを用いるフィルターを適用することができる。Ｇcenterを用いて仮想中央チャンネルの音量を上げる場合、Ｌチャンネル及びＲチャンネル並びにダイアログ信号に含まれる音楽又は音響効果のような他の信号成分が増幅されるという制限がある。関数ｆcenterを用いるフィルターを用いる場合、ダイアログアーティキュレーションが向上するが、ダイアログ、音楽、背景音のような信号に歪みが生じ、その結果、不快な音が生じる。
【００１７】
後に説明するように、一部の実施例において、上記問題を、送信されたオーディオ信号に含まれるダイアログ信号の音量を有効に制御することによって解決することができる。
【００１８】
ダイアログ信号の音量を制御する方法
一般に、ダイアログ信号は、マルチチャンネル信号環境において中央チャンネルに集約される。例えば、５．１，６．１又は７．１チャンネルサラウンドシステムにおいて、ダイアログは、一般的に中央チャンネルに割り当てられる。受信したオーディオ信号がマルチチャンネル信号である場合、中央チャンネルの利得のみを制御することによって十分な効果を得ることができる。オーディオ信号が中央チャンネルを含まない場合（例えば、ステレオ）、ダイアログ信号がマルチチャンネルオーディオ信号のチャンネルから集約されると推定される中央領域（以下、「ダイアログ領域」とも称する。）に所望の利得を付与する方法が必要となる。
【００１９】
中央チャンネルを含むマルチチャンネル入力信号
５．１，６．１又は７．１チャンネルサラウンドシステムは中央チャンネルを含む。これらのシステムにおいて、中央チャンネルの利得のみを制御することによって所望の効果を有効に得ることができる。この場合、中央チャンネルは、ダイアログが割り当てられるチャンネルを表す。しかしながら、ここで開示するダイアログエンハンスメント技術は、中央チャンネルに限定されない。
【００２０】
中央チャンネルを含む出力チャンネル
ここで、中央チャンネルがＣ＿outであり、入力中央チャンネルがＣ＿inである場合、以下の式を得ることができる。
【００２１】
【数２】
2010515290.tif 000004
【００２２】
この場合、Ｇ＿centerは、所望の利得を表し、ｆ＿centerは、使用に応じて構成することができる、中央チャンネルに適用されるフィルター（関数）を表す。必要に応じて、ｆ＿centerを適用した後にＧ＿centerを付与するｋとができる。
【００２３】
【数３】
2010515290.tif 000005
【００２４】
中央チャンネルを含まない出力チャンネル
出力チャンネルが中央チャンネルを含まない場合、（上記方法によって利得が制御される）Ｃ＿outがＬチャンネル及びＲチャンネルに付与される。これは、以下の式によって与えられる。
【００２５】
【数４】
2010515290.tif 000006
【００２６】
信号電力を維持するために、Ｃ＿outを、十分な利得（例えば、１／ｓｑｒｔ（２））を用いて計算することができる。
【００２７】
中央チャンネルを含まないマルチチャンネル入力信号
中央チャンネルがマルチチャンネルオーディオ信号に含まれない場合、ダイアログが集約されると推定される（仮想中央チャンネル信号とも称される）ダイアログ信号を、マルチチャンネルオーディオ信号から得ることができ、所望の利得を、推定されたダイアログ信号に付与することができる。例えば、オーディオ信号特性（例えば、レベル、左チャンネル信号と右チャンネル信号との間の相関、スペクトル成分）を、２００７年９月１４日に出願された発明の名称”Ｄｉａｌｏｇ  Ｅｎｈａｎｃｅｍｅｎｔ  Ｔｅｃｈｎｉｑｕｅｓ”、米国特許出願番号 、代理人管理番号１９８１９−１２０００１に記載されているように、ダイアログ信号を推定するために用いることができ、この特許出願は、参照により全体が本明細書に統合される。
【００２８】
図１を再び参照すると、正弦則により、音源（例えば、図１の仮想音源）が音像のある位置に配置されると、二つのスピーカを用いた音像の音源の位置を表現するためにチャンネルの利得を制御することができる。
【００２９】
【数５】
2010515290.tif 000007
【００３０】
正弦関数の代わりに正接関数を用いることができることに留意されたい。
【００３１】
それに対し、二つのスピーカに対する信号入力のレベル、すなわち、ｇ1及びｇ2が既知である場合、信号入力の音源の位置を得ることができる。中央スピーカが含まれない場合、中央スピーカに含まれる音を左前スピーカ及び右前スピーカによって再生できるようにすることによって仮想中央チャンネルを得ることができる。この場合、仮想音源が音像の中央領域に配置される効果は、二つのスピーカによって同様な利得、すなわち、ｇ1及びｇ2を中央領域の音に付与できるようにすることによって得られる。正弦則の式において、ｇ1及びｇ2が同様な値を有する場合、左辺の分子が零に近くなる。したがって、ｓｉｎφは０に近い値を有する必要があり、すなわち、φは０に近い値を有する必要があり、これによって、仮想音源は中央領域に位置する。仮想音源が中央領域に位置する場合、仮想中央チャンネルを形成する二つのチャンネル（例えば、左チャンネル及び右チャンネル）は同様な利得を有し、中央領域（すなわち、ダイアログ領域）の利得を、仮想中央チャンネルの推定された信号の利得値を制御することによって制御することができる。
【００３２】
チャンネルのレベルの情報及びチャンネル間の相関の情報を、ダイアログを含むと仮定することができる仮想中央チャンネル信号を推定するのに用いることができる。例えば、左チャンネルと右チャンネルとの間の相関が低い（例えば、入力信号が音源のある位置に集約されていない又は広く分布される）場合、信号がダイアログでない可能性が高い。それに対し、左チャンネルと右チャンネルとの間の相関が高い（例えば、入力信号が空間の位置に集約されている）場合、信号がダイアログ又は音響効果（例えば、ドアを閉めることによって生じる雑音）である可能性が高い。
【００３３】
したがって、チャンネルのレベルの情報及びチャンネル間の相関の情報を同時に用いることができる場合、ダイアログ信号を有効に推定することができる。ダイアログ信号の周波数帯域が一般的に１００Ｈｚ〜８ＫＨｚであるので、ダイアログ信号を、この周波数帯域の追加の情報を用いることによって推定することができる。
【００３４】
一般的なマルチチャンネルオーディオ信号は、ダイアログ、音楽、音響効果等の種々の信号を含むことができる。したがって、ダイアログ信号を推定する前に送信信号がダイアログ、音楽又は他の信号であるかを決定する分類器を構成することによって、ダイアログ信号の推定能力を向上することができる。図５Ａ〜５Ｃを参照して説明するように、分類器を、推定が正確であったかを決定するためにダイアログ信号を推定した後に適用することもできる。
【００３５】
時間領域の制御
図２は、ダイアログエスティメー２００タ及びオーディオコントローラ２０２の一例のブロック図である。図２に示すように、ダイアログ信号は、ダイアログエスティメータ２００が入力信号を用いることによって推定される。（例えば、ユーザによって特定された）所望の利得を、オーディオコントローラ２０２を用いることによって、推定されたダイアログ信号に付与することができ、これによって、出力を得る。利得を制御するのに必要な他の情報を、ダイアログエスティメータ２００によって生成することができる。ユーザ制御情報は、ダイアログ音量制御情報を含むことができる。音楽、ダイアログ、反響及びバックグランドノイズを識別するためにオーディオ信号を分析することができ、これらの信号のレベル及び特性を、オーディオコントローラ２０２によって制御することができる。
【００３６】
サブバンドベース処理
図３は、オーディオ信号からサブバンドを生成する分析フィルター３００及びサブバンドからオーディオ信号を合成する合成フィルター３０６を含む、入力信号のダイアログをエンハンスするダイアログエスティメータ３０２及びオーディオコントローラ３０４の一例のブロック図である。一部の実施例では、入力オーディオ信号の全帯域に対してダイアログ信号を推定し及び制御するよりは、入力オーディオ信号を分析フィルターバンク３００によって複数のサブバンドに分割し、ダイアログ信号をサブバンドにしたがってダイアログエスティメータ３０２によって推定する方が有効である。一部の場合において、ダイアログを入力オーディオ信号の特定の周波数領域に集約しても集約しなくてもよい。そのような場合、ダイアログを含む入力オーディオ信号の周波数領域のみを用いてダイアログ領域を推定することができる。サブバンド信号を得るために、多相フィルターバンク、直交ミラーフィルターバンク（ＱＭＦ）、ハイブリッドフィルターバンク、離散フーリエ変換（ＤＦＴ）、修正離散コサイン変換（ＭＤＣＴ）等を含む種々の機知の方法を用いることができるが、それに限定されるものではない。
【００３７】
一部の実施例において、左チャンネル信号及び右チャンネル信号を提供するために第１のマルチチャンネルオーディオ信号をフィルタリングし、左チャンネル信号及び右チャンネル信号を周波数領域に変換し、変換された左チャンネル信号及び右チャンネル信号を用いてダイアログ信号を推定することによって、ダイアログ信号を周波数領域で推定することができる。
分類器の利用
【００３８】
図４は、オーディオ信号に含まれたオーディオコンテンツを分類する分類器を含み、入力信号のダイアログをエンハンスするダイアログエスティメータ４０２及びオーディオコントローラ４０４の例を示したブロック図である。一部の実施例において、分類器４００は、入力オーディオの統計的または知覚的特性を分析し、入力されるオーディオ信号をカテゴリー別に分類するのに使用される。例えば、分類器４００は、入力オーディオ信号がダイアログ、音楽、音響効果または黙音であるかを決定することができ、決定された結果を出力することができる。他の例として、前記分類器４００は、２００７年９月１４日に出願された米国特許出願番号"Ｄｉａｌｏｇｕｅ  Ｅｎｈａｎｃｅｍｅｎｔ  Ｔｅｃｈｎｉｑｕｅ（ダイアログエンハンスメント技術）"、代理人管理番号１９８１９−１２０００１に開示されたように、相互相関（ｃｒｏｓｓ―ｃｏｒｒｅｌａｔｉｏｎ）を用いてモノまたはモノ類似オーディオ信号を実質的に検出するのに使用される。この技術を用いて、入力オーディオ信号が実質的に前記分類器４００の出力に基づいたモノでない場合、ダイアログエンハンスメント技術を、入力オーディオ信号に適用することができる。
【００３９】
前記分類器４００の出力をダイアログまたは音楽のような確かな決定出力を入力オーディオ信号にダイアログが含まれる確率や比率のような簡単な決定出力とすることができる。分類器の例として、ナイーブベイズ分類器（ｎａｉｖｅ  Ｂａｙｅｓ  ｃｌａｓｓｉｆｉｅｒｓ）、ベイジアンネットワーク（Ｂａｙｅｓｉａｎ  ｎｅｔｗｏｒｋｓ）、線形分類器（ｌｉｎｅａｒ  ｃｌａｓｓｉｆｉｅｒｓ）、ベイジアンインターフェース（Ｂａｙｅｓｉａｎ  ｉｎｆｅｒｅｎｃｅ）、ファジー理論（ｆｕｓｓｙ  ｌｏｇｉｃ）、ロジスティック回帰（ｌｏｇｉｓｔｉｃ  ｒｅｇｒｅｓｓｉｏｎ）、神経ネットワーク（ｎｅｕｒａｌ  ｎｅｔｗｏｒｋｓ）、予測分析学（ｐｒｅｄｉｃｔｉｖｅ  ａｎａｌｙｔｉｃｓ）、パーセプトロン（ｐｅｒｃｅｐｔｒｏｎｓ）、ＳＶＭｓ（ｓｕｐｐｏｒｔ  ｖｅｃｔｏｒ  ｍａｃｈｉｎｅｓ）などが含まれるが、これに限定されることはない。
【００４０】
図５Ａ〜図５Ｃは、ダイアログエンハンスメント処理内の分類器５０２の種々のあり得る配置を示したブロック図である。図５Ａにおいて、分類器５０２によって信号にダイアログが含まれたと決定される場合、５０４、５０６、５０８及び５１０の順次的なプロセス段階が行われ、信号にダイアログが含まれていないと決定される場合、前記順次的なプロセス段階は迂回される。ユーザ制御情報がダイアログよりもオーディオ信号の音量と関連している場合（例えば、前記ダイアログ音量が維持される間、前記音楽音量が大きくなる場合）、分類器５０２は、信号が音楽信号であると決定し、音楽音量は、５０４、５０６、５０８、５１０の順次的な段階を通して制御される。
【００４１】
図５Ｂにおいて、前記分類器５０２は、前記分析フィルターバンク５０４の後に適用される。前記分類器５０２は、ある時点で周波数帯域（各サブバンド）によって分類された互いに異なる出力を有することができる。ユーザ制御情報によって再生される前記オーディオ信号の前記各特性（例えば、前記ダイアログ音量の増大、反響音の減衰など）が制御される。
【００４２】
図５Ｃにおいて、前記分類器５０２は、前記ダイアログエスティメータ５０６の後に適用される。この構造は、前記音楽信号が音像の中央に集約されており、ダイアログ領域が認識されない場合に効率的である。例えば、前記分類器５０２は、推定される仮想中央チャネル信号が音声成分信号を含むかを決定することができる。仮想中央チャネル信号が音声成分信号を含む場合、ゲインは推定される仮想中央チャネル信号に適用される。一方、推定される仮想中央チャネル信号が音楽または他の非音性（ｎｏｎ−ｓｐｅｅｃｈ）成分に分類される場合、利得は適用されない。その他に、分類器と関連した他の構造も可能である。
【００４３】
自動ダイアログ音量制御機能
【００４４】
図６は、自動制御情報生成器６０８を含むダイアログエンハンスメントシステムを例示するブロック図である。図６において、説明の便宜のために、分類器のブロックは示していない。しかし、図４〜図５と同様に、図６に分類器が含まれることは自明である。分析フィルターバンク６００と合成フィルターバンク６０６（逆変換）は、サブバンドが使用されない場合には含まれない。
【００４５】
一部の実施例において、自動制御情報生成器６０８は、仮想中央チャネル信号とマルチチャネルオーディオ信号の比率を比較する。比率が第１臨界値より低い場合、前記仮想中央チャネル信号は増幅される。そして、比率が第２臨界値より高い場合、前記仮想中央チャネル信号は減衰される。例えば、前記Ｐ＿ｄｉａｌｏｇｕｅがダイアログ領域信号のレベルを表示し、Ｐ＿ｉｎｐｕｔが入力信号のレベルを表示する場合、利得は下記の方程式によって自動的に補正される。
【００４６】
【数６】
2010515290.tif 000008
【００４７】
ここで、Ｐ＿ｒａｔｉｏはＰ＿ｄｉａｌｏｇｕｅ／Ｐ＿ｉｎｐｕｔと定義され、Ｐ＿ｔｈｒｅｓｈｏｌｄは既に決定された値であり、Ｇ＿ｄｉａｌｏｇｕｅは、ダイアログ領域（以前に説明されたＧ＿ｃｅｎｔｅｒと同じ概念である。）に適用される利得値である。Ｐ＿ｔｈｒｅｓｈｏｌｄは、ユーザ（男性／女性）の趣向によってユーザによって設定される。
【００４８】
他の実施例において、相対レベルは、下記の方程式を用いて既に決定された値より小さく維持される。
【００４９】
【数７】
2010515290.tif 000009
【００５０】
自動制御情報の生成は、再生されたオーディオ信号によってユーザが望む相対的な値のダイアログ音量のみならず、背景音楽の音量、反響音の音量及び空間のキュー（ｃｕｅ）を持続させる。例えば、ユーザは、騒々しい環境下では、送伝された信号より高い音量のダイアログを聴取することができ、静かな環境下では、送伝された信号と同じかそれより小さい音量でダイアログを聴取することができる。
【００５１】
前記ダイアログのボリュームを効率的に制御する方法
一部の実施例において、ユーザによって制御される情報をユーザにフィードバックするコントローラ及び方法が導入される。例えば、説明の便宜のために、テレビジョン受信機のリモコンを説明する。しかし、前記開示された実施例は、オーディオ装置のリモコン、デジタルマルチメディア放送（ＤＭＢ）プレーヤ、ポータブルメディアプレーヤ（ＰＭＰ）、ＤＶＤプレーヤ、自動車オーディオプレーヤ、テレビジョン受信機及びオーディオ装置を制御する方法に適用できることが自明である。
【００５２】
個別の制御装置の構造＃１
【００５３】
図７は、ダイアログ音量を制御するための個別の入力制御部（例えば、キー、ボタン）を含み、ダイアログ音量を処理可能な一般的なテレビジョン受信機または他の装置との通信を行うリモコンを示した例示図である。
【００５４】
図７に示すように、リモコン７００は、チャネルを制御（例えば、情報探索）可能なチャネル制御キー７０２と、主音量（例えば、全体信号のボリューム）を増加または減少させる主音量制御キー７０４とを含む。また、例えば、図４〜図５を参照して説明したように、ダイアログエスティメータを通して計算されるダイアログ信号のような特定のオーディオ信号の音量を増加または減少させるダイアログ音量制御キー７０６を含む。
【００５５】
一部の実施例において、リモコン７００は、２００７年９月１４日に出願された米国特許出願番号、"Ｄｉａｌｏｇｕｅ  Ｅｎｈａｎｃｅｍｅｎｔ  Ｔｅｃｈｎｉｑｕｅ"、代理人管理番号１９８１９−１２０００１に説明されたダイアログエンハンスメントと一緒に使用される。この場合、リモコン７００は、所定の利得Ｇｄ及び／または利得係数ｇ（ｉ，ｋ）を提供することができる。ダイアログ音量を制御するのに個別のダイアログ音量制御キー７０６を使用することで、ユーザは、リモコン７００を用いてダイアログの音量のみを便利かつ効率的に制御することができる。
【００５６】
図８は、オーディオ信号の主音量とダイアログ音量を制御する処理を示したブロック図である。説明の便宜のために、図２〜図１０を参照して説明されたダイアログエンハンスメント処理は省略され、必要な構成要素のみが図８に開示される。例えば、図８の構造で、ダイアログエスティメータ８００は、オーディオ信号を受信し、中央、左右のチャネル信号を推定する。中央チャネル（例えば、推定されたダイアログ領域）は増幅器８１０に入力され、左右のチャネルは合成器８１２，８１４を用いて増幅器８１０の出力信号にそれぞれ加えられる。合成器８１２，８１４の出力信号は、左右のチャネル（主音量）の音量をそれぞれ制御するために増幅器８１６，８１８にそれぞれ入力される。
【００５７】
一部の実施例において、ダイアログ音量は、ダイアログ利得係数Ｇ＿Ｄｉａｌｏｇｕｅを出力する利得生成器８０６と結合されるダイアログ音量制御キー８０２によって制御される。左右のボリュームは、主利得Ｇ＿Ｍａｓｔｅｒを提供する利得生成器８０８と結合される主音量制御キー８０４によって制御される。利得係数Ｇ＿ＤｉａｌｏｇｕｅとＧ＿Ｍａｓｔｅｒは、ダイアログと主音量の利得を制御するために増幅器８１０，８１６，８１８で使用される。
【００５８】
個別の制御装置の構造＃２
【００５９】
図９は、チャネル制御キー９０２、ボリューム制御キー９０４及びダイアログ音量制御選択キー９０６を含むリモコン９００を示した例示図である。ダイアログ音量制御選択キー９０６は、ダイアログ音量制御をターンオンまたはターンオフするときに使用される。ダイアログ音量制御がターンオンされる場合、ダイアログ領域の信号音量は、音量制御キー９０４を用いて段階的な方法（例えば、漸進的に）で増加または減少される。例えば、ダイアログ音量制御選択キー９０６が押されたり、他の方法でダイアログ音量制御が行われる場合、前記ダイアログ領域信号を、既に設定された利得値（例えば、６ｄＢ）だけ増加することができる。ダイアログ音量制御選択キー９０６が再び押される場合、音量制御キー９０４は主音量を制御するのに使用される。
【００６０】
選択的に、ダイアログ音量制御選択キー９０６がターンオンされる場合、図６を参照して説明したように、自動ダイアログ制御（例えば、自動制御情報生成器６０８）が有効になる。音量制御キー９０４が押されたり、他の方法で作動するとき、ダイアログ利得は、例えば、０、３ｄＢ、６ｄＢ、１２ｄＢ、０の順に一定の単位別に連続的に増加しながら循環することができる。このような制御方法によって、ユーザはダイアログ音量を直観的に制御することができる。
【００６１】
リモコン９００は、ダイアログ音量を制御する装置の一例である。他の装置としてタッチ方式のディスプレイ装置を含むことができるが、これに限定されることはない。リモコン９００は、ダイアログ利得を制御するために既知の通信チャネル（例えば、赤外線、ラジオ周波数、ケーブル）を用いてあらゆるメディア装置（例えば、テレビジョンメディアプレーヤ、コンピュータ、携帯電話、セットトップボックス、ＤＶＤプレーヤ）とも通信することができる。
【００６２】
一部の実施例において、ダイアログ音量制御選択キー９０６がターンオンされるとき、前記選択事項がスクリーンに出力されるか、ダイアログ音量制御選択キー９０６の色相やシンボルが変化されるか、音量制御キー９０４の色相やシンボルが変化されるか、及び／またはダイアログ音量制御選択キー９０６の高さが変化される方法などで音量制御キー９０４の機能変化をユーザに通知することができる。音または力をフィードバックするか、リモコン画面またはテレビジョンスクリーン、モニターなどにテキストメッセージやグラフを顕示する方法のようなリモコンでの選択をユーザに知らせる他の多様な方法も具現可能である。
【００６３】
上記のような制御方法の利点は、ユーザが音量を直観的に制御することができ、ダイアログ、背景音楽、反響音などのようなオーディオ信号の多様な特性を制御するためにリモコンのボタンとキーが増加することを防止できるという点にある。多様なオーディオ信号が制御されるとき、制御されるオーディオ信号の特別な成分信号はダイアログ音量制御選択キー９０６を用いて選択される。このような成分信号は、ダイアログ信号、背景音楽、音響効果などを含むことができるが、これに限定されることはない。
【００６４】
ユーザに制御情報を通知する方法
ＯＳＤを用いた方法＃１
下記の例で、テレビジョン受信機のＯＳＤ（Ｏｎ  Ｓｃｒｅｅｎ  Ｄｉｓｐｌａｙ）を説明する。しかし、本発明は、増幅器のＯＳＤ、ＰＭＰのＯＳＤ、増幅器／ＰＭＰのＬＣＤウィンドウなどのように、装置の状態を出力可能なメディアの他の形態に適用されることは自明である。
【００６５】
図１０は、一般的なテレビジョン受信機１００２のＯＳＤ１０００を示す。ダイアログ音量内の変化は、数字で表現されるか、図１２に示すようにバー１００４の形態で表現される。一部の実施例において、ダイアログ音量は、相対レベル（図１０）や、図１１に示すように主音量または他の成分信号との割合で出力される。
【００６６】
図１１は、主音量とダイアログ音量のグラフィックオブジェクト（例えば、バー、ライン）を表示する方法を例示する。図１１の例において、バーは主音量を示し、バーの中間領域に描かれたラインの長さは、ダイアログ音量のレベルを示す。例えば、バー１１００内のライン１１０６は、ユーザにダイアログ音量が制御されていないことを知らせる。音量が制御されていない場合、ダイアログ音量は主音源と同一の値を有するようになる。バー１１０２内のライン１１０８は、ユーザにダイアログ音量が増加したことを知らせ、バー１１０４内のライン１１１０は、ユーザにダイアログ音量が減少したことを知らせる。
【００６７】
図１１を参照して記述された出力方法は、ユーザがダイアログ音量の相対値を知ることができるので、ダイアログ音量をより効率的に制御できるという長所を有する。さらに、ダイアログ音量バーが主音量バーと一緒に出力されるので、ＯＳＤ１０００を効率的かつ一貫的に具現することができる。
【００６８】
前記開示された実施例は、図１１に示すようにバー形式の出力に制限されない。むしろ、主音量と制御されるべき特定の音量（例えば、前記ダイアログ音量）を同時に出力するか、制御されるべき音量と主音量との間の相対的な対比を提供するあらゆるグラフィックオブジェクトが使用される。例えば、二つのバーが個別に表示されるか、互いに異なる色相及び／または広さを有するオーバーラップされたバーが一緒に出力される。
【００６９】
制御される音量の形式の数が二つ以上である場合、音量は、上記で直接説明した方法によって出力される。しかし、制御される音量の形式の数が三つ以上である場合、ユーザの混同を防止するために、現在制御される音量情報のみを出力する方法が使用される。例えば、反響音の音量及びダイアログ音量が制御されるが、ダイアログが現在の大きさに維持される間に反響音の音量のみが制御される場合には、例えば、上述した方法を用いて主音量と反響音の音量のみが表示される。本例において、主音量と反響音の音量は、互いに異なる色相または形状を有し、直観的に確認されることがより好ましい。
【００７０】
ＯＳＤを用いた方法＃２
図１２は、装置１２００（例えば、テレビジョン受信機）のＯＳＤ１２０２にダイアログ音量を表示する方法の例を示した図である。一部の実施例において、ダイアログレベル情報１２０６は、音量バー１２０４と別個に出力される。ダイアログレベル情報１２０６は、多様なサイズ、フォント、色相、明るさレベル、フラッシングまたは他の視覚的装飾または標識で出力される。このような出力方法は、図９を参照して説明したように、音量が段階的に循環されるように制御されるとき、より効果的に使用される。一部の実施例において、ダイアログ音量は、相対的なレベルや、主音量または他の成分信号との比として出力される。
【００７１】
図１３に示すように、ダイアログ音量の分離指示器１３０６は、装置１３００のＯＳＤ１３０２で制御される音量の種類を出力する代わりに、またはこれに加えて使用される。このような出力方式の長所は、スクリーンで見られるコンテンツが、表示される音量情報による影響（例えば、不明瞭な）が少ないことにある。
【００７２】
制御装置の表示
【００７３】
一部の実施例において、ダイアログ音量制御選択キー９０６（図９）が選択されるとき、音量キーの機能変化をユーザに通知するために、ダイアログ音量制御選択キー９０６の色相が変化される。選択的に、ダイアログ音量制御選択キー９０６が操作されるとき、音量制御キー９０４の色相や高さの変化が用いられる。
【００７４】
デジタルテレビジョンシステムの例
【００７５】
図１４は、図１〜図１３を参照して説明された機能とプロセスが行われる例示的なデジタルテレビジョンシステム１４００のブロック図である。デジタルテレビジョン（ＤＴＶ）は、デジタル信号による動画像及び音を受信して放送する遠隔通信システムである。デジタルテレビジョンは、デジタル的に圧縮され、特別にデザインされたテレビセット、セットトップボックスが備わった標準的な受信機、またはテレビジョンカードが備わったＰＣによって復号化されることが要求されるデジタル変調データを使用する。図１４のシステムがデジタルテレビジョンシステムに関するものであるが、前記ダイアログ増幅のために開示された実施例は、ダイアログ増幅が必要なアナログテレビジョンシステムまたはその他のシステムに適用される。
【００７６】
一部の実施例において、システム１４００は、インターフェース１４０２、復調器１４０４、デコーダー１４０６、オーディオ／ビデオ出力部１４０８、ユーザ入力インターフェース１４１０、一つまたはそれ以上のプロセッサー１４１２（例えば、Ｉｎｔｅｌ（登録商標）  ｐｒｏｃｅｓｓｏｒｓ）、一つまたはそれ以上のコンピュータ読取り可能な媒体６１４（例えば、ＲＡＭ、ＲＯＭ、ＳＤＲＡＭ、ハードディスク、光ディスク、フラッシュメモリ、ＳＡＮなど）を含むことができる。このような各要素は、一つまたはそれ以上の通信チャネル６１６（例えば、バス）と結合される。一部の実施例において、前記インターフェース６０２は、オーディオ信号または結合されたオーディオ／ビデオ信号を獲得するための多様な回路を含む。例えば、アナログテレビジョンシステムで、インターフェースは、アンテナ装置、チューナーまたはミキサー、ラジオ周波数（ＲＦ）増幅器、局部発振器、ＩＦ（ｉｎｔｅｒｍｅｄｉａｔｅ  ｆｒｅｑｕｅｎｃｙ）増幅器、一つまたはそれ以上のフィルター、復調器、オーディオ増幅器などを含むことができる。これに付加または限定される構成要素を有する実施例を含むシステムの他の実施例が具現可能である。
【００７７】
チューナー１４０２は、ビデオとオーディオコンテンツを含むデジタルテレビジョン信号を受信するデジタルテレビジョンチューナーである。復調器１４０４は、前記デジタルテレビジョン信号からビデオ及びオーディオ信号を抽出する。ビデオとオーディオ信号が符号化された場合（例えば、ＭＰＥＧ符号化）、デコーダー１４０６は、その信号を復号化する。前記オーディオ／ビデオ出力はビデオを出力し、オーディオを再生可能なあらゆる装置（例えば、テレビジョンディスプレイ、コンピュータモニター、ＬＣＤ、スピーカー、オーディオ・システム）でも出力される。
【００７８】
一部の実施例において、ユーザ入力インターフェースは、リモコンから生成された赤外線通信または無線通信信号を受信して復号化する回路及び／またはソフトウェアを含むことができる。
【００７９】
一部の実施例において、前記一つまたはそれ以上のプロセッサーは、図１〜図１３を参照して示すように、形態と機能１４１８，１４２０，１４２２及び１４２６を行うコンピュータ読取り可能な媒体６１４に記憶されているコードを実行することができる。
【００８０】
コンピュータ読取り可能な媒体は、オペレーティングシステム１４１８、分析／合成フィルターバンク１４２０、ダイアログエスティメータ１４２２、分類器１４２４及び自動情報生成器１４２６をさらに含む。用語「コンピュータ読取り可能な媒体」は、不揮発性媒体（例えば、光学または磁気ディスク）、揮発性媒体（例えば、メモリ）及び伝送媒体を含むが、これに限定されることなく、実行のためにプロセッサー１４１２に命令を提供することに関係するあらゆる媒体を意味する。伝送媒体は、同軸ケーブル、銅線及び光ファイバを含むが、これに限定されることはない。伝送媒体は、前記音響、光またはラジオ周波数波長の形態を受信することができる。
【００８１】
オペレーティングシステム１４１８は、マルチユーザ（ｍｕｌｔｉ−ｕｓｅｒ）、マルチプロセッシング、マルチタスキング、マルチスレッディング（ｍｕｌｔｉｔｈｒｅａｄｉｎｇ）、リアルタイムなどが可能である。オペレーティングシステム１４１８は、ユーザ入力インターフェース１４１０からの入力信号認識と、トラック維持、及びコンピュータ読取り可能な媒体１４１４（例えば、メモリまたは記憶装置）でのファイルまたはディレクトリ管理と、周辺装置の制御と、前記一つまたはそれ以上の通信チャネル６１６のトラフィック管理とを含むが、これに限定されることなく、上記のような基本的な機能を行う。
【００８２】
上記のように説明された形態は、少なくとも一つ以上の入力装置と出力装置を有するデータ記憶装置からデータ及び命令を受信し、データ及び命令を伝送する少なくとも一つ以上のプログラマブルプロセッサーを含むプログラミングシステムで実行される一つまたはそれ以上のコンピュータプログラムで有利に行われる。コンピュータプログラムは、特定の行為を行うか、特定の結果をもたらすコンピュータで直接または間接的に使用される命令の集合である。コンピュータプログラムは、コンパイルまたは機械語（ｉｎｔｅｒｐｒｅｔｅｄ  ｌａｎｇｕａｇｅｓ）を含むあらゆるプログラミング言語（例えば、Ｏｂｊｅｃｔｉｖｅ−Ｃ、Ｊａｖａ（登録商標））の形態で書き込まれ、独立プログラムのような形態、モジュール、成分及びサブルーチンの形態、またはコンピュータ環境下でユーザに適した他のユニットを含むあらゆる形態で構成することができる。
【００８３】
前記命令のプログラム遂行のための適正なプロセッサーは、例えば、あらゆる種類のコンピュータの一般的または特別な目的のマイクロプロセッサーのみならず、単独プロセッサー、マルチプルプロセッサーまたはコアを含む。一般的に、プロセッサーは、ＲＯＭ（ｒｅａｄ−ｏｎｌｙ  ｍｅｍｏｒｙ）、ＲＡＭ（ｒａｎｄｏｍ  ａｃｃｅｓｓ  ｍｅｍｏｒｙ）またはこれら二つから命令及びデータを受信する。前記コンピュータの必須の構成要素は、命令を行うプロセッサーと、命令及びデータを保存するための一つまたはそれ以上のメモリである。一般的に、コンピュータは、データファイルを保存するための一つまたはそれ以上の大容量記憶装置を含むか、通信して動作可能に連結される。このような記憶装置は、内部ハードディスクとデータ削除可能なディスクのような磁気ディスク、磁気光ディスク及び光ディスクを含む。コンピュータプログラム命令及びデータを実体的に具体化するのに適した記憶装置は、不揮発性メモリの全ての形態、例えば、ＥＰＲＯＭ、ＥＥＰＲＯＭ、フラッシュメモリ装置のような半導体メモリ装置、内部ハードディスクとリムーバブルディスクのような磁気ディスク、磁気光ディスク及びＣＤ−ＲＯＭ、ＤＶＤ−ＲＯＭディスクを含む。前記プロセッサーとメモリは、ＡＳＩＣＳ（ａｐｐｌｉｃａｔｉｏｎ−ｓｐｅｃｉｆｉｃ  ｉｎｔｅｇｒａｔｅｄ  ｃｉｒｃｕｉｔｓ）によって、またはＡＳＩＣＳと一体化して補強される。
【００８４】
ユーザとのインタラクションを提供するために、前記形態は、ユーザに情報を出力するＣＲＴ（ｃａｔｈｏｄｅ  ｒａｙ  ｔｕｂｅ）またはＬＣＤ（ｌｉｑｕｉｄ  ｃｒｙｓｔａｌ  ｄｉｓｐｌａｙ）モニターのようなディスプレイ装置と、ユーザがコンピュータに命令を入力できるキーボード及びマウスまたはトラックボールのようなポインティング装置が備わったコンピュータで実行される。
【００８５】
各形態は、データサーバーのようなバックエンドコンポーネント（ｂａｃｋ−ｅｎｄ  ｃｏｍｐｏｎｅｎｔ）を含むか、アプリケーションサーバーまたはインターネットサーバーのようなミドルウェアーコンポーネントを含むか、グラフィックユーザインターフェース、インターネットブラウザまたはこれらの結合を備えるクライアントコンピュータのようなフロントエンドコンポーネント（ｆｒｏｎｔ−ｅｎｄ  ｃｏｍｐｏｎｅｎｔ）を含むコンピュータシステムで実行される。前記システムの各構成要素は、通信ネットワークのようなデジタルデータ通信の何らかの形態または媒体と連結される。通信ネットワークとしてはＬＡＮ、ＷＡＮなどを含み、前記コンピュータとネットワークはインターネットを構成する。
【００８６】
前記コンピュータシステムは、クライアントとサーバーを含むことができる。クライアントとサーバーは、一般的に互いに遠く離れており、概してネットワークを通して互いに通信する。前記クライアントとサーバーの関係は、それぞれのコンピュータで動作し、互いにクライアントサーバー関係を有するコンピュータプログラムによって生じる。
【００８７】
以上、多くの実施例が説明されたが、これに限定されず、多様な変形例が可能であることを理解すべきである。例えば、一つまたはそれ以上の実施例を構成する構成要素は、他の実施例を形成するために結合、省略、変形または追加される。他の例として、図面に描写された論理フローは、所望の結果を得るために示された特別な順序や順次的な順序が要求されない。さらに、説明されたフローで他の段階が追加または省略されることもあり、説明されたシステムで他の成分が追加または省略されることもある。したがって、他の実施例も、下記の請求項の権利範囲内に含まれる。
【図１】
2010515290.tif 000010
【図２】
2010515290.tif 000011
【図３】
2010515290.tif 000012
【図４】
2010515290.tif 000013
【図５Ａ】
2010515290.tif 000014
【図５Ｂ】
2010515290.tif 000015
【図５Ｃ】
2010515290.tif 000016
【図６】
2010515290.tif 000017
【図７】
2010515290.tif 000018
【図８】
2010515290.tif 000019
【図９】
2010515290.tif 000020
【図１０】
2010515290.tif 000021
【図１１】
2010515290.tif 000022
【図１２】
2010515290.tif 000023
【図１３】
2010515290.tif 000024
【図１４】
2010515290.tif 000025
【国際調査報告】
2010515290.tif 000026
2010515290.tif 000027