(57)【特許請求の範囲】
【請求項１】
音声信号及び映像信号よりなる複数種類のコンテンツをそれぞれ復号化する複数の復号化手段と、前記各コンテンツの映像信号より映像を表示する表示手段とを有するマルチメディア端末機器において、
前記コンテンツの音声信号より音声を出力する音声出力手段と、
前記複数種類のコンテンツの音声信号より、前記音声出力手段より出力する音声信号を１つ選択する選択手段と、
前記各コンテンツの番組情報に含まれる番組ジャンルに対応して、これらの各コンテンツの音声信号に優先度を与える番組情報判定手段と、を有し、
前記複数の復号化手段で復号化された前記複数種類のコンテンツの映像信号より複数の映像を前記表示手段で同時に表示するとともに、前記選択手段において、前記複数の復号化手段でそれぞれ復号化された前記各コンテンツの音声信号から、前記番組情報判定手段で与えられた優先度が高い音声信号を選択し、前記音声出力手段で音声として出力することを特徴とするマルチメディア端末機器。
【請求項２】
前記番組情報判定手段は、前記コンテンツの番組情報に含まれる番組ジャンルが音楽番組であるとき、そのコンテンツの音声信号に高い優先度を与えることを特徴とする請求項１に記載のマルチメディア端末機器。
【発明の詳細な説明】
【０００１】
【発明の属する技術分野】
本発明は、複数種類のコンテンツを受信するマルチメディア端末機器に関するもので、特に、デジタル放送を受信し、又、インターネットへの接続が可能であるマルチメディア端末機器に関する。
【０００２】
【従来の技術】
近年、デジタル技術が発達し、パーソナルコンピュータなどのマルチメディア端末機器において、受信したデジタル放送などの映像を、そのモニタ上に再生することが可能なマルチメディア端末機器が提案されている。このようなマルチメディア端末機器は、一台で、コンピュータ端末という役割とＡＶ（Audio Visual）機器としての役割とを持ちあわせる。そのため、従来のように、インターネットを行うためのコンピュータ端末と映像放送を受信するためのＡＶ機器とを別々に所有する必要がなくなる。
【０００３】
【発明が解決しようとする課題】
しかしながら、このようなマルチメディア端末機器において、音声を出力するスピーカシステムが１つしかない場合、デジタルテレビ番組やホームページなどの音声信号及び映像信号よりなる複数種類のコンテンツを受信した際、それぞれのコンテンツによる音声を同時に出力することができない。又、このような複数のコンテンツから１つの音声を使用者が、そのコンテンツの番組内容より判断し選択する必要がある。さらに、このスピーカシステムより複数のコンテンツの音声を混合して出力した場合、台詞などの話し言葉が聞き取れないという問題がある。
【０００４】
上記のような問題を鑑みて、本発明は、複数種類のコンテンツを受信するとともに、この複数のコンテンツの音声信号から１つを自動的に選択して出力することが可能なマルチメディア端末機器を提供することを目的とする。
【０００５】
【課題を解決するための手段】
上記の目的を達成するため、請求項１に記載のマルチメディア端末機器は、音声信号及び映像信号よりなる複数種類のコンテンツをそれぞれ復号化する複数の復号化手段と、前記各コンテンツの映像信号より映像を表示する表示手段とを有するマルチメディア端末機器において、前記コンテンツの音声信号より音声を出力する音声出力手段と、前記複数種類のコンテンツの音声信号より、前記音声出力手段より出力する音声信号を１つ選択する選択手段と、
前記各コンテンツの番組情報に含まれる番組ジャンルに対応して、これらの各コンテンツの音声信号に優先度を与える番組情報判定手段と、を有し、
前記複数の復号化手段で復号化された前記複数種類のコンテンツの映像信号より複数の映像を前記表示手段で同時に表示するとともに、前記選択手段において、前記複数の復号化手段でそれぞれ復号化された前記各コンテンツの音声信号から、前記番組情報判定手段で与えられた優先度が高い音声信号を選択し、前記音声出力手段で音声として出力することを特徴とする。
【０００６】
このような構成のマルチメディア端末機器において、複数の復号化手段で復号される複数種類のコンテンツが同時に処理される際に、番組情報判定手段において、前記コンテンツの番組情報に含まれる番組ジャンルに応じて、そのコンテンツの音声信号に優先度を与え、選択手段において、前記複数の復号化手段でそれぞれ復号化された前記各コンテンツの音声信号から前記番組情報判定手段で与えられた優先度の高い音声信号を選択して音声出力手段から出力することができる。
【０００７】
又、請求項２に記載するように、番組情報判定手段が、前記コンテンツの番組情報に含まれる番組ジャンルが音楽番組であると判断するとき、そのコンテンツの音声信号に高い優先度を与えるようにすることによって、前記選択手段において、前記複数の復号化手段でそれぞれ復号化された前記各コンテンツの音声信号から番組ジャンルが音楽番組であるコンテンツの音声信号を選択して音声出力手段から出力することができる。
【００１４】
【発明の実施の形態】
本発明の実施形態について、図面を参照して説明する。図１は、本発明のマルチメディア端末機器の内部構造を示すブロック図である。又、図２は、図１のマルチメディア端末機器の動作を示すフローチャートである。
【００１５】
図１に示すマルチメディア端末機器１は、デジタル放送信号を受信するアンテナ２と、アンテナ２から送信される放送信号を復調するとともにこの放送信号を多重分離してユーザーが選択したチャンネルのコンテンツやＥＰＧ（Electronic Program Guide）情報を獲得するチューナ３と、インターネットなどのネットワーク４を介してユーザーの選択したホームページなどのコンテンツを獲得するネットワーク制御手段５とを備えている。
【００１６】
又、マルチメディア端末機器１は、チューナ３で獲得したコンテンツより映像信号と音声信号を復号する復号手段６と、ネットワーク制御手段５で獲得したコンテンツより映像信号と音声信号を復号する復号手段７と、復号手段６，７で復号された映像信号に基づいて映像を表示する表示装置８とを有する。この表示装置８において、各コンテンツを表示するためのウィンドウが開かれ、そのウィンドウ上に各コンテンツの映像を表示することによって、同時に表示をすることができる。
【００１７】
又、マルチメディア端末機器１は、復号手段６，７で復号された音声信号のうち一方の音声信号を音声を再生するためのスピーカ１１に送出するとともに他方の音声信号を音声を文字に変換する音声／文字変換手段１０に送出する音声信号選択手段９と、音声信号を文字信号に変換したテキストファイルを作成するとともにこのテキストファイルを表示装置８に与える音声／文字変換手段１０と、スピーカ１１とを備える。更に、音声信号選択手段９を制御するための制御信号を与える番組ジャンル取得手段１２、音声性質分析手段１３、及びユーザー指示取得手段１４と、ユーザーがマルチメディア端末機器１を操作するためのキーボードやマウスのような入力手段１５とが設けられる。
【００１８】
この番組ジャンル取得手段１２は、チューナ３で得たＥＰＧ情報やネットワーク制御手段５で獲得した番組ガイドサイトよりユーザーの選択したチャンネルのコンテンツの番組ジャンルを取得し、各番組ジャンルの優先度とともに記憶する。又、音声性質分析手段１３は、復号手段６，７で復号した音声信号において、その音声信号に無音部分となる低いレベルの信号が多く含まれているか否かが判断され、この無音部分が多い音声信号は話言葉的な音声信号と判断し、その優先度を下げる。逆に、この無音部分となる途切れが少ない音声信号は音楽的な音声信号と判断して優先度を上げる。更に、ユーザー指示取得手段１４では、ユーザーによって入力手段１５で入力された各コンテンツの出力形式が記憶される。
【００１９】
即ち、番組ジャンル取得手段１２、音声性質分析手段１３、及びユーザー指示取得手段１４において、以下のように、各コンテンツの音声信号の優先度及び出力形式が決定する。番組ジャンルによる優先度が、例えば、図３のように、音楽番組は”３”、バラエティ番組及びドラマは”２”、スポーツ及び天気予報は”１”、ニュースは”０”として、番組ジャンル取得手段１２に記憶される。
【００２０】
尚、この優先度は、数字が大きい番組ジャンルほど、スピーカ１１に優先的に出力されるものである。又、番組ジャンル取得手段１２は、定期的にアンテナ２より受信したＥＰＧ情報やネットワーク４を介して番組ガイドサイトに接続して獲得した番組情報を記憶することによって、各コンテンツの番組ジャンルを予め記憶する。又、ネットワーク４を介して受信したコンテンツに付随した番組情報となるデータ信号よりその番組ジャンルを識別することができる。
【００２１】
又、音声性質分析手段１３では、復号手段６，７から送出される音声信号のレベルが閾値レベルより低い音声信号の割合が計測され、この閾値レベルの低いレベルの音声信号の割合が多いとき、無音部分が多いと判断し、話言葉的音声信号として、この音声信号の優先度を下げる。又、逆に、閾値レベルの低いレベルの音声信号の割合が少ない音声信号は、途切れが少ないと判断し、音楽的音声信号として、この音声信号の優先度を上げる。更に、ユーザーが入力キーなどの入力手段１５を操作することによって、図４のように、例えば、コンテンツＡは“スピーカ出力”、コンテンツＢは“テキスト出力”、コンテンツＣは“自動”として、各コンテンツの出力形式がユーザー指示取得手段１４に記憶される。
【００２２】
以下に、図２のフローチャートを参照して、マルチメディア端末機器１の動作について説明する。今、ネットワーク制御手段５によってネットワーク４から受信したコンテンツａの映像を表示装置８のウィンドウに表示するとともに、音声がスピーカ１１から出力されているときに、アンテナ２を介してチューナ３によってデジタル放送のコンテンツｂを受信を開始したものとする（ＳＴＥＰ１）。まず、ユーザー指示取得手段１４によって、コンテンツａの出力形式が判断される（ＳＴＥＰ２及びＳＴＥＰ３）。このとき、コンテンツａの出力形式が“自動”でない（Ｎｏ）ときはＳＴＥＰ３に移行し、又、コンテンツａの出力形式が“自動”（Ｙｅｓ）のときはＳＴＥＰ４に移行する（ＳＴＥＰ２）。
【００２３】
ＳＴＥＰ３では、コンテンツａの出力形式が、“スピーカ出力”か否かが判別される。このとき、コンテンツａの出力形式が“スピーカ出力”（Ｙｅｓ）のときは、ＳＴＥＰ９でコンテンツａをスピーカ１１より出力するとともに、コンテンツｂを音声／文字変換手段１０で文字変換してテキストファイルとし、このテキストファイルに基づいて表示装置８にその文字列を表示する。又、コンテンツａの出力形式が“テキスト出力”（Ｎｏ）のときは逆に、ＳＴＥＰ１０でコンテンツｂをスピーカ１１より出力するとともに、コンテンツａを音声／文字変換手段１０で文字変換してテキストファイルとし、このテキストファイルに基づいて表示装置８にその文字列を表示する。
【００２４】
次に、ユーザー指示取得手段１４によって、コンテンツｂの出力形式が判断される（ＳＴＥＰ４及びＳＴＥＰ５）。このとき、コンテンツｂの出力形式が“自動”でない（Ｎｏ）ときはＳＴＥＰ５に移行し、又、コンテンツｂの出力形式が“自動”（Ｙｅｓ）の時はＳＴＥＰ６に移行する（ＳＴＥＰ４）。
【００２５】
ＳＴＥＰ５では、コンテンツｂの出力形式が、“スピーカ出力”か否かが判別される。このとき、コンテンツｂの出力形式が“スピーカ出力”（Ｙｅｓ）のときは、ＳＴＥＰ１０でコンテンツｂをスピーカ１１より出力するとともに、コンテンツａを音声／文字変換手段１０で文字変換してテキストファイルとし、このテキストファイルに基づいて表示装置８にその文字列を表示する。又、コンテンツｂの出力形式が“テキスト出力”（Ｎｏ）のときは逆に、ＳＴＥＰ９でコンテンツａをスピーカ１１より出力するとともに、コンテンツｂを音声／文字変換手段１０で文字変換してテキストファイルとし、このテキストファイルに基づいて表示装置８にその文字列を表示する。
【００２６】
ＳＴＥＰ６では、番組ジャンル取得手段１２によって、予め記憶したＥＰＧ情報からコンテンツｂの番組ジャンルを判別するとともに、予め記憶した番組ガイドサイトの番組情報又はコンテンツａに付随したデータ信号からコンテンツａの番組ジャンルを判別する。そして、このコンテンツａ，ｂの番組ジャンルより、予め記憶した番組ジャンルの優先度を照合して、コンテンツａ，ｂの優先度を比較し、等しくない（Ｎｏ）ときはＳＴＥＰ７へ移行し、等しい（Ｙｅｓ）ときはＳＴＥＰ８に移行する。
【００２７】
ＳＴＥＰ７では、番組ジャンル取得手段１２で得たコンテンツａ，ｂの番組ジャンルによる優先度が比較され、コンテンツａの優先度が高い（Ｙｅｓ）とき、ＳＴＥＰ９でコンテンツａをスピーカ１１より出力するとともに、コンテンツｂを音声／文字変換手段１０で文字変換してテキストファイルとし、このテキストファイルに基づいて表示装置８にその文字列を表示する。又、コンテンツｂの優先度が高い（Ｎｏ）ときは逆に、ＳＴＥＰ１０でコンテンツｂをスピーカ１１より出力するとともに、コンテンツａを音声／文字変換手段１０で文字変換してテキストファイルとし、このテキストファイルに基づいて表示装置８にその文字列を表示する。
【００２８】
ＳＴＥＰ８では、音声性質分析手段１３で判定したコンテンツａ，ｂの音声信号の性質より得た優先度が比較され、コンテンツａの優先度が高い、即ち、コンテンツａの無音部分の比率が少ない（Ｙｅｓ）とき、ＳＴＥＰ９でコンテンツａをスピーカ１１より出力するとともに、コンテンツｂを音声／文字変換手段１０で文字変換してテキストファイルとし、このテキストファイルに基づいて表示装置８にその文字列を表示する。又、コンテンツｂの優先度が高い、即ち、コンテンツｂの無音部分の比率が少ない（Ｎｏ）ときは逆に、ＳＴＥＰ１０でコンテンツｂをスピーカ１１より出力するとともに、コンテンツａを音声／文字変換手段１０で文字変換してテキストファイルとし、このテキストファイルに基づいて表示装置８にその文字列を表示する。
【００２９】
ところで、図２のフローチャートにおいて、ＳＴＥＰ１で、アンテナ２を介してチューナによってデジタル放送のコンテンツｂを新たに受信を開始したものとしたが、この場合に限られるものでなく、コンテンツｂの映像及び音声を表示装置８及びスピーカ１１より出力している際に、コンテンツａを受信したときも上記と同様の動作を行う。又、コンテンツａ，ｂの番組ジャンルを獲得することができない場合には、ＳＴＥＰ６からＳＴＥＰ８に移行して、それぞれの音声の部分の比率による優先度より選択されるようにしても構わない。
【００３０】
更に、請求の範囲における無音部比率判定手段及び番組情報判定手段は、それぞれ、本実施形態における音声性質分析手段及び番組ジャンル取得手段に相当する。又、請求の範囲における操作手段は、本実施形態における入力手段及びユーザー指示取得手段に相当する。
【００３１】
尚、本実施形態のマルチメディア端末機器は、復号手段で復号された音声信号を用いて、その信号の信号レベルを検知したが、チューナ又はネットワーク制御手段から送出される信号のうち音声データフレーム内のスケールファクタなどよりその音声データの信号レベルの情報を獲得することによって、各コンテンツの音声信号の性質を音声性質分析手段で判定しても構わない。
【００３２】
又、本実施形態のマルチメディア端末機器は、入力手段によってユーザーが各コンテンツの出力形式を決定し、この指示された各コンテンツの出力形式をユーザー指示取得手段に記憶するようにしたが、例えば、ユーザーがマウスなどの入力手段によって、表示装置上の各コンテンツの映像を表示しているウィンドウを指示し、そして、その出力形式を入力することによって、現在処理されているコンテンツのうち１つのコンテンツの音声信号を選択してスピーカより出力するようにしても構わない。更に、このとき、自動的に、入力手段で指示されていない他のコンテンツの音声信号を上記したように、音声／文字変換手段で変換して、文字列として表示装置に表示するようにできるようにしても構わない。
【００３３】
又、本実施形態において、コンテンツをデジタル放送やインターネットなどから受信したコンテンツとしたが、このようなネットワークを介して受信して得られるコンテンツに限らず、例えば、磁気ディスクや光ディスクなどの記録媒体を再生することによって得ることのできるコンテンツでも構わない。このような記録媒体から得られるコンテンツは、その記録媒体に記録されたデータから音楽的なコンテンツか映画などが記録された台詞などの多い話言葉的な音声信号を持つコンテンツかを番組ジャンル取得手段で判断することができる。又、音声性質分析手段によっても、このコンテンツの音声信号の信号レベルを調べることで、この音声信号が音楽的なものか話言葉的なものか判定することができる。
【００３４】
更に、本実施形態のマルチメディア端末機器は、番組ジャンル取得手段、音声性質分析手段、及びユーザー指示取得手段の３つの手段を有したものとしたが、このようなマルチメディア端末機器に限定されるものでなく、番組ジャンル取得手段、音声性質分析手段、及びユーザー指示取得手段のうちいずれか１つの手段しか有していないようなマルチメディア端末機器でも構わない。又、番組ジャンル取得手段、音声性質分析手段、及びユーザー指示取得手段のうちいずれか２つの手段を有するようなマルチメディア端末機器としても構わない。
【００３５】
【発明の効果】
本発明のマルチメディア端末機器によると、映像信号及び音声信号よりなる複数のコンテンツを処理する際に、復号した音声信号を１つ選択して音声出力手段より出力するので、音声出力手段を複数必要としない。又、復号したコンテンツの数に応じた音声出力手段を有していなくても、その音声信号を混合して出力することなく有効に出力することができる。更に、選択手段で選択されない音声信号を文字信号に変換した後、文字列として表示手段に表示することができるので、音声出力手段より出力されなかった音声信号を使用者が表示手段の文字列より読みとって理解することができる。
【００３６】
又、無音部比率判定手段や番組情報判定手段を設けることによって、音楽的音声の多いコンテンツと話言葉的音声の多いコンテンツとを処理している際、自動的に、文字列として表現するのが困難な音楽的音声の多いコンテンツの音声信号を音声出力手段により出力するとともに、話言葉的音声の多いコンテンツの音声信号を文字列として表示手段に表示することができる。よって、使用者が、各コンテンツの音声信号を選択することから解放され、コンテンツの視聴に集中することができる。
【図面の簡単な説明】
【図１】本発明のマルチメディア端末機器の内部構造を示すブロック図。
【図２】図１のマルチメディア端末機器の動作を示すフローチャート。
【図３】番組ジャンルによる優先度の１例。
【図４】ユーザー指示による出力形式の１例。
【符号の説明】
１    マルチメディア端末機器
２    アンテナ
３    チューナ
４    ネットワーク
５    ネットワーク制御手段
６，７    復号手段
８    表示装置
９    音声信号選択手段
１０    音声／文字変換手段
１１    スピーカ
１２    番組ジャンル取得手段
１３    音声性質分析手段
１４    ユーザー指示取得手段
１５    入力手段
【図１】
0003825589.tif 000002
【図２】
0003825589.tif 000003
【図３】
0003825589.tif 000004
【図４】
0003825589.tif 000005