(57)【要約】【課題】臨場感をもって表示内容を楽しむことができる表示装置、表示制御方法、及び、表示制御プログラムを提供する。【解決手段】制御部３３０は、入力される放送信号に字幕情報が含まれると判別した場合（ステップＳ１０１；Ｙｅｓ）、ユーザメモリ３５０のキーワードテーブル３５０１、３５０２を参照し（ステップＳ１０３）、キーワードが含まれると判別すると、ＰＥＳヘッダ１０４に設定される同期情報に合わせて振動させる（ステップＳ１０５）。【選択図】図５
2008016882.tif 000002
【特許請求の範囲】
【請求項１】
表示情報を入力する入力手段と、
この入力手段によって入力された表示情報を表示する表示手段と、
前記表示情報が前記表示手段に表示されるタイミングを検出する第１の検出手段と、
この第１の検出手段によって検出されたタイミングに基づいて、振動する振動手段と
を備えることを特徴とする表示装置。
【請求項２】
前記表示情報には文字情報が含まれると共にキーワードを記憶するキーワード記憶手段をさらに備え、
前記振動手段は、前記表示手段に表示情報が表示されるタイミングで、前記キーワード記憶手段に記憶されたキーワードが当該表示情報に含まれているときに、前記表示情報の表示に同期して振動することを特徴とする請求項１記載の表示装置。
【請求項３】
前記入力手段は、前記表示情報に同期する音声情報を入力し、
この音声情報に含まれる音声の出力パワーを検出する第２の検出手段と、
この第２の検出手段によって検出された出力パワーの度合いを計測する計測手段とをさらに備え、
前記振動手段は、前記表示手段に表示情報が表示されるタイミングで、前記計測手段により計測した出力パワーに基づいて振動することを特徴とする請求項１記載の表示装置。
【請求項４】
前記入力手段は外部から放送を受信する放送受信手段を含むことを特徴とする請求項１乃至３のいずれかに記載の表示装置。
【請求項５】
表示情報を入力する入力ステップと、
この入力ステップにて入力された表示情報を表示する表示ステップと、
前記表示情報が表示されるタイミングを検出する検出ステップと、
この検出ステップにて検出されたタイミングに基づいて、振動する振動ステップと
からなることを特徴とする表示制御方法。
【請求項６】
コンピュータを、
表示情報を入力する入力手段、
この入力手段によって入力された表示情報を表示する表示手段、
前記表示情報が前記表示手段に表示されるタイミングを検出する第１の検出手段、
この第１の検出手段によって検出されたタイミングに基づいて、振動する振動手段
として機能させることを特徴とする表示制御プログラム。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、放送等により受信・入力された情報を表示する表示装置、表示制御方法、及び、表示制御プログラムに関する。
【背景技術】
【０００２】
近年、家庭用テレビや携帯端末で地上波デジタル放送が視聴可能となってきている。例えば、特許文献１には、地上波デジタル放送が受信できる携帯型デジタルテレビが開示されている。
【０００３】
この特許文献１では、放送信号の受信状態、例えば、電波の受信状態が悪く、音声が出力できない場合は字幕表示に切り換えるなどして、ユーザの視聴をよりよくするようにしている。
【０００４】
しかしながら、受信状態の良し悪しに関わらず字幕表示を有効にするよう設定されている状態であっては、ユーザは字幕を追いながら映像を観るという状態を取らなければならない。この際、家庭内に設置される大型の表示画面を備えた受像機であれば、字幕の文字情報も大きく、これを追いながらの映像再生、音声再生も苦にはならないが、携帯電話等、小型の表示画面で視聴する場合には、時として字幕を読むことに集中しがちであり、映像再生、音声再生について十分に視聴を楽しむということが困難であった。
【特許文献１】特開２００６−５００１３号公報（第８頁、図４参照）
【発明の開示】
【発明が解決しようとする課題】
【０００５】
本発明は、上記問題点に鑑みてなされたもので、臨場感をもって表示内容を楽しむことができる表示装置、表示制御方法、及び、表示制御プログラムを提供することを目的とする。
【課題を解決するための手段】
【０００６】
上記目的を達成するため、本発明の第１の観点に係る請求項１記載の表示装置は、
表示情報を入力する入力手段と、
この入力手段によって入力された表示情報を表示する表示手段と、
前記表示情報が前記表示手段に表示されるタイミングを検出する第１の検出手段と、
この第１の検出手段によって検出されたタイミングに基づいて、振動する振動手段と
を備えることを特徴とする。
【０００７】
また、請求項２記載の発明は、請求項１記載の発明において、
前記表示情報には文字情報が含まれると共にキーワードを記憶するキーワード記憶手段をさらに備え、
前記振動手段は、前記表示手段に表示情報が表示されるタイミングで、前記キーワード記憶手段に記憶されたキーワードが当該表示情報に含まれているときに、前記表示情報の表示に同期して振動することを特徴とする。
【０００８】
また、請求項３記載の発明は、請求項１記載の発明において、
前記入力手段は、前記表示情報に同期する音声情報を入力し、
この音声情報に含まれる音声の出力パワーを検出する第２の検出手段と、
この第２の検出手段によって検出された出力パワーの度合いを計測する計測手段とをさらに備え、
前記振動手段は、前記表示手段に表示情報が表示されるタイミングで、前記計測手段により計測した出力パワーに基づいて振動することを特徴とする。
【０００９】
また、請求項４記載の発明は、請求項１乃至３のいずれかに記載の発明において、
前記入力手段は外部から放送を受信する放送受信手段を含むことを特徴とする。
【００１０】
本発明の第２の観点に係る請求項５記載の表示制御方法は、
表示情報を入力する入力ステップと、
この入力ステップにて入力された表示情報を表示する表示ステップと、
前記表示情報が表示されるタイミングを検出する検出ステップと、
この検出ステップにて検出されたタイミングに基づいて、振動する振動ステップと
からなることを特徴とする。
【００１１】
本発明の第３の観点に係る請求項６記載の表示制御プログラムは、
コンピュータを、
表示情報を入力する入力手段、
この入力手段によって入力された表示情報を表示する表示手段、
前記表示情報が前記表示手段に表示されるタイミングを検出する第１の検出手段、
この第１の検出手段によって検出されたタイミングに基づいて、振動する振動手段
として機能させることを特徴とする。
【発明の効果】
【００１２】
本発明によれば、文字情報を含む表示情報が入力されると、この入力された表示情報を表示する。そして、この表示情報が表示されるタイミングを検出し、この検出されたタイミングに基づいて振動する。したがって、臨場感をもって表示内容を楽しむことができる。
【発明を実施するための最良の形態】
【００１３】
（実施形態１）
本発明の実施形態について説明する。
まず、地上波デジタル放送システムにて採用されるＭＰＥＧ−２  ＴＳ（Moving Picture Experts Group-2 Transport Stream）のＴＳパケットセクションの構造について図１を用いて説明する。１００はＭＰＥＧ−２方式により圧縮符号化されたトランスポートストリーム（以下ＴＳと称す。）であり、このＴＳ１００には、トランスポートストリームパケット（以下ＴＳＰと称す。）１０１、１０１、１０１が連続して設定される。ＴＳＰ１０１は、ＴＳヘッダ１０２とＴＳペイロード１０３とからなり、更に、ＴＳペイロード１０３は、ＰＥＳ（Packetized Elementary Stream）ヘッダ１０４と、ＥＳ（Elementary Stream）１０５とで構成され、ＰＥＳヘッダ１０４には、ＥＳ１０５に設定される、オーディオフレーム、ビデオフレーム、データフレーム（字幕等の文字情報）の再生出力に関する同期情報が設定されている。
【００１４】
すなわち、このようなデータストリームを受信することにより、オーディオフレームに設定された音声情報、ビデオフレームに設定された映像情報、及び、データフレームに設定された字幕等の文字情報を再生する場合は、それぞれのデータフレームとともに設定されたＰＥＳヘッダ１０４に含まれる同期情報に基づいて、夫々の情報が遅延無く、最適なタイミングで同期されて再生出力される。
【００１５】
次に、本発明の実施形態に係る表示装置を備える無線通信端末３００について、図面を参照して説明する。無線通信端末３００は、携帯電話であってもよいし、ＰＨＳ（Personal Handyphone System）であってもよいが、図１で説明した地上波デジタル放送システムにて採用されるＭＰＥＧ−２  ＴＳ１００を受信・記憶し、再生出力する機能を備えるものとする。
【００１６】
図２は、実施形態１の無線通信端末３００の機能ブロック図である。
無線通信端末３００は、図２に示すように、通信処理部３１０、表示部３２０、制御部３３０、プログラムメモリ３４０、ユーザメモリ３５０、操作部３６０、振動部３７０、音声処理部３８０、放送受信部３９０、復号処理部４００、再生処理部４１０、などから構成される。
【００１７】
通信処理部３１０は、アンテナ３１１を介して通信網から音声信号を受信する。そして、受信した音声信号を後述する音声処理部３８０に送出する。また、通信処理部３１０は、音声処理部３８０から受信した音声信号を、アンテナ３１１を介して通信網へ送信する。さらに、通信処理部３１０は、データ通信機能にかかる通信を制御し、例えば、ウェブサイトへのアクセスや電子メールの送受信をおこなう。
【００１８】
表示部３２０は、制御部３３０の制御のもと、操作画面などの各種画面を表示するとともに、デジタルテレビ放送を受信することによる、映像情報や文字情報を再生表示する。
【００１９】
制御部３３０は、ＣＰＵ（Central Processing Unit）やＲＡＭ（Random Access Memory）などから構成され、無線通信端末３００の各部の動作を制御する。制御部３３０は、プログラムメモリ３４０に格納されているプログラムに基づき、各処理を実行する。なお、無線通信端末３００の各構成はそれぞれ制御部３３０と接続されており、各構成間でのデータ送受は制御部３３０を介しておこなわれるものとする。
【００２０】
プログラムメモリ３４０は、制御部３３０が実行するプログラムを格納する。プログラムメモリ３４０には、無線通信端末３００全体の動作を制御するための基本ソフトウェア（いわゆる、ＯＳなど）や、デジタルテレビ放送用のソフトウェアのほか、種々の機能を実現するためのアプリケーションソフトウェアなどが格納される。
【００２１】
デジタルテレビ放送受信用のソフトウェアは、無線通信端末３００をデジタルテレビ放送の再生装置（表示装置）として機能させるためのソフトウェアである。当該ソフトウェアが制御部３３０にロードされると、放送受信部３９０にてチューニングされた周波数帯でアンテナ３９１によって受信されたＭＰＥＧ−２  ＴＳ１００を復号処理部４００にてパケット分離、復号化処理を施し、再生処理部４１０で、映像情報、字幕等のデータ情報を表示部３２０に再生表示させると共に、音声情報をスピーカ４１１から再生出力させる。
【００２２】
ユーザメモリ３５０は、主にユーザが入力するデータを記憶する。ユーザメモリ３５０は、アドレス帳データ、メールデータ、及び、後述するキーワードテーブル３５０１、若しくは、３５０２を備える。
【００２３】
キーワードテーブル３５０１は、図３（ａ）に示すような、所定の言語をキーワードとして格納するテーブルである。キーワードとしては、「うれしい」「やったー」「コラー」など感情を表す言語が用いられる。ユーザは後述する操作部３６０の所定の操作により、任意のキーワードを設定することができる。
【００２４】
したがって、制御部３３０は、放送を受信し、音声情報の出力がキャンセル設定された状態で再生出力する時、受信したＥＳ１０５においてデータストリームに字幕データ（文字情報）が含まれていると、この文字情報に、上記キーワードテーブル３５０１にて設定したキーワードが含まれるか否かを判断する。そして、キーワードが含まれていると判断されると、このキーワードが含まれる文字情報（データフレーム）が設定されるＥＳ１０５に設定されたＰＥＳヘッダ１０４の同期情報に基づいて、振動部３７０を制御して、図４に示すように無線通信端末３００を振動させる。したがってユーザは、字幕を追うことを意識して視聴していても、この字幕に含まれるキーワードによって、音声情報の再生タイミングを逸することなく、臨場感のある視聴を楽しむことができる。
なお、キーワードテーブル３５０２に図３（ｂ）に示すように、キーワードの意味に応じて、振動時間（例えば、長い、短いなど）と振動パターン（穏やか、徐々に強く、激しくなど）とを対応付けて格納させると、キーワードの意味に応じた振動を行うことができ、これにより、音声情報の再生タイミングを逸することなく、より臨場感を高めることができる。
【００２５】
操作部３６０は、無線通信端末３００の外面上に構成されたキーからユーザの操作を受け付ける。操作部３６０は、ユーザの操作に応じた入力信号を制御部３３０に送出する。
【００２６】
振動部３７０は、制御部３３０の制御のもと、無線通信端末３００を振動させる。また、デジタルテレビ放送の視聴にあっては、キーワードの再生出力に同期して、振動する。
【００２７】
音声処理部３８０は、制御部３３０の制御のもと、通信処理部３１０からデジタル音声信号の入力を受け、アナログ音声に復号してスピーカ３８１により出力する。
また、音声処理部３８０は、マイクロフォン３８２から入力された音声をデジタル音声信号に符号化する。そして、符号化したデジタル音声信号を制御部３３０の制御のもと、通信処理部３１０に送出する。
【００２８】
放送受信部３９０は、ユーザによる操作部３６０の選局操作に基づいて取得する周波数帯が制御され、アンテナ３９１を介してデジタルテレビ放送の放送信号を受信する。
【００２９】
復号処理部４００は、放送受信部３９０が受信した放送信号を復号する。復号した放送信号は、制御部３３０を介して再生処理部４１０に送出される。
また、字幕情報等の文字情報も制御部３３０及び再生処理部４１０に送出される。
【００３０】
再生処理部４１０は、復号処理部４００が復号した放送信号を入力する。そして、制御部３３０の制御のもと、入力された映像情報と字幕情報を表示部３２０に再生出力する。また、入力された音声をスピーカ４１１に出力する。所定のイヤホン端子にイヤホンが接続されている場合は、イヤホンに出力する。無線通信端末３００がマナーモードや出力音量ゼロであるなど、音声を出力しない設定である場合は、再生処理部４１０は、音声情報を出力しない。
字幕の表示、非表示は、ユーザが操作部３６０の所定の操作により設定可能である。再生処理部４１０は、字幕を非表示の設定である場合、字幕を表示部３２０に出力しない。
【００３１】
次に、上記構成の無線通信端末３００でデジタルテレビ放送視聴中の動作について説明する。制御部３３０は、受信される図１にて図示されるＴＳペイロード１０３のＥＳ１０５に字幕情報が含まれる場合、この字幕情報にキーワードテーブル３５０１、３５０２に設定されているキーワードが含まれるか否か判別する。そして、字幕情報にキーワードが含まれる場合、振動により視聴者に報知する。
【００３２】
図５は、その動作を実行するフローチャートである。
制御部３３０は、デジタルテレビ放送視聴モードにおいて、復号処理部４００から送出される放送信号を入力し、これを再生処理部４１０に送出するとともに、定期的にこの放送信号のＥＳ１０５において字幕情報が設定されているか否かを判別する。
【００３３】
先ず、制御部３３０は、復号処理部４００より入力される放送信号に字幕情報が含まれるか否かを判別する（ステップＳ１０１）。
【００３４】
放送信号に字幕情報が含まれない場合（ステップＳ１０１；Ｎｏ）、振動は行わず、映像情報を表示部３２０に再生表示させつつ、音声情報をスピーカ４１１を介して出力する（ステップＳ１０２）。
【００３５】
ステップＳ１０１で放送信号に字幕情報が含まれると判別した場合（ステップＳ１０１；Ｙｅｓ）、ユーザメモリ３５０のキーワードテーブル３５０１、３５０２を参照して、字幕情報にキーワードが含まれるか否かを判別する（ステップＳ１０３）。
【００３６】
キーワードが含まれない場合（ステップＳ１０３；Ｎｏ）、振動は行わず、映像情報、字幕情報を表示部３２０に再生表示させつつ、音声情報をスピーカ４１１を介して出力する（ステップＳ１０４）。
【００３７】
ステップＳ１０３で字幕情報にキーワードが含まれると判別した場合（ステップＳ１０３；Ｙｅｓ）、制御部３３０は振動部３７０を制御し、ＰＥＳヘッダ１０４に設定される同期情報に合わせて振動させる（ステップＳ１０５）。尚、振動時間の長さについては、キーワードテーブルとして、図３（ｂ）に示すテーブルを用いる場合、該テーブルに格納される時間の長さで振動させる。
【００３８】
以上のように、本実施形態によれば、デジタルテレビ放送の放送信号に字幕情報が含まれ、その字幕情報に所定のキーワードが含まれる場合、この字幕情報が含まれるＥＳ１０５に設定されたＰＥＳヘッダ１０４の同期情報に合わせて無線通信端末３００が振動する。これによってユーザは音声情報の再生タイミングを逸することなく、臨場感のある視聴を楽しむことができる。
【００３９】
続いて、変形例を図６に示す。図６は、上記構成の無線通信端末３００でデジタルテレビ放送視聴中の動作において、例えばマナーモード等、音声出力が規制されている状態でのフローチャートを示すものである。
【００４０】
制御部３３０は、デジタルテレビ放送視聴モードにおいて、復号処理部４００から送出される放送信号を入力し、これを再生処理部４１０に送出するとともに、定期的にこの放送信号のＥＳ１０５において字幕情報が設定されているか否かを判別する（ステップＳ２０１）。
【００４１】
放送信号に字幕情報が含まれない場合（ステップＳ２０１；Ｎｏ）、マナーモード設定等、音声出力が規制された状態か否かを判断する（ステップＳ２０２）。音声出力が規制された状態であれば（ステップＳ２０２；Ｙｅｓ）、映像情報のみを表示部３２０に再生表示する（ステップＳ２０３）。一方、音声出力が規制された状態でない場合（ステップＳ２０２；Ｎｏ）、映像情報を表示部３２０に再生表示し、音声情報をスピーカ４１１を介して出力する（ステップＳ２０４）。
【００４２】
ステップＳ２０１で放送信号に字幕情報が含まれると判別した場合（ステップＳ２０１；Ｙｅｓ）、マナーモード設定等、音声出力が規制された状態か否かを判断する（ステップＳ２０５）。音声出力が規制された状態であれば（ステップＳ２０５；Ｙｅｓ）、ステップＳ２０７に進み、一方、音声出力が規制された状態でない場合（ステップＳ２０５；Ｎｏ）、映像情報、字幕情報を表示部３２０に再生表示し、音声情報をスピーカ４１１を介して出力する（ステップＳ２０６）。
【００４３】
音声出力が規制された状態である場合（ステップＳ２０５；Ｙｅｓ）、ユーザメモリ３５０のキーワードテーブル３５０１、３５０２を参照して、字幕情報にキーワードが含まれるか否かを判別する（ステップＳ２０７）。
【００４４】
キーワードが含まれない場合（ステップＳ２０７；Ｎｏ）、振動は行わず、映像情報、字幕情報を表示部３２０に再生表示させる（ステップＳ２０８）。
【００４５】
ステップＳ２０７で字幕情報にキーワードが含まれると判別した場合（ステップＳ２０７；Ｙｅｓ）、制御部３３０は映像情報、字幕情報を表示部３２０に再生表示させるとともに振動部３７０を制御し、ＰＥＳヘッダ１０４に設定される同期情報に合わせて振動させる（ステップＳ２０９）。
【００４６】
したがってこの変形例によれば、音声情報を出力する場合は振動しないので省電力が図れる。また、無音状態であっても音声情報の再生タイミング知ることができ、臨場感のある視聴を楽しむことができる。
【００４７】
（実施形態２）
次に、実施形態２について説明する。
実施形態２では、字幕情報にキーワードが含まれるか否かではなく、音声情報に含まれる再生出力時の出力パワーに基づいて、振動を行うようにするものである。
上記のデジタルテレビ放送では、音声情報はＭＰＥＧ−２ＡＡＣ（Advanced Audio Coding）方式やＡＡＣ＋ＳＢＲ（Spectral Bandwidth Replication）方式で符号化されることが知られている。
したがって、図２に示す復号処理部４００は、図７（ａ）に示すように音声復号部４０１を備え、これらの方式で符号化された音声信号を音声復号部４０１で復号して制御部３３０に出力する。実施形態２では、このときの音圧レベル（出力パワー）を抽出して制御部３３０に出力する。
【００４８】
ここで、ＡＡＣ＋ＳＢＲ方式で符号化された音声を復号し、音圧レベルを抽出する動作について説明する。
【００４９】
図７（ｂ）に示すように、ＡＡＣ＋ＳＢＲ方式で符号化された音声を復号するときの音声復号部４０１は、分離部４２０と、ＡＡＣデコーダ４３０と、ＳＢＲデコーダ４４０と、から構成される。
【００５０】
まず、分離部４２０が、入力されたＡＡＣ＋ＳＢＲ方式で符号化された音声を
ＡＡＣ符号化信号とＳＢＲ符号化信号とに分離する。
分離部４２０は、ＡＡＣ符号化信号をＡＡＣデコーダ４３０に入力し、ＳＢＲ符号化信号をＳＢＲデコーダ４４０に入力する。
【００５１】
ＡＡＣデコーダ４３０は、入力されたＡＡＣ符号化信号を復号する。復号したＡＡＣ復号信号をＳＢＲデコーダ４４０に入力する。
【００５２】
ＳＢＲデコーダ４４０は、さらに、３２サブバンド分析フィルタ４４１と、符号分離部４４２と、高域サブバンド信号生成部４４３と、ゲイン算出調整部４４４と、加算部４４５と、６４サブバンド合成フィルタ４４６と、から構成される。
【００５３】
３２サブバンド分析フィルタ４４１は、ＡＡＣデコーダ４３０から入力されたＡＡＣ復号信号を低域の３２バンドのサブバンド信号に変換する。変換した低域の３２バンドのサブバンド信号を高域サブバンド信号生成部４４３及び加算部４４５に入力する。
【００５４】
符号分離部４４２は、分離部４２０から入力されたＳＢＲ符号化信号をコピー処理時の位置情報、逆フィルタの係数、コピー信号、付加ノイズ信号、付加トーン信号のゲイン情報、などに分離する。そしてそれらを高域サブバンド信号生成部４４３又はゲイン算出調整部４４４に入力する。
【００５５】
高域サブバンド信号生成部４４３は、３２サブバンド分析フィルタ４４１から入力された低域の３２バンドのサブバンド信号から、高域のサブバンド信号を生成する。このとき、符号分離部４４２から入力されるコピー信号や付加ノイズ信号などを用いて波形の整形を行う。そして、高域サブバンド信号生成部４４３は、生成した高域のサブバンド信号をゲイン算出調整部４４４に入力する。
【００５６】
ゲイン算出調整部４４４は、高域サブバンド信号生成部４４３から入力された高域のサブバンド信号を、符号分離部４４２から入力される付加トーン信号のゲイン情報などを用いて波形を補正する。こうして生成された高域のサブバンド信号を加算部４４５に入力する。
また、ゲイン算出調整部４４４は、高域のサブバンド信号を生成する際に、その信号の音圧レベルを抽出して制御部３３０に出力する。
【００５７】
加算部４４５は、３２サブバンド分析フィルタ４４１から入力された低域の３２バンドのサブバンド信号と、ゲイン算出調整部４４４から入力された高域のサブバンド信号と、を加算して６４サブバンド合成フィルタ４４６に入力する。
【００５８】
６４サブバンド合成フィルタ４４６は、加算部４４５から入力された低域の３２バンドのサブバンド信号及び高域のサブバンド信号を合成して、６４サブバンドの復号音声信号（ＡＡＣ＋ＳＢＲ復号信号）を制御部３３０に出力する。
こうしてＳＢＲデコーダ４４０により、音声信号の帯域拡大とアップサンプリングをすることができる。
【００５９】
以上のようにして、ＡＡＣ＋ＳＢＲ方式で符号化された音声を復号し、音圧レベルを抽出する。なお、ＡＡＣデコーダ４３０の処理とＳＢＲデコーダ４４０の処理とは完全に独立しており、ＭＰＥＧ−２ＡＡＣと互換性を備えている。入力された音声信号がＭＰＥＧ−２ＡＡＣで符号化されている場合、ＡＡＣデコーダ４３０から復号した音声信号を出力することができる。
【００６０】
実施形態２では、抽出した音圧レベルが時系列で増大した場合、その増大した値が閾値以上である場合であって、字幕情報が含まれるＥＳ１０５に設定されたＰＥＳヘッダ１０４の同期情報に合わせて振動する。したがって、実施形態２では上記実施形態１のようなキーワードテーブル３５０１、３５０２が不要になり、特定のキーワードに限らず、音圧レベルが増大した場合に振動させることができる。また、字幕の表示タイミング（ＥＳ１０５に設定されたＰＥＳヘッダ１０４の同期情報）の時に振動を行うので、字幕情報の表示によらない、例えば、爆発音やその他の環境音の出力については反応して振動することは無く、飽くまでも字幕情報の表示、例えば、字幕を伴って再生表示される映像情報において、人物が発した音声に基づく音声情報の出力について反応して振動するので、音声情報の再生タイミング知ることができ、臨場感を高めることができる。
【００６１】
続いて、その動作について説明する。図８は、実施形態２の音圧判別振動処理の動作を説明するためのフローチャートである。
【００６２】
制御部３３０は、定期的な割り込みで本処理を実行する。先ず、制御部３３０は、放送受信部３９０が放送信号を受信したか否かを判別する（ステップＳ３０１）。
【００６３】
放送信号を受信していない場合は（ステップＳ３０１；Ｎｏ）、本処理を終える。
【００６４】
放送信号を受信した場合（ステップＳ３０１；Ｙｅｓ）、制御部３３０は、復号処理部４００を制御して放送信号を復号するとともに、音声復号部４０１により放送信号、すなわち、ＥＳ１０５に設定されたオーディオフレームのＭＰＥＧ−２ＡＡＣ（若しくはＡＡＣ＋ＳＢＲ）方式で符号化された音声情報から音圧レベルを抽出する（ステップＳ３０２）。
【００６５】
そして、ステップＳ３０２で抽出した音圧レベルを制御部３３０が備えるＲＡＭなどに記録する（ステップＳ３０３）。一度に記録する音圧レベルは所定間隔分の平均値などであってもよい。
【００６６】
続いて、制御部３３０は、今回ステップＳ３０３で記録した音圧レベルを直前に記録（計測）した音圧レベルと比較する（ステップＳ３０４）。
【００６７】
ステップＳ３０４で比較した結果、音圧レベルが増大した場合であって、その差分が閾値以上であるか否かを判別する（ステップＳ３０５）。
【００６８】
音圧レベルの差分が閾値未満であった場合（ステップＳ３０５；Ｎｏ）、本処理を終える。
【００６９】
音圧レベルの差分が閾値以上であった場合（ステップＳ３０５；Ｙｅｓ）、
制御部３３０は、字幕情報の表示タイミングであるか否かを、この音声情報の再生出力と同期情報を同じくする字幕情報が存在するか否かで判別する（ステップＳ３０６）。
【００７０】
字幕情報の表示タイミングでない場合（ステップＳ３０６；Ｎｏ）、本処理を終える。
【００７１】
字幕情報の表示タイミングであった場合（ステップＳ３０６；Ｙｅｓ）、制御部３３０は振動部３７０を制御して、その字幕の表示タイミングに合わせて振動を行う（ステップＳ３０７）。この振動は、対応する字幕情報が表示されている間に行ってもよいし、振動開始から所定時間行うようにしてもよい。
【００７２】
このように、実施形態２によれば、再生されるべき音声情報の音圧レベルが閾値を超えた差分で増大したときの字幕の表示タイミングで振動するので、音声情報の再生タイミング知ることができ、ユーザは音声情報の再生タイミングを逸することなく、臨場感のある視聴を楽しむことができる。
【００７３】
また、例えば、爆発音やその他の環境音の出力時に字幕情報が表示されていることも考えられる。その場合、環境音に基づく音声情報の出力について反応して振動するケースが発生することも考えられる。それを解消するために、音声復号部４０１に音声信号の周波数を判別する手段を設けて、該手段が人間の発する音声の周波数帯域であると判別した場合にのみ、振動するようにしてもよい。
【００７４】
なお、図８に示すフローチャートは適宜変更することができる。例えば、図６に示す実施形態１の変形例のように音声を出力しない設定である場合のみ振動するようにしてもよい。また、本実施形態では音圧レベルを前回の計測値と比較していたが、計測した音圧レベルの値を所定の閾値と比較するようにしてもよい。また、パワースペクトラムの変化度合いから判別するようにしてもよい。
【００７５】
なお、この発明は上記実施形態に限定されず、種々の変形及び応用が可能である。
【００７６】
上記実施形態では、本発明の表示装置を備える無線通信端末３００について説明したが、本発明を、デジタルテレビ放送を受信できる専用の受信器やＰＤＡ（Personal Digital Assistants）などの情報端末に適用することもできる。
【００７７】
上記実施形態では、制御部３３０が実行するプログラムは、予めプログラムメモリ３４０に格納されていたが、通信網や外部記録媒体を介してプログラムメモリ３４０に格納するようにしてもよい。
【図面の簡単な説明】
【００７８】
【図１】ＭＰＥＧ−２  ＴＳのＴＳパケットセクションの構造を示す図である。
【図２】本発明の実施形態の無線通信端末の機能ブロック図である。
【図３】キーワードテーブルの例を示す図である。
【図４】無線通信端末が振動した際の外観図である。
【図５】実施形態１の動作を説明するためのフローチャートである。
【図６】実施形態１の変形例の動作を説明するためのフローチャートである。
【図７】実施形態２における音声復号部を説明するための図である。
【図８】実施形態２の動作を説明するためのフローチャートである。
【符号の説明】
【００７９】
３００…無線通信端末、３１０…通信処理部、３１１…アンテナ、３２０…表示部、３３０…制御部、３４０…プログラムメモリ、３５０…ユーザメモリ、３６０…操作部、３７０…振動部、３８０…音声処理部、３８１…スピーカ、３８２…マイクロフォン、３９０…放送受信部、３９１…アンテナ、４００…復号処理部、４０１…音声復号部、４１０…再生処理部、４１１…スピーカ、４２０…分離部、４３０…ＡＡＣデコーダ、４４０…ＳＢＲデコーダ、４４１…３２サブバンド分析フィルタ、４４２…符号分離部、４４３…高域サブバンド信号生成部、４４４…ゲイン算出調整部、４４５…加算部、４４６…６４サブバンド合成フィルタ
【図１】
2008016882.tif 000003
【図２】
2008016882.tif 000004
【図３】
2008016882.tif 000005
【図４】
2008016882.tif 000006
【図５】
2008016882.tif 000007
【図６】
2008016882.tif 000008
【図７】
2008016882.tif 000009
【図８】
2008016882.tif 000010