(57)【要約】【課題】コンテンツの制作者が意図した字幕の差異をユーザが容易かつ正しく判別できるように字幕表示を行う。【解決手段】ステップＳＴ５で色区分情報データ生成処理を行い、字幕色がどのような色であるかを文字や図形で区分可能とする色区分情報データを生成してバッファに蓄積する。ステップＳＴ６で字幕文データの保持処理を行い、字幕文データをバッファに蓄積させる。ステップＳＴ７で字幕文の終端まで字幕文データが蓄積されたと判別したとき、あるいはステップＳＴ８で字幕色の切り換えが行われたと判別したとき、ステップＳＴ９でバッファに蓄積されている色区分情報データと字幕文データを用いて字幕表示を行う。また、字幕信号が終了していないときステップＳＴ３からの処理を繰り返すことで、字幕の色の差異を色区分情報によって明らかとして字幕表示が行われる。【選択図】        図３
2009094889.tif 000002
【特許請求の範囲】
【請求項１】
字幕信号を含むコンテンツ信号から前記字幕信号を抽出する字幕信号抽出部と、
抽出された前記字幕信号によって示される字幕の色を判別して、この判別結果に基づき前記字幕の色を区別可能とする色区分情報を、対応する前記字幕に付加する色区分情報付加処理部を有する
ことを特徴とする字幕表示処理装置。
【請求項２】
前記色区分情報付加処理部は、前記色区分情報として前記判別された字幕の色名を示す文字を付加する
ことを特徴とする請求項１記載の字幕表示処理装置。
【請求項３】
前記色区分情報付加処理部は、前記色区分情報として前記判別された字幕の色毎に異なる文字や記号あるいは図形を付加する
ことを特徴とする請求項１記載の字幕表示処理装置。
【請求項４】
前記色区分情報付加処理部は、画面上に同時に表示される字幕の色を判別して、この判別結果に基づき前記字幕の色を区別可能とする色区分情報を、画面上に同時に表示される前記字幕の対応する字幕に付加する
ことを特徴とする請求項１記載の字幕表示処理装置。
【請求項５】
前記色区分情報付加処理部は、番組情報信号の取得を行い、取得した番組情報信号に基づき、同一番組内における同一の色の字幕に対して同一の色区分情報を付加する
ことを特徴とする請求項１記載の字幕表示処理装置。
【請求項６】
字幕信号を含むコンテンツ信号から前記字幕信号を抽出する字幕信号抽出工程と、
抽出された前記字幕信号によって示される字幕の色を判別して、この判別結果に基づき前記字幕の色を区別可能とする色区分情報を、対応する前記字幕に付加する色区分情報付加処理工程を有する
ことを特徴とする字幕表示処理方法。
【発明の詳細な説明】
【技術分野】
【０００１】
この発明は、字幕表示処理装置と字幕表示処理方法に関する。詳しくは、字幕の色の識別ができず、異なる色の字幕の区別ができないような場合であっても、文字や記号等の色区分情報を字幕に付加することで、異なる色の字幕の区別を行えるようにするものである。
【背景技術】
【０００２】
従来の電子機器、例えば放送受信装置では、特許文献１の発明で開示されているように、映画、音楽、スポーツなどジャンル別に番組表の番組欄を色分けすることで利用者に区別した番組情報を表示することが行われている。
【０００３】
また、放送受信装置では、番組情報だけでなく放送コンテンツと連動した字幕表示が行われている。この字幕表示では、出演者の発言や会話の内容を文字で表示することで、聴覚に障害を有した人でも放送コンテンツの内容を理解できるようになされている。さらに、複数人が会話しているシーンにおいて、発言者を区別することができるように字幕を色分けして表示することも行われている。例えば、発言者Ａの発言内容は白い字幕、発言者Ｂの発言内容は黄色い字幕というように、意図的に字幕色を変えて指定した字幕データを生成することも行われる。
【０００４】
【特許文献１】特開２００１−５４０７６号公報
【発明の開示】
【発明が解決しようとする課題】
【０００５】
ところで、図５の（Ａ）に示す字幕ＣＰcにおいて、最初の行の文字「私の母はその意見に賛成でした。」を白色、２行目の文字「私の父は反対でした。」を黄色、３行目の文字「反応はそれぞれですね。」を白色として色分け表示する場合、モノクロで映像表示を行うものとすると、白色と黄色の輝度差が少ないため図５の（Ｂ）に示すように字幕ＣＰdにおける色の違いを区別することが困難となる。また、カラーで映像表示を行う場合でも視聴環境によっては光の映り込みなどが生じると、色の区別が困難な場合もある。さらに、色覚に障害を有した人は色の違いを区別できない場合もある。
【０００６】
そこで、この発明では、コンテンツの制作者が意図した字幕の差異をユーザが容易かつ正しく判別できるように字幕表示を行う字幕表示処理装置と字幕表示処理方法を提供するものである。
【課題を解決するための手段】
【０００７】
この発明の字幕表示処理装置は、字幕信号を含むコンテンツ信号から字幕信号を抽出する字幕信号抽出部と、抽出された字幕信号によって示される字幕の色を判別して、この判別結果に基づき字幕の色を区別可能とする色区分情報を、対応する字幕に付加する色区分情報付加処理部を有するものである。
【０００８】
また、この発明に係る字幕表示制御方法は、字幕信号を含むコンテンツ信号から字幕信号を抽出する字幕信号抽出工程と、抽出された字幕信号によって示される字幕の色を判別して、この判別結果に基づき字幕の色を区別可能とする色区分情報を、対応する字幕に付加する色区分情報付加処理工程を有するものである。
【発明の効果】
【０００９】
この発明によれば、コンテンツ信号から字幕信号が抽出されて、この字幕信号によって示される字幕の色の判別結果に基づき字幕の色を区別可能とする色区分情報が対応する字幕に付加される。このため、字幕の色の識別ができず、異なる色の字幕の区別ができないような場合であっても、色区分情報によって異なる色の字幕の区別を行うことが可能となり、コンテンツの制作者が意図した字幕の差異を、ユーザが容易かつ正しく判別できるようになる。
【発明を実施するための最良の形態】
【００１０】
以下、図を参照しながら、この発明の実施の一形態について説明する。図１は、字幕表示処理装置を例えば衛星ディジタル放送や地上波ディジタル放送が受信可能な放送受信装置に設けた場合の構成を示している。
【００１１】
放送受信装置１０のアンテナ１１は、テレビジョン放送を受信して得られた放送信号ＲＦをチューナ部１２に供給する。チューナ部１２は、所望のチャンネルの選局を行い、得られた受信信号ＲＳをディジタル復調／誤り訂正処理部１３に供給する。
【００１２】
ディジタル復調／誤り訂正処理部１３は、テレビジョン放送で用いられている変調方式に対応した復調処理例えばＯＦＤＭ復調処理，ＱＰＳＫ復調処理あるいはＱＡＭ復調処理等を行う。さらに、復調処理を行うことにより得られたトランスポートストリームの誤り訂正処理を行い、誤り訂正がなされたトランスポートストリームＴＳaをデスクランブラ１４に供給する。
【００１３】
デスクランブラ１４は、トランスポートストリームＴＳaを解析して、番組を視聴するために必要となる情報を分離する。例えば、デスクランブラ１４は、トランスポートストリームＴＳaに含まれる番組特定情報（ＰＳＩ：Program Specific Information）の条件付アクセステーブル（ＣＡＴ：Conditional Access Table）に基づいて、番組が限定受信方式によりスクランブルされていると判別した場合に、トランスポートストリームＴＳaから個別情報ＥＭＭと共通情報ＥＣＭを分離してセキュリティモジュール（図示せず）に供給する。セキュリティモジュールは、マスタ鍵Ｋmを用いて個別情報ＥＭＭの復号処理を行い、ワーク鍵Ｋwを生成する。さらに、セキュリティモジュールは、生成したワーク鍵Ｋwを用いて共通情報ＥＣＭの復号処理を行い、スクランブル鍵Ｋsを生成する。デスクランブラ１４は、セキュリティモジュールで生成されたスクランブル鍵Ｋsを用いてデスクランブル処理を行い、スクランブル処理された信号をスクランブル処理前の信号に戻して、デスクランブル処理後であるトランスポートストリームＴＳbをデマルチプレクサ１５に供給する。
【００１４】
デマルチプレクサ１５は、コンテンツ信号であるトランスポートストリームＴＳbから時分割多重されている画像信号ＤＴvと音声信号ＤＴaを分離してデコーダ部２１に供給する。また、デマルチプレクサ１５は、トランスポートストリームＴＳbから番組を選局するための選局情報例えばＰＡＴ(Program Association Table)やＰＭＴ(Program Map Table)と、番組に関する番組情報例えばＥＩＴ(Event Information Table)等を有した情報信号ＤＴcを分離して制御部５０に供給する。さらに、デマルチプレクサ１５は、字幕信号抽出部に相当するものであり、トランスポートストリームＴＳbから字幕表示や文字スーパーを行うための情報信号（以下「字幕信号」という）ＤＴdを分離して、色区分情報付加処理部である制御部５０に供給する。
【００１５】
字幕信号ＤＴdのパケットは、図２の（Ａ）に示すようにヘッダとデータグループで構成されている。データグループは、図２の（Ｂ）に示すようにデータグループヘッダとデータグループデータおよび誤り検出符号で構成されている。データグループデータは、図２の（Ｃ）に示す字幕管理データあるいは図２の（Ｄ）に示す字幕文データが用いられる。なお、データグループデータが字幕管理データあるいは字幕文データのいずれであるかは、データグループヘッダで示される。字幕管理データは、時刻制御モード、言語情報、表示形式等のその他の情報を示すデータで構成されている。字幕文データは、時刻制御モードや制御符号（８単位符号）のデータで構成されており、制御符号によって文字や文字サイズ、表示位置、色（例えば４階調の場合は、前景色、前中間色、背中間色、背景色の４色が指定される）等が指定される。なお、時刻制御モードは、即時再生を行うモードであるか否かを示すものであり、字幕表示の場合は即時再生が行われるように設定されている。
【００１６】
デコーダ部２１は、デマルチプレクサ１５から供給された画像信号ＤＴvの復号を行い、得られた画像信号ＶＳaをオンスクリーン表示処理部３１に供給する。また、デコーダ部２１は、音声信号ＤＴaの復号を行い、得られた音声信号ＡＳaを音声出力処理部４１に供給する。
【００１７】
オンスクリーン表示処理部３１は、後述する制御部５０からの制御信号ＣＴに基づき、メニュー画面や字幕等を表示するためのオンスクリーン表示信号を生成する。さらに、生成したオンスクリーン表示信号とデコーダ部２１から供給された画像信号ＶＳaを合成して、画像信号ＶＳaに基づく画像にオンスクリーン表示信号に基づく画像が合成した画像の画像信号ＶＳbを生成して信号処理部３２に供給する。例えば画像信号ＶＳaに基づく画像を表示するプレーン（以下「動作プレーン」という）に、オンスクリーン表示信号に基づく画像を表示するプレーン（以下「グラフィックプレーン」という）を重ね合わせて、合成画面の信号を画像信号ＶＳbとして信号処理部３２に供給する。
【００１８】
信号処理部３２は、オンスクリーン表示処理部３１から供給された画像信号ＶＳbを用いてインタレース／プログレッシブ変換(Ｉ／Ｐ変換)処理や画素数変換処理等を必要に応じて行う。さらに、処理後の画像信号に対してシャープネス補正や色合い補正、ホワイトバランス補正、ノイズ除去等の画質改善処理を行い、画像信号ＶＳcとして画像出力処理部３３に供給する。
【００１９】
画像出力処理部３３には、例えばＬＣＤ（Liquid Crystal Display），ＰＤＰ（Plasma Display Panel），ＥＬ(Electro Luminescence)，陰極線管などの表示デバイスを用いて構成された表示部６０が接続されている。画像出力処理部３３は、画像信号ＶＳcに基づき、表示デバイスを駆動するための表示駆動信号ＤＲvを生成して表示部６０に供給する。このため表示部６０で画像表示を行うことができる。また、画像出力処理部３３は、外部機器（図示せず）に画像信号を供給するとき、画像信号ＶＳcを外部機器に対応したフォーマットの出力信号Ｖoutとして出力する。
【００２０】
音声出力処理部４１には、スピーカを用いて構成された音声出力部６５が接続されている。音声出力処理部４１は、デコーダ部２１から供給された音声信号ＡＳaを用いて音声処理例えば信号レベル調整や音質調整、ノイズ除去処理等を行い、音声処理後の音声出力信号ＤＲaを音声出力部６５に供給して音声出力を行う。また、音声出力処理部４１は、外部機器（図示せず）に音声信号を供給するとき、音声処理後の信号を外部機器に対応したフォーマットの出力信号Ａoutとして出力する。
【００２１】
制御部５０には、ユーザインタフェース部５１や記憶部５２が接続されている。ユーザインタフェース部５１は、ユーザ操作に応じた操作信号ＰＳを制御部５０に供給するものであり、例えば操作キーやリモートコントロール信号受信部等で構成されている。
【００２２】
記憶部５２は、デマルチプレクサ１５で分離された情報信号ＤＴcや信号ＤＴd等を記憶する。
【００２３】
制御部５０は、バス５５を介して上述の各部と接続されている。制御部５０は、ユーザインタフェース部５１からの操作信号ＰＳに基づき、制御信号ＣＴを生成して各部に供給することで、放送受信装置の動作がユーザ操作に応じた動作となるように制御する。例えば、ユーザインタフェース部５１から供給された操作信号ＰＳによって、チャンネル切り換え操作等が行われたことが示されたとき、制御部５０は、所望の番組の視聴等を行うことができるように、チューナ部１２の選局動作やデコーダ部２１の復号処理動作等を制御する。例えば、記憶部５２に記憶されている選局情報を用いて、チューナ部１２に対して周波数情報に基づいた選局制御と、デマルチプレクサ１５に対してテーブル情報に基づいたパケット分離制御を行うことで、所望の番組の選局や選局した番組の画像信号や音声信号を生成することが可能となる。また、オンスクリーン表示処理部３１を制御して、電子番組表の表示、番組の検索，予約および内容の確認等を行う。さらに、色区分情報付加処理部である制御部５０は、字幕信号ＤＴdに基づき字幕表示を行い、ユーザによって字幕の色区分表示機能が有効とされているときには、色区分情報を字幕と共に表示して字幕色（例えば前景色）を区分できるように字幕表示を行う。
【００２４】
次に、字幕表示動作について説明する。図３は字幕表示制御動作を示すフローチャートである。ステップＳＴ１で制御部５０は、字幕信号ＤＴdを受信したか否かを判別する。制御部５０は、デマルチプレクサ１５から字幕信号ＤＴdが供給されたときステップＳＴ２に進み、字幕信号ＤＴdが供給されていないときステップＳＴ１に戻る。
【００２５】
ステップＳＴ２で制御部５０は、字幕の色区分表示機能が有効とされているか否かを判別する。制御部５０は、ユーザ操作等によって色区分表示機能が有効とされているときステップＳＴ３に進み、有効とされていないときはステップＳＴ１１に進む。
【００２６】
ステップＳＴ３で制御部５０は、字幕の組変化または全消去指示があるか否か判別する。制御部５０は、字幕の組変化または全消去指示があったときステップＳＴ４に進む。また、制御部５０は、字幕の組変化や全消去指示がないときステップＳＴ５に進む。
【００２７】
ステップＳＴ４で制御部５０は、バッファのデータ消去を行ってステップＳＴ１０に進む。このバッファは、字幕文データや色区分情報データ等を一時蓄積しておくためのものであり、オンスクリーン表示処理部３１あるいは制御部５０に設けるものとする。
【００２８】
ステップＳＴ５で制御部５０は、色区分情報データ生成処理を行う。制御部５０は、字幕信号ＤＴdを解析して字幕色を判別する。さらに判別した字幕色がどのような色であるかを文字や図形で区分可能とする色区分情報データを生成してバッファに蓄積してステップＳＴ６に進む。
【００２９】
ステップＳＴ６で制御部５０は、字幕文データの蓄積処理を行う。制御部５０は、字幕信号ＤＴdから字幕文データを抽出してバッファに蓄積させてステップＳＴ７に進む。
【００３０】
ステップＳＴ７で制御部５０は、字幕文の終端まで字幕文データを蓄積したか否か判別する。制御部５０は、字幕文の終端まで字幕文データを蓄積していないときステップＳＴ８に進む。また、制御部５０は、字幕文の終端まで字幕文データを蓄積したときステップＳＴ９に進む。
【００３１】
ステップＳＴ８で制御部５０は、字幕色の切り換えが行われたか否か判別する。制御部５０は、字幕色の切り換えが行われたときステップＳＴ９に進み、字幕色の切り換えが行われていないときステップＳＴ７に戻る。
【００３２】
ステップＳＴ９で制御部５０は、バッファに蓄積されているデータを用いて字幕表示処理を行う。すなわち、制御部５０は、オンスクリーン表示処理部３１の動作を制御して、バッファに蓄積されている色区分情報データと字幕文データを用いてグラフィックプレーンのオンスクリーン表示信号を生成して、生成したオンスクリーン表示信号と画像信号ＶＳaを合成させることで字幕表示を行いステップＳＴ１０に進む。
【００３３】
ステップＳＴ１０で制御部５０は、字幕信号ＤＴdの終了であるか否かを判別する。制御部５０は、字幕信号ＤＴdが終了していないときはステップＳＴ３に戻り、字幕信号ＤＴdが終了したときステップＳＴ１に戻る。
【００３４】
ステップＳＴ２で色区分表示機能が有効とされていないと判別されてステップＳＴ１１に進むと、制御部５０は色区分情報の表示を行うことなく従来のように字幕表示処理を行いステップＳＴ１に戻る。
【００３５】
このような字幕表示制御動作を行うものとすると、字幕信号ＤＴdが例えば図５の（Ａ）に示すような字幕表示を行う信号であるとき、最初の行の字幕色を示す色区分情報データ（例えば色名を示す「白：」の文字データ）と文字「私の母はその意見に賛成でした。」を示す文字データがバッファに蓄積されて、字幕文の終端となると、バッファに蓄積された色区分情報データと文字データに基づいて字幕表示「白：私の母はその意見に賛成でした。」が行われる。
【００３６】
次に、２行目の字幕色を示す色区分情報データ（例えば色名を示す「黄：」の文字データ）と文字「私の父は反対でした。」を示す文字データがバッファに蓄積される。また、字幕文の終端となると、バッファに蓄積された色区分情報データと文字データに基づいて、画面上に１行目の字幕と同時に表示される２行目の字幕に色区分情報が付加された字幕表示「黄：私の父は反対でした。」が続けて行われる。
【００３７】
さらに、３行目の字幕色を示す色区分情報データ（例えば色名を示す「白：」の文字データ）と文字「反応はそれぞれですね。」を示す文字データがバッファに蓄積される。また、字幕文の終端となると、バッファに蓄積された色区分情報データと文字データに基づいて、画面上に１，２行目の字幕と同時に表示される３行目の字幕に色区分情報が付加された字幕表示「白：反応はそれぞれですね。」が続けて行われる。
【００３８】
したがって、画面上には図４の（Ａ）に示すように、字幕ＣＰaにおける字幕色が何色であるか文字で示された色区分情報が、画面上に同時に表示される字幕の対応する字幕に付加されて字幕表示が行われる。また、字幕の組変化または全消去指示が生じたときにはバッファのデータが消去されるので、表示されている字幕が消去されて新たな字幕が表示される。
【００３９】
このような字幕表示を行うものとすれば、字幕の色の差異によって複数人の会話における発言者の違いを示す番組を再生する場合、字幕の色の差異が色区分情報によって明らかとなるので、色の識別が困難な状況例えばモノクロで映像表示を行う場合や光の映り込みなどが生じた場合等においても容易に発言者の違い等を判別することが可能となり、コンテンツの制作者が意図した字幕の差異をユーザが容易かつ正しく判別できる。
【００４０】
また、例えば発言者の違いを字幕の色の違いとして表示して、色名自体には意味付けがなされていない場合、色名を示す文字データに換えて他の文字や記号あるいは図形等を示すデータを色区分情報データとして用いるものとしてもよい。
【００４１】
例えば、最初の字幕の色に対しては文字「Ａ：」を示す色区分情報データを用い、次に検出に検出された色に対しては文字「Ｂ：」を示す色区分情報データを用いるものとすれば、画面上には図４の（Ｂ）に示すように、字幕ＣＰbにおける字幕色の違いが文字「Ａ：」「Ｂ：」として表示されるので、コンテンツの制作者が意図した字幕の差異をユーザが容易かつ正しく判別できる。
【００４２】
また、発言者と字幕色が関係付けられている番組においては、色区分情報データに基づく表示によって、番組全体を通じて統一的に発言者を知ることが可能となる。この場合、制御部５０は、ＥＩＴに記載された番組情報を利用して、同一番組内における同一の色の字幕に対して同一の色区分情報を付加する。番組情報では、チャンネル毎に放送される番組の番組名、放送日時、番組時間長、ジャンル等が示されている。したがって、制御部５０は、放送日時や番組時間長の情報を利用することで同一番組内であるか否かを判別することが可能となり、同一番組内における同一の色の字幕に対して同一の色区分情報を付加することができる。
【００４３】
さらに、字幕の全消去指示がなされたとき、制御部５０は字幕色と色区分情報データの関係付けを設定し直すものとしてもよい。例えば、番組中でシーンの切り換え等を行うときに全消去指示を行うようにして、シーン切り換え後に字幕色と色区分情報データの関係付けを設定し直すものとすれば、同じ字幕色であってもシーン毎に異なる表示を行うことができるので、この場合にも、コンテンツの制作者が意図した差異をユーザがより詳しく判別できるようになる。
【００４４】
なお、上述の実施の形態では、テレビジョン放送を受信して字幕表示を行う場合について説明したが、コンテンツの再生時に字幕表示が行われるものであれば、放送受信装置に字幕表示処理装置を設ける場合に限られるものではない。例えば、記録媒体に記録されているコンテンツを再生する装置やネットワーク等を介して配信されたコンテンツを再生する装置において、コンテンツの再生時に字幕表示が行われるものであれば、これらの装置に字幕表示処理装置を設けるものとしてもよい。
【図面の簡単な説明】
【００４５】
【図１】放送受信装置の構成を示す図である。
【図２】字幕信号のパケット構成を示す図である。
【図３】字幕表示制御動作を示す図である。
【図４】字幕表示画面を示す図である。
【図５】従来の字幕表示画面を示す図である。
【符号の説明】
【００４６】
１０・・・放送受信装置、１１・・・アンテナ、１２・・・チューナ部、１３・・・ディジタル復調／誤り訂正処理部、１４・・・デスクランブラ、１５・・・デマルチプレクサ、２１・・・デコーダ部、３１・・・オンスクリーン表示処理部、３２・・・信号処理部、３３・・・画像出力処理部、４１・・・音声出力処理部、５０・・・制御部、５１・・・ユーザインタフェース部、５２・・・記憶部、５５・・・バス、６０・・・表示部、６５・・・音声出力部
【図１】
2009094889.tif 000003
【図２】
2009094889.tif 000004
【図３】
2009094889.tif 000005
【図４】
2009094889.tif 000006
【図５】
2009094889.tif 000007