(57)【要約】【課題】  効率的に視聴可能な副映像の特殊再生を実現するために好適な映像再生装置および再生制御方法を提供する。【解決手段】  少なくともビデオデータとサブピクチャデータが記憶されたメディアからデータを読み出す読出手段と、この読出手段によって前記メディアから読み出されたデータを再生する再生手段と、前記サブピクチャデータの字幕種別毎の表示形態の設定を受け付ける設定手段と、この設定手段により設定された表示形式で前記サブピクチャデータを表示するように前記再生手段を制御する制御手段とを具備することを特徴とする映像再生装置。【選択図】      図１
2009055109.tif 000002
【特許請求の範囲】
【請求項１】
少なくともビデオデータとサブピクチャデータが記憶されたメディアからデータを読み出す読出手段と、
この読出手段によって前記メディアから読み出されたデータを再生する再生手段と、
前記サブピクチャデータの字幕種別毎の表示形態の設定を受け付ける設定手段と、
この設定手段により設定された表示形式で前記サブピクチャデータを表示するように前記再生手段を制御する制御手段とを具備することを特徴とする映像再生装置。
【請求項２】
前記設定手段は前記サブピクチャデータの色の設定を受け付け、前記制御手段は前記サブピクチャの色を前記設定された色に変更して表示させるように前記再生手段を制御することを特徴とする請求項１記載の映像再生装置。
【請求項３】
前記設定手段は前記サブピクチャデータのコントラストの設定を受け付け、前記制御手段は前記サブピクチャのコントラストを前記設定されたコントラストに変更して表示させるように前記再生手段を制御することを特徴とする請求項１記載の映像再生装置。
【請求項４】
前記再生手段は前記サブピクチャデータのデコード結果を保持し、前記設定手段は前記設定された表示形式を保持し、前記制御手段はこの表示形式により前記デコード結果に基づいて前記サブピクチャデータを表示させるように前記再生手段を制御することを特徴とする請求項１記載の映像再生装置。
【請求項５】
少なくともビデオデータとサブピクチャデータが記憶されたメディアからデータを読み出し再生する方法において、
前記サブピクチャデータの字幕種別毎の表示形式の設定を行う段階と、
前記メディアの再生時に、前記設定された表示形式で前記サブピクチャデータを表示する段階と、
を有することを特徴とする再生制御方法。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、映像再生装置および再生制御方法に係わり、特に副映像再生技術に関する。
【背景技術】
【０００２】
近年、高画質・高機能を有するDVDビデオディスクおよび、そのディスクを再生するDVDプレーヤやHDD/DVDレコーダが急速に普及してきた。膨大なコンテンツが流通する中、視聴者にとってはコンテンツの検索や視聴のための時間不足が大きな課題となっており、視聴効率を向上するための手段が各種考案されている。たとえば、高速再生や、ハイライトシーンを抽出して再生するダイジェスト再生等である。しかしながら、これらの特殊再生においては副映像の再生が考慮されておらず、また一部の機種で副映像の高速再生が実現されているものの、読解が困難であり現実的ではないという問題が存在している。
【０００３】
また一方で、DVDビデオディスクの教材用メディアしての需要も増加してきた。たとえば英語の学習においては、ヒアリングを補助するために副映像が重要な役割を担っている。学習中は、英語字幕と日本語字幕を瞬間的に切り替えて表示させたい場合が生じるが、従来は各言語が異なる副映像ストリームに記録されていたため、表示切り替えに時間がかかるという問題があった。
【０００４】
例えば特許文献１の記載によれば、モニタの画面には、１群の字幕が表示される時間の内最初の予め定めた時間は英語の字幕が表示され、予め定めた時間経過後の残りの時間は日本語の字幕が表示されるため、複数の字幕の切り替えにより語学の学習を行うことができる、とあり制約がある。
【特許文献１】特開２００２−２９０９１９号公報
【発明の開示】
【発明が解決しようとする課題】
【０００５】
本発明は、複数の副映像の切り替えなしに効率的に視聴可能な特殊再生を実現するために好適な映像再生装置および再生制御方法を提供することを目的とする。
【課題を解決するための手段】
【０００６】
上記課題を解決するために、本発明の映像再生装置は、少なくともビデオデータとサブピクチャデータが記憶されたメディアからデータを読み出す読出手段と、この読出手段によって前記メディアから読み出されたデータを再生する再生手段と、前記サブピクチャデータの字幕種別毎の表示形態の設定を受け付ける設定手段と、この設定手段により設定された表示形式で前記サブピクチャデータを表示するように前記再生手段を制御する制御手段とを具備することを特徴とする。
【発明の効果】
【０００７】
本発明によれば、複数の副映像の切り替えなしに効率的に視聴可能な特殊再生を実現するために好適な映像再生装置および再生制御方法が得られる。
【発明を実施するための最良の形態】
【０００８】
以下、本発明の実施例を説明する。
【実施例１】
【０００９】
本発明による実施例１を図１乃至図２５を参照して説明する。
図１は、この発明の一実施例を示すブロック構成図を示している。
図1に本発明に関わるシステム全体の構成図を示す。
ハードディスクHまたは光ディスクDに記録されたコンテンツを再生する場合、システムCPU105を介して、ストリームがストリーム分離部107に入力される。ストリーム分離部107は、ストリームをオーディオ/主映像/副映像に分離し、図示せぬSTC(System Time Clock)情報等と共に、各デコーダ部108、109、110へと出力する。主映像デコーダ部109でデコードされた主映像データと、副映像デコーダ部110でデコードされた副映像データは、混合部112で多重化され、出力制御部113に出力される。出力制御部113では、前記映像データとオーディオデコーダ部108でデコードされた音声データとの同期をとり、モニタ115およびスピーカ114へ出力する。以上が、従来装置と共通するデータの流れである。
【００１０】
本装置では、システムCPU105の内部に字幕種別毎の表示効果設定部106を内蔵し、かつ表示効果情報生成部111を備えることを特徴とする。言わばサブピクチャデータの字幕種別毎の表示形態の設定を受け付ける設定手段の例である。前記表示効果設定部106は、図20のような字幕の表示効果設定画面を生成すると共に、本画面上で視聴者が入力部101を介して字幕種別毎の表示効果を容易に設定可能とする。表示効果情報生成部111は、前記の表示効果に関する設定情報および、副映像デコーダ部110からの現デコード画素の画素種別および座標情報とを受け取り、表示効果を施す対象の矩形領域の算出や変更すべきカラーコード、コントラストの情報等を生成する。また、生成した表示効果情報をフレーム単位で適用すべく副映像デコーダ部110に出力する。
【００１１】
図3〜図19に副映像情報のDVD規格フォーマットを示している。副映像ストリームSPU(Sub Picture Unit)は、SPUH(Sub-picture Unit Header)、PXD(Pixel Data)、SP_DCSQT(SP Display Control Sequence Table)から構成される。SPUの構成は図3、図4に示す通りである。図4においてコード00hからFFhで示されるコマンド群は各表示制御シーケンスに常に現れるものではなく、表示制御シーケンス毎に必要な一部が到来する。
【００１２】
また、PXDは図6に示すRun-length圧縮規則に従って圧縮されたビットマップデータである。ビットマップの各2bitのピクセルデータの割り当ては図5に示す通りである。ピクセルデータの割り当て毎に、カラーコード(図10)およびコントラスト(図11)を設定可能である。HD DVDの場合は、PXDが8bit/ピクセルを別のRun-length圧縮規則に従って圧縮したフォーマットも定義されている。このとき、256種類の画素種別が存在し得ることになる。
【００１３】
次に、図2を利用して、副映像デコーダの処理手順を説明する。
ステップ201では、SPUH301を解析する。次にステップ202では、S201で解析した表示制御シーケンスの先頭アドレス情報をもとに、表示制御シーケンス303(304)を順に解析する。表示制御シーケンスは、図7〜図19に示す制御コマンドから構成される。
【００１４】
ステップ203では、S202でCHG_COLCON設定(図14)が存在した場合、図15〜図17に示すPXCD(Pixel Control Data)を解析する。
【００１５】
ステップ204では、PXDのランレングスデコードを行う。ステップ205では、S204の現デコード対象画素の画素コードおよび座標情報から、当該画素を含む矩形領域を算出する。具体的には、図22に示すように、当該画素コード(この例では01b)が連続または近隣に出現する領域を検出し、背景画素(この例では00b)を含めた矩形領域の開始X座標、終了X座標、開始Y座標、終了Y座標を求める。
【００１６】
ステップ206では、SET_COLOR(図10)、SET_CONTR(図11)、CHG_COLCON(図14)の設定値に応じて、当該画素(2bit)にデフォルト設定のカラーコードおよびコントラストコード(各4bit)を適用する。
【００１７】
ステップ207では、1ラインの処理が終了したら、TOP/BOTTOMのフィールドを切り替えて再度S204から開始する。
ステップ208では、PXCDが複数存在していた場合は、当該ラインの処理を終了したら再度S203を行う。
ステップ209では、表示効果設定が存在するかを確認する。設定が存在しない場合はS211に進み、存在する場合はS210を行う。ステップ210では、S205で算出した表示効果設定対象の矩形領域について、カラーコードおよびコントラストをデフォルト値から設定値に変更する。
【００１８】
ステップ211では、デコードかつ表示効果を施した後の副映像データを混合部112に出力する。
ステップ212では、DCSQが複数存在していた場合は、S202に戻り、次のDCSQの解析を行う。
ステップ213では、SPUが最終でなければ、S201に戻り、次のSPUの解析を開始する。
上記の処理手順において、S205およびS210が本装置の特徴であり、それ以外は従来の副映像デコーダ装置と同様である。また、上記では2bit/ピクセルのデータを処理する場合を例にあげたが、8bit/ピクセルの場合はカラーコードがY/Cb/Crの各8bitおよびコントラストコードが8bitに拡張されること以外は同様である。
【００１９】
図21に、表示効果設定用データベースの構成例を示す。画素種別毎に設定変更後の文字色、背景色、コントラスト等の情報を持つ。それら情報のピクセルデータの割り当ては図5に基づいて行われる。
【００２０】
コントラストの設定値は、視聴者がパーセンテージでxと設定した場合、以下の計算式にて算出できる。
(1)         2bit/画素フォーマットの場合
コントラスト値=16*(x/100)-1
ただし、x=0％の場合は、-1演算をしない（コントラスト値=0）。
(2)         8bit/画素フォーマットの場合
コントラスト値=256*(x/100)-1
ただし、x=0％の場合は、-1演算をしない（コントラスト値=0）。
図23〜図25に表示効果を施した表示の具体例を示す。
図23は、俳優の台詞別に画素種別を分けて記録されたコンテンツにおいて、画面左側の俳優の台詞を強調表示、右側の俳優の台詞を透明度を高く（コントラストを低く）して表示するよう設定された場合の表示例である。このように設定することにより、たとえば、好みの俳優の台詞にフォーカスして表示することが可能となる。視聴者が視聴すべき情報量を限定できるため、高速再生やダイジェスト再生時に応用することで視聴効率の向上を期待できる。
【００２１】
図24は、英文のキーワードについて画素種別を分けて記録されたコンテンツにおいて、キーワードのみを強調表示した例である。たとえば、英語のヒアリング教材において、学習レベルに応じて段階的に表示量を減らしていくといった表示制御が可能となる。このような適用方法は、教育用途DVDで非常に有効である。
【００２２】
図25は、英語字幕と日本語字幕が画素種別を分けて記録されたコンテンツにおいて、英語字幕のみを強調表示した例である。たとえば、英語の教材や映画等において、基本的には英語字幕で視聴するが、理解できなかった場面を補うために日本語字幕を薄く表示させている場合を想定している。コントラストを0に設定することにより、完全に日本語字幕の表示を消すことも可能である。本装置では、オリジナル副映像のデコード結果と表示効果情報とを別々に記憶、管理することによって、基本的には英語字幕のみを表示させ、理解できなかった場面のみ日本語字幕に切り替えるといった再生も、高速に実現することが可能である。
【００２３】
上記の実施例では、背景画素も含めた矩形領域範囲に対し表示効果を与える例を示したが、文字を構成する画素コード単位で特殊効果を与えるようにしても良い。その場合、矩形領域の算出処理を省くことが可能となる。
【００２４】
また、表示効果設定用データベース(図21)で管理する項目として、字幕種別毎の優先順位の情報を追加しても良い。その優先順位に従って、コントラスト値の自動調整を行うことも可能となる。
【００２５】
1つの副映像ストリームにおいて、特定箇所の表示方法を変更、制御可能とする技術は開示されていない。本実施例では、副映像の画素コード単位に表示のための特殊効果を施すことが可能となる。たとえば、当該コンテンツにおけるキーワードや俳優別台詞等に応じて画素コードを分けて1つの副映像ストリームに記録されたコンテンツに対し、視聴者所望の部分（キーワードや好みの俳優の台詞のみ）を強調表示させることが容易に実現できる。本提案の装置および制御方法では、前記のような副映像の特殊再生を視聴者にとって簡単な操作で実現できると共に、従来不可能であった字幕表示の高速切り替えも可能となり、次のようなポイントにおいて視聴者の利便性を大いに向上できる。
【００２６】
１．  DVD/HD DVD再生装置において、副映像ストリーム中で字幕種別毎に表示用特殊効果を設定する手段と、前記設定に基づいて各フレームにおける字幕種別毎の表示効果情報を生成する手段を備えた。
【００２７】
２．更に装置に、表示効果を与えるために必要な、文字色、背景色およびコントラスト等の条件を任意に設定可能な機能を備えた。
３．副映像の表示効果設定の切り替えを高速に実現するため、装置において、生成した表示効果情報とオリジナル副映像のデコード結果とを別々に記憶、管理した。
そこで本実施例では、効率的に視聴可能な副映像の特殊再生を実現するために好適な再生装置および再生制御方法を示した。本装置では、字幕種別毎に画素コードを分けて1つの副映像ストリームに記録されたコンテンツに対して、視聴者所望の画素種別単位で特殊効果を施して表示することが可能となる。また、オリジナル副映像のデコード結果と表示効果情報とを別々に記憶、管理することによって、従来不可能であった字幕種別の高速切り替えも実現できる。視聴者の利便性を大幅に向上できると共に、一つのコンテンツを多種多様な視点から視聴できる等、単純に本編を視聴する以上のユーザにとって価値の高い視聴スタイルを確立できる。
【００２８】
なお、この発明は上記実施例に限定されるものではなく、この外その要旨を逸脱しない範囲で種々変形して実施することができる。
また、上記した実施の形態に開示されている複数の構成要素を適宜に組み合わせることにより、種々の発明を形成することができる。例えば、実施の形態に示される全構成要素から幾つかの構成要素を削除しても良いものである。さらに、異なる実施の形態に係る構成要素を適宜組み合わせても良いものである。
【図面の簡単な説明】
【００２９】
【図１】この発明の一実施例を示すブロック構成図。
【図２】同実施例の副映像再生装置の処理フロー図。
【図３】副映像ユニット構成図。
【図４】SPUH/PXD/SP_DCSQの詳細構成図。
【図５】実施例に用いられるピクセルデータの割り当て説明図。
【図６】Run-length圧縮規則の説明図。
【図７】表示開始タイミング強制設定コマンドFSTA_DSPの説明図。
【図８】表示開始タイミング設定コマンドSTA_DSPの説明図。
【図９】表示停止タイミング設定コマンドSTP_DSPの説明図。
【図１０】カラーコード設定コマンドSET_COLORの説明図。
【図１１】コントラスト設定コマンドSET_CONTRの説明図。
【図１２】表示領域設定コマンドSET_DAREAの説明図。
【図１３】PXD先頭アドレス設定コマンドSET_DSPXAの説明図。
【図１４】カラーコード/コントラスト変更コマンドCHG_COLCONの説明図。
【図１５】PXCD全体構成図。
【図１６】LN_CTLIの説明図。
【図１７】PX_CTLIの説明図。
【図１８】PXD先頭アドレス設定コマンドSET_DSPXA2の説明図。
【図１９】表示制御終了コマンドCMD_ENDの説明図。
【図２０】実施例の表示効果設定画面のイメージ図。
【図２１】実施例の表示効果設定用データベース例。
【図２２】実施例の表示効果対象矩形領域の算出例。
【図２３】実施例の表示効果を施した表示例（１）。
【図２４】実施例の表示効果を施した表示例（２）。
【図２５】実施例の表示効果を施した表示例（３）。
【符号の説明】
【００３０】
１０１…入力部、１０５…システムCPU、１０６…表示効果設定部、１０７…ストリーム分離部、１０８…オーディオデコーダ部、１０９…主映像デコーダ部、１１０…副映像デコーダ部、１１１…表示効果情報生成部、１１２…混合部、１１３…出力制御部、１１４…スピーカ、１１５…モニタ。
【図１】
2009055109.tif 000003
【図２】
2009055109.tif 000004
【図３】
2009055109.tif 000005
【図４】
2009055109.tif 000006
【図５】
2009055109.tif 000007
【図６】
2009055109.tif 000008
【図７】
2009055109.tif 000009
【図８】
2009055109.tif 000010
【図９】
2009055109.tif 000011
【図１０】
2009055109.tif 000012
【図１１】
2009055109.tif 000013
【図１２】
2009055109.tif 000014
【図１３】
2009055109.tif 000015
【図１４】
2009055109.tif 000016
【図１５】
2009055109.tif 000017
【図１６】
2009055109.tif 000018
【図１７】
2009055109.tif 000019
【図１８】
2009055109.tif 000020
【図１９】
2009055109.tif 000021
【図２０】
2009055109.tif 000022
【図２１】
2009055109.tif 000023
【図２２】
2009055109.tif 000024
【図２３】
2009055109.tif 000025
【図２４】
2009055109.tif 000026
【図２５】
2009055109.tif 000027