(57)【要約】【課題】映像に対して字幕が遅れている番組をトランスポートストリームの形式で記録しても、特殊再生の度に出画を待つ必要のない放送受信装置を得る。【解決手段】生放送でリアルタイムに字幕を生成して多重するような、映像に対して字幕が遅れている番組を記録するときに、字幕データの表示タイミング（ＰＴＳ）をより早く表示される側に補正すると共に、字幕データの位置を同じ表示タイミングを持つ映像データにより近くなる位置であってＰＣＲに対してプラスの時間になる位置に移動させる並べ替えを行い、この後で記録媒体に記録する。【選択図】  図２
2013251766.tif 000002
【特許請求の範囲】
【請求項１】
映像に対して字幕が遅延時間だけ遅延している番組のトランスポートストリームが入力される入力端と、
前記入力端から前記トランスポートストリームが入力され、前記字幕のパケットに対してプレゼンテーション・タイム・スタンプを遅延時間だけ早く表示される側に補正すると共に、前記トランスポートストリームにおける前記字幕のパケットの位置を、同じ表示タイミングを持つ映像パケットに対してより近くなる位置であってＰＣＲ（ＰＣＲ：Program Clock Reference）に対してプラスの時間になる位置に移動させる字幕遅延補正手段と、
前記字幕遅延補正手段から入力されたトランスポートストリームを記録媒体に記録させる記録制御手段とを備えた放送受信装置。
【請求項２】
更に、前記入力端から入力された番組のトランスポートストリームから、前記字幕が前記映像に対して遅延している前記遅延時間を検出する字幕遅延検出部を備え、
前記字幕遅延補正手段は前記字幕のパケットに対してプレゼンテーション・タイム・スタンプを、前記字幕遅延検出部により検出された前記遅延時間だけ早く表示される側に補正する請求項１記載の放送受信装置。
【請求項３】
前記入力端から前記トランスポートストリームが入力され、前記トランスポートストリームから映像データと字幕データとを分離する分離手段と、
前記分離手段により分離された字幕データをデコードする字幕デコーダと、
前記分離手段により分離された映像データを前記遅延時間だけ遅延させる映像遅延部と、
前記映像遅延部により遅延された映像データをデコードする映像デコーダと、
前記映像デコーダからの映像に、前記字幕デコーダからの字幕を混合して出力するミキサとを備えた請求項１乃至２のいずれか１項記載の放送受信装置。
【請求項４】
更に、前記記録媒体に記録されているトランスポートストリームを再生する再生手段を備え、
前記再生手段が再生しているとき、
前記分離手段は、前記入力端から前記トランスポートストリームではなく、前記再生手段が再生したトランスポートストリームから映像データと字幕データとを分離し、
前記映像遅延部は、前記遅延時間として０または前記遅延時間より短い時間だけ遅延させる請求項１乃至３のいずれか１項記載の放送受信装置。
【請求項５】
映像に対して字幕が遅延時間だけ遅延している番組のトランスポートストリームが入力され、前記字幕のパケットに対してプレゼンテーション・タイム・スタンプを遅延時間だけ早く表示される側に補正すると共に、前記トランスポートストリームにおける前記字幕のパケットの位置を、同じ表示タイミングを持つ映像パケットに対してより近くなる位置であってＰＣＲ（ＰＣＲ：Program Clock Reference）に対してプラスの時間になる位置に移動させる処理を字幕遅延補正手段により実行するステップと、
前記補正されたトランスポートストリームを記録媒体に記録するステップとを備えた放送受信方法。
【発明の詳細な説明】
【技術分野】
【０００１】
この発明は、字幕情報を受信して記録媒体に記録再生可能な放送受信装置に関する。
【背景技術】
【０００２】
従来、映像に対して字幕が遅れているときに映像と字幕のずれをなくすために、映像の表示タイミングを字幕の遅れ分だけ遅延させて放送する方法が考えられている。このため映像に対して字幕が遅れている番組を記録して再生すると、早送りや早戻しやジャンプ再生といった特殊再生を行う度に再生開始を待たされてしまう。
【０００３】
また、従来、例えば生放送のニュース字幕放送などのようにリアルタイムで放映される放送データを受信して記録再生を行う記録再生装置において、字幕の表示タイミングを補正して、再生時に映像／音声に対して字幕の表示遅れをなくす技術が知られている（例えば、特許文献１参照）。
【０００４】
しかし、番組をトランスポートストリームの形式で記録再生させる場合、例えば生放送でリアルタイムに字幕を生成して多重するような、映像に対して字幕が遅れている番組は、映像や音声と、字幕との間の遅延の残ったままのトランスポートストリームが記録されてしまう。この遅延の残ったままのトランスポートストリームを再生した場合、映像や音声と、字幕との間の同期をとる必要があり、特殊再生の度（例えば、飛び飛びにトランスポートストリームを再生する等して、ストリームが途切れる度）に出画を待つ必要があるという問題があった。
【先行技術文献】
【特許文献】
【０００５】
【特許文献１】特開２００５−２８６９６９号公報
【発明の概要】
【発明が解決しようとする課題】
【０００６】
このように従来の放送受信装置においては、遅延の残ったままのトランスポートストリームを再生した場合、映像や音声と、字幕との間の同期をとる必要があり、特殊再生の度（例えば、飛び飛びにトランスポートストリームを再生する等して、ストリームが途切れる度）に出画を待つ必要があるという問題があった。
【課題を解決するための手段】
【０００７】
上記の目的を達成するために、この発明においては、映像に対して字幕が遅延時間だけ遅延している番組のトランスポートストリームが入力される入力端と、前記入力端から前記トランスポートストリームが入力され、前記字幕のパケットに対してプレゼンテーション・タイム・スタンプを遅延時間だけ早く表示される側に補正すると共に、前記トランスポートストリームにおける前記字幕のパケットの位置を、同じ表示タイミングを持つ映像パケットに対してより近くなる位置であってＰＣＲ（ＰＣＲ：Program Clock Reference）に対してプラスの時間になる位置に移動させる字幕遅延補正手段と、前記字幕遅延補正手段から入力されたトランスポートストリームを記録媒体に記録させる記録制御手段とを備えた放送受信装置を提供する。
【０００８】
また、上記の目的を達成するために、この発明においては、映像に対して字幕が遅延時間だけ遅延している番組のトランスポートストリームが入力され、前記字幕のパケットに対してプレゼンテーション・タイム・スタンプを遅延時間だけ早く表示される側に補正すると共に、前記トランスポートストリームにおける前記字幕のパケットの位置を、同じ表示タイミングを持つ映像パケットに対してより近くなる位置であってＰＣＲ（ＰＣＲ：Program Clock Reference）に対してプラスの時間になる位置に移動させる処理を字幕遅延補正手段により実行するステップと、前記補正されたトランスポートストリームを記録媒体に記録するステップとを備えた放送受信方法を提供する。
【０００９】
前記補正されたトランスポートストリームを記録媒体に記録するステップとを備えた放送受信方法を提供する。
なお、装置に係る本発明は方法に係る発明としても成立し、方法に係る本発明は装置に係る発明としても成立する。
また、装置または方法に係る本発明は、コンピュータに当該発明に相当する手順を実行させるための（あるいはコンピュータを当該発明に相当する手段として機能させるための、あるいはコンピュータに当該発明に相当する機能を実現させるための）プログラムとしても成立し、該プログラムを記録したコンピュータ読み取り可能な記録媒体としても成立する。
【図面の簡単な説明】
【００１０】
【図１】本発明を適用した放送受信装置の構成を説明するための図。
【図２】本発明の補正方法を説明するための図。
【図３】本発明の補正方法を説明するためのフローチャート。
【発明を実施するための形態】
【００１１】
以下、図面を参照しながら本発明の実施形態について説明する。
図１に字幕表示補正機能を備えた本発明の放送受信装置を示す。
図１において、アンテナ１は放送波を受信する。
チューナ２は、アンテナ１により受信された放送波から所望の周波数で送られたＭＰＥＧ２−ＴＳを復調し、ＭＰＥＧ２−ＴＳ分離部３へ出力する。
ＭＰＥＧ２−ＴＳ分離部３は、チューナ２から入力されたＭＰＥＧ２−ＴＳから、所望のチャンネルの番組に関する映像ＰＥＳ（ＰＥＳ：Packetized Elementary Stream）、字幕ＰＥＳ、音声ＰＥＳを分離し、映像ＰＥＳを映像遅延部１１、字幕ＰＥＳを字幕デコーダ２１、音声ＰＥＳを音声遅延部３１へ出力する。
【００１２】
また、ＭＰＥＧ２−ＴＳ分離部３は、チューナ２から入力されたＭＰＥＧ２−ＴＳからＰＣＲパケットを分離し、この分離したＰＣＲパケットをＰＣＲ検出部５１へ出力する。
【００１３】
字幕遅延検出部４１は、例えば、音声ＰＥＳと字幕ＰＥＳから、映像に対する字幕の遅延時間を検出する。この字幕遅延検出部４１で検出した遅延時間を含む遅延情報は、映像遅延部１１および音声遅延部３１に出力される。音声と字幕から映像に対する字幕の遅延時間を検出する方法としては、種々提案されている公知の技術を用いればよく、いずれの技術を用いてもよい。例えば、上記特許文献１での特開２００５−２８６９６９号公報に、音声と字幕とを比較することにより、字幕の遅延時間を検出する方法が開示されている。
【００１４】
映像遅延部１１は、字幕遅延検出部４１から入力された遅延情報に含まれる遅延時間分を映像ＰＴＳ（ＰＴＳ：Presentation Time Stamp）に加算すると共に、映像ＰＥＳを遅延時間分だけバッファリングした後、映像デコーダ１２へ出力する。
【００１５】
音声遅延部３１は、字幕遅延検出部４１から入力された遅延情報に含まれる遅延時間分を音声ＰＴＳに加算すると共に、音声ＰＥＳを遅延時間分だけバッファリングする。
【００１６】
ＳＴＣカウンタ５２は、ＰＣＲ検出部５１から入力されたＰＣＲ値に応じたカウント値がセットされ、このカウント値に加えて所定のクロックをカウントするカウンタである。ＳＴＣカウンタ５２によりカウントされたカウント値は映像デコーダ１２，字幕デコーダ２１、音声デコーダ３２へそれぞれ出力される。
【００１７】
映像デコーダ１２は、映像遅延部１１からＰＴＳ遅延時間分加算されると共に遅延時間分だけ遅延された映像ＰＥＳが入力され、ＭＰＥＧ２デコードした映像を、ＳＴＣカウンタ５２から入力されたカウント値とＰＴＳとが一致するタイミングにてミキサ１３へ出力する。
【００１８】
字幕デコーダ２１は、ＭＰＥＧ２−ＴＳ分離部３から字幕ＰＥＳが入力され、デコードした字幕を、ＳＴＣカウンタ５２から入力されたカウント値とＰＴＳとが一致するタイミングにてミキサ１３へ出力する。
【００１９】
ミキサ１３は、映像デコーダ１２によりデコードされた映像に、字幕デコーダ２１によりデコードされた字幕を重畳（多重）し、この字幕が多重された映像を、図示しない映像出力端を介してモニタ１４へ出力する。本発明はセットトップボックスの形態の放送受信装置に適用してもよく、モニタ１４は必須ではない。
【００２０】
音声デコーダ３１は、音声遅延部３１からＰＴＳ遅延時間分加算されると共に遅延時間分だけ遅延された音声ＰＥＳが入力され、デコードした音声を、ＳＴＣカウンタ５２から入力されたカウント値とＰＴＳとが一致するタイミングにてスピーカ３３へ出力する。
【００２１】
ＰＣＲ検出部５１は、ＭＰＥＧ２−ＴＳ分離部３から入力されたＰＣＲパケットから、ＰＣＲ（ＰＣＲ：Program Clock Reference）の値を検出し、このＰＣＲ値をＳＴＣカウンタ５２へ出力する。
【００２２】
この結果、映像データは、ＳＴＣカウンタ値と映像ＰＴＳが一致するタイミングでモニタ１４に出力され、音声データはＳＴＣカウンタ値と音声ＰＴＳが一致するタイミングでスピーカ３３から出力され、字幕データはＳＴＣカウンタ値と字幕ＰＴＳが一致するタイミングでモニタ１４に出力される。
【００２３】
ここで番組を記録する場合はチューナー出力のＭＰＥＧ２−ＴＳを記録再生装置６２に記録し、この記録した番組を再生する場合は記録再生装置６２からＭＰＥＧ２−ＴＳを読み出して、ＭＰＥＧ２−ＴＳ分離部３に送ることで再生する。
【００２４】
この記録再生の際、後述する字幕遅延補正装置６１が設けられてなく、単にＭＰＥＧ２−ＴＳを記録再生したとする。字幕表示タイミングが映像よりも遅れている場合、映像遅延部１１と音声遅延部３１で映像ＰＥＳと音声ＰＥＳとが遅延して再生されることとなる。このように番組の字幕表示タイミングが映像より遅れている場合には、特殊再生が行われる度に映像出力の遅延が、図２の遅延時間分だけ長く発生してしまうという課題がある。
【００２５】
この実施形態では、記録再生装置６２の前に字幕遅延補正装置６１が設けられており、記録再生装置６２には、図２に示す字幕遅延補正処理を行ったＭＰＥＧ２−ＴＳが記録される。字幕遅延補正装置６１により字幕遅延補正を行ったＭＰＥＧ２−ＴＳを再生することで、記録再生装置６２から再生する場合に、映像遅延部１１と音声遅延部３１での遅延は発生しないため、記録再生装置６２にて特殊再生を行っても映像出力の更なる遅延は発生しないという効果がある。なお、リアルタイム視聴の場合についてはこのように字幕遅延補正装置６１が設けられてない場合と変わらない。
【００２６】
以下、この字幕遅延補正装置６１による補正処理について図２および図３を用いて詳細に説明する。
図２にて、映像１，映像２，・・・，映像Ｎは、ＭＰＥＧ−ＴＳ上の映像データを示し、音声１は音声データ（パケット）を示し、字幕１は字幕データ（パケット）を示す。
【００２７】
ここで字幕１の表示タイミングは、映像１の表示タイミングと本来同じであるべきものとする。即ち、生放送等でリアルタイムに音声認識技術等を用いて字幕を挿入するため遅延時間が発生してしまうが、この遅延時間をなくしたときには、字幕１の表示タイミングは、映像１の表示タイミングと同じであり、同時に表示されるものとする。
【００２８】
字幕１は映像１より時間的にみて後ろ側に位置していて、字幕１のＰＴＳは映像１のＰＴＳに遅延時間分加算されたものとなっている。
字幕遅延補正装置６１で遅延させるための遅延時間については、番組を記録するとき同時に字幕遅延検出部４１で検出した同番組の遅延時間を用いてもよいし、字幕遅延補正装置６１の中に予め所定の値としてＲＯＭ等に持たせてあってもよい。
【００２９】
字幕データの補正は、字幕１のＰＴＳから遅延時間を減算したものを新たな字幕１のＰＴＳとし、字幕１の位置を補正したＰＴＳと同じＰＴＳを持つ映像１の後ろに多重し直す。この処理を遅延が発生している字幕データ全てについて行う。
【００３０】
字幕遅延補正装置６１で補正されたデータは、映像と字幕の表示タイミングにずれがなくなっていると考えられるため、記録再生装置６２から再生する場合に、映像遅延部１１と音声遅延部３１での遅延処理を止める（遅延時間０とする）。この結果、映像遅延部１１と音声遅延部３１での遅延は発生しないため、特殊再生を行っても映像出力の遅延は発生しなくなる。
【００３１】
本実施形態によれば、例えば生放送でリアルタイムに字幕を生成して多重するような、映像に対して字幕が遅れている番組を記録するときに、図３に示す通り、字幕データの表示タイミング（ＰＴＳ）をより早く表示される側に補正すると共に（ステップＳ３０１）、字幕データの位置を同じ表示タイミングを持つ映像データにより近くなる位置であってＰＣＲに対してプラスの時間になる位置に移動させる並べ替えを行い（ステップＳ３０２）、この後で記録媒体に記録する。なお、このステップＳ３０１とＳ３０２の順番は入れ替わってもよい。
【００３２】
この結果、映像や音声と、字幕との間の遅延の無くなったストリームが記録されるので、再生時に映像や音声と、字幕との間の同期をとるための遅延時間を削減でき、更に字幕のデータを待つ迄の時間を削減することができるので、特殊再生の度に出画を待つことなく、特殊再生を実行することができる。
【００３３】
なお、本発明は上記実施形態そのままに限定されるものではなく、実施段階ではその要旨を逸脱しない範囲で構成要素を変形して具体化できる。また、上記実施形態に開示されている複数の構成要素の適宜な組み合わせにより、種々の発明を形成できる。例えば、実施形態に示される全構成要素から幾つかの構成要素を削除してもよい。さらに、異なる実施形態にわたる構成要素を適宜組み合わせてもよい。例えば、第１の実施形態と第２の実施形態とを組み合わせ、所望の番組属性として、ジャンル、チャンネルを組みとしたものとしてもよい。
【符号の説明】
【００３４】
１…アンテナ、２…チューナ、３…ＭＰＥＧ２−ＴＳ分離部、１１…映像遅延部、１２…映像デコーダ、１３…ミキサ、１４…モニタ、２１…字幕デコーダ、３１…音声遅延部、３２…音声デコーダ、３３…スピーカ、４１…字幕遅延検出部、５１…ＰＣＲ検出部、５２…ＳＴＣカウンタ、６１…字幕遅延補正装置、６２…記録再生装置。
【図１】
2013251766.tif 000003
【図２】
2013251766.tif 000004
【図３】
2013251766.tif 000005