(57)【特許請求の範囲】
【請求項１】
ビデオデータと、前記ビデオデータ内の画像として含まれる特定のオブジェクトに対して表示すべき表示データおよびそのオブジェクトを識別するために別に用意した比較元の画像データを含むその他のデータとを少なくとも有するストリームデータを備えたデジタルテレビ放送信号を受信し復調する信号復調部と、
この信号復調部で復調された前記ストリームデータをビデオデータおよびその他のデータに分離するデータ分離部と、
このデータ分離部で分離したビデオデータをデコードするデコード部と、
このデコード部でデコードされたビデオデータに画像として含まれる画面上の特定のオブジェクトを、前記データ分離部で分離されたその他のデータに含まれる前記比較元の画像データとパターン比較することにより、画面上における前記特定のオブジェクトの位置情報を生成するパターン比較処理部と、
前記データ分離部で分離されたその他のデータに含まれる前記特定のオブジェクトに関する表示データと、前記パターン比較処理部で生成した位置情報とを用いて画面上における前記特定のオブジェクトの位置に合わせて前記表示データを表示可能とする表示情報データを出力するデータ処理部と、
を具備したことを特徴とするデジタル放送受信機。
【請求項２】
前記デコード部でデコードされるビデオデータを入力し、前画面と現在の画面のそれぞれにおける特定のオブジェクト間の移動量(方向及び距離のデータ)を検出し、前画面での特定のオブジェクトの位置情報に前記移動量を加えた新たな位置情報を作成して前記データ処理部に供給する動き検出処理部を、更に具備したことを特徴とする請求項１に記載のデジタル放送受信機。
【請求項３】
前記パターン比較処理部は、画像のパターン比較を用いる際に、前記データ分離部で分離されたその他のデータに含まれる外部からの分割用情報により画面上を所定のエリアに分け、分けた所定のエリア単位で画像のパターン比較を行い、前記特定のオブジェクトの位置情報を生成することを特徴とする請求項１又は２に記載のデジタル放送受信機。
【請求項４】
前記比較元の画像データに相当するデータを、外部接続可能な機器より取り込む比較元データ作成装置を、更に具備したことを特徴とする請求項１乃至３のいずれか１つに記載のデジタル放送受信機。
【請求項５】
前記比較元の画像データに相当するデータを、前記デコード部にてデコードされるビデオデータに基づいた再生画面よりポインティングデバイスにて特定の部分を切り出して生成する比較元データ作成装置を、更に具備したことを特徴とする請求項１乃至３のいずれか１つに記載のデジタル放送受信機。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、放送画面の特定の画像をパターン検出等し、その特定画像の近辺にその画像に関連する情報を自動的に付加して表示することが可能なデジタル放送受信機に関するものである。
【背景技術】
【０００２】
従来、デジタルを含むＴＶ放送では、多人数にて大きな空間で実施されるスポーツ(例えばサッカーや野球など)の中継などにおいて、試合の流れを分かり易くするために、ボールのある位置など競技の中心となる部分を含む広い空間を表示する画面(以下、引き絵と呼ぶ)での中継放送となる場合が多い。引き絵とは、例えばサッカーの試合で競技場のフィールド全体が見られる状態の画面をいう。
【０００３】
この場合、受信機にて放送を見ている視聴者は、試合の流れ自体は非常につかみやすいが、その反面、個々の選手などは非常に小さい画像となり判別が難しい。そのため、放送内で実況音声などの説明があった場合でも、画面上のどの選手に対するものかが理解できない場合や誤った選手に注目してしまう場合などがある。
【０００４】
従来の画像を表示する表示装置を備えた映像機器には、映像の蓄積手段を有した映像再生装置において、拡大映像や低速再生中において、個々の選手に該当する場所が指示された場合には、その対象となる選手に関する情報を提示する情報提供方法を開示したものがある（例えば、特許文献１参照）。
【０００５】
また、データ放送番組の受信中に、ポインティングしている映像上の位置とオブジェクトの位置情報から、オブジェクトごとに表示する関連情報を決定して、この映像上にオブジェクトの関連情報を重畳して表示する重畳表示装置を開示しているものもある（例えば、特許文献２参照）。
【０００６】
さらに、映像上の位置を指示操作する指示部と、指示操作された映像中の対象物を認識して、当該認識された対象物に関連付けられる情報を表示する処理手段とを備えた制御装置を開示しているものもある（例えば、特許文献３参照）。
【０００７】
しかしながら、特許文献１乃至３のいずれの技術においても、ユーザーである操作者が表示されている画面中の対象物に関連する情報を知りたいときに指示手段にて操作指示する必要があり、例えばサッカーの試合の生中継のようにフィールドを映し出している引き絵の画面の中で特定の選手を追い続けたいときなどにその選手の動きに追随して選手名（或いはマーク）を表示し続けることはできていなかった。
【０００８】
特許文献１では、録画媒体に予め個々の選手に関連した情報を再生状況とリンクするように蓄積しておく必要があり、ユーザーにとって多くの準備（時間及び労力）が必要であり、放送局のようなコンテンツの送出側からリアルタイムに送られてくる動いているオブジェクト（画像）についてそれに関連する情報（例えば名前）をオブジェクトの近辺に表示して特定のオブジェクトを確認し易くすることはできなかった。
【特許文献１】特開２００２−３６６４１８号公報
【特許文献２】特開２００４−２９７４４８号公報
【特許文献３】特開２００２−３３５５１８号公報
【発明の開示】
【発明が解決しようとする課題】
【０００９】
そこで、本発明は上記の問題に鑑み、デジタルＴＶ放送において、パターン認識などの機能を利用して、広い空間表示の画面から特定のオブジェクトを識別し、そのオブジェクトの近辺に関連する情報を自動的に表示することが可能なデジタル放送受信機を提供することを目的とする。
【課題を解決するための手段】
【００１０】
本願発明の一態様によれば、ビデオデータと、前記ビデオデータ内の画像として含まれる特定のオブジェクトに対して表示すべき表示データおよびそのオブジェクトを識別するために別に用意した比較元の画像データを含むその他のデータとを少なくとも有するストリームデータを備えたデジタルテレビ放送信号を受信し復調する信号復調部と、この信号復調部で復調された前記ストリームデータをビデオデータおよびその他のデータに分離するデータ分離部と、このデータ分離部で分離したビデオデータをデコードするデコード部と、このデコード部でデコードされたビデオデータに画像として含まれる画面上の特定のオブジェクトを、前記データ分離部で分離されたその他のデータに含まれる前記比較元の画像データとパターン比較することにより、画面上における前記特定のオブジェクトの位置情報を生成するパターン比較処理部と、前記データ分離部で分離されたその他のデータに含まれる前記特定のオブジェクトに関する表示データと、前記パターン比較処理部で生成した位置情報とを用いて画面上における前記特定のオブジェクトの位置に合わせて前記表示データを表示可能とする表示情報データを出力するデータ処理部と、を具備したことを特徴とするデジタル放送受信機が提供される。
【発明の効果】
【００１１】
本発明によれば、デジタルＴＶ放送において、パターン認識などの機能を利用して、広い空間表示の画面から特定のオブジェクトを識別し、そのオブジェクトの近辺に関連する情報を自動的に表示することが可能なデジタル放送受信機を提供することができる。
【発明を実施するための最良の形態】
【００１２】
発明の実施の形態について図面を参照して説明する。  
本発明の実施形態を説明する前に、図８を参照して従来技術について説明する。  
図８に示すように、デジタルＴＶ放送を受信する従来のデジタル放送受信機１００は、放送されているビデオ TSデータＳ2およびオーディオTSデータＳ3およびその他のTSデータＳ4を含むストリームを有するコンテンツを含むＴＶ放送波のRF信号を入力し、MPEG TSデータＳ1に変換する信号復調部１０１と、MPEG TSデータＳ1をビデオ TSデータＳ2およびオーディオTSデータＳ3およびその他のTSデータＳ4に分離するデマルチプレクス処理部１０２と、分離されたビデオTSデータＳ2およびオーディオTSデータＳ3のそれぞれを元データに復元するビデオ用MPEGデコーダ１０３及びオーディオ用MPEGデコーダ１０４と、その他のTSデータＳ4やMPEG ビデオデータＳ2の各ピクチャ（＝１フレーム）につけられており、MPEGデコーダ１０３にて取り出されるユーザーデータなどを元に情報を処理するデータ処理部１０５と、データ処理部１０５およびシステム制御部１２０からの情報により画面上にデータ放送の内容やEPG(電子番組表)などのオンスクリーン(以下OSD)情報を表示させるグラフィックス処理部１０６と、MPEGデコーダ１０３，１０４からの出力およびグラフィックス処理部１０６からの出力を受け、それらを適切に処理して外部デバイス(CRTや液晶パネルなどの画像出力装置やオーディオ出力装置)へ出力させる出力制御部１０７と、外部との入出力I/Fなどを有し、ユーザーからの操作やシステム全体を制御するシステム制御部１２０とを備えて構成されている。
【００１３】
このようなデジタル放送受信機においては、デジタルＴＶ放送として送られてくるビデオデータ、オーディオデータ、及びその他データのストリームを含むMPEG TSデータより構成されるコンテンツを含むＴＶ放送波を受信し再生及び表示している。
【００１４】
その際、ビデオTSストリームにのオブジェクト（画像）に関連した情報などは、その他のTSデータ(ARIB規格であればSIデータや独立PESデータ)部分に含まれており、それを受信機のデータ処理部にて解析し、グラフィックス処理部にてOSDデータとして画面上に表示している。
【００１５】
そのため、このような受信機の場合、例えばサッカーの試合で競技場のフィールド全体が見られる状態の引き絵画面のように、画面中の選手を画面内で目的とするオブジェクトとした場合、その目的のオブジェクトの位置に合わせて表示すべき情報(例えば名前)を表示することを考えると、その対象となる任意のオブジェクト(選手)の位置情報などは、コンテンツのデータ送出側（放送局）からその他のTSデータの中などに予め情報として含んだ形で送出される必要がある。
【００１６】
しかしながら、従来技術の場合、上述のようにスポーツ中継などで選手が動く場合に、その対象となる選手などのオブジェクトに関連した情報をオブジェクトと同じような位置に表示し続けるような場合、コンテンツのデータ送出側が、オブジェクトの動きに応じて変化させた位置情報をその他のTSデータなどに含まれる形で送出し続けていく必要がある。
【００１７】
したがって、生中継の場合など選手の動きがランダムで事前予想できない場合などは、事実上、選手の位置情報を同時に送出するのはかなり困難となる。
【００１８】
そのため、現状のデジタルTV受像機では、静止画上や動きの無い場面やリプレイ画面など、オブジェクトの動きが限られた画面に対してのみ、画面上のオブジェクトの位置に関連情報の表示などが行われている。
【００１９】
そのため、従来技術では、生放送などの中継画面ではリアルタイムに特定のオブジェクトの関連情報などを画面上のオブジェクトの位置に基づいた表示をさせることが困難で、放送中に特定のオブジェクトに関する情報は、そのオブジェクトの画面上の位置に関係なく特定の位置に表示されるため、視聴者側で対象となるオブジェクトが画面上のどこにあるのかを把握する必要が生じる。
【００２０】
［第１の実施形態］
図１は本発明の第１の実施形態のデジタル放送受信機のブロック図を示している。図１は、図８の従来のデジタル放送受信機に対しパターン比較処理部を追加した構成となっている。
【００２１】
図１において、デジタル放送受信機１００Ａは、信号復調部１０１と、デマルチプレクス処理部１０２と、ビデオ用MPEGデコーダ１０３及びオーディオ用MPEGデコーダ１０４と、データ処理部１０５Ａと、グラフィックス処理部１０６と、出力制御部１０７と、パターン比較処理部１０８と、システム制御部１２０とを備えて構成されている。図８と同一部分には同一符号を付している。
【００２２】
信号復調部１０１は、ビデオTSデータＳ2と、オーディオTSデータＳ3と、ビデオTSデータＳ2内の画像として含まれる特定のオブジェクトに関する表示データａ、およびそのオブジェクトを識別するために予め用意した比較元の画像データ(以下、単に比較元データという)ｂを含むその他TSデータＳ4とを有するストリームデータで構成されるコンテンツを含むＴＶ放送波のRF信号をデジタルテレビ放送信号として受信しMPEG TSデータＳ1に変換する。
【００２３】
データ分離部としてのデマルチプレクス処理部１０２は、信号復調部１０１で復調されたストリームデータをビデオTSデータＳ2、オーディオTSデータＳ3およびその他TSデータＳ4に分離する。
【００２４】
デコード部としてのビデオ用及びオーディオ用MPEGデコーダ１０３，１０４は、デマルチプレクス処理部１０２で分離したビデオTSデータＳ2及びオーディオTSデータＳ3をデコードし、ビデオデータＳ6及びオーディオデータＳ7を出力する。
【００２５】
パターン比較処理部１０８は、MPEGデコーダ１０３でデコードされたビデオデータＳ6に画像として含まれる画面上の特定のオブジェクトを、デマルチプレクス処理部１０２で分離されたその他TSデータＳ4に含まれ、特定のオブジェクトを識別するための比較元データとパターン比較することにより、画面上における特定のオブジェクトの位置情報を生成する。
【００２６】
データ処理部１０５Ａは、デマルチプレクス処理部１０２で分離されたその他TSデータＳ4に含まれる特定のオブジェクトに関する表示データと、パターン比較処理部１０８で生成した位置情報を用いて画面上における特定のオブジェクトの位置に合わせて表示可能とする表示情報データＳ10を出力する。
【００２７】
以上の構成において、パターン比較処理部１０８及びデータ処理部１０５Ａの動作を中心に説明する。  
このデジタル放送受信機においては、放送送出側より放送波のデータには、符号Ｓ4で示されるその他TSデータとして、送出時点でのビデオデータＳ6内の画像として含まれる特定のオブジェクトに対して表示されるべき関連情報の表示データａ、および表示データａに対応する特定のオブジェクトをビデオデータＳ6内の画像より識別するための比較元データｂを含んだものがデジタル放送のコンテンツデータとして送出されている。
【００２８】
さらに、受信機側では、データ処理部１０５Ａは、符号Ｓ4で示す「その他TSデータ」を入力し、その他TSデータＳ4に、特定のオブジェクトを識別するための比較元データｂが含まれているかを解析し、存在していれば、その比較元データｂとその比較元データｂに対する識別子ｃを作成しパターン比較処理部１０８に登録する。符号Ｓ8は特定のオブジェクトを識別するための比較元データｂとその識別子ｃである。
【００２９】
データ処理部１０５Ａは、その他TSデータＳ4に含まれる表示データａ、比較元データｂ、識別子ｃ以外のデータに対しては、従来の受信機（図８）と同様の処理を実施する。
【００３０】
パターン比較処理部１０８では、MPEGデコーダ１０３から出力されるビデオデータＳ6のピクチャ（MPEGのPicture）を入力として取り込み、そのピクチャデータの画像内を、符号Ｓ8で登録された比較元データｂにてパターンマッチング処理を実施し、一致するオブジェクトがピクチャデータの画像内に存在していた場合は、データ処理部１０５Ａに対して、一致した比較元データの識別子ｃと一致するデータがピクチャデータ内で存在している座標位置を示す位置情報ｄを返す。符号Ｓ9は、画像パターン比較した結果得られた位置情報ｄと比較元データの識別子ｃである。
【００３１】
データ処理部１０５Ａは、符号Ｓ9にて得た識別子ｃの情報より、画面上に表示すべき情報ａをその他TSデータＳ4にて得たデータ内から取り出し、その表示データａを符号Ｓ9にて得た位置情報ｄを用いて、適切な表示データとして処理した後、表示情報データＳ10として、グラフィックス処理部１０６へ出力する。
【００３２】
グラフィックス処理部１０６は、表示情報データＳ10が送られている場合は、それをOSDデータＳ11として出力制御部１０７に出力し、表示情報データＳ10が来ていない場合は、それに関するOSDデータＳ11は出力されない。
【００３３】
出力制御部１０７は、MPEGデコーダ１０３，１０４からのビデオデータＳ6及びオーディオデータＳ7およびグラフィックス処理部１０６からのOSDデータＳ11を受け、それらを適切に処理してビデオ出力及びオーディオ出力として外部の表示デバイスに対して供給する。  
以上の処理をビデオの再生を行っている期間、実施する。
【００３４】
図２は比較元データｂと識別子ｃと表示データａの関係の一例を説明する図である。
【００３５】
図２において、ｂ1，ｂ2，ｂ3は特定のオブジェクト(例えば選手)を識別するための複数(ここでは３つ)の比較元データｂを示している。この３つの比較元データｂ1，ｂ2，ｂ3としては、例えばサッカー選手であれば、Ｔシャツ等のユニホームの色、選手の顔、シューズの形と言った３つの特徴データを、放送送出側で注目する一人の選手について３つの比較元データとして予め用意しておき、これら３つの比較元データをその他TSデータＳ4の比較元データｂとして表示データａ(選手の名前やマークなど)と共にストリームデータに含めて受信機側へ送信する。
【００３６】
受信機側では、データ処理部１０５Ａにおいて、デマルチプレクス処理部１０２にて分離されたその他TSデータＳ4に含まれる複数の比較元データｂのマッチング条件Ｊに基づいて識別子ｃが作成され、パターン比較処理部１０８に登録される。従って、識別子ｃは３つの比較元データｂ1，ｂ2，ｂ3についての条件Ｊによって決定されることになる。識別子ｃと表示データａはリンクしてあり、識別子ｃが決まれば表示データａが決定する。比較元データｂと識別子ｃは、識別子ｃを作成するときの条件Ｊでリンクさせることになる。どういう条件Ｊにするかは、システム制御部１２０によって設定される。
【００３７】
例えば、比較元データｂ1，ｂ2，ｂ3のうち少なくとも１つがピクチャ(Picture)データの画像内のオブジェクトに一致すれば、パターンマッチングした、とする条件Ｊ（オア条件に相当する）の下では、パターンマッチングをそれぞれ行ってｂ1，ｂ2，ｂ3のうちどれか１つ一致したものがあれば、必ず識別子ｃが作成され、この識別子ｃはそのオブジェクト(選手)の３つの特徴の１つを満たすものであるとして識別子ｃには表示データａがリンクされる結果、例えばその選手の名前やマークなどを示す表示データが画面上のオブジェクトである選手の近辺に表示されることになる。例えば、図３の画面表示例のように選手の近辺に「タロウ」といった選手名が表示される。
【００３８】
或いは、比較元データｂ1，ｂ2，ｂ3のうち少なくとも２つがピクチャデータの画像内のオブジェクトに一致すれば、パターンマッチングした、とする条件Ｊの下では、パターンマッチングをそれぞれ行って２つ一致したものがあれば、ｂ1，ｂ2，ｂ3のうちどれか２つ一致したものがあれば、必ず識別子ｃが作成されることになり、この識別子ｃはそのオブジェクト(選手)の３つの特徴の２つを満たすものであるとして識別子ｃには表示データａがリンクされる結果、例えばその選手の名前やマークなどを示す表示データが画面上のオブジェクトである選手の近辺に表示されることになる。この条件によれば、より高い精度でのパターンマッチングが可能となる。
【００３９】
同様にして、比較元データｂ1，ｂ2，ｂ3のうち３つがともにピクチャデータの画像内のオブジェクトに一致すれば、パターンマッチングした、とする条件Ｊ（アンド条件に相当する）の下では、最も高い精度でのパターンマッチングが可能となる。
【００４０】
なお、識別子ｃを作成する条件Ｊを上記のように幾つか用意してどの条件かを選択できる構成としてもよい。  
また、比較元データｂは１つの特徴データで構成されていてもよく、例えば選手の背番号を１つの比較元データとして画像パターン比較することも可能である。以下に、画面上の複数の選手それぞれについて選手名などのデータを同時に表示する場合について説明する。
例えば、試合の登録選手として１５人がいて、背番号を比較元データとして用いる場合、放送送出側でこれら１５人の全ての選手それぞれを識別するための１５個の異なった背番号を比較元データとして用意し、これら１５個の比較元データをその他TSデータＳ4の比較元データｂとして対応した１５個の表示データａ(選手の名前やマークなど)と共にストリームデータに含めて受信機側へ送信する。
【００４１】
受信機側では、データ処理部１０５Ａにおいて、１５人の選手それぞれの各１つの比較元データｂ1〜ｂ15に対して一対一で対応する１５個の識別子ｃ1〜ｃ15が作成され、パターン比較処理部１０８に登録される。この場合、一対一に対応する関係なので、１５個の識別子ｃ1〜ｃ15はそれぞれの対応する比較元データと全く同じであってもよい。
【００４２】
そして、受信機側では、これら１５人の選手に対して表示データａ1〜ａ15とそれぞれの比較元データｂ1〜ｂ15を用意しておいて、ユーザーがリモコンなどの操作手段を用いてシステム制御部１２０に指示することによって、図示しない表示デバイス上にオンスクリーン表示した１５人の選手の中から特定選手を数名（例えば注目する５人とか）選択できるようにする。勿論全ての選手を選択することも可能である。このとき、システム制御部１２０は、データ処理部１０５Ａ、パターン比較処理部１０８及びグラフィックス処理部１０６を制御することによって、選手の一覧をオンスクリーン表示したり、操作手段による選択指示に応じて選択された特定選手のみの表示データａ及び位置情報ｄに基づき必要な表示情報データを作成して画面上の各オブジェクト（画像）に対して表示データを表示する制御を行う。
【００４３】
このように複数の特定のオブジェクト(選手)に対してそれぞれの表示データ(選手名)を各々のオブジェクトの近辺に表示してユーザーが注目選手を視認し易くすることができる。
【００４４】
さらに、大学駅伝や実業団駅伝のように個々の選手についての情報(選手名など)よりもチーム名(大学名或いは団体名)を知りたいという要望があるとき、走行する選手の近辺にチーム名を表示したり選手名を表示したりするのを選択できるようにしてもよい。これは、放送送出側から個々の選手について送られてくるデータと各チームについて送られてくるデータとを、受信機側に取り込んでどちらかを選択できるようになっていればよい。
【００４５】
なお、パターン比較処理部１０８でパターンマッチングする際に、１つの比較元データよりも複数の比較元データを用意した方が高い精度のマッチングを行うための例として、同じ人物に対して複数の比較元データを用意する際には、その人物について幾つものポーズ(姿勢)の画像データが比較元データとして用意されていた方が良いことは勿論である。スポーツ選手のように動きのある人物に対してパターンマッチングを行う際には特に有効である。
【００４６】
第１の実施形態によれば、放送送出側は任意の若しくは特定のオブジェクトに対して表示されるべきデータａとこのデータａに対応する比較元データｂを送信さえしておけば、受信機側がａ,ｂのデータを元に、パターンマッチングを用いて、再生されるビデオデータＳ6のピクチャデータを元に任意の若しくは特定のオブジェクトの再生画面上の位置を調べ、それに応じてオブジェクトに対する表示データａを表示する。
【００４７】
そのため、生中継のように注目するオブジェクトがランダムな動作をする場合で、その特定のオブジェクトが画面上のどこの位置にいても、その位置に表示されるべきデータａを適切に表示させることが可能となる。
【００４８】
この結果、図３のような画面のスポーツ中継などにおいて、注目するオブジェクトを特定の選手とし、識別するための比較元データｂを特定の選手の画像データ、表示させるべきデータａをその選手の名前などの情報とすると、中継画面上を選手が移動した場合でも、データａを表示させる場合、常に適切に選手が存在している位置情報がパターンマッチングにより得られるため、選手が表示されているところへ表示させるべきデータａを表示させることが可能となる。この結果、視聴者が選手を識別するための情報がより適切に提示され、視聴者が選手を判断することが容易となる利点を有する。
【００４９】
従来のデジタル放送受信機と比べ、画面上の特定の任意の画像(オブジェクト)の位置にあわせて、特定のオブジェクト向けの情報を表示することができるようになる。その結果、放送受信時に得られる情報がどのオブジェクト向けのものかを視聴者が容易に判断できるようになる効果、および視聴者が注目している任意のオブジェクトが画面上どの位置にあるのかを容易に確認できるようになるなどの効果が得られる。
【００５０】
［第２の実施形態］
図４は本発明の第２の実施形態のデジタル放送受信機のブロック図を示している。図４は、図１の第１の実施形態のデジタル放送受信機に対し動き検出処理部を追加した構成となっている。  
図４において、デジタル放送受信機１００Ｂは、信号復調部１０１と、デマルチプレクス処理部１０２と、ビデオ用MPEGデコーダ１０３及びオーディオ用MPEGデコーダ１０４と、データ処理部１０５Ｂと、グラフィックス処理部１０６と、出力制御部１０７と、パターン比較処理部１０８と、動き検出処理部１０９と、システム制御部１２０とを備えて構成されている。図１と同一部分には同一符号を付している。
【００５１】
データ処理部１０５Ｂは、第１の実施形態の機能の他に内部に動き検出フラグ１０５Ｂ-1を持ち、このフラグが０の間は、入力されるデータＳ4から、第１の実施形態と同様に比較元データｂ及びその識別子ｃの出力Ｓ8をパターン比較処理部１０８へ出力する。このフラグは、初期値は０であり、動き検出処理部１０９からの入力値Ｓ13により、値が設定されるようになっている。符号Ｓ13は動き検出フラグ変更値である。
【００５２】
パターン比較処理部１０８はデータＳ8が入力され、第１の実施形態と同様の出力であるデータＳ9を動き検出処理部１０９へ出力する。パターン比較処理部１０８では、第１の実施形態と同様に比較元データの識別子ｃが登録される。
【００５３】
動き検出処理部１０９は、ビデオデータＳ6のピクチャ(Picture)データ用のバッファ１０９-1と位置情報用バッファ１０９-2を持っており、ピクチャデータ用バッファ１０９-1に直前に入力されたピクチャデータを保持し、位置情報用バッファ１０９-2に直前のピクチャデータに対する位置情報を保持している。
【００５４】
動き検出処理部１０９は、ピクチャデータが入力される毎に処理が実施され、パターン比較処理部１０８からの入力Ｓ9がなければ、ピクチャデータ用バッファ１０９-1にあるピクチャデータと、新たに入力されるピクチャデータの間で、位置情報用バッファ１０９-2に保持されている位置情報で示される部分の画像のズレを検出し、画像間の移動量(方向及び距離のデータ)を作成し、位置情報用バッファ１０９-2に保持されている位置情報に対して検出した移動量を加えて作成される更新された位置情報ｄ’と比較元データの識別子ｃをデータ処理部１０５Ｂに出力する。符号Ｓ12は、更新された位置情報ｄ’と比較元データの識別子ｃである。その際、位置情報用バッファ１０９-2へ作成したｄ’を保存し、また、動き検出処理部１０９の出力Ｓ13としてはピクチャデータが連続していること示す１の値を出力する。ただし、動き検出処理部１０９が検出した移動量が一定以上の大きさの場合は、２つのピクチャデータの画像間でシーンチェンジが発生したと判断し、移動量ではなく、パターン比較処理部１０８より入力されたデータＳ9の位置情報ｄをそのまま動き検出処理部１０９の出力Ｓ12のデータとしてデータ処理部１０５Ｂに出力し、動き検出処理部１０９からの出力Ｓ13としてはピクチャデータが連続していないこと示す０の値を出力する。
【００５５】
一方、動き検出処理部１０９へパターン比較処理部１０８からの入力Ｓ9がある場合は、特に処理をせずにパターン比較処理部１０８から入力されたデータＳ9の位置情報ｄと比較元データの識別子ｃをデータＳ12としてデータ処理部１０５Ｂへ出力する。その際、位置情報用バッファ１０９-2へ位置情報ｄを保存し、また、動き検出処理部１０９の出力Ｓ13としてはピクチャデータが連続していること示す１の値を出力する。
【００５６】
ここで、データ処理部１０５Ｂにおける動き検出フラグ１０５Ｂ-1の働きについて説明しておく。  
データ処理部１０５Ｂは動き検出フラグ１０５Ｂ-1に０が設定されているときにはＳ8を出力し、１が設定されている場合はＳ8を出力しない。また、パターン比較処理部１０８はＳ8が入力されない場合、Ｓ9を出力しない。つまり、動き検出フラグ１０５Ｂ-1に１が設定されている場合は、Ｓ8(パターンの比較元データ)がパターン比較処理部１０８へ入力されないため、パターン比較処理部１０８でのパターン比較が行われず、Ｓ9が動き検出処理部１０９へ送られないため、動き検出処理部１０９は必ず直前のピクチャと入力されたピクチャとの動きの検出からＳ12を出力することになる。逆に、動き検出フラグ１０５Ｂ-1に０が設定されている場合は、パターン比較処理部１０８はＳ9を出力しますので、必ず動き検出処理部１０９はＳ9の値からＳ12を出力することになる。
【００５７】
データ処理部１０５Ｂは、動き検出処理部１０９より入力されるデータＳ12の識別子ｃの情報より、その他ＴＳデータＳ4て得たデータ内から画面上に表示すべき情報ａを取り出し、動き検出処理部１０９より得たデータＳ12の位置情報ｄもしくはｄ’を用いて、適切な表示データとして処理した後、表示情報データＳ10として、グラフィックス処理部１０６へ出力する。  
グラフィックス処理部１０６、および出力制御部１０７は第１の実施形態と同様の動作を行う。
【００５８】
第２の実施形態においては、ピクチャデータ間の差異が小さい場合（換言すれば、ビデオデータ的にシーンが連続していて、Ｓ13の値が１を出力しているような場合）は、動き検出処理部１０９はピクチャデータ間における特定のオブジェクトの移動量を検出して、データ処理部１０５Ｂはその移動量に合わせてグラフィックス処理部１０６で表示する表示データの位置をずらすことにより、移動する特定のオブジェクトの位置に合わせて情報を表示させることができる。
【００５９】
第２の実施形態によれば、第１の実施形態で得られる、特定のオブジェクトの付近に関連する情報を表示するという効果を、比較的処理が軽い動き検出処理によって実現できるようになるため、ピクチャデータ毎に処理が重いパターンマッチング処理を行う必要がなくなり、処理系を容易な構成で実現できる。なお、第１の実施形態では、前の画面と現在の画面とでずれの大小を検出していないので、比較元データで画面ごとに画面の隅から順にパターンマッチング処理を行っていく必要があり処理系の演算量が大きくな負荷が重くなる。
【００６０】
従って、第２の実施形態では、第１の実施形態で示している機能を実装した際、画像パターン比較処理が遅い場合などに、画像比較の回数を減らすことが可能となり、第１の実施形態の発明に必要な画像比較処理の処理能力が低い構成でも第１の実施形態の機能を効率良く実現することが可能となる。
【００６１】
［第３の実施形態］
図５は本発明の第３の実施形態のデジタル放送受信機のブロック図を示している。図５は、図４の第２の実施形態のデジタル放送受信機のパターン比較処理部に対し、パターン比較エリアテーブルを持たせた構成となっている。図６は画面を所定のサイズの格子状のエリアに区分けした状態を示している。  
図５において、デジタル放送受信機１００Ｃは、信号復調部１０１と、デマルチプレクス処理部１０２と、ビデオ用MPEGデコーダ１０３及びオーディオ用MPEGデコーダ１０４と、データ処理部１０５Ｂと、グラフィックス処理部１０６と、出力制御部１０７と、パターン比較処理部１０８Ａと、動き検出処理部１０９と、システム制御部１２０とを備えて構成されている。図１と同一部分には同一符号を付している。
【００６２】
追加されるパターン比較エリアテーブル１０８Ａ-1には、入力されるビデオデータＳ6に対しパターンマッチングを行う処理単位を示すデータarea_dataが登録される。このテーブル１０８Ａ-1に登録されるデータarea_dataは、図６に示すようなビデオデータＳ6におけるピクチャ(Picture)データに相当する画面サイズを所定の大きさの単位で格子状に例えばＡ１〜Ａ３０とエリア分けした際の各格子領域(図６の太い実線にて区切られた領域)の位置とサイズのデータである。このデータarea_dataは、放送送出側より送られて来るその他TSデータＳ4’に含まれており、データ処理部１０５Ｂにより取り出され、比較元データｂとその識別子ｃのデータにデータarea_dataが付加された状態(データＳ8’)でパターン比較処理部１０８Ａに入力され、データarea_dataはパターン比較エリアテーブル１０８Ａ-1に格納される。
【００６３】
図６のように画面のエリアを格子状にＡ１〜Ａ３０と分けた場合の、パターン比較エリアテーブル１０８Ａ-1に登録されるデータarea_dataのフォーマットは、以下のようになる。
【００６４】
area_data[ｉ]＝｛(Ａ１の左上の座標データ，幅，高さ)，(Ａ２の左上の座標データ，幅，高さ)，‥‥，(Ａ３０の左上の座標データ，幅，高さ)｝
ｉ：パターン比較エリアテーブルでのフラグデータが指定する番号
また、放送送出側より放送されるコンテンツのビデオ TSデータＳ2’には、任意のピクチャ(Picture)データのMPEGで規定されるユーザー(User)データ部分にパターン比較エリアフラグデータ(Ｓ14)を含む形で送出される。つまり、ビデオ TSデータＳ2’はユーザーデータ部分にパターン比較エリアフラグデータ(Ｓ14)を付加されたピクチャデータを含むビデオTSデータである。このパターン比較エリアフラグデータは、パターン比較エリアテーブル１０８Ａ-1に格納されている各エリアのデータを選択するために使われる。
【００６５】
第３の実施形態では、データ処理部１０５Ｂは、デマルチプレクス処理部１０２より入力されるデータＳ4’より、第１の実施形態と同様に表示データａ,比較元データｂ,識別子ｃのデータを取り出し、さらに前述のパターン比較エリアテーブルのデータarea_dataを追加してデータＳ8’として出力する。この際、比較元データｂは、データＳ2’で付加されているパターン比較エリアフラグデータに応じたサイズのデータである。
【００６６】
パターン比較処理部１０８Ａには、データＳ8’およびビデオ用MPEGデコーダ１０３より取り出されたユーザーデータであるパターン比較エリアフラグデータ(Ｓ14)が入力される。  
このパターン比較処理部１０８ＡにビデオデータＳ6が入力された場合、パターン比較処理部１０８Ａは、パターン比較エリアテーブル１０８Ａ-1内に登録されている各格子データから、最新のパターン比較エリアフラグデータ(Ｓ14)により選択されるテーブルのデータを用いて、そのテーブル内の各格子データが示すエリア部分でパターンマッチングを実施する。
【００６７】
パターンマッチング処理の結果は、第２の実施形態と同様の出力(Ｓ9)としてデータを動き検出処理部１０９へ出力する。  
動き検出処理部１０９は、第２の実施形態と同様の処理を行い、その結果データＳ12、Ｓ13をデータ処理部１０５Ｂへ出力する。
【００６８】
データ処理部１０５Ｂは、第２の実施形態と同様に動き検出処理部１０９より入力されるデータＳ12の識別子ｃの情報より、データＳ4’にて得たデータ内から画面上に表示すべきデータａを取り出し、データＳ12より得た位置情報ｄもしくはｄ’を用いて、適切な表示データとして処理した後、表示情報データＳ10として、グラフィックス処理部１０６へ出力する。  
グラフィックス処理部１０６、および出力制御部１０７は第１の実施形態と同様の動作を行う。
【００６９】
なお、第３の実施形態は、第２の実施形態(図２)に適用した例を示しているが、第１の実施形態(図１)に適用してもよいことは勿論である。
【００７０】
第３の実施形態によれば、放送送出側は、ビデオデータに含まれるピクチャデータのユーザーデータ部分に、表示されている特定のオブジェクトのサイズに最も近いパターン比較エリアのデータを示すパターン比較エリアフラグデータを登録して送出し、比較元データとなるパターンに表示されているサイズの特定のオブジェクトの比較元データを送出することで、比較する画像のエリアのサイズを常にほぼ同等のサイズにすることができる。
【００７１】
例えば、スポーツの中継などにおいて、対象となる選手がグランド全体を映している引き絵の中に存在する場合でも、アップで映している場合でも、放送送出側が映し方に応じたサイズで、パターン比較エリアフラグデータや比較元データを送出することにより、パターンマッチングすべき対象を常にほぼ同等のサイズにすることが可能となる。
【００７２】
つまり、放送送出側は、パターン比較エリアテーブルのデータを送出する際に、格子状に区分けしたエリアのサイズの大きさを比較元データのサイズに合わせて設定(調整)してやれば、画面上の各エリアの画像と比較元データの画像とのパターン比較処理の演算が簡単になり、処理系の負荷を軽減することができる。
【００７３】
このような機能を追加することにより、放送されているビデオデータの画像が引き絵なのかアップなのかによって、ビデオデータ内で対象とする任意のオブジェクトのサイズが大きく変わってしまう場合でも、パターンマッチング処理を行うサイズが対象データおよび比較元データで常にほぼ同じとなるため、パターン比較処理部にてサイズ変化に対応するパターンマッチング処理(パターンマッチング処理における比較するもの同士のサイズの違いを変更する処理)を行わずにすみ、パターン比較処理部で行うパターンマッチング処理の負荷を大幅に軽減することが可能となる。
【００７４】
これに対して、第１の実施形態および第２の実施形態では、ビデオデータの画像が引き絵とアップとの間で変わるとき、パターン比較する対象データのサイズが大きく変わるので、比較元データのサイズを縮小したり拡大して比較する回路を入れるか、放送送出側よりサイズが異なる比較元データの画像を幾通りも送る必要がある。
【００７５】
これにより、パターン比較処理部で行うパターンマッチング処理をほぼ同等のサイズでの比較機能のみとすることができ、第１の実施形態および第２の実施形態で得られるのと同様の効果を、より簡単なパターン比較処理部の機能にて実現できる。
【００７６】
第１の実施形態及び第２の実施形態で示している機能を実装した際、画像比較を行う処理単位の範囲を細かく設定可能となる。これにより、画像比較の対象とするオブジェクトと比較元データのサイズの差が小さくなるため、画像比較処理を容易にし、かつ精度を向上させることが可能となる。そのため、第１の実施形態の発明に必要な画像比較処理の処理能力が低い構成でも第１の実施形態の機能を効率良く実現することが可能となる。
【００７７】
［第４の実施形態］
図７は本発明の第４の実施形態のデジタル放送受信機のブロック図を示している。図７は、図１の第１の実施形態のデジタル放送受信機に対し比較元データ作成装置を追加した構成となっている。  
図７において、デジタル放送受信機１００Ｄは、信号復調部１０１と、デマルチプレクス処理部１０２と、ビデオ用MPEGデコーダ１０３及びオーディオ用MPEGデコーダ１０４と、データ処理部１０５Ｃと、グラフィックス処理部１０６と、出力制御部１０７と、パターン比較処理部１０８と、比較元データ作成装置１１０と、システム制御部１２０とを備えて構成されている。図１と同一部分には同一符号を付している。
【００７８】
この比較元データ作成装置１１０は、システム制御部１２０により操作される外部I/O装置(例えばSDカードなど)を利用して、第１の実施形態にて放送送出側より送出される放送波のデータに含まれるその他TSデータＳ4に相当するデータを受信機１００Ｄの外部から取り込むようにしている。
【００７９】
或いは、受信機１００ＤのMPEGデコーダ１０３の出力であるビデオデータＳ6の所望のピクチャデータを静止画として比較元データ作成装置１１０へ取り込み、システム制御部１２０で制御されるポインティングデバイス(例えばリモコンなど)により、その静止画内から所望の画像範囲を指定し、それを比較元データｂとして使用し、外部I/O装置より表示されるべき表示データａを取り込むことによって、表示データａ及び比較元データｂを含むその他TSデータＳ4に相当するデータを作成することができる。  
この比較元データ作成装置１１０は、作成したデータＳ4に相当するデータをデータ処理部１０５Ｃへ出力する。
【００８０】
第４の実施形態の場合、データ処理部１０５Ｃは、比較元データ作成装置１１０からの入力がある場合は、デマルチプレクス処理部１０２からのその他TSデータＳ4は無視する機能を有する。  
その他の機能は第１の実施形態と同等の機能を備えている。
【００８１】
第４の実施形態によれば、第１の実施形態で示している機能を実装した際、画像比較の対象とするオブジェクトに対する比較元データおよび表示すべき情報のデータを、ユーザー側で自由に用意したり作成したりすることができるようになる。その結果、第１の実施形態の発明の効果に加え、本来放送としては特別な情報が付加されていないオブジェクトに対し、ユーザー独自にそのオブジェクトに関連する情報を表示させるなど、ユーザーの視聴内容に応じた情報表示などが容易に行える。
【図面の簡単な説明】
【００８２】
【図１】本発明の第１の実施形態のデジタル放送受信機を示すブロック図。
【図２】比較元データと識別子と表示データの関係の一例を説明する図。
【図３】第１の実施形態に係る画面表示例を示す図。
【図４】本発明の第２の実施形態のデジタル放送受信機を示すブロック図。
【図５】本発明の第３の実施形態のデジタル放送受信機を示すブロック図。
【図６】画面を所定のサイズの格子状に区分けした状態を示す図。
【図７】本発明の第４の実施形態のデジタル放送受信機を示すブロック図。
【図８】従来のデジタル放送受信機を示すブロック図。
【符号の説明】
【００８３】
１００,１００Ａ,１００Ｂ,１００Ｃ,１００Ｄ…デジタル放送受信機
１０１…信号復調部
１０２…デマルチプレクス処理部(データ分離部) 
１０３,１０４…MPEGデコーダ(デコード部) 
１０５Ａ,１０５Ｂ,１０５Ｃ…データ処理部
１０８,１０８Ａ…パターン比較処理部
１０９…動き検出処理部
【図１】
0004444323.tif 000002
【図２】
0004444323.tif 000003
【図３】
0004444323.tif 000004
【図４】
0004444323.tif 000005
【図５】
0004444323.tif 000006
【図６】
0004444323.tif 000007
【図７】
0004444323.tif 000008
【図８】
0004444323.tif 000009