(57)【要約】【課題】サブ画像データの一部をメイン画像データに合成する際において、セカンダリビデオの合成品位の低下をより軽減できる映像出力装置を提供する【解決手段】表示装置３と接続可能な映像出力装置１であって、プライマリデータを取得するＣＰＵ１４と、第１画像を示す第１領域と第２画像を示す第２領域とを有するセカンダリデータを取得するＣＰＵ１４と、前記取得したセカンダリデータの第１領域と第２領域の境界を検出するＣＰＵ１４と、ＣＰＵ１４が検出した境界に基づいて、セカンダリデータを変換するＣＰＵ１４と、変換されたセカンダリデータの少なくとも一部を、取得したプライマリデータと合成し、合成画像データを生成するＣＰＵ１４と、合成画像データを表示装置３に出力するＣＰＵ１４と、を備える。【選択図】図１
2010251818.tif 000002
【特許請求の範囲】
【請求項１】
表示装置と接続可能な映像出力装置であって、
メイン画像データを取得する第１取得手段と、
第１画像を示す第１領域と第２画像を示す第２領域とを有するサブ画像データを取得する第２取得手段と、
前記取得したサブ画像データの前記第１領域と前記第２領域の境界を検出する境界検出手段と、
前記検出した境界に基づいて、前記サブ画像データを当該サブ画像データと異なる画像データに変換する変換手段と、
前記変換されたサブ画像データの少なくとも一部を、前記取得したメイン画像データと合成し、合成画像データを生成する合成手段と、
前記合成画像データを前記表示装置に出力する出力手段と、
を備える映像出力装置。
【請求項２】
前記変換手段は、前記検出した境界に基づいて取得される第１領域のサブ画像データを、当該サブ画像データよりも画素数の多い画像データに変換する、
請求項１に記載の映像出力装置。
【請求項３】
前記変換手段は、前記検出した境界における前記第１領域と前記第２領域のサブ画像データの特徴情報の変化に応じて、第１領域のサブ画像データを用いるか、第１領域及び第２領域のサブ画像データを用いるかを選択し、当該選択した領域のサブ画像データを変換する、
請求項１に記載の映像出力装置。
【請求項４】
前記境界検出手段は、所定又は任意の特徴情報に基づいて前記取得したサブ画像データの前記第１領域と前記第２領域の境界を検出する、
請求項１に記載の映像出力装置。
【請求項５】
前記合成手段は、前記変換されたサブ画像データの第１領域の画像データを、前記取得したメイン画像データと合成し、合成画像データを生成する、
請求項１に記載の映像出力装置。
【請求項６】
前記変換手段は、前記第２領域の画像データに基づかず、前記第１領域の画像データに基づいて、サブ画像データを変換し、
前記合成手段は、前記変換されたサブ画像データの第１領域の画像データを、前記取得したメイン画像データと合成し、合成画像データを生成する、
請求項１に記載の映像出力装置。
【請求項７】
前記メイン画像データと前記サブ画像データは、映像記録に関するフォーマットが異なる、
請求項１に記載の映像出力装置。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、ＢＤプレーヤーなどの映像出力装置に関するものである。
【背景技術】
【０００２】
ＢＤプレーヤーは、ＢＤ−ＲＯＭディスクから映像データを読み出し、読み出した映像データを表示装置に出力する。表示装置では、入力された映像データを基に映像を表示する。ＢＤ−ＲＯＭディスクには、映像データが音声データなどと共に記録されている。
【０００３】
ここでＢＤ−ＲＯＭディスクには、プライマリビデオと、セカンダリビデオと称される２種類の映像データを記録することが可能である（図１５）。ＢＤプレーヤーは、これらプライマリビデオとセカンダリビデオを取得し、これらビデオ信号を合成して、ピクチャインピクチャとして出力することができる（図１６）。
【０００４】
特許文献１に記載の映像出力装置では、プライマリビデオに対してセカンダリビデオを合成する場合、プライマリビデオに対してセカンダリビデオの合成位置を指定できるようにしている。
【０００５】
また、特許文献１の請求項３には、ｌｕｍａ  ｋｅｙｉｎｇ合成（以下、ルマキー合成と称する）により、プライマリビデオにセカンダリビデオを合成することが記載されている。
【先行技術文献】
【特許文献】
【０００６】
【特許文献１】特開２００７−２５９４８１号公報
【発明の概要】
【発明が解決しようとする課題】
【０００７】
ところで、セカンダリビデオに画像処理を施した後に、ルマキー合成によりプライマリビデオにセカンダリビデオを合成すると、セカンダリビデオの合成品位が下がる。以下、具体的に説明する。
【０００８】
ルマキー合成は、セカンダリビデオの輝度情報に基づいて、セカンダリビデオの一部を、プライマリビデオの一部と置き換えるものである。そのため、ルマキー合成を行なう前に、セカンダリビデオに画像処理が施されると、セカンダリビデオは、実際に表示されない領域の情報に基づいて、表示される領域の情報が生成されてしまう。例えば、図１５のようなセカンダリビデオが存在したとする。このセカンダリビデオにおいて、領域Ａが表示される領域、領域Ｂが表示されない領域であるとする。この場合、セカンダリビデオに拡大処理を施すと、領域Ａと領域Ｂの境界付近の情報は、領域Ｂの画像データに影響を受ける。つまり、セカンダリビデオの境界付近の情報は、画像処理によって品位の低い映像になる。
【０００９】
特に、プライマリビデオとセカンダリビデオの映像フォーマット（例えば、解像度、ピクセルアスペクト比、アスペクト比）が異なる場合、合成境界でノイズが発生しやすい。なお、ピクセルアスペクト比は、画面を構成する１つの画素の縦横比であり、アスペクト比は、画面全体の縦横比である。これは、プライマリビデオとセカンダリビデオの映像フォーマットが異なることによって、ルマキー合成をする前に、セカンダリビデオの映像フォーマットをプライマリビデオの映像フォーマットに一致させることが、違和感のない表示をする上で必須になるからである。
【００１０】
具体的に説明する。プライマリビデオとセカンダリビデオのピクセルアスペクト比が異なる場合を例にして説明する。プライマリビデオの画素が正方画素であり、セカンダリビデオの画素が長方画素であるとする。映像出力装置は、プライマリビデオにセカンダリビデオを合成する場合、セカンダリビデオの画素の縦横比をプライマリビデオの画素の縦横比と一致させる必要がある（図１７）。これは、セカンダリビデオをプライマリビデオの画素の縦横比と一致させずに合成すると、プライマリビデオに合成されたセカンダリビデオの映像が違和感のある映像になってしまうからである。
【００１１】
このようにセカンダリビデオをプライマリビデオに一致させる際、セカンダリビデオに対して画像処理が行われる。したがって、上記説明したように、ルマキー合成前に、画像処理が行われ、セカンダリビデオの合成品位が低下する原因となる。なお、プライマリビデオは、メイン画像データの一例、セカンダリビデオは、サブ画像データの一例、ルマキー合成は、サブ画像データの一部をメイン画像データに合成する一部合成の一例である。
【００１２】
そこで本発明は、上記課題を解決するために、サブ画像データの一部をメイン画像データに合成する際において、サブ画像データの合成品位の低下をより軽減できる映像出力装置を提供することを目的とする。
【課題を解決するための手段】
【００１３】
すなわち、本発明は、表示装置と接続可能な映像出力装置であって、メイン画像データを取得する第１取得手段と、第１画像を示す第１領域と第２画像を示す第２領域とを有するサブ画像データを取得する第２取得手段と、前記取得したサブ画像データの前記第１領域と前記第２領域の境界を検出する境界検出手段と、前記検出した境界に基づいて、前記サブ画像データを当該サブ画像データと異なる画像データに変換する変換手段と、前記変換されたサブ画像データの少なくとも一部を、前記取得したメイン画像データと合成し、合成画像データを生成する合成手段と、前記合成画像データを前記表示装置に出力する出力手段と、を備える。
【００１４】
このようにすれば、サブ画像データの一部をメイン画像データに合成する前に、サブ画像データに対して画像処理を行う場合であっても、第１領域と第２領域の境界に基づいて、サブ画像データを変換することができる。例えば、サブ画像データの一部（例えば、第１領域）の画像データを、第２領域のサブ画像データに基づいて生成されなくなる。
【００１５】
また、好ましくは、前記変換手段は、前記検出した境界に基づいて取得される第１領域のサブ画像データを、当該サブ画像データよりも画素数の多い画像データに変換する。
【００１６】
また、好ましくは、前記変換手段は、前記検出した境界における前記第１領域と前記第２領域のサブ画像データの特徴情報の変化に応じて、第１領域のサブ画像データを用いるか、第１領域及び第２領域のサブ画像データを用いるかを選択し、当該選択した領域のサブ画像データを変換する。
【００１７】
また、好ましくは、前記境界検出手段は、所定又は任意の特徴情報に基づいて前記取得したサブ画像データの前記第１領域と前記第２領域の境界を検出する。
【００１８】
また、好ましくは、前記合成手段は、前記変換されたサブ画像データの第１領域の画像データを、前記取得したメイン画像データと合成し、合成画像データを生成する。
【００１９】
また、好ましくは、前記変換手段は、前記第２領域の画像データに基づかず、前記第１領域の画像データに基づいて、サブ画像データを変換し、前記合成手段は、前記変換されたサブ画像データの第１領域の画像データを、前記取得したメイン画像データと合成し、合成画像データを生成する。
【発明の効果】
【００２０】
本発明の映像出力装置によれば、サブ画像データの一部をメイン画像データに合成する際において、サブ画像データの合成品位の低下をより軽減できる。
【図面の簡単な説明】
【００２１】
【図１】図１は映像出力装置の構成例を示した図である。（実施例１）
【図２】図２は映像出力装置における、ＣＰＵの機能ブロックを示した図である。（実施例１）
【図３】図３は、映像データ１（プライマリビデオ）及び映像データ２（セカンダリビデオ）の一例を示した図である。（実施例１）
【図４】図４は映像データ２の一部を拡大表示した、説明図である。（実施例１）
【図５】図５は映像データ１と映像データ２を合成した例を示した、説明図である。（実施例１）
【図６】図６は映像出力装置の動作を示した、フローチャートである。（実施例１）
【図７】図７は映像リピート手段の動作を示した、説明図である。（実施例１）
【図８】図８はフィルタ手段の動作を示した、説明図である。（実施例１）
【図９】図９は映像リピート手段の動作を示した、説明図である。（実施例１）
【図１０】図１０は従来処理の動作を示した、説明図である。（実施例１）
【図１１】図１１は映像出力装置における、ＣＰＵの機能ブロックを示した図である。（実施例２）
【図１２】図１２は映像データ２の一部を拡大表示した、説明図である。（実施例２）
【図１３】図１３は映像出力装置の動作を示した、フローチャートである。（実施例２）
【図１４】図１４は、画像データの一部を拡大した図である。
【図１５】図１５は、プライマリピクチャとセカンダリピクチャを説明するための図である。
【図１６】図１６は、ピクチャインピクチャの一例を示す図である。
【図１７】図１７は、セカンダリピクチャの拡大を説明するための図である。
【発明を実施するための形態】
【００２２】
以下、本発明の一実施の形態について、図面を参照して説明する。
【００２３】
本実施の形態では、図３における映像データ１に映像データ２をルマキー合成し、図５のような映像データを生成する場合において、映像データ２にノイズがなるべくのらないように実現した。
（実施例１）
＜１．構成＞
＜１−１．映像出力装置の構成例＞
図1は、映像出力装置の構成を示したブロック図である。プレーヤー１は、リモコン４により、ユーザーからの操作を受けつけると、ディスクドライブ２によりＢＤ−ＲＯＭディスクから映像データを取得し、加工して、表示装置３に表示させるものである。以下、具体的に説明する。
【００２４】
プレーヤー１は、フラッシュメモリ１１、バッファメモリ１２、コネクタ１３、ＣＰＵ１４、赤外線センサー１５等から構成される。フラッシュメモリ１１は、プレーヤー１の動作を行うソフトウェアが格納されている。バッファメモリ１２は、映像データをデコードしたり、拡大縮小などの加工をする際に必要なデータの記憶手段である。バッファメモリ１２は、例えば、ＤＲＡＭなどで実現可能である。
【００２５】
コネクタ１３は、表示装置３に接続するためのデータを整えるものである。また、コネクタ１３は、ディスクドライブ２と有線又は無線で接続されて、ディスクドライブ２とのデータの送受信を可能にする。
【００２６】
ＣＰＵ１４は、プレーヤー１の主たる動作を行う部分である。ＣＰＵ１４は、赤外線センサー１５によって受信したユーザーの操作信号に基づき、ディスクドライブ２より、ＢＤ−ＲＯＭの映像データを取得し、表示装置３に出力できる形態に加工するものである。ＣＰＵ１４の構成を具体的に説明する。
【００２７】
ＣＰＵ１４は、ストリーム制御部１４１、デコーダ１４２、ＡＶ入出力部１４３等で構成されている。ＣＰＵ１４は、マイクロコンピュータで実現してもよいし、ハードワイヤードな回路で実現してもよい。ＣＰＵ１４は、集積回路であれば、どのような構成であってもよい。
【００２８】
ストリーム制御部１４１は、ディスクドライブ２のＢＤ−ＲＯＭディスクから圧縮加工されている映像データを読み出し、取得する。デコーダ１４２は、ストリーム制御部１４１によって読み出された圧縮された映像データをデコードし、圧縮データから伸張し、映像データに戻すものである。
【００２９】
デコーダ１４２は、ディスクドライブ２に記憶された複数の映像データを取得し、デコードすることができるものである。
【００３０】
ＡＶ入出力部１４３は、映像データを加工し、合成等を行うものである。
【００３１】
ディスクドライブ２は、ＢＤやＤＶＤ、ＣＤなどから情報を読み出すディスクドライブである。ディスクドライブ２は、一般的な技術であるため、詳細は省略する。なお、本実施の形態では、ディスクドライブ２によって情報を読み出すようにしたが、これに限られず、ＨＤドライブによってＨＤから情報を読み出すようにしてもかまわない。また、放送局から放送された放送波を受信して、映像データを取得してもかまわない。
【００３２】
表示装置３は、プレーヤー１によって出力された情報を表示するモニターである。表示装置３に用いられるパネルは、液晶パネル、有機ＥＬパネル、又はＰＤＰなどが考えられるが、これに限られない。
【００３３】
＜１−２．映像データ１及び映像データ２＞
図３は、ディスクドライブ２に記憶された映像データ１と映像データ２の一例を示した図である。
【００３４】
映像データ１は、例えば、プライマリビデオと呼ばれるものであり、映画鑑賞時などの本編の鑑賞用に主に用いられる。
【００３５】
デコーダ１４２によって圧縮を伸張した後の映像データ１の解像度は、例えば、水平１９２０画素、垂直１０８０画素の映像であり、水平、垂直の縦横比は、１６：９の比率となっている。
【００３６】
ＢＤ−ＲＯＭの規格では、プライマリビデオに対して、特典映像などをセカンダリビデオとして用意して、プライマリビデオと合成することが出来ることとなっている。
【００３７】
図３における映像データ２は、かかるセカンダリビデオの一例を示したものである。
【００３８】
デコーダ１４２によって圧縮伸張した後の映像データ２の解像度は、例えば、水平７２０画素、垂直４８０画素の映像である。映像の縦横比は例えば、３：２となっている。
【００３９】
映像データ２は、その輝度レベルに応じて、映像データ１と合成されるので、合成後に表示したくない部分は、輝度を下げた色とされており、例えば、黒色などに加工されている。
【００４０】
＜１−３．ＣＰＵの機能ブロック＞
次に、ＣＰＵ１４の機能ブロックを説明する。ＣＰＵ１４は、映像データ２を拡大又は縮小加工した後に、映像データ２を映像データ１と合成する。以下、ＣＰＵ１４の構成を図２を用いて説明する。なお、図２は、ＣＰＵ１４の機能ブロックを示した図である。図４は、図３の映像データ２における、Ａライン目の画素毎の輝度レベルを示す図である。ここで、図４は、図３の境界Ｂ付近を示している。
【００４１】
ＣＰＵ１４の各手段を説明する。各手段は、図１のＡＶ入出力部１４３で実現可能である。
【００４２】
境界検出手段２１は、映像データ２の輝度レベルに基づいて、映像データ２の合成境界を検出するものである。図４に示すように、映像データ２の輝度値は、表示すべき領域と、表示すべきでない領域を、輝度レベルで分けるようにしている。例えば、映像データ２の表示すべきでない部分は、輝度の低い黒色などに加工されている。したがって、境界検出手段２１は、映像データ２を取得した後、所定の輝度レベルに基づいて、境界を検出することができる。
【００４３】
つまり、境界検出手段２１は、輝度レベルに応じて、画素単位で、境界位置を検出できる。なお、境界検出手段２１は、検出した境界位置を、ＳＲＡＭなどの一次メモリに記憶し、次に利用できるようにしている。例えば、図３のような領域ＡとＢの境界が検出される。なお、境界検出手段２１によって検出された境界により、映像データ２における、映像データ１に合成されて、表示される領域と表示されない領域が決定される。
【００４４】
画素リピート手段２２は、図７に示すように、表示される領域の画素に基づいて、表示されない領域の画素を置き換えるものである。
【００４５】
本実施の形態では、以下の方法で置き換えることが可能である。例えば、置き換えの方法は、図７のように、表示される領域の境界の値を利用して、表示されない領域の値を置き換える方法が考えられる。つまり、表示されない領域の画素が、表示される領域の境界の画素に置き換わる。また、他の方法としては、図９に示すように、境界線を鏡に見立てて、表示される領域の画素を、表示されない領域の画素として鏡状に順次置き換える方法も考えられる。
【００４６】
フィルタ手段２３は、画素リピート手段２２によって画素が置き換えられた映像データ２に、拡大又は縮小処理を施すものである。より詳しくは、フィルタ手段２３は、画素リピート手段２２によって画素が置き換えられた映像データ２を、画素の補間を行って、拡大又は縮小する。例えば、フィルタ手段２３は、図８に示すように、予め規定されたＫ０〜Ｋ３のフィルタ係数を用いて、補間データを作成する。すなわち、フィルタ手段２３は、入力画素データをそれぞれ、Ｋ０〜Ｋ３倍し、相互に加算することにより、補間データ（図８の黒丸）を作成している。
【００４７】
ここで、映像データ１の縦横比は、例えば、１６：９の映像であり、映像データ２の縦横比は、例えば、３：２の映像である。このため、縦横比を保ったまま、映像データ２を映像データ１に合成するには、水平方向に拡大して、１６：９の比率になるところまで、拡大加工する必要がある。このような拡大加工を、一般的には、正方画素変換と呼んでいる。なお、映像データ２が、４：３の映像である場合、１６：９の映像に合成するには、水平方向を、縮小する必要がある。ここで、フィルタ手段２３は、表示される領域のみの画素を拡大又は縮小処理してもかまわない。このようにすれば、必要なデータのみを拡大又は縮小できるため、効率的である。
【００４８】
いずれにしても、映像データ２と映像データ１の縦横比が異なる場合、映像データ２を映像データ１の解像度に合わせることが必要となる。したがって、映像データ２を拡大又は縮小の加工する際には、フィルタ手段２３のような手段で画素補間を行う。
【００４９】
映像合成手段２４は、フィルタ手段２３で加工された映像データ２の表示される領域を、映像データ１と合成するものである。映像合成手段２４は、図８のように、加工された後の映像データ２を、映像データ１にルマキー合成する。具体的には、映像合成手段２４は、加工された映像データ２における表示される領域の情報を、映像データ１の対応する領域と置き換える（入れ替える）。これによって、映像データ１に映像データ２の一部が合成された映像データを生成される。例えば、合成された映像データとしては、図５のような、映像データが生成される。例えば、図５にかかる合成をした映像の一例のスケッチ図を示すように、背景に対して、映像データ２を合成することができることとなる。
【００５０】
＜２．動作＞
次に、映像出力装置１における動作例を、図６を用いて説明する。
【００５１】
図６は、本実施例における映像出力装置１の動作例を示すフローチャートである。
【００５２】
図６において、ＣＰＵ１４は、先ず、ディスクドライブ２によって読み出したＢＤ−ＲＯＭの圧縮映像データを取得する。ＣＰＵ１４は、取得した圧縮映像データをデコードして、伸張する。ＣＰＵ１４は、伸張した映像データをバッファメモリ１２に記録する。バッファメモリ１２に記録される映像データは、映像データ１及び映像データ２を含む映像データである。
【００５３】
ＣＰＵ１４は、バッファメモリ１２に記録された映像データ２を取得する（Ｓ５０１）。ＣＰＵ１４は、予め規定された輝度レベルに基づいて、映像データ２の境界を検出する（Ｓ５０２）。次に、ＣＰＵ１４は、検出した境界位置の情報をバッファメモリ１２に記憶する（Ｓ５０３）。
【００５４】
ＣＰＵ１４は、検出した境界に基づいて、表示されない領域のデータを表示される領域のデータで置き換える（Ｓ５０４）。ＣＰＵ１４は、Ｓ５０４で置き換えられた映像データ２を、バッファメモリ１２に記憶した境界位置に基づき拡大又は縮小処理する（Ｓ５０５）。具体的には、ＣＰＵ１４は、バッファメモリ１２に記憶した境界位置に基づいて、表示される領域を拡大又は縮小処理する。
【００５５】
ＣＰＵ１４は、映像データ１を取得し、映像データ２の表示される領域のデータを、映像データ１の映像データと置き換える。これによって映像データ１に映像データ２が合成される（Ｓ５０６、Ｓ５０７）。
【００５６】
ＣＰＵ１４は、合成された映像データを表示装置２に出力する（Ｓ５０８）。
【００５７】
＜３．本発明と実施の形態の対応付け＞
プレーヤー１は、本発明の映像出力装置の一例である。表示装置３は、表示装置の一例である。プライマリデータは、メイン画像データの一例である。セカンダリデータは、サブ画像データの一例である。セカンダリデータにおいて、プライマリデータに合成される領域は、第１領域の一例であり、合成されない領域は、第２領域の一例である。ＣＰＵ１４は、第１の取得手段、第２の取得手段、境界検出手段、変換手段、合成手段、及び出力手段の一例である。
【００５８】
＜４．まとめ＞
表示装置３と接続可能な映像出力装置１であって、プライマリデータを取得するＣＰＵ１４と、第１画像を示す第１領域と第２画像を示す第２領域とを有するセカンダリデータを取得するＣＰＵ１４と、前記取得したセカンダリデータの第１領域と第２領域の境界を検出するＣＰＵ１４と、ＣＰＵ１４が検出した境界に基づいて、セカンダリデータを変換するＣＰＵ１４と、変換されたセカンダリデータの少なくとも一部を、取得したプライマリデータと合成し、合成画像データを生成するＣＰＵ１４と、合成画像データを表示装置３に出力するＣＰＵ１４と、を備える。
【００５９】
このようにすれば、プレーヤー１は、セカンダリデータの一部をプライマリデータに合成する前に、セカンダリデータに対して画像処理を行う場合であっても、第１領域と第２領域の境界に基づいて、セカンダリデータを変換することができる。例えば、プレーヤー１は、セカンダリデータの第２領域の画像データを用いずに、第１領域の画像データを拡大または縮小できる。
【００６０】
すなわち、本実施の形態によれば、境界検出手段２１によって映像データ２の合成境界を検出し、画素リピート手段２２によって表示される領域の画素データで、表示されない領域の画素データを置き換える。そして、ディスクドライブ２３によって映像データ２の拡大又は縮小を行なった後、映像合成手段２４によって映像データ２を映像データ１と合成する。これによって、映像データ２の合成輪郭にリンギングと呼ばれるような波うちノイズを軽減でき、より美しく、合成することが可能となる。
【００６１】
もし、表示されない領域の画像データを基に、表示される領域の画像データを拡大又は縮小補間すると、補間後の表示される領域の画像データが表示されない領域の画像データの影響を受けることになる。例えば、表示されない領域の輝度が、黒色に塗られている場合、図１０のように、画素補間後の画素が、表示されない画素の影響を受けて、大きく波打つこととなる。このため、映像データ１に合成された映像データ２の画像データにおける合成境界に、輪郭ノイズが発生することとなる。
（実施例２）
＜１．構成＞
次に実施例２について説明する。なお、実施例２において、実施例１と同様の構成については、説明を省略する。
【００６２】
図１１は、実施例２における、ＣＰＵ１４の機能ブロックを示した図である。
【００６３】
図１１において、境界検出手段２１は、予め規定された輝度レベルに基づいて、映像データ２の合成境界を検出するものである。画素リピート手段２２は、境界検出手段２１の検出した境界で、表示されない部分の画素を、表示される画素を用いて作成した画素に置き換えるものである。フィルタ手段２３は、画素リピート手段２２で、合成後に表示される領域の映像データで置き換えられた映像を用いて、フィルタ拡大縮小を行うものであり、映像合成手段２４は、以上のように加工された映像データ２と、映像データ１を合成するものである。実施例１と同様の機能ブロックは、同じ番号を付けて記載している。
【００６４】
実施例１と異なる点は、相関検出手段２５と、選択手段２６を有する点で、相関検出手段２５は、境界検出手段２１で検出した境界位置情報に基づいて、境界の前後の輝度の相関を検出する手段である。
【００６５】
相関は、例えば、前後の画素データの差分による、輝度の傾斜を検出するものである。
【００６６】
図１２に示すように、ＢＤ−ＲＯＭから読み出された映像データ２は、表示されない領域のデータの輝度を低下させる加工をしていないものもあり、例えば、自然画のように、表示される領域と、表示されない領域がなだらかにつながっている場合もある。
【００６７】
この場合には、輝度の傾斜は、境界付近でも小さいものとなる。
【００６８】
実施例１で記載したような、表示されない領域を黒色で塗りつぶしたような、映像データ２は、図１２の破線で示すように、境界で、輝度の相関が急に無くなることを示し、輝度に急な段差が生じ、輝度傾斜も、大きく変化する。
【００６９】
この変化を利用して、選択手段２６により、画素リピート手段２２の出力と、加工していない映像データ２を選択して、フィルタ手段２３に入力している。
【００７０】
図１２で示すような自然画の場合、表示される領域の画素データに置き換えて、補間して拡大縮小すると、輪郭が必要以上にシャープに目立ってしまうことがあるため、境界がなだらかにつながっている場合には、表示される領域の画素データに置き換えをせずに、表示されない領域のデータも用いて、フィルタ拡大縮小を行うことができる。
【００７１】
＜２．動作＞
次に、かかる実施例２の動作を説明する。
【００７２】
図１３は、実施例２の動作を説明するフローチャートである。
【００７３】
図１３において、ＣＰＵ１４は、ディスクドライブ２より、読み出したＢＤ−ＲＯＭの映像データをデコードして、映像データ１および、映像データ２を取得する（Ｓ５０１）。
【００７４】
ＣＰＵ１４は、輝度レベルに基づいて、映像データ２の境界を検出する（Ｓ５０２）。次に、ＣＰＵ１４は、検出した境界位置の情報をメモリに記憶する（Ｓ５０３）。
【００７５】
ＣＰＵ１４は、検出した境界に基づいて、表示されない領域のデータを表示される領域のデータで置き換える（Ｓ５０４）。一方で、ＣＰＵ１４は、検出した境界に基づいて、境界位置の前後の画素の相関を検出する（Ｓ５０８）。ＣＰＵ１４は、検出した相関に基づき、相関が大きい場合、映像データ２を画素補間しながら、拡大縮小（Ｓ５１０）する。一方ＣＰＵ１４は、相関が小さい場合、表示される領域の映像データおよび置き換えた映像データ２を画素補間は、記憶した合成境界位置に基づき拡大縮小する（Ｓ５０５）。（Ｓ５０９）
映像データ１と、映像データ２の表示される領域のデータを映像データ１の表示位置の映像データと置き換えることにより、映像を合成する（Ｓ５０６）。
【００７６】
合成された映像データを表示装置に出力する（Ｓ５０７）。
【００７７】
＜３．まとめ＞
実施例２によれば、相関検出手段２５により、合成境界の前後の相関を検出し、相関の大小によって選択手段２６により、表示される画素のみに置き換えたデータでフィルタ拡大縮小するか、置き換える前のデータで拡大縮小するかを選択することにより、表示されない領域のデータを意図的に輝度レベルを落とした場合には、表示されない領域のデータの影響を無くすことで、輪郭のリンギングノイズを低減し、表示される領域のデータと表示されない領域のデータとが、なだらかにつながる場合には、表示されない領域のデータも用いて、補間してフィルタ拡大縮小を行うことにより、輪郭の不要な強調を抑えることができることとなり、より美しく、合成することが可能となる。
【００７８】
なお、実施例では、映像データ２を映像データ１の縦横比に合わせる時の拡大縮小を例に説明したが、ＢＤ−ＲＯＭでは、映像データ２を１／２以下に縮小して合成することも許されており、この場合にも、適応できるものである。
【００７９】
また、画素同士の演算を行うことで不要信号を除去するような、ノイズリダクションを
行う場合にも適応できる。
（他の実施の形態）
上記実施の形態では、本発明をＢＤプレーヤー１に適用した場合の例を実施例１及び２として、説明した。しかし、これに限られず、本発明は様々な形態に適用可能である。以下、他の形態について、一例を説明する。
【００８０】
上記実施例１及び２では、ステップ５０２において、ＣＰＵ１４は、予め規定された輝度レベルに基づいて、映像データ２の境界を検出するようにしたが、これに限られない。例えば、映像データ２の全体の明るさに基づいて、任意の輝度レベルを算出し、この算出した輝度レベルに基づいて、映像データ２の境界を検出してもよい。このようにすれば、映像データ２の表示すべき領域の一部が表示されないといったことを軽減できる。
【００８１】
また、上記実施の形態に限られず、図１４のように構成してもよい。図１４は、画像データの一部を拡大した図である。図１４は、図の上から順にＮ−３ライン目、Ｎ−２ライン目、Ｎ−１ライン目、・・・となっている。つまり、上記実施例では、例えば、Ａライン目の画素を、拡大又は縮小して画素補間する場合、Ａライン目の画そを用いて補間するようにした。しかし、図１４のように、Ｎ−１ライン目の画そを補間する際、Ｎ−１ライン目及びＮライン目の画素を用いて補間してもよい。このようにすれば、境界付近の映像がギザギザしてしまうといったことをより軽減できる。
【００８２】
また、上記実施例1及び2では、合成境界を境目にして、表示される領域のデータを用いて、拡大縮小の補間データを作成したが、ルマキー合成の合成境界は、輝度レベルで決まるので、輝度のレベルをもとに、輝度レベルが、ルマキー閾値よりも低い画素データを使わないという方法でも同等の効果を得ることができる。
【産業上の利用可能性】
【００８３】
本発明は、ＢＤ−ＲＯＭに限らず、テレビジョンや、ゲーム機など、同じ背景画に異なった映像を重ねて表示したい用途など、映像を加工して別の映像に合成する用途に適用できる。
【符号の説明】
【００８４】
１    プレーヤー
２    ディスクドライブ
３    表示装置
４    リモコン
１１    フラッシュメモリ
１２    バッファメモリ
１３    コネクタ
１４    ＣＰＵ
１５    赤外線センサー
１４１    ストリーム制御部
１４２    デコーダ
１４３    ＡＶ入出力部
２１    境界検出手段
２２    画素リピート手段
２３    フィルタ手段
２４    映像合成手段
２５    相関検出手段
２６    選択手段
【図１】
2010251818.tif 000003
【図２】
2010251818.tif 000004
【図３】
2010251818.tif 000005
【図４】
2010251818.tif 000006
【図５】
2010251818.tif 000007
【図６】
2010251818.tif 000008
【図７】
2010251818.tif 000009
【図８】
2010251818.tif 000010
【図９】
2010251818.tif 000011
【図１０】
2010251818.tif 000012
【図１１】
2010251818.tif 000013
【図１２】
2010251818.tif 000014
【図１３】
2010251818.tif 000015
【図１４】
2010251818.tif 000016
【図１５】
2010251818.tif 000017
【図１６】
2010251818.tif 000018
【図１７】
2010251818.tif 000019