(57)【要約】【課題】  動画像のぶれを適切に補正して、良好な画像を表示可能とする。【解決手段】  動画像信号を入力する入力手段と、前記入力手段により入力された動画像信号が示す画像のぶれを補正するぶれ補正手段と、前記ぶれ補正手段から出力された動画像信号を表示装置に出力する出力手段と、前記入力手段により入力された動画像信号の画素数と前記表示装置の画素数とに基づいて、前記ぶれ補正手段による補正処理を制御する制御手段とを備える。【選択図】  図５
2010028735.tif 000002
【特許請求の範囲】
【請求項１】
動画像信号を入力する入力手段と、
前記入力手段により入力された動画像信号が示す画像のぶれを補正するぶれ補正手段と、
前記ぶれ補正手段から出力された動画像信号を表示装置に出力する出力手段と、
前記入力手段により入力された動画像信号の画素数と前記表示装置の画素数とに基づいて、前記ぶれ補正手段による補正処理を制御する制御手段とを備える画像処理装置。
【請求項２】
前記制御手段は、前記ぶれ補正手段による補正処理を実行するか否かを制御することを特徴とする請求項１記載の画像処理装置。
【請求項３】
前記制御手段は、前記ぶれ補正手段による補正精度を制御することを特徴とする請求項１記載の画像処理装置。
【請求項４】
前記制御手段は、前記動画像信号の画素数よりも前記表示装置の画素数の方が多いほど、前記補正精度を高くすることを特徴とする請求項３記載の画像処理装置。
【請求項５】
前記制御手段は、前記ぶれ補正手段による補正範囲を制御することを特徴とする請求項１記載の画像処理装置。
【請求項６】
前記制御手段は、前記動画像信号の画素数よりも前記表示装置の画素数の方が多いほど、前記補正範囲を大きくすることを特徴とする請求項５記載の画像処理装置。
【請求項７】
前記制御手段は更に、前記表示装置の画面サイズと前記動画像信号の画素数、及び前記表示装置の画素数に基づいて、前記補正処理を制御することを特徴とする請求項１から６の何れか１項記載の画像処理装置。
【請求項８】
前記制御手段は、前記表示装置の画面サイズが大きいほど、前記ぶれ補正手段による補正範囲を大きくすることを特徴とする請求項７記載の画像処理装置。
【請求項９】
前記制御手段は、前記表示装置の画面サイズが大きいほど、前記ぶれ補正手段による前記補正精度を高くすることを特徴とする請求項７記載の画像処理装置。
【請求項１０】
前記制御手段は更に、前記表示装置に表示された画像を鑑賞するユーザまでの距離と、前記動画像信号の画素数、及び前記表示装置の画素数に基づいて、前記補正処理を制御することを特徴とする請求項１から６の何れか１項記載の画像処理装置。
【請求項１１】
前記制御手段は、前記距離が短いほど、前記ぶれ補正手段による補正範囲を大きくすることを特徴とする請求項１０記載の画像処理装置。
【請求項１２】
前記制御手段は、前記距離が短いほど、前記ぶれ補正手段による前記補正精度を高くすることを特徴とする請求項１０記載の画像処理装置。
【請求項１３】
前記表示装置は前記画像処理装置に内蔵されており、前記入力手段は外部より前記動画像信号を入力し、前記表示装置の画素数の情報を記憶したメモリを備えたことを特徴とする請求項１から１２の何れか１項記載の画像処理装置。
【請求項１４】
前記表示装置は前記画像処理装置の外部の表示装置であり、前記入力手段は記録媒体から前記動画像信号を再生する再生手段を有し、前記出力手段は前記表示装置に対して伝送路を介して前記動画像信号を出力し、前記伝送路を介して前記表示装置より送信された前記表示装置の画素数の情報を取得する手段を備えたことを特徴とする請求項１から１２の何れか１項記載の画像処理装置。
【請求項１５】
前記出力手段は、前記表示装置の画素数に応じて前記ぶれ補正手段から出力された動画像信号の画素数を変換する変換手段を有し、前記変換手段により画素数が変換された動画像信号を前記表示装置に出力することを特徴とする請求項１記載の画像処理装置。
【請求項１６】
前記ぶれ補正手段は、前記動画像信号を記憶するメモリと、前記動画像信号における画面ぶれを検出するぶれ検出手段と、前記ぶれ検出手段の検出結果に基づいて前記メモリに記憶された動画像信号の一部の領域を読み出す読み出し手段と、前記読み出し手段により読み出された一部の領域の動画像信号を拡大する拡大手段とを有し、前記制御手段は前記読み出し手段により読み出す領域の大きさと前記ぶれ検出手段の動作とを制御することを特徴とする請求項１から１１の何れか１項記載の画像処理装置。
【請求項１７】
動画像信号を入力する入力手段と、
前記入力手段により入力された動画像信号における各画面の一部の範囲を拡大する拡大手段と、
前記拡大手段により拡大された動画像信号が示す画像のぶれを補正するぶれ補正手段と、
前記ぶれ補正手段から出力された動画像信号を表示装置に出力する出力手段と、
前記拡大手段により拡大される範囲の画素数と前記表示装置の画素数とに基づいて、前記ぶれ補正手段による補正処理を制御する制御手段とを備える画像処理装置。
【請求項１８】
前記拡大手段は、指定された拡大率に応じて前記拡大される範囲の大きさを変更することを特徴とする請求項１７記載の画像処理装置。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は画像処理装置に関し、特に動画像信号のぶれ補正の処理に関する。
【背景技術】
【０００２】
従来、動画像を表示する装置が知られている。
この種の装置として、例えば、テレビ受信機（以下テレビ）が知られている。テレビでは、一般に、チューナにより受信したテレビ番組以外に、ビデオカメラなどの外部機器から供給された動画像信号を入力し、表示する機能を持っている。
【０００３】
ビデオカメラでは、撮影時にユーザがカメラを手に持って撮影することが多く、撮影した動画像に手ぶれによる画面ぶれが発生することが多い。
【０００４】
そのため、この様な画面ぶれを含む動画像をビデオカメラにより再生し、テレビに表示した場合、画面ぶれを含む動画像が表示されてしまう。
【０００５】
そこで、従来、ビデオカメラで画像を撮影する際に発生する手振れを防止する技術が多数提案されている。
【０００６】
また、この様に撮影時の手振れ補正機能を持たないビデオカメラで撮影された動画像の再生時に、手振れを補正する技術も提案されている（例えば、特許文献１参照）。
【特許文献１】特開平１０−４２２３３号公報
【発明の開示】
【発明が解決しようとする課題】
【０００７】
近年では、テレビの大画面、高画素化が進み、前述の様にビデオカメラで撮影された動画像もこの様な大画面で高精細なテレビに表示して鑑賞することが多くなると思われる。
【０００８】
しかしながら、特許文献１においては、動画像を表示する表示装置の画素数を考慮したぶれ補正を行っていない。
【０００９】
そのため、大画面、高精細な表示装置に動画像を表示する場合に、解像度が低い表示装置に表示する場合と同様にぶれ補正を行うだけでは、画面ぶれが残ったまま表示されてしまうおそれがあった。
【００１０】
本発明はこの様な問題を解決し、動画像のぶれを適切に補正して、良好な画像を表示可能とすることを目的とする。
【課題を解決するための手段】
【００１１】
動画像信号を入力する入力手段と、前記入力手段により入力された動画像信号が示す画像のぶれを補正するぶれ補正手段と、前記ぶれ補正手段から出力された動画像信号を表示装置に出力する出力手段と、前記入力手段により入力された動画像信号の画素数と前記表示装置の画素数とに基づいて、前記ぶれ補正手段による補正処理を制御する制御手段とを備える。
【発明の効果】
【００１２】
本発明によれば、入力される動画像信号のぶれを適切に補正することができる。
【発明を実施するための最良の形態】
【００１３】
以下、本発明の実施形態を説明する。
【００１４】
図１は、本発明を適用した表示装置１００の構成を示した図である。図１の表示装置１００は、ビデオカメラなどの外部機器から出力された動画像信号を入力して表示する。
【００１５】
図１において、入力部１０１は、付図示の伝送路を介して外部の装置から出力された動画像信号を入力する。なお、本実施形態では、入力部１０１はデジタル信号として動画像信号とその付加情報を入力する。
【００１６】
入力部１０１は、入力した動画像信号を画面ぶれ補正部１０２と画素数検出部１０６に出力する。画面ぶれ補正部１０２は、制御部１０７からの補正精度制御信号に応じて入力された動画像信号の画面ぶれを後述の如く補正し、変換部１０３に出力する。変換部１０３は、画面ぶれ補正部１０２から出力された動画像信号の各画面の画素数（解像度）を表示部１０５の画素数（解像度）に合わせて変換し、表示制御部１０４に出力する。
【００１７】
表示制御部１０４は、制御部１０７からの指示に従い、変換部１０３から出力された動画像信号に対して各種の情報を多重し、表示部１０５に表示する。表示部１０５は、液晶パネルやそのドライバを含む。
【００１８】
また、画素数検出部１０６は、入力された動画像信号に付加された付加情報に基づいて、入力された動画像信号の画素数、または、解像度（単位サイズ当たりの画素数）を検出し、制御部１０７にその検出結果を出力する。
【００１９】
制御部１０７は、ユーザＩ／Ｆ１０８からの指示に従い、表示部１０５に対し、各種の情報や入力された動画像信号を表示するよう、各部を制御する。また、制御部１０７は、画素数検出部１０６により検出された入力動画像信号の画素数と表示部１０５の画素数とを比較し、比較結果に応じて画面ぶれ補正部１０２による補正処理を制御する。また、制御部１０７は、この比較結果に応じて、変換部１０３による解像度の変換処理（変換倍率）を制御する。なお、制御部１０７はメモリを有し、このメモリに記憶された表示部１０５の画素数の情報と入力動画像信号の画素数とを比較する。
【００２０】
ユーザインターフェイス（Ｉ／Ｆ）１０８は、リモコンやそのレシーバ、各種の操作ボタン等を含む。
【００２１】
次に、画面ぶれ補正部１０２について説明する。
図２は画面ぶれ補正部１０２の構成を示すブロック図である。
【００２２】
図２において、入力された動画像信号ｓ２００は、画面ぶれ検出部２０１、メモリ２０２、及び選択部２０５に出力される。
【００２３】
画面ぶれ検出部３０１はメモリを有し、連続する二つのフレーム間の画像のぶれ量、及びぶれの方向を示す画面ぶれ情報を検出し、フレーム毎に補正読み出し部２０３に出力する。また、画面ぶれ検出部２０１は、制御部１０７からの補正精度制御信号に応じて、画面ぶれの検出精度及び、補正範囲を変更する。
【００２４】
メモリ２０２は少なくとも２フレームの画像信号を記憶可能であり、補正読み出し部２０３により読み出し中の画像信号の記憶領域以外の領域に対し、入力された画像信号ｓ２００を記憶する。
【００２５】
補正読み出し部２０３は、画面ぶれ検出部２０１からの画面ぶれ情報に応じてメモリ２０２に記憶された１フレームの画像信号から一部の範囲の画像信号を選択して読み出し、拡大処理部２０４に出力する。このとき、補正読み出し部２０３は、画面ぶれ検出部２０１により検出された画面ぶれ情報に基づき、画面ぶれをなくすよう、読み出す範囲を変更する。また、補正読み出し部２０３は、補正精度設定信号による補正範囲（補正量）に応じて、読み出す範囲（切り出し枠）のサイズを変更する。
【００２６】
拡大処理部２０４は、補正読み出し部２０３により選択されて読み出された各画面の画像信号のサイズを変更して出力する。具体的には、補正精度設定信号に基づき、補正読み出し部２０３からの画像信号のサイズを入力した画像信号ｓ２００と同じサイズになるよう拡大し、補正済み画像信号ｓ２０４を選択部２０５に出力する。なお、拡大処理部２０４による拡大処理、並びに、拡大時の補間処理は、公知の方法を使用するものとする。
【００２７】
選択部２０５は、制御部１０７からのぶれ補正制御信号に基づいて、入力された画像信号ｓ２００と、拡大処理部２０４からの補正済み画像信号ｓ２０４のうちの一方を選択して出力する。具体的には、制御部１０７より、ぶれ補正実行を示す制御信号を受けた場合には、補正済み画像信号ｓ２０４を選択し、ぶれ補正禁止を示す制御信号を受けた場合には、入力された画像信号ｓ２００を選択して出力する。
【００２８】
この様に、ぶれ補正を実行しない場合には、入力された画像信号をそのまま出力するため、ぶれ補正時の拡大処理に伴う画像の劣化が無い。
【００２９】
次に、画面ぶれ検出部２０１について説明する。
【００３０】
図３は、画面ぶれ検出部２０１の構成を示すブロック図である。
図３において、入力された動画像信号がメモリ３０７に入力される。メモリ３０７は、入力した動画像信号を少なくとも２フレーム分蓄積可能である。
【００３１】
また、制御部１０７から出力された補正精度設定信号が精度設定部３０６、範囲設定部３０７に入力する。精度設定部３０６は、補正精度設定信号が示すサンプル精度に従い、画素サンプル部３０２における画素サンプル精度を設定する。画素サンプル部３０２は、メモリ３０１に蓄積された動画像信号を順次読み出し、精度設定部３０６により設定された画素サンプル精度に従って読み出した動画像信号をサンプリングし、画素ずらし部３０３に出力する。
【００３２】
また、範囲設定部３０７は、補正精度設定信号が示す補正範囲に従いぶれ補正範囲を設定する。画素ずらし部３０３は、設定された補正範囲に従って画素サンプル部３０２から出力された画像信号をずらす。相関評価部３０４は、画素ずらし部３０３からの画像信号と、メモリ３０１から読み出した前フレームの画像信号とを比較し、その相関関係を評価する。
【００３３】
そして、特異点検出部３０５により、ずらした画素の値と相関評価値との変極点を検出し、画面ぶれ情報として出力する。
【００３４】
ここで、画面ぶれ補正の様子を、図４を用いて説明する。
【００３５】
図４（ａ）において、４０１は入力された１フレームの画像信号の様子を示している。そして、この様な画像信号４０１のうち、補正範囲に応じたサイズの切り出し枠４０２で示された領域の画像信号を補正読み出し部２０３により読み出す。更に、拡大処理部２０４により、入力画像信号と同じサイズに拡大した画像が４０３である。ここで、補正精度設定信号により設定される補正範囲は、図４（ａ）に示すΔＸｍａｘ、ΔＹｍａｘである。
【００３６】
即ち、補正範囲を大きくするほど、切り出し枠４０２のサイズが小さくなる。そのため、補正範囲を大きくした場合、その後の拡大率も大きくなり、補間による画質の劣化も大きい。
【００３７】
図４（ｂ）は、フレーム４０１の次のフレームの画像信号４０４の様子を示している。
【００３８】
フレーム４０４において、実線がフレーム４０４の画像で、点線が前フレーム４０１の画像である。図に示す様に、現フレーム４０４では、前フレーム４０１に比べて、下方向に画面ぶれ４０６が発生している。
画面ぶれ検出部２０１は、この画面ぶれ量と方向を算出する。
【００３９】
具体的な算出方法としては、例えば、現フレームを所定量画素単位でずらして、前フレームとの相関を取り、相関がもっとも大きい値の時に画素ずらし量を、画面ぶれ量とする。
【００４０】
また、動画像の場合、被写体の動きが画面全体の相関に影響を与えるので、動く被写体の影響を排除して算出すると信頼性の高い画面ぶれ量を算出することが可能となる。
【００４１】
このように発生した画面ぶれ量を考慮せずに、前フレームと同じ位置４０５を切り出し枠に設定して、補正読み出し部２０３で画像信号を読み出し、拡大処理部２０４で拡大した画像が４０７である。４０７では、画面ぶれ量４０６も同様に拡大されて、ぶれ量４０８となる。
【００４２】
つまり、画面ぶれ量はそのまま拡大され、画面ぶれ量を補正することができていない。
【００４３】
そこで、発生した画面ぶれ量を考慮した場合の切り出し枠の設定処理について説明する。
【００４４】
この場合、図４（ｃ）に示す様に、画面ぶれ４０６が発生しているフレーム４０４の画像信号に対して、画面ぶれ４０６と同じ方向、同じ量（Δｙ）だけ、切り出し枠を移動する。つまり、切り出し枠４０９を、切り出し枠４０５に比べて４１０だけ移動する。そして、切り出し枠４０９の領域の画像信号をメモリ３０２から読み出し、拡大処理部３０４で拡大処理すると、４１１に示すように、前フレームの画面ぶれ量を補正した動画像が生成されることになる。以上の動作によって、画面ぶれ量は補正される。
【００４５】
次に、本実施形態におけるぶれ補正処理の制御について、図５のフローチャートを用いて説明する。図５の処理は、制御部１０７によって実行される。
【００４６】
ユーザＩ／Ｆ２０９による電源投入の指示、及び、入力部１０１に入力された動画像信号が変更された場合に、図５のフローが開始する。
【００４７】
まず、画素数検出部１０６により検出された入力動画像信号の画素数と表示部１０５の画素数を比較し、下記の演算を行ってその比αを算出する（Ｓ５０１）。
α＝入力動画像信号の画素数／表示部の画素数      （式１）
次に、αが２以下であるか否かを判別する（Ｓ５０２）。α＞２の場合、表示部１０５の画素数が入力動画像信号の画素数より十分に小さい。即ち、表示部１０５が入力した動画像を表示するのに十分な解像度を有していないと判断し、画面ぶれ補正の禁止を示す制御信号を画面ぶれ補正部１０２に出力する（Ｓ５１１）。
【００４８】
また、Ｓ５０２でα≦２であった場合、ぶれ補正の実行を示す制御信号を画面ぶれ補正部１０２に出力する（Ｓ５０３）。
【００４９】
そして、α≦１であるか否かを判別する（Ｓ５０４）。α＞１の場合、つまり、入力動画像信号の画素数が表示部１０５の画素数の２倍程度までの場合は、画面ぶれ検出に関わるサンプリング画素周期を２画素単位とする。また、画面ぶれ検出の補正範囲を弱めの５％に設定して、補正精度設定信号を画面ぶれ補正部１０２に出力する（Ｓ５０８）。
【００５０】
また、Ｓ５０４でα≦１であった場合、α≦１／２であるか否かを判別する（Ｓ５０５）。α＞１／２の場合、つまり、表示部１０５の画素数が入力動画像信号の画素数よりも大きく、両者の差がそれほど無い場合、画面ぶれ検出に関わるサンプリング画素周期を１画素単位とする。そして、画面ぶれ検出の補正範囲を中程度の１０％に設定し、補正精度設定信号を画面ぶれ補正部１０２に出力する（Ｓ５０９）。
【００５１】
また、Ｓ５０５でα≦１／２であった場合、α≦１／４であるか否かを判別する（Ｓ５０６）。α＞１／４の場合、つまり、表示部１０５の画素数が入力動画像信号の画素数よりも大きく、両者の差がやや大きい場合、画面ぶれ検出に関わるサンプリング画素周期を１／２画素単位とする。そして、画面ぶれ検出の補正範囲をやや強めの２０％に設定し、補正精度設定信号を画面ぶれ補正部１０２に出力する（Ｓ５１０）。なお、サンプリング画素の周期が１／２に設定された場合、画素サンプル部３０２は、隣接する二つの画素の平均値を算出することで、サンプル画素を生成する。
【００５２】
最後に、Ｓ５０６でα≦１／４の場合、つまり、表示部１０５の画素数が入力動画像信号の画素数よりも大きく、両者の差がかなり大きい場合、画面ぶれ検出に関わるサンプリング画素周期を１／４画素単位とする。そして、画面ぶれ検出の補正範囲を強めの４０％に設定し、補正精度設定信号を画面ぶれ補正部１０２に出力する（Ｓ５０７）。なお、サンプリング画素の周期が１／４に設定された場合、画素サンプル部３０２は、隣接する二つの画素をサンプリング後の画素位置に応じて重み付け加算した値を算出することで、サンプル画素を生成する。
【００５３】
この様に、本実施形態では、入力動画像信号の画素数と表示画素数との比較結果に応じて、画面ぶれの補正を行うか否かを判定している。また、画面ぶれ補正の度合いを制御している。
【００５４】
具体的には、入力動画像信号の画素数に比べて表示画素数が大きい程、画面ぶれの補正精度を高くすると共に、画面ぶれの補正範囲を大きくする。
【００５５】
これにより、異なる画素数の動画像信号を表示する場合にも、最小限の画質劣化に抑えながら、表示する動画像に含まれる画面ぶれを補正することが可能となる。
【００５６】
なお、本実施形態では、画面ぶれ補正部１０２は、入力動画像信号とぶれ補正処理された動画像信号の一方を選択して出力する構成としたが、ぶれ補正禁止の場合には、ぶれ補正部の動作を停止させる構成でもよい。
【００５７】
具体的には、図２における画面ぶれ補正部２０１〜拡大処理部２０４の動作を停止する構成とすれば、無駄な電力を消費することが無くなる。
【００５８】
次に、第２の実施形態を説明する。
【００５９】
本実施形態では、動画像信号を記録媒体から再生して外部の表示装置に出力する再生装置に対して本発明を適用した場合について説明する。
【００６０】
図６は、本実施形態における再生装置６００の構成を示す図である。
図６において、記録媒体６０１には画素数が異なる複数のタイトルの動画像信号が記録されている。ユーザは、ユーザＩ／Ｆ６０８を操作することにより、記録媒体６０１に記録された複数のタイトルの中から再生したいタイトルを選択し、再生を指示する。ユーザにより再生指示があると、制御部６０７は再生部６０２に対し、指定されたタイトルの動画像信号を再生するよう制御する。
ユーザＩ／Ｆ６０８は、リモコンやそのレシーバ、各種の操作ボタン等を含む。
【００６１】
再生部６０２は、記録媒体６０１から指定された動画像信号とその付加情報を再生し、信号処理部６０３に出力する。信号処理部６０３は、再生された動画像信号が符号化されていた場合には復号処理を施すと共に、その他必要な処理を施し、再生された動画像信号を画面ぶれ補正部６０４に出力する。また、信号処理部６０２は、動画像信号と共に再生された付加情報を画素数検出部６０９に出力する。
【００６２】
画素数検出部６０９は、入力された付加情報に基づいて、再生された動画像信号の各フレームの画素数を検出し、検出結果を制御部６０７に出力する。
【００６３】
画面ぶれ補正部６０３は、制御部６０７からの補正精度制御信号に応じて、入力された動画像信号の画面ぶれを補正し、出力処理部６０５に出力する。
【００６４】
出力処理部６０５は、制御部６０７からの指示に従い、画面ぶれ補正部６０３からの動画像信号に対し、各種の情報を多重して通信部６０６に出力する。また、ユーザＩ／Ｆ６０８により各種のメニュー情報の表示指示があった場合、出力処理部６０５は、制御部６０７からの指示により、これらメニュー情報を生成して通信部６０６に出力する。
【００６５】
通信部６０６は、出力処理部６０５からの動画像信号を所定の伝送路を介して外部の表示装置６０１０に送信する。表示装置６０１０は、通信部６０６より送信された動画像信号に係る動画像を表示する。また、通信部６０６は、動画像信号を表示装置６０１０に送信する以外に、各種のコマンドや情報を表示装置６０１０との間で送受信可能である。そして、通信部６０６は、後述の様に、所定のタイミングで表示装置６０１０から表示画素数の情報を受信し、制御部６０７に出力する。
【００６６】
制御部６０７は、ユーザＩ／Ｆ６０８からの指示に従い、記録媒体６０１に記録された動画像信号を再生するよう、各部を制御する。また、制御部６０７は、再生動画像信号の画素数と通信部６０６が取得した表示装置６０１０の表示画素数とを比較し、比較結果に応じて画面ぶれ補正部６０４による補正処理を制御する。
【００６７】
再生装置６００において、画面ぶれ補正部６０３の構成は図２、図３に示した構成と同様である。また、画面ぶれ補正部６０３は、第１の実施形態と同様に、制御部６０７からのぶれ補正制御信号、並びに、補正精度設定信号に応じて動画像信号の画面ぶれを補正して出力する。そのため、画面ぶれ補正部６０３についての詳細な説明は割愛する。
【００６８】
次に、本実施形態における、外部の表示装置６０１０の表示画素数情報の取得処理について、図７のフローチャートにより説明する。図７の処理は、制御部６０７が各部を制御することによって実行される。
【００６９】
電源投入時、及び、新たに表示装置６０１０が接続されたことに応じて図７の処理を開始する。
【００７０】
まず、通信部６０６に対し、表示装置６０１０の表示画素数を要求するよう指示する。通信部６０６は、外部の表示装置６０１０に対し、表示画素数を要求するためのコマンドを送信する（Ｓ７０１）。そして、通信部６０６が表示装置６０１０から表示画素数の情報を受信すると、受信した表示画素数の情報を制御部６０７に出力する（Ｓ７０２）。制御部６０７は、この表示画素数の情報を内部のメモリに記憶する（Ｓ７０３）。
【００７１】
次に、本実施形態におけるぶれ補正処理の制御について、図８のフローチャートを用いて説明する。図８の処理は、制御部６０７が各部を制御することによって実行される。
【００７２】
ユーザにより動画像信号の再生開始が指示されると、前述の様に記録媒体６０１から動画像信号が再生される。すると、まず、画素数検出部６０９の検出結果に基づいて、再生された動画像信号の画素数を検出する（Ｓ８０１）。次に、図７の処理により取得した表示装置６０１０の表示画素数の情報と、再生動画像信号の画素数を下記の式に従って演算する（Ｓ８０２）。
α＝再生動画像信号の画素数／表示装置の表示画素数      （式２）
以下、Ｓ８０３〜Ｓ８１２の処理は、図５のステップＳ５０２〜Ｓ５１１と同様である。
【００７３】
この様に、本実施形態では、動画像信号を再生して外部の表示装置に出力する際に、表示装置の表示画素数の情報を取得する。そして、再生動画像信号の画素数と表示画素数との比較結果に応じて、画面ぶれの補正の度合いを制御している。
【００７４】
具体的には、再生動画像信号の画素数に比べて表示画素数が大きい程、画面ぶれの検出精度を高くすると共に、画面ぶれの補正範囲を大きくする。
【００７５】
これにより、動画像信号を再生して表示装置に出力する場合にも、表示装置の画素数と再生画像の画素数を考慮して、最小限の画質劣化に抑えながら、表示する動画像に含まれる画面ぶれを補正することが可能となる。
【００７６】
次に、第３の実施形態を説明する。本実施形態では、第１の実施形態と同様、外部から入力した動画像信号を表示する表示装置について説明する。
【００７７】
図９は、本実施形態の表示装置９００の構成を示した図である。図９の表示装置９００は、図１の表示装置１００に対し、電子ズーム部９０１を追加した点が異なり、他の構成は図１と同様である。そのため、図１と同様の機能ブロックについては同一番号を付し、その詳細な説明は省略する。
【００７８】
図９において、入力部１０１より入力した動画像信号は、電子ズーム部９０１と画素数検出部１０６に出力される。電子ズーム部９０１は、入力した動画像信号の各画面のうち、制御部１０７により指定された一部の領域の画像信号を拡大して画面ぶれ補正部１０２に出力する。
【００７９】
本実施形態では、ユーザがユーザＩ／Ｆ１０８を操作することにより、電子ズーム部９０１におけるズーム倍率を設定することができる。
【００８０】
次に、電子ズーム部９０１について説明する。
【００８１】
図１０は電子ズーム部９０１の構成を示すブロック図である。
【００８２】
図１０において、入力した動画像信号がメモリ１００１に記憶される。メモリ１００１は少なくとも１フレームの動画像信号を記憶可能である。
【００８３】
一方、制御部１０７は、入力動画像信号の画素数とユーザが設定した倍率に基づいて、電子ズーム部９０１における読み出し範囲とズーム倍率を示すズーム制御信号を生成し、ズーム制御部１００４に出力する。例えば、ズーム倍率が４倍の場合、入力した動画像信号において、縦横それぞれ１／２の画素数からなる、画面中央部分の矩形領域を読み出し範囲に設定し、ズーム倍率の情報と共に出力する。
【００８４】
ズーム制御部１００４は、このズーム制御信号に基づき、読み出し部１００２に対して指定された読み出し範囲の画像信号を読み出す様指示する。読み出し部１００２は、ズーム制御部１００４により指定された範囲の画像信号を読み出し、拡大部１００３に出力する。
【００８５】
また、ズーム制御部１００４は、拡大部１００３に対してズーム倍率の情報を出力する。拡大部１００３は、このズーム倍率の情報に基づき、読み出し部１００２により読み出された画像信号を拡大処理して入力画像信号のサイズに拡大して出力する。
【００８６】
次に、本実施形態におけるぶれ補正処理の制御について、図１１のフローチャートを用いて説明する。図１１の処理は、制御部１０７が各部を制御することによって実行される。
【００８７】
本実施形態では、制御部１０７は、入力動画像信号の画素数と表示部１０５の画素数、及び、ズーム倍率に基づいて、前述のぶれ補正制御信号と補正精度設定信号を生成して画面ぶれ補正部１０２に出力する。
【００８８】
ユーザＩ／Ｆ２０９による電源投入の指示、入力部１０１に入力された動画像信号が変更された場合、及び、ズーム倍率が変更された場合に、図１１のフローが開始する。
【００８９】
まず、入力した動画像信号の画素数を検出する（Ｓ１１０１）。次に、ユーザが設定したズーム倍率を検出する（Ｓ１１０２）。そして、これら入力動画像信号の画素数とズーム倍率に基づいて、電子ズーム部９０１における読み出し範囲の画素数を算出する（Ｓ１１０３）。そして、電子ズームの読み出し範囲の画素数と表示部１０５の画素数により下記の演算を行い、その比αを算出する（Ｓ１１０４）。
α＝読み出し範囲の画素数／表示部の画素数      （式３）
以下、Ｓ１１０５〜Ｓ１１１４の処理は、図５のステップＳ５０２〜Ｓ５１１と同様である。
【００９０】
この様に、本実施形態では、入力した動画像信号を電子ズーム処理により拡大して表示する際に、電子ズームの読み出し範囲の画素数と表示画素数との比較結果に応じて、画面ぶれの補正の度合いを制御している。
【００９１】
そのため、電子ズームにより拡大範囲が変化する場合にも、最小限の画質劣化に抑えながら、表示する動画像に含まれる画面ぶれを補正することが可能となる。
【００９２】
次に、第４の実施形態を説明する。本実施形態では、第２の実施形態と同様、記録媒体から動画像信号を再生して、外部の表示装置に出力する再生装置について説明する。
【００９３】
図１２は、本実施形態の再生装置１２００の構成を示した図である。図１２の再生装置１２００は、図６の再生装置６００に対し、電子ズーム部１２０１を追加した点が異なり、他の構成は図６と同様である。そのため、図６と同様の機能ブロックについては同一番号を付し、その詳細な説明は省略する。
【００９４】
図１２において、記録媒体６０１から再生され、信号処理部６０４により処理された動画像信号は、電子ズーム部１２０１に出力される。電子ズーム部１２０１は、図１０に示した電子ズーム部９０１と同様の構成を備え、入力した動画像信号の各画面のうち、制御部６０７により指定された範囲の画像信号を拡大して画面ぶれ補正部６０４に出力する。
【００９５】
本実施形態では、ユーザがユーザＩ／Ｆ６０８を操作することにより、電子ズーム部１２０１におけるズーム倍率を設定することができる。
【００９６】
また、制御部１２０７は、再生された動画像信号の画素数とユーザが設定したズーム倍率に基づいて、電子ズーム部１２０１における読み出し範囲とズーム倍率を示すズーム制御信号を生成し、電子ズーム部１２０１に出力する。また、制御部６０７は、再生された動画像信号の画素数と表示装置６０１の表示画素数、及び、ズーム倍率に基づいて、前述のぶれ補正制御信号と補正精度設定信号を生成して画面ぶれ補正部６０４に出力する。
【００９７】
次に、本実施形態におけるぶれ補正処理の制御について、図１３のフローチャートを用いて説明する。図１３の処理は、制御部６０７が各部を制御することによって実行される。
【００９８】
ユーザにより動画像信号の再生が開始されるか、或いは、ユーザによりズーム倍率が変更されると図１３のフローが開始する。
【００９９】
まず、画素数検出部６０９の検出結果に基づいて、再生された動画像信号の画素数を検出する（Ｓ１３０１）。次に、ユーザが設定したズーム倍率を検出する（Ｓ１３０２）。そして、これら入力動画像信号の画素数とズーム倍率に基づいて、電子ズーム部１２０１における読み出し範囲の画素数を算出する（Ｓ１３０３）。そして、電子ズームの読み出し範囲の画素数と表示装置６０１０の表示画素数により下記の演算を行い、その比αを算出する（Ｓ１３０４）。
α＝読み出し範囲の画素数／表示装置の表示画素数      （式４）
以下、Ｓ１３０５〜Ｓ１３１４の処理は図５のステップＳ５０２〜Ｓ５１１と同様である。
【０１００】
この様に、本実施形態では、再生した動画像信号を電子ズームにより拡大して外部の表示装置に出力する際に、表示装置の表示画素数の情報を取得する。そして、電子ズームにおける拡大範囲の画素数と表示画素数との比較結果に応じて、画面ぶれの補正の度合いを制御している。
【０１０１】
これにより、動画像信号を電子ズームで拡大して表示装置に出力する場合にも、表示装置の画素数とズーム範囲の画素数を考慮して、最小限の画質劣化に抑えながら、画面ぶれを補正することが可能となる。
【０１０２】
次に、第５の実施形態を説明する。本実施形態では、第１、第３の実施形態と同様、外部から入力した動画像信号を表示する表示装置について説明する。
【０１０３】
図１４は、本実施形態の表示装置１４００の構成を示した図である。図１４の表示装置１４００は、図９の表示装置１００に対し、距離測定部１４０１を追加した点が異なり、他の構成は図９と同様である。そのため、図９と同様の機能ブロックについては同一番号を付し、その詳細な説明は省略する。
【０１０４】
図１４において、距離測定部１４０１は、表示装置１４００が表示する動画像を鑑賞しているユーザとこの表示装置１４００との間の距離を測定し、測定結果を制御部１０７に出力する。なお、表示装置とユーザ間の距離の測定方法については多数の公知技術が提案されており、本実施形態では、公知の測定技術のうちの何れかを用いることとする。
【０１０５】
第３の本実施形態では、電子ズーム部９０１における読み出し範囲と表示部１０５の表示画素数に基づいて画面ぶれ補正部１０２による補正処理を制御していた。
【０１０６】
本実施形態では、電子ズームの読み出し範囲と表示画素数に加え、表示部１０５の画面サイズと距離測定部１４０１により測定されたユーザまでの距離の情報に基づいて、画面ぶれ補正部１０２の処理を制御する。
【０１０７】
また、制御部１０７はメモリを内蔵し、このメモリには、表示部１０５の画素数の情報と画面サイズの情報が記憶されている。一般に、テレビ受信機などの表示装置では表示画面は長方形であり、その画面サイズは対角線の長さ（単位はインチ）で表現されることが多い。そこで、本実施形態でも、表示部１０５の画面サイズをその対角線の長さの情報として記憶している。
【０１０８】
次に、本実施形態におけるぶれ補正処理の制御について、図１５のフローチャートを用いて説明する。図１５の処理は、制御部１０７が各部を制御することによって実行される。
【０１０９】
本実施形態においては、制御部１０７は、入力動画像信号の画素数と表示部１０５の画素数、ズーム倍率、表示部１０５のサイズ、及びユーザまでの距離に基づいて、画面ぶれ補正部１０２を制御する。
【０１１０】
ユーザＩ／Ｆ２０９による電源投入の指示、入力部１０１に入力された動画像信号が変更された場合、ズーム倍率が変更された場合、及び、ユーザまでの距離が変更したに、図１５のフローが開始する。
【０１１１】
まず、入力した動画像信号の画素数を検出する（Ｓ１５０１）。次に、ユーザが設定したズーム倍率を検出する（Ｓ１５０２）。そして、これら入力動画像信号の画素数とズーム倍率に基づいて、電子ズーム部９０１における読み出し範囲の画素数を算出する（Ｓ１５０３）。次に、ユーザまでの距離を検出する（Ｓ１５０４）。
【０１１２】
そして、下記の通り演算を行い、ぶれ補正のための基準比率αを算出する（Ｓ１５０５）。
【０１１３】
まず、下記の演算を行い、電子ズームの読み出し範囲の画素数と表示部１０５の画素数の比である、γを算出する。
γ＝読み出し範囲の画素数／表示部の画素数      （式５）
次に、ユーザまでの距離情報と表示部１０５のサイズから、下記の様に補正値βを求める。
β＝ｆ（１／画面サイズ，ユーザまでの距離）      （式６）
ここで、βは、画面サイズに反比例し、ユーザまでの距離に比例する。
【０１１４】
そして、これらγとβから、下記の演算によって基準比率αを求める。
α＝γ×β      （式７）
この様にαを算出すると、以下、図５のステップＳ５０２〜Ｓ５１１と同様に、Ｓ１３０５〜Ｓ１３１４の処理を行う。
【０１１５】
ここで、例えば、α＞２の場合、表示画素数が読み出し範囲の画素数より十分に小さく、画面サイズも小さく、ユーザまでの距離も遠いということになる。即ち、ユーザにはあまり解像度が高くない動画像が表示されていることになる。この場合にはぶれ補正処理を禁止している（Ｓ１５０６でＮ、Ｓ１５１５）。
【０１１６】
また、２≧α＞１の場合、読み出し範囲の画素数が表示画素数の２倍程度の差で収まっていて、画面サイズやユーザまでの距離も極端な値でないということになる。この場合には、画面ぶれの補正度合いを弱めに設定する（Ｓ１５０８でＮ、Ｓ１５１２）。
【０１１７】
また、１≧α＞１／２の場合、表示画素数と読み出し範囲の画素数が同程度で、画面サイズが通常サイズであり、ユーザまでの距離もそれほど離れていないということになる。この場合には、画面ぶれの補正度合いを中程度に設定する（Ｓ１５０９でＮ、Ｓ１５１３）。
【０１１８】
また、１／２≧α＞１／４の場合、表示画素数と読み出し範囲の差がそれほど無く、画面サイズが中型サイズであり、ユーザまでの距離もそれほど近くないということになる。この場合には、画面ぶれの補正度合いをやや強めに設定する（Ｓ１５１０でＮ、Ｓ１５１４）。
【０１１９】
また、１／４≧αの場合、読み出し範囲の画素数が表示画素数の１／４以下で、画面サイズが大型であり、ユーザまでの距離が近いということになる。この場合には、画面ぶれの補正度合いを強めに設定する（Ｓ１５１０でＹ、Ｓ１５１１）。
【０１２０】
この様に、本実施形態では、入力した動画像信号を表示する際に、電子ズームの読み出し範囲と表示画素数に加え、ユーザまでの距離と画面サイズに応じて、画面ぶれの補正の度合いを制御している。
【０１２１】
そのため、画面サイズやユーザの鑑賞している位置に応じて、最小限の画質劣化に抑えながら、表示する動画像に含まれる画面ぶれを補正することが可能となる。
【０１２２】
なお、本実施形態では、画面サイズとユーザまでの距離の両方を用いて補正値βを算出したが、何れか一方だけを使うようにしてもよい。また、本実施形態では、補正値βを、画面サイズに反比例し、ユーザまでの距離に比例する関数によって算出したが、この関数は適宜設定することが可能である。
【０１２３】
また、本実施形態では、電子ズームの際の読み出し範囲と表示画素数とに基づいてγを算出したが、図１の様に電子ズーム部を持たない場合には、入力動画像信号の画素数と表示画素数からγを算出するようにしてもよい。
【０１２４】
この場合、入力動画像信号の画素数と表示画素数、及び、表示画面サイズ及び（または）ユーザまでの距離に基づいて、画面ぶれ補正の度合いを制御することになる。
【０１２５】
次に、第６の実施形態を説明する。
【０１２６】
本実施形態の構成は、図１２の再生装置１２００と同様である。
【０１２７】
本実施形態では、表示装置６０１０から、表示画素数の情報に加え、表示装置６０１０の画面サイズの情報も取得する。そして、この画面サイズの情報も用いて画面ぶれ補正の処理を制御する。
【０１２８】
外部の表示装置６０１０の表示画素数及び画面サイズ情報の取得処理について、図１６のフローチャートにより説明する。
【０１２９】
電源投入時、及び、新たに表示装置６０１０が接続されたことに応じて図１６の処理を開始する。
【０１３０】
まず、制御部６０７が、通信部６０６に対し、表示装置６０１０の表示画素数を要求するよう指示する。通信部６０６は、外部の表示装置６０１０に対し、表示画素数と画面サイズの情報を要求するためのコマンドを送信する（Ｓ１６０１）。そして、通信部６０６が表示装置６０１０から表示画素数及び画面サイズの情報を受信すると、受信した情報を制御部６０７に出力する（Ｓ１６０２）。制御部６０７は、表示画素数と画面サイズの情報を内部のメモリに記憶する（Ｓ１６０３）。
【０１３１】
次に、本実施形態におけるぶれ補正処理の制御について、図１７のフローチャートを用いて説明する。図１７の処理は、ほぼ図１３の処理と同様であるが、Ｓ１７０４におけるαの算出処理が異なる。
【０１３２】
Ｓ１７０４では、電子ズームの読み出し範囲の画素数と表示装置６０１０の表示画素数、及び、画像サイズに基づいて、下記の演算を行って基準比率αを算出する。
α＝読み出し範囲の画素数／表示装置の表示画素数×１／画面サイズ      （式８）
以下、図１３の処理と同様に、このαの値に従って画面ぶれ補正部６０４の処理を制御する。
【０１３３】
この様に、本実施形態では、動画像信号を表示装置に出力する際に、電子ズームの読み出し範囲と表示装置の画素数に加え、表示装置の画面サイズに応じて、画面ぶれの補正の度合いを制御している。
【０１３４】
そのため、画面サイズに応じて、最小限の画質劣化に抑えながら、表示する動画像に含まれる画面ぶれを補正することが可能となる。
【０１３５】
なお、本実施形態では、電子ズームの際の読み出し範囲と表示画素数、画面サイズに基づいてαを算出した。しかし、図６の様に電子ズーム部を持たない場合には、再生動画像信号の画素数と表示装置の画素数、及び画面サイズからαを算出するようにしてもよい。
【０１３６】
この場合、再生動画像信号の画素数と表示装置の画素数、及び、表示画面サイズに基づいて、画面ぶれ補正の度合いを制御することになる。
【０１３７】
また、外部の表示装置がユーザまでの距離を検出する構成を備えている場合には、この距離の情報を表示装置から取得し、図１５の処理と同様にユーザとの距離情報を使って画面ぶれ補正処理を制御してもよい。
【０１３８】
なお、本実施形態では、表示装置や再生装置に対して本発明を適用した場合について説明した。これ以外にも、例えば、ビデオカメラやデジタルカメラなどの撮像装置、形態電話などの携帯端末等、動画像を表示装置に出力する機能を持つものであれば同様に本発明を適用可能である。
【図面の簡単な説明】
【０１３９】
【図１】本発明の実施形態における表示装置の構成を示す図である。
【図２】画面ぶれ補正部の構成を示す図である。
【図３】画面ぶれ検出部の構成を示す図である。
【図４】画面ぶれ補正部によるぶれ補正の様子を示す図である。
【図５】ぶれ補正処理を示すフローチャートである。
【図６】本発明の実施形態における再生装置の構成を示す図である。
【図７】再生装置による表示画素数情報の取得処理を示すフローチャートである。
【図８】ぶれ補正処理を示すフローチャートである。
【図９】本発明の実施形態における表示装置の構成を示す図である。
【図１０】電子ズーム部の構成を示す図である。
【図１１】ぶれ補正処理を示すフローチャートである。
【図１２】本発明の実施形態における再生装置の構成を示す図である。
【図１３】ぶれ補正処理を示すフローチャートである。
【図１４】本発明の実施形態における表示装置の構成を示す図である。
【図１５】ぶれ補正処理を示すフローチャートである。
【図１６】再生装置による表示画素数と画面サイズの情報の取得処理を示すフローチャートである。
【図１７】ぶれ補正処理を示すフローチャートである。
【図１】
2010028735.tif 000003
【図２】
2010028735.tif 000004
【図３】
2010028735.tif 000005
【図４】
2010028735.tif 000006
【図５】
2010028735.tif 000007
【図６】
2010028735.tif 000008
【図７】
2010028735.tif 000009
【図８】
2010028735.tif 000010
【図９】
2010028735.tif 000011
【図１０】
2010028735.tif 000012
【図１１】
2010028735.tif 000013
【図１２】
2010028735.tif 000014
【図１３】
2010028735.tif 000015
【図１４】
2010028735.tif 000016
【図１５】
2010028735.tif 000017
【図１６】
2010028735.tif 000018
【図１７】
2010028735.tif 000019