(57)【要約】  ディスプレイ中のより広い領域を活用して見易い映像を表示できる映像処理装置を提供する。映像処理装置に備えられ、入力映像を処理する映像処理部（２０）は、入力映像を保存する第１メモリ（２０１）と、入力映像を保存する第２メモリ（２０２）と、第１メモリ（２０１）に保存された入力映像の第１領域を圧縮伸張するとともに、第２メモリ（２０２）に保存された入力映像の第２領域を圧縮伸張する圧縮伸張制御部（２０７）と、圧縮伸張制御部（２０７）にて圧縮伸張された第１領域の映像と圧縮伸張制御部（２０７）にて圧縮伸張された第２領域の映像とを左右に並べた出力映像を生成する画像合成部（２０８）とを備えている。
2012120781.tif 000002
【特許請求の範囲】
【請求項１】
入力映像を処理する映像処理部を備え、
前記映像処理部は、
前記入力映像を保存する第１メモリと、
前記入力映像を保存する第２メモリと、
前記第１メモリに保存された前記入力映像の第１領域を圧縮伸張するとともに、前記第２メモリに保存された前記入力映像の第２領域を圧縮伸張する圧縮伸張制御部と、
前記圧縮伸張制御部にて圧縮伸張された前記第１領域の映像と前記圧縮伸張制御部にて圧縮伸張された前記第２領域の映像とを左右に並べた出力映像を生成する画像合成部と、
を備えたことを特徴とする映像処理装置。
【請求項２】
前記第１領域は前記入力映像の上側領域であり、前記第２領域は前記入力映像の下側領域であることを特徴とする請求項１に記載の映像処理装置。
【請求項３】
前記第１領域は前記入力映像の全領域であり、前記第２領域は前記全領域より小さい前記入力映像中の矩形領域であることを特徴とする請求項１に記載の映像処理装置。
【請求項４】
前記画像合成部にて生成された前記出力映像を表示する分割表示モードでの表示が可能であるか否かを判断して、前記映像処理部を制御する分割制御部を更に備えたことを特徴とする請求項１に記載の映像処理装置。
【請求項５】
前記分割制御部は、前記入力映像が上下で分割された映像であるか否かを判断し、前記入力映像が上下で分割された映像であるときは、上側の領域を前記第１領域とし、下側の領域を前記第２領域として、前記分割表示モードで表示するための出力映像を生成するように、前記映像処理部を制御する請求項４に記載の映像処理装置。
【請求項６】
前記分割制御部は、前記入力映像が上下で分割された映像であるか否かを判断し、前記入力映像が上下で分割された映像であるときは、表示モードとして、前記画像合成部にて生成された前記出力映像を表示する分割表示モードを追加し、ユーザによって前記分割表示モードが選択されたときに、上側の領域を前記第１領域とし、下側の領域を前記第２領域として、前記分割表示モードで表示するための出力映像を生成するように、前記映像処理部を制御する請求項４に記載の映像処理装置。
【請求項７】
前記分割制御部は、前記入力映像を上下に分割するための分割位置の指定を含むユーザの指示に応じて、前記分割位置の上側の領域を前記第１領域とし、前記分割位置の下側の領域を前記第２領域として、前記分割表示モードで表示するための出力映像を生成するように、前記映像処理部を制御する請求項４に記載の映像処理装置。
【請求項８】
前記分割制御部は、前記入力映像から顔領域を検出し、前記入力映像から顔領域が検出されたときは、前記入力映像の全領域を前記第１領域とし、前記顔領域を前記第２領域とし、前記分割表示モードで表示するための出力映像を生成するように、前記映像処理部を制御する請求項４に記載の映像処理装置。
【請求項９】
前記分割制御部は、前記入力映像から顔領域を検出し、前記入力映像から顔領域が検出されたときは、表示モードとして、前記画像合成部にて生成された前記出力映像を表示する分割表示モードを追加し、ユーザによって前記分割表示モードが選択されたときに、前記入力映像の全領域を前記第１領域とし、前記顔領域を前記第２領域とし、前記分割表示モードで表示するための出力映像を生成するように、前記映像処理部を制御する請求項４に記載の映像処理装置。
【請求項１０】
前記分割制御部は、前記入力映像中の一部領域の指定を含むユーザの指示に応じて、前記入力映像の全領域を前記第１領域とし、前記一部領域を前記第２領域とし、前記分割表示モードで表示するための出力映像を生成するように、前記映像処理部を制御する請求項４に記載の映像処理装置。
【請求項１１】
請求項１ないし１０のいずれか一項に記載の映像処理装置と、
前記出力映像を表示するディスプレイと、
を備えたことを特徴とする映像表示システム。
【発明の詳細な説明】
【関連する出願】
【０００１】
本出願では、２０１１年３月１０日に日本国に出願された特許出願番号２０１１−０５２５８４の利益を主張し、当該出願の内容は引用することによりここに組み込まれているものとする。
【技術分野】
【０００２】
本発明は、入力映像を処理する映像処理装置及びそれを含む映像表示システムに関するものである。
【背景技術】
【０００３】
従来、入力された映像（以下、「入力映像」という。）をディスプレイのアスペクト比に合わせて縦方向（又は列方向）及び／又は横方向（又は行方向）（以下、「縦横方向」という。）に圧縮伸張して表示する映像処理装置が知られている（例えば特許文献１を参照）。この映像処理装置により、入力映像とディスプレイのアスペクト比が合致していなくても、入力映像を縦横方向に圧縮伸張することで、ディスプレイの全体を使って映像を表示することが可能になる。【０００４】
近年のディスプレイは、その用途に合わせて様々なアスペクト比で構成される。例えば、車両の後部座席用のディスプレイとして、一般的なアスペクト比（例えば、横：縦＝１６：９）のディスプレイよりも極端に横長であるアスペクト比（例えば、横：縦＝３０：９）を有するディスプレイも提案されている。
【先行技術文献】
【特許文献】
【０００５】
【特許文献１】特開２００１−０８６４７０号公報
【発明の概要】
【発明が解決しようとする課題】
【０００６】
しかしながら、一般的なアスペクト比の入力映像を極端に横長のディスプレイに合わせるように圧縮伸張すると、入力映像は極端に横長になってしまい、見難い映像になってしまう。【０００７】
一方、横長のディスプレイに対して、一般的なアスペクト比の入力映像を横方向に伸張しないで、例えばディスプレイの中央に表示すれば、左右に大きな黒帯部分ができてしまい、横長のディスプレイを有効に活用できなくなる。【０００８】
本発明は、上記の問題点に鑑みてなされたものであり、入力映像とディスプレイのアスペクト比が異なる場合に、ディスプレイ中のより広い領域を活用して見易い映像を表示できる映像処理装置を提供することを目的とする。
【課題を解決するための手段】
【０００９】
上記従来の課題を解決するために、本発明の映像処理装置は、入力映像を処理する映像処理部を備えた構成を有している。そして、映像処理部は、入力映像を保存する第１メモリと、入力映像を保存する第２メモリと、第１メモリに保存された入力映像の第１領域を圧縮伸張するとともに、第２メモリに保存された入力映像の第２領域を圧縮伸張する圧縮伸張制御部と、圧縮伸張制御部にて圧縮伸張された第１領域の映像と圧縮伸張制御部にて圧縮伸張された第２領域の映像とを左右に並べた出力映像を生成する画像合成部とを備えた構成を有している。【００１０】
また、本発明の別の態様は、映像表示システムであって、この映像表示システムは、上記のいずれかの映像処理装置と、出力映像を表示するディスプレイとを備えた構成を有している。
【発明の効果】
【００１１】
本発明によれば、入力映像の第１領域と第２領域とが行方向に並べて表示されるので、横長のディスプレイのより広い領域を活用して見易い映像を表示することができる。【００１２】
以下に説明するように、本発明には他の態様が存在する。したがって、この発明の開示は、本発明の一部の提供を意図しており、ここで記述され請求される発明の範囲を制限することは意図していない。
【図面の簡単な説明】
【００１３】
【図１】図１は、本発明の第１の実施の形態における映像処理装置の映像処理部の構成を示すブロック図
【図２】図２は、本発明の第１の実施の形態における映像処理装置の構成を示すブロック図
【図３】図３は、本発明の第１の実施の形態における分割判定部による判定の処理の一例を示すフロー図
【図４】図４は、本発明の第１の実施の形態における分割判定部による判定の処理の他の例を示すフロー図
【図５】図５は、本発明の第１の実施の形態における制御部による制御処理の一例を示すフロー図
【図６】図６は、本発明の第１の実施の形態における制御部による制御処理の他の例を示すフロー図
【図７】図７は、本発明の第１の実施の形態における制御部による制御処理の他の例を示すフロー図
【図８】図８は、本発明の第１の実施の形態における制御部による制御処理の他の例を示すフロー図
【図９】図９は、本発明の第１の実施の形態における制御部による制御処理の他の例を示すフロー図
【図１０】図１０（ａ）は、本発明の第１の実施の形態における入力映像を示す図  図１０（ｂ）は、本発明の第１の実施の形態における出力映像を示す図
【図１１】図１１は、本発明の第２の実施の形態における映像処理装置の構成を示すブロック図
【図１２】図１２（ａ）は、本発明の第２の実施の形態における入力映像を示す図    図１２（ｂ）は、本発明の第２の実施の形態における出力映像を示す図
【図１３】図１３は、本発明の第３の実施の形態における映像処理装置の構成を示すブロック図
【図１４】図１４（ａ）は、本発明の第３の実施の形態における出力映像を示す図  図１４（ｂ）は、本発明の第３の実施の形態における出力映像を示す図
【図１５】図１５は、本発明の第４の実施の形態における映像処理装置の構成を示すブロック図
【図１６】図１６は、本発明の第５の実施の形態における映像処理装置の構成を示すブロック図
【図１７】図１７（ａ）は、本発明の第５の実施の形態における入力映像を示す図  図１７（ｂ）は、本発明の第５の実施の形態における出力映像を示す図
【図１８】図１８（ａ）は、本発明の第５の実施の形態の第１の変形例における入力映像を示す図  図１８（ｂ）は、本発明の第５の実施の形態の第１の変形例における出力映像を示す図
【図１９】図１９（ａ）は、本発明の第５の実施の形態の第２の変形例における入力映像を示す図  図１９（ｂ）は、本発明の第５の実施の形態の第２の変形例における出力映像を示す図  図１９（ｃ）は、本発明の第５の実施の形態の第２の変形例における出力映像を示す図
【発明を実施するための形態】
【００１４】
以下に、本発明の詳細な説明を述べる。以下に説明する実施の形態は本発明の単なる例であり、本発明は様々な態様に変形することができる。従って、以下に開示する特定の構成および機能は、特許請求の範囲を限定するものではない。
【００１５】
本発明の実施の形態の映像処理装置は、入力映像を処理する映像処理部を備えた構成を有している。そして、映像処理部は、入力映像を保存する第１メモリと、入力映像を保存する第２メモリと、第１メモリに保存された入力映像の第１領域を圧縮伸張するとともに、第２メモリに保存された入力映像の第２領域を圧縮伸張する圧縮伸張制御部と、圧縮伸張制御部にて圧縮伸張された第１領域の映像と圧縮伸張制御部にて圧縮伸張された第２領域の映像とを左右に並べた出力映像を生成する画像合成部とを備えた構成を有している。
【００１６】
この構成により、入力映像は、第１メモリにも第２メモリにも保存され、入力映像の第１領域及び第２領域を左右に並べた出力映像が、第１メモリから第１領域を読み出して圧縮伸張し、第２メモリから第２領域を読み出して圧縮伸張することで生成される。よって、ディスプレイが入力映像よりも横長である場合において入力映像をそのまま表示すれば、入力映像の左右には映像のない黒帯部分が生じすることになるところ、上記の構成により、第１領域と第２領域とが行方向に並べて表示されるので、横長のディスプレイのより広い領域を活用して見易い映像を表示できる。
【００１７】
また、上記の映像処理装置において、第１領域は入力映像の上側領域であり、第２領域は入力映像の下側領域であってよい。
【００１８】
この構成により、上下に分割可能な入力映像を上下に分割して、圧縮伸張した上で、行方向に並べて表示することが可能になる。
【００１９】
また、上記の映像処理装置において、第１領域は入力映像の全領域であり、第２領域は全領域より小さい入力映像中の矩形領域であってよい。
【００２０】
この構成により、入力映像から抜き出した一部領域（矩形領域）を拡大して、入力映像と並べて表示することが可能になる。
【００２１】
また、上記の映像処理装置は、画像合成部にて生成された出力映像を表示する分割表示モードでの表示が可能であるか否かを判断して、映像処理部を制御する分割制御部を更に備えていてよい。
【００２２】
この構成により、入力映像が分割表示モードでの表示が可能な映像である場合に、入力映像の第１領域及び第２領域を左右に並べた出力映像が生成される。なお、入力映像が分割表示モードでの表示が可能な映像であるか否かは、入力映像の内容から判断してもよいし、ユーザの指示に基づいて判断してもよい。
【００２３】
また、上記の映像処理装置において、分割制御部は、入力映像が上下で分割された映像であるか否かを判断し、入力映像が上下で分割された映像であるときは、上側の領域を第１領域とし、下側の領域を第２領域として、分割表示モードで表示するための出力映像を生成するように、映像処理部を制御してよい。
【００２４】
この構成により、入力映像が上下で分割された映像であるときには、自動的に、その上側の領域と下側の領域とを左右に並べた出力映像が生成される。
【００２５】
また、上記の映像処理装置は、分割制御部は、入力映像が上下で分割された映像であるか否かを判断し、入力映像が上下で分割された映像であるときは、表示モードとして画像合成部にて生成された出力映像を表示する分割表示モードを追加し、ユーザによって分割表示モードが選択されたときに、上側の領域を第１領域とし、下側の領域を第２領域として、分割表示モードで表示するための出力映像を生成するように、映像処理部を制御してよい。
【００２６】
この構成により、入力映像が上下で分割された映像であるときには、ユーザは、その上側の領域と下側の領域とを左右に並べた出力映像が生成されるよう指示することができる。
【００２７】
また、上記の映像処理装置において、分割制御部は、入力映像を上下に分割するための分割位置の指定を含むユーザの指示に応じて、分割位置の上側の領域を第１領域とし、分割位置の下側の領域を第２領域として、分割表示モードで表示するための出力映像を生成するように、映像処理部を制御してよい。
【００２８】
この構成により、ユーザは、入力映像を分割位置で上下に分割して、その上側の領域と下側の領域とを左右に並べた出力映像を生成するよう指示することができる。
【００２９】
また、上記の映像処理装置において、分割制御部は、入力映像から顔領域を検出し、入力映像から顔領域が検出されたときは、入力映像の全領域を第１領域とし、顔領域を第２領域とし、分割表示モードで表示するための出力映像を生成するように、映像処理部を制御してよい。
【００３０】
この構成により、入力映像に人物の顔があるときには、自動的に、入力映像の全領域と顔領域とを左右に並べた出力映像が生成される。
【００３１】
また、上記の映像処理装置において、分割制御部は、入力映像から顔領域を検出し、入力映像から顔領域が検出されたときは、表示モードとして、画像合成部にて生成された出力映像を表示する分割表示モードを追加し、ユーザによって分割表示モードが選択されたときに、入力映像の全領域を第１領域とし、顔領域を第２領域とし、分割表示モードで表示するための出力映像を生成するように、映像処理部を制御してよい。
【００３２】
この構成により、入力映像に人物の顔があるときには、ユーザは、入力映像の全領域と顔領域とを左右に並べた出力映像を生成するよう指示することができる。
【００３３】
また、上記の映像処理装置において、分割制御部は、入力映像中の一部領域の指定を含むユーザの指示に応じて、入力映像の全領域を第１領域とし、一部領域を第２領域とし、分割表示モードで表示するための出力映像を生成するように、映像処理部を制御してよい。
【００３４】
この構成により、ユーザは、入力映像中の任意の領域を指定して、入力映像中の指定した領域と入力映像の全領域とを左右に並べた出力映像を生成するよう指示することができる。
【００３５】
また、本発明の別の態様は、映像表示システムであって、この映像表示システムは、上記のいずれかの映像処理装置と、出力映像を表示するディスプレイとを備えた構成を有している。
【００３６】
この構成によっても、第１領域と第２領域とが行方向に並べて表示されるので、横長のディスプレイのより広い領域を活用して見易い映像を表示できる。
【００３７】
以下、本発明を実施するための形態について、図面を参照しながら説明する。
【００３８】
（第１の実施の形態）
図１は、本発明の第１の実施の形態の映像処理装置の映像処理部の構成を示すブロック図であり、図２は、本発明の第１の実施の形態の映像処理装置の構成を示すブロック図である。まず、図２を参照して映像処理装置の全体の構成を説明し、その後、図１を参照して映像処理装置の映像処理部の構成を詳細に説明する。
【００３９】
本実施の形態の映像処理装置１００は、表示モードとして、入力映像のアスペクト比を変更せずにそのまま表示する通常表示モードのほか、本実施の形態で説明するように、入力映像を上側の領域及び下側の領域に分割して、各領域の映像を左右に並べて表示する上下分割表示モードを有しており、更には、入力映像をディスプレイのサイズに合わせて圧縮伸張するフル画面表示モード等の表示モードを有しており、表示モードに従って入力映像を処理する。なお、上下分割表示モードは、本発明の分割表示モードの一態様である。第１の実施の形態では、上下分割表示モードで映像を表示するための映像処理装置１００の構成を説明する。
【００４０】
本実施の形態の映像処理装置１００は、図１０（ａ）に示すような入力映像を上側領域及び下側領域に分割して、各領域の映像を縦横方向に圧縮伸張して、図１０（ｂ）に示すような各領域の映像を左右に並べてディスプレイの全領域で表示する出力映像を生成する。本実施の形態の映像処理装置１００には、映像処理装置１００で生成された出力映像が入力されるディスプレイが接続され、映像処理装置１００とディスプレイとで、本発明の映像表示システムが構成される。なお、ディスプレイとしては公知のディスプレイを採用できる。
【００４１】
図２に示すように、本実施の形態の映像処理装置１００は、分割判定部１０と、映像処理部２０と、制御部３０とを備えている。分割判定部１０と制御部３０とを合わせた構成は、本発明の分割制御部に相当する。分割判定部１０は、入力映像が図１０（ａ）に示すように、画面を上下に分割可能な映像であるか否かを判定する。分割判定部１０は、第１ラインメモリ１０１、第２ラインメモリ１０２、第３ラインメモリ１０３、ラインメモリ書込制御部１０４、ラインメモリ読出制御部１０５、及び判定部１０６を備えている。
【００４２】
第１ラインメモリ１０１、第２ラインメモリ１０２、第３ラインメモリ１０３、及びラインメモリ書込制御部１０４には入力映像が入力される。ラインメモリ書込制御部１０４は、入力映像に基づいて、第１ラインメモリ１０１、第２ラインメモリ１０２、及び第３ラインメモリ１０３のそれぞれに書込信号を与えることで、映像信号を１ラインずつ第１ラインメモリ１０１、第２ラインメモリ１０２、及び第３ラインメモリ１０３のいずれかに書き込ませる。書き込むラインメモリは、１ラインごとに第１ラインメモリ１０１、第２ラインメモリ１０２、第３ラインメモリ１０３の順で選択される。
【００４３】
ラインメモリ読出制御部１０５は、第１ラインメモリ１０１、第２ラインメモリ１０２、及び第３ラインメモリ１０３のうちの、ラインメモリ書込制御部１０４の制御によって映像信号が書き込まれるラインメモリを除く２つのラインメモリから信号を読み出して、判定部１０６に出力する。
【００４４】
判定部１０６は、ライン読出制御部１０５によって読み出された２ラインの映像信号が、画面の上下分割位置の映像信号であるか否かを判定する。具体的には、判定部１０６は、ライン読出制御部１０５によって読み出された２ラインの映像信号の間の変化の大きさに基づいて、その２ラインが上下分割位置（上下画面の境界）を跨ぐ２ラインであるか否かを判定条件に従って判定する。判定条件は以下の通りである。
【００４５】
（判定条件１）
判定条件１は、以下の境界条件を満たす２ラインの位置が画面の上下方向の中央付近の数ライン以内の領域であることという条件である。境界条件として、例えば以下の（１）〜（５）のいずれかの条件を採用できる。
【００４６】
（１）２ラインの映像信号の対応する列の画素の間の輝度差の和が、その映像信号のフレームにおいて最大又は５番目以内である。
（２）２ラインの映像信号の対応する列の画素の間の輝度差の絶対値の和が、その映像信号のフレームにおいて最大又は５番目以内である。
（３）２ラインの映像信号の対応する列の画素の間の色度差の和が、その映像信号のフレームにおいて最大又は５番目以内である。
（４）２ラインの映像信号の対応する列の画素の間の色度差の絶対値の和が、その映像信号のフレームにおいて最大又は５番目以内である。
（５）２ラインのうちの少なくとも１ラインが黒帯領域である。
なお、境界条件は、上記の（１）〜（４）の条件を任意に組み合わせた条件であってもよい。
【００４７】
なお、判定部１０６は、判定条件１で判定をする場合には、必ずしも映像信号のすべての隣り合う２ラインについて判定を行う必要はなく、上下方向の中央付近の隣り合う２ラインのみについて判定をしてもよい。また、隣り合う２ラインの左右方向の中央付近のみについて判定をしてもよく、さらに、上下方向の中央付近の隣り合う２ラインの左右方向の中央付近のみについて判定をしてもよい。
【００４８】
（判定条件２）
判定条件２は、画面の上下方向の中央付近の数ライン以内において、輝度変化量が所定の閾値を超えるという条件である。輝度変化量として、例えば以下の（１）〜（４）のいずれかの量を採用できる。
【００４９】
（１）２ラインの映像信号の対応する列の画素の間の輝度差の和
（２）２ラインの映像信号の対応する列の画素の間の輝度差の絶対値の和
（３）２ラインの映像信号の対応する列の画素の間の色度差の和
（４）２ラインの映像信号の対応する列の画素の間の色度差の絶対値の和
【００５０】
なお、上記の判定条件１及び判定条件２において、２ラインの映像信号の対応する列の画素の間の輝度差の和、２ラインの映像信号の対応する列の画素の間の輝度差の絶対値の和、２ラインの映像信号の対応する列の画素の間の色度差の和、及び２ラインの映像信号の対応する列の画素の間の色度差の絶対値の和は、当該２ラインの全列の画素についての和であってもよいし、例えば、数画素間隔で抽出された列の画素についての和であってもよい。
【００５１】
判定部１０６は、上記のような判定条件で、ライン読出制御部１０５によって２ラインの映像信号が読み出されるごとに、その２ラインの映像信号が、判定条件を満たすか否かを判断する。
【００５２】
図３は、判定部１０６による分割判定の処理の一例を示すフロー図である。判定部１０６は、入力垂直同期信号（Ｖｓｙｎｃ）の立下りを待って（ステップＳ３１）、立下りがあると（ステップＳ３１にてＹｅｓ）、判定条件を満たすか否かを判断する（ステップＳ３２）。判定条件を満たさない場合は（ステップＳ３２にてＮｏ）、判定結果として「Ｎｏ」を出力して、フレームカウンタをリセットする（ステップＳ３３）。
【００５３】
判定条件を満たす場合には（ステップＳ３２にてＹｅｓ）、フレームカウンタが６０に達しているか否かを判断する（ステップＳ３４）。フレームカウンタが６０に達していない場合には、フレームカウンタをインクリメントして（ステップＳ３５）、ステップＳ３１に戻って再び入力垂直同期信号の立下りを待つ。ステップＳ３４にてフレームカウンタが６０に達している場合は（ステップＳ３４にてＹｅｓ）、判定結果として「Ｙｅｓ」を出力し、フレームカウンタを６０で保持し（ステップＳ３６）、ステップＳ３１に戻って次の入力垂直同期信号の立下りを待つ。
【００５４】
図３のフロー図から明らかなように、判定部１０６は、６０フレーム連続で判定条件を満たす場合に、入力映像は上下に分割可能であると判定し、判定結果として「Ｙｅｓ」、即ち入力映像が上下分割可能であることを示す判定結果を出力する。このように複数フレーム連続して条件を満たす場合にのみ「Ｙｅｓ」の判定結果を出力することで、本来は上下に分割すべきでない入力映像が偶然に判定条件を満たすことで、そのような入力映像が上下分割可能な映像であると誤って判定されることを防止している。
【００５５】
また、図３から明らかなように、「Ｙｅｓ」の判定結果を出力した後は、フレームカウンタが６０に保持されるので、判定条件を満たし続ける限り、ステップＳ３２でＹｅｓとなり、ステップＳ３４でＹｅｓとなるので、「Ｙｅｓ」の判定結果が出力され続ける。入力映像上下分割できるものでなくなったときは、ステップＳ３２にて判定条件を満たさなくなるので、ステップＳ３３にてフレームカウンタがリセットされて、再び６０フレーム連続して判定条件を満たすまで、「Ｙｅｓ」の判定結果は出力されない。なお、「Ｙｅｓ」と判定するためのフレーム数は、６０に限らず、例えば３０、１２０等であってもよい。
【００５６】
図４は、判定部１０６による分割判定の処理の他の例を示すフロー図である。判定部１０６は、入力垂直同期信号（Ｖｓｙｎｃ）の立下りを待って（ステップＳ４１）、立下りがあると（ステップＳ４１にてＹｅｓ）、判定条件を満たすか否かを判断する（ステップＳ４２）。判定条件を満たさない場合は（ステップＳ４２にてＮｏ）、ＮＯカウンタが６０に達しているかを判断する（ステップＳ４３）。ＮＯカウンタが６０に達していない場合は（ステップＳ４３にてＮｏ）、ＮＯカウンタをインクリメントして（ステップＳ４４）、ステップＳ４１に戻って次の入力垂直同期信号の立下りを待つ。
【００５７】
ステップＳ４３にてＮＯカウンタが６０に達している場合には（ステップＳ４３にてＹｅｓ）、ＹＥＳカウンタをリセットして（ステップＳ４５）、判定結果として「Ｎｏ」を出力し、ＮＯカウンタを６０で保持し（ステップＳ４６）、ステップＳ４１に戻って次の入力垂直同期信号の立下りを待つ。
【００５８】
ステップＳ４２にて、判定条件を満たす場合には（ステップＳ４２にてＹｅｓ）、ＮＯカウンタをリセットして（ステップＳ４７）、ＹＥＳカウンタが６０に達しているか否かを判断する（ステップＳ４８）。ＹＥＳカウンタが６０に達していない場合は（ステップＳ４８にてＮｏ）、ＹＥＳカウンタをインクリメントして（ステップＳ４９）、ステップＳ４１に戻って次の入力垂直同期信号の立下りを待つ。ステップＳ４８にてＹＥＳカウンタが６０に達している場合は（ステップＳ４８にてＹｅｓ）、判定結果として「Ｙｅｓ」を出力し、ＹＥＳカウンタを６０に保持し（ステップＳ５０）、ステップＳ４１に戻って次の入力垂直同期信号の立下りを待つ。
【００５９】
このように、図４の例では、所定のフレーム数（６０フレーム）連続して判定条件を満たすときに「Ｙｅｓ」の判定結果を出力し、所定のフレーム数（６０フレーム）連続して判定条件を満たさないときに「Ｎｏ」の判定結果を出力する。
【００６０】
なお、上記のフローにおいて、ＮＯカウンタについては、ステップＳ４２にて判定条件を満たすフレームがあれば、ステップＳ４７で直ちにリセットするのに対して、ＹＥＳカウンタについては、ステップＳ４２にて判定条件を満たさないフレームがあった場合にも、ＮＯカウンタが６０に達するまではリセットをしない。
【００６１】
これは、「Ｙｅｓ」と判定した後の動作中に、偶発的に判定条件を満たさないフレームがあることもあり、そのようなフレームについては「Ｎｏ」の判定結果を出力すべきでないからである。このため、図３のフロー図のように、判定条件を満たさないフレームが複数フレーム（６０フレーム）連続した場合にのみ（ステップＳ４３でＹｅｓ）、ＹＥＳカウンタをリセットして（ステップＳ４５）、判定結果として「Ｎｏ」を出力する（ステップＳ４６）ようにしている。
【００６２】
判定部１０６は、上記の「Ｙｅｓ」の判定結果（図３の例の場合）、又は「Ｙｅｓ」若しくは「Ｎｏ」の判定結果（図４の例の場合）とともに、判定結果が「Ｙｅｓ」である場合には、分割位置の情報（具体的には上下分割するラインが何行目であるかを示す情報）も判定結果として制御部３０に出力する。
【００６３】
図２に戻って、制御部３０は、判定部１０６から入力される判定結果に基づいて、映像処理部２０に制御信号を出力する。この制御信号には、分割表示を行うか否か（上下分割表示モードに設定するか否か）を示す情報とともに、分割表示を行う場合には、分割判定部１０からの判定結果に含まれる分割位置の情報も含まれる。映像処理部２０には、処理すべき入力映像と制御部３０からの制御信号が入力され、映像処理部２０は、制御信号に基づいて、入力映像を処理して出力映像をディスプレイに出力する。
【００６４】
図５は、制御部３０における映像処理部２０の制御処理の一例を示すフロー図である。図５の例は、判定部１０６における判定処理が、図３の例のように、判定結果として「Ｙｅｓ」のみを出力する場合の制御部３０の処理を示している。
【００６５】
制御部３０では、まず、判定部１０６からの判定結果が「Ｙｅｓ」であるか否かを判断する（ステップＳ５１）。判定結果が「Ｙｅｓ」である場合は（ステップＳ５１でＹｅｓ）、ディスプレイに上下分割表示を行うか否かの選択画面を表示し（ステップＳ５２）、ユーザの選択操作を待つ（ステップＳ５３）。ユーザが上下分割表示を選択した場合には（ステップＳ５３にてＹｅｓ）、映像処理部２０に制御信号を出力して、上下分割表示のための映像処理を行わせて（ステップＳ５４）、ステップＳ５１に戻る。
【００６６】
なお、上下分割表示をした後には、例えばモードの切替え等のユーザによる操作に応じて、上下で分割されていない通常の画面に戻る。このように、図５の例では、入力映像が上下分割可能な映像である場合には、まずユーザに上下分割表示をするか否かを選択させて、ユーザの操作に応じて上下分割表示をする。
【００６７】
図６は、制御部３０における映像処理部２０の制御処理の他の例を示すフロー図である。図６の例は、図５の例の変形例である。この例では、判定部１０６からの判定結果が「Ｙｅｓ」であるか否かを判断して（ステップＳ６１）、判定結果が「Ｙｅｓ」である場合は（ステップＳ６１でＹｅｓ）、図５の例のようにユーザに上下分割表示するか否かを問うことなく、自動的に上下分割表示を行なう（ステップＳ６４）。
【００６８】
この例によれば、ユーザは上下分割表示をするための指示操作をする必要がなくなる。また、図５の例と比較して、選択画面を表示させるための構成が不要となり、映像処理装置１００の構成を簡単にできる。
【００６９】
図７は、制御部３０における映像処理部２０の制御処理の他の例を示すフロー図である。図７の例は、判定部１０６における判定処理が、図４の例のように、判定結果として「Ｙｅｓ」及び「Ｎｏ」を出力する場合の制御部３０の処理を示している。
【００７０】
制御部３０は、判定部１０６からの判定結果が「Ｙｅｓ」であるか（ステップＳ７１）、「Ｎｏ」であるか（ステップＳ７２）を判断し、いずれかの判定結果が得られるまで、これを繰り返す。
【００７１】
判定部１０６から判定結果が出力され、それが「Ｙｅｓ」であると（ステップＳ７１でＹｅｓ）、図５の例と同様に、ディスプレイに上下分割表示にするか否かの選択画面を表示し（ステップＳ７４）、ユーザの選択操作を待ち（ステップＳ７４）、ユーザが上下分割表示を選択した場合には（ステップＳ７４にてＹｅｓ）、映像処理部２０に制御信号を出力して、上下分割表示のための映像処理を行わせる（ステップＳ７５）。一方、判定部１０６から判定結果が出力され、それが「Ｎｏ」であると（ステップＳ７２でＹｅｓ）、上下分割表示を通常の表示に戻す（ステップＳ７６）。
【００７２】
即ち、図５の例では、上下分割表示から通常の表示への切替えは、ユーザの操作に基づいて行なっていたが、図７の例では、判定部１０６から出力される「Ｎｏ」の判定結果に基づいて、制御部３０が自動的に行なう。なお、上下分割表示からに通常の表示戻す際に、ステップＳ７３及びステップＳ７４と同様に、選択画面を表示してユーザの操作を待って表示の切替えを行うようにしてもよい。
【００７３】
図８は、制御部３０における映像処理部２０の制御処理の他の例を示すフロー図である。図８の例は、図７の例の変形例である。この例では、判定部１０６から「Ｙｅｓ」の判定結果が与えられると（ステップＳ８１にてＹｅｓ）、図７の例のようにユーザに上下分割表示するか否かを問うことなく、自動的に上下分割表示を行なう（ステップＳ８５）。また、判定部１０６から「Ｎｏ」の判定結果が与えられると（ステップＳ８２にてＹｅｓ）、分割表示を通常の表示に戻す（ステップＳ８５）。
【００７４】
図９は、制御部３０における映像処理部２０の制御処理の他の例を示すフロー図である。図９の例では、映像処理装置１００は、表示モードとして、通常は、通常表示モードとフル画面表示モードを備えており、分割判定部１０において、入力映像が上下分割可能な映像であると判定されると（判定部１０６が「Ｙｅｓ」の判定結果を出力すると）、表示モードに上下分割表示モードを追加する。
【００７５】
即ち、図９において、ステップＳ９１にて「Ｙｅｓ」の判定結果が与えられると、ステップＳ９３にて表示モードに上下分割表示モードを追加し、ステップＳ９４にて、ユーザが表示モードとして上下分割表示モードを選択すると（ステップＳ９４にてＹｅｓ）、制御部３０は、上下分割表示を行なうための制御信号を出力する。図９の例において、その他の処理は、図７の例と同様である。
【００７６】
次に、図１を参照して、映像処理部２０の構成を説明する。以下では、入力映像として、図１０（ａ）に示す映像が与えられ、これを上側の領域及び下側の領域に分割して、各領域の映像を縦横方向に圧縮伸張して、図１０（ｂ）に示すような、各領域の映像を左右に並べて全画面を用い表示される出力映像を生成する処理を例に説明する。図１０（ａ）の入力映像のアスペクト比は、１６：９である。
【００７７】
図１０（ａ）において上側及び下側の領域の映像は、画面上下方向の中央で別れており、即ち上下分割位置は画面上下方向の中央である。従って、上側及び下側の領域の映像のアスペクト比は１６：４．５である。図１０（ｂ）の出力映像のアスペクト比は、３０：９である。図１０（ｂ）の左右分割位置の右側及び左側の領域の映像のアスペクト比は、それぞれ１５：９である。
【００７８】
図１に示すように、映像処理部２０は、第１メモリ２０１、第２メモリ２０２、メモリ書込制御部２０３、第１メモリ読出制御部２０４、第２メモリ読出制御部２０５、映像処理制御部２０６、圧縮伸張制御部２０７、及び画像合成部２０８を備えている。
【００７９】
メモリ書込制御部２０３は、入力映像を第１メモリ２０１及び第２メモリ２０２に書き込む。第１メモリ２０１及び第２メモリ２０２には、いずれも入力映像の全ラインの画素データが書き込まれる。映像処理制御部２０６には、判定部１０６で判定された画面の上下分割位置を示す制御信号が入力される。映像処理制御部２０６は、この制御信号に従って、第１メモリ読出制御部２０４及び第２メモリ読出制御部２０５を制御する。
【００８０】
第１メモリ読出制御部２０４は、映像処理制御部２０６による制御に従って、第１メモリ２０１から画像データを読み出して、圧縮伸張制御部２０７に出力する。第２メモリ読出制御部２０５は、映像処理制御部２０６による制御に従って、第２メモリ２０２から画像データを読み出して、圧縮伸張制御部２０７に出力する。
【００８１】
映像処理制御部２０６は、制御信号が示す画面の上下分割位置までのラインについて第１メモリ２０１から映像信号を読出し、制御信号が示す画面の上下分割位置以下のラインについて第２メモリ２０２から映像信号を読出すように、第１メモリ読出制御部２０４及び第２メモリ読出制御部２０５を制御する。このとき、第１メモリ読出制御部２０４が映像信号の１行目のラインを読み出すタイミングで、第２メモリ読出制御部２０５が画面の上下分割位置以下の１行目（上記の例では、２４１行目）のラインを読み出すようにする。
【００８２】
圧縮伸張制御部２０７は、第１メモリ読出制御部２０４によって読み出された信号を縦横方向に圧縮伸張して画像合成部２０８に出力する。本実施の形態では、入力映像を上下方向中央で上下に分割して、各領域の映像を縦横方向に圧縮伸張して、全画面を用いた左右並列画面に合成する。圧縮伸張制御部２０７は、上側及び下側の領域の映像がそれぞれ表示部１３を左右方向中央で左右に分割したうちの１の分割部分の大きさになるように、上側及び下側の領域の映像の圧縮伸張を行なう。
【００８３】
図１０の例では、アスペクト比が１６：４．５である上側及び下側の領域の映像が、それぞれ、アスペクト比が１５：９の映像となるように、上側及び下側の領域の映像のそれぞれについて圧縮伸張を行なう。圧縮伸張処理には、補間、間引きを含む公知の技術を応用できる。
【００８４】
画像合成部２０８は、圧縮伸張制御部２０７から出力されたデータを１ラインごとに合成して出力映像を生成する。このために、映像処理制御部２０６は、出力映像の中央より左側の列については、第１メモリ２０１から映像信号を読み出し、出力映像の中央より右側の列については、第２メモリ２０２から映像信号を読み出すように、第１メモリ制御部２０４及び第２メモリ制御部２０５を制御する。その結果、画像合成部２０８では、図１０（ｂ）に示すように、第１メモリ２０１から読み出されて圧縮伸張制御部２０７で圧縮伸張されて生成されたラインが画面中央より左側に配置され、第２メモリ２０２から読み出されて圧縮伸張制御部２０７で圧縮伸張されて生成されたラインが画面中央より右側に配置される。画像合成部２０８はこの映像を出力映像としてディスプレイに出力する。
【００８５】
以上のように、第１の実施の形態の映像処理装置１００によれば、上下分割可能な入力映像を上下に分割したうえで、それぞれを圧縮伸張して左右に表示するので、ディスプレイのより広い領域を活用して見易い映像を表示できる。また、分割判定部１０が、入力映像が上下分割可能であるか否かを判定するので、映像処理装置１００は、その判定結果に基づいて上下分割表示モードで入力映像を処理して表示できる。
【００８６】
なお、上記の実施の形態では、判定部１０６は、判定結果が「Ｙｅｓ」である場合には上下分割表示モードで表示する旨の判定結果とともに分割位置の情報を出力したが、上下に分割可能な映像について、上側の領域の映像と下側の領域の映像とが必ず同じ大きさであるということが予め分かっている場合には、判定部１０６は、判定結果のみを出力し、分割位置は出力する必要がない。
【００８７】
また、上記の実施の形態では、分割判定部１０は、上下の２ラインを比較することで、映像信号が上下分割可能であるか否かを判断したが、分割判定部１０は、例えば数ライン分のデータを確保し、ハイパスフィルタ処理をすることで上下分割位置を検出して、映像信号が上下分割可能であるか否かを判断してよく、また、ハイパスフィルタ処理の後にエッジを抽出してエッジ量に基づいて判断をしてもよい。
【００８８】
さらに、上記の実施の形態では、分割判定部１０は、３つのラインメモリを用いて上下の２ラインを比較することで、映像信号が上下分割可能であるか否かを判断したが、ラインメモリが少なくとも１つあれば上下の２ラインを比較することができる。逆に、分割判定部１０がハイパスフィルタ処理により上下分割位置を検出する場合には、４つ以上のラインメモリを備えていてもよい。
【００８９】
（第２の実施の形態）
図１１は、本発明の第２の実施の形態の映像処理装置の構成を示すブロック図である。図１１において、第１の実施の形態の映像処理装置に対応する構成については、同一の符号を付してある。図１１に示すように、本実施の形態の映像処理装置２００は、第１の実施の形態の映像処理装置１００と同様に、分割判定部１０、映像処理部２０、及び制御部３０を備えている。本実施の形態の分割判定部１０は、タッチパネル１０７、タッチ領域検出部１０８、及び判定部１０６を備えている。
【００９０】
図１２（ａ）は、上下分割表示モードで分割表示を行なうためにタッチパネル１０７に対するユーザの操作を示す図であり、図１２（ｂ）は、上下分割表示モードで表示された画面を示す図である。タッチパネル１０７はディスプレイの上に設けられ、人の指等による接触を検知して、検知信号を出力する。タッチ領域検出部１０８は、タッチパネル１０７から検知信号を入力して、タッチされた領域を検出して、判定部１０６に出力する。
【００９１】
判定部１０６は、タッチ領域検出部１０８からタッチされた領域が入力されると、それに基づいて上下分割表示モードで表示するか否かを判定し、判定結果を制御部３０に出力する。判定部１０６は、上下分割表示モードで表示する旨の判定結果を出力する際には、判定結果として分割位置も出力する。
【００９２】
判定部１０６は、タッチ領域検出部１０８から入力したタッチ領域が、画面の上下方向中央部であって、かつ、表示された映像の上に横方向の線を引く（指でタッチしてドラッグする）操作である場合（即ち、図１２（ａ）に示すような状況）に、上下分割表示モードで表示する旨の判定結果を出力する。このとき、分割位置としては、タッチ領域検出部１０８にて検出されたタッチ領域の高さ方向を平均化した高さとすればよい。
【００９３】
また、上下に分割可能な映像について、上側の領域の映像と下側の領域の映像とが必ず同じ大きさであるということが予め分かっている場合には、判定部１０６は、タッチ領域検出部１０８から入力したタッチ領域が上下方向の中央付近にあるときに、自動的に上下方向の真ん中（縦方向に４８０画素ある場合には２４０行目と２４１行目の間）を分割位置としてもよい。このように分割位置が固定されている場合には、判定部１０６は、上下分割表示モードで表示する旨の判定結果のみを出力し、分割位置は出力する必要がない。
【００９４】
制御部３０は、判定部１０６から判定結果に基づいて、上下分割表示モードで表示を行なうための制御信号を映像処理部２０に出力する。このとき、図６の例によって、制御信号を出力する。即ち、判定部１０６から上下分割表示モードで表示する旨の判定結果を得た場合には、直ちに、分割位置とともに、上下分割表示モードで表示する旨の制御信号を映像処理部２０に出力する。このとき、分割判定部１０では、上下分割表示モードで表示するという判定をユーザの操作に基づいて行なっているので、図５、７、９の例のように、再度ユーザに分割表示を行うための操作をさせる必要はない。映像処理部２０の構成及び動作は第１の実施の形態と同様である。
【００９５】
以上のように、第２の実施の形態の映像処理装置２００によれば、ユーザは、画面の分割位置に線を引くという操作により、その分割位置で映像が上下に分割されて左右に並べられるので、ユーザは、直感的な操作により、上下分割表示モードの指示を行なうことができる。
【００９６】
（第３の実施の形態）
図１３は、本発明の第３の実施の形態の映像処理装置の構成を示すブロック図である。本実施の形態の映像処理装置３００は、第１の実施の形態の映像処理装置１００に対して、機能を追加したものである。なお、この機能は、第２の実施の形態の映像処理装置２００に対しても追加することができる。本実施の形態の映像処理装置３００は、特に、ディスプレイにゲームの映像を表示する場合に好適に用いられる。
【００９７】
本実施の形態の映像処理装置３００は、第１の実施の形態の映像処理装置１００に対して、コントローラ位置検知部１０９が追加されている。コントローラ位置検知部１０９は、ゲーム用のコントローラが２つある場合に、それぞれのコントローラの位置を検知して、検知信号を判定部１０６に出力する。判定部１０６は、２つのコントローラの位置に基づいて、いずれのコントローラが右にあり、いずれのコントローラが左にあるかを示す判定結果を制御部３０に出力する。
【００９８】
制御部３０は、この判定結果を制御信号として映像処理部２０に出力する。映像処理部２０は、２つのコントローラの左右の関係を示す制御信号に基づいて、第１メモリ読出制御部２０４及び第２メモリ読出制御部２０５による読出し位置を変更する。映像処理制御部２０６による制御によって、第１メモリ読出制御部２０４及び第２メモリ読出制御部２０５の一方が、入力映像の上側の領域の映像の先頭ラインから読出しを行なっており、他方が下側の領域の映像の先頭ラインから読出しを行っている場合において、２つのコントローラの左右の関係が逆転したときには、映像処理制御部２０６は、第１メモリ読出制御部２０４及び第２メモリ読出制御部２０５の一方が、入力映像の下側の領域の映像の先頭ラインから読出しを行い、他方が上側の領域の映像の先頭ラインから読出しを行うように、第１メモリ読出制御部２０４及び第２メモリ読出制御部２０５を制御する。
【００９９】
以上のように、第３の実施の形態の映像処理装置３００によれば、入力映像が２人のプレーヤによってプレーされるゲームの映像であり、かつ各プレーヤのプレー状況を示す映像が上下に並べられており、この入力映像を上下に分割して各領域の映像を圧縮伸張した上で左右に並べて表示する場合に、プレーヤの実際の位置に応じて上下いずれの領域の映像を左右のいずれに配置するかを決定するので、２人のプレーヤの臨場感が増す映像を表示できる。
【０１００】
（第４の実施の形態）
図１５は、第４の実施の形態の映像処理装置の構成を示すブロック図である。本実施の形態の映像処理装置４００は、車両の後部座席の乗員が見るためのディスプレイに好適に適用される。
【０１０１】
本実施の形態の映像処理装置４００は、分割判定部１０、映像処理部２０、及び制御部３０を備えている。本実施の形態の分割判定部１０は、着座センサ１１０と判定部１０６を備えている。着座センサ１１０は、ディスプレイの前であって、ディスプレイの水平方向に平行な方向に並んだ２人分の座席（例えば、車両の後部座席）に備えられる。着座センサ１１０は、人物の着座の有無を検知して、検知結果を判定部１０６に出力する。
【０１０２】
判定部１０６は、着座センサ１１０の検知結果が、２人分の座席の両方に人物が座っていることを示している場合には、入力映像を上下分割可能である旨の判定結果を出力する。制御部３０は、判定部１０６から入力映像を上下分割可能である旨の判定結果を受けると、図９の例におけるステップＳ９３と同様にして、表示モードとして上下分割表示モードを追加する。そして、ユーザの操作により上下分割表示モードが指示されると、制御部３０は、映像処理部２０に上下分割表示モードで表示するよう制御信号を出力する。このとき、分割位置は上下方向の中央とする。
【０１０３】
以上のように、第４の実施の形態の映像処理装置４００によれば、ディスプレイの前に２人の人物（ユーザ）がいる場合には、それに合わせて、表示モードに上下分割表示モードを追加されるので、ユーザは表示モードとして上下分割表示モードを選択できるようになる。
【０１０４】
（第５の実施の形態）
図１６は、本発明の第５の実施の形態の映像処理装置の構成を示すブロック図である。本実施の形態の映像処理装置５００は、分割判定部１０と、映像処理部２０と、制御部３０とを備えている。分割判定部１０は、顔認識部１１１と判定部１０６とを備えている。
【０１０５】
顔認識部１１１には入力映像が入力される。顔認識部１１１は、入力映像において顔の領域を認識して、判定部１０６に出力する。この顔認識には、テンプレートマッチングや特徴点マッチング等の任意の公知の技術を採用することができる。顔認識部１１１は、顔を含む矩形の顔領域を特定し、その結果を判定部１０６に出力する。このとき、顔領域のアスペクト比は、ディスプレイを左右に分割した場合のアスペクト比とする。即ち、ディスプレイのアスペクト比が横：縦＝ａ：ｂであるとすると、顔領域のアスペクト比は、横：縦＝ａ／２：ｂとする。即ち、顔と判定される領域のアスペクト比は限定できないため、顔認識部１１１は、顔とその周辺の画像を含めた画像のアスペクト比が横：縦＝ａ／２：ｂとなるように顔領域を特定する。
【０１０６】
判定部１０６は、顔認識部１１１から顔領域が入力されると、映像の一部領域である顔領域を拡大した分割表示をする顔拡大表示モードで表示可能である旨の判定結果を制御部３０に出力する。この判定結果には、顔領域の情報も含まれる。制御部３０は、図５ないし９の例に従って、映像処理部２０に顔拡大表示モードで表示するための制御信号を出力する。この制御信号にも顔領域の情報が含まれる。なお、顔拡大表示モードは、本発明の分割表示モードの一態様である。
【０１０７】
図１７（ａ）は、人物の顔を含む入力映像を示す図であり、図１７（ｂ）は、図１７（ａ）の入力映像を顔拡大表示モードで表示した画面を示す図である。映像処理部２０は、図１に示す構成を有している。第１メモリ２０１及び第２メモリ２０２のいずれにも、図１７（ａ）に示す入力映像が保存される。
【０１０８】
映像処理制御部２０６は、第１メモリ２０１から入力映像の全体を読み出すよう第１メモリ読出制御部２０４を制御するとともに、第２メモリ２０２から顔領域のみを読み出すように第２メモリ読出制御部２０５を制御する。圧縮伸張制御部２０７は、第１メモリ読出制御部２０４によって読み出された入力映像を、図１７（ｂ）に示すように、ディスプレイの左半分に収まるように圧縮伸張し、第２メモリ読出制御部２０５によって読み出された顔領域を、図１７（ｂ）に示すように、ディスプレイの右半分に収まるように圧縮伸張する。画像合成部２０８は、圧縮伸張制御部２０７にて圧縮伸張された両映像を合成して、出力映像として出力する。
【０１０９】
以上のように、第５の実施の形態の映像処理装置５００によれば、入力映像から顔領域を検出して、顔領域を拡大して入力映像の全体とともに表示できるので、ディスプレイ中のより広い領域を活用して見易い映像を表示できる。
【０１１０】
（第５の実施の形態の第１の変形例）
図１８は、第５実施の形態の第１の変形例を説明する図である。上記で説明した第５の実施の形態では、顔認識部１１１が画像認識処理によって入力映像から顔領域を検出したが、本変形例では、ディスプレイがタッチパネルになっており、ユーザは、図１８（ａ）に示すように、分割して拡大表示したい矩形領域を指で囲んで指示することができる。顔拡大表示モードの画面では、図１８（ｂ）に示すように、入力映像の全領域が左側に表示されるとともに、ユーザによって指定された矩形領域が右側に表示される。
【０１１１】
本変形例は、第２の実施の形態と同様の構成によって実現することができる。なお、ユーザが指定した矩形領域がそのままディスプレイの半分の大きさ圧縮伸張されてよい。この場合には、ユーザが指定した領域のアスペクト比がディスプレイの右半分のアスペクト比に合わないときは、ユーザによって指定された領域のアスペクト比を保ったまま圧縮伸張を行なって、左右又は上下に黒帯をつけて表示してよい。また、ユーザが指定した矩形領域に基づいて、ユーザが指定したその矩形領域を含み、かつアスペクト比がディスプレイの半分（横：縦＝ディスプレイの幅の半分：ディスプレイの高さ）となる最小の矩形領域を拡大表示する矩形領域としてもよい。上記のいずれの場合にも、拡大表示される右側の映像部分は、圧縮伸張処理によっても入力映像に対してアスペクト比が変更されないので、縦又は横につぶれた映像となることを避けることができる。
【０１１２】
なお、上記の第５の実施の形態では、顔領域がフレームごとに自動で検出されるので、顔領域の位置や大きさもフレームごとに変化する。これに対して、本変形例では、ユーザが拡大すべき矩形領域を指定するので、この矩形領域を固定した場合には、指定した際にはその矩形領域に人物の顔があったとしても、映像が変化するにつれて矩形領域に顔が映らなくなったり、矩形領域からはみ出したりすることがある。従って、本変形例は、静止画を鑑賞するのに好適に用いられる。但し、ユーザが指定する矩形領域は、人物の顔の領域に限られないので、具体的な映像の内容によって、矩形領域を固定した上で映像を分割表示しても有効な場合があるので、本変形例は、必ずしも静止画鑑賞のために限られない。
【０１１３】
（第５の実施の形態の第２の変形例）
図１９は、第５実施の形態の第２の変形例を説明する図である。この変形例は、上記の第５の実施の形態及びその第１の変形例に適用することができる。本変形例では、図１９（ａ）に示すように、入力映像に複数の顔（図１９（ａ）の例では、男性の顔と女性の顔）がある場合に有効である。本変形例は、入力映像において、複数の顔領域が検出又は指定されたときの表示方法に関する。
【０１１４】
拡大すべき領域が複数ある場合には、図１９（ｂ）及び（ｃ）に示すように、左側に入力映像全体を表示するとともに、右側に拡大すべき複数の領域を順に切り替えながら表示する。このために、映像処理部２０の映像処理制御部２０６は、第１メモリ読出制御部２０４に対しては、第１メモリ２０１から入力映像全体を読み出すように制御するとともに、第２メモリ読出制御部２０５に対しては、第２メモリ２０２から読み出す領域を一定のフレーム数（例えば、１８０フレーム）ごとに変更するように制御する。この結果、図１８（ｂ）のように男性の顔を拡大表示する映像と、図１８（ｃ）のように女性の顔を拡大表示する映像とが１８０フレームごとに切り替わる。
【０１１５】
なお、上記のように拡大表示する映像が定期的に切り替わる際に、入力映像全体を表示している側において、拡大表示している映像に対応する領域を枠で囲うなどしてマーカを付して、拡大表示されている映像が全体映像のどの部分に位置するかを示してもよい。また、拡大表示する領域として検出又は指定された全ての領域にマーカを付して、実際に拡大表示されている映像に対応する領域のマーカを他のマーカと区別して（例えば異なる色にする等）表示してもよい。
【０１１６】
さらに、上記では、複数の顔領域が検出又は指定された場合に、自動で複数の領域を順に切り替えながら表示する（スライドショー）ようにしたが、拡大表示する領域をユーザの操作に従って切替えてもよい。この場合にも、拡大表示している映像に対応する領域を枠で囲うなどしてマーカを付してもよいし、拡大表示する領域として検出又は指定された全ての領域にマーカを付して、実際に拡大表示されている映像に対応する領域のマーカを他のマーカと区別して（例えば異なる色にする等）表示してもよい。特に、後者の場合には、ユーザは、複数の顔領域にそれぞれマーカが付加されている入力画像全体を確認しながら、どの顔領域を拡大表示するかを選択できる。
【０１１７】
本変形例によれば、拡大表示すべき領域が入力映像中に複数ある場合にも、拡大された複数の領域を表示することができる。
【０１１８】
なお、上記の実施の形態では、映像処理部２０は第１及び第２の２つのメモリを備え、上下分割表示モードでは、左右に２分割された映像を表示したが、本発明はこれに限られない。例えば、映像処理部２０は、３つのメモリを備え、上下分割表示モードでは、左右方向に３分割した映像を表示してもよい。
【０１１９】
また、上記の実施の形態では、出力映像において、左側の映像と右側の映像との境界が出力映像の行方向の中央であったが、左側の映像と右側の映像との境界は任意に設定できる。例えば、上記の第５の実施の形態において、１６：９のアスペクト比を有する入力映像がそのアスペクト比を保ったまま出力映像の左側に表示され、右側の余った領域に顔領域の映像を表示するように、出力映像を生成してもよい。
【０１２０】
また、上記の実施の形態では、出力映像の大きさがディスプレイの大きさに合致しており、出力映像がディスプレイに表示される際にはディスプレイの全領域を用いて表示されたが、出力映像を表示する際に、ディスプレイの一部に黒帯部分が生じてもよい。
【０１２１】
以上に現時点で考えられる本発明の好適な実施の形態を説明したが、本実施の形態に対して多様な変形が可能であり、そして、本発明の真実の精神と範囲内にあるそのようなすべての変形を添付の請求の範囲が含むことが意図されている。
【産業上の利用可能性】
【０１２２】
以上のように、本発明は、横長のディスプレイのより広い領域を活用して見易い映像を表示できるという効果を有し、入力映像を処理する映像処理装置等として有用である。
【符号の説明】
【０１２３】
１００、２００、３００、４００、５００  映像処理装置
１０  分割判定部
１０１  第１ラインメモリ
１０２  第２ラインメモリ
１０３  第３ラインメモリ
１０４  ラインメモリ書込制御部
１０５  ラインメモリ読出制御部
１０６  判定部
１０７  タッチパネル
１０８  タッチ領域検出部
１０９  コントローラ位置検知部
１１０  着座センサ
１１１  顔認識部
２０  映像処理部
２０１  第１メモリ
２０２  第２メモリ
２０３  メモリ書込制御部
２０４  第１メモリ読出制御部
２０５  第２メモリ読出制御部
２０６  映像処理制御部
２０７  圧縮伸張制御部
２０８  画像合成部
３０  制御部
【図１】
2012120781.tif 000003
【図２】
2012120781.tif 000004
【図３】
2012120781.tif 000005
【図４】
2012120781.tif 000006
【図５】
2012120781.tif 000007
【図６】
2012120781.tif 000008
【図７】
2012120781.tif 000009
【図８】
2012120781.tif 000010
【図９】
2012120781.tif 000011
【図１０】
2012120781.tif 000012
【図１１】
2012120781.tif 000013
【図１２】
2012120781.tif 000014
【図１３】
2012120781.tif 000015
【図１４】
2012120781.tif 000016
【図１５】
2012120781.tif 000017
【図１６】
2012120781.tif 000018
【図１７】
2012120781.tif 000019
【図１８】
2012120781.tif 000020
【図１９】
2012120781.tif 000021
【国際調査報告】
2012120781.tif 000022
2012120781.tif 000023