(57)【要約】【課題】複数の表示装置に跨がって映像が表示される場合に、表示領域間の同期信号の違いによって映像のちらつきや揺れが生じることを防止する映像処理装置を得る。【解決手段】映像処理装置１０は、複数の入力映像データと、各入力映像データに付随する入力同期信号と、を受信する映像受信部１１と、入力映像データに基づく入力映像を配置した映像を生成し、生成された映像を複数の領域に分割して複数の出力映像データを生成する出力演算部１６と、映像の複数の領域のそれぞれに対応する同期信号を生成する同期信号生成部１５と、映像の複数の領域を示す出力映像データのそれぞれを、対応する表示装置に送信する映像送信部２０ａ〜２０ｄとを備える。同期信号生成部１５は、入力映像データが示す映像が複数の領域のうちの２つ以上の領域に跨がって配置される場合、当該２つ以上の領域を示す出力映像データに対して、同一の出力同期信号を生成する。【選択図】図２
2020034869.tif 000002
【特許請求の範囲】
【請求項１】
複数の入力映像データと、前記入力映像データのそれぞれに付随する入力同期信号と、を受信する映像受信部と、
前記入力映像データに基づく入力映像を配置した映像を生成し、生成された映像を複数の領域に分割して複数の出力映像データを生成する出力演算部と、
前記映像の複数の領域のそれぞれに対応する同期信号を生成する同期信号生成部と、
前記複数の出力映像データを、それぞれに対応する表示装置に送信する映像送信部とを備え、
前記同期信号生成部は、前記入力映像データが示す映像が前記複数の領域のうちの２つ以上の領域に跨がって配置される場合、前記２つ以上の領域を示す前記出力映像データに対して、同一の出力同期信号を生成する、映像処理装置。
【請求項２】
前記同期信号生成部は、前記同一の出力同期信号として、前記２つ以上の領域において最前面に配置される入力映像を示す前記入力映像データに付随して受信された前記入力同期信号と同一の周波数の同期信号を生成する、請求項１に記載の映像処理装置。
【請求項３】
前記同期信号生成部は、前記同一の出力同期信号として、前記２つ以上の領域において最も面積が大きい入力映像を示す前記入力映像データに付随して受信された前記入力同期信号と同一の周波数の同期信号を生成する、請求項１に記載の映像処理装置。
【請求項４】
前記同期信号生成部は、前記同一の出力同期信号として、前記２つ以上の領域内に配置される入力映像のうち、前記２つ以上の領域の中心に最も近い位置に配置される入力映像を示す前記入力映像データに付随して受信された前記入力同期信号と同一の周波数の同期信号を生成する、請求項１に記載の映像処理装置。
【請求項５】
前記同期信号生成部は、前記同一の出力同期信号として、前記２つ以上の領域内に配置される入力映像のうち、音声データが付随している入力映像を示す前記入力映像データに付随して受信された前記入力同期信号と同一の周波数の同期信号を生成する、請求項１に記載の映像処理装置。
【請求項６】
前記入力映像データが示す入力映像を操作するための制御信号を受信する制御信号受信部と、
前記制御信号に基づいて、前記入力映像データに対して拡大または縮小および回転処理を行うスケーリング部とを更に備え、
前記出力演算部は、前記制御信号によって指定されたレイアウトに基づいて、前記入力映像を配置した映像を生成し、生成された映像を複数の領域に分割して前記複数の出力映像データを生成する、
請求項１に記載の映像処理装置。
【請求項７】
前記同期信号生成部は、前記２つ以上の領域に配置される入力映像のうち、前記制御信号によって選択または操作されている入力映像がある第１の場合、前記同一の出力同期信号として、選択または操作されている入力映像を示す前記入力映像データに付随して受信された前記入力同期信号と同一の周波数の同期信号を生成する、請求項６に記載の映像処理装置。
【請求項８】
前記同期信号生成部は、前記第１の場合以外の第２の場合、前記同一の出力同期信号として、前記２つ以上の領域において最前面に配置される入力映像を示す前記入力映像データに付随して受信された前記入力同期信号と同一の周波数の同期信号を生成する、請求項７に記載の映像処理装置。
【請求項９】
前記同期信号生成部は、前記第２の場合において、前記２つ以上の領域において最前面に配置される入力映像が複数ある第３の場合は、前記同一の出力同期信号として、前記２つ以上の領域において最も面積が大きい入力映像を示す前記入力映像データに付随して受信された前記入力同期信号と同一の周波数の同期信号を生成する、請求項８に記載の映像処理装置。
【請求項１０】
前記同期信号生成部は、前記第３の場合において、前記２つ以上の領域において最も面積が大きい入力映像が一に決まらない第４の場合は、前記同一の出力同期信号として、前記２つ以上の領域内に配置される入力映像のうち、前記２つ以上の領域の中心に最も近い位置に配置される入力映像を示す前記入力映像データに付随して受信された前記入力同期信号と同一の周波数の同期信号を生成する、請求項９に記載の映像処理装置。
【請求項１１】
前記同期信号生成部は、前記第４の場合において、前記２つ以上の領域の中心に最も近い位置に配置される入力映像が一に決まらないときは、前記同一の出力同期信号として、前記２つ以上の領域内に配置される入力映像のうち、音声データが付随している入力映像を示す前記入力映像データに付随して受信された前記入力同期信号と同一の周波数の同期信号を生成する、請求項１０に記載の映像処理装置。
【請求項１２】
前記同期信号生成部は、前記複数の領域内における前記入力映像データが示す映像の配置または形状が一定期間変化しない場合に、前記出力同期信号を生成する、請求項１〜１１のいずれかに記載の映像処理装置。
【請求項１３】
前記同期信号生成部は、前記制御信号によって指定されたレイアウトが一定期間変化しない場合に、前記出力同期信号を生成する、請求項６〜１１のいずれかに記載の映像処理装置。
【請求項１４】
請求項１〜１３のいずれかに記載の映像処理装置と、
前記映像処理装置の前記映像送信部から出力された前記出力映像データをそれぞれ受信して表示する複数の表示装置と、を備える映像処理システム。
【発明の詳細な説明】
【技術分野】
【０００１】
本開示は、複数の表示装置に複数の映像を表示する映像処理装置および映像処理システムに関する。
【背景技術】
【０００２】
特許文献１は、各入力信号源からの入力画像を同一画面上に表示するマルチ画面表示用の画像処理装置を開示する。画像処理装置は、各入力系の入力信号のフォーマットや特性および表示内容と、画像表示部の特性を比較して、優先する入力信号を選択し、画像表示部の動作モードおよび画質特性を設定する。これにより、複数の入力信号に対しても、柔軟に動画質や画質特性を最適化した画像処理装置が実現できる。特に、表示部の特性の変化や各入力信号源の特性の差、入力信号の表示内容の特徴に対しても、容易に各入力系統の明るさやコントラスト、階調性、色などの画質特性をシステム全体に最適化した特性に揃えて、同一画面にマルチ画面表示を行なうことのできる画像処理装置を実現する。
【先行技術文献】
【特許文献】
【０００３】
【特許文献１】特開２００４−２９５１３３号公報
【発明の概要】
【発明が解決しようとする課題】
【０００４】
本開示は、複数の表示装置に跨がって映像が表示される場合に、表示領域間の同期信号の違いによって映像にちらつきや揺れ等の不具合が生じることを防止する映像処理装置を提供する。
【課題を解決するための手段】
【０００５】
本開示の映像処理装置は、複数の入力映像データと、入力映像データのそれぞれに付随する入力同期信号と、を受信する映像受信部と、入力映像データに基づく入力映像を配置した映像を生成し、生成された映像を複数の領域に分割して複数の出力映像データを生成する出力演算部と、映像の複数の領域のそれぞれに対応する同期信号を生成する同期信号生成部と、映像の複数の領域を示す出力映像データのそれぞれを、対応する表示装置に送信する映像送信部とを備える。同期信号生成部は、入力映像データが示す映像が複数の領域のうちの２つ以上の領域に跨がって配置される場合、当該２つ以上の領域を示す出力映像データに対して、同一の出力同期信号を生成する。
【発明の効果】
【０００６】
本開示により、複数の表示装置に跨がって映像が表示される場合に、表示領域間の同期信号の違いによって映像のちらつきや揺れ等の不具合が生じることを防止する映像処理装置を得る。
【図面の簡単な説明】
【０００７】
【図１】実施の形態に係るマルチディスプレイシステムの構成を示すブロック図
【図２】実施の形態に係る映像処理装置の構成を示すブロック図
【図３】映像出力装置から送信される映像とマルチディスプレイに表示される映像との関係を示す図
【図４】各切出領域に配置される映像と、各切出領域に適用される同期信号との関係の一例を示す図
【図５】各切出領域に配置される映像と、各切出領域に適用される同期信号との関係の他の例を示す図
【図６】各切出領域に配置される映像と、各切出領域に適用される同期信号との関係の他の例を示す図
【図７】各切出領域に配置される映像と、各切出領域に適用される同期信号との関係の他の例を示す図
【発明を実施するための形態】
【０００８】
以下、適宜図面を参照しながら、実施の形態を詳細に説明する。但し、必要以上に詳細な説明は省略する場合がある。例えば、既によく知られた事項の詳細説明や実質的に同一の構成に対する重複説明を省略する場合がある。これは、以下の説明が不必要に冗長になるのを避け、当業者の理解を容易にするためである。
【０００９】
なお、発明者（ら）は、当業者が本開示を十分に理解するために添付図面および以下の説明を提供するのであって、これらによって特許請求の範囲に記載の主題を限定することを意図するものではない。
【００１０】
［１−１．構成］
図１は、実施の形態に係るマルチディスプレイシステム１の構成を示すブロック図である。マルチディスプレイシステム１は、複数の映像出力装置２と、映像処理装置１０と、マルチディスプレイ３と、コントローラ４とを備える。
【００１１】
映像出力装置２は、マルチディスプレイ３に表示する映像を示す映像データと、映像データに付随する垂直同期信号および水平同期信号等の同期信号と、を出力する機器である。映像出力装置２は、例えば、ＨＤＤレコーダー、ブルーレイディスクプレーヤー、ＤＶＤプレーヤー、テレビ、カーナビゲーションシステム、ゲームプレーヤー、セットトップボックス等の機器である。図１には４つの映像出力装置２が示されているが、映像出力装置の数はこれに限定されない。
【００１２】
映像出力装置２から出力された映像データおよび同期信号は、映像処理装置１０に入力される。映像処理装置１０は、コントローラ４から入力された制御信号に基づき、入力された映像データを合成してマルチディスプレイ３に出力する。映像処理装置１０の詳細な構成については後述する。
【００１３】
コントローラ４は、例えば、パーソナルコンピュータ（ＰＣ）、タブレット端末、スマートフォン等の情報処理装置である。コントローラ４から映像処理装置１０に送信される制御信号は、ユーザによる操作またはプリセットされた情報による動作をマルチディスプレイ３に表示された映像に反映させるための信号である。制御信号には、入力映像の拡大、縮小および回転等の映像処理、処理された映像のサイズおよび配置、並びに、配置された映像の切出し位置等に関する情報が含まれる。
【００１４】
マルチディスプレイ３は、４つのディスプレイ３１〜３４を備える。マルチディスプレイ３は、映像処理装置１０から出力された映像データの入力を受け、入力された映像データが示す映像２ａ〜２ｄを表示する表示装置である。ディスプレイ３１〜３４は、例えば、液晶ディスプレイまたは有機ＥＬディスプレイである。
【００１５】
図１には４つのディスプレイ３１〜３４が示されているが、ディスプレイの数はこれに限定されず、複数であればよい。また、図１では、ディスプレイ３１〜３４は２次元的に整列しているが、ディスプレイの配置はこれに限定されない。
【００１６】
マルチディスプレイ３は、ディスプレイ３１〜３４をそれぞれ駆動する図示しない駆動回路を備える。駆動回路は、例えば、ゲートドライバまたは走査線駆動回路、ソースドライバまたは映像線駆動回路等からなる。
【００１７】
図２は、映像処理装置１０の構成を示すブロック図である。映像処理装置１０は、映像受信部１１と、制御信号受信部１２と、スケーリング部１３と、第１フレームメモリ１４と、同期信号生成部１５と、出力演算部１６と、第２フレームメモリ１９と、映像送信部２０ａ〜２０ｄとを備える。
【００１８】
映像受信部１１および映像送信部２０ａ〜２０ｄは、無線または有線の通信回線を介して、映像処理装置１０と映像出力装置２およびマルチディスプレイ３等の周辺機器との間でデータ通信を行う接続回路（モジュール）である。映像受信部１１および映像送信部２０ａ〜２０ｄとしては、ＵＳＢ、ＨＤＭＩ（登録商標）、Ｂｌｕｅｔｏｏｔｈ（登録商標）等の種々の通信規格に従ったインタフェースが用いられる。
【００１９】
映像受信部１１は、映像出力装置２から出力された各映像データおよび各映像データに付随する同期信号（以下、「入力同期信号」という。）をそれぞれ受信する。映像送信部２０ａ〜２０ｄは、映像処理装置１０で生成された映像データをマルチディスプレイ３に出力する。具体的には、映像送信部２０ａは、図１に示すマルチディスプレイ３のディスプレイ３１に接続される。同様に、映像送信部２０ｂ〜２０ｄは、マルチディスプレイ３のディスプレイ３２〜３４にそれぞれ接続される。
【００２０】
図２には１つの映像受信部１１のみを示しているが、映像受信部１１の数は複数であってもよい。例えば、映像処理装置１０には、４つの映像出力装置２からの各映像データに１対１に対応する４つの映像受信部が設けられてもよい。
【００２１】
制御信号受信部１２は、ＵＳＢ、イーサネット（登録商標）、Ｗｉ−Ｆｉ、ＩＥＥＥ８０２．２、ＩＥＥＥ８０２．３、ＬＴＥ、３Ｇ、４Ｇ、５Ｇ等の規格に従って通信を行う。制御信号受信部１２は、コントローラ４を用いてユーザによって行われた、映像選択、移動、拡大および縮小などの操作を示す信号を受信する。
【００２２】
スケーリング部１３、同期信号生成部１５および出力演算部１６は、それぞれ独立してまたは一体的に、例えば、ＦＰＧＡ、ＡＳＩＣ、ＤＳＰ等のハードウェア回路で構成される。スケーリング部１３、同期信号生成部１５および出力演算部１６は、プログラムを実行することにより所定の機能を実現するＣＰＵまたはＭＰＵのような汎用プロセッサで構成されてもよい。
【００２３】
スケーリング部１３は、制御信号受信部１２を介して受信した制御信号に基づいて、映像受信部１１を介して入力された映像データ（以下、「入力映像データ」という。）に対して拡大または縮小および回転処理（以下、「スケーリング処理」という。）を行う演算装置である。具体的には、例えば、スケーリング部１３は、入力映像データに付随する入力同期信号に同期させて、入力映像データを第１フレームメモリ１４に格納する。次に、スケーリング部１３は、第１フレームメモリ１４に格納された入力映像データを読み出してスケーリング処理を行い、処理後の映像データを出力演算部１６に出力する。
【００２４】
出力演算部１６は、レイアウト部１７と切出部１８とを含む。レイアウト部１７は、スケーリング部１３から入力されたスケーリング処理後の映像データが示す映像を、図３に示すように、仮想的な描画領域２１に配置する。各映像の位置や優先順位は、制御信号受信部１２を介して受信した制御信号によって指定される。ここで、優先順位は、複数の映像が仮想的な描画領域２１内で重なった場合に、前面に表示される映像の順位を示すパラメータである。複数の映像が仮想的な描画領域２１内で重なった場合、優先順位の高い映像から順に前面に表示される。
【００２５】
切出部１８は、仮想的な描画領域２１の中から、境界線で区切られた４つの切出領域２２〜２５を分割して切り出す。切出領域２２〜２５の配置は、ディスプレイ３１〜３４の配置に対応する。切出領域２２〜２５の寸法または画素数は、ディスプレイ３１〜３４の寸法または画素数に対応する。例えば、切出領域２２を示す映像データは、映像送信部２０ａからマルチディスプレイ３のディスプレイ３１に送信され、ディスプレイ３１に切出領域２２を示す映像が表示される。切出領域２３〜２５を示す映像も同様に、ディスプレイ３２〜３４にそれぞれ表示される。
【００２６】
同期信号生成部１５は、映像受信部１１を介して各映像データに付随する入力同期信号を受信し、４つの入力同期信号の中からディスプレイ３１〜３４のそれぞれに対応する同期信号を１つずつ選択し、出力演算部１６の切出部１８に出力する。ディスプレイ３１〜３４のそれぞれには、すべて異なる同期信号が割り当てられる場合があってもよいし、同一の同期信号が割り当てられる場合があってもよい。ディスプレイ３１〜３４のそれぞれに対応する同期信号を、どのようにして４つの入力同期信号の中から選択するかについては後述する。
【００２７】
第１フレームメモリ１４および第２フレームメモリ１９は、映像データを記憶する記憶媒体である。第１フレームメモリ１４および第２フレームメモリ１９はそれぞれ、例えば、ＳＲＡＭおよびＤＲＡＭなどの揮発性メモリで構成される。第１フレームメモリ１４および第２フレームメモリ１９はそれぞれ、フラッシュメモリ、ＳＳＤなどの半導体メモリ装置、ハードディスク等の磁気記憶装置、その他の記憶デバイス単独でまたはそれらを適宜組み合わせて実現される不揮発性メモリで構成されてもよい。第１フレームメモリ１４は、スケーリング部１３による制御に基づき、入力映像データを記憶する。第２フレームメモリ１９は、切出部１８による制御に基づき、レイアウト部１７から出力された映像データを記憶する。
【００２８】
［１−２．動作］
［１−２−１．概要］
図１〜３を参照して、マルチディスプレイシステム１の動作を説明する。図３では、映像出力装置２から映像２ａ〜２ｄを示す映像データがそれぞれ出力されている。また、映像出力装置２からは、映像データ２ａ〜２ｄのそれぞれに付随する入力同期信号も出力されている。出力された映像データ２ａ〜２ｄおよびこれらのそれぞれに付随する入力同期信号は、映像処理装置１０に入力される。
【００２９】
なお、本明細書では、映像２ａを示す映像データにも同じ符号を付し、映像データ２ａと呼ぶ場合がある。映像データ２ｂ〜２ｄについても同様である。
【００３０】
図２に示すように、映像処理装置１０の映像受信部１１に入力された映像データ２ａ〜２ｄは、スケーリング部１３を介して第１フレームメモリ１４に格納される。第１フレームメモリ１４への書込みおよび読出しは、入力映像に付随する入力同期信号に同期して行われる。例えば、映像データ２ａは、スケーリング部１３によって、映像データ２ａに付随して入力された入力同期信号に同期して第１フレームメモリ１４に書き込まれる。映像データ２ｂ〜２ｄも同様である。
【００３１】
また、映像処理装置１０には、コントローラ４、例えばＰＣから、入力映像の拡大、縮小および回転等のスケーリング処理、スケーリング処理された映像のサイズおよび配置、並びに、配置された映像の切出し位置等に関する情報を含む制御信号が入力される。
【００３２】
スケーリング部１３は、制御信号に基づいて、第１フレームメモリ１４に格納された入力映像データ２ａ〜２ｄを読み出し、拡大または縮小および回転処理等のスケーリング処理を行う。そして、スケーリング部１３は、スケーリング処理後の映像データを出力演算部１６に出力する。
【００３３】
出力演算部１６のレイアウト部１７は、スケーリング処理後の映像データが示す映像を、図３に示すように、仮想的な描画領域２１に配置する。次に、出力演算部１６の切出部１８は、制御信号に基づいて、仮想的な描画領域２１の中から、境界線で区切られた４つの切出領域２２〜２５を分割して切り出し、出力映像データを生成する。切出領域２２〜２５を示す映像データは、第２フレームメモリ１９に格納され、同期信号生成部１５から出力された対応する同期信号に同期して、対応する映像送信部２０ａ〜２０ｄを介してマルチディスプレイ３に送信される。例えば、切出領域２２を示す出力映像データは、対応する同期信号に同期して、映像送信部２０ａを介してディスプレイ３１に送信される。同様に、切出領域２３を示す出力映像データは、映像送信部２０ｂを介してディスプレイ３２に送信され、切出領域２４を示す出力映像データは、映像送信部２０ｃを介してディスプレイ３３に送信され、切出領域２５を示す出力映像データは、映像送信部２０ｄを介してディスプレイ３４に送信される。
【００３４】
［１−２−２．同期信号生成動作］
［１−２−２−１．同期領域の決定］
次に、同期信号生成部１５の動作について詳述する。図２に示すように、同期信号生成部１５には、映像受信部１１から、各映像データ２ａ〜２ｄに付随する入力同期信号が入力される。また、同期信号生成部１５には、制御信号受信部１２から、制御信号が入力される。制御信号には、前述のように、入力映像の拡大、縮小および回転等のスケーリング処理、スケーリング処理された映像のサイズおよび配置、並びに、配置された映像の切出し位置等に関する情報が含まれる。同期信号生成部１５は、制御信号に基づいて、切出領域２２〜２５のそれぞれに、映像２ａ〜２ｄのうちのどの映像が表示されるかを判定する。
【００３５】
例えば、図３では、切出領域２２には、映像２ａおよび映像２ｂが表示されている。切出領域２３には映像２ａおよび映像２ｃが、切出領域２４には映像２ｂが、切出領域２５には映像２ｄが表示されている。同期信号生成部１５は、入力された制御信号から、切出領域２２には映像２ａおよび映像２ｂが、切出領域２３には映像２ａおよび映像２ｃが、切出領域２４には映像２ｂが、切出領域２５には映像２ｄが表示されると判定することができる。
【００３６】
判定後、同期信号生成部１５は、入力映像データ２ａ〜２ｄに付随する同期信号の中から、各切出領域２２〜２５が出力される際に同期する同期信号を選択する。ここで、一定の場合には、複数の切出領域が出力される際に同期する同期信号は同一のものとされる。
【００３７】
すなわち、一の切出領域と他の切出領域とに跨がって配置されている入力映像２ａ〜２ｄがある場合、当該一の切出領域と当該他の切出領域の同期信号として、同一の同期信号が選択される。さらに、当該一の切出領域または当該他の切出領域と、更に他の切出領域とに跨がって配置されている入力映像２ａ〜２ｄがある場合、当該一の切出領域と、当該他の切出領域と、当該更に他の切出領域には、同一の同期信号が選択される。
【００３８】
例えば、図３では、入力映像２ａが、一の切出領域２２と他の切出領域２３とに跨がって配置されている。したがって、切出領域２２と切出領域２３の同期信号として、同一の同期信号が選択される。さらに、入力映像２ｂは、切出領域２２と切出領域２４とに跨がって配置されている。したがって、切出領域２４にも同一の同期信号が選択される。よって、切出領域２２と切出領域２３と切出領域２４とに付随して出力される同期信号として、同一の同期信号が選択される。
【００３９】
このように複数の切出領域の同期信号を同一のものとするのは、仮に図３に示すような映像配置の場合に、２つの切出領域に跨がる映像２ａと２ｂがマルチディスプレイ３に表示されたときに、映像２ａと２ｂに、ディスプレイの境界において、ずれ、揺れおよびちらつき等の不具合が生じることを防止するためである。
【００４０】
図３では、切出領域２５には入力映像２ｄのみが配置されている。したがって、切出領域２５の同期信号は、切出領域２２〜２４の同期信号と同一である必要はない。
【００４１】
なお、以下、同一の同期信号が選択されて適用される複数の切出領域を「同期領域」と呼ぶ。図３に示した例では、切出領域２２、２３および２４が同期領域である。
【００４２】
［１−２−２−２．同期領域に適用される同期信号の決定］
同期領域に垂直同期周波数の異なる複数の映像が表示される場合、例えばフレームレートの異なる入力映像２ａと２ｂが表示される場合、同期領域の同期信号（以下、「基準同期信号」という。）の周波数を入力映像２ａに付随して入力された同期信号の周波数とすると、入力映像２ａの同期信号とは周波数の異なる同期信号に同期していた入力映像２ｂは、適切に表示されない。そこで、入力映像２ｂは、基準同期信号に同期するように、フレームレート変換される。フレームレート変換が原因で、ディスプレイに表示された入力映像２ｂには、ちらつきや揺れが生じ、ユーザまたは視聴者に違和感、不快感等が生じる。
【００４３】
そこで、基準同期信号の周波数を、どの入力映像の同期信号と同一の周波数に一致させるかは、ユーザまたは視聴者の視聴の快適さを確保するという観点から判断される。この観点から、同期領域の決定後、同期信号生成部１５は、入力同期信号の中から、基準同期信号を適切に選択する。同期信号の選択は、一定のルールに基づいて行われる。以下、選択ルールの一例について説明する。
【００４４】
第１に、同期領域内に、ユーザがコントローラ４を用いて選択または操作している映像がある場合、その映像の同期信号を基準同期信号とする。
【００４５】
図４は、第１のルールが適用される場面を例示する図である。図４には、切出領域２２〜２５と、スケーリング処理後の入力映像２ａ〜２ｄが示されている。映像出力装置２から入力映像２ａに付随して入力される同期信号を同期信号Ａ、入力映像２ｂに付随して入力される同期信号を同期信号Ｂ、入力映像２ｃに付随して入力される同期信号を同期信号Ｃ、入力映像２ｄに付随して入力される同期信号を同期信号Ｄとする。例えば、図４に示すように、ユーザが太線で囲まれた映像２ｃを操作している場合、基準同期信号は、同期信号Ｃとなる。切出領域２５の同期信号は同期信号Ｃである必要はなく、入力映像２ｄに付随して入力された同期信号Ｄが選択される。
【００４６】
第２に、同期領域内に、ユーザがコントローラ４を用いて選択または操作している映像がない場合、同期領域内で最前面に配置される映像の同期信号を同期領域の同期信号とする。
【００４７】
例えば、図５に示すように映像２ａ〜２ｄが配置され、ユーザが太線で囲まれた映像２ｃを操作している場合について説明する。図５に示す例では、映像２ｂが切出領域２２と切出領域２４とに跨がって配置されている。したがって、切出領域２２と切出領域２４は、同一の同期信号が適用される第１の同期領域となる。第１の同期領域の中に配置された映像２ａおよび映像２ｂは、いずれもユーザによって選択されていない。したがって、第１のルールに当てはまらない。そこで第２のルールの適用の可否の検討に移る。映像２ｂが映像２ａより前面に配置されているため、第２のルールが適用され、第１の同期領域の基準同期信号として、同期信号Ｂが選択される。
【００４８】
また、図５に示す例では、映像２ｄが切出領域２３と切出領域２５とに跨がって配置されている。したがって、切出領域２３と切出領域２５は、同一の同期信号が適用される第２の同期領域となる。そして、第２の同期領域では、映像２ｃがユーザによって選択されている。したがって、第１のルールが適用され、第２の同期領域の基準同期信号として、同期信号Ｃが選択される。
【００４９】
第３に、第１のルールおよび第２のルールを適用しても同期信号が１つに決まらない場合、例えば、同期領域内で最前面に配置される映像が複数ある場合、同期領域内で最前面に配置される映像のうち、最も表示面積が大きい映像の同期信号を基準同期信号とする。
【００５０】
例えば、図６に示すように映像２ａ〜２ｄが配置され、ユーザが太線で囲まれた映像２ｄを操作している場合について説明する。図６の映像２ａ〜２ｄの配置は、図３および図４と同様であり、前述のように切出領域２２、２３および２４が同期領域である。同期領域内には、ユーザが選択または操作している映像はない。したがって、第１のルールは適用されない。また、同期領域内では映像２ｂと映像２ｃが最前面に配置されているため、第２のルールを適用しても同期信号を１つに決めることができない。なお、ここで、この例では、映像が他の映像の背面に配置され、他の映像によって隠されている場合を除き、最前面に配置されているものとする。したがって、最前面に複数の映像が配置され得る。
【００５１】
次に、第３のルールの適用を試みる。同期領域内で最前面に配置されている映像２ｂと映像２ｃのうち、表示面積が大きいのは映像２ｂである。したがって、基準同期信号として、同期信号Ｂが選択される。
【００５２】
なお、上記の例と異なり、映像が最前面に配置されているか否かの判断は、前述の優先順位のパラメータを用いて行われてもよい。例えば、図６において、映像２ｂの優先順位が２位であり、映像２ｃの優先順位が１位である場合、第２のルールによって、基準同期信号として同期信号Ｃが選択されることになる。
【００５３】
第４に、第１のルール、第２のルールおよび第３のルールを適用しても同期信号が１つに決まらない場合、映像中心が同期領域の中心Ｏに最も近い位置に配置されている映像の同期信号を基準同期信号とする。ここで、同期領域の中心Ｏとは、同期領域を構成する各切出領域の中心点の幾何中心をいう。あるいは、同期領域を構成しない切出領域を含む全切出領域の各中心点の幾何中心を同期領域の中心Ｏと定義してもよい。
【００５４】
例えば、図７に示す例では、映像２ｂと映像２ｃの面積が同一であるため、第１のルール、第２のルールおよび第３のルールを適用しても同期信号が１つに決まらない。そこで、第４のルールを適用し、映像中心が同期領域の中心Ｏにより近い位置に配置されている映像２ｂの同期信号Ｂを基準同期信号とする。
【００５５】
第５に、第１のルール、第２のルール、第３のルールおよび第４のルールを適用しても同期信号が１つに決まらない場合、音声データが付随している映像の同期信号を基準同期信号とする。
【００５６】
以上の第１から第５のルールの適用順位は、ユーザが最も注目している映像に最も適切な同期信号を適用するという観点から選択されたものである。もっとも、第１から第５のルールの適用順位は、以上のものに限定されず、変更されてもよい。さらに、ルールの数は上記の５つに限定されず、ルールは適宜追加または省略されてもよい。
【００５７】
上記のようなルールによって同期信号を選択する場合、切出領域２２〜２５の同期信号は、ユーザ操作が行われることにより頻繁に変化し得る。出力同期信号が頻繁に変化した場合、出力同期信号の周波数の変化、すなわちフレームレートの変化にマルチディスプレイ３が対応できず、映像にちらつきや揺れが観測される等、映像表示が適切に行われないおそれがある。そこで、出力同期信号が頻繁に変化することを防止するために、同期信号の変更処理は、ユーザ操作または制御信号の入力が一定期間行われない場合に実行されるようにしてもよい。
【００５８】
［１−３．効果等］
以上のように、本実施の形態において、映像処理装置１０は、複数の入力映像データ２ａ〜２ｄと、入力映像データのそれぞれに付随する入力同期信号と、を受信する映像受信部１１と、入力映像データ２ａ〜２ｄに基づく入力映像を配置した仮想的な描画領域２１を生成し、仮想的な描画領域２１を複数の切出領域２２〜２５に分割する出力演算部１６と、切出領域２２〜２５のそれぞれに対応する同期信号を生成する同期信号生成部１５と、切出領域２２〜２５を示す出力映像データのそれぞれを、対応するディスプレイ３１〜３４に送信する映像送信部２０ａ〜２０ｄとを備える。同期信号生成部１５は、入力映像データ２ａ〜２ｄが示す映像が２つ以上の切出領域に跨がって配置される場合、その２つ以上の切出領域を示す出力映像データに対して、同一の出力同期信号を生成する。
【００５９】
これにより、映像がマルチディスプレイ３のディスプレイ３１〜３４に表示された際に、境界線を跨いで複数の切出領域に配置された映像に、ディスプレイ間の同期信号の周波数の差、すなわちフレームレートの差によるちらつきや揺れが生じないようにすることができる。
【００６０】
同期信号生成部１５は、同一の出力同期信号として、２つ以上の切出領域において最前面に配置される入力映像を示す入力映像データに付随して受信された入力同期信号と同一の周波数の同期信号を生成してもよい。
【００６１】
同期信号生成部１５は、同一の出力同期信号として、２つ以上の切出領域において最も面積が大きい入力映像を示す入力映像データに付随して受信された入力同期信号と同一の周波数の同期信号を生成してもよい。
【００６２】
同期信号生成部１５は、同一の出力同期信号として、２つ以上の切出領域内に配置される入力映像のうち、２つ以上の切出領域の中心に最も近い位置に配置される入力映像を示す入力映像データに付随して受信された入力同期信号と同一の周波数の同期信号を生成してもよい。
【００６３】
同期信号生成部１５は、同一の出力同期信号として、２つ以上の切出領域内に配置される入力映像のうち、音声データが付随している入力映像を示す入力映像データに付随して受信された入力同期信号と同一の周波数の同期信号を生成してもよい。
【００６４】
映像処理装置１０は、入力映像データ２ａ〜２ｄが示す入力映像を操作するための制御信号を受信する制御信号受信部１２と、制御信号に基づいて、入力映像データ２ａ〜２ｄに対して拡大または縮小および回転処理を行うスケーリング部１３とを更に備えてもよい。出力演算部１６は、制御信号によって指定されたレイアウトに基づいて、入力映像を配置した映像を生成し、生成された映像を複数の領域に分割する。
【００６５】
同期信号生成部１５は、２つ以上の切出領域に配置される入力映像のうち、制御信号によって選択または操作されている入力映像がある第１の場合、同一の出力同期信号として、選択または操作されている入力映像を示す入力映像データに付随して受信された入力同期信号と同一の周波数の同期信号を生成してもよい。
【００６６】
同期信号生成部１５は、第１の場合以外の第２の場合、同一の出力同期信号として、２つ以上の切出領域において最前面に配置される入力映像を示す入力映像データに付随して受信された入力同期信号と同一の周波数の同期信号を生成してもよい。
【００６７】
同期信号生成部１５は、第２の場合において、２つ以上の切出領域において最前面に配置される入力映像が複数ある第３の場合は、同一の出力同期信号として、２つ以上の切出領域において最も面積が大きい入力映像を示す入力映像データに付随して受信された入力同期信号と同一の周波数の同期信号を生成してもよい。
【００６８】
同期信号生成部１５は、第３の場合において、２つ以上の切出領域において最も面積が大きい入力映像が一に決まらない第４の場合は、同一の出力同期信号として、２つ以上の切出領域内に配置される入力映像のうち、２つ以上の切出領域の中心に最も近い位置に配置される入力映像を示す入力映像データに付随して受信された入力同期信号と同一の周波数の同期信号を生成してもよい。
【００６９】
同期信号生成部１５は、第４の場合において、２つ以上の切出領域の中心に最も近い位置に配置される入力映像が一に決まらないときは、同一の出力同期信号として、２つ以上の切出領域内に配置される入力映像のうち、音声データが付随している入力映像を示す入力映像データに付随して受信された入力同期信号と同一の周波数の同期信号を生成してもよい。
【００７０】
同期信号生成部は、複数の領域内における入力映像データが示す映像の配置または形状が一定期間変化しない場合に、出力同期信号を生成してもよい。
【００７１】
同期信号生成部は、制御信号によって指定されたレイアウトが一定期間変化しない場合に、出力同期信号を生成してもよい。
【００７２】
以上のように同一の出力同期信号を選択することにより、ユーザまたは視聴者が注目している映像に対して適切な同期信号を適用することができる。したがって、ユーザまたは視聴者が注目している映像のちらつきや揺れを低減させ、ユーザまたは視聴者が快適に表示された映像を視聴することを可能にする映像処理装置を得ることができる。
【００７３】
（他の実施の形態）
以上のように、本開示における技術の例示として、上記実施の形態を説明した。しかしながら、本開示における技術は、これに限定されず、適宜、変更、置き換え、付加、省略などを行った実施の形態にも適用可能である。また、上記実施の形態で説明した各構成要素を組み合わせて、新たな実施の形態とすることも可能である。そこで、以下、他の実施の形態を例示する。
【００７４】
上記実施の形態では、表示装置の一例として、４つのディスプレイ３１〜３４で構成されたマルチディスプレイ３を説明した。表示装置はこれに限定されず、映像を表示する装置であればよい。したがって、表示装置は、スクリーンに映像を投影するプロジェクタであってもよい。プロジェクタを用いることにより、液晶ディスプレイや有機ＥＬディスプレイを用いる場合に比べて、容易に大画面表示を行うことができる。
【００７５】
上記実施の形態では、映像処理装置の出力演算部の切出部の一例として、仮想的な描画領域２１の中から、境界線で区切られた４つの切出領域２２〜２５を分割して切り出す切出部１８について説明した。切出領域２２〜２５は、境界線で区切られた複数の領域に限定されない。例えば、仮想的な描画領域２１の一部が、切出領域２２〜２５のうちの複数の領域に含まれてもよい。言い換えれば、切出領域２２〜２５は、境界線で区切られる場合に限定されず、重なっていてもよい。
【００７６】
以上のように、本開示における技術の例示として、実施の形態を説明した。そのために、添付図面および詳細な説明を提供した。
【００７７】
したがって、添付図面および詳細な説明に記載された構成要素の中には、課題解決のために必須な構成要素だけでなく、上記技術を例示するために、課題解決のためには必須でない構成要素も含まれ得る。そのため、それらの必須ではない構成要素が添付図面や詳細な説明に記載されていることをもって、直ちに、それらの必須ではない構成要素が必須であるとの認定をするべきではない。
【００７８】
また、上述の実施の形態は、本開示における技術を例示するためのものであるから、特許請求の範囲またはその均等の範囲において種々の変更、置き換え、付加、省略などを行うことができる。
【産業上の利用可能性】
【００７９】
本開示は、複数の表示装置に複数の映像を表示する映像処理装置に適用可能である。
【符号の説明】
【００８０】
１  マルチディスプレイシステム
２  映像出力装置
２ａ〜２ｄ  入力映像データ
３  マルチディスプレイ
４  コントローラ
１０  映像処理装置
１１  映像受信部
１２  制御信号受信部
１３  スケーリング部
１４  第１フレームメモリ
１５  同期信号生成部
１６  出力演算部
１７  レイアウト部
１８  切出部
１９  第２フレームメモリ
２０ａ〜２０ｄ  映像送信部
２１  仮想的な描画領域
２２〜２５  切出領域
３１〜３４  ディスプレイ
【図１】
2020034869.tif 000003
【図２】
2020034869.tif 000004
【図３】
2020034869.tif 000005
【図４】
2020034869.tif 000006
【図５】
2020034869.tif 000007
【図６】
2020034869.tif 000008
【図７】
2020034869.tif 000009