(57)【要約】【課題】マーカーを配置する作業を自動化することでユーザの作業負担を軽減すること。【解決手段】画像処理装置は、入力画像を取得する取得手段と、入力画像を所定のアスペクト比で切り出した切り出し領域を示すマーカーを入力画像に重畳して表示画像を生成する生成手段と、を備え、生成手段は、入力画像が、画像領域と、画像領域の周囲に配置された画像外領域とを含む画像である場合に、画像領域を所定のアスペクト比で切り出した切り出し領域を示すマーカーを入力画像に合成する。【選択図】図２
2019033437.tif 000002
【特許請求の範囲】
【請求項１】
入力画像を取得する取得手段と、
前記入力画像のうち、所定のアスペクト比の対象領域を示すマーカーを前記入力画像に重畳して表示画像を生成する生成手段と、
を備え、
前記入力画像が、画像領域と、前記画像領域の周囲に配置された画像外領域とを含む画像である場合、前記生成手段は、前記マーカーで示される前記対象領域が前記画像外領域を含まないように、前記マーカーを前記入力画像に合成することを特徴とする画像処理装置。
【請求項２】
前記生成手段は、前記入力画像の縦方向及び横方向のサイズ情報に基づいて前記マーカーの大きさ及び位置を決定することを特徴とする請求項１に記載の画像処理装置。
【請求項３】
前記取得手段は、前記入力画像に付加された付加情報から前記サイズ情報を取得することを特徴とする請求項２に記載の画像処理装置。
【請求項４】
前記画像領域内の画像が、縦方向又は横方向の長さが縮小された縮小画像を元の長さに伸長させた伸長画像であるか否かを判定する判定手段をさらに有し、
前記生成手段は、前記画像領域内の画像が伸長画像である場合に前記マーカーを前記入力画像に合成することを特徴とする請求項１〜３のいずれか１項に記載の画像処理装置。
【請求項５】
前記判定手段は、縮小画像であったことを示す情報が前記入力画像に付加されているか否かに基づいて前記画像領域内の画像が伸長画像であるか否かを判定することを特徴とする請求項４に記載の画像処理装置。
【請求項６】
縦方向又は横方向の長さが縮小された縮小画像を入力し、前記縮小画像を元の長さに伸長することにより伸長画像を生成し、該伸長画像の周囲に画像外領域を付加することにより画像データを作成する作成手段をさらに有することを特徴とする請求項１〜５のいずれか１項に記載の画像処理装置。
【請求項７】
前記生成手段は、ユーザの指示に応じて前記マーカーの位置を移動させることを特徴とする請求項１〜６のいずれか１項に記載の画像処理装置。
【請求項８】
前記マーカーは、前記対象領域を示す前記所定のアスペクト比の枠状のマーカーであることを特徴とする請求項１〜７のいずれか１項に記載の画像処理装置。
【請求項９】
前記マーカーは、前記対象領域の上下又は左右の二辺を示すマーカーであることを特徴とする請求項１〜７のいずれか１項に記載の画像処理装置。
【請求項１０】
前記取得手段は、外部の他装置から前記入力画像を取得することを特徴とする請求項１〜９のいずれか1項に記載の画像処理装置。
【請求項１１】
入力画像を取得する取得手段と、
前記入力画像を所定のアスペクト比で切り出した切り出し領域を示すマーカーを前記入力画像に重畳して表示画像を生成する生成手段と、
を備え、
前記生成手段は、前記入力画像が、画像領域と、前記画像領域の周囲に配置された画像外領域とを含む画像である場合に、前記画像領域を前記所定のアスペクト比で切り出した切り出し領域を示すマーカーを前記入力画像に合成することを特徴とする画像処理装置。
【請求項１２】
請求項１〜１１のいずれか１項に記載の画像処理装置と、
前記表示画像を表示する表示手段と、
を備えることを特徴とする表示装置。
【請求項１３】
入力画像を取得する取得工程と、
前記入力画像のうち、所定のアスペクト比の対象領域を示すマーカーを前記入力画像に重畳して表示画像を生成する生成工程と、
を有し、
前記入力画像が、画像領域と、前記画像領域の周囲に配置された画像外領域とを含む画像である場合、前記生成工程では、前記マーカーで示される前記対象領域が前記画像外領域を含まないように、前記マーカーを前記入力画像に合成することを特徴とする画像処理装置の制御方法。
【請求項１４】
入力画像を取得する取得工程と、
前記入力画像を所定のアスペクト比で切り出した切り出し領域を示すマーカーを前記入力画像に重畳して表示画像を生成する生成工程と、
を有し、
前記生成工程では、前記入力画像が、画像領域と、前記画像領域の周囲に配置された画像外領域とを含む画像である場合に、前記画像領域を前記所定のアスペクト比で切り出した切り出し領域を示すマーカーを前記入力画像に合成することを特徴とする画像処理装置の制御方法。
【請求項１５】
請求項１３または請求項１４に記載の画像処理装置の制御方法の各工程をコンピュータに実行させるためのプログラムが格納されたコンピュータ読取り可能な記録媒体。
【請求項１６】
請求項１３または請求項１４に記載の画像処理装置の制御方法の各工程をコンピュータに実行させるためのプログラム。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、表示画像にアスペクトマーカーを重畳して表示することが可能な画像処理装置、及びその制御方法、記憶媒体、プログラムに関する。
【背景技術】
【０００２】
映画の撮影等において、アナモフィックレンズを用いて、映像を撮影することがある。アナモフィックレンズは、撮影画角のアスペクト比を、光学的に変換して、カメラのセンサに入力することが可能なレンズである。これにより、例えば、ＤＣＩ  ４Ｋのアスペクト比（４０９６：２１６０）の画像を撮影可能なセンサで、従来のレンズを用いて撮影した場合よりも広い画角、例えば、映画で用いられるアスペクト比２．３９：１（横：縦）の画像を記録することが可能となる。この場合、アナモフィックレンズによりアスペクト比２．３９：１の撮影画角が横方向に光学的に縮小された画像が取得される。したがって、センサで取得された画像は、被写体が縦長に歪んだ状態となる。
【０００３】
アナモフィックレンズを用いて撮影された画像は、外部のディスプレイや電子ビューファインダー等の表示装置で表示される前に、アスペクト比をもとに戻す処理（デスクイーズ処理）が施されて、撮像装置から表示装置へ出力される。デスクイーズ処理で得られた画像のアスペクト比は、撮影画角と同等である。撮像装置から出力する画像のアスペクト比がデスクイーズ処理で得られた画像のアスペクト比と異なる場合、撮像装置は、デスクイーズ処理で得られた画像に黒帯（レターボックス）を合成して、出力画像を生成する。例えば、デスクイーズ処理して得られた画像のアスペクト比が２．３９：１であり、撮像装置から出力する画像のアスペクト比がＤＣＩ  ４Ｋのアスペクト比（４０９６：２１６０）であるものとする。この場合、撮像装置は、デスクイーズ処理して得られた画像の上下に黒帯を合成してＤＣＩ  ４Ｋのアスペクト比の出力画像を生成する。例えば、特許文献１にはアスペクト比４：３の映像をアスペクト比１６：９のワイド画面を有する表示装置に送信する場合に、映像の左右に黒帯を追加してワイド画面のサイズに合わせた映像を送信することが記載されている。
【０００４】
また、撮像装置から取得した画像のアスペクト比を調整して、画像を制作する場合がある。表示装置は、アスペクト比を調整した後の画像を調整するユーザが認識しやすくするため、表示装置の画面上に切り出し後の領域（切り出し領域）を示すマーカー（アスペクトマーカー）を表示する機能を有する場合がある。このようなマーカーは、入力された画像の一部を切り出すように、位置が決定される。
【先行技術文献】
【特許文献】
【０００５】
【特許文献１】特開平０７−２０３４０４号公報
【発明の概要】
【発明が解決しようとする課題】
【０００６】
入力された画像を基準としてアスペクトマーカーを生成すると、撮像装置から画像を出力するために合成された黒帯を含む領域が切り出し後の画像領域として示されることがあった。例えば、上述したように、アナモフィックレンズを用いて撮影した２．３９：１の画像に黒帯を合成した画像が入力された場合、上下に合成された画像外の黒帯画像（画像外領域）を含む領域が、アスペクトマーカーによって示されることがある。ユーザは、撮影画角のうち指定したアスペクト比に対応する領域を確認したいことから、手動でアスペクトマーカーの位置や大きさを調整する必要があった。
本発明は、上記の問題点に鑑み、画像外領域が含まれる画像においても適切な位置にマーカーを配置することが可能な画像処理装置およびその制御方法を提供することを目的とする。
【課題を解決するための手段】
【０００７】
本発明の第一態様は、入力画像を取得する取得手段と、前記入力画像のうち、所定のアスペクト比の対象領域を示すマーカーを前記入力画像に重畳して表示画像を生成する生成手段と、を備え、前記入力画像が、画像領域と、前記画像領域の周囲に配置された画像外領域とを含む画像である場合、前記生成手段は、前記マーカーで示される前記対象領域が前記画像外領域を含まないように、前記マーカーを前記入力画像に合成することを特徴とする画像処理装置を提供する。
【０００８】
本発明の第二態様は、入力画像を取得する取得手段と、前記入力画像を所定のアスペクト比で切り出した切り出し領域を示すマーカーを前記入力画像に重畳して表示画像を生成する生成手段と、を備え、前記生成手段は、前記入力画像が、画像領域と、前記画像領域の周囲に配置された画像外領域とを含む画像である場合に、前記画像領域を前記所定のアスペクト比で切り出した切り出し領域を示すマーカーを前記入力画像に合成することを特徴とする画像処理装置を提供する。
【０００９】
本発明の第三態様は、入力画像を取得する取得工程と、前記入力画像のうち、所定のアスペクト比の対象領域を示すマーカーを前記入力画像に重畳して表示画像を生成する生成工程と、を有し、前記入力画像が、画像領域と、前記画像領域の周囲に配置された画像外領域とを含む画像である場合、前記生成工程では、前記マーカーで示される前記対象領域が前記画像外領域を含まないように、前記マーカーを前記入力画像に合成することを特徴とする画像処理装置の制御方法を提供する。
【００１０】
本発明の第四態様は、入力画像を取得する取得工程と、前記入力画像を所定のアスペクト比で切り出した切り出し領域を示すマーカーを前記入力画像に重畳して表示画像を生成する生成工程と、を有し、前記生成工程では、前記入力画像が、画像領域と、前記画像領域の周囲に配置された画像外領域とを含む画像である場合に、前記画像領域を前記所定のアスペクト比で切り出した切り出し領域を示すマーカーを前記入力画像に合成することを特徴とする画像処理装置の制御方法を提供する。
【００１１】
本発明の第五態様は、本発明に係る画像処理装置の制御方法の各工程をコンピュータに実行させるためのプログラムが格納されたコンピュータ読取り可能な記録媒体を提供する。
本発明の第六態様は、本発明に係る画像処理装置の制御方法の各工程をコンピュータに実行させるためのプログラムを提供する。
【発明の効果】
【００１２】
本発明によれば、画像外領域が含まれる画像においても適切な位置にマーカーを配置することができる。
【図面の簡単な説明】
【００１３】
【図１】実施例１の撮影システムの構成例を示すブロック図である。
【図２】実施例１の表示装置と撮影装置の各部構成例を示す図である。
【図３】実施例１の撮影装置における処理の流れの例を示す図である。
【図４】デスクイーズ処理の例を示す図である。
【図５】レターボックス映像を例示する図である。
【図６】実施例１の表示装置における処理の流れの例を示す図である。
【図７】アスペクトマーカー表示制御情報を例示する図である。
【図８】アスペクトマーカー表示制御情報の設定の第１の例を示す図である。
【図９】アスペクトマーカーの表示例を示す図である。
【図１０】アスペクトマーカー表示制御情報の設定の第２の例を示す図である。
【図１１】実施例２の表示装置と撮影装置の各部構成例を示す図である。
【図１２】実施例２の表示装置における処理の流れの例を示す図である。
【図１３】従来例における切り出しの例を示す図である。
【図１４】従来例と本発明の実施例のアスペクトマーカーを例示する図である。
【発明を実施するための形態】
【００１４】
以下、本発明の好ましい実施例について、図面を参照しながら詳細に説明する。各図において、同一の構成については原則として同一の参照番号をふり、重複する説明は省略する。また、説明を具体化するために例示する数値等は、特に言及しない限りは、これに限定するものではない。
また、本発明は以下の実施例に限定されるものではなく、その要旨を逸脱しない範囲において適宜変更可能である。例えば、本発明が適用される装置の構成や各種条件によって下記実施例の各構成が適宜修正又は変更されてもよい。
【００１５】
＜実施例１＞
（撮影システムの全体構成）
図１は、実施例１の撮影システム１の構成例を示すブロック図である。撮影システム１は、表示装置１００と、撮影装置１０１とで構成され、表示装置１００及び撮影装置１０１は伝送路１０３を介して通信を行う。
撮影装置１０１は、表示装置１００の外部の他装置である。この撮像装置１０１は、レンズ後玉が通常のレンズと比べて縦長となっているアナモフィックレンズ１０２を備え、アナモフィックレンズ１０２により横方向に１／１．３３倍に縮小された映像が撮影される。以下では、横方向（又は縦方向）に縮小された縮小画像をアナモ撮影映像という。また、アナモ撮影映像の横方向の縮小倍率をスクイーズ倍率という。なお、スクイーズ倍率は１／１．３３倍に限定されず、１／２倍のように他の倍率であってもよい。
撮影装置１０１は、アナモ撮影映像をデスクイーズ処理してシネスコ映像（伸長画像）を生成し、シネスコ映像の周囲に黒帯（画像外領域）を追加してレターボックス映像（入力画像）を生成する。そして、撮影装置１０１は、伝送路１０３を介して表示装置１００にレターボックス映像を送信する。
なお、伝送路１０３においては、ＳＤＩ（Ｓｅｒｉａｌ  Ｄｉｇｉｔａｌ  Ｉｎｔｅｒｆａｃｅ）伝送仕様に準拠した伝送が行われるものとする。また、ＳＤＩは、ＳＭＰＴＥ（Ｓｏｃｉｅｔｙ ｏｆ Ｍｏｔｉｏｎ Ｐｉｃｔｕｒｅ ａｎｄ Ｔｅｌｅｖｉｓｉｏｎ Ｅｎｇｉｎｅｅｒｓ）により規格化されている。
【００１６】
表示装置１００は、撮影装置１０１から受信した映像がデスクイーズ処理されたか否かを判定し、デスクイーズ処理されたレターボックス映像であった場合、アスペクトマーカーをレターボックス映像に重畳させて表示させる。このアスペクトマーカーは、シネスコ映像を切り出してアスペクト比が１６：９となるようにした場合の切り出し後の映像の範囲を示す。すなわち、アスペクトマーカーは、レターボックス映像を切り出した場合の切り出し領域とそれ以外の領域の境界を示す。なお、本実施例では、アスペクトマーカーのアスペクト比が１６：９とワイド画面のアスペクト比と一致するものとする。なお、アスペクトマーカーの表示例に関しては後述する。
【００１７】
（実施例１の表示装置と撮影装置の各部構成）
図２は、実施例１の表示装置１００と撮影装置１０１の各部構成例を示す図である。
撮影装置１０１は、撮影部１１０と、デスクイーズ処理部１１１と、送信部１１２とを
有する。撮影部１１０は、アナモフィックレンズ１０２で撮影されたアナモ撮影映像を生成する。
デスクイーズ処理部１１１は、アナモ撮影映像（縮小画像）をデスクイーズ処理し、横長のシネスコ映像（伸長画像）とする。ここで本実施例においては、シネスコ映像のアスペクト比を２．３９：１（所定のアスペクト比）であるものとする。
続いて、デスクイーズ処理部１１１は、ＥＶＦ（Ｅｌｅｃｔｒｉｃ  Ｖｉｅｗｆｉｎｄｅｒ）の解像度、又は伝送路１０３を伝送する映像信号の解像度に応じてシネスコ映像を縮小する。さらに、デスクイーズ処理部１１１は、シネスコ映像の上下に隣接する黒帯（画像外領域）を付加したレターボックス映像（入力画像）を生成する。黒帯は、ＲＧＢ値（０，０，０）の黒色の帯状の画像を示している。なお、黒帯は、画像領域の周囲に設けられる帯状の領域であり、黒色以外の色であってもよい。
送信部１１２は、レターボックス映像を表示装置１００に送信する。
【００１８】
表示装置１００は、ＩＦ部２００、表示制御部２０３、表示部２０４、操作指示部２０５及び画像処理装置２１０を有する。また、画像処理装置２１０は、付加情報取得部２０１、画像処理部２０２、デスクイーズ処理判定部２０６及びアスペクトマーカー表示制御部２０７を有する。画像処理装置２１０は、アスペクトマーカーを生成し、映像信号に合成する機能を有する。
ＩＦ部２００は、映像信号の入力ＩＦ（Ｉｎｔｅｒｆａｃｅ）である。ＩＦ部２００は、ＳＤＩ伝送仕様で構成されるデータストリームを入力、デコード処理をし、アンシラリデータと映像信号（画像データ）とを付加情報取得部２０１へ出力する。
【００１９】
ここでアンシラリデータとは、ＳＤＩ伝送仕様で規定されている映像信号の伝送仕様や伝送する映像の各種特性を示す情報である。例えば、アンシラリデータには、伝送する映像のサンプリング構造、ピクセル深度、フレームレート、タイムコード、信号種別、マッピング形式、音声情報、リンク種別、解像度情報などの情報が含まれる。さらに、アンシラリデータには、ユーザが任意の情報を格納できる領域があり、本実施例では表示装置で使用される付加情報が格納される。本実施例においては、デスクイーズ処理機能の実施の有無を示すデスクイーズ処理情報および黒帯画像を付加したか否かを示す情報等が付加情報として映像信号に含まれるものとする。
【００２０】
付加情報取得部２０１は、ＩＦ部２００から取得した映像信号のアンシラリデータから、入力画像に関する情報を取得する。付加情報取得部２０１は、アンシラリデータからデスクイーズ処理情報と映像信号の解像度情報とを取得する。付加情報取得部２０１は、取得したデスクイーズ処理情報と映像信号の解像度情報とをデスクイーズ処理判定部２０６に出力する。解像度情報は、映像信号の垂直方向（縦方向）及び水平方向（横方向）の解像度（画素数）を示すサイズ情報である。また、付加情報取得部２０１は、映像信号を画像処理部２０２へ出力する。
デスクイーズ処理判定部２０６は、付加情報取得部２０１から入力されたデスクイーズ処理情報に基づいて映像信号が、デスクイーズ処理されたシネスコ映像であるか否かを判定する。デスクイーズ処理をされた映像であった場合、デスクイーズ処理判定部２０６は、付加情報取得部２０１から入力された解像度情報をアスペクトマーカー表示制御部２０７に出力する。一方で、デスクイーズ処理をされた映像でなかった場合、デスクイーズ処理判定部２０６は、アスペクトマーカー表示制御部２０７に解像度情報を出力しなくてもよい。
【００２１】
アスペクトマーカー表示制御部２０７は、映像信号の解像度情報を用いてアスペクトマーカー表示制御情報を生成し、画像処理部２０２へ出力する。ここでアスペクトマーカー表示制御情報とは、画像領域内のシネスコ映像のアスペクト比を１６：９のアスペクト比に変更した場合の映像（表示画像）の範囲を示すアスペクトマーカーの大きさ及び位置を
決定するための情報である。アスペクトマーカーは、シネスコ映像を指定されたアスペクト比の画像に切り出す場合の切り出し位置を示す画像であるとする。このアスペクトマーカー表示制御情報によって、アスペクトマーカーにより示される範囲の縦方向又は横方向のいずれか一方のサイズが画像領域のサイズに一致するようにアスペクトマーカーの大きさが設定される。さらに、アスペクトマーカー表示制御情報によって、アスペクトマーカーにより示される範囲が画像領域に内接するようにアスペクトマーカーを表示する位置が設定される。
【００２２】
操作指示部２０５は、アスペクトマーカーを表示するか否かの指定やアスペクトマーカーの位置の指定等を受け付けるインタフェースである。操作指示部２０５は、ユーザからの操作指示をアスペクトマーカー表示制御部２０７に出力する。
画像処理部２０２は、アスペクトマーカー表示制御情報に基づいてアスペクトマーカーをレターボックス映像に合成し、アスペクトマーカーを重畳させた状態のレターボックス映像を表示制御部２０３に入力する。アスペクトマーカーは、黒帯の部分に重ならないように合成される。なお、画像処理部２０２は、アスペクトマーカーの表示以外に、映像信号に対して各種画像処理を行ってもよい。
表示制御部２０３は、画像処理部２０２から入力されたレターボックス映像に基づいて表示部２０４に映像を表示する。
表示部２０４は、表示制御部２０３からの制御に応じてレターボックス映像を表示領域に表示させる。
【００２３】
（撮影装置における処理の流れ）
まず、撮影装置における処理について説明する。
図３は、実施例１の撮影装置１０１における処理の流れの例を示す図である。
ステップＳ３００で撮影部１１０は、アナモフィックレンズ１０２で撮影されたアナモ撮影映像を取得する。例えば、アナモ撮影映像は、１／１．３３倍のスクイーズ倍率となっており、被写体が縦長に歪んだ状態となっている。なお、上述のスクイーズ倍率は一例であり、他のスクイーズ倍率のアナモフィックレンズであってもよい。
【００２４】
ステップＳ３０１でデスクイーズ処理部１１１は、アナモ撮影映像をデスクイーズ処理して横方向に引き伸ばし、横長映像とする。このデスクイーズ処理により、被写体の歪みが解消される。例えば、デスクイーズ処理部１１１は、アナモ撮影映像の横方向の長さをスクイーズ倍率（１／１．３３倍）の逆数倍（１．３３／１倍）に引き伸ばしたサイズの横長映像とする。
デスクイーズ後の横長映像は、シネスコ映像よりも横方向に少し長い（アスペクト比が大きい）ため、デスクイーズ処理部１１１は、横長映像の左端部及び右端部付近を切り出して取り除く。これによりアスペクト比２．３９：１のシネスコ映像が生成される。
図４は、デスクイーズ処理の例を示す図である。図４には、デスクイーズ後の横長映像４００と斜線部のシネスコ映像４０１とが示される。デスクイーズ後の横長映像４００の斜線部と重ならない左右の部分を切り出して取り除く。例えば、デスクイーズ後の映像信号の解像度が５４４８×２１６０であった場合、デスクイーズ処理部１１１は、映像信号の解像度が５１６２×２１６０となるように左右の点線部を切り出し、横長映像の左端部及び右端部を取り除く。
【００２５】
ステップＳ３０２でデスクイーズ処理部１１１は、シネスコ映像の上下に、映像信号の解像度に応じた幅の黒帯を付加し、レターボックス映像を生成する。
図５Ａ及び図５Ｂは、レターボックス映像を例示する図である。図５Ａは、解像度３８４０×２１６０の映像信号にシネスコ映像５０１ａを収めたレターボックス映像５００ａである。
図５Ａの左側の一列に列挙された数値が有効ライン数であり、上側の一行に列挙された
数値が有効サンプル数である。シネスコ映像は、網掛けされアスペクト比２．３９：１の画像領域内に表示され、シネスコ映像の上下には黒帯５０２ａ（画像外領域）が付加される。なお、図５Ｂにおいても同様である。
【００２６】
具体的には、デスクイーズ処理部１１１は、解像度３８４０×２１６０の映像信号と同じサイズの映像に、アスペクト比２．３９：１のシネスコ映像５０１ａを収納した場合に、シネスコ映像５０１ａの左辺及び右辺が内接する大きさとする。さらに、デスクイーズ処理部１１１は、シネスコ映像５０１ａをレターボックス映像５００ａの真ん中に配置する。さらに、デスクイーズ処理部１１１は、シネスコ映像５０１ａの上側の有効ライン数１〜２７６の範囲と、下側の１８８５〜２１６０の範囲とに有効ライン数２７６の黒帯５０２ａを付加する。なお、この場合のシネスコ映像５０１ａの有効ライン数は、１６０８ラインとなる。これにより、解像度３８４０×２１６０のレターボックス映像５００ａが生成される。
【００２７】
図５Ｂは、解像度４０９６×２１６０の映像信号にアスペクト比２．３９：１のシネスコ映像５０１ｂを収めたレターボックス映像５００ｂである。デスクイーズ処理部１１１は、解像度４０９６×２１６０の映像信号と同じサイズの映像に、アスペクト比２．３９：１のシネスコ映像５０１ｂを収納した場合に、シネスコ映像５０１ｂの左辺及び右辺が内接する大きさとする。さらに、デスクイーズ処理部１１１は、シネスコ映像５０１ｂをレターボックス映像５００ｂの真ん中に配置する。さらに、デスクイーズ処理部１１１は、シネスコ映像５０１ｂの上側の有効ライン数１〜２２４の範囲と、下側の１９３７〜２１６０の範囲とに有効ライン数２２４の黒帯５０２ｂを付加する。なお、この場合のシネスコ映像５０１ｂの有効ライン数は、１７１２ラインとなる。これにより、解像度４０９６×２１６０のレターボックス映像５００ｂが生成される。このようにシネスコ映像の大きさ及び黒帯の幅は、映像信号の解像度によって決定される。
【００２８】
図３に戻る。ステップＳ３０３で送信部１１２は、ステップＳ３０２で生成したレターボックス映像を表示装置１００に送信する。
【００２９】
（表示装置における処理の流れ）
次に、表示装置１００における処理について説明する。
図６は、実施例１の表示装置１００における処理の流れの例を示す図である。
ステップＳ６００でＩＦ部２００は、撮影装置１０１から送信された映像信号（アンシラリデータを含む）を受信する。
ステップＳ６０１で付加情報取得部２０１は、アンシラリデータから付加情報のデスクイーズ処理情報と、映像信号の解像度情報とを取得し、デスクイーズ処理情報をデスクイーズ処理判定部２０６へ出力する。そして、付加情報取得部２０１は、映像信号を画像処理部２０２へ出力する。
【００３０】
ステップＳ６０２でデスクイーズ処理判定部２０６は、デスクイーズ処理情報に基づいて、表示装置１００から送信された映像信号がアナモ撮影映像をデスクイーズ処理した映像であるか否かを判定する。デスクイーズ処理された映像、すなわち、レターボックス映像である場合、ステップＳ６０３の処理に移行する。一方で、デスクイーズ処理した映像でなく、通常の映像であった場合、ステップＳ６０７の処理に移行する。なお、通常の映像とは、黒帯を含まないアスペクト比１６：９の映像である。なお、デスクイーズ処理判定部２０６は、アンシラリデータに入力映像が黒帯が付加されたことを示す情報が付加されていた場合に、入力映像がレターボックス映像であると判定するものであってもよい。
ステップＳ６０３で付加情報取得部２０１は、映像信号の解像度情報をアスペクトマーカー表示制御部２０７に出力する。
ステップＳ６０４でアスペクトマーカー表示制御部２０７は、ユーザから操作指示部２
０５を介してアスペクトマーカーを表示させる指示があったか否かを判定する。ユーザから指示があった場合、ステップＳ６０５の処理に移行し、指示がなかった場合、図６の処理を終了させる。
【００３１】
ステップＳ６０５でアスペクトマーカー表示制御部２０７は、映像信号の解像度情報に基づいてアスペクトマーカー表示制御情報を生成し、画像処理部２０２に出力する。以下、アスペクトマーカー表示制御情報について具体例を挙げて説明する。
図７は、アスペクトマーカー表示制御情報を例示する図である。
図７の表の左側が映像信号の解像度情報（レターボックス映像の解像度）を示しており、右側がアスペクトマーカー表示制御情報を示している。
左側の映像信号の解像度情報は、縦方向の解像度を示す垂直解像度と、横方向の解像度を示す水平解像度とに分かれる。図７の左側には、上段に、図５Ａに示したレターボックス映像５００ａの垂直解像度及び水平解像度が示され、下段に、図５Ｂに示したレターボックス映像５００ｂの垂直解像度及び水平解像度が示される。
また、図７の右側には、レターボックス映像５００ａに対応するアスペクトマーカーの始点とアスペクトマーカーサイズ、レターボックス映像５００ｂに対応するアスペクトマーカーの始点とアスペクトマーカーサイズが例示されている。ここでアスペクトマーカー制御情報の始点は、アスペクトマーカーの左上の画素の座標（横の座標、縦の座標）を示しており、アスペクトマーカーサイズは、アスペクトマーカーの横方向及び縦方向の画素数（横方向の画素数×縦方向の画素数）を示している。なお、本実施例では、レターボックス映像５００ａ又は５００ｂの左上の画素を原点（０、０）とする座標系であるものとする。
【００３２】
なお、アスペクトマーカー表示制御部２０７は、操作指示部２０５からの操作指示に応じてアスペクトマーカー表示制御情報を変更してもよい。例えば、アスペクトマーカー表示制御部２０７は、操作指示に応じてアスペクトマーカーの表示の有無、表示位置、形状（アスペクト比、サイズ）等を変更してもよい。
【００３３】
次に、図５Ａのレターボックス映像５００ａの場合のアスペクトマーカー表示制御情報を生成手順について説明する。
図８は、アスペクトマーカー表示制御情報の設定の第１の例を示す図である。
表示画面領域８００は、表示部２０４の画面の表示領域を示しており、表示画面領域８００の有効表示解像度は３８４９×２１６０であるものとする。この表示画面領域８００には、上下に黒帯５０２ａを付加したレターボックス映像５００ａが表示される。
表示画面領域８００の解像度は３８４９×２１６０であるのに対し、レターボックス映像５００ａの解像度は３８４０×２１６０であり、レターボックス映像５００ａよりも表示画面領域８００の方が横方向に若干長い。このため、アスペクトマーカー表示制御部２０７は、レターボックス映像５００ａが表示画面領域８００の中央に表示されるように、レターボックス映像５００ａの左右に黒帯８０２を挿入する。
【００３４】
アスペクトマーカー領域８０１は、アスペクトマーカーを配置する領域であり、シネスコ映像５０１ａに内接する。
アスペクトマーカー表示制御部２０７は、シネスコ映像５０１ａのアスペクト比２．３９：１とレターボックス映像５００ａの解像度に基づいて、シネスコ映像５０１ａの解像度３８４０×１６０２を求める。続いて、アスペクトマーカー表示制御部２０７は、アスペクトマーカー領域８０１の縦方向の長さがシネスコ映像５０１ａに縦方向の長さと一致するように、アスペクトマーカーサイズを２８４８×１６０２とする。ここで、本実施例では、アスペクトマーカーの最小単位を３２×１８（横方向の画素数×縦方向の画素数）とし、これを拡大することでアスペクトマーカーサイズを調整するものとする。つまり、図８の例では、アスペクトマーカー表示制御部２０７は、３２×１８のアスペクトマーカ
ーを８９倍に拡大する。なお、アスペクトマーカーの最小単位は３２×１８に限定されず、例えば１６×９であってもよい。
【００３５】
続いて、アスペクトマーカー表示制御部２０７は、レターボックス映像５００ａの中央にアスペクトマーカー８０１を配置した場合のアスペクトマーカーの左上の座標（４９７、２８０）を始点として特定する。
以上により、表示制御情報のアスペクトマーカーサイズ及び始点が特定される。
なお、アスペクトマーカー領域８０１の左上の縦方向の座標は、黒帯５０２ａの幅に基づいて特定されてもよい。
【００３６】
図６に戻る。ステップＳ６０６でアスペクトマーカー表示制御部２０７は、アスペクトマーカー表示制御情報に基づいてアスペクト比１６：９の枠状の形状のアスペクトマーカーを表示させる。
次に、アスペクトマーカー表示制御情報に基づいてアスペクトマーカーを表示させた場合の表示例について説明する。
図９は、アスペクトマーカーの表示例を示す図である。
まず、アスペクトマーカー表示制御部２０７は、アスペクトマーカー表示制御情報の始点（４９７、２８０）に基づいてアスペクトマーカーの左上の頂点９０１の位置を（４９７、２８０）とする。続いて、アスペクトマーカー表示制御部２０７は、頂点９０１の位置とアスペクトマーカーサイズ２８４０×１６０２に基づいて、右上の頂点９０２の位置を（３３４４、２８０）とする。同様に、アスペクトマーカー表示制御部２０７は、左下の頂点９０３の位置を（４９７、１８８１）、右下の頂点９０４の位置を（３３４４、１８８１）とする。そして、アスペクトマーカー表示制御部２０７は、頂点９０１、頂点９０２、頂点９０３及び頂点９０４を結ぶアスペクトマーカー９００を生成する。
アスペクトマーカー９００をレターボックス映像５００ａに合成して重畳させて表示することにより、レターボックス映像を切り出した後の映像の範囲（切り出し領域）が明確となり、切り出し後の映像の構図を確認することができる。
【００３７】
図６に戻る。ステップＳ６０２でデスクイーズ処理した映像でなかった場合（通常の映像の場合）、ステップＳ６０７の処理に移行する。
ステップＳ６０７でアスペクトマーカー表示制御部２０７は、ユーザから操作指示部２０５を介してアスペクトマーカーを表示させる指示があったか否かを判定する。ユーザから指示があった場合、ステップＳ６０８の処理に移行し、指示がなかった場合、図６の処理を終了させる。
ステップＳ６０８でアスペクトマーカー表示制御部２０７は、映像信号の解像度情報に基づいてアスペクトマーカー表示制御情報を生成し、画像処理部２０２に出力する。
【００３８】
ステップＳ６０９でアスペクトマーカー表示制御部２０７は、アスペクトマーカー表示制御情報に基づいてアスペクトマーカーを表示させる。
図１０は、アスペクトマーカー表示制御情報の設定の第２の例を示す図である。図１０の例では、レターボックス映像５００ａと異なり表示画面領域１０００には黒帯が表示されない。表示画面領域１０００の有効表示解像度は、２１６０×４０９６であるものとする。アスペクトマーカー表示制御部２０７は、始点１００２とアスペクトマーカーサイズとに基づいてアスペクト比が１６：９のアスペクトマーカー１００１を表示画面領域１０００に表示させる。図１０の場合、アスペクトマーカー１００１の左右から少しはみ出た状態となっている。アスペクトマーカー１００１を用いてアスペクトマーカー１００１の左右から少しはみ出ている部分を切り出すことで映像のアスペクト比を調整することができる。
【００３９】
以上のように、自動で生成されたアスペクトマーカーにより切り出し後の映像の構図を
確認することができるため、アスペクトマーカーを正しい位置に配置する操作が不要となり、ユーザの負担を軽減することができる。
【００４０】
なお、アスペクトマーカー表示制御部２０７は、操作指示部２０５からのユーザの指示に応じて表示制御情報の始点の座標及びアスペクトマーカーサイズを変更してもよい。例えば、キーボードの左右のキーが押下された場合、アスペクトマーカー表示制御部２０７は、始点の座標を変更してアスペクトマーカーを左右にずらしてもよい。
なお、図６のフローチャートでは、ステップＳ６０４及びステップＳ６０７でユーザからアスペクトマーカーを表示する指示があった場合にアスペクトマーカーを表示させたが、指示の有無を判定せず、自動でアスペクトマーカーを表示させてもよい。
【００４１】
なお、アスペクトマーカーのアスペクト比が１６：９としたが、これに限定されず、画像を表示するモニタのアスペクト比に応じてアスペクトマーカーのアスペクト比を変更してもよい。
また、アスペクト比２．３９：１のシネスコ映像を基にレターボックス映像を生成する例について説明したが、他のアスペクト比の映像を基にレターボックス映像を生成してもよい。
【００４２】
また、アスペクトマーカーを映像に重畳して表示する例について説明したが、これに限定されず、アスペクトマーカーを静止画に重畳させて表示してもよい。
また、上記実施例ではアナモ撮影映像は、横方向に縮小された映像であることを説明したが、縦方向に縮小された映像であってもよい。この場合、デスクイーズ処理では、アナモ撮影映像が縦方向に引き伸ばされた映像に基づいて、上記実施例と同様の処理によりアスペクトマーカーが生成される。
【００４３】
また、上述の例では、レターボックス映像内のシネスコ映像の中央にアスペクトマーカーを配置したが、これに限定されない。例えば、アスペクトマーカーをシネスコ映像の左方向又は右方向にずらした位置に配置してもよい。また、操作指示部２０５におけるユーザの指示に応じてアスペクトマーカーの大きさを変更してもよい。
また、上述の例では、レターボックス映像に枠状のアスペクトマーカーを配置する例を説明したが、アスペクトマーカーの形状はこれに限定されない。例えば、切り出し後の画像の範囲の上下又は左右の二辺を示す直線をアスペクトマーカーとしてもよい。
【００４４】
また、上述の例では、レターボックス映像の解像度情報に基づいてアスペクトマーカーの位置及び大きさを決定したが、画像分析により画像領域を特定し、画像領域に応じてアスペクトマーカーの位置及び大きさを決定してもよい。例えば、輝度値の閾値を基準として、閾値以上の画素の領域を画像領域と特定し、閾値以下の画素の領域を黒帯と特定する。そして、特定された画像領域に応じて１６：９のアスペクト比のアスペクトマーカーを拡大又は縮小し、画像領域に内接する位置にアスペクトマーカーを重畳させてもよい。また、Ｒ値、Ｇ値、Ｂ値のいずれかに閾値を設けて画像領域を特定してもよい。
また、上述の例では、アナモフィックレンズを用いて撮像されたアナモ撮影映像をデスクイーズ処理することでシネスコ映像を生成する例について説明したが、これに限定されない。例えば、アスペクト比１６：９の映像を画像処理でアスペクト比２．３９：１の映像に変換し、ノイズ処理を行うことでシネスコ映像を生成してもよい。この場合においても、上述の例と同様に生成されたシネスコ映像の上下に黒帯が付加され、レターボックス映像が生成される。
また、画像処理部２０２は、ユーザによる指示に応じてアスペクトマーカーの表示位置を移動させてもよい。
【００４５】
＜実施例２＞
（実施例２の表示装置と撮影装置の各部構成）
実施例２においては、表示装置１１００がデスクイーズ機能を有する点で実施例１と異なる。
図１１は、実施例２の表示装置１１００と撮影装置１１１０の各部構成例を示す図である。画像処理部１１０５が、デスクイーズ処理部１１０２を有する点で実施例１の画像処理装置２１０と異なる。なお、実施例１と同じ構成には同じ符号を付し、適宜説明を省略する。
撮影装置１１１０は、撮影部１１１１及び送信部１１１２を有する。撮影部１１１１は、アナモフィックレンズ１０２で撮影されたアナモ撮影映像を生成する。
送信部１１１２は、アナモ撮影映像を表示装置１１００に送信する。
【００４６】
ＩＦ部２００は、撮影装置１１１０からアナモ撮影映像を受信する。また、ＩＦ部２００は、他の撮影装置からアナモ撮影映像以外にも、アナモ撮影映像をデスクイーズ処理したレターボックス映像や通常のレンズで撮影された映像を受信してもよい。
付加情報取得部１１０１は、アナモ撮影映像と共に送信されたアンシラリデータからデスクイーズ処理情報、スクイーズ倍率情報及び映像信号の解像度情報を取得する。なお、デスクイーズ処理情報及びスクイーズ倍率情報は、付加情報である。
続いて、付加情報取得部１１０１は、デスクイーズ処理情報、スクイーズ倍率情報及び解像度情報をデスクイーズ処理判定部１１０３に送信し、映像信号をデスクイーズ処理部１１０２に送信する。ここで、スクイーズ倍率情報とは、アナモ撮影映像の縮小倍率（例えば、１／１．３３倍）であり、アナモフィックレンズに応じて設定される情報である。なお、通常のレンズで撮影された場合、付加情報にスクイーズ倍率情報が含まれないものとする。また、デスクイーズ処理情報は、実施例１と同様にデスクイーズ処理の有無を示す情報である。
【００４７】
デスクイーズ処理判定部１１０３は、デスクイーズ処理情報に基づいて映像信号がデスクイーズ処理されたか否かを判定し、さらにスクイーズ倍率情報の有無に基づいて映像信号がアナモ撮影映像か否かを判定する。ここでデスクイーズ処理情報がある場合、レターボックス映像であることになる。また、デスクイーズ処理情報がなく、スクイーズ倍率情報がある場合、アナモ撮影映像であることになる。また、デスクイーズ処理情報がなく、スクイーズ倍率情報もない場合、通常の映像であることになる。
レターボックス映像であった場合、デスクイーズ処理判定部１１０３は、付加情報取得部１１０１により入力された解像度情報をアスペクトマーカー表示制御部２０７に出力する。また、アナモ撮影映像であった場合、デスクイーズ処理判定部２０６は、スクイーズ倍率情報をデスクイーズ処理部１１０２に出力し、解像度情報をアスペクトマーカー表示制御部２０７に出力する。
【００４８】
デスクイーズ処理部１１０２（作成部）は、デスクイーズ処理判定部１１０３からスクイーズ倍率情報が入力された場合、スクイーズ倍率情報に基づいてデスクイーズ処理を行う。すなわち、デスクイーズ処理部１１０２は、アナモ撮影映像（縮小画像）を元の長さに伸長することによりシネスコ映像（伸長画像）を作成する。さらに、デスクイーズ処理部１１０２は、シネスコ映像の上下に黒帯（画像外領域）を付加してレターボックス映像を作成する。そして、デスクイーズ処理部１１０２は、映像信号を画像処理部２０２に送信する。
一方で、デスクイーズ処理部１１０２は、デスクイーズ処理判定部１１０３からスクイーズ倍率情報が入力されなかった場合、映像信号に対して特に処理を行わなわず、映像信号をそのまま画像処理部２０２に送信する。
【００４９】
図１２は、実施例２の表示装置１１００における処理の流れの例を示す図である。なお、図６と同じ処理に関しては適宜説明を省略する。
ステップＳ１２００でＩＦ部２００は、映像信号を受信する。
ステップＳ１２０１で付加情報取得部１１０１は、アナモ撮影映像と共に送信されたアンシラリデータから付加情報のデスクイーズ処理情報及びスクイーズ倍率情報と、映像信号の解像度情報とを取得する。続いて、付加情報取得部１１０１は、スクイーズ倍率情報及び解像度情報をデスクイーズ処理判定部１１０３に送信し、映像信号をデスクイーズ処理部１１０２に送信する。
【００５０】
ステップＳ１２０２でデスクイーズ処理判定部１１０３は、デスクイーズ処理情報に基づいて、入力された映像信号がデスクイーズ処理された映像か否かを判定する。
デスクイーズ処理された映像である場合、ステップＳ１２０３の処理に移行する。ここで、デスクイーズ処理された映像である場合、入力された映像信号はレターボックス映像であることになる。一方、デスクイーズ処理された映像でなかった場合、ステップＳ１２０７の処理に移行する。
ステップＳ１２０３で付加情報取得部１１０１は、映像信号の解像度情報をアスペクトマーカー表示制御部２０７に出力する。なお、その後のステップＳ１２０４〜Ｓ１２０６までの処理は、図６のステップＳ６０４〜Ｓ６０６と同様であるので説明を省略する。
【００５１】
ステップＳ１２０２でデスクイーズ処理した映像でなかった場合、ステップＳ１２０７に移行し、デスクイーズ処理判定部１１０３は、スクイーズ倍率情報があるか否かを判定する。スクイーズ倍率情報があった場合、入力された映像信号はアナモ撮影映像であることになる。この場合、ステップＳ１２０８の処理に移行する。一方で、スクイーズ倍率情報がなかった場合、入力された映像信号は通常の映像であることになる。この場合、ステップＳ１２０９の処理に移行する。
なお、ステップＳ１２０９〜Ｓ１２１１までの処理は、図６のステップＳ６０７〜Ｓ６０９の処理と同じであるため、説明を省略する。
【００５２】
ステップＳ１２０８でデスクイーズ処理部１１０２は、スクイーズ倍率情報に基づいて映像信号に対してデスクイーズ処理を行い、映像信号を画像処理部２０２に送信する。
次に、デスクイーズ処理に関して具体例を挙げて説明する。
例えば、デスクイーズ処理後の映像の解像度は、５４４８×２１６０であるものとする。デスクイーズ処理部１１０２は、シネスコ映像のアスペクト比に合わせて左右の部分を切り出し、映像の解像度を５１６２×２１６０とする。続いて、デスクイーズ処理部１１０２は、映像信号の解像度に応じて映像を縮小し、さらにシネスコ映像の上下に、映像信号の解像度に応じた幅の黒帯を付加してレターボックス映像を作成する。
【００５３】
図１２に戻る。その後のステップＳ１２０４〜Ｓ１２０６までの処理は、図６のステップＳ６０４〜Ｓ６０６と同様である。
【００５４】
（効果）
以下では、従来例及び本発明の実施例における効果を比較する。
図１３は、従来例における切り出しの例を示す図である。シネスコ映像１３００は、アナモ撮影映像をデスクイーズ処理することにより作成されたアスペクト比２．３９：１の映像である。この映像をワイド画面に映像を表示させる場合、作品映像１３０１のようにアスペクト比を１６：９とする必要があるため、点線部分が切り出される。なお、図１３では、シネスコ映像の上下に付加される黒帯を省略している。
【００５５】
図１４Ａ及び図１４Ｂは、従来例と本発明の実施例におけるアスペクトマーカーを例示する図である。図１４Ａは、従来例のアスペクトマーカー１４０１の表示例を示す図である。図１４Ａに示すようにアスペクトマーカー１４０１は初期状態で画面いっぱいに広げられているため、ユーザは、アスペクトマーカー１４０１の大きさ及び位置を実際に切り
出しする範囲に合わせて調整する必要がある。これはユーザにとって煩雑な作業であった。
【００５６】
一方で図１４Ｂは、本発明の実施例のアスペクトマーカーの表示例を示す図である。レターボックス映像１４００の解像度に応じてアスペクトマーカーの大きさが決定され、シネスコ映像１４０２の中央部にアスペクトマーカー１４１０が設けられる。これにより、アスペクトマーカーを配置する作業を省略できるため、ユーザにとって利便性が高い。
【００５７】
本発明は、上述の実施例の１以上の機能を実現するプログラムを、ネットワーク又は記憶媒体を介してシステム又は装置に供給し、そのシステム又は装置のコンピュータにおける１つ以上のプロセッサがプログラムを読出し実行する処理でも実現可能である。また、１以上の機能を実現する回路（例えば、ＡＳＩＣ）によっても実現可能である。
【符号の説明】
【００５８】
１００：表示装置、２０１：付加情報取得部、２０２：画像処理部、２０６：デスクイーズ処理判定部、２０７：アスペクトマーカー表示制御部
【図１】
2019033437.tif 000003
【図２】
2019033437.tif 000004
【図３】
2019033437.tif 000005
【図４】
2019033437.tif 000006
【図５】
2019033437.tif 000007
【図６】
2019033437.tif 000008
【図７】
2019033437.tif 000009
【図８】
2019033437.tif 000010
【図９】
2019033437.tif 000011
【図１０】
2019033437.tif 000012
【図１１】
2019033437.tif 000013
【図１２】
2019033437.tif 000014
【図１３】
2019033437.tif 000015
【図１４】
2019033437.tif 000016