(57)【要約】【課題】撮影者の意図に合った表示輝度で画像を表示装置に表示させることを可能にすることを課題とする。【解決手段】画像処理装置は、画像から輝度値を取得する取得手段（１０４）と、画像の一部の領域を指定する指定手段（１０３）と、表示装置（１０７）に表示される画像情報を生成する生成手段（１０３）と、画像情報を表示する表示装置（１０７）に、輝度値に関する情報を通知する通知手段（１０５，１０６）と、を有し、取得手段（１０４）は、画像の一部の領域から輝度値を取得し、通知手段（１０５，１０６）は、当該一部の領域から取得された輝度値に関する情報を表示装置（１０７）に通知する。【選択図】図１
2020167456.tif 000002
【特許請求の範囲】
【請求項１】
画像から輝度値を取得する取得手段と、
前記画像の一部の領域を指定する指定手段と、
表示装置に表示される画像情報を生成する生成手段と、
前記画像情報を表示する表示装置に、前記輝度値に関する情報を通知する通知手段と、を有し、
前記取得手段は、前記一部の領域から輝度値を取得し、
前記通知手段は、前記一部の領域から取得された輝度値に関する情報を前記表示装置に通知することを特徴とする画像処理装置。
【請求項２】
前記通知手段は、前記生成手段が生成した前記画像情報に、前記一部の領域から取得された輝度値に関する情報を付加することを特徴とする請求項１に記載の画像処理装置。
【請求項３】
前記指定手段は、撮像素子にて撮像された画像から、前記指定された一部の領域をクロップすることを特徴とする請求項１または２に記載の画像処理装置。
【請求項４】
前記指定手段は、前記撮像素子にて撮像された画像から、前記表示装置のアスペクトに応じて前記一部の領域をクロップすることを特徴とする請求項３に記載の画像処理装置。
【請求項５】
前記指定手段は、前記撮像素子にて撮像された画像の中の特定の領域を、前記一部の領域としてクロップすることを特徴とする請求項３に記載の画像処理装置。
【請求項６】
前記生成手段は、前記撮像素子にて撮像された画像に対し、前記クロップされた領域を視認可能に表す画像を重畳した、前記画像情報を生成することを特徴とする請求項３から５のいずれか１項に記載の画像処理装置。
【請求項７】
前記生成手段は、前記クロップされた領域を視認可能に表す線の画像を重畳した前記画像情報を生成することを特徴とする請求項６に記載の画像処理装置。
【請求項８】
前記生成手段は、前記クロップされた領域から前記画像情報を生成することを特徴とする請求項３から５のいずれか１項に記載の画像処理装置。
【請求項９】
前記取得手段は、前記画像から最大輝度の輝度値をも取得し、
前記通知手段は、前記一部の領域の領域外に前記最大輝度の輝度値があることを視認可能に表す通知情報を、前記表示装置に通知することを特徴とする請求項１から８のいずれか１項に記載の画像処理装置。
【請求項１０】
画像処理装置が実行する画像処理方法であって、
画像から輝度値を取得する取得工程と、
前記画像の一部の領域を指定する指定工程と、
表示装置に表示される画像情報を生成する生成工程と、
前記画像情報を表示する表示装置に、前記輝度値に関する情報を通知する通知工程と、を有し、
前記取得工程では、前記一部の領域から輝度値を取得し、
前記通知工程では、前記一部の領域から取得された輝度値に関する情報を前記表示装置に通知することを特徴とする画像処理方法。
【請求項１１】
コンピュータを、請求項１から９のいずれか１項に記載の画像処理装置の各手段として機能させるためのプログラム。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、表示用の画像を処理する画像処理技術に関する。
【背景技術】
【０００２】
デジタルカメラやデジタルビデオカメラは、撮影時の画像をカメラ内蔵の表示パネルや電子ビューファインダー（ＥＶＦ）、カメラ外のディスプレイ（表示装置）に表示させることができる。これにより撮影者は撮影対象を確認しながら撮影することが可能となる。ここで、撮影時に撮影者が確認したい項目の一つとして、輝度のレベルが挙げられる。近年、ＨＤＲ（Ｈｉｇｈ  Ｄｙｎａｍｉｃ  Ｒａｎｇｅ）での撮影や表示が本格化しており、ＨＤＲ関連の規格化や製品化が進められている。例えばＨＤＲ１０＋などの規格では、ＭａｘＣＬＬ（Ｍａｘｉｍｕｍ  Ｃｏｎｔｅｎｔ  Ｌｉｇｈｔ  Ｌｅｖｅｌ）やＭａｘＦＡＬＬ（Ｍａｘｉｍｕｍ  Ｆｒａｍｅ  Ａｖｅｒａｇｅ  Ｌｉｇｈｔ  Ｌｅｖｅｌ）などの付加情報が定義されている。ＭａｘＣＬＬはフレームやシーン毎の最大輝度値を示す情報であり、ＭａｘＦＡＬＬはフレーム毎の平均輝度値を示す情報である。これらＭａｘＣＬＬやＭａｘＦＡＬＬの情報は、ＨＤＭＩ（Ｈｉｇｈ−Ｄｅｆｉｎｉｔｉｏｎ  Ｍｕｌｔｉｍｅｄｉａ  Ｉｎｔｅｒｆａｃｅ：ＨＤＭＩは登録商標）規格などで機器間伝送することが可能である。これによりカメラからディスプレイには映像の輝度情報が動的に伝えられるようになり、ディスプレイの表示輝度の調整が容易になった。一方で、画像がフレーム内で部分的に黒色となるレターボックスやピラーボックスと呼ばれる画像も存在する。これらの画像では、ＭａｘＦＡＬＬ情報が撮影者の意図に反する場合がある。
【０００３】
なお特許文献１には、表示映像を撮影者の意図に合わせるために、表示装置として映像の特徴量を測定し、その特徴量に応じてバックライト光源の発光輝度を制御することによって最適な表示品位の映像表示を実現する表示装置が開示されている。
【先行技術文献】
【特許文献】
【０００４】
【特許文献１】特開２００７−１４０４８３号公報
【発明の概要】
【発明が解決しようとする課題】
【０００５】
ところで、撮影待機中には撮像センサから読み出された画像全体を表示しており、例えば撮影を実行した際には一部の画像領域をクロップして記録可能なカメラも存在している。このカメラの場合、撮影待機状態において撮影されるクロップ領域が解るように、撮像センサから読み出された画像全体の上に、クロップ領域を示す枠を表示するような工夫がなされている。
【０００６】
前述したように撮影待機中には画像全体が表示され、撮影を実行した際にクロップが行われて記録された画像を、表示装置に表示する場合、撮影者の意図に合った表示が行われなくなることがある。例えば、ＭａｘＣＬＬ情報やＭａｘＦＡＬＬ情報を使用した表示映像調整に対応していない従来の表示装置では、それらの情報に基づく表示映像調整ができないため、撮影者の意図に合った表示を行えないことが多い。また、ＭａｘＣＬＬ情報やＭａｘＦＡＬＬ情報を使用した表示映像調整に対応した表示装置の場合でも撮影者の意図に合った表示を行えないことがある。例えばＭａｘＦＡＬＬ情報を使用して表示輝度を調整すると、静止画撮影された際に実際に記録されたクロップ領域外のＭａｘＦＡＬＬ情報を使用してしまい、撮影時に記録される輝度とは異なる表示輝度の画像がディスプレイに表示されてしまうことがある。
【０００７】
そこで、本発明は、撮影者の意図に合った表示輝度で画像を表示装置に表示させることを可能にすることを目的とする。
【課題を解決するための手段】
【０００８】
本発明の画像処理装置は、画像から輝度値を取得する取得手段と、前記画像の一部の領域を指定する指定手段と、表示装置に表示される画像情報を生成する生成手段と、前記画像情報を表示する表示装置に、前記輝度値に関する情報を通知する通知手段と、を有し、前記取得手段は、前記一部の領域から輝度値を取得し、前記通知手段は、前記一部の領域から取得された輝度値に関する情報を前記表示装置に通知することを特徴とする。
【発明の効果】
【０００９】
本発明によれば、撮影者の意図に合った表示輝度で画像を表示装置に表示させることが可能となる。
【図面の簡単な説明】
【００１０】
【図１】第１，第２の実施形態の撮像装置の構成例を示したブロック図である。
【図２】表示画像例を示した図である。
【図３】輝度値変動例を示した図である。
【図４】第１，第２の実施形態に係る処理の流れを示すフローチャートである。
【図５】第３の実施形態の撮像装置の構成例を示したブロック図である。
【図６】第３の実施形態に係る処理の流れを示したフローチャートである。
【発明を実施するための形態】
【００１１】
以下に、本発明の好ましい実施の形態を、添付の図面に基づいて詳細に説明する。
本実施形態の画像処理装置は、撮像装置により撮像された画像から、表示装置に表示するための表示用の画像を生成可能であり、特に表示装置で画像を表示する際の表示用の輝度評価値を生成する装置である。本実施形態の画像処理装置は、デジタルカメラ等の撮像装置やパーソナルコンピュータ等の情報処理装置に適用可能である。また本実施形態の画像処理装置が適用された撮像装置は、撮影待機中には撮像センサから読み出された画像全体が表示され、例えば撮影を実行した際には一部の画像領域をクロップして記録可能なカメラであるとする。このため、本実施形態の撮像装置は、撮影待機状態において撮影されるクロップ領域が解るように、撮像センサから読み出された画像の上に、クロップ領域を示す枠を表示する機能を有しているとする。
【００１２】
＜第１の実施形態＞
図１（Ａ）は第１の実施形態の撮像装置の機能構成を示したブロック図である。図１（Ａ）に示した撮像装置は、撮像センサ部１０１から読み出された画像全体のなかで、クロップ領域として指定された領域から輝度値の抽出及び算出を行い、外部表示装置１０７に対して画像データを伝送すると共に輝度値に関する情報を通知する機能を有する。以下の説明では、輝度値に関する情報として、ＭａｘＣＬＬやＭａｘＦＡＬＬの情報がフレーム毎に算出されるとする。ＭａｘＣＬＬ及びＭａｘＦＡＬＬは、前述したＨＤＲ１０＋などの規格において定義された付加情報であり、ＭａｘＣＬＬはフレームやシーン毎に最大輝度値を示す情報であり、ＭａｘＦＡＬＬはフレーム毎の平均輝度値を示す情報である。また前述したように、ＭａｘＣＬＬやＭａｘＦＡＬＬの情報は機器間伝送が可能であり、撮像装置は外部表示装置１０７に対し映像の輝度情報を動的に通知することができる。図１（Ａ）に示した撮像装置は、撮像センサから読み出された画像全体のなかでクロップ領域のみでＭａｘＦＡＬＬの情報を算出して外部表示装置１０７に送信可能となされている。
【００１３】
図１（Ａ）の撮像装置において、撮像センサ部１０１は、ＣＣＤやＣＭＯＳなどの撮像素子であり、レンズ群１００で入射光量や合焦の調節が行われて結像された画像を光電変換し、さらにアナログ・デジタル変換した画像データを出力する。撮像素子の各画素には、Ｒ（赤），Ｇ（緑），Ｂ（青）の何れかのカラーフィルタが所定の配列となるように配置されている。カラーフィルタにおける所定の配列は、例えば４画素毎に赤１画素、青１画素、緑２画素を１組として規則的に並べたモザイク状の構造となされており、このようなモザイク状配列は一般的にベイヤー配列と呼ばれている。撮像センサ部１０１から出力された画像データは、ベイヤー画像のデータとして現像処理部１０２に送られる。
【００１４】
現像処理部１０２は、ベイヤー画像に対し、まずＲＧＢのオフセット調整、ゲイン調整、ガンマ補正処理を行う。ガンマ補正処理は、撮像センサ部１０１やレンズ群１００などの特性を考慮して、撮像装置のユーザが所望する記録画像を生成するための特性の処理となされている。ガンマ補正値を変えることによって、ＴＶモニタ等で表示するための記録画像の生成や、映画フィルムの質感や階調を再現した記録画像の生成が可能となる。次に現像処理部１０２は、ＲＧＢ画像データを輝度（Ｙ）と色差（Ｃｂ，Ｃｒ）のデータに変換して出力する。また現像処理部１０２は、レンズ群１００の歪曲収差の補正処理や、撮像装置の防振処理やノイズリダクション処理に係る処理なども行う。この現像処理部１０２による処理後のデータは表示画像生成部１０３に送られる。
【００１５】
表示画像生成部１０３は、現像処理部１０２で輝度（Ｙ）と色差（Ｃｂ，Ｃｒ）に変換された画像データに対し、表示用の解像度へ変換する処理、及び、輝度と色差のデータ量（ビット幅）を調整する処理等を行う。また、表示画像生成部１０３は、様々な表示用の情報を重畳して表示画像を生成する。重畳される表示用の情報としては、図や文字、線などで表される撮影アシスト情報を挙げることができる。
【００１６】
ここで例えば、撮像装置が撮像可能な静止画のアスペクトと外部表示装置１０７に表示される映像のアスペクトとが異なるような場合、表示画像生成部１０３は、必要に応じてクロップ処理を行うことができる。例えば、撮像装置が撮像可能な静止画のアスペクトよりも、外部表示装置１０７に表示される映像のアスペクトが狭いような場合、表示画像生成部１０３は、撮像センサ部１０１で撮像された画像に対し、外部表示装置１０７のアスペクトに応じたクロップ処理を行う。また、表示画像生成部１０３は、撮像センサ部１０１で撮像された画像のアスペクトと外部表示装置１０７のアスペクトが異なる場合、それらアスペクトの異なりを視認可能にする画像（線等の画像）を、静止画に重畳した表示画像を生成する。
【００１７】
図２（Ａ）は、撮像装置の撮像センサ部１０１で撮像可能なアスペクトと、外部表示装置１０７に表示可能な映像表示領域のアスペクトとが異なる場合の画像例を示した図である。図２（Ａ）は、撮像センサ部１０１で撮像された画像全体領域２００に対し、外部表示装置１０７に表示可能な映像表示領域２０１が狭い場合の例を示している。この例の場合、表示画像生成部１０３は、画像全体領域２００に、外部表示装置１０７に表示可能な映像表示領域２０１を視認可能にする画像、例えば映像表示領域２０１のアスペクトに相当する範囲を表す例えば点線の画像を生成する。さらに、表示画像生成部１０３は、画像全体領域２００の画像にその点線画像を重畳した表示画像を生成する。そして、図２（Ａ）に示したような画像全体領域２００に映像表示領域２０１を表す点線画像が重畳された表示画像情報は、ＩＦ処理部１０６と輝度値算出部１０４に送られる。
【００１８】
輝度値算出部１０４は、表示画像生成部１０３で生成された表示画像の最大輝度値を示すＭａｘＣＬＬと、平均輝度値を示すＭａｘＦＡＬＬとを、フレーム毎に算出する。ここで、輝度値算出部１０４は、ＭａｘＦＡＬＬを算出する際、例えば図２（Ａ）の映像表示領域２０１の輝度値と、画像全体領域２００から映像表示領域２０１を除いた領域の輝度値とを取得して、ＭａｘＦＡＬＬを算出する。なお、本実施形態で用いる輝度値は、最大輝度値と平均輝度値に限定するものではなく、指定された領域内の輝度に関する情報を算出可能な輝度値であればよい。
【００１９】
図３（Ａ）は、図２（Ａ）の例において算出されるＭａｘＦＡＬＬにおける輝度と時間の関係を表した図である。曲線３０１は、画像全体領域２００から映像表示領域２０１を除いた領域の輝度値から算出されたＭａｘＦＡＬＬの輝度と時間の関係を表している。曲線３０２は、映像表示領域２０１から算出されたＭａｘＦＡＬＬの輝度と時間の関係を表している。図３（Ａ）のように、ＭａｘＦＡＬＬは、画像全体領域２００から映像表示領域２０１を除いた領域の輝度値から算出されたＭａｘＦＡＬＬを表す曲線３０１と、映像表示領域２０１から算出されたＭａｘＦＡＬＬを表す曲線３０２とで、輝度値に差が生じている。なお、図３（Ｂ）は、ＭａｘＣＬＬとＭａｘＦＡＬＬの輝度値の関係を示した図であり、一例として、曲線３０３がＭａｘＣＬＬを示し、曲線３０４がＭａｘＦＡＬＬを示している。
そして、輝度値算出部１０４は、それらＭａｘＣＬＬとＭａｘＦＡＬＬの情報を付加情報生成部１０５へ送る。
【００２０】
付加情報生成部１０５は、輝度値算出部１０４で生成されたＭａｘＣＬＬとＭａｘＦＡＬＬを加工して、ＨＤＭＩなどの映像伝送規格として伝送データ内に埋め込める付加情報を生成する。また付加情報生成部１０５は、図２（Ａ）に示した画像全体領域２００から算出したＭａｘＦＡＬＬの値なのか、静止画撮影時にクロップされる領域から算出したＭａｘＦＡＬＬの値なのかを示す算出領域情報も付加情報として生成する。そして、付加情報生成部１０５は、それら付加情報をＩＦ処理部１０６に送る。
【００２１】
さらに付加情報生成部１０５は、輝度値算出部１０４で生成されたＭａｘＣＬＬから、映像表示領域２０１の領域外に最大輝度値があるか否かを判断し、当該領域外に最大輝度値がある場合にはその旨を視認可能に通知する通知情報を付加情報に加えてもよい。
【００２２】
ＩＦ処理部１０６は、表示画像生成部１０３で生成した表示画像情報と、付加情報生成部１０５で生成したＭａｘＣＬＬ及びＭａｘＦＡＬＬ情報と、算出領域情報とを、ＨＤＭＩなどの映像伝送規格に則った映像信号形式に変換して伝送データを生成する。そして、ＩＦ処理部１０６は、その伝送データを外部表示装置１０７に送信する。
【００２３】
外部表示装置１０７は、受信した伝送データから表示画像情報を抽出し、その表示画像情報に基づく画像を表示する。外部表示装置１０７は、撮像装置で撮像される静止画のアスペクトよりも狭いアスペクトの表示装置であるとする。このため外部表示装置１０７には、例えば図２（Ａ）に示したような映像表示領域２０１に相当する画像が表示される。またこの時の外部表示装置１０７は、受信データからＭａｘＦＡＬＬ情報と算出領域情報とを抽出し、その抽出した情報を基に、例えばバックライトや電流、電圧等を調整して最適な表示輝度に制御する。また、前述した付加情報の中に、映像表示領域２０１の領域外に最大輝度値がある旨を示す通知情報が含まれている場合、外部表示装置１０７の画面上に当該通知情報が表示される。
【００２４】
次に図４のフローチャートを参照しながら、第１の実施形態の撮像装置における処理の流れを説明する。
撮像装置で撮像が開始されると、まずステップＳ１０１において、現像処理部１０２は、撮像センサ部１０１から送られてきた画像データの現像処理を行う。
次にステップＳ１０２において、表示画像生成部１０３は、現像処理された画像データから前述した表示画像情報を生成する。すなわち、図２（Ａ）で説明したように、表示装置のアスペクトを考慮して静止画撮影時にクロップ処理が行われる場合、当該クロップされる領域を表す線等を重畳した表示画像情報を生成する。また、前述した撮影をアシストする文字や図が重畳される場合も、このステップＳ１０２において行われる。
【００２５】
次にステップＳ１０３に進むと、輝度値算出部１０４は、表示画像生成部１０３においてクロップ処理が行われるか否かを判定する。そして、輝度値算出部１０４は、クロップ処理が行われると判定した場合にはステップＳ１０４に処理を進め、一方、クロップ処理が行われないと判定した場合にはステップＳ１０６に処理を進める。
【００２６】
ステップＳ１０４に進むと、輝度値算出部１０４は、クロップ領域内から輝度値を抽出する。例えば図２（Ａ）のように、画像全体領域２００から映像表示領域２０１がクロップされる場合、輝度値算出部１０４は、映像表示領域２０１に相当するクロップ領域から輝度値を抽出する。
【００２７】
次にステップＳ１０５に進むと、付加情報生成部１０５は、ステップＳ１０４でクロップ領域のみから抽出された輝度値を用いて、ＭａｘＣＬＬとＭａｘＦＡＬＬの情報を算出する。ＭａｘＣＬＬは前述したように１フレーム毎の最高輝度値を表し、ＭａｘＦＡＬＬは１フレーム内の全画素の輝度値の平均値を表す。
【００２８】
またステップＳ１０６に進んだ場合、輝度値算出部１０４は、クロップ処理が行われない表示画像から輝度値を算出する。例えば図２（Ａ）の場合、輝度値算出部１０４は、画像全体領域２００から輝度値を抽出する。
【００２９】
次にステップＳ１０７に進むと、付加情報生成部１０５は、画像全体領域の表示画像から抽出された輝度値を用いて、ＭａｘＣＬＬとＭａｘＦＡＬＬの情報を算出する。ここでもステップＳ１０５と同様に、ＭａｘＣＬＬは１フレーム毎の最高輝度値であり、ＭａｘＦＡＬＬは１フレーム内の全画素の輝度値の平均値である。
【００３０】
次にステップＳ１０８において、付加情報生成部１０５は、ステップＳ１０５又はステップＳ１０７で算出したＭａｘＣＬＬとＭａｘＦＡＬＬの情報を用いて、前述のように付加情報を生成する。
その後、ＩＦ処理部１０６は、表示画像データ及び付加情報を、ＨＤＭＩなどの映像伝送規格に則った信号形式へ変換して伝送データを生成し、その伝送データを外部表示装置１０７に送信する。
【００３１】
以上説明したように、第１の実施形態によれば、撮影者の意図に合ったＭａｘＦＡＬＬ情報が生成されて外部表示装置１０７に通知されることで、外部表示装置１０７において撮影者の意図に合わせた表示輝度での表示制御が可能となる。また本実施形態によれば、外部表示装置は映像の特徴量を測定する機能が不要である。
【００３２】
＜第２の実施形態＞
次に第２の実施形態について説明する。第２の実施形態は、撮像装置が備えている内部表示装置に映像表示が行われる場合の例を挙げている。なお内部表示装置はＨＤＲ表示が可能な表示装置であるとする。
図１（Ｂ）は、第２の実施形態の画像処理装置が適用された撮像装置の機能構成例を示したブロック図である。図１（Ｂ）において、前述した第１の実施形態の図１（Ａ）と同様の構成には同じ参照符号を付しており、それらの説明は適宜省略する。第２の実施形態の撮像装置において第１の実施形態と異なる部分は、図１（Ａ）のＩＦ処理部１０６に変えて表示処理部１０８が設けられ、表示処理部１０８が内部表示装置１０９に接続されていることである。以下、表示処理部１０８と内部表示装置１０９について説明する。
【００３３】
表示処理部１０８は、表示画像生成部１０３で生成された表示画像を内部表示装置１０９で最適に表示するための制御情報を、付加情報生成部１０５が生成したＭａｘＣＬＬやＭａｘＦＡＬＬ情報を用いて生成する。そして、表示処理部１０８は、その制御情報を、表示画像生成部１０３で生成された表示画像と共に伝送データとして、内部表示装置１０９に送信する。
【００３４】
内部表示装置１０９は撮像装置に内蔵された表示パネルや電子ビューファインダー（ＥＶＦ）であり、撮像装置内部でＭＩＰＩ（Ｍｏｂｉｌｅ  Ｉｎｄｕｓｔｒｙ  Ｐｒｏｃｅｓｓｏｒ  Ｉｎｔｅｒｆａｃｅ）などの映像伝送規格で接続されている。内部表示装置１０９は、表示処理部１０８がＭａｘＦＡＬＬの値などをＭＩＰＩで制御可能な情報形式に変換した制御情報によって表示輝度が制御される。
【００３５】
次に第２の実施形態の撮像装置における処理の流れを図４のフローチャートを参照しながら説明する。
ステップＳ１０１からステップＳ１０７までは前述の第１の実施形態と同様の処理であるためその説明は省略する。
【００３６】
第２の実施形態の場合、ステップＳ１０８において、付加情報生成部１０５は、第１の実施形態と同様に、ＭａｘＣＬＬとＭａｘＦＡＬＬの情報を、ＨＤＭＩなどの映像伝送規格として伝送データ内に埋め込める情報に変換する。また、付加情報生成部１０５は、前述同様の算出領域情報も付加情報として生成する。そして、付加情報生成部１０５は、それら表示処理部１０８に送る。
【００３７】
またステップＳ１０８において、表示処理部１０８は、ＨＤＭＩなどの一般的な映像伝送規格で使用できる情報を、内部表示装置１０９用の情報に変換した伝送データを生成し、その伝送データを内部表示装置１０９に送信する。これにより、内部表示装置１０９では、映像表示領域２０１に適した輝度となるように表示輝度が制御される。また、付加情報の中に、映像表示領域２０１の領域外に最大輝度値がある旨を示す通知情報が含まれている場合、内部表示装置１０９は、当該通知情報を表示する。
【００３８】
第２の実施形態においても、撮影者の意図に合ったＭａｘＦＡＬＬ情報が生成されて内部表示装置１０９に通知されることで、内部表示装置１０９において撮影者の意図に合わせた表示輝度での表示制御が可能となる。また第２の実施形態においても、内部表示装置１０９は映像の特徴量を測定する機能が不要である。
【００３９】
＜第３の実施形態＞
次に第３の実施形態について説明する。第３の実施形態は、撮像装置から外部表示装置１０７と内部表示装置１０９に伝送データが送られる例である。第３の実施形態では、図２（Ｂ）に示すように、被写体の特定の領域の一例として、顔枠領域２０２をクロップ処理して表示する場合を例に挙げて説明する。
【００４０】
図５（Ａ）は、第３の実施形態の画像処理装置が適用された撮像装置の機能構成例を示したブロック図である。図５（Ａ）において、前述した図１（Ａ）又は図１（Ｂ）と同様の構成には同じ参照符号を付しており、それらの説明は適宜省略する。第３の実施形態の撮像装置において前述した実施形態と異なる部分は、第１の実施形態で説明したＩＦ処理部１０６及び外部表示装置１０７と、第２の実施形態で説明した表示処理部１０８及び内部表示装置１０９とを備えていることである。また図６は、第３の実施形態の撮像装置における処理の流れを示したフローチャートである。
【００４１】
以下、図５（Ａ）、図６及び図２（Ｂ）を参照しながら、第３の実施形態の撮像装置の構成及び処理について説明する。図６のステップＳ２０１とステップＳ２０２の処理は、図４の対応したステップＳ１０１とステップＳ１０２と同様である。ただし第３の実施形態では、図２（Ｂ）のように、被写体の顔枠領域２０２を表示するため、表示画像生成部１０３は、撮像装置における画像全体領域２００に対し、クロップされる顔枠領域２０２に相当する線（例えば実線）を重畳した表示画像を生成する。なお、表示画像には、前述の実施形態と同様に、撮影をアシストする文字や図等が重畳されてもよい。そして、図２（Ｂ）に示したような画像全体領域２００に顔枠領域２０２に相当する実線を重畳した表示画像情報は、表示処理部１０８と輝度値算出部１０４に送られる。
【００４２】
ステップＳ２０２の後、ステップＳ２０３に進むと、輝度値算出部１０４は、表示画像生成部１０３において図２（Ｂ）の顔枠領域２０２のようなクロップ処理の領域指定があるか否かを判定する。そして、輝度値算出部１０４は、領域指定があると判定した場合にはステップＳ２０４に処理を進め、一方、領域指定がない判定した場合にはステップＳ２０６に処理を進める。
【００４３】
ステップＳ２０４に進むと、輝度値算出部１０４は、領域指定されたクロップ領域内から輝度値を抽出する。
そして次のステップＳ２０５において、輝度値算出部１０４は、抽出したクロップ領域のみの輝度値から、ＭａｘＣＬＬとＭａｘＦＡＬＬの値を算出し、それら算出した値をフレーム毎に記憶する。
【００４４】
またステップＳ２０６に進んだ場合、輝度値算出部１０４は、図４のステップＳ１０６と同様に画像全体領域から輝度値を抽出する。また次のステップＳ２０７においても図４のステップＳ１０７と同様に、輝度値算出部１０４は、画像全体領域から抽出した輝度値からＭａｘＣＬＬとＭａｘＦＡＬＬの値を算出して１フレーム毎に記憶する。
【００４５】
次にステップＳ２０８に進むと、付加情報生成部１０５は、ステップＳ２０５又はステップＳ２０７で算出したＭａｘＣＬＬとＭａｘＦＡＬＬの情報を用いて、前述のように付加情報を生成する。また、付加情報生成部１０５は、図２（Ｂ）に示した顔枠領域２０２から算出したＭａｘＦＡＬＬの値であることを示す算出領域情報も付加情報として生成する。これらの付加情報は、表示処理部１０８に送られ、さらに表示処理部１０８を介してＩＦ処理部１０６にも送られる。
【００４６】
表示処理部１０８は、ＨＤＭＩなどの一般的な映像伝送規格で使用できる情報を、表示処理部１０８で内部表示装置１０９用の情報に変換して内部表示装置１０９に送信する。これにより、内部表示装置１０９では、表示輝度が制御された映像表示が行われる。
またＩＦ処理部１０６は、表示画像データ及び付加情報に対し、ＨＤＭＩなどの映像伝送規格に則った信号形式への変換を行って外部表示装置１０７に送信する。これにより外部表示装置１０７では、受信した伝送データからＭａｘＦＡＬＬ情報と算出領域情報とを抽出し、その抽出した情報を基に、バックライトや電流、電圧等を調整して最適な表示輝度に制御した映像表示が行われる。
【００４７】
＜第３の実施形態の他の構成例＞
第３の実施形態の撮像装置は、図５（Ａ）の構成の他に、図５（Ｂ）の構成となされてもよい。図５（Ｂ）の構成は、図５（Ａ）の構成から、輝度値算出部１０４と付加情報生成部１０５を、データ伝送先の表示装置ごとに分離した構成を示した図である。このため、図５（Ｂ）の構成では、輝度値算出部１０４と付加情報生成部１０５は、それぞれ外部表示装置１０７用と内部表示装置１０９用とでそれぞれ二つ設けられている。図５（Ｂ）において、図５（Ａ）と同様の構成にはそれぞれ同じ参照符号を付しており、それらの説明は省略する。図５（Ｂ）の構成によれば、データ伝送先の外部表示装置１０７と内部表示装置１０９とに対応して分離した構成となされているため、外部表示装置１０７と内部表示装置１０９とでそれぞれ映像を表示できる。
【００４８】
本発明は、上述の実施形態の１以上の機能を実現するプログラムを、ネットワーク又は記憶媒体を介してシステム又は装置に供給し、そのシステム又は装置のコンピュータにおける１つ以上のプロセッサがプログラムを読出し実行する処理でも実現可能である。また、１以上の機能を実現する回路（例えば、ＡＳＩＣ）によっても実現可能である。
上述の実施形態は、何れも本発明を実施するにあたっての具体化の例を示したものに過ぎず、これらによって本発明の技術的範囲が限定的に解釈されてはならないものである。すなわち、本発明は、その技術思想、又はその主要な特徴から逸脱することなく、様々な形で実施することができる。
【符号の説明】
【００４９】
１０１：撮像センサ部、１０２：現像処理部、１０３：表示画像生成部、１０４：輝度値算出部、１０５：付加情報生成部、１０６：ＩＦ処理部、１０７：外部表示装置、１０８：表示処理部、１０９：内部表示装置
【図１】
2020167456.tif 000003
【図２】
2020167456.tif 000004
【図３】
2020167456.tif 000005
【図４】
2020167456.tif 000006
【図５】
2020167456.tif 000007
【図６】
2020167456.tif 000008