(57)【要約】【課題】異なる露出条件で撮像された複数の画像データを持つ動画データの早送りや巻き戻しの特殊再生において、スムーズな再生を可能にする仕組みを提供する。【解決手段】異なる露出条件で撮像された複数の画像データを持つ動画データを再生する画像処理装置１００において、前記動画データの前記複数の画像データを取得する取得手段１０７と、取得手段１０７で取得した前記複数の画像データを合成して合成画像データを生成する合成画像生成手段１０５，１０７と、合成画像生成手段１０５，１０７で生成した前記合成画像データを動画として再生して表示部１０２に表示する再生手段１０７と、再生手段１０７によって表示部１０２に表示されている動画を操作部１０１でのユーザ操作により指示された倍速で表示する倍速手段１０７と、ユーザ操作により指示された倍速情報が１より大きい場合に、合成画像生成手段１０５，１０７で合成する画像データの数を減らすように制御する制御手段１０７と、を備える。【選択図】図２
2015139142.tif 000002
【特許請求の範囲】
【請求項１】
異なる露出条件で撮像された複数の画像データを持つ動画データを再生する画像処理装置において、
前記動画データの前記複数の画像データを取得する取得手段と、
前記取得手段で取得した前記複数の画像データを合成して合成画像データを生成する合成画像生成手段と、
前記合成画像生成手段で生成した前記合成画像データを動画として再生して表示部に表示する再生手段と、
前記再生手段によって前記表示部に表示されている動画をユーザ操作により指示された倍速で表示する倍速手段と、
前記ユーザ操作により指示された倍速情報が第１の速度に対応する倍速情報である場合に、前記第１の速度より遅い第２の速度に対応する倍速情報である場合に比べて前記合成画像生成手段で合成する画像データの数を減らすように制御する制御手段と、を備えることを特徴とする画像処理装置。
【請求項２】
前記取得手段で取得した複数の画像データの位置合わせ処理を行う位置合わせ手段を備え、
前記合成画像生成手段は、前記位置合わせ手段で位置合わせされた前記複数の画像データを合成して前記合成画像データを生成することを特徴とする請求項１に記載の画像処理装置。
【請求項３】
前記ユーザ操作により指示された倍速情報が等倍速に対応する倍速情報より速度が速い倍速情報であるか否かを判断する判断手段を備え、
前記判断手段で前記倍速情報が前記等倍速に対応する倍速情報より速度が速い倍速情報であると判断された場合に、前記位置合わせ手段による前記位置合わせ処理を行わないことを特徴とする請求項２に記載の画像処理装置。
【請求項４】
前記ユーザ操作により指示された倍速情報が等倍速に対応する倍速情報より速度が速い倍速情報であるか否かを判断する判断手段と、
前記取得手段で取得した複数の画像データの加算平均画像データを生成する加算平均画像生成手段とを備え、
前記判断手段で前記倍速情報が前記等倍速に対応する倍速情報より速度が速い倍速情報であると判断された場合に、前記合成画像生成手段に代えて前記加算平均画像生成手段により前記加算平均画像データを生成し、
前記再生手段は、前記加算平均画像生成手段により生成した前記加算平均画像データを動画として再生して前記表示部に表示し、
前記制御手段は、前記加算平均画像生成手段により加算平均する画像データの数を減らすように制御することを特徴とする請求項１に記載の画像処理装置。
【請求項５】
異なる露出条件で撮像された複数の画像データを持つ動画データを再生する画像処理装置において、
前記動画データの前記複数の画像データを取得する取得手段と、
前記取得手段で取得した前記複数の画像データを合成して合成画像データを生成する合成画像生成手段と、
前記合成画像生成手段で生成した前記合成画像データを動画として再生して表示部に表示する再生手段と、
前記再生手段によって前記表示部に表示されている動画をユーザ操作により指示された倍速で表示する倍速手段と、
前記ユーザ操作により指示された倍速情報が等倍速に対応する倍速情報より速度が遅い倍速情報である場合に、前記動画データの前後のフレームの画像データを前記合成画像生成手段で合成する制御手段と、を備えること特徴とする画像処理装置。
【請求項６】
異なる露出条件で撮像された複数の画像データを持つ動画データを再生する画像処理装置を制御する方法であって、
前記動画データの前記複数の画像データを取得する取得ステップと、
前記取得ステップで取得した前記複数の画像データを合成して合成画像データを生成する合成画像生成ステップと、
前記合成画像生成ステップで生成した前記合成画像データを動画として再生して表示部に表示する再生ステップと、
前記再生ステップで表示部に表示されている動画をユーザ操作により指示された倍速で表示する倍速ステップと、
前記ユーザ操作により指示された倍速情報が第１の速度に対応する倍速情報である場合に、前記第１の速度より遅い第２の速度に対応する倍速情報である場合に比べて前記合成画像生成ステップで合成する画像データの数を減らすように制御する制御ステップと、を備えることを特徴とする画像処理装置の制御方法。
【請求項７】
異なる露出条件で撮像された複数の画像データを持つ動画データを再生する画像処理装置を制御する方法であって、
前記動画データの前記複数の画像データを取得する取得ステップと、
前記取得ステップで取得した前記複数の画像データを合成して合成画像データを生成する合成画像生成ステップと、
前記合成画像生成ステップで生成した前記合成画像データを動画として再生して表示部に表示する再生ステップと、
前記再生ステップで前記表示部に表示されている動画をユーザ操作により指示された倍速で表示する倍速ステップと、
前記ユーザ操作により指示された倍速情報が等倍速に対応する倍速情報より小さい場合に、前記動画データの前後のフレームの画像データを前記合成画像生成ステップで合成する制御ステップと、を備えること特徴とする画像処理装置の制御方法。
【請求項８】
異なる露出条件で撮像された複数の画像データを持つ動画データを再生する画像処理装置を制御するプログラムであって、
前記動画データの前記複数の画像データを取得する取得ステップと、
前記取得ステップで取得した前記複数の画像データを合成して合成画像データを生成する合成画像生成ステップと、
前記合成画像生成ステップで生成した前記合成画像データを動画として再生して表示部に表示する再生ステップと、
前記再生ステップで表示部に表示されている動画をユーザ操作により指示された倍速で表示する倍速ステップと、
前記ユーザ操作により指示された倍速情報が第１の速度に対応する倍速情報である場合に、前記第１の速度より遅い第２の速度に対応する倍速情報である場合に比べて前記合成画像生成ステップで合成する画像データの数を減らすように制御する制御ステップと、をコンピュータに実行させることを特徴とするプログラム。
【請求項９】
異なる露出条件で撮像された複数の画像データを持つ動画データを再生する画像処理装置を制御するプログラムであって、
前記動画データの前記複数の画像データを取得する取得ステップと、
前記取得ステップで取得した前記複数の画像データを合成して合成画像データを生成する合成画像生成ステップと、
前記合成画像生成ステップで生成した前記合成画像データを動画として再生して表示部に表示する再生ステップと、
前記再生ステップで前記表示部に表示されている動画をユーザ操作により指示された倍速で表示する倍速ステップと、
前記ユーザ操作により指示された倍速情報が等倍速に対応する倍速情報より小さい場合に、前記動画データの前後のフレームの画像データを前記合成画像生成ステップで合成する制御ステップと、をコンピュータに実行させることを特徴とするプログラム。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、例えばデジタルカメラ等の撮像装置を含む画像処理装置、その制御方法及びプログラムに関し、特に異なる露出条件で撮像された複数の画像データを持つ動画データの再生技術に関する。
【背景技術】
【０００２】
デジタルカメラ等の撮像装置に使用される、例えばＣＣＤセンサやＣＭＯＳセンサ等の撮像素子の階調範囲（ダイナミックレンジ）は、一般に銀塩フィルムの階調範囲よりも狭い。階調範囲が狭い場合、撮影環境によっては、撮影により得られる画像において、高輝度の被写体が白飛びしたり、低輝度の被写体が黒つぶれしたりすることがある。
【０００３】
近年では、このような撮像素子であっても、露出量を異ならせて被写体を撮像した複数の画像を合成することで、階調範囲を拡張した、所謂ＨＤＲ（High Dynamic Range）画像を生成する撮像装置が提案されている。
【０００４】
ＨＤＲ画像の生成には、例えば被写体について適正露出として設定された露出量で撮像した適正画像、適正露出よりオーバーとなる露出量で撮影したオーバー画像、及び適正露出よりアンダーとなる露出量で撮影したアンダー画像が用いられる（特許文献１）。
【０００５】
また、ＨＤＲ画像は、異なる露出条件で撮像された複数枚の画像データを画像表示時に合成して表示画像を生成する技術等にも用いられる。なお、このような画像表示技術においては、異なる露出条件で撮像された画像データを予めファイルなどに保存しておく必要がある。
【先行技術文献】
【特許文献】
【０００６】
【特許文献１】特公平７−９７８４１号公報
【発明の概要】
【発明が解決しようとする課題】
【０００７】
ところで、上述した画像補正技術は、静止画撮影に限らず、動画撮影においても適用可能である。即ち、異なる露出条件で撮像された複数の画像データを持つ動画データを画像表示時に合成し、合成された画像データを最終的な表示画像とすることで、例えば階調範囲を拡張した動画（ＨＤＲ動画）を再生することも可能である。
【０００８】
しかし、巻戻しや早送りなどの特殊再生を行う際に、画像データの合成を行うと、合成処理に時間を要し、画像表示が遅れる場合がある。このため、上述のような画像補正技術を用いて、特殊再生を行うと、ユーザが所望する再生位置までの移動に時間が掛かり、スムーズな再生操作ができない可能性がある。
【０００９】
そこで、本発明は、異なる露出条件で撮像された複数の画像データを持つ動画データの特殊再生において、スムーズな再生を可能にする仕組みを提供すること目的とする。
【課題を解決するための手段】
【００１０】
上記目的を達成するために、本発明は、異なる露出条件で撮像された複数の画像データを持つ動画データを再生する画像処理装置において、前記動画データの前記複数の画像データを取得する取得手段と、前記取得手段で取得した前記複数の画像データを合成して合成画像データを生成する合成画像生成手段と、前記合成画像生成手段で生成した前記合成画像データを動画として再生して表示部に表示する再生手段と、前記再生手段によって前記表示部に表示されている動画をユーザ操作により指示された倍速で表示する倍速手段と、前記ユーザ操作により指示された倍速情報が１より大きい場合に、前記合成画像生成手段で合成する画像データの数を減らすように制御する制御手段と、を備えることを特徴とする。
【００１１】
また、本発明は、異なる露出条件で撮像された複数の画像データを持つ動画データを再生する画像処理装置において、前記動画データの前記複数の画像データを取得する取得手段と、前記取得手段で取得した前記複数の画像データを合成して合成画像データを生成する合成画像生成手段と、前記合成画像生成手段で生成した前記合成画像データを動画として再生して表示部に表示する再生手段と、前記再生手段によって前記表示部に表示されている動画をユーザ操作により指示された倍速で表示する倍速手段と、前記ユーザ操作により指示された倍速情報が１より小さい場合に、前記動画データの前後のフレームの画像データを前記合成画像生成手段で合成する制御手段と、を備えること特徴とする。
【発明の効果】
【００１２】
本発明によれば、異なる露出条件で撮像された複数の画像データを持つ動画データの特殊再生において、ユーザが所望する再生位置までの移動に要する時間を短くしてスムーズな再生を可能にすることができる。
【図面の簡単な説明】
【００１３】
【図１】本発明の第１の実施形態である画像処理装置の外観構成例を示す図である。
【図２】図１に示す画像処理装置の制御系の概略構成例を示すブロック図である。
【図３】記録媒体からメモリに読み出された動画データのフォーマット例を示す図である。
【図４】（ａ）は、画像処理装置がＨＤＲ動画再生モードに設定されているときに、再生・一時停止ボタンの操作がなされ、ＨＤＲ動画の通常再生を開始している場合の処理を示す図である。（ｂ）は、（ａ）の通常再生の状態から特殊再生ボタンの操作がなされた場合の処理を示す図である。
【図５】画像処理装置のＨＤＲ動画再生処理を示すフローチャート図である。
【図６】図５のステップＳ５０５で実行される通常再生画像表示処理を示すフローチャート図である。
【図７】図５のステップＳ５０６で実行される特殊再生画像表示処理１を示すフローチャート図である。
【図８】図５のステップＳ５０７で実行される特殊再生画像表示処理２を示すフローチャート図である。
【図９】本発明の第２の実施形態である画像処理装置におけるＨＤＲ動画再生処理を示すフローチャート図である。
【図１０】図９のステップＳ８１１で実行される特殊再生画像表示処理３を示すフローチャート図である。
【図１１】本発明の第３の実施形態である画像処理装置において、図９のステップＳ８１１で特殊再生画像表示処理３に代えて実行される特殊再生画像表示処理４を示すフローチャート図である。
【図１２】本発明の第４の実施形態である画像処理装置において、（ａ）は２種類の画像データを持つ動画データを通常再生する場合の例を示す図、（ｂ）は２種類の画像データを持つ動画データをスロー再生する場合の例を示す図である。
【図１３】画像処理装置のＨＤＲ動画のスロー再生時における処理を示すフローチャート図である。
【発明を実施するための形態】
【００１４】
以下、図面を参照して、本発明の実施形態を説明する。
【００１５】
（第１の実施形態）
図１は、本発明の第１の実施形態である画像処理装置１００の外観構成例を示す図である。
【００１６】
図１において、画像表示部１０２は、ＬＣＤ等で構成され、操作メニューを表示したり、動画を再生してその映像を表示したりするために使用される。ジョイスティック３０２は、中央に押しボタンを有し、ユーザは、上下左右を含む任意の方向の入力と、押しボタンの押下による選択指示をすることができる。
【００１７】
再生・一時停止ボタン３０３は、動画を再生する場合に押下することによって、再生を開始したり一時停止したりすることができる。巻き戻しボタン３０４は、再生・一時停止ボタン３０３で再生している動画を巻戻すために用いる。また、巻き戻しボタン３０４を複数回押すことによって、巻き戻し倍速を変化させることができる。
【００１８】
早送りボタン３０５は、再生・一時停止ボタン３０３で再生している動画を早送りするために用いる。また、早送りボタン３０５を複数回押すことによって、早送り倍速を変化させることができる。停止ボタン３０６は、再生・一時停止ボタン３０３で再生している動画を停止するために用いる。
【００１９】
図２は、図１に示す画像処理装置１００の制御系の概略構成の一例を示すブロック図である。
【００２０】
図２において、不揮発性メモリ１０８は、フラッシュメモリ等で構成され、システム制御部１０７が実行する動作プログラムが格納されている。また、不揮発性メモリ１０８には、システム情報を記憶する領域やユーザ設定情報を記憶する領域が設けられ、システム制御部１０７により、さまざまな情報や設定が読み出される。
【００２１】
システム制御部１０７は、例えばＣＰＵ等で構成され、画像処理装置１００が備える各ブロックの動作を制御する。具体的には、システム制御部１０７は、不揮発性メモリ１０８に格納されている、動作プログラムを逐次読み出しながら、各ブロックの動作を制御する。
【００２２】
記録媒体１１０は、着脱可能なメモリカードやハードディスク等で構成され、複数枚のＨＤＲ動画ファイルが保存されている。記録媒体１１０は、システム制御部１０７からの指示により、ＨＤＲ動画ファイルを読み出し、後述する動画データの全てまたは一部をメモリ１０９に格納する。また、記録媒体１１０は、システム制御部１０７からの指示により、メモリ１０９に格納されている動画データをＨＤＲ動画ファイルとして保存することができる。
【００２３】
メモリ１０９は、記録媒体１１０から読み出した動画データを一時的に格納するための記憶装置であり、所定時間の動画データを格納するのに十分な記憶量を備えている。また、メモリ１０９は、システム制御部１０７、画像変換部１０３、画像処理部１０４の作業領域としても使用することが可能である。
【００２４】
画像変換部１０３は、画像データを伸長してメモリ１０９に出力するデコード処理機能と画像データを圧縮してメモリ１０９に出力するエンコード処理機能とを有している。具体的には、画像変換部１０３は、システム制御部１０７がメモリ１０９に格納されている動画データから取得した画像データのデコード処理またはエンコード処理を行う。
【００２５】
画像処理部１０４は、画像変換部１０３によってデコード処理された画像データのガンマ処理、色信号処理、露出補正処理などの各種画像処理を行う。また、画像処理部１０４は、ダイナミックレンジ拡大回路１０５及び加算平均回路１０６を有している。
【００２６】
ダイナミックレンジ拡大回路１０５は、予めメモリ１０９に保存された適正画像データ、オーバー画像データ及びアンダー画像データを用いてダイナミックレンジ拡大画像（ＨＤＲ画像合成）を生成する機能を備えている。ここで、適正画像とは、被写体について適正露出として設定された露出量で撮像した画像をいい、オーバー画像とは、適正露出よりオーバーの露出量で撮像した画像をいい、アンダー画像とは、適正露出よりアンダーの露出量で撮像した画像をいう。また、ダイナミックレンジ拡大回路１０５は、動体ブレ、手ブレ等により画像間で位置ずれが発生した場合の位置合わせ処理も行う。
【００２７】
加算平均回路１０６は、予めメモリ１０９に保存された２つ以上の画像データを加算し平均化する機能を備えている。画像処理部１０４によって画像処理が施された画像データは、メモリ１０９に出力される。
【００２８】
画像表示部１０２は、ＬＣＤ等で構成され、メモリ１０９に格納されている表示用の画像データが表示される。具体的には、画像表示部１０２は、画像変換部１０３、ダイナミックレンジ拡大回路１０５、加算平均回路１０６が出力した画像データを表示する。
【００２９】
操作部１０１は、図１で説明した再生・一時停止ボタン３０３、巻き戻しボタン３０４、早送りボタン３０５、停止ボタン３０６等の各種ボタン、ジョイスティック３０２、タッチパネル等を有する。操作部１０１でのユーザ操作がなされた場合、システム制御部１０７は、操作部１０１から出力された制御信号により、当該操作を検出する。
【００３０】
なお、本実施形態では、画像処理装置１００が備える各ブロックにおいて処理がハードウェアで実現される場合を例示したが、各ブロックの処理は、各ブロックと同様の処理を行うプログラムで実現されるようにしてもよい。
【００３１】
図３は、記録媒体１１０からメモリ１０９に読み出された動画データのフォーマット例を示す図である。なお、本実施形態では、前述した適正画像データとアンダー画像データの２種類の画像データを使用してＨＤＲ動画における１フレームのＨＤＲ画像データを生成するものとして説明する。なお、図４は、ＨＤＲ動画の動画データのフォーマットの一例であり、異なる露出条件で撮影された画像データが取得できればよく、これに限られるものではなく、被合成画像データの数などは特に限定されない。
【００３２】
図３に示すように、動画データは、メディア情報とヘッダ情報などの各種ボックスで構成されている。メディア情報は、適正画像データ群とアンダー画像データ群で構成されている。適正画像データ群には、適正露出量で撮影された複数のフレームの適正画像データが格納されている。また、アンダー露像データ群には、適正画像データのフレームに対応する露出量の低い条件で撮影されたアンダー画像データが格納されている。
【００３３】
ヘッダ情報には、コンテナ情報、適正画像トラック情報、及びアンダー画像トラック情報などのボックスで構成されている。コンテナ情報は、ＨＤＲ動画を再生するのに必要なフレームレートなどの情報が格納されている。
【００３４】
適正画像トラック情報には、メディア情報にある適正画像データの画像情報が格納されている。画像情報には、メディア情報にある適正画像データの位置情報（オフセット）や画像データのサイズなどの画像データに関する情報がフレームの数だけ格納されている。アンダー画像トラック情報には、メディア情報にあるアンダー画像データの画像情報がフレームの数だけ格納されている。
【００３５】
メディア情報及びヘッダ情報のボックスには、前述した各種情報の他にボックス自身の種別情報とボックス自身のサイズ情報が格納されている。このボックスの種別情報により、どの情報かを判断することができる。また、ボックスのサイズ情報により、次のボックスの位置を特定することができる。
【００３６】
図４（ａ）は、画像処理装置１００がＨＤＲ動画再生モードに設定されているときに、再生・一時停止ボタン３０３の操作がなされ、ＨＤＲ動画の通常再生を開始している場合の処理を示す図である。
【００３７】
図４（ａ）において、画像表示間隔とは、図２のヘッダ情報のボックスにあるコンテナ情報に格納されているフレームレートである。ここでは、フレームレートを３０ｆｐｓ（１／３０ｓｅｃ間隔）としたが、フレームレートは、これに限られるものではない。
【００３８】
画像データは、露出条件で撮影された３種類の画像データ（適正画像、アンダー画像、オーバー画像）を持つ動画データを示す。
【００３９】
ＨＤＲ画像合成処理は、３種類の画像データのＨＤＲ画像合成を行い、ＨＤＲ画像データを生成する処理時間を示している。具体的には、システム制御部１０７が画像データを記録媒体１１０から読み出し、画像変換部１０３を用いてデコードした３種類の画像データをダイナミックレンジ拡大回路１０５を用いてＨＤＲ画像合成を行う処理時間である。また、ＨＤＲ画像合成には、画像データ間で位置ずれを補間する位置合わせ処理と画像データを合成する合成処理がある。
【００４０】
画像データ表示時間は、メモリ１０９に書き込まれた表示用の画像データを画像表示部１０２を用いて表示する時間を示している。
【００４１】
図４（ａ）に示すように、ＨＤＲ画像合成を行う被合成画像データの数が多いと、ＨＤＲ画像合成処理に時間がかかる。即ち、巻戻しボタン３０４や早送りボタン３０５などの特殊再生ボタンの操作がなされた状態で、図４（ａ）に示すＨＤＲ画像合成処理を行うと、画像データ表示時間を短縮することができない。
【００４２】
一方、図４（ｂ）は、図４（ａ）の通常再生の状態から特殊再生ボタンの操作がなされた場合の処理を示す図である。
【００４３】
図４（ｂ）の例では、通常再生時のようにオーバー画像データを取得せず、２種類の画像データ（適正画像、アンダー画像）のＨＤＲ画像合成処理を実施している。このため、通常再生時よりも画像データ表示時間を短縮することができる。
【００４４】
このように、通常再生時に巻戻しボタン３０４や早送りボタン３０５などの特殊再生ボタンの操作がなされた場合に、ＨＤＲ画像合成を行う被合成画像データの数を減らすことで、スムーズな再生が可能となる。
【００４５】
次に、巻戻しボタン３０４や早送りボタン３０５などにより、倍速を２倍速、４倍速など再生速度を上げる方向に変化させる操作がなされた状況を考える。
【００４６】
図４（ａ）では３種類、図４（ｂ）では２種類の被合成画像データを用いてＨＤＲ画像合成を行っているが、被合成画像データの数はこれに限定されず、再生速度が上がる方向に変化した場合、再生速度に応じて被合成画像データの数を減らすことも可能である。
【００４７】
なお、図４（ｂ）では、特殊再生ボタンの操作がなされた場合に、適正画像データとアンダー画像データの合成画像データを生成する場合を例示したが、合成画像データを生成する組み合わせは、これに限られるものではない。
【００４８】
次に、図５を参照して、画像処理装置１００のＨＤＲ動画再生処理について説明する。図５での各処理は、不揮発性メモリ１０８に記憶された処理プログラムがメモリ１０８に展開されて、システム制御部１０７により実行される。
【００４９】
なお、図５でのＨＤＲ動画再生処理は、例えば画像処理装置１００がＨＤＲ動画再生モードに設定されている状態で、動画再生開始指示に対応する制御信号をシステム制御部１０７が受信した際に開始されるものとして説明する。また、図５では、異なる露出条件で撮影された４種類の画像データ（適正画像、アンダー画像、オーバー画像１、オーバー画像２）を用いて、合成画像データを生成するものとする。
【００５０】
図５において、ステップＳ５０１では、システム制御部１０７は、再生フレームを０にし、ステップＳ５０２に進む。再生フレームは、整数の値を持ち、画像表示部１０２に表示する画像データのフレームを示している。
【００５１】
ステップＳ５０２では、システム制御部１０７は、等倍速に対応する１以上の値を持つ倍速情報を取得し、ステップＳ５０３に進む。具体的には、システム制御部１０７は、巻戻しボタン３０４又は早送りボタン３０５から出力された制御信号を検出し、現在の倍速情報を取得する。
【００５２】
ステップＳ５０３では、システム制御部１０７は、倍速情報が１か否かを判断し、倍速情報が１の場合は、ステップＳ５０５に進んで通常再生処理を行い、倍速情報が１以外の場合は、特殊再生処理を行うためにステップＳ５０４に進む。
【００５３】
ステップＳ５０５では、システム制御部１０７は、ＨＤＲ動画のフレーム画像を生成する通常再生画像表示処理を実行し、ステップＳ５０８に進む。なお、ここでの通常再生画像表示処理については、図６を用いて後述する。  
【００５４】
ステップＳ５０４では、システム制御部１０７は、倍速情報が倍速Ｌ（Ｌ≧２）より大きいか否かを判定し、倍速情報が倍速Ｌより小さいか若しくは倍速Ｌと等しい場合は、ステップＳ５０６に進み、倍速情報が倍速Ｌより大きい場合は、ステップＳ５０７に進む。
【００５５】
ステップＳ５０６では、システム制御部１０７は、３種類の画像データを用いてＨＤＲ動画のフレーム画像を生成する特殊再生画像表示処理１を実行し、ステップＳ５０８に進む。なお、ここでの特殊再生画像表示処理１については、図７を用いて後述する。
【００５６】
ステップＳ５０７では、システム制御部１０７は、２種類の画像データを用いてＨＤＲ動画のフレーム画像を生成する特殊再生画像表示処理２を実行し、ステップＳ５０８に進む。なお、ここでの特殊再生画像表示処理２については、図８を用いて後述する。
【００５７】
ステップＳ５０８では、システム制御部１０７は、ステップＳ５０５、Ｓ５０６又はＳ５０７で再生画像表示処理を実行した後、動画データに再生フレームに対応する画像データが存在するか否かを判断する。そして、システム制御部１０７は、再生フレームに対応する画像データが存在すると判断した場合は、ステップＳＳ５０９に移し、再生フレームに対応する画像データが存在しないと判断した場合は、処理を終了する。
【００５８】
ステップＳ５０９では、システム制御部１０７は、停止ボタン３０６から出力された制御信号に基づき、停止ボタン３０６が操作されたか否かを判断する。そして、システム制御部１０７は、停止ボタン３０６が操作されていないと判断した場合は、ステップＳ５０２に戻り、操作されていると判断した場合は、処理を終了する。
【００５９】
次に、図６を参照して、図５のステップＳ５０５で実行される通常再生画像表示処理について説明する。
【００６０】
図６において、ステップＳ６０１では、システム制御部１０７は、動画データから再生フレームに対応する適正画像データを取得し、ステップＳ６０２に進む。
【００６１】
ステップＳ６０２では、システム制御部１０７は、画像変換部１０３の動作を制御し、ステップＳ６０１で取得した適正画像データのデコード処理を要求し、ステップＳ６０３に進む。ここでは、画像変換部１０３は、デコード処理された適正画像データをメモリ１０９に出力する。
【００６２】
ステップＳ６０３では、システム制御部１０７は、動画データから再生フレームに対応するアンダー画像データを取得し、ステップＳ６０４に進む。
【００６３】
ステップＳ６０４では、システム制御部１０７は、画像変換部１０３の動作を制御し、ステップＳ６０３で取得したアンダー画像データのデコード処理を要求し、ステップＳ６０５に進む。ここでは、画像変換部１０３は、デコード処理されたアンダー画像データをメモリ１０９に出力する。
【００６４】
ステップＳ６０５では、システム制御部１０７は、動画データから再生フレームに対応するオーバー画像１の画像データを取得し、ステップＳ６０６に進む。
【００６５】
ステップＳ６０６で、システム制御部１０７は、画像変換部１０３の動作を制御し、ステップＳ６０５で取得したオーバー画像１の画像データのデコード処理を要求し、ステップＳ６０７に進む。ここでは、画像変換部１０３は、デコード処理されたオーバー画像１の画像データをメモリ１０９に出力する。
【００６６】
ステップＳ６０７では、システム制御部１０７は、動画データから再生フレームに対応する、オーバー画像１と露出量の異なるオーバー画像２の画像データを取得し、ステップＳ６０８に進む。
【００６７】
ステップＳ６０８では、システム制御部１０７は、画像変換部１０３の動作を制御し、ステップＳ６０７で取得したオーバー画像２の画像データのデコード処理を要求し、ステップＳ６０９に進む。ここでは、画像変換部１０３は、デコード処理されたオーバー画像２の画像データをメモリ１０９に出力する。
【００６８】
ステップＳ６０９では、システム制御部１０７は、メモリ１０９に出力された４種類の画像データ（適正画像、アンダー画像、オーバー画像１、オーバー画像２）の位置合わせ処理を実行し、ステップＳ６１０に進む。具体的には、システム制御部１０７は、ダイナミックレンジ拡大回路１０５の動作を制御し、各画像データ間の位置ずれの補間を要求する。
【００６９】
ステップＳ６１０で、システム制御部１０７は、ステップＳ６０９で位置ずれが補間された各画像データの合成画像生成処理を実行し、ステップＳ６１１に進む。具体的には、システム制御部１０７は、ダイナミックレンジ拡大回路１０５の動作を制御し、ＨＤＲ画像データの生成を要求する。
【００７０】
ステップＳ６１１では、システム制御部１０７は、画像表示部１０２の動作を制御し、メモリ１０９に出力されたＨＤＲ画像データの表示を要求し、ステップＳ６１２に進む。
【００７１】
ステップＳ６１２では、システム制御部１０７は、次に表示する画像データのフレームを指し示すために再生フレームに１を加算し、処理を終了する。
【００７２】
以上の処理を行うことで、互いに位置ずれが補間された４種類の画像データ（適正画像、アンダー画像、オーバー画像１、オーバー画像２）を合成したＨＤＲ画像データの画像表示部１０２への通常再生表示が可能となる。
【００７３】
次に、図７を参照して、図５のステップＳ５０６で実行される特殊再生画像表示処理１について説明する。なお、図７のステップＳ７０１〜Ｓ７０６及びステップＳ７０９の処理は、図６のステップＳ６０１〜Ｓ６０６及びステップＳ６１１と同様であるため、その説明を簡略化する。
【００７４】
図７において、ステップＳ７０１では、システム制御部１０７は、再生フレームに対応する適正画像データを取得し、ステップＳ７０２に進む。
【００７５】
ステップＳ７０２では、システム制御部１０７は、画像変換部１０３の動作を制御して、デコード処理を要求し、ステップＳ７０３に進む。
【００７６】
ステップＳ７０３では、システム制御部１０７は、再生フレームに対応するアンダー画像データを取得し、ステップＳ７０４に進む。
【００７７】
ステップＳ７０４では、システム制御部１０７は、画像変換部１０３の動作を制御して、デコード処理を要求し、ステップＳ７０５に進む。
【００７８】
ステップＳ７０５では、システム制御部１０７は、再生フレームに対応するオーバー画像１の画像データを取得し、ステップＳ７０６に進む。
【００７９】
ステップＳ７０６では、システム制御部１０７は、画像変換部１０３の動作を制御して、デコード処理を要求し、ステップＳ７０７に進む。
【００８０】
ステップＳ７０７では、システム制御部１０７は、画像変換部１０３からメモリ１０９に出力された３種類の画像データ（適正画像、アンダー画像、オーバー画像１）の位置合わせ処理を実行し、ステップＳ７０８に進む。
【００８１】
ステップＳ７０８で、システム制御部１０７は、ステップＳ７０７で位置ずれが補間された各画像データの合成画像生成処理を実行して、ＨＤＲ画像データを生成し、ステップＳ７０９に進む。
【００８２】
ステップＳ７０９では、システム制御部１０７は、画像表示部１０２の動作を制御して、メモリ１０９に出力されたＨＤＲ画像データの表示を要求し、ステップＳ７１０に進む。
【００８３】
ステップＳ７１０では、システム制御部１０７は、早送りボタン３０５から出力された制御信号に基づき、ユーザによる特殊再生ボタンの操作が早送りボタン３０５の操作か否かを判断する。そして、システム制御部１０７は、早送りボタン３０５が操作された場合は、ステップＳ７１１に進み、操作されていない場合は、ステップＳ７１２に進む。
【００８４】
ステップＳ７１１では、システム制御部１０７は、再生フレームに対してスキップフレーム数を加算し、処理を終了する。ここで、スキップフレーム数は、スキップするフレーム数を示している。スキップフレーム数は、１以上の整数値であれば良く、特殊再生の倍速情報に応じて値を可変にしてもよい。再生フレームに対してスキップフレーム数を加算することで、前述した通常再生画像表示処理に比べて短い時間間隔で画像データを再生することができる。
【００８５】
ステップＳ７１２では、システム制御部１０７は、再生フレームに対してスキップフレーム数を減算し、処理を終了する。
【００８６】
このようにすることで、倍速情報に応じて３種類の画像データ（適正画像、アンダー画像、オーバー画像１）を合成したＨＤＲ画像データの画像表示部１０２への通常再生が可能となる。
【００８７】
次に、図８を参照して、図５のステップＳ５０７で実行される特殊再生画像表示処理２について説明する。なお、図８での処理において、前述した特殊再生画像表示処理１の処理と同様の処理を行うステップについては、同一のステップ符号を付してその説明を省略する。
【００８８】
図８において、システム制御部１０７は、ステップＳ７０１〜ステップＳ７０４の処理を実行した後、ステップＳ７２０に進む。
【００８９】
ステップＳ７２０で、システム制御部１０７は、画像変換部１０３からメモリ１０９に出力された２種類の画像データ（適正画像、アンダー画像）の位置合わせ処理を実行し、ステップＳ７２１に進む。
【００９０】
ステップＳ７２１では、システム制御部１０７は、ステップＳ７２０で位置ずれが補間された各画像データの合成画像生成処理を実行して、ＨＤＲ画像データを生成し、ステップＳ７０９に進む。
【００９１】
その後、システム制御部１０７は、図７と同様に、ステップＳ７０９〜ステップＳ７１２の処理を実行して、処理を終了する。
【００９２】
このようにすることで、倍速情報に応じて２種類の画像データ（適正画像、アンダー画像）を合成したＨＤＲ画像データの画像表示部１０２への通常再生が可能となる。
【００９３】
なお、本実施形態では、ＨＤＲ動画の再生に本発明を適用したが、静止画の再生に本発明を適用してもよい。また、例えば、適正画像データとアンダー画像データとを撮像してその差分情報をアンダー露出の画像データとして保持した画像データに本発明を用いてもよい。また、一つのフレーム内でライン毎に露光量を変えて撮像した画像データを適正画像データとアンダー画像データとして保持した画像データに本発明を適用してもよい。
【００９４】
以上説明したように、本実施形態では、再生時に異なる露出条件で撮像された画像データを合成して表示する際に、早送りや巻戻しなどの特殊再生がなされた場合にでもスムーズな再生を行うことができる。具体的には、画像処理装置１００は、通常再生時には、異なる露出条件で撮像された画像データをＨＤＲ画像合成して表示し、特殊再生時の倍速情報に応じて被合成画像データの数を減らすことで、動画像再生処理にかかる処理時間を短縮することができる。
【００９５】
（第２の実施形態）
次に、図９及び図１０等を参照して、本発明の第２の実施形態である画像処理装置について説明する。
【００９６】
上記第１の実施形態では、早送りや巻戻しなどの特殊再生がなされた場合に、倍速情報に応じて被合成画像データの数を減らすことで、動画像再生処理にかかる処理時間を短縮していた。しかし、倍速が上がる方向に変化するほど、撮影時に生じた画像間の位置ずれを補間しなくても、位置ずれが生じているか否かが分かりにくくなる。
【００９７】
そこで、本実施形態では、システム制御部１０７は、倍速情報に応じてダイナミックレンジ拡大回路１０５を用いた画像間の位置合わせ処理を行わず、合成画像生成処理のみを行うことで、更に動画像再生処理にかかる処理時間を短縮する。また、ダイナミックレンジ拡大回路１０５にて画像間の位置合わせ処理を行わないため、画像処理装置１００の負荷を軽減することができ、無駄な電力消費などを抑えることが可能となる。
【００９８】
図９は、本発明の第２の実施形態である画像処理装置におけるＨＤＲ動画再生処理を示すフローチャート図である。図９での各処理は、不揮発性メモリ１０８に記憶された処理プログラムがメモリ１０８に展開されて、システム制御部１０７により実行される。なお、図９での処理において、上記第１の実施形態におけるＨＤＲ動画再生処理（図５）の処理と同様の処理を行うステップについては、同一のステップ符号を付してその説明を省略する。
【００９９】
図９において、ステップＳ５０４では、システム制御部１０７は、倍速情報が倍速Ｌ（Ｌ≧２）より大きいか否かを判定する。そして、システム制御部１０７は、倍速情報が倍速Ｌより小さいか若しくは倍速Ｌと等しい場合は、ステップＳ５０６に進んで、図７で既に説明した特殊再生画像表示処理１を実行し、倍速情報が倍速Ｌより大きい場合は、ステップＳ８１０に進む。
【０１００】
ステップＳ８１０で、システム制御部１０７は、倍速情報が倍速Ｍを超えるか否かを判定する。倍速Ｍは、倍速Ｌよりも大きい値であり、倍速が上がる方向に変化していることを示す。そして、システム制御部１０７は、倍速情報が倍速Ｍより小さいか若しくは倍速Ｍと等しい場合は、ステップＳ５０７に進んで、図８で既に説明した特殊再生画像表示処理２を実行し、倍速情報が倍速Ｍより大きい場合は、ステップＳ８１１に進む。
【０１０１】
ステップＳ８１１では、システム制御部１０７は、画像間の位置合わせ処理を行わない２種類の画像データを用いてＨＤＲ動画のフレーム画像を生成する特殊再生画像表示処理３を実行し、ステップＳ５０８に進む。なお、ここでの特殊再生画像表示処理３については、図１０を用いて後述する。
【０１０２】
図１０は、図９のステップＳ８１１で実行される特殊再生画像表示処理３について説明するためのフローチャート図である。なお、図１０での処理において、上記第１の実施形態における特殊再生画像表示処理２（図８）の処理と同様の処理を行うステップについては、同一のステップ符号を付してその説明を省略する。
【０１０３】
図１０において、システム制御部１０７は、ステップＳ７０１〜ステップＳ７０４の処理を実行した後、ステップＳ９０５に進む。
【０１０４】
ステップＳ９０５で、システム制御部１０７は、画像変換部１０３がデコード処理してメモリ１０９に出力された２種類の画像データ（適正画像、アンダー画像）のＨＤＲ画像データの生成を行う。具体的には、システム制御部１０７は、ダイナミックレンジ拡大回路１０５の動作を制御し、各画像データ間の位置ずれが補間されていない画像データのＨＤＲ画像データの生成を要求し、ステップＳ９０６に進む。
【０１０５】
ステップＳ９０６では、システム制御部１０７は、画像表示部１０２の動作を制御し、メモリ１０９に出力されたＨＤＲ画像データの表示を要求し、その後、ステップＳ７１０〜ステップＳ７１２の処理を実行して、処理を終了する。
【０１０６】
なお、本実施形態では、ＨＤＲ動画の再生に本発明を適用した場合を例示したが、これに限定されない。例えば、本実施形態では、適正画像データとアンダー画像データとの合成画像データを生成する場合を例示したが、適正画像データとオーバー画像データと組み合わせて合成画像データを生成するようにしてもよい。また、被合成画像データの数なども、特に限定されず、各画像データ間の位置ずれを補間する被合成画像データの数を変更してもよい。
【０１０７】
以上説明したように、本実施形態では、特殊再生時の倍速情報に応じて、画像間の位置合わせ処理を行わないことで、更に処理時間を短縮し、スムーズな再生を行うことができる。また、ダイナミックレンジ拡大回路１０５を用いた画像間の位置合わせ処理を行わないため、画像処理装置１００の負荷を軽減することができ、無駄な電力消費を抑えることが可能となる。その他の構成、及び作用効果は、上記第１の実施形態と同様である。
【０１０８】
（第３の実施形態）
次に、図１１等を参照して、本発明の第３の実施形態である画像処理装置について説明する。
【０１０９】
上記第２の実施形態では、特殊再生がなされた場合に、倍速情報に応じてダイナミックレンジ拡大回路１０５での画像間の位置合わせ処理を行わないことで、動画像再生処理にかかる処理時間を短縮していた。しかし、ダイナミックレンジ拡大回路１０５に比べて規格的単純な加算平均回路１０６を用いることで、更に動画像再生処理にかかる処理時間の短縮と無駄な電力消費などを抑えることが可能となる。
【０１１０】
そこで、本実施形態では、ＨＤＲ動画の特殊再生時の倍速情報に応じて、異なる露出条件で撮像された画像データを加算平均する。具体的には、システム制御部１０７は、上記第２の実施形態における図９のステップＳ８１１及び図１０の特殊再生画像表示処理３に代えて、特殊再生画像表示処理４を実行する。
【０１１１】
図１１は、図９のステップＳ８１１において特殊再生画像表示処理３に代えて実行される特殊再生画像表示処理４を説明するためのフローチャート図である。図１１での処理において、上記第２の実施形態における図１０の特殊再生画像表示処理３の処理と同様の処理を行うステップについては、同一のステップ符号を付してその説明を省略する。
【０１１２】
図１１において、システム制御部１０７は、ステップＳ７０１〜ステップＳ７０４の処理を実行した後、ステップＳ１００５に進む。
【０１１３】
ステップＳ１０５では、システム制御部１０７は、メモリ１０９に出力された２種類の画像データ（適正画像、アンダー画像）の加算平均画像生成処理を実行する。具体的には、システム制御部１０７は、加算平均回路１０６の動作を制御し、加算平均画像データの生成を要求し、ステップＳ１００６に進む。
【０１１４】
ステップＳ１００６では、システム制御部１０７は、画像表示部１０２の動作を制御し、ステップＳ１００５でメモリ１０９に出力された加算平均画像データの表示を要求した後、ステップＳ７１０〜ステップＳ７１２の処理を実行して、処理を終了する。
【０１１５】
なお、本実施形態では、ＨＤＲ動画の再生に本発明を適用した場合を例示したが、特に限定されない。例えば、適正画像データとアンダー画像データとの加算平均画像データを生成する場合を例示したが、適正画像データとオーバー画像データとを組み合わせて加算平均画像データを生成するようにしてもよい。また、被合成画像データの数なども、特に限定されず、加算平均する被合成画像データの数を変更してもよい。また、本実施形態と上記第２の実施形態とを組み合わせて実施してもよい。
【０１１６】
以上説明したように、本実施形態では、特殊再生時の倍速情報に応じて、加算平均回路１０６を用いて加算平均画像データを生成することで、更に処理時間を短縮し、スムーズな再生を行うことができる。また、ダイナミックレンジ拡大回路１０５に比べて規格的単純な加算平均回路１０６を用いることで、画像処理装置１００の負荷を軽減することができ、無駄な電力消費などを抑えることが可能となる。その他の構成、及び作用効果は、上記第１及び第２の実施形態と同様である。
【０１１７】
（第４の実施形態）
次に、図１２及び図１３等を参照して、本発明の第４の実施形態である画像処理装置について説明する。
【０１１８】
上記第１〜第３の実施形態では、１以上の倍速の場合の特殊再生において、動画像再生処理にかかる処理時間を短縮することで、スムーズな再生を行うことを説明した。
【０１１９】
これに対し、本実施形態では、例えば０．２倍速や０．３倍速など、倍速が１より小さい正の値をとる特殊再生（スロー再生）において、スムーズな再生を可能にする。
【０１２０】
まず、図１２を参照して、スロー再生に係る処理の概要について説明する。図１２（ａ）は、２種類の画像データ（適正画像、アンダー画像）を持つ動画データを通常再生する場合の例を示す図である。図１２（ａ）では、フレーム単位で２種類の画像データのＨＤＲ画像合成処理を行い、生成されたＨＤＲ画像データの画像表示部１０２への表示を行っている。
【０１２１】
一方、図１２（ｂ）は、２種類の画像データ（適正画像、アンダー画像）を持つ動画データをスロー再生する場合の例を示す図である。図１２（ｂ）では、フレーム単位ではなく、前後のフレームの画像データを用いてＨＤＲ画像合成処理を行い、生成されたＨＤＲ画像データの画像表示部１０２への表示を行っている。
【０１２２】
スロー再生では、通常再生と比べて画像データの表示間隔を長くとることができるため、ＨＤＲ画像合成処理にかかる時間に余裕ができる。即ち、図１２（ｂ）に示すように、前後のフレームの画像データを用いてＨＤＲ画像合成処理を行うことで、通常再生と比べ、滑らかでスムーズな再生を行うことが可能となる。
【０１２３】
図１３は、本発明の第４の実施形態である画像処理装置のＨＤＲ動画のスロー再生時における処理を示すフローチャート図である。図１３での各処理は、不揮発性メモリ１０８に記憶された処理プログラムがメモリ１０８に展開されて、システム制御部１０７により実行される。なお、スロー再生処理は、例えば画像処理装置１００がＨＤＲ動画再生モードに設定されている状態で、動画再生開始指示している際に早送り方向のスロー再生の要求をシステム制御部１０７が受信したものとして説明する。
【０１２４】
図１３において、ステップＳ１２０１では、システム制御部１０７は、動画データから再生フレームに対応する適正画像データを取得し、ステップＳ１２０２に進む。
【０１２５】
ステップＳ１２０２では、システム制御部１０７は、画像変換部１０３の動作を制御し、ステップＳ１２０１で取得した適正画像データのデコード処理を要求し、ステップＳ１２０３に進む。
【０１２６】
ステップＳ１２０３で、システム制御部１０７は、動画データから再生フレームに対応するアンダー画像データを取得し、ステップＳ１２０４に進む。
【０１２７】
ステップＳ１２０４では、システム制御部１０７は、画像変換部１０３の動作を制御し、ステップＳ１２０３で取得したアンダー画像データのデコード処理を要求し、ステップＳ１２０５に進む。
【０１２８】
ステップＳ１２０５では、システム制御部１０７は、ステップＳ１２０３で取得したアンダー画像データをメモリ１０９に格納し、ステップＳ１２０６に進む。
【０１２９】
ステップＳ１２０６では、システム制御部１０７は、ステップＳ１２０１で取得した適正画像データとステップＳ１２０３で取得したアンダー画像データとを合成してＨＤＲ画像データを生成する。そして、システム制御部１０７は、生成したＨＤＲ画像データをメモリ１０９に出力して、ステップＳ１２０７に進む。
【０１３０】
ステップＳ１２０７では、システム制御部１０７は、画像表示部１０２の動作を制御し、ステップＳ１２０６でメモリ１０９に出力されたＨＤＲ画像データの表示を要求し、ステップＳ１２０８に進む。
【０１３１】
ステップＳ１２０８では、システム制御部１０７は、再生フレームに１を加算し、ステップＳ１２０９に進む。
【０１３２】
ステップＳ１２０９では、システム制御部１０７は、動画データに再生フレームに対応する画像データが存在するか否かを判断する。そして、システム制御部１０７は、再生フレームに対応する画像データが存在すると判断した場合は、ステップＳ１２１０に進み、存在しないと判断した場合は、処理を終了する。
【０１３３】
ステップＳ１２１０では、システム制御部１０７は、動画データから再生フレームに対応する適正画像データを取得し、ステップＳ１２１１に進む。
【０１３４】
ステップＳ１２１１では、システム制御部１０７は、画像変換部１０３の動作を制御し、ステップＳ１２１０で取得した適正画像データのデコード処理を要求し、ステップＳ１２１２に進む。
【０１３５】
ステップＳ１２１２では、システム制御部１０７は、ステップＳ１２０５でメモリ１０９に格納したアンダー画像データを取得し、ステップＳ１２１３に進む。
【０１３６】
ステップＳ１２１３では、システム制御部１０７は、ステップＳ１２１１で取得した適正画像データとステップＳ１２１２で取得したアンダー画像データとのＨＤＲ画像データを生成してメモリ１０９に出力し、ステップＳ１２１４に進む。
【０１３７】
ステップＳ１２１４では、システム制御部１０７は、画像表示部１０２の動作を制御し、ステップＳ１２１３でメモリ１０９に出力されたＨＤＲ画像データの表示を要求し、ステップＳ１２１５に進む。
【０１３８】
ステップＳ１２１５では、システム制御部１０７は、早送りボタン３０５から出力された制御信号を検出し、現在の倍速情報を取得して、ステップＳ１２１６に進む。
【０１３９】
ステップＳ１２１６で、システム制御部１０７は、ステップＳ１２１５で取得した倍速情報が１よりも小さいか否かを判断する。そして、システム制御部１０７は、倍速情報が１よりも小さいと判断した場合は、ステップＳ１２０１に戻り、倍速情報が１以上の場合は、処理を終了する。
【０１４０】
なお、本実施形態では、早送り方向のスロー再生に本発明を適用したが、巻戻し方向のスロー再生に本発明を適用してもよい。また、被合成画像データの数などはこれに限られず、３種類以上の画像データを持つ動画データにも本発明を適用可能である。
【０１４１】
以上説明したように、本実施形態では、スロー再生時に前後のフレームの画像データを用いてＨＤＲ画像合成処理を行うことで、通常再生と比べて、滑らかでスムーズな再生を行うことが可能となる。その他の構成、及び作用効果は、上記第１の実施形態と同様である。
【０１４２】
なお、本発明は、上記各実施形態に例示したものに限定されるものではなく、本発明の要旨を逸脱しない範囲において適宜変更可能である。
【０１４３】
また、本発明は、以下の処理を実行することによっても実現される。即ち、上述した実施形態の機能を実現するソフトウェア（プログラム）を、ネットワーク又は各種記憶媒体を介してシステム或いは装置に供給し、そのシステム或いは装置のコンピュータ（またはＣＰＵやＭＰＵ等）がプログラムを読み出して実行する処理である。ネットワーク又は各種記憶媒体を介して取得したソフトウェア（プログラム）をパーソナルコンピュータ（ＣＰＵ，プロセッサ）にて実行することでも実現できる。
【符号の説明】
【０１４４】
１００  画像処理装置
１０１  操作部
１０２  画像表示部
１０３  画像変換部
１０４  画像処理部
１０５  ダイナミックレンジ拡大回路
１０６  加算平均回路
１０７  システム制御部
１０８  不揮発性メモリ
１０９  メモリ
１１０  記録媒体
【図１】
2015139142.tif 000003
【図２】
2015139142.tif 000004
【図３】
2015139142.tif 000005
【図４】
2015139142.tif 000006
【図５】
2015139142.tif 000007
【図６】
2015139142.tif 000008
【図７】
2015139142.tif 000009
【図８】
2015139142.tif 000010
【図９】
2015139142.tif 000011
【図１０】
2015139142.tif 000012
【図１１】
2015139142.tif 000013
【図１２】
2015139142.tif 000014
【図１３】
2015139142.tif 000015