(57)【要約】【課題】歪を有する画像が取得される場合であっても画像調整に適した条件を設定可能とする。【解決手段】選択部１３６は、取得制御部１３４の制御によって取得されたライブビュー画像のフレームを選択する所定のタイミングが到来した場合に、ライブビュー画像のフレームを選択し、歪を補正するとともに分割し、各分割画像からなる広角画像やパノラマ画像に展開する処理を行う。更に、決定部１３８は、歪が補正された分割画像からなる広角画像やパノラマ画像について、ＡＦ、ＡＥ、ＡＷＢを調整する。【選択図】図１
2018166250.tif 000002
【特許請求の範囲】
【請求項１】
歪を有する画像を入力する画像入力手段と、
前記画像入力手段によって入力された歪を有する画像から、前記歪を有する画像の画素値に対する前記歪を考慮した調整内容を決定する決定手段と、
を備えることを特徴とする画像処理装置。
【請求項２】
前記歪を有する画像は、前記画像入力手段から逐次入力されるとともに、この逐次入力された画像から、所定の時間間隔で画像を選択する選択手段を更に備え、
前記決定手段は、前記選択手段によって選択された画像から調整内容を決定することを特徴とする請求項１に記載の画像処理装置。
【請求項３】
前記決定手段によって決定された調整内容を、以降逐次入力される画像に反映させるように制御する制御手段を更に備えたことを特徴とする請求項２に記載の画像処理装置。
【請求項４】
記憶指示を検出する検出手段と、
前記検出手段が記憶指示を検出した場合に、前記画像入力手段が入力する歪を有する画像を、前記決定手段によって決定された調整内容に基づいて画素値を調整して記憶させる記憶制御手段と、
を更に備えることを特徴とする請求項１〜３の何れか１項に記載の画像処理装置。
【請求項５】
前記歪を有する画像とは全周囲画像であり、
前記記憶制御手段は、更に、前記全周囲画像を広角画像に補正して記憶させることを特徴とする請求項４に記載の画像処理装置。
【請求項６】
前記歪を有する画像とは全周囲画像であり、
前記記憶制御手段は、更に、前記全周囲画像をパノラマ画像に補正して記憶させることを特徴とする請求項４に記載の画像処理装置。
【請求項７】
前記決定手段は、前記記憶制御手段が補正した後の画像について画素値が適切なものとなるような条件に従って調整内容を決定することを特徴とする請求項５又は６に記載の画像処理装置。
【請求項８】
前記画素値の調整内容は、画素値の明るさに関するパラメータを含むことを特徴とする請求項１〜７の何れか１項に記載の画像処理装置。
【請求項９】
前記画素値の調整内容は、画素値の色味に関するパラメータを含むことを特徴とする請求項１〜７の何れか１項に記載の画像処理装置。
【請求項１０】
前記画像入力手段が入力する歪を有する画像から、特定の被写体を検出する被写体検出手段を更に備え、
前記画素値の調整内容は、前記被写体検出手段により検出された被写体の画素値に関するパラメータを調整する内容を含むことを特徴とする請求項１〜７の何れか１項に記載の画像処理装置。
【請求項１１】
画像処理装置において、
歪を有する画像を入力する画像入力ステップと、
前記画像入力ステップにて入力された歪を有する画像から、前記歪を有する画像の画素値に対する前記歪を考慮した調整内容を決定する決定ステップと、
を含むことを特徴とする画像処理方法。
【請求項１２】
画像処理装置としてのコンピュータを、
歪を有する画像を入力する画像入力手段、
前記画像入力手段によって入力された歪を有する画像から、前記歪を有する画像の画素値に対する前記歪を考慮した調整内容を決定する決定手段、
として機能させることを特徴とするプログラム。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、画像処理装置、画像処理方法及びプログラムに関する。
【背景技術】
【０００２】
従来より、全周囲撮影が可能なカメラが存在し、このようなカメラによって撮影された画像をリアルタイムで表示すること（ライブビュー）についての技術が開示されている（例えば特許文献１参照）。
【先行技術文献】
【特許文献】
【０００３】
【特許文献１】特開２０１１−１１４４９６号公報
【発明の概要】
【発明が解決しようとする課題】
【０００４】
全周囲撮影が可能なカメラを用いる場合でも、画像に関する各種の調整は必要である。しかしながら、このような歪を有する画像について、歪を有することを考慮した各種調整については上記特許文献１には記載されていない。
【０００５】
本願発明はこのような問題点に鑑みてなされたものであり、歪を有する画像が取得される場合であっても画像調整に適した条件を設定可能とすることを目的とする。
【課題を解決するための手段】
【０００６】
上記目的を達成するため、本発明に係る画像処理装置は、
歪を有する画像を入力する画像入力手段と、
前記画像入力手段によって入力された歪を有する画像から、前記歪を有する画像の画素値に対する前記歪を考慮した調整内容を決定する決定手段と、
を備えることを特徴とする。
【発明の効果】
【０００７】
本発明によれば、歪を有する画像が取得される場合であっても画像調整に適した条件が設定可能となる。
【図面の簡単な説明】
【０００８】
【図１】本発明の実施形態に係る画像処理装置の構成の一例を示す図である。
【図２】同実施形態に係る全周囲画像の一例を示す図である。
【図３】同実施形態に係るフレームの時系列の一例を示す図である。
【図４】同実施形態に係る画像調整における全周囲画像の歪補正の一例を示す図である。
【図５】同実施形態に係る画像調整の一例を示す図である。
【図６】同実施形態に係る画像処理装置による画像調整処理の動作の一例を示すフローチャートである。
【発明を実施するための形態】
【０００９】
以下、図面を参照して、本発明の実施形態に係る画像処理装置を説明する。
【００１０】
図１は、画像処理装置１００の構成の一例を示す図である。図１に示すように、画像処理装置１００は、撮影部１０１、制御部１０２、画像処理部１０４、メモリ１０５、操作部１０６、表示部１０７、通信部１０８を含む。
【００１１】
撮影部１０１は、全周囲撮影が可能である。撮影部１０１は、レンズ１０３を含む。レンズ１０３は、ズームレンズ等により構成される。レンズ１０３は、操作部１０６からのズーム制御操作、及び、制御部１０２による合焦制御により移動する。レンズ１０３の移動によって撮影部１０１が撮影する撮影画角や光学像が制御される。
【００１２】
撮影部１０１は、受光面に規則的に二次元配列された複数の受光素子により構成される。受光素子は、例えば、ＣＣＤ（Charge Coupled Device）、ＣＭＯＳ（Complementary Metal Oxide Semiconductor）等の撮影デバイスである。撮影部１０１は、所定の撮影周期（本実施形態では、１／３０秒）で、レンズ１０３を介して入光された光学像を、制御部１０２からの制御信号に基づいて所定範囲の撮影画角で撮影（受光）し、その撮影画角内の画像信号をデジタルデータに変換してフレームを生成する。生成されるフレームは、図２に示すように、全周囲撮影により得られる歪を有する円形の画像（全周囲画像）のフレームである。また、撮影部１０１は、撮影とフレームの生成とを時間的に連続して行い、連続するフレームを画像処理部１０４に出力する。
【００１３】
画像処理部１０４は、制御部１０２からの制御信号に基づいて、撮影部１０１から出力されたフレーム（デジタルデータ）を制御部１０２へ出力する。また、画像処理部１０４は、操作部１０６からの記憶指示操作に基づく制御信号が入力されると、記憶指示された時点の撮影部１０１における撮影画角内、あるいは、表示部１０７に表示される表示範囲内の光学像を、例えば、ＪＰＥＧ（Joint Photographic Experts Group）等の圧縮符号化方式にて符号化、ファイル化する機能を有する。
【００１４】
制御部１０２は、例えばＣＰＵ（Central Processing Unit）によって構成される。制御部１０２は、メモリ１０５に記憶されたプログラム（例えば、後述する図６に示す画像処理装置１００の動作を実現するためのプログラム）に従ってソフトウェア処理を実行することにより、画像処理装置１００が具備する各種機能を制御する。
【００１５】
メモリ１０５は、例えばＲＡＭ（Random Access Memory）やＲＯＭ（Read Only Memory）である。メモリ１０５は、画像処理装置１００における制御等に用いられる各種情報（プログラム等）を記憶する。
【００１６】
操作部１０６は、例えば、表示部１０７の上面に形成されたタッチパネルであり、ユーザの操作内容を入力するために用いられるインタフェースである。表示部１０７は、例えば、ＬＣＤ（Liquid Crystal Display）、ＰＤＰ（Plasma Display Panel）、ＥＬ（Electro Luminescence）ディスプレイ等によって構成される。表示部１０７は、制御部１０２から出力された画像信号に従って画像を表示する。この際、制御部１０２は、撮影部１０１から出力されたフレームに対応する画像信号を表示部１０７へ出力する。通信部１０８は、例えばＬＡＮカードである。通信部１０８は、外部の通信装置との間で通信を行う。
【００１７】
制御部１０２には、取得制御部１３４、選択部１３６、決定部１３８、記憶指示検出部１４０、記憶制御部１４２、被写体検出部１４４が構成される。
【００１８】
取得制御部１３４は、画像処理部１０４から全周囲撮影により得られる歪を有する画像のフレームを取得する制御を行う。選択部１３６は、取得制御部１３４の制御によって取得されたフレームを所定のタイミングで選択する。本実施形態では、撮影部１０１の撮影周期は１／３０秒であり、フレームも１／３０秒毎に生成され、取得制御部１３４の制御によって取得される。すなわち、図３に示すように、フレームＦ１〜Ｆ１０はフレームレート３０［ｆｐｓ］で逐次取得される。選択部１３６は、取得制御部１３４の制御によって逐次取得されたフレームを１／３秒間隔で選択する。すなわち、選択部１３６は、１０個のフレームにつき１個のフレームを選択し、図３を用いて説明すると、逐次取得されるフレームＦ１〜Ｆ１０の中においてはフレームＦ５のみを選択する。
【００１９】
決定部１３８は、選択部１３６によって選択されたフレームに対応する歪を有する画像について、画素値を考慮した調整内容を決定する。
【００２０】
決定部１３８は、全周囲画像について画素の補間と間引きとを行う。具体的には決定部１３８は、全周囲画像の中心部に近いほど画素の補間量を多くし、外縁部に近いほど画素の間引き量を多くする、所謂、歪補正と平面化処理を行う。更に処理された画像を４等分する。図２に示す画像（フレーム）３１は、図４に示すように４個の矩形の分割画像３１１〜３１４に展開される。
【００２１】
更に、被写体検出部１４４は、各分割画像について、既存の手法を用いて顔領域の検出を行う。例えば、図４に示す分割画像３１１〜３１４において、被写体検出部１４４は、分割画像３１１内の人物領域３０２における顔領域を検出する。歪が補正された各分割画像内に顔領域が検出された場合、決定部１３８は、顔領域に焦点を合わせるように撮影部１０１の自動焦点（ＡＦ：Auto Focus）の調整を行う。また、決定部１３８は、顔領域に対応する画素の値（画素値）のうち、明るさの値（明度値）が白飛びや黒つぶれのない適切な値となるように自動露出（ＡＥ：Automatic Exposure）の調整を行う。また、決定部１３８は、顔領域に対応する画素値のうち、色味を示す色相値が適切な値となるように自動ホワイトバランス（ＡＷＢ：Auto White Balance）の調整を行う。
【００２２】
また、人物領域３０２及び顔領域が検出されなかった場合、被写体検出部１４４は、歪が補正された各分割画像について、既存の手法を用いて主要な被写体の領域の検出を行う。例えば、図４に示す分割画像３１１〜３１４において、人物領域３０２及び顔領域が存在しなかった場合、被写体検出部１４４は、分割画像３１３内の主要被写体領域である飛行機領域３０４を検出する。歪が補正された各分割画像内に主要被写体領域が検出された場合、決定部１３８は、主要被写体領域に焦点を合わせるように撮影部１０１のＡＦの調整を行い、また、決定部１３８は、主要被写体領域に対応する明度値が白飛びや黒つぶれのない適切な値となるようにＡＥの調整を行う。また、決定部１３８は、主要被写体領域に対応する色相値が適切な値となるようにＡＷＢの調整を行う。
【００２３】
また、人物領域３０２及び顔領域も主要被写体領域も検出されなかった場合、決定部１３８は、歪が補正された各分割画像を連結合成し、その結果得られる広角画像やパノラマ画像の全体に焦点を合わせるように撮影部１０１のＡＦの調整を行い、歪が補正された各分割画像からなる広角画像やパノラマ画像の全体の明度値が白飛びや黒つぶれのない適切な値となるようにＡＥの調整を行い、歪が補正された各分割画像からなる広角画像やパノラマ画像の全体の色相値が適切な値となるようにＡＷＢの調整を行う。
【００２４】
決定部１３８は、メモリ１０５に、上述した処理によって得られた調整内容を示すデータ（調整データ）を記憶、又は、更新する。制御部１０２は、図２に示すように、選択部１３６によって選択されたフレームの次のフレームから記憶又は更新された調整データが示す調整内容となるように、ＡＦ、ＡＥ、ＡＷＢの調整を行う。
【００２５】
図５は、調整データに基づく画像調整の一例を示す図である。図５（ａ）〜（ｅ）は、全周囲画像のフレームを時系列に並べたものである。より具体的には図５（ａ）〜（ｅ）は図３におけるフレーム画像Ｆ３〜Ｆ７に対応する。同図において、図５（ｃ）のタイミングで選択部１３６が全周囲画像のフレーム（図３のＦ５）を選択し、決定部１３８がＡＦ、ＡＥ、ＡＷＢの調整内容を決定すると、制御部１０２は、その後の図５（ｄ）に示す全周囲画像のフレーム（図３のＦ６）から調整内容が反映されるように、ＡＦ、ＡＥ、ＡＷＢの調整を行う。
【００２６】
記憶指示検出部１４０は、操作部１０６の操作によって利用者から現時点の画像であるライブビュー画像のフレームの記憶が指示されたことを検出する。記憶制御部１４２は、ライブビュー画像のフレームの記憶が指示された場合に、当該ライブビュー画像に対応するフレームをメモリ１０５に記憶させる。
【００２７】
次に、画像処理装置１００の動作を説明する。図６は、画像処理装置１００による画像調整処理の動作の一例を示すフローチャートである。
【００２８】
撮影部１０１は、全周囲撮影を行うことにより、全周囲画像であるライブビュー画像のフレームを生成する（ステップＳ１０１）。制御部１０２内の取得制御部１３４は、生成されたライブビュー画像のフレームを、画像処理部１０４を介して取得する制御を行う。
【００２９】
次に、制御部１０２内の選択部１３６は、取得制御部１３４の制御によって取得されたライブビュー画像のフレームを選択する所定のタイミングであるか否かを判定する（ステップＳ１０２）。本実施形態では、選択部１３６は、１／３秒周期で到来するタイミングを所定タイミングとみなす。
【００３０】
ライブビュー画像のフレームを選択する所定のタイミングである場合（ステップＳ１０２；ＹＥＳ）、選択部１３６は、取得制御部１３４の制御によって取得された最新のライブビュー画像のフレームを選択し、歪補正するとともに、各分割画像からなる広角画像やパノラマ画像に展開する処理を行う（ステップＳ１０３）。
【００３１】
次に、被写体検出部１４４は、歪が補正された分割画像について、人物領域及び顔領域を検出したか否かを判定する（ステップＳ１０４）。人物領域及び顔領域が検出された場合（ステップＳ１０４；ＹＥＳ）、決定部１３８は、顔領域に焦点を合わせるようにＡＦの調整を行い、顔領域に対応する明度値が白飛びや黒つぶれのない適切な値となるようにＡＥの調整を行い、顔領域に対応する色相値が適切な値となるようにＡＷＢの調整を行う（ステップＳ１０５）。
【００３２】
一方、人物領域３０２及び顔領域が検出されなかった場合（ステップＳ１０４；ＮＯ）、被写体検出部１４４は、歪が補正された分割画像について、主要被写体領域を検出したか否かを判定する（ステップＳ１０６）。主要被写体領域が検出された場合（ステップＳ１０６；ＹＥＳ）、決定部１３８は、主要被写体領域に焦点を合わせるようにＡＦの調整を行い、主要被写体領域に対応する明度値が白飛びや黒つぶれのない適切な値となるようにＡＥの調整を行い、主要被写体領域に対応する色相値が適切な値となるようにＡＷＢの調整を行う（ステップＳ１０７）。
【００３３】
一方、主要被写体領域が検出されなかった場合（ステップＳ１０６；ＮＯ）、決定部１３８は、歪が補正された各分割画像を連結合成し、その結果得られる広角画像やパノラマ画像の全体に焦点を合わせるようにＡＦの調整を行い、広角画像やパノラマ画像の全体の明度値が白飛びや黒つぶれのない適切な値となるようにＡＥの調整を行い、広角画像やパノラマ画像の全体の色相値が適切な値となるようにＡＷＢの調整を行う（ステップＳ１０８）。
【００３４】
ステップＳ１０５、ステップＳ１０７、ステップＳ１０８においてＡＦ、ＡＥ、ＡＷＢが調整された後、決定部１３８は、次以降に対応するライブビュー画像のフレームや、メモリ１０５に記憶されている画像のフレームに、調整内容を反映させるために、メモリ１０５に、調整内容を示すデータ（調整データ）を記憶、又は、更新する（ステップＳ１０９）。その後、ステップＳ１０１におけるライブビュー画像の生成以降の動作が繰り返される。
【００３５】
一方、取得制御部１３４の制御によって取得されたライブビュー画像のフレームを選択する所定のタイミングでない場合（ステップＳ１０２；ＮＯ）、制御部１０２は、ステップＳ１０１において生成されたライブビュー画像のフレームを、通信部１０８を介して外部へ出力する（ステップＳ１１０）。なお、ステップＳ１１０において、制御部１０２は、ステップＳ１０１において生成されたライブビュー画像のフレームを表示部１０７に表示させるようにしてもよい。
【００３６】
次に、制御部１０２は、メモリ１０５に調整データが記憶されたか、あるいは、更新されたかを判定する（ステップＳ１１１）。メモリ１０５に調整データが記憶も更新もされていない場合（ステップＳ１１１；ＮＯ）には、ステップＳ１１０におけるライブビュー画像のフレームの外部出力の動作が繰り返される。一方、メモリ１０５に調整データが記憶、あるいは、更新されている場合（ステップＳ１１１；ＹＥＳ）には、制御部１０２は、調整データが示す調整内容に応じて、撮影部１０１のＡＦの調整を行い、取得制御部１３４の制御によって取得されたライブビュー画像のフレームについて、ＡＥやＡＷＢの調整を行う（ステップＳ１１２）。
【００３７】
次に、記憶指示検出部１４０は、操作部１０６の操作によって利用者からライブビュー画像のフレームの記憶が指示されたか否かを判定する（ステップＳ１１３）。ライブビュー画像のフレームの記憶が指示されていない場合（ステップＳ１１３；ＮＯ）には、ステップＳ１１０におけるライブビュー画像のフレームの外部出力の動作が繰り返される。一方、ライブビュー画像のフレームの記憶が指示された場合（ステップＳ１１３；ＹＥＳ）には、記憶制御部１４２は、当該ライブビュー画像のフレームをメモリ１０５に記憶させる（ステップＳ１１４）。
【００３８】
このように本実施形態の画像処理装置１００では、制御部１０２内の選択部１３６は、取得制御部１３４の制御によって取得されたライブビュー画像のフレームを選択する所定のタイミングが到来した場合に、ライブビュー画像のフレームを選択し、歪を補正するとともに分割し、各分割画像に展開する処理を行う。更に、決定部１３８は、歪が補正された各分割画像について、ＡＦ、ＡＥ、ＡＷＢを調整する。ここで、決定部１３８は、顔領域が検出された場合には、顔領域に焦点を合わせるようにＡＦの調整を行い、顔領域に対応する明度値が適切な値となるようにＡＥの調整を行い、顔領域に対応する色相値が適切な値となるようにＡＷＢの調整を行う。また、決定部１３８は、顔領域が検出されず、主要被写体領域が検出された場合には、主要被写体領域に焦点を合わせるようにＡＦの調整を行い、主要被写体領域に対応する明度値が適切な値となるようにＡＥの調整を行い、主要被写体領域に対応する色相値が適切な値となるようにＡＷＢの調整を行う。また、決定部１３８は、顔領域も主要被写体領域も検出されなかった場合には、広角画像やパノラマ画像の全体に焦点を合わせるようにＡＦの調整を行い、広角画像やパノラマ画像の全体の明度値が適切な値となるようにＡＥの調整を行い、広角画像やパノラマ画像の全体の色相値が適切な値となるようにＡＷＢの調整を行う。
【００３９】
これにより、歪を有する全周囲画像が取得される場合においても撮影に適した条件であるＡＦ、ＡＥ、ＡＷＢを設定することが可能となる。また、所定のタイミングが到来した場合にのみ、ＡＦ、ＡＥ、ＡＷＢが調整されるため、制御部１０２の処理負担を軽減することが可能となる。
【００４０】
また、ライブビュー画像のフレームについてＡＦ、ＡＥ、ＡＷＢの調整内容を反映することができるとともに、記憶される画像のフレームについてもＡＦ、ＡＥ、ＡＷＢの調整内容が反映されるため、撮影環境の影響を受けにくい適切な調整が施された映像を表示、または記憶することが可能となる。
【００４１】
なお、本発明は、上記実施形態の説明及び図面によって限定されるものではなく、上記実施形態及び図面に適宜変更等を加えることは可能である。
【００４２】
例えば、上述した実施形態では、選択部１３６が、取得制御部１３４の制御によって取得されたライブビュー画像のフレームを選択する所定のタイミングを１／３秒周期で到来するタイミングとしたが、周期はこれに限定されず、撮影部１０１の撮影周期以上の周期であればよい。また、所定のタイミングについては、画像処理装置１００の周囲の環境や撮影範囲の環境が変化したタイミングであってもよいし、利用者が操作部１０６を操作してライブビュー画像の選択を指示した場合でもよい。更には、画像処理装置１００が移動可能である場合には、当該画像処理装置１００の動きを検出するセンサ等を備え、当該センサ等が動きを検出したタイミングを所定のタイミングとしてもよい。
【００４３】
また、上述した実施形態では、メモリ１０５に静止画像であるライブビュー画像のフレームが記憶される場合について説明したが、動画像が記憶されるようにしてもよく、当該動画像についてＡＦ、ＡＥ、ＡＷＢが調整されるようにしてもよい。
【００４４】
また、上述した実施形態では、歪を有する全周囲画像について歪が補正され、広角画像やパノラマ画像に展開された後に、ＡＦ、ＡＥ、ＡＷＢが調整されるようにしたが、歪を有する全周囲画像について、中心部の画素は重み付けが高く、外縁部の画素は重み付けが低くなるような重み付けを考慮した、画素領域の変換式を記憶し、これを用いてＡＦ、ＡＥ、ＡＷＢが調整されるようにしてもよい。この場合、歪補正や分割画像への展開をすることなく調整処理が実行されるので画像展開に係るワークメモリへの負担を軽減されることができる。
【００４５】
また、上述した実施形態では、調整内容はＡＦ、ＡＥ、ＡＷＢであったが、これに限定されず、画像の色空間における色相値や彩度値等が調整されるようにしてもよい。
【００４６】
また、画像処理装置１００は、撮影部１０１が設けられて撮影が可能であれば、どのような装置でもよい。なお、撮影部１０１は画像処理装置１００の外部に設けられていてもよい。
【００４７】
また、上記実施形態において、実行されるプログラムは、フレキシブルディスク、ＣＤ−ＲＯＭ（Compact Disc Read - Only Memory）、ＤＶＤ（Digital Versatile Disc）、ＭＯ（Magneto - Optical Disc）等のコンピュータで読み取り可能な記録媒体に格納して配布し、そのプログラムをインストールすることにより、上述の処理を実行するシステムを構成することとしてもよい。
【００４８】
また、プログラムをインターネット等のネットワーク上の所定の画像処理装置が有するディスク装置等に格納しておき、例えば、搬送波に重畳させて、ダウンロード等するようにしてもよい。
【００４９】
なお、上述の機能を、ＯＳ（Operating System）が分担して実現する場合又はＯＳとアプリケーションとの協働により実現する場合等には、ＯＳ以外の部分のみを媒体に格納して配布してもよく、また、ダウンロード等してもよい。
【００５０】
以上、本発明の好ましい実施形態について説明したが、本発明は係る特定の実施形態に限定されるものではなく、本発明には、特許請求の範囲に記載された発明とその均等の範囲が含まれる。以下に、本願出願の当初の特許請求の範囲に記載された発明を付記する。
【００５１】
（付記１）
歪を有する画像を入力する画像入力手段と、
前記画像入力手段によって入力された歪を有する画像から、前記歪を有する画像の画素値に対する前記歪を考慮した調整内容を決定する決定手段と、
を備えることを特徴とする画像処理装置。
【００５２】
（付記２）
前記歪を有する画像は、前記画像入力手段から逐次入力されるとともに、この逐次入力された画像から、所定の時間間隔で画像を選択する選択手段を更に備え、
前記決定手段は、前記選択手段によって選択された画像から調整内容を決定することを特徴とする付記１に記載の画像処理装置。
【００５３】
（付記３）
前記決定手段によって決定された調整内容を、以降逐次入力される画像に反映させるように制御する制御手段を更に備えたことを特徴とする付記２に記載の画像処理装置。
【００５４】
（付記４）
記憶指示を検出する検出手段と、
前記検出手段が記憶指示を検出した場合に、前記画像入力手段が入力する歪を有する画像を、前記決定手段によって決定された調整内容に基づいて画素値を調整して記憶させる記憶制御手段と、
を更に備えることを特徴とする付記１〜３の何れか１つに記載の画像処理装置。
【００５５】
（付記５）
前記歪を有する画像とは全周囲画像であり、
前記記憶制御手段は、更に、前記全周囲画像を広角画像に補正して記憶させることを特徴とする付記４に記載の画像処理装置。
【００５６】
（付記６）
前記歪を有する画像とは全周囲画像であり、
前記記憶制御手段は、更に、前記全周囲画像をパノラマ画像に補正して記憶させることを特徴とする付記４に記載の画像処理装置。
【００５７】
（付記７）
前記決定手段は、前記記憶制御手段が補正した後の画像について画素値が適切なものとなるような条件に従って調整内容を決定することを特徴とする付記５又は６に記載の画像処理装置。
【００５８】
（付記８）
前記画素値の調整内容は、画素値の明るさに関するパラメータを含むことを特徴とする付記１〜７の何れか１つに記載の画像処理装置。
【００５９】
（付記９）
前記画素値の調整内容は、画素値の色味に関するパラメータを含むことを特徴とする付記１〜７の何れか１つに記載の画像処理装置。
【００６０】
（付記１０）
前記画像入力手段が入力する歪を有する画像から、特定の被写体を検出する被写体検出手段を更に備え、
前記画素値の調整内容は、前記被写体検出手段により検出された被写体の画素値に関するパラメータを調整する内容を含むことを特徴とする付記１〜７の何れか１つに記載の画像処理装置。
【００６１】
（付記１１）
画像処理装置において、
歪を有する画像を入力する画像入力ステップと、
前記画像入力ステップにて入力された歪を有する画像から、前記歪を有する画像の画素値に対する前記歪を考慮した調整内容を決定する決定ステップと、
を含むことを特徴とする画像処理方法。
【００６２】
（付記１２）
画像処理装置としてのコンピュータを、
歪を有する画像を入力する画像入力手段、
前記画像入力手段によって入力された歪を有する画像から、前記歪を有する画像の画素値に対する前記歪を考慮した調整内容を決定する決定手段、
として機能させることを特徴とするプログラム。
【符号の説明】
【００６３】
３１…画像（フレーム）、１００…画像処理装置、１０１…撮影部、１０２…制御部、１０３…レンズ、１０４…画像処理部、１０５…メモリ、１０６…操作部、１０７…表示部、１０８…通信部、１３４…取得制御部、１３６…選択部、１３８…決定部、１４０…記憶指示検出部、１４２…記憶制御部、１４４…被写体検出部、３０２…人物領域、３０４…飛行機領域、３１１、３１２、３１３、３１４…分割画像
【図１】
2018166250.tif 000003
【図２】
2018166250.tif 000004
【図３】
2018166250.tif 000005
【図４】
2018166250.tif 000006
【図５】
2018166250.tif 000007
【図６】
2018166250.tif 000008