(57)【要約】【課題】ユーザがイメージ通りの写真を撮影するための情報を提示する画像処理装置の提案。【解決手段】本発明の一態様の画像処理装置１００は、被写体を撮影し取得された撮影画像データから被写体種類を判定する被写体情報取得部１１０と、被写体種類に応じた参考画像を取得する参考画像取得部１２０と、参考画像取得部１２０から参考画像を取得し、参考画像に応じた複数の撮影過程画像及び操作情報を取得して、それらのデータを読み出す撮影過程情報取得部１５０と、撮影過程情報取得部１５０が読み出した各種データを表示する提示部１４０とを具備する。【選択図】図１
2015126502.tif 000002
【特許請求の範囲】
【請求項１】
入力された撮影画像データから被写体情報を取得する被写体情報取得部と、
前記被写体情報取得部によって取得された被写体情報に対応した参考画像を取得する参考画像取得部と、
前記参考画像取得部で取得された前記参考画像に対応し、前記参考画像の撮影時に取得された複数の撮影過程画像を含む撮影過程情報を取得する撮影過程情報取得部と、
前記撮影過程情報取得部によって取得された撮影過程情報若しくは前記参考画像を表示する提示部と、
を具備する画像処理装置。
【請求項２】
前記撮影過程情報は、前記撮影過程画像の撮影時の操作情報を含む請求項１に記載の画像処理装置。
【請求項３】
前記画像処理装置は、被写体を撮影する撮像装置に対して、前記操作情報に基づいた設定を反映させる請求項２に記載の画像処理装置。
【請求項４】
前記操作情報は、操作によって設定される撮影者操作値と、前記撮影者操作値が設定されたときに定まるカメラ自動設定値とを含み、
前記画像処理装置は、前記撮影者操作値とカメラ自動設定値とを区別して表示する請求項２に記載の画像処理装置。
【請求項５】
前記画像処理装置は、前記操作情報に含まれる時系列において前後する撮影者操作値を比較する提示情報加工部をさらに具備し、
前記提示情報加工部は、被写体を撮影する撮像装置に対して、前記撮影者操作値を設定するための前記撮像装置を写した撮像装置画像をさらに表示し、
前記提示情報加工部が、前記操作情報に含まれる時系列において前後する撮影者操作値を比較して変化したと判定するとき、
前記提示情報加工部は、前記撮像装置画像における前記撮影者操作値が変化した操作部材の部分を強調表示する請求項４に記載の画像処理装置。
【請求項６】
前記画像処理装置は、前記操作情報に含まれる時系列において前後する撮影者操作値を比較する提示情報加工部をさらに具備し、
前記提示情報加工部は、撮影過程画像が変化した撮影過程画像の部分を強調表示する請求項２に記載の画像処理装置。
【請求項７】
前記画像処理装置は、複数の前記撮影過程画像及び前記操作情報を前記提示部に並べて表示する請求項２に記載の画像処理装置。
【請求項８】
前記画像処理装置は、前記提示部に表示する操作情報を加工する提示情報加工部を更に有し、
前記提示情報加工部は、前記操作情報が所定の閾値より大きい値を持つとき、前記操作情報または該操作情報に対応する前記撮影過程画像を前記提示部に強調表示する請求項２に記載の画像処理装置。
【請求項９】
前記画像処理装置は、位置情報を検出する位置センサをさらに具備し、
前記被写体情報取得部は、前記位置センサが検出した前記位置情報から被写体情報を取得する請求項１に記載の画像処理装置。
【請求項１０】
前記位置情報は、前記撮影過程画像のそれぞれが取得されたときの緯度情報及び経度情報を備える請求項９に記載の画像処理装置。
【請求項１１】
前記操作情報は、前記撮影過程画像が取得された際の撮影モード、画像処理設定、レンズ種別、焦点距離、絞り値、シャッタースピード、感度のうち少なくともいずれか一つを示す情報である請求項２に記載の画像処理装置。
【請求項１２】
前記被写体情報取得部は、被写体種類の前記被写体情報を取得する請求項１に記載の画像処理装置。
【請求項１３】
前記被写体情報取得部は、前記撮影画像データからシーン種類の前記被写体種類を取得する請求項１２に記載の画像処理装置。
【請求項１４】
前記参考画像取得部は、位置情報に従って前記参考画像を取得する請求項１に記載の画像処理装置。
【請求項１５】
入力された画像データにおける被写体情報を取得することと、
前記被写体情報に対応した参考画像を取得することと、
取得された前記参考画像に対応し、前記参考画像の撮影時に取得された複数の撮影過程画像及びそれぞれの撮影過程画像に対応した操作情報を含む撮影過程情報を取得することと、
取得された前記撮影過程情報または前記参考画像を表示することと、
を具備する画像処理方法。
【請求項１６】
入力された画像データから被写体情報を取得する機能と、
前記被写体情報に対応した参考画像を取得する機能と、
前記取得された前記参考画像に対応し、前記参考画像の撮影時に取得された複数の撮影過程画像及びそれぞれの撮影過程画像に対応した操作情報を含む撮影過程情報を取得する機能と、
前記取得された撮影過程情報若しくは前記参考画像を表示する機能と、
をコンピュータに実現させるための画像処理プログラム。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、画像処理装置、画像処理方法及び画像処理プログラムに関する。
【背景技術】
【０００２】
撮影行為を支援するためのアシスト情報を提示する技術に関する種々の提案がなされている。例えば、特許文献１には、撮影技法を案内する画像撮影システムが提案されている。その画像撮影システムは、入力されたキーワードに応じたサンプル画像（参考画像）を、その撮影条件及び撮影技法とともにユーザに提示する。ユーザは、提示された撮影条件に従って撮影条件を設定し、提示された撮影技法に従って撮影を行うことで、サンプル画像と同様の画像を取得することができる。
【先行技術文献】
【特許文献】
【０００３】
【特許文献１】特開２００７−２３５５０８号公報
【発明の概要】
【発明が解決しようとする課題】
【０００４】
特許文献１の提案では、ユーザが撮影を試みている被写体の状態とサンプル画像が撮影された際の被写体の状態とが同じ場合には、提示された撮影条件及び撮影技法に従って撮影を行うことで、ユーザがイメージした通りの写真が撮影される。しかしながら、現実には、ユーザが撮影を試みている被写体の状態とサンプル画像の被写体の状態とが一致しているとは限らない。被写体の状態が一致していない場合には、撮影条件等を合わせてもイメージ通りの写真を撮影することが難しくなる。ここで、ユーザは、サンプル画像の撮影過程を知っていれば、該撮影過程からサンプル画像と同様のイメージの写真を撮影するための撮影条件と撮影技法とを知ることができる可能性がある。
【０００５】
本発明は、前記の事情に鑑みて為されたものであり、ユーザのイメージ通りの写真を撮影可能とするための情報を提示可能な画像処理装置、画像処理方法及び画像処理プログラムを提供することを目的とする。
【課題を解決するための手段】
【０００６】
本発明の一態様の画像処理装置は、参考画像と、参考画像が撮影される過程で取得した複数の撮影過程画像及び操作情報を格納する参考画像データベースと、被写体を撮影し取得された撮影画像データの画像特徴量から被写体情報を判定する被写体情報取得部と、被写体種類に応じた参考画像を取得する参考画像取得部と、参考画像取得部から参考画像を取得し、参考画像に応じた複数の撮影過程画像及び操作情報を取得して、それらのデータを読み出す撮影過程情報取得部と、撮影過程情報取得部が読み出した各種データを表示する提示部とを具備する。
【発明の効果】
【０００７】
本発明の一態様の画像処理装置は、参考画像に加えて、この参考画像が撮影されるまでの過程で得られた撮影過程情報をユーザに提示する。ユーザは、提示された撮影過程情報を見ることで、イメージ通りの撮影を行うことができる。
【図面の簡単な説明】
【０００８】
【図１】図１は、本発明の第１の実施形態に係る画像処理装置の構成例を示す概略図である。
【図２】図２は、撮影過程情報の構成例を示す図である。
【図３】図３は、被写体の種類を説明する図である。
【図４】図４は、被写体情報取得部の構成例を示す図である。
【図５】図５は、撮像装置と、参考画像ＤＢとのデータの送受信の例を示す図である。
【図６】図６は、複数の参考画像が表示された際の参考画像の選択例を示す図である。
【図７】図７は、撮影過程情報の時系列動画表示の例を示す図である。
【図８】図８は、撮影者操作値とカメラ自動設定値とを区別した表示例を示す図である。
【図９】図９は、提示された撮影過程に従った撮影例を示す図である。
【図１０】図１０は、撮影過程画像の表示の変化と操作情報の表示の変化とが同期しない例を示す図である。
【図１１】図１１は、撮影者操作値とカメラ自動設定値とを区別しない表示例を示す図である。
【図１２】図１２は、第７の実施形態に係る提示情報加工部をさらに有する画像処理装置の構成例を示す図である。
【図１３】図１３は、撮影者操作値をユーザが撮像装置に反映させるための第１のガイド例を示す図である。
【図１４】図１４は、撮影者操作値をユーザが撮像装置に反映させるための第２のガイド例を示す図である。
【図１５】図１５は、撮影者操作値をユーザが撮像装置に反映させるための第３のガイド例を示す図である。
【図１６】図１６は、複数の撮影過程画像及び操作情報を並べて表示させる表示例を示す図である。
【図１７】図１７は、参考画像と撮影過程情報とを外部デバイスに表示させる変形例を示す図である。
【図１８】図１８は、撮影者操作値を撮像装置に簡易に反映させるための構成例を示す図である。
【発明を実施するための形態】
【０００９】
以下、図面を参照して、本発明の第１の実施形態に係る画像処理装置を説明する。図１は、この画像処理装置の構成の概略を示している。図１の画像処理装置１００は、例えば撮像装置に搭載される。以下、画像処理装置１００は、撮像装置に搭載されているものとして説明を続ける。図１の画像処理装置１００は、被写体情報取得部１１０と、参考画像取得部１２０と、参考画像ＤＢ１３０と、撮影過程情報取得部１５０と、提示部１４０とを有する。被写体情報取得部１１０は、入力された画像データにおける被写体に関連する被写体情報を取得する。画像処理装置１００が撮像装置である場合、被写体情報取得部１１０は、撮像部である。また、被写体情報は、例えば画像認識によって得られる被写体種類等である。参考画像取得部１２０は、被写体情報取得部１１０で取得された被写体情報に基づいて参考画像ＤＢ１３０を検索してユーザが撮影しようとしている被写体に関連した参考画像を取得する。参考画像ＤＢ１３０は、参考画像と撮影過程情報とを関連付けて格納しているデータベースである。参考画像は、各種の被写体の写真の作例を示す画像である。撮影過程情報は、それぞれの参考画像の撮影者による撮影過程を示す情報である。撮影過程情報については後で詳しく説明する。なお、参考画像ＤＢ１３０は、画像処理装置１００と別体であっても良い。撮影過程情報取得部１５０は、参考画像取得部１２０から参考画像を受け取り、その参考画像に対応した撮影過程情報を参考画像ＤＢ１３０から取得する。提示部１４０は、参考画像若しくは撮影過程情報をユーザに提示する。なお、被写体情報取得部１１０は撮像装置でなくてもよい。例えば、被写体情報取得部１１０は、他デバイスから入力された画像データにおける被写体情報を取得しても良い。
【００１０】
撮影過程情報の構成を図２に示す。撮影過程情報は、撮影過程画像と操作情報とを含む。撮影過程画像は、参考画像の撮影の過程で時系列に取得されたｎ個の画像である。撮影過程画像ｉｍｇ０−ｉｍｇ（ｎ−１）は、例えば、参考画像の撮影者によって画像処理装置１００に対する何らかの操作がされた場合に取得される。操作情報ｉ０−ｉ（ｎ−１）は、撮影過程画像ｉｍｇ０−ｉｍｇ（ｎ−１）と対になっており、撮影過程画像が取得されたときの撮影条件を示す情報である。撮影条件は、例えば、撮影過程画像が取得された際の撮影モード、画像処理設定、レンズ種別、焦点距離、露出を決定するパラメータとしての絞り値・シャッタースピード、感度、構図変更の有無などである。参考画像は、参考画像の撮影者によって複数の撮影過程を経て撮影されている。ユーザは、参考画像のような画像を撮影するための過程を、撮影過程情報を見ることで容易に知ることができる。
【００１１】
以下、第１の実施形態に係る撮像装置の動作を説明する。以後、被写体は、白い花であるとして説明を行う。一方で、図３のようにスルー画に白い花が表示されているとき、被写体情報取得部１１０は被写体情報を識別する。被写体情報は例えば被写体種類であって、例えば、‘花’若しくは、‘白い花’などである。又は、白い花とその花の背景とを含む全体の雰囲気が例えば‘明るい’という感性語で表現され得るとき、‘明るい’を画像データの後述するシーン種類としても良い。
【００１２】
まず、被写体情報取得部１１０で被写体情報の一例としての被写体種類が取得される。被写体情報取得部１１０の構成例を図４に示す。被写体情報取得部１１０は、画像入力部１１１と、特徴量算出部１１２と、被写体認識部１１３と、被写体ＤＢ１１５と、被写体種類出力部１１４とを有する。画像入力部１１１は、被写体から発せられる光を図示しない受光面で捉えて、その光を電気信号（画像データ）に変換する。なお、画像処理装置１００が撮像装置でない場合、画像入力部１１１は、他デバイスから画像データを取得する。特徴量算出部１１２は、画像データ内の形状若しくは色といった画像特徴量を算出する。形状の画像特徴量は例えば、ＳＩＦＴ若しくはＨＯＧなどによって算出される。また、色の画像特徴量は例えば、ＲＧＢヒストグラム若しくはＨＳＶヒストグラムなどに基づいて算出されても良い。被写体ＤＢ（データベース）１１５は、画像特徴量と被写体種類とを関連付けて格納している。なお、被写体画像ＤＢ１５０は、被写体情報取得部１１０と別体であっても良い。被写体認識部１１３は例えば、ＳＶＭによる機械学習を用いて、特徴量算出部１１２によって算出された特徴量と被写体ＤＢ１１３に格納されている画像特徴量とを参照することで、被写体種類を識別する。被写体種類出力部１１４は、被写体認識部１１３で識別された被写体種類の情報を参考画像取得部１２０に出力する。被写体が白い花であるとき、被写体種類の情報は例えば、‘花’というテキストデータでも良いし、花という種類に対応する固有のＩＤでも良い。以下、出力される被写体種類の情報は、テキストデータであるとする。
【００１３】
参考画像の取得例を図５に示す。被写体情報取得部１１０で被写体情報の一例としての被写体種類が取得されると、被写体種類のテキストデータである‘花’を検索キーとして参考画像取得部１２０により、参考画像ＤＢ１３０から‘花’に関する参考画像が取得される。参考画像が取得されると、取得された参考画像が提示部１４０によりユーザに提示される。例えば、図６は、複数の参考画像が提示された例を示している。複数の参考画像が提示された場合、ユーザは提示された参考画像の中から、自身が撮影しようとしている写真に近い参考画像を選択する。例えば、図６の参考画像Ａが選択されたとする。このとき、撮影過程情報取得部１５０により、参考画像Ａに対応した撮影過程情報が参考画像ＤＢ１３０から取得される。取得された撮影過程情報は、提示部１４０からユーザに提示される。
【００１４】
ユーザに撮影過程情報の操作状態を示す一例として、一つの撮影過程画像と、その撮影過程画像に対応する操作情報とを時系列順に図７に示すように表示しても良い。図７には、撮影過程情報が表示されるエリアであることを示す撮影過程情報表示エリアが示されている。撮影過程情報表示エリアは、撮影過程画像を表示する撮影過程画像表示エリアと、操作情報を表示する操作情報表示エリアと、再生ボタンと、シークバーとを含む。再生ボタンが選択されると、撮影過程画像とその撮影過程画像に対応した操作情報とが、図８に示すようにｆｒａｍｅ０、ｆｒａｍｅ１、ｆｒａｍｅ２・・・と時系列順に表示されていく。シークバー上の位置は時系列の複数の撮影過程画像と操作情報の順番に対応している。シークバーをタッチすると、タッチ位置に対応した撮影過程画像と、その撮影過程画像に対応した操作情報とが表示される。操作情報表示エリアの表示では、操作情報として、後述する撮影者操作値及びカメラ自動設定値がそれぞれ区別して表示される。
【００１５】
撮影者操作値と、カメラ自動設定値について図８を使用して説明する。撮影者操作値は、撮影過程画像を撮影した撮影者の操作によって定まる撮影条件である。一方、カメラ自動設定値は、撮影者操作値によって自動的に定まる撮影条件である。なお、参考画像を撮影した撮像装置の固有の撮影条件をさらに操作情報に加えても良い。撮影過程画像の撮影者操作値を知ることで、ユーザは、撮影過程での撮影状態を容易にトレースすることができる。また、撮影過程画像と操作情報とを同時に提示する場合、画像処理装置１００は、撮影過程画像と、撮影状態との対応をユーザに容易に把握させることができる。
【００１６】
なお、各撮影条件は、撮影者操作値と、カメラ自動設定値とのいずれにも振り分けられ得る。例えば、第１の実施形態では、絞り値が定まると、他の撮影条件が定まり、その他の撮影条件が定まることで露出が定まる撮影モードすなわちＡモード（絞り優先オートモード）では、撮影者操作値に分類される撮影条件は、絞り値、焦点距離などである。Ａモードにおけるカメラ自動設定値は、ＩＳＯ感度及びシャッタースピード（ＳＳ）などである。一方で、Ａモード以外のモード例えば、多くの撮影条件をユーザが決定するモードであるＭモード（マニュアルモード）であれば、撮影条件の多くは、撮影者操作値に分類される。
【００１７】
ユーザが画像処理装置１００によって撮影技法を取得した場合の撮影例を図９に示す。被写体は、図９に示す白い花である。一方、画像処理装置１００によって、図８で示したような桃色の花の参考画像及び撮影過程情報が取得されたとする。ここで、ユーザは、撮影過程画像及び操作情報を見ながら白い花を撮影したとする。この場合、桃色の花を撮影した時の撮影者操作値のＥＶ−１を白い花の撮影に適用すると、白い花の白色が暗くなってしまう恐れがある。このとき、ユーザは、撮影過程画像を見ているので、撮影者操作値のＥＶ−１が適用されたことで画像が暗くなったことを知ることができる。したがって、ユーザは、花が桃色であるためにＥＶ−１に設定して花の色を引き締めたという参考画像の撮影者の意図に気付くことができる可能性がある。この場合、ユーザは例えば、白色の花であれば露出補正をしない選択をし、それ以外の撮影者操作値を参考に撮影することができる。このようにして、ユーザは、イメージ通りの画像を取得することができる。
【００１８】
以上、本発明の第１の実施形態における画像処理装置１００によって、被写体の撮影例である参考画像と、参考画像のように撮影するための撮影過程をガイドする撮影過程情報とが、ユーザに提示される。撮影過程情報は、参考画像を撮影する過程で取得された複数の撮影過程画像と、それぞれの撮影過程画像と対をなしており、撮影過程画像の撮影条件を示す操作情報とを含む。このような撮影過程情報がユーザに提示されることにより、ユーザは、より容易にイメージ通りに撮影することが可能になる。さらに、操作情報は、撮影過程画像の取得時に撮影者によって設定された撮影条件である撮影者操作値と、撮像装置で自動的に設定された撮影条件であるカメラ自動設定値とに分類される。そして、撮影者操作値とカメラ自動設定値とが区別して提示されることにより、ユーザは、撮影過程画像と撮影者操作値とを見比べて参考画像の撮影者の意図を知り、より容易にイメージ通りに撮影することが可能になる。
【００１９】
次に、第２の実施形態を図１０を使用して説明する。第２の実施形態では、撮影過程情報表示エリアに、新たに操作情報表示エリアの表示と非表示とを切り替える操作情報表示ボタンが表示される。操作情報を表示させない設定になっているとき、図１０（ａ）に示すように、提示部１４０の撮影過程画像表示エリアには、撮影過程画像表示エリアと、シークバーと、再生ボタンと、操作情報表示ボタンとが表示されている。まず、提示部１４０は、撮影過程画像エリアに撮影過程画像を表示する。このとき、シークバーが操作されると、提示部１４０は、次の撮影過程画像を表示する。次に、操作情報表示ボタンが選択されて操作情報を表示させる設定になると、提示部１４０は、図１０（ｂ）に示すように、操作情報表示エリアに操作情報を表示する。このとき、シークバーが操作されると、次の撮影過程画像とこの撮影過程画像に対応する操作情報とを表示する。このとき、ユーザは、撮影過程画像の変化に対する操作情報の変化を容易に読み取ることができる。一方で、操作情報を常に表示させないことにより、操作情報の表示によって撮影過程の表示が邪魔されることがない。
【００２０】
次に、第３の実施形態を図１１を使用して説明する。図１１は、操作情報の表示方法の変形例を示す図である。第３の実施形態では、撮影者操作値とカメラ自動設定値とが区別なく表示される。このような操作情報の表示であっても良い。
【００２１】
次に、第４の実施形態を図示せずに説明する。前述した例では撮影過程画像は、撮影者によって撮影条件を変化させる何らかの操作が行われた場合に取得される。これに対し、第４の実施形態における撮影過程画像は、参考画像の撮影者が、レリーズ操作を行って取得した画像データである。すなわち、ユーザにはレリーズ操作がなされた画像のみが撮影過程画像として提示されることになるので、ユーザは、被写体を複数回撮影して追い込んでいく際の撮影ノウハウを取得することが出来る。
【００２２】
次に本発明の第５の実施形態を図示せずに説明する。第５の実施形態では、被写体情報として後述するシーン種類を用いる。なお、画像処理装置１００の構成及び提示部１４０への提示は第１の実施形態と同一であり、それらの説明を省略する。
【００２３】
第５の実施形態では、参考画像及び撮影過程情報が、被写体種類だけではなく、シーン種類とも関連づけられている。シーン種類は、ユーザが撮影しようとしているシーンの種類を示す。ここで、第５の実施形態では、被写体種類に当てはまらないような写真の印象のことをシーンと呼ぶことにする。シーン種類は、例えば感性語若しくは印象語によって定義される。感性語は例えば、暖かい、冷たい、かっこいい若しくはかわいい等である。また、印象語は例えば、明るい、暗い、赤っぽい、青っぽいなどである。なお、シーン種類は、例えば画像特徴量から識別される。これにより、シーン種類に応じた参考画像及び撮影過程情報が取得される。なお、画像処理装置１００が取得した画像データに限らず、外部から取得した画像データが、シーン種類による分類を適用されうることは言うまでもない。
【００２４】
第５の実施形態では、被写体種類の識別とシーン種類の識別とを併用することで、被写体種類だけでは識別しないような状況を減らすことができる。
【００２５】
次に、本発明の第６の実施形態を図示せずに説明する。第６の実施形態では、位置情報及び方位情報をユーザに提示する。第６の実施形態における画像処理装置１００の第１の実施形態と同一の構成の説明を省略する。
【００２６】
第６の実施形態における画像処理装置１００は、画像処理装置１００の緯度情報及び経度情報を検出する位置センサ例えばＧＰＳと、地磁気から画像処理装置１００の方向を検出する方位センサ例えば電子コンパスとをさらに有する。
【００２７】
第６の実施形態における撮影過程情報には、第１の実施形態で説明した撮影過程画像及び操作情報に加え、各撮影過程画像の撮影時の経度情報、緯度情報、及び方向の情報が格納されている。
【００２８】
第６の実施形態における被写体認識部１１３は、画像特徴による被写体種類の識別に加えて、画像処理装置１００の位置情報若しくは方位情報と、被写体ＤＢ１１５に格納されている各撮影過程情報の位置情報若しくは方位情報とを参照することで、被写体種類を識別する。第１の実施形態における画像特徴量による被写体種類の識別と、位置情報若しくは方位情報による被写体種類の識別とを併用することで、被写体種類の識別はより正確に行われる。または、被写体情報は、位置情報若しくは方位情報そのものであっても良い。そして、参考画像ＤＢ１３０は、参考画像と、参考画像に関連付けられた位置情報をさらに有する。参考画像取得部は、被写体の位置情報若しくは方位情報に基づいて参考画像ＤＢ１３０を検索してユーザが撮影しようとしている被写体に関連した参考画像を取得しても良い。また、外部から画像データを取得する場合、その画像データに位置情報が含まれていれば、画像処理装置１００は、画像データに含まれている位置情報を参照して、被写体を識別しても良い。
【００２９】
なお、画像処理装置１００は、内蔵する位置センサを用いて位置情報を取得したが、位置情報を外のデバイスから取得しても良い。また、第６の実施形態においては、提示部１４０は、撮影過程情報に格納されている位置情報と、ＧＰＳ及び電子コンパスが検出した画像処理装置１００の位置情報及び方位情報とをユーザに提示しても良い。ユーザは、参考画像のように撮影するための位置及び方向を容易に把握することができる。
【００３０】
本発明の第７の実施形態を図１２及び図１５を使用して説明する。第７の実施形態は、撮影者操作値をユーザが撮像装置に反映させるための第１乃至第３のガイド例を示す。
【００３１】
第１のガイド例では、提示部１４０は、撮影者操作値を変更するための操作部材を写した撮像装置画像を撮影過程画像及び操作情報とともに表示する。この撮像装置画像は、撮像装置としての画像処理装置１００自体を示す画像であってもよいし、画像処理装置１００とは別の撮像装置の画像であってもよい。第１のガイド例における画像処理装置１００の構成の変形例を図１２に示す。第１のガイド例における画像処理装置１００は、掲示情報加工部１６０をさらに有する。掲示情報加工部１６０は、撮影過程情報取得部１５０が連続して読み込んだ操作情報の変化を検出する。撮影過程情報の変化を検出した時、掲示情報加工部１６０は、操作部材を写した画像を強調表示する。また、第１のガイド例を図１３に示す。例えば、撮影過程画像の再生中、操作情報が別の値に変わる例えば、ＭモードがＡモードに変わったとする。このとき、撮影モードを変更するための撮像装置画像に強調表示を行う例えば、その撮像装置画像に矢印の画像を重ねて表示する。矢印の画像を提示することによって、ユーザは、撮影モードを変える操作のための操作部材と、操作部材の使い方とを見て覚えることが出来るので、撮影技法をより容易に取得することが出来る。
【００３２】
次に、第２のガイド例を図１４に示す。第２のガイド例では、画像処理装置１００の撮影者情報の操作に対応している透過性の操作部材の内部にＬＥＤライト１１が、図１４に示すように埋め込まれるように設置されている。撮影過程画像の再生中、操作情報が別の値に変わったとき、該操作情報を変えるための操作部材の内部のＬＥＤライト１１は例えば点滅発光する。ＬＥＤライト１１の点滅発光によって、ユーザに操作すべき操作部材を示す。また、第２のガイド例は、第１のガイド例のように提示部１４０の表示の一部を撮像装置画像によって占有しないので、第１のガイド例に比べて他の画像を大きく表示することができる。
【００３３】
第３のガイド例を図１５に示す。第３のガイド例では、時間幅を持って変更される操作例えばＭＦ（Ｍａｎｕａｌ  Ｆｏｃｕｓ）が行われているとき、提示部１４０は、操作情報表示エリアに例えば、‘ＭＦ中’という情報を表示する。ユーザは、時間幅を持った操作の操作情報がそのまま示されるより容易に、参考画像の撮影者の意図を把握できる。
【００３４】
次に、本発明の第８の実施形態を図示せずに説明する。第８の実施形態では、撮影過程情報内の複数の撮影過程画像から任意の撮影過程画像を選択して表示する。
【００３５】
第８の実施形態における撮影過程情報は、所定のフレームレート（例えば６０ｆｐｓ）で撮影され取得された撮影過程画像と、それぞれの撮影過程画像に対応した操作情報とを含む。６０ｆｐｓで取得され、操作情報に記録されている時系列で隣り合う撮影過程画像を読み出して提示した場合、ユーザは、操作情報の変化を頻繁に認識するため、複数の撮影過程情報の確認を手間に感じることがある。そこで、６０ｆｐｓで取得された複数の画像から、ユーザのイメージ通りの撮影に必要な撮影過程情報のみを提示するために、撮影過程情報取得部１５０は、すべての撮影過程情報から一部の撮影過程情報を選択する。撮影過程情報取得部１５０は例えば、参考画像ＤＢ１３０に保存されている撮影過程画像から、時系列で等間隔に選択された撮影過程画像を取得する。或いは、撮影過程情報取得部１５０で取得された撮影過程情報に含まれる撮影過程画像から、第７の実施形態で述べた提示情報加工部１６０を用いて時系列で等間隔に撮影過程画像を選択してもよい。若しくは、撮影過程情報取得部１５０で取得された撮影画像について、撮影過程画像の変化（明るさの変化、色の変化、構図の変化等）が、所定の閾値よりも大きくなったか否かを提示情報加工部１６０で判定し、閾値よりも大きい値を持つ撮影過程画像を選択する。この場合、撮影者操作値が所定の閾値よりも大きく変化した場合の撮影過程画像のみを選択しても良い。若しくは、撮影過程画像の画像特徴量が所定の閾値よりも大きく変化した場合、提示情報加工部１６０は、時系列で後の撮影過程画像を選択する。以上、撮影過程情報に格納される複数の撮影過程画像から提示する撮影過程画像を選択することで、ユーザは、イメージ通りの撮影をするために、必要な撮影過程画像のみを知ることができる。
【００３６】
本発明の第９の実施形態を図１６を使用して説明する。第９の実施形態では、撮影過程情報取得部１５０は、複数の撮影過程画像を選択する。例えば撮影過程画像ｉｍｇ０−２と、それぞれの撮影過程画像に対応する操作情報ｉ０−ｉ２である複数の撮影過程情報を一度に表示することで、ユーザは、時系列で隣り合う撮影過程画像どうしの変化を一目で知ることができる。したがって、参考画像の撮影ノウハウをより容易に取得することができる。
【００３７】
次に本発明の第１０の実施形態を図１７を使用して説明する。第１０の実施形態では、撮影過程情報取得部１５０は、参考画像と撮影過程情報を外部のデバイスに出力する。
【００３８】
第１０の実施形態では、画像処理装置１００の外部に存在する提示装置２００が、図１７に示すようにさらに設けられている。提示装置２００は、例えばタブレット端末若しくは携帯端末であって、画像及び情報を提示するための提示部２１０を有する。画像処理装置１００の撮影過程情報取得部１５０から入力された参考画像と撮影過程情報は、画像処理装置１００から無線または有線によって提示装置２００に送信される。参考画像及び撮影過程情報を受信した提示装置２００の提示部２１０は、参考画像及び撮影過程情報を表示する。
【００３９】
以上、参考画像若しくは撮影過程情報を画像処理装置１００の外部の提示装置２００に出力することで、参考画像若しくは撮影過程情報は提示部２１０に表示される。第１の実施形態では、参考画像若しくは撮影過程情報は、提示部１４０に表示される。このとき、提示部１４０に他の画像若しくは情報例えばスルー画が表示されることがあるので、多くの画像若しくは情報は、重ねられて表示されてしまうことがある。そのため、ユーザは画像若しくは情報を一覧することが難しい。そこで、参考画像及び撮影過程情報を提示部２１０に表示させることによって、スルー画など複数の画像及び情報を提示部１４０内で重ねずに表示することができる。
【００４０】
次に本発明の第１１の実施形態を図１８を使用して説明する。第１１の実施形態では、提示部１４は、撮影過程画像の撮影条件を一度に反映させるための操作移行ボタンを表示する。撮影移行ボタンが選択されることによって、撮影過程情報エリアに表示されている操作情報に対応する各設定値は、画像処理装置１００に設定される。なお、機械式の釦の押下によって、撮影条件を設定しても良い。撮影移行ボタンによって、ユーザは、撮影過程画像の撮影条件に応じた撮影をすぐに始めることができる。また、撮影移行ボタンは、一連の撮影過程画像のうち、ユーザの所望の撮影過程画像に対応する操作情報の各設定値を画像処理装置１００に一度の操作で反映することができる。なお、画像処理装置１００が、外の撮像装置と通信可能に接続されている場合において、この外の撮像装置に対して撮影条件を反映させるようにすることもできる。
【００４１】
次に本発明の第１２の実施形態を図示せずに説明する。第１２の実施形態では、撮影過程画像表示エリアで表示が切り替わった撮影過程画像の変化を強調表示する。
【００４２】
第１２の実施形態における画像処理装置１００は、第７の実施形態で述べた提示情報加工部１６０を有し、図１１に示す通りの構成を有する。提示情報加工部１６０は、前後で表示された２枚の撮影過程画像の画像特徴量を算出する。撮影過程画像の変化の検出は、算出された画像特徴量間の変化量を所定の閾値と比較することでなされる。比較の結果、画像特徴量に所定の閾値以上の差があると判定されるとき、所定の閾値以上の差を示す画像特徴量を有した画像部分を提示部１４０に強調表示する。強調表示は例えば、撮影過程画像の変化した箇所を拡大表示しても良いし、ハイライト表示しても良い。また、その変化を、文字情報として撮影過程情報表示エリアに表示しても良い。
【００４３】
若しくは、複数の撮影過程画像の変化を示す情報を撮影過程情報に予め付加して参考画像ＤＢに保存しておいても良い。提示部１４０の強調表示は、該複数の撮影過程画像の変化を示す情報に基づいてなされる。
【００４４】
以上、第１２の実施形態では、前後の表示される撮影過程画像の変化を強調表示する。ユーザは、複数の画像の変化例えば、撮影過程画像の被写体のわずかな動き若しくは、微小な色の変化などを比較しても、その変化を認識し難いことがある。撮影過程画像の変化をユーザに提示することによって、ユーザは、イメージ通りの画像データをより容易に取得するための撮影技法を知ることができる。
【００４５】
なお、画像処理装置１００が外の撮像装置と通信接続されている場合において、操作情報に基づく強調表示を該外の撮像装置に対して行うこともできる。本発明の第１から第１２の実施形態に基づいて本発明を説明したが、本発明の要旨の範囲内で変形及び応用が可能であることは勿論である。例えば、第１０の実施形態で説明した提示装置２００に、第７の実施形態における図１３に示すような模式図を表示させても良い。
【００４６】
加えて、上述した実施形態における撮像装置による各処理は、何れも実行させることができるプログラムとして記憶しても良い。このプログラムは、メモリカード（ＲＯＭカード、ＲＡＭカード等）、磁気ディスク（フロッピー（登録商標）ディスク、ハードディスク等）、光ディスク（ＣＤ−ＲＯＭ、ＤＶＤ等）、半導体メモリ等の外部記憶装置の記憶媒体に記憶されたプログラムを読み込み、この読み込んだプログラムによって動作が制御されることにより、上述した処理を実行することができる。
【符号の説明】
【００４７】
１１…ＬＥＤライト、  １００…撮像装置、  １１０…被写体情報取得部、  １１１…画像入力部、  １１２…特徴量算出部、  １１３…被写体認識部、  １１４…被写体種類出力部、  １１５…被写体ＤＢ、  １２０…参考画像取得部、  １３０…参考画像ＤＢ、  １４０…提示部、  １５０…撮影過程情報取得部、  １６０…掲示情報加工部、  ２００…提示装置、  ２１０…提示部
【図１】
2015126502.tif 000003
【図２】
2015126502.tif 000004
【図３】
2015126502.tif 000005
【図４】
2015126502.tif 000006
【図５】
2015126502.tif 000007
【図６】
2015126502.tif 000008
【図７】
2015126502.tif 000009
【図８】
2015126502.tif 000010
【図９】
2015126502.tif 000011
【図１０】
2015126502.tif 000012
【図１１】
2015126502.tif 000013
【図１２】
2015126502.tif 000014
【図１３】
2015126502.tif 000015
【図１４】
2015126502.tif 000016
【図１５】
2015126502.tif 000017
【図１６】
2015126502.tif 000018
【図１７】
2015126502.tif 000019
【図１８】
2015126502.tif 000020