(57)【要約】  情報取得部２１によって、可視光画像で示されていない被写体状態を示す状態情報から、可視光画像の被写体に対応する状態情報、例えば温度情報や音場情報を取得する。エフェクト処理部２２では、情報取得部２１で取得された状態情報に基づき、可視光画像に対してエフェクト処理を行う。エフェクト処理では被写体の種別や温度に基づいたエフェクト成分画像の重畳や被写体画像の加工、音源の種別や音量に基づいたエフェクト成分画像の重畳や被写体画像の加工を行う。可視光画像に対して状態情報に応じたエフェクト処理が行われることによりリアリティ性を向上できる。
2017159003.tif 000002
【特許請求の範囲】
【請求項１】
可視光画像で示されていない被写体状態を示す状態情報から、前記可視光画像の被写体に対応する状態情報を取得する情報取得部と、
前記情報取得部で取得された状態情報に基づき、前記可視光画像に対してエフェクト処理を行うエフェクト処理部と
を備える画像処理装置。
【請求項２】
前記状態情報は温度情報であり、
前記エフェクト処理部は、温度に応じたエフェクト処理を行う
請求項１に記載の画像処理装置。
【請求項３】
前記情報取得部は、前記被写体の認識処理を行うことで前記被写体の種別情報を取得して、
前記エフェクト処理部は、前記状態情報と前記種別情報に基づき前記被写体の温度と種別に応じたエフェクト成分画像を、前記被写体の画像に対して重畳する
請求項２に記載の画像処理装置。
【請求項４】
前記エフェクト処理部は、温度に応じて生ずる視覚的に観測可能な現象を模式化した画像を、前記エフェクト成分画像として用いる
請求項３に記載の画像処理装置。
【請求項５】
前記エフェクト処理部は、前記エフェクト成分画像における属性を前記被写体の温度の違いに応じて制御する
請求項３に記載の画像処理装置。
【請求項６】
前記エフェクト処理部は、前記被写体の温度に応じて前記被写体の物理的状態の変化した画像に前記可視光画像における被写体画像を加工する
請求項２に記載の画像処理装置。
【請求項７】
前記エフェクト処理部は、前記物理的状態の変化を固相と液相間の変化とする
請求項６に記載の画像処理加装置。
【請求項８】
前記エフェクト処理部は、前記温度の違いに応じて、加工レベルを制御する
請求項６に記載の画像処理加装置。
【請求項９】
前記エフェクト処理部は、前記被写体の温度に応じて前記可視光画像の色調整を行う
請求項２に記載の画像処理装置。
【請求項１０】
前記エフェクト処理部は、前記被写体の温度が高いとき暖色系へ色調整して、温度が低い場合は寒色系へ色調整する
請求項９に記載の画像処理装置。
【請求項１１】
前記状態情報は音場情報であり、
前記エフェクト処理部は、前記音場情報に応じたエフェクト処理を行う
請求項１に記載の画像処理装置。
【請求項１２】
前記エフェクト処理部は、前記音場情報に基づく音源の位置と対応する前記可視光画像の被写体にエフェクト成分画像を重畳する
請求項１１に記載の画像処理装置。
【請求項１３】
前記エフェクト処理部は、前記音源から出力される音に関連付けられたエフェクト成分画像を、前記可視光画像の領域に重畳する
請求項１２に記載の画像処理装置。
【請求項１４】
前記エフェクト処理部は、前記音場情報に基づく音源から出力される音の強さに応じて、前記可視光画像に対するエフェクト量を調整する
請求項１１に記載の画像処理装置。
【請求項１５】
可視光画像で示されていない被写体状態を示す状態情報から、前記可視光画像の被写体に対応する状態情報を情報取得部で取得することと、
前記情報取得部で取得された状態情報に基づき、エフェクト処理部で前記可視光画像に対してエフェクト処理を行うことと
を含む画像処理方法。
【請求項１６】
可視光画像で示されていない被写体状態を示す状態情報から、前記可視光画像の被写体に対応する状態情報を取得する機能と、
前記可視光画像の被写体に対応する状態情報に基づき前記可視光画像に対してエフェクト処理を行う機能とを
コンピュータで実現させるプログラム。
【発明の詳細な説明】
【技術分野】
【０００１】
この技術は、画像処理装置と画像処理方法およびプログラムに関し、可視光画像のリアリティ性を向上できるようにする。
【背景技術】
【０００２】
従来、撮像装置を用いることで可視光画像を取得して、取得した可視光画像に対してコントラスト、明るさ、ホワイトバランス、色相、彩度などを調整することで好ましい写真を作成することが行われている。【０００３】
また、可視光画像で示されていない被写体状態を示す状態情報に基づき警報等が行われている。例えば、特許文献１では、赤外線撮像装置を用いて撮像を行い、被写体状態を示す状態情報として路面の温度情報を取得して、取得した温度情報に基づき路面画像において凍結していると推定した領域を強調して表示することが開示されている。【０００４】
また、非特許文献１では、人がスクリーンに生じさせた温度変化に応じて、このスクリーン上に写し出された画像の彩度や色相、三次元形状などを変化させることが行われている。
【先行技術文献】
【特許文献】
【０００５】
【特許文献１】特開２００９−２４８６６５号公報
【非特許文献】
【０００６】
【非特許文献１】岩井大輔，佐藤宏介  ”ThermoRetouch & ThermoModeler：熱感覚を利用した画像創作支援”  芸術科学会論文誌  第６巻第２号（２００７年）：６５−７５頁
【発明の概要】
【発明が解決しようとする課題】
【０００７】
ところで、可視光画像は、例えば被写体が高温の状態または低温の状態のいずれであっても視覚的に違いが生じなければ同一となり、リアリティ性が乏しい。また、特許文献１は、状態情報に基づき警報等を行う技術であり、可視光画像のリアリティ性を向上させることはできない。さらに、非特許技術文献１は、人がスクリーンに生じさせた温度変化に応じて画像を変化させる技術であって、画像の変化は被写体状態に関係していないことから、可視光画像のリアリティ性を向上させることはできない。【０００８】
そこで、この技術では、可視光画像のリアリティ性を向上できる画像処理装置と画像処理方法およびプログラムを提供することを目的とする。
【課題を解決するための手段】
【０００９】
この技術の第１の側面は、
可視光画像で示されていない被写体状態を示す状態情報から、前記可視光画像の被写体に対応する状態情報を取得する情報取得部と、
前記情報取得部で取得された状態情報に基づき、前記可視光画像に対してエフェクト処理を行うエフェクト処理部とを備える画像処理装置にある。【００１０】
この技術では、情報取得部によって、可視光画像で示されていない被写体状態を示す状態情報から、可視光画像の被写体に対応する状態情報、例えば温度情報や音場情報が取得される。エフェクト処理部では、情報取得部で取得された状態情報に基づき、可視光画像に対して温度情報や音場情報に基づきエフェクト処理が行われる。【００１１】
情報取得部では、被写体の認識処理を行うことで被写体の種別情報を取得して、エフェクト処理部は、エフェクト成分画像状態情報と種別情報に基づき被写体の温度と種別に応じたエフェクト成分画像を被写体画像に対して重畳する。また、温度の違いに応じてエフェクト成分画像における属性を制御する。エフェクト成分画像は温度に応じて生ずる視覚的に観測可能な現象を模式化した画像とする。また、エフェクト処理部は、被写体の温度に応じて被写体の物理的状態の変化例えば固相と液相間の変化を付加した画像に可視光画像における被写体画像を加工する。エフェクト処理部は、温度の違いに応じて、加工レベルを制御する。また、エフェクト処理部は、被写体の温度に応じて可視光画像の色調整を行い、被写体の温度が高いとき暖色系へ色調整して、温度が低い場合は寒色系へ色調整してもよい。状態情報が音場情報である場合、エフェクト処理部は、音場情報に基づく音源の位置と対応する可視光画像の被写体に、音源から出力される音に関連付けられたエフェクト成分画像を可視光画像の領域に重畳する。また、エフェクト処理部は、音源から出力される音の強さに応じて、可視光画像に対するエフェクト量を調整する。【００１２】
この技術の第２の側面は、
可視光画像で示されていない被写体状態を示す状態情報から、前記可視光画像の被写体に対応する状態情報を情報取得部で取得することと、
前記情報取得部で取得された状態情報に基づき、エフェクト処理部で前記可視光画像に対してエフェクト処理を行うこととを含む画像処理方法にある。【００１３】
この技術の第３の側面は、
可視光画像で示されていない被写体状態を示す状態情報から、前記可視光画像の被写体に対応する状態情報を取得する機能と、
前記可視光画像の被写体に対応する状態情報に基づき前記可視光画像に対してエフェクト処理を行う機能とをコンピュータで実現させるプログラムにある。【００１４】
なお、本技術のプログラムは、例えば、様々なプログラム・コードを実行可能な汎用コンピュータに対して、コンピュータ可読な形式で提供する記憶媒体、通信媒体、例えば、光ディスクや磁気ディスク、半導体メモリなどの記憶媒体、あるいは、ネットワークなどの通信媒体によって提供可能なプログラムである。このようなプログラムをコンピュータ可読な形式で提供することにより、コンピュータ上でプログラムに応じた処理が実現される。
【発明の効果】
【００１５】
この技術によれば、情報取得部によって、可視光画像で示されていない被写体状態を示す状態情報から、可視光画像の被写体に対応する状態情報が取得される。エフェクト処理部では、情報取得部で取得された状態情報に基づき、可視光画像に対してエフェクト処理を行う。このため、可視光画像のリアリティ性を向上できる。なお、本明細書に記載された効果はあくまで例示であって限定されるものではなく、また付加的な効果があってもよい。
【図面の簡単な説明】
【００１６】
【図１】画像処理装置を用いたシステムの構成を例示した図である。
【図２】画像処理装置の第１の実施の形態の構成を例示した図である。
【図３】第１の実施の形態の動作を示すフローチャートである。
【図４】第１の実施の形態の動作例を示す図である。
【図５】エフェクト成分画像の生成動作を説明するための図である。
【図６】画像処理装置の第２の実施の形態の構成を例示した図である。
【図７】第２の実施の形態の動作を示すフローチャートである。
【図８】第２の実施の形態の動作例として温度が高い場合を示した図である。
【図９】第２の実施の形態の動作例として温度が低い場合を示した図である。
【図１０】画像処理装置の第３の実施の形態の構成を例示した図である。
【図１１】第３の実施の形態の動作例として温度が低い場合を示した図である。
【図１２】第３の実施の形態の動作例として温度が高い場合を示した図である。
【図１３】第４の実施の形態の構成を例示した図である。
【図１４】エフェクト成分画像を用いてリアリティ性を向上させた可視光画像を例示した図である。
【図１５】エフェクト成分画像と加工制御情報を用いてリアリティ性を向上させた可視光画像を例示した図である。
【発明を実施するための形態】
【００１７】
以下、本技術を実施するための形態について説明する。なお、説明は以下の順序で行う。
１．画像処理装置の構成
２．第１の実施の形態
２−１．第１の実施の形態の構成
２−２．第１の実施の形態の動作
３．第２の実施の形態
３−１．第２の実施の形態の構成
３−２．第２の実施の形態の動作
４．第３の実施の形態
４−１．第３の実施の形態の構成
４−２．第３の実施の形態の動作
５．第４の実施の形態
５−１．第４の実施の形態の構成
５−２．第４の実施の形態の動作
６．他の実施の形態
【００１８】
＜１．画像処理装置の構成＞
図１は画像処理装置を用いたシステムの構成を例示している。システム１０は、可視光画像生成部１１と状態情報生成部１２および画像処理装置２０を有している。可視光画像生成部１１は、可視光画像の画像データを生成する装置であり、例えばカラーフィルタや撮像素子等を用いて構成された可視光領域に感度を持つ撮像装置が用いられる。可視光画像生成部１１は、被写体を写した可視光画像の画像データを生成して画像処理装置２０へ出力する。状態情報生成部１２は、可視光画像で示されていない被写体状態を示す状態情報を生成する装置である。例えば状態情報として温度情報を生成する場合、状態情報生成部１２は、マイクロボロメータ等を用いて構成された遠赤外光領域に感度を持つ赤外線撮像装置等が用いられる。また、例えば状態情報として音場情報を生成する場合、状態情報生成部１２は、複数のマイクロフォンが例えば二次元配置されたマイクアレイ装置等が用いられる。状態情報生成部１２は、可視光画像で示されていない被写体状態を示す状態情報を生成して画像処理装置２０へ出力する。
【００１９】
画像処理装置２０は、状態情報生成部１２で生成された状態情報に基づき、可視光画像生成部１１で生成された画像データの可視光画像に対して、状態情報生成部１２で生成された状態情報に基づいてリアリティ性を向上させるエフェクト処理を行う。画像処理装置２０は、情報取得部２１とエフェクト処理部２２を有している。情報取得部２１は、状態情報生成部１２で生成された状態情報から、可視光画像の被写体に対応する状態情報を取得する。エフェクト処理部２２は、情報取得部２１で取得された状態情報に基づき可視光画像に対してエフェクト処理を行う。
【００２０】
＜２．第１の実施の形態＞
第１の実施の形態では、状態情報が温度情報であり、画像処理装置は、被写体の温度に応じたエフェクト成分画像を可視光画像に重畳することで、可視光画像のリアリティ性を向上させる。
【００２１】
＜２−１．第１の実施の形態の構成＞
図２は、画像処理装置の第１の実施の形態の構成を例示している。画像処理装置２０-1は、情報取得部２１-1とエフェクト処理部２２-1を有している。エフェクト処理部２２-1は、エフェクト成分画像生成部２２１とエフェクト成分画像重畳部２２２を有している。
【００２２】
情報取得部２１-1は、可視光画像に基づき被写体の認識処理と領域分割処理を行う。情報取得部２１-1は、認識処理によって被写体がどのような種別の物体であるか判別して種別情報を生成する。また、情報取得部２１-1は、領域分割処理によって被写体の領域を判別する。認識処理と領域分割処理は、例えば文献「Shotton，Jamie，et al．”Textonboost：Joint appearance，shape and context modeling for multi-class object recognition and segmentation．”Computer Vision ECCV 2006．Springer Berlin Heidelberg，2006．1-15」で開示されている技術を用いることで、被写体の種別や領域を判別できる。また、情報取得部２１-1は、状態情報生成部１２で生成された状態情報である温度情報から、領域分割処理の処理結果に基づき、被写体毎の温度情報を取得する。さらに、情報取得部２１-1は、温度情報と種別の判別結果の整合性を確認してもよい。整合性の確認を行うことで、例えば人物が誤って木と判別されても、温度情報に基づき被写体は木でないことを検出できるので、認識処理の精度を高めることができる。情報取得部２１-1は、被写体の種別情報と可視光画像における領域および温度情報を被写体毎に取得してエフェクト処理部２２-1のエフェクト成分画像生成部２２１へ出力する。
【００２３】
エフェクト成分画像生成部２２１は、被写体の種別情報と温度情報に基づき、被写体の種別よび温度に応じて、リアリティ性を向上させるためのエフェクト成分画像を生成する。エフェクト成分画像は、温度に応じて被写体に生ずる視覚的に観測可能な現象を模式化した画像である。例えば、被写体が飲み物用容器である場合、飲み物用容器の液体が高温であると飲み物用容器の上方に湯気が生じ、低温であると飲み物用容器の周囲に水滴が生じる。したがって、エフェクト成分画像生成部２２１は、例えば湯気や水滴等を個々に示す予め生成した要素画像を用いて、飲み物用容器に対するエフェクト成分画像を生成する。また、エフェクト成分画像生成部２２１は、温度情報に基づきエフェクト成分画像の属性、例えば要素画像の大きさや数を制御してもよい。エフェクト成分画像生成部２２１は、例えば温度が高くなるに伴い湯気を示す要素画像のサイズを大きくしたり要素画像の数を多くする。また、温度が低くなるに伴い水滴を示す要素画像の数を多くしてもよい。エフェクト成分画像生成部２２１は、生成したエフェクト成分画像をエフェクト成分画像重畳部２２２へ出力する。なお、エフェクト成分画像生成部２２１は、被写体の種別および温度に応じたエフェクト成分画像を予め記憶して、情報取得部２１-1から供給された種別情報と温度情報に基づき、種別と温度に対応したエフェクト成分画像を選択してエフェクト成分画像重畳部２２２へ出力してもよい。
【００２４】
エフェクト成分画像重畳部２２２は、エフェクト成分画像生成部２２１で生成されたエフェクト成分画像を、対応する被写体の画像に重畳することで可視光画像のリアリティ性を向上させる。被写体の画像領域は、上述の領域分割処理で判別されている。また、エフェクト成分画像は、画像領域が判別されている被写体の種別や温度に応じて生成されている。したがって、エフェクト成分画像重畳部２２２は、エフェクト成分画像を対応する被写体の画像に対して重畳できる。なお、被写体の画像に対するエフェクト成分画像の重畳とは、被写体の画像上にエフェクト成分画像を重畳する場合に限らず、被写体の画像を基準とした位置にエフェクト成分画像を重畳する場合も含む。例えば、水滴を示すエフェクト成分画像は飲み物用容器の画像上に重畳する。また、湯気を示すエフェクト成分画像は飲み物用容器の画像を基準として、飲み物用容器の画像上方の位置に重畳する。なお、エフェクト成分画像重畳部２２２は、被写体の画像領域のサイズに応じてエフェクト成分画像のサイズを調整すれば、被写体の画像に対して適切なサイズのエフェクト成分画像を重畳できる。また、エフェクト成分画像は、エフェクト成分画像生成部２２１によって被写体の画像領域のサイズに応じて生成してもよい。エフェクト成分画像重畳部２２２は、エフェクト成分画像を重畳させてリアリティ性を向上させた可視光画像を、記録媒体に記録または外部機器例えば表示装置や記録装置等へ出力する。
【００２５】
＜２−２．第１の実施の形態の動作＞
図３は、第１の実施の形態の動作を示すフローチャートである。ステップＳＴ１でエフェクト処理部２２-1は、エフェクト処理を行う被写体を示すパラメータ値ｉの初期化を行い、パラメータ値ｉを「０」としてステップＳＴ２に進む。
【００２６】
ステップＳＴ２でエフェクト処理部２２-1は被写体の数を対象数Ｎに設定する。エフェクト処理部２２-1は、情報取得部２１-1で認識処理と領域分割処理を行うことにより判別された被写体の数を対象数Ｎに設定してステップＳＴ３に進む。
【００２７】
ステップＳＴ３でエフェクト処理部２２-1はエフェクト成分画像の初期化を行い、可視光画像に重畳するエフェクト成分画像を生成していない状態としてステップＳＴ４に進む。
【００２８】
ステップＳＴ４でエフェクト処理部２２-1は、パラメータ値ｉが対象数Ｎよりも小さいか判別する。エフェクト処理部２２-1は、パラメータ値ｉが対象数Ｎよりも小さい場合にステップＳＴ５に進み、パラメータ値ｉが対象数Ｎ以上となった場合に処理を終了する。
【００２９】
ステップＳＴ５でエフェクト処理部２２-1は、要素画像の候補を選択する。エフェクト処理部２２-1のエフェクト成分画像生成部２２１は、ｉ番目の被写体の種別に対応した要素画像の候補を選択してステップＳＴ６に進む。
【００３０】
ステップＳＴ６でエフェクト処理部２２-1は、候補から要素画像を選択する。エフェクト処理部２２-1のエフェクト成分画像生成部２２１は、ステップＳＴ５で選択された要素画像の候補から、ｉ番目の被写体の温度情報に基づき、エフェクト成分画像の生成に用いる要素画像を選択してステップＳＴ７に進む。
【００３１】
ステップＳＴ７でエフェクト処理部２２-1は、エフェクト成分画像を生成する。エフェクト処理部２２-1のエフェクト成分画像生成部２２１は、ｉ番目の被写体の温度情報に基づき、ステップＳＴ６で選択された要素画像の画像サイズおよび／または数を調整する。また、エフェクト成分画像生成部２２１は、ｉ番目の被写体の画像に対して重畳するエフェクト成分画像を、調整後の画像サイズや数の要素画像を用いて生成してステップＳＴ８に進む。
【００３２】
ステップＳＴ８でエフェクト処理部２２-1は、エフェクト成分画像を重畳する。エフェクト処理部２２-1のエフェクト成分画像重畳部２２２は、可視光画像におけるｉ番目の被写体の画像に対して、ステップＳＴ７で生成したエフェクト成分画像を重畳してステップＳＴ９に進む。
【００３３】
ステップＳＴ９でエフェクト処理部２２-1は、パラメータ値ｉの更新を行い、パラメータ値ｉを「ｉ＝ｉ＋１」としてステップＳＴ４に戻る。
【００３４】
エフェクト処理部２２-1は、図３に示すフローチャートの処理を行い、情報取得部２１-1で判別された被写体毎に、エフェクト成分画像の生成処理および可視光画像に対するエフェクト成分画像の重畳処理を行い、リアリティ性が向上した可視光画像を生成する。
【００３５】
図４は、第１の実施の形態の動作例を示している。また、図５は、エフェクト成分画像の生成動作を説明するための図である。
【００３６】
図４の（ａ）は、可視光画像生成部１１から出力された画像データに基づく可視光画像を例示しており、図４の（ｂ）は、状態情報生成部１２から出力された状態情報に基づく温度画像を例示している。温度画像は、輝度が高くなるに伴い温度が高く、輝度が低くなるに伴い温度が低いことを示しており、可視光画像の被写体例えばコーヒーカップＯＢａは高温で、ビアグラスＯＢｂは低温であることを温度画像から判別できる。
【００３７】
図５の（ａ）は予め登録されている要素画像を例示している。要素画像は、温度に応じて生ずる視覚的に観測可能な現象を模式化しており、例えば高温のときに生じる湯気、低温のときに生じる水滴、低温のときに生じる体の震え等を模式化した画像が、登録されている。
【００３８】
図５の（ｂ）は候補として選択された要素画像を例示している。エフェクト成分画像生成部２２１は、被写体がコーヒーカップやビアグラスのように飲み物用容器である場合、飲み物用容器で生ずる湯気や水滴を模式化した要素画像を候補として選択する。
【００３９】
図５の（ｃ）は、候補からコーヒーカップの温度情報に基づいて選択された要素画像を示している。図４の（ｂ）に示すように、温度情報によってコーヒーカップＯＢａは高温であることが示されている。したがって、エフェクト成分画像生成部２２１は、コーヒーカップＯＢａが高温であることから湯気を模式化した要素画像を選択する。さらに、エフェクト成分画像生成部２２１は、コーヒーカップＯＢａの温度情報に基づき、例えばコーヒーカップＯＢａの温度が高くなるに伴い湯気を示す要素画像のサイズを大きくしたり要素画像の数を多くして、図５の（ｄ）に示すエフェクト成分画像ＥＯＢａを生成する。
【００４０】
図５の（ｅ）は、候補からビアグラスの温度情報に基づいて選択された要素画像を示している。図４の（ｂ）に示すように、温度情報によってビアグラスＯＢｂは低温であることが示されている。したがって、エフェクト成分画像生成部２２１は、ビアグラスＯＢｂが低温であることから水滴を模式化した要素画像を選択する。さらに、エフェクト成分画像生成部２２１は、ビアグラスＯＢｂの温度情報に基づき、例えばビアグラスＯＢｂの温度が低くなるに伴い水滴を示す要素画像の数を多くして、図５の（ｆ）に示すビアグラスＯＢｂに対するエフェクト成分画像ＥＯＢｂを生成する。
【００４１】
エフェクト成分画像重畳部２２２は、被写体の種別情報や温度情報に応じて生成したエフェクト成分画像を、可視光画像における対応する被写体画像に対して、被写体の領域サイズに対応した画サイズとして重畳する。したがって、図４の（ｃ）に示すように、コーヒーカップＯＢａの画像に対しては湯気を示すエフェクト画像ＥＯＢａが適切な位置に適切なサイズで重畳される。また、ビアグラスＯＢｂの画像に対しては水滴を示すエフェクト画像ＥＯＢｂが適切な位置に適切なサイズで重畳される。このため、画像処理装置２０-1からリアリティ性が向上された可視光画像を出力できる。
【００４２】
このように、第１の実施の形態によれば、可視光画像における被写体の画像に対して、被写体の種別や温度に応じて生成されたエフェクト成分画像が対応する被写体の画像に対して重畳される。したがって、撮像対象や撮像状況を反映したリアリティのある可視光画像を生成できる。また、実際の被写体の温度情報に基づいてエフェクトが付加されるので自然なエフェクト効果を保つことができる。
【００４３】
＜３．第２の実施の形態＞
第２の実施の形態では、状態情報が温度情報であり、画像処理装置は、可視光画像における被写体の画像を被写体の物理的状態の変化に応じて加工することで、可視光画像のリアリティ性を向上させる。
【００４４】
＜３−１．第２の実施の形態の構成＞
図６は、画像処理装置の第２の実施の形態の構成を例示している。画像処理装置２０-2は、情報取得部２１-2とエフェクト処理部２２-2を有している。エフェクト処理部２２-2は、エフェクト加工設定部２２３と画像加工部２２４を有している。
【００４５】
情報取得部２１-2は、情報取得部２１-1と同様に、可視光画像に基づき被写体の認識処理と領域分割処理を行う。情報取得部２１-2は、認識処理によって被写体がどのような種別の物体であるか判別して種別情報を生成する。また、情報取得部２１-2は、領域分割処理によって被写体の画像領域を判別する。また、情報取得部２１-2は、状態情報生成部１２で生成された状態情報である温度情報から、領域分割処理の処理結果に基づき、被写体毎の温度情報を取得する。さらに、情報取得部２１-2は、温度情報と種別の判別結果の整合性を確認して、認識処理の精度を高めてもよい。情報取得部２１-2は、被写体の種別情報と可視光画像における領域および温度情報を被写体毎に取得してエフェクト処理部２２-2のエフェクト加工設定部２２３へ出力する。
【００４６】
エフェクト加工設定部２２３は、被写体の種別情報と温度情報に基づき、被写体の種別よび温度に応じて、リアリティ性を向上させるエフェクト加工の設定を行う。エフェクト加工設定部２２３は、実施可能なエフェクト加工毎に予め加工制御情報を記憶している。加工制御情報は、可視光画像における被写体画像を、種別情報で示された物体の温度に応じた物理的状態の変化を生じている画像に加工するための制御情報である。例えば加工制御情報としては、熱によって大気のゆらぎが生じているような画像に加工する制御情報、固相と液相間の物理的状態の変化が生じて例えば水面が凍結しているような画像に加工する制御情報等を記憶している。エフェクト加工設定部２２３は、被写体の種別や温度に応じた加工制御情報を選択する。また、エフェクト加工設定部２２３は、被写体の温度に応じて加工制御情報を調整して加工レベルを変化させてもよい。例えば温度が高くなるに伴いゆらぎが大きくなるように加工レベルを変化させる。また、温度が低くなるに伴い凍結感が高くなるように加工レベルを変化させる。エフェクト加工設定部２２３は、設定した加工制御情報を画像加工部２２４へ出力する。
【００４７】
画像加工部２２４は、エフェクト加工設定部２２３で設定された加工制御情報を用いて、対応する被写体の画像領域に対して加工処理を行うことで可視光画像のリアリティ性を向上させる。被写体の画像領域は、上述の領域分割処理で判別されており、加工制御情報は、画像領域が判別されている被写体の種別や温度に応じて設定されている。したがって、画像加工部２２４は、加工制御情報を用いて対応する被写体の画像の加工処理を行うことができる。画像加工部２２４は、被写体の画像を被写体の種別や温度に応じて加工することでリアリティ性を向上させた可視光画像を生成して、記録媒体に記録または外部機器例えば表示装置や記録装置等へ出力する。
【００４８】
＜３−２．第２の実施の形態の動作＞
図７は、第２の実施の形態の動作を示すフローチャートである。ステップＳＴ１１でエフェクト処理部２２-2は、エフェクト処理を行う被写体を示すパラメータ値ｉの初期化を行い、パラメータ値ｉを「０」としてステップＳＴ１２に進む。
【００４９】
ステップＳＴ１２でエフェクト処理部２２-2は被写体の数を対象数Ｎに設定する。エフェクト処理部２２-2は、情報取得部２１-2で認識処理と領域分割処理を行うことにより判別された被写体の数を対象数Ｎに設定してステップＳＴ１３に進む。
【００５０】
ステップＳＴ１３でエフェクト処理部２２-2は加工制御情報の初期化を行い、加工制御情報を可視光画像に対する加工が行われない状態としてステップＳＴ１４に進む。
【００５１】
ステップＳＴ１４でエフェクト処理部２２-2は、パラメータ値ｉが対象数Ｎよりも小さいか判別する。エフェクト処理部２２-2は、パラメータ値ｉが対象数Ｎよりも小さい場合にステップＳＴ１５に進み、パラメータ値ｉが対象数Ｎ以上となった場合に処理を終了する。
【００５２】
ステップＳＴ１５でエフェクト処理部２２-2は、加工制御情報を選択する。エフェクト処理部２２-2のエフェクト加工設定部２２３は、ｉ番目の被写体の種別および温度情報に基づき加工制御情報を選択してステップＳＴ１６に進む。
【００５３】
ステップＳＴ１６でエフェクト処理部２２-2は、加工制御情報を設定する。エフェクト処理部２２-2のエフェクト加工設定部２２３は、ｉ番目の被写体の温度情報に基づきステップＳＴ１５で設定された加工制御情報の調整を行い、温度に応じた加工レベルとなるように加工制御情報を設定してステップＳＴ１７に進む。
【００５４】
ステップＳＴ１７でエフェクト処理部２２-2は、画像加工処理を行う。エフェクト処理部２２-2の画像加工部２２４は、可視光画像におけるｉ番目の被写体の画像に対して、ステップＳＴ１６で設定された加工制御情報を用いて加工処理を行いステップＳＴ１８に進む。
【００５５】
ステップＳＴ１８でエフェクト処理部２２-2は、パラメータ値ｉの更新を行い、パラメータ値ｉを「ｉ＝ｉ＋１」としてステップＳＴ１４に戻る。
【００５６】
エフェクト処理部２２-2は、図７に示すフローチャートの処理を行い、情報取得部２１-2で判別された被写体毎に加工処理を行い、リアリティ性が向上した可視光画像を生成する。
【００５７】
図８は、第２の実施の形態の動作例として温度が高い場合を示している。図８の（ａ）は例えば屋外の被写体（例えば電柱）ＯＢｃが写り込んだ画像である。温度情報によって、被写体ＯＢｃの温度が高温であることが示された場合、画像加工部２２４では、温度情報等に基づいて設定された加工制御情報に基づき、被写体ＯＢｃの画像に対して大気のゆらぎが生じているような加工処理を行う。したがって、画像処理装置２０-2は、図８の（ｂ）に示すように、可視光画像に対して高温であることを表現したエフェクト（例えばゆらぎ）を付加してリアリティ性を向上させた可視光画像を生成できる。
【００５８】
図９は、第２の実施の形態の動作例として温度が低い場合を示している。図９の（ａ）は例えば屋外を撮像した画像である。温度情報によって、屋外の被写体（例えば湖面）ＯＢｄの温度が低温であることが示された場合、画像加工部２２４では、温度情報等に基づいて設定された加工制御情報に基づき、被写体ＯＢｄの画像に対して凍結を生じているような加工処理を行う。したがって、画像処理装置２０-2は、図９の（ｂ）に示すように、可視光画像に対して低温であることを表現したエフェクト（凍結表示）を付加してリアリティ性を向上させた可視光画像を生成できる。
【００５９】
このように、第２の実施の形態によれば、可視光画像における被写体の画像に対して、被写体の種別や温度に応じて設定された加工制御情報に基づき対応する被写体の画像に対して加工が行われる。したがって、撮像対象や撮像状況を反映したリアリティのある可視光画像を生成できる。また、実際の被写体の温度情報に基づいてエフェクトが付加されるので自然なエフェクト効果を保つことができる。
【００６０】
＜４．第３の実施の形態＞
第３の実施の形態では、状態情報が温度情報であり、画像処理装置は、色調整を行うことで、可視光画像のリアリティ性を向上させる。
【００６１】
＜４−１．第３の実施の形態の構成＞
図１０は、画像処理装置の第３の実施の形態の構成を例示している。画像処理装置２０-3は、情報取得部２１-3とエフェクト処理部２２-3を有している。エフェクト処理部２２-3は、エフェクト調整設定部２２５と色調整部２２６を有している。
【００６２】
情報取得部２１-3は、可視光画像に基づき被写体の認識処理と領域分割処理を行う。情報取得部２１-3は、認識処理によって注目被写体を判別する。また、情報取得部２１-3は、状態情報生成部１２で生成された状態情報である温度情報から、領域分割処理によって判別した注目被写体の領域に対応する温度情報を取得する。さらに、情報取得部２１-3は、取得した注目被写体の温度情報をエフェクト処理部２２-3のエフェクト調整設定部２２５へ出力する。なお、情報取得部２１-3は、温度画像の平均温度値または中央領域の平均温度、あるいは等しい温度の領域が最も広くなる温度等を示す温度情報をエフェクト調整設定部２２５へ出力してもよい。
【００６３】
エフェクト調整設定部２２５は、状態情報生成部１２から出力された状態情報である温度情報に基づき、リアリティ性を向上させる色調整（色温度変換）の設定を行う。エフェクト調整設定部２２５は、温度情報で示された温度に応じて調整制御情報を設定する。調整制御情報は、可視光画像を暖色系または寒色系に調整する制御情報である。エフェクト調整設定部２２５は、設定した調整制御情報を色調整部２２６へ出力する。
【００６４】
色調整部２２６は、エフェクト調整設定部２２５で設定された調整制御情報を用いて、ホワイトバランス調整が行われた可視光画像に対して色調整（色温度変換）を行うことで、可視光画像のリアリティ性を向上させる。色調整部２２６は、温度に応じて色調整を行うことでリアリティ性を向上させた可視光画像を生成して、記録媒体に記録または外部機器例えば表示装置や記録装置等へ出力する。
【００６５】
なお、画像処理装置２０-3は、第２の実施の形態のように被写体毎に温度情報を抽出して、抽出した温度情報に基づき、被写体毎に色調整を行うことで、リアリティ性を向上させた可視光画像を生成してもよい。
【００６６】
＜４−２．第３の実施の形態の動作＞
図１１は、第３の実施の形態の動作例として温度が低い場合を示している。図１１の（ａ）は例えば屋外を撮像した画像である。温度情報によって、屋外の温度が低温であることが示された場合、色調整部２２６では、温度情報等に基づいて設定された調整制御情報に基づき、可視光画像を寒色系の色とする色調整（色温度を高くする色温度変換）を行う。したがって、画像処理装置２０-3は、図１１の（ｂ）に示すように、可視光画像に対して低温であることを表現したエフェクトを付加してリアリティ性を向上させた可視光画像を生成できる。
【００６７】
図１２は、第３の実施の形態の動作例として温度が高い場合を示している。図１２の（ａ）は例えば屋外を撮像した画像である。温度情報によって、屋外の温度が高温であることが示された場合、色調整部２２６では、温度情報等に基づいて設定された調整制御情報に基づき、可視光画像を暖色系の色とする色調整（色温度を低くする色温度変換）を行う。したがって、画像処理装置２０-3は、図１２の（ｂ）に示すように、可視光画像に対して高温であることを表現したエフェクトを付加してリアリティ性を向上させた可視光画像を生成できる。
【００６８】
このように、第３の実施の形態によれば、ホワイトバランス調整が行われた可視光画像に対して、温度に応じて設定された調整制御情報に基づき色調整（色温度調整）が行われる。したがって、撮像状況が反映されて温度感の強調されたリアリティのある可視光画像を生成できる。また、実際の温度情報に基づいてエフェクトが付加されるので自然なエフェクト効果を保つことができる。
【００６９】
＜５．第４の実施の形態＞
第４の実施の形態では、状態情報が音場情報であり、画像処理装置は、画像処理装置は、音場情報に応じたエフェクト成分画像を可視光画像に重畳することで、可視光画像のリアリティ性を向上させる。また、画像処理装置は、可視光画像における被写体画像を音場情報に応じて加工することで、可視光画像のリアリティ性を向上させる。
【００７０】
＜５−１．第４の実施の形態の構成＞
図１３は第４の実施の形態の構成を例示している。画像処理装置２０-4は、情報取得部２１-4とエフェクト処理部２２-4を有している。エフェクト処理部２２-4は、画像生成・加工設定部２２７と重畳・加工部２２８を有している。
【００７１】
情報取得部２１-4は、状態情報生成部１２で生成された音場情報から音源の方向や音源の種別を判別する。音源の方向は、例えば文献「牧野昭二，et al ”独立成分分析に基づくブラインド音源分離”信学技報  EA2003-45  103．129 （2003）：17-24」で開示されている技術を用いて判別することができる。また、音源の種別は、例えば文献「糸山克寿，奥乃博”楽器音に対する仮想音源のパラメータ推定”情報処理学会研究報告 2013 （2013）」で開示されている技術を用いる。この技術によれば、音源分離を行った際の雑音や歪みを持つ楽器音に対して、それらを含まないクリーンな楽器音を得るための仮想楽器音源のパラメータを推定することができるので、このパラメータを利用することで、対象の種別を推定できる。情報取得部２１-4は、音源の方向や音源の種別を取得して、エフェクト処理部２２-4の画像生成・加工設定部２２７へ出力する。
【００７２】
画像生成・加工設定部２２７は、音源の種別に基づきリアリティ性を向上させるエフェクト成分画像を生成する。画像生成・加工設定部２２７は、例えば音源の種別に応じた要素画像を用いてエフェクト成分画像を生成する。要素画像としては、例えば打楽器に対しては、歯切れのよいエフェクトを付加できるように振動等を示す要素画像を用意する。管楽器に対しては、管から音が出ているようなエフェクトを付加できるように音符等を示す要素画像を用意する。弦楽器に対しては、メロディを奏でているようなエフェクトを付加できるように楽譜等を示す要素画像を用意する。また、要素画像は、楽器に限らず車両から出力される音等に応じた要素画像、例えば車のクラクション音に対して警笛マーク等を示す要素画像等を用意してもよい。
【００７３】
また、画像生成・加工設定部２２７は、音場情報に基づきエフェクト成分画像の属性、例えば要素画像の大きさや数を制御してもよい。エフェクト成分画像生成部２２１は、例えば音が強くなるに伴い要素画像のサイズを大きくしたり要素画像の数を多くする。画像生成・加工設定部２２７は、生成したエフェクト成分画像を重畳・加工部２２８へ出力する。
【００７４】
また、画像生成・加工設定部２２７は、音場情報で示された音の強さに応じて、リアリティ性を向上させるエフェクト加工の設定を行ってもよい。画像生成・加工設定部２２７は、音場情報に対して予め複数のエフェクト加工に関する加工制御情報を記憶している。加工制御情報は、可視光画像における被写体画像を、音源の種別や音の強さ等に基づいて加工する制御情報である。加工制御情報としては、例えば音によって被写体がブラー効果を生じているような画像に加工する加工制御情報、音によって被写体がゆらぎを生じているような画像に加工する加工制御情報等を記憶している。画像生成・加工設定部２２７は、音源の種別等に応じた加工制御情報を選択する。また、画像生成・加工設定部２２７は、音の強さに応じて加工制御情報を調整して加工レベルを変化させてもよい。画像生成・加工設定部２２７は、設定した加工制御情報を重畳・加工部２２８へ出力する。
【００７５】
重畳・加工部２２８は、画像生成・加工設定部２２７で生成されたエフェクト成分画像や画像生成・加工設定部２２７で設定された加工制御情報を用いて、対応する被写体の画像領域に対して処理を行うことで可視光画像のリアリティ性を向上させる。重畳・加工部２２８は、音源の被写体画像に対して画像生成・加工設定部２２７で生成されたエフェクト成分画像を重畳させる。また、重畳・加工部２２８は、音源の被写体画像や他の被写体画像に対して加工制御情報に応じた加工処理を行う。重畳・加工部２２８は、音源の位置にエフェクト成分画像を重畳して、例えば音源とは異なる被写体画像に対して画像の加工を行うことで、リアリティ性を向上させた可視光画像を生成する。また、重畳・加工部２２８は、生成した可視光画像を記録媒体に記録または外部機器例えば表示装置や記録装置等へ出力する。
【００７６】
なお、画像生成・加工設定部２２７は、エフェクト成分画像の生成と加工制御情報の設定のいずれか一方のみを行い、重畳・加工部２２８は、画像生成・加工設定部２２７からの出力に基づいてエフェクト成分画像の重畳または可視光画像に対する加工を行うようにしてもよい。
【００７７】
＜５−２．第４の実施の動作＞
図１４は、エフェクト成分画像を用いてリアリティ性を向上させた可視光画像を例示している。図１４の（ａ）は、打楽器ＯＢｅと管楽器ＯＢｆと弦楽器ＯＢｇの演奏者を撮像した可視光画像を示している。重畳・加工部２２８は、例えば打楽器ＯＢｅを示す画像の位置に画像生成・加工設定部２２７で音源の種別に応じて生成したエフェクト成分画像を重畳する。また、重畳・加工部２２８は、管楽器ＯＢｆを示す画像の位置に画像生成・加工設定部２２７で音源の種別に応じて生成したエフェクト成分画像を重畳する。さらに、重畳・加工部２２８は、弦楽器ＯＢｇを示す画像の位置に画像生成・加工設定部２２７で音源の種別に応じて生成したエフェクト成分画像を重畳する。したがって、画像処理装置２０-4は、図１４の（ｂ）に示すように、可視光画像に対して音源の種別に応じたエフェクトを付加してリアリティ性を向上させた可視光画像を生成できる。なお、図１４の（ｂ）に示す可視光画像では、打楽器ＯＢｅを示す画像の位置に振動を示すエフェクト成分画像ＥＯＢｅ、管楽器ＯＢｆを示す画像の位置に音符を示すエフェクト成分画像ＥＯＢｆ、弦楽器ＯＢｇを示す画像の位置に楽譜を示すエフェクト成分画像ＥＯＢｇが重畳されている。
【００７８】
図１５は、エフェクト成分画像と加工制御情報を用いてリアリティ性を向上させた可視光画像を例示している。図１５の（ａ）は、スピーカと聴取者と共に撮像された可視光画像を示している。重畳・加工部２２８は、画像生成・加工設定部２２７で音源の種別や音の強さに応じて設定した加工制御情報を用いて聴取者ＯＢｈの画像を例えば振動を表すブラー効果が生じた画像へ加工する。また、重畳・加工部２２８は、画像生成・加工設定部２２７で音源の種別に応じて生成したエフェクト成分画像を、スピーカ（音源）ＯＢｊを示す画像に対して重畳する。したがって、画像処理装置２０-4は、図１５の（ｂ）に示すように、可視光画像に対して音の強さに応じたエフェクトを付加してリアリティ性を向上させた可視光画像を生成できる。なお、図１５の（ｂ）に示す可視光画像では、聴取者ＯＢｈの画像がブラー効果を生じた画像とされており、スピーカＯＢｊを示す画像の位置に
振動を示すエフェクト成分画像ＥＯＢｊが重畳されている。
【００７９】
このように、第４の実施の形態によれば、可視光画像における被写体の画像に対して、音源の種別や音の強さに応じて生成されたエフェクト成分画像が音源の画像に対して重畳される。また、音の強さに応じて設定された加工制御情報に基づき音源の周囲に位置する被写体の画像に対して加工が行われる。したがって、撮像対象や撮像状況を反映したリアリティのある可視光画像を生成できる。また、実際の音場状態に基づいてエフェクトが付加されるので自然なエフェクト効果を保つことができる。
【００８０】
＜６．他の実施の形態＞
第１乃至第３の実施の形態は、個々に行ってもよく、組み合わせて行うようにしてもよい。例えば第１の実施の形態と第２の実施の形態を組み合わせて、第４の実施の形態のようにエフェクト成分画像の重畳と加工制御情報に基づく画像加工を行い、リアリティ性が向上された可視光画像を生成してもよい。また、第４の実施の形態では、エフェクト成分画像の重畳と加工制御情報に基づく画像加工を行っているが、いずれか一方のみを行ってリアリティ性が向上された可視光画像を生成してもよい。さらに、状態情報として温度情報と音場情報を用いて、第１乃至第４の実施の形態を組み合わせて行うようにしてもよい。
【００８１】
明細書中において説明した一連の処理はハードウェア、またはソフトウェア、あるいは両者の複合構成によって実行することが可能である。ソフトウェアによる処理を実行する場合は、処理シーケンスを記録したプログラムを、専用のハードウェアに組み込まれたコンピュータ内のメモリにインストールして実行させる。または、各種処理が実行可能な汎用コンピュータにプログラムをインストールして実行させることが可能である。
【００８２】
例えば、プログラムは記録媒体としてのハードディスクやＳＳＤ（Solid State Drive）、ＲＯＭ（Read Only Memory）に予め記録しておくことができる。あるいは、プログラムはフレキシブルディスク、ＣＤ−ＲＯＭ（Compact Disc Read Only Memory），ＭＯ（Magneto optical）ディスク，ＤＶＤ（Digital Versatile Disc）、ＢＤ（Blu-Ray Disc（登録商標））、磁気ディスク、半導体メモリカード等のリムーバブル記録媒体に、一時的または永続的に格納（記録）しておくことができる。このようなリムーバブル記録媒体は、いわゆるパッケージソフトウェアとして提供することができる。
【００８３】
また、プログラムは、リムーバブル記録媒体からコンピュータにインストールする他、ダウンロードサイトからＬＡＮ（Local Area Network）やインターネット等のネットワークを介して、コンピュータに無線または有線で転送してもよい。コンピュータでは、そのようにして転送されてくるプログラムを受信し、内蔵するハードディスク等の記録媒体にインストールすることができる。
【００８４】
なお、本明細書に記載した効果はあくまで例示であって限定されるものではなく、記載されていない付加的な効果があってもよい。また、本技術は、上述した技術の実施の形態に限定して解釈されるべきではない。この技術の実施の形態は、例示という形態で本技術を開示しており、本技術の要旨を逸脱しない範囲で当業者が実施の形態の修正や代用をなし得ることは自明である。すなわち、本技術の要旨を判断するためには、請求の範囲を参酌すべきである。
【００８５】
また、本技術の画像処理装置は以下のような構成も取ることができる。
（１）  可視光画像で示されていない被写体状態を示す状態情報から、前記可視光画像の被写体に対応する状態情報を取得する情報取得部と、
前記情報取得部で取得された状態情報に基づき、前記可視光画像に対してエフェクト処理を行うエフェクト処理部とを備える画像処理装置。
（２）  前記状態情報は温度情報であり、
前記エフェクト処理部は、温度に応じたエフェクト処理を行う（１）に記載の画像処理装置。
（３）  前記情報取得部は、前記被写体の認識処理を行うことで前記被写体の種別情報を取得して、
前記エフェクト処理部は、前記状態情報と前記種別情報に基づき前記被写体の温度と種別に応じたエフェクト成分画像を、前記被写体の画像に対して重畳する（２）に記載の画像処理装置。
（４）  前記エフェクト処理部は、温度に応じて生ずる視覚的に観測可能な現象を模式化した画像を、前記エフェクト成分画像として用いる（３）に記載の画像処理装置。
（５）  前記エフェクト処理部は、前記エフェクト成分画像における属性を前記被写体の温度の違いに応じて制御する（３）または（４）に記載の画像処理装置。
（６）  前記エフェクト処理部は、前記被写体の温度に応じて前記被写体の物理的状態の変化した画像に前記可視光画像における被写体画像を加工する（２）乃至（５）のいずれかに記載の画像処理装置。
（７）  前記エフェクト処理部は、前記物理的状態の変化を固相と液相間の変化とする（６）に記載の画像処理加装置。
（８）  前記エフェクト処理部は、前記温度の違いに応じて、加工レベルを制御する（６）または（７）に記載の画像処理加装置。
（９）  前記エフェクト処理部は、前記被写体の温度に応じて前記可視光画像の色調整を行う（２）乃至（８）のいずれかに記載の画像処理装置。
（１０）  前記エフェクト処理部は、前記被写体の温度が高いとき暖色系へ色調整して、温度が低い場合は寒色系へ色調整する（９）に記載の画像処理装置。
（１１）  前記状態情報は音場情報であり、
前記エフェクト処理部は、前記音場情報に応じたエフェクト処理を行う（１）乃至（１０）のいずれかに記載の画像処理装置。
（１２）  前記エフェクト処理部は、前記音場情報に基づく音源の位置と対応する前記可視光画像の被写体にエフェクト成分画像を重畳する（１１）に記載の画像処理装置。
（１３）  前記エフェクト処理部は、前記音源から出力される音に関連付けられたエフェクト成分画像を、前記可視光画像の領域に重畳する（１２）に記載の画像処理装置。
（１４）  前記エフェクト処理部は、前記音場情報に基づく音源から出力される音の強さに応じて、前記可視光画像に対するエフェクト量を調整する（１１）乃至（１３）のいずれかに記載の画像処理装置。
【産業上の利用可能性】
【００８６】
この技術の画像処理装置と画像処理方法およびプログラムでは、可視光画像で示されていない被写体状態を示す状態情報から、可視光画像の被写体に対応する状態情報が取得されて、取得された状態情報に基づき可視光画像に対してエフェクト処理が行われる。このため、可視光画像のリアリティ性を向上できるようになる。したがって、撮像装置や編集装置等に適している。
【符号の説明】
【００８７】
１０・・・システム
１１・・・可視光画像生成部
１２・・・状態情報生成部
２０，２０-1，２０-2，２０-3，２０-4・・・画像処理装置
２１，２１-1，２１-2，２１-3，２１-4・・・情報取得部
２２，２２-1，２２-2，２２-3，２２-4・・・エフェクト処理部
２２１・・・エフェクト成分画像生成部
２２２・・・エフェクト成分画像重畳部
２２３・・・エフェクト加工設定部
２２４・・・画像加工部
２２５・・・エフェクト調整設定部
２２６・・・色調整部
２２７・・・画像生成・加工設定部
２２８・・・重畳・加工部
【図１】
2017159003.tif 000003
【図２】
2017159003.tif 000004
【図３】
2017159003.tif 000005
【図４】
2017159003.tif 000006
【図５】
2017159003.tif 000007
【図６】
2017159003.tif 000008
【図７】
2017159003.tif 000009
【図８】
2017159003.tif 000010
【図９】
2017159003.tif 000011
【図１０】
2017159003.tif 000012
【図１１】
2017159003.tif 000013
【図１２】
2017159003.tif 000014
【図１３】
2017159003.tif 000015
【図１４】
2017159003.tif 000016
【図１５】
2017159003.tif 000017
【国際調査報告】
2017159003.tif 000018
2017159003.tif 000019
2017159003.tif 000020
2017159003.tif 000021