(57)【要約】【課題】撮像状況に応じて画像データの画質を調整することが可能な画像処理装置、画像処理方法及びプログラムを提供する。【解決手段】本技術の一形態に係る画像処理装置は、情報取得部と、解析部と、画質調整部とを具備する。  上記情報取得部は、画像の撮像に伴って行われた活動に基づいて検出された情報を取得する。  上記解析部は、上記情報に基づいて上記画像の撮像状況を解析する。  上記画質調整部は、上記撮像状況に対応する画像データに対して、上記解析された撮像状況に基づいて画質調整処理を実行する。【選択図】図２
2015195439.tif 000002
【特許請求の範囲】
【請求項１】
画像の撮像に伴って行われた活動に基づいて検出された情報を取得する情報取得部と、
前記情報に基づいて前記画像の撮像状況を解析する解析部と、
前記撮像状況に対応する画像データに対して、前記解析された撮像状況に基づいて画質調整処理を実行する画質調整部と、
を具備する画像処理装置。
【請求項２】
請求項１に記載の画像処理装置であって、
前記画質調整処理は、前記解析された撮像状況から推定される画質の乱れを改善する処理である
画像処理装置。
【請求項３】
請求項１に記載の画像処理装置であって、
前記情報取得部は、画像の撮像時における撮像者の活動に基づいて検出された情報を取得する
画像処理装置。
【請求項４】
請求項１に記載の画像処理装置であって、
前記情報取得部は、画像の撮像に伴って行われた活動に基づく圧力値、動作情報、及び位置情報のうちの少なくともいずれかを取得する
画像処理装置。
【請求項５】
請求項４に記載の画像処理装置であって、
前記情報取得部は、前記撮像者及び被写体のうちの少なくとも一方の撮像時に受けた圧力値を取得する圧力情報取得部を有し、
前記解析部は、前記圧力値に基づいて、水中での撮像か否かを判定する
画像処理装置。
【請求項６】
請求項４に記載の画像処理装置であって、
前記情報取得部は、前記撮像者及び被写体のうちの少なくとも一方の動作情報を取得する動作情報取得部を有し、
前記解析部は、前記動作情報に基づいて、前記画像の撮像に伴って行われる活動を解析する
画像処理装置。
【請求項７】
請求項６に記載の画像処理装置であって、
前記動作情報取得部は、振動の周波数を動作情報として取得し、
前記解析部は、前記振動の周波数が所定の周波数以上の場合、振動を伴う撮像状況であると解析し、
前記画質調整部は、振動を伴う撮像状況と解析された場合、前記振動の周波数に基づいて画像データの振動を補正する処理を実行する
画像処理装置。
【請求項８】
請求項４に記載の画像処理装置であって、
前記情報取得部は、前記撮像者及び被写体のうちの少なくとも一方の撮像時の位置情報を取得する位置情報取得部を有し、
前記解析部は、前記位置情報に基づいて、前記画像の撮像に伴って行われる活動を解析する
画像処理装置。
【請求項９】
請求項１に記載の画像処理装置であって、
前記解析部は、前記情報取得部により取得された情報及び前記画像内の被写体の特徴を解析して抽出された情報に基づいて前記画像の撮像状況を解析する
画像処理装置。
【請求項１０】
請求項１に記載の画像処理装置であって、
前記撮像状況に対応する画像データに対して、前記解析された撮像状況に基づいて演出処理を実行する演出処理部をさらに具備する
画像処理装置。
【請求項１１】
請求項１に記載の画像処理装置であって、
前記画像の撮像に伴って記録された音声データに対して、前記解析された撮像状況に基づいて音声調整処理を実行する音声調整部をさらに具備する
画像処理装置。
【請求項１２】
請求項１に記載の画像処理装置であって、
画像を撮像し、画像データとして記録する画像データ記録部をさらに具備する
画像処理装置。
【請求項１３】
請求項１に記載の画像処理装置であって、
前記画像データを再生する再生部をさらに具備する
画像処理装置。
【請求項１４】
請求項１に記載の画像処理装置であって、
前記撮像状況に対応する画像データを取得する画像データ取得部をさらに具備する
画像処理装置。
【請求項１５】
画像の撮像に伴って行われた活動に基づいて検出された情報を取得し、
前記情報に基づいて前記画像の撮像状況を解析し、
前記撮像状況に対応する画像データに対して、前記解析された撮像状況に基づいて画質調整処理を実行する
画像処理方法。
【請求項１６】
画像の撮像に伴って行われた活動に基づいて検出された情報を取得する情報取得部と、
前記情報に基づいて前記画像の撮像状況を解析する解析部と、
前記撮像状況に対応する画像データに対して、前記解析された撮像状況に基づいて画質調整処理を実行する画質調整部と
として情報処理装置を機能させるプログラム。
【発明の詳細な説明】
【技術分野】
【０００１】
本技術は、画像データの画像処理が可能な画像処理装置、画像処理方法及びプログラムに関する。
【背景技術】
【０００２】
撮像が可能な撮像端末が小型化しており、かつスマートフォン等の携帯情報端末においても動画等の撮像が容易である。近年、このような小型の撮像端末を用いて、撮像者自身や被写体がスポーツ等をしながら動画等の撮像をするケースが見られる。
【０００３】
一方、撮像者自身や被写体の活動によっては、撮像状況に合わせた画像処理が困難な場合がある。そこで、特許文献１には、車載の動画データ撮影時に、動画データに対して発進状態、ロードノイズ等のタグ付けをし、後にこのタグを活用して画像の編集を行うことが可能な画像処理装置が記載されている。
【先行技術文献】
【特許文献】
【０００４】
【特許文献１】特開２０１３−１９７９９５号公報
【発明の概要】
【発明が解決しようとする課題】
【０００５】
しかしながら、特許文献１には、撮像状況に応じて種々の画質調整を行うことについては記載されていなかった。
【０００６】
以上のような事情に鑑み、本技術の目的は、撮像状況に応じて画像データの画質を調整することが可能な画像処理装置、画像処理方法及びプログラムを提供することにある。
【課題を解決するための手段】
【０００７】
上記目的を達成するため、本技術の一形態に係る画像処理装置は、情報取得部と、解析部と、画質調整部とを具備する。
上記情報取得部は、画像の撮像に伴って行われた活動に基づいて検出された情報を取得する。
上記解析部は、上記情報に基づいて上記画像の撮像状況を解析する。
上記画質調整部は、上記撮像状況に対応する画像データに対して、上記解析された撮像状況に基づいて画質調整処理を実行する。
【０００８】
上記構成によれば、撮像に伴って行われる活動に基づいて検出された情報から撮像状況を解析し、撮像状況に応じた画質調整処理が可能となり、ユーザがマニュアルで画質調整処理を選択する負担が軽減される。
【０００９】
上記画質調整処理は、上記解析された撮像状況から推定される画質の乱れを改善する処理であってもよい。
【００１０】
これにより、画質の乱れが推定される撮像状況であっても、適切な画質調整処理が可能となる。
【００１１】
また、上記情報取得部は、画像の撮像時における撮像者の活動に基づいて検出された情報を取得してもよい。
【００１２】
これにより、撮像者自身がスポーツ等の活動をしながら撮像しており、撮像時の画質調整操作が難しい場合であっても、適切な画質調整処理が可能となる。
【００１３】
また、上記情報取得部は、画像の撮像に伴って行われた活動に基づく圧力値、動作情報、及び位置情報のうちの少なくともいずれかを取得してもよい。
【００１４】
これにより、撮像状況を絞り込むことができる。
【００１５】
例えば、上記情報取得部は、上記撮像者及び被写体のうちの少なくとも一方の撮像時に受けた圧力値を取得する圧力情報取得部を有し、
上記解析部は、上記圧力値に基づいて、水中での撮像か否かを判定してもよい。
【００１６】
あるいは、上記情報取得部は、上記撮像者及び被写体のうちの少なくとも一方の動作情報を取得する動作情報取得部を有し、
上記解析部は、上記動作情報に基づいて、上記画像の撮像に伴って行われる活動を解析してもよい。
【００１７】
この場合、上記動作情報取得部は、振動の周波数を動作情報として取得し、
上記解析部は、上記振動の周波数が所定の周波数以上の場合、振動を伴う撮像状況であると解析し、
上記画質調整部は、振動を伴う撮像状況と解析された場合、上記振動の周波数に基づいて画像データの振動を補正する処理を実行してもよい。
【００１８】
これにより、撮像時の振動の周波数に応じてより適切な画質調整処理を実行することができる。
【００１９】
あるいは、上記情報取得部は、上記撮像者及び被写体のうちの少なくとも一方の撮像時の位置情報を取得する位置情報取得部を有し、
上記解析部は、上記位置情報に基づいて、上記画像の撮像に伴って行われる活動を解析してもよい。
【００２０】
また、上記解析部は、上記情報取得部により取得された情報及び上記画像内の被写体の特徴を解析して抽出された情報に基づいて上記画像の撮像状況を解析してもよい。
【００２１】
これにより、より精度よく撮像状況を解析することができる。
【００２２】
また、上記画像処理装置は、上記撮像状況に対応する画像データに対して、上記解析された撮像状況に基づいて演出処理を実行する演出処理部をさらに具備してもよい。
【００２３】
これにより、撮像状況に適した演出処理が自動的に選択されるため、ユーザが演出処理を選択する負担を軽減することができる。
【００２４】
また、上記画像処理装置は、上記画像の撮像に伴って記録された音声データに対して、上記解析された撮像状況に基づいて音声調整処理を実行する音声調整部をさらに具備してもよい。
【００２５】
これにより、撮像状況に適した音声調整処理が自動的に選択されるため、ユーザが音声調整処理を選択する負担を軽減することができる。
【００２６】
また、上記画像処理装置は、画像を撮像し、画像データとして記録する画像データ記録部をさらに具備してもよい。
【００２７】
これにより、記録された画像データを用いて画質調整処理を実行することができる。
【００２８】
また、上記画像処理装置は、上記画像データを再生する再生部をさらに具備してもよい。
【００２９】
これにより、画質調整された画像データを再生し、確認することができる。
【００３０】
また、上記画像処理装置は、上記撮像状況に対応する画像データを取得する画像データ取得部をさらに具備してもよい。
【００３１】
これにより、他の装置に記録された画像データや、ネットワーク上の画像データベースに格納された画像データ等を用いて、画質調整処理を実行することができる。
【００３２】
上記目的を達成するため、本技術の一形態に係る画像処理方法は、画像の撮像に伴って行われた活動に基づいて検出された情報を取得する工程を含む。
上記情報に基づいて上記画像の撮像状況が解析される。
上記撮像状況に対応する画像データに対して、上記解析された撮像状況に基づいて画質調整処理が実行される。
【００３３】
上記目的を達成するため、本技術の一形態に係るプログラムは、情報取得部と、解析部と、画質調整部と、として情報処理装置を機能させる。
上記情報取得部は、画像の撮像に伴って行われた活動に基づいて検出された情報を取得する。
上記解析部は、上記情報に基づいて上記画像の撮像状況を解析する。
上記画質調整部は、上記撮像状況に対応する画像データに対して、上記解析された撮像状況に基づいて画質調整処理を実行する。
【発明の効果】
【００３４】
以上のように、本技術によれば、撮像状況に応じて画像データの画質を調整することが可能な画像処理装置、画像処理方法及びプログラムを提供することができる。
なお、ここに記載された効果は必ずしも限定されるものではなく、本開示中に記載されたいずれかの効果であってもよい。
【図面の簡単な説明】
【００３５】
【図１】本技術の第１の実施形態に係る画像処理装置のハードウェア構成を示すブロック図である。
【図２】上記画像処理装置の機能的構成を示すブロック図である。
【図３】上記画像処理装置の動作を示すフローチャートである。
【図４】ダイビング中の画像データの一例を示す模式的な図であり、Ａは画質調整前の画像データ、Ｂは画質調整後の画像データを示す。
【図５】スノーボード中の画像データの一例を示す模式的な図であり、Ａは画質調整前の画像データ、Ｂは画質調整後の画像データを示す。
【図６】海上で撮像された画像データの一例を示す模式的な図であり、Ａは画質調整前の画像データ、Ｂは画質調整後の画像データを示す。
【図７】本技術の第２の実施形態に係る画像処理装置の機能的構成を示すブロック図である。
【図８】上記画像処理装置の動作を示すフローチャートである。
【図９】サイクリング中の画像データに演出処理を実行した画像データの一例を示す模式的な図である。
【図１０】スカイダイビング中の画像データに演出を施した画像データの一例を示す模式的な図である。
【図１１】本技術の第３の実施形態に係る画像処理装置の機能的構成を示すブロック図である。
【図１２】上記画像処理装置の動作を示すフローチャートである。
【図１３】本技術の第４の実施形態に係る画像処理装置のハードウェア構成を示すブロック図である。
【図１４】上記画像処理装置の機能的構成を示すブロック図である。
【図１５】上記画像処理装置の動作を示すフローチャートである。
【図１６】上記画像処理装置の変形例の機能的構成を示すブロック図である。
【図１７】上記画像処理装置の変形例の機能的構成を示すブロック図である。
【図１８】本技術の第５の実施形態に係る画像処理装置のハードウェア構成を示すブロック図である。
【図１９】上記画像処理装置の機能的構成を示すブロック図である。
【図２０】上記画像処理装置の動作を示すフローチャートである。
【図２１】上記画像処理装置の変形例の機能的構成を示すブロック図である。
【図２２】上記画像処理装置の変形例の機能的構成を示すブロック図である。
【００３６】
以下、本技術に係る実施形態を、図面を参照しながら説明する。
【００３７】
＜第１の実施形態＞
［画像処理装置のハードウェア構成］
図１は、本技術の第１の実施形態に係る画像処理装置１００のハードウェア構成を示すブロック図である。画像処理装置１００は、コントローラ１１、撮像部１２、操作部１３、記憶部１４、通信部１５、表示部１６、オーディオデバイス部１７、センサ部１８、及びを備える。これらの各部は、バスを介して相互に接続され、データの転送や制御信号の送受信が可能に構成される。なお、本実施形態において、画像データは動画データであるとする。
【００３８】
画像処理装置１００は、本実施形態において、情報処理装置として構成され得る。画像処理装置１００は、具体的には、動画の撮像が可能なスマートフォン、タブレット端末等の携帯情報端末、ヘッドマウントディスプレイ等のウェアラブル機器であってもよい。あるいは、画像処理装置１００は、動画データ再生や画像処理等が可能な動画撮像装置であってもよい。
【００３９】
画像処理装置１００は、撮像者により把持される他、多様な撮像形態が可能であってもよい。例えば、画像処理装置１００は、撮像者に装着されて撮像可能であってもよく、あるいは、撮像者が乗車している自転車若しくは自動車等に取り付けられる、いわゆる車載撮像が可能であってもよい。また画像処理装置１００は、水中における撮像が可能であってもよい。この場合、画像処理装置１００の筐体が防水構造を有していてもよいし、画像処理装置１００が防水ケース等に収容されることで、水中における撮像が可能となってもよい。
【００４０】
コントローラ１１は、ＣＰＵ（Central Processing Unit）を有し、画像処理装置１００の各部を統括的に制御する。コントローラ１１は、図示しないＲＯＭ（Read Only Memory）や記憶部１４に格納された制御プログラムに従い、所定の処理を実行する。なおコントローラ１１は、各部からの情報が入力される入力Ｉ／Ｆ１１ａを有する。
【００４１】
撮像部１２は、被写体の光画像から画像データを得る。撮像部１２は、具体的には、図示しない撮像光学系、イメージセンサを有してもよい。撮像光学系は、被写体の光画像をイメージセンサの撮像面上に結像させる。撮像光学系は、コントローラ１１からの指示に従い、適切な画像が得られるように、焦点距離、被写体距離、絞り等を調整可能に構成される。イメージセンサは、ＣＣＤ（Charge Coupled Device）センサやＣＭＯＳ（Complementary Metal Semiconductor）センサ等により実現され、結像された光画像を電気信号に変換し、画像データを得る。
【００４２】
操作部１３は、例えばタッチパネル、電源ボタンなどのハードウェアキー、操作ダイアルなどの入力デバイスを備え、撮像者（ユーザ）の入力操作を検出し、コントローラ１１に伝達する。操作部１３は、例えば、動画データ撮像の開始及び終了、撮像状況に応じた画質調整を行うモード等のモード選択、並びに動画データの再生等が可能に構成されてもよい。
【００４３】
記憶部１４は、フラッシュメモリ（Flash Memory）などの半導体メモリ、磁気ディスク、光ディスク、光磁気ディスクなどの記録媒体と、それらの記録媒体に対する記録再生機構等により構成され得る。記憶部１４には、画像データが圧縮画像データとして記憶され、また、後述する画質調整処理等が記憶されている。
【００４４】
通信部１５は、ネットワーク通信部１５１、近距離通信部１５２及びＧＰＳ（Global Positioning System）受信部１５３を有する。ネットワーク通信部１５１は、３Ｇ（Third Generation）やＬＴＥ（Long Term Evolution）等の広域通信システム、Wi Fi（登録商標）等の無線ＬＡＮ（Local Area Network）通信システム、あるいは有線ＬＡＮ通信システム等によりネットワークに通信可能に構成される。近距離通信部１５２は、例えばBluetooth（登録商標）、赤外線等の近距離無線通信システムにより通信可能に構成される。ＧＰＳ受信部１５３は、画像処理装置１００の緯度・経度情報を取得する。
【００４５】
表示部１６は、例えば、ＬＣＤ（Liquid Crystal Display）や有機ＥＬ（Electroluminescence）パネル等の表示素子により実現され、ファインダとしての機能を有してもよい。表示部１６は、表示素子の他、Ｄ／Ａ変換回路等を有していてもよい。
【００４６】
オーディオデバイス部１７は、マイクロフォン及びスピーカを有する。
【００４７】
センサ部１８は、圧力センサ、加速度センサ、角速度センサを有する。圧力センサは、例えばダイアフラム型圧力センサ等を用いることができる。加速度センサは、例えば、直交する３軸方向の加速度を検出することが可能に構成される。角速度センサは、直交する３軸まわりの角速度を検出することが可能なジャイロセンサとして構成され得る。センサ部１８は、上記の他、例えば地磁気センサを有していてもよい。センサ部１８は、図示はしないが、上記各センサが取得した信号等をコントローラ１１の処理に用いられ得る電気信号に変換する回路を有していてもよい。
【００４８】
以上のようなハードウェア構成の画像処理装置１００において、図１の一点鎖線で示すコントローラ１１、撮像部１２、記憶部１４、通信部１５、表示部１６、オーディオデバイス部１７、及びセンサ部１８は、以下のような機能的構成を有する。
【００４９】
［画像処理装置の機能的構成］
図２は、画像処理装置１００の機能的構成を示すブロック図である。同図に示すように、画像処理装置１００は、画像データ記録部１０１、検出部１０２、情報取得部１０３、解析部１０４、画質調整部１０５及び再生部１０６を備える。画像処理装置１００は、以下に説明するように、画像の撮像状況を、情報取得部１０３が取得した情報に基づいて解析し、撮像状況に応じた画質の調整が可能に構成される。
【００５０】
画像データ記録部１０１は、画像を撮像し、画像データとして記録する。画像データは、エンコーダにより圧縮された圧縮データであってもよい。画像データ記録部１０１は、例えば、撮像部１２及び記憶部１４により実現される。
【００５１】
検出部１０２は、画像の撮像時における撮像者の活動に基づく情報を検出する。検出部１０２は、例えばセンサ部１８及び通信部１５により実現される。検出部１０２は、具体的には、センサ部１８により、圧力値（気圧及び水圧）、加速度、角速度等に関する信号を検出することができ、ＧＰＳ受信部１５３により、緯度・経度情報等の位置情報を検出することができる。あるいは、検出部１０２は、近距離通信部１５２が複数の無線ＬＡＮアクセスポイントからの電波強度を取得することで、当該電波強度のバランスに基づき、位置情報を検出することも可能である。
【００５２】
撮像者の活動は、特に限定されないが、例えば、ダイビング、サイクリング、ランニング、ウィンタースポーツ、マリンスポーツ及びスカイダイビング等のスポーツ、並びに結婚式（ウェディング）及びコンサート等のイベントが挙げられる。
【００５３】
情報取得部１０３は、画像の撮像時における撮像者の活動に基づいて検出された情報を取得する。情報取得部１０３は、例えばコントローラ１１の入力Ｉ／Ｆ１１ａにより実現される。
【００５４】
情報取得部１０３は、検出部１０２により検出された情報を取得する。情報取得部１０３は、画像の撮像に伴って行われた活動に基づく圧力値、動作情報、及び位置情報のうちの少なくともいずれかを取得することができる。すなわち、情報取得部１０３は、圧力情報取得部１０３ａ、動作情報取得部１０３ｂ、位置情報取得部１０３ｃを有する。
【００５５】
圧力情報取得部１０３ａは、撮像者の撮像時に受けた圧力値を取得する。圧力情報取得部１０３ａは、具体的には、検出部１０２により検出された圧力値を取得することができる。
【００５６】
動作情報取得部１０３ｂは、撮像者の動作情報を取得する。動作情報取得部１０３ｂは、具体的には、検出部１０２により検出された加速度、角速度に関する信号を取得することができる。動作情報取得部１０３ｂは、また、角速度に関する信号により、振動（以下、ブレとも称する）の周波数を動作情報として取得することが可能である。
【００５７】
位置情報取得部１０３ｃは、撮像者の位置情報を取得する。位置情報取得部１０３ｃは、具体的には、検出部１０２により検出された位置情報を取得することができる。
【００５８】
解析部１０４は、情報取得部１０３が取得した情報に基づいて画像の撮像状況を解析する。解析部１０４は、例えばコントローラ１１により実現される。解析部１０４は、例えば、情報取得部１０３が取得した情報と、画像データ記録部１０１に記録された動画データとを照合し、動画の撮像状況を解析する。解析部１０４の動作の詳細については、後述する。
【００５９】
解析部１０４は、動画の撮像状況として、例えば、水中での活動、雪上での活動、水上での活動、及び空中での活動、並びに室内でのイベント等の大まかな撮像状況を解析してもよい。さらに解析部１０４は、より詳細に撮像状況を解析してもよい。詳細な撮像状況としては、例えば、水中での活動に分類されるダイビング、雪上での活動に分類されるスキー、水上での活動に分類されるウィンドサーフィン、イベントに分類されるウェディングシーン等が挙げられる。
【００６０】
画質調整部１０５は、撮像状況に対応する画像データに対して、解析された撮像状況に基づいて画質調整処理を実行する。画質調整部１０５は、例えば、コントローラ１１により実現される。画質調整部１０５は、例えば、解析された撮像状況に関連付けて記憶された画質調整処理を実行してもよい。この場合、画質調整処理と撮像状況との対応関係は、記憶部１４に格納される。あるいは、画質調整部１０５は、記憶された所定のアルゴリズムに基づいて撮像状況から画質調整処理を選択し、これを実行してもよい。画像調整部１０５により画質調整処理が実行された画像データは、再生部１０６に出力される。
【００６１】
画質調整処理は、解析された撮像状況から推定される画質の乱れを改善する処理であってもよい。ここでいう「画質が乱れる」とは、画像が実際の被写体を認識し難い状態であることをいい、例えば、画像のブレや、画像の色調が本来の色調とは異なる状態であること、及び画像の輝度が高すぎる又は低すぎる状態であること等をいう。具体的な画質調整処理の例としては、色調補正処理、ブレ補正処理、輝度補正処理、ガンマ補正処理、エッジ強調処理等が挙げられる。
【００６２】
色調補正処理は、画像の色調を補正する処理であり、例えば、ＲＧＢ（Red Green Blue）のゲインを調整する処理である。ブレ補正処理は、いわゆる電子式のブレ補正処理であって、動作情報取得部１０３ｂが取得したブレの方向及び周波数に応じて、画像中の画素をずらす等のブレ補正を行う処理である。輝度補正処理は、例えば、入力輝度レベルに対して所定の演算を行い出力輝度レベルを調整する処理である。ガンマ補正処理は、例えば、ＲＧＢの信号を非線形変換し、視覚的なリニアリティ（linearity）を確保する処理である。エッジ強調処理は、例えば、画像からエッジ部分を検出し、検出されたエッジ部分の輝度を高めることにより画像の濃淡を強調する処理である。
【００６３】
再生部１０６は、画質が調整された画像データを再生する。再生部１０６は、表示部１６により実現され得る。再生部１０６は、画像データの再生のみならず、動画等の撮像時に取得された音声も再生可能であってもよい。この場合、再生部１０６は、表示部１６及びオーディオデバイス部１７により実現され得る。
【００６４】
以下、上記構成の画像処理装置１００の動作例について説明する。
【００６５】
［画像処理装置の動作］
図３は、画像処理装置１００の動作を示すフローチャートである。
【００６６】
まず、画像データ記録部１０１により動画（画像）を撮像・記録すると同時に、検出部１０２が、動画の撮像時における撮像者の活動に基づく情報を検出する（ＳＴ１０１）。そして情報取得部１０３が、検出された情報を取得する（ＳＴ１０２）。具体的には、圧力情報取得部１０３ａは、撮像者の撮像時に受けた圧力値を取得する。動作情報取得部１０３ｂは、撮像者の動作情報を取得する。位置情報取得部１０３ｃは、撮像者の位置情報を取得する。
【００６７】
次に、情報取得部１０３が取得した情報に基づいて、解析部１０４が、動画の撮像状況を解析する（ＳＴ１０３）。このステップは、動画の撮像と並行して行われてもよいし、動画の撮像後に行われてもよい。動画の撮像後に行われる場合には、ユーザにより、撮像状況に応じた画質調整を行うモードが選択された後、行われるように設定されてもよい。当該モードは、例えば操作部１３への所定の入力操作により選択されることが可能であってもよい。
【００６８】
解析部１０４は、具体的には、以下のように撮像状況を解析できる。
【００６９】
例えば解析部１０４は、圧力情報取得部１０３ａの取得した圧力値に基づいて、水中での撮像であるか否かを判定することができる（ＳＴ１０３−１）。水中での撮像と判定された場合、解析部１０４は、撮像者の撮像時の活動が水中での活動であると解析できる。また、圧力値が大気圧よりも低い場合、解析部１０４は、撮像者の撮像時の活動が空中を含む高地での活動であると解析できる。
【００７０】
解析部１０４は、また、動作情報取得部１０３ｂの取得した動作情報に基づいて、動画の撮像に伴って行われる活動を解析することができる（ＳＴ１０３−２）。例えば、解析部１０４は、動作情報取得部１０３ｂにより取得された振動の周波数が所定の周波数以上の場合、ブレを伴う撮像状況と解析することが可能である。さらに解析部１０４は、実際に取得された加速度及び／又は角速度の値と、例えば、サイクリング、自動車の運転、ランニング等の所定の活動が典型的に示す加速度及び／又は角速度の値のパターンとを照合し、詳細な活動についても解析できる。
【００７１】
解析部１０４は、また、位置情報に基づいて、動画の撮像に伴って行われる活動を解析する（ＳＴ１０３−３）。解析部１０４は、例えば、撮像者の位置（海、陸、湖、川等）を判定することができる。これにより解析部１０４は、例えば撮像者の位置が海、湖、川と判定された場合、水中及び水上での活動のいずれかであると解析できる。さらに解析部１０４は、撮像者の位置と、記憶部１４等に格納された地図情報等を照合し、撮像された地名、建物名等を判定することも可能である。これにより、例えば、撮像者の位置が結婚式場と判定された場合、結婚式での撮像と解析することができる。
【００７２】
解析部１０４は、これらの解析又は判定を、所定の順序で行ってもよい。この場合は、徐々に撮像状況を絞り込むことができる。あるいは、予め圧力情報取得部１０３ａ、動作情報取得部１０３ｂ及び位置情報取得部１０３ｃ各々の取得した情報に基づいて総合的に解析される撮像状況例を示したテーブルを作成して記憶部１４等に格納し、当該テーブルを参照して解析を行ってもよい。この場合は、情報取得部１０３が取得した情報と当該テーブルとを参照することで、撮像状況を決定することができる。
【００７３】
次に、画質調整部１０５は、撮像状況に対応する動画データに対して、解析された撮像状況に基づいて画質調整処理を実行する（ＳＴ１０４）。このステップも、動画の撮像と並行して行われてもよいし、動画の撮像後に行われてもよい。画質調整部は、例えば、振動を伴う撮像状況と解析された場合、振動の周波数に基づいて動画データの振動を補正する処理を実行してもよい。
【００７４】
最後に、再生部１０６が、画質が調整された動画（画像）データを再生する（ＳＴ１０５）。
【００７５】
以下、具体的な撮像状況における動作例を記載する。
【００７６】
（動作例１−１  ダイビング）
動作例１−１として、動画データがダイビング中に撮像された例を挙げる。この場合、撮像者自身がダイビングしており、水中を撮像している状況を想定する。
【００７７】
まず、動画の撮像時に、撮像者の活動に基づく情報が検出され（ＳＴ１０１参照）、当該情報を、圧力情報取得部１０３ａ、動作情報取得部１０３ｂ及び位置情報取得部１０３ｃ各々が取得する（ＳＴ１０２参照）。
【００７８】
次に、解析部１０４が、取得した情報に基づいて、撮像状況を解析する（ＳＴ１０３参照）。例えば、解析部１０４は、位置情報取得部１０３ｃにより取得された位置情報から、撮像者の位置が海であったことにより、撮像状況が水中又は水上での活動であると解析できる（ＳＴ１０３−３参照）。また、解析部１０４は、圧力情報取得部１０３ａにより取得された圧力値に基づいて水中での撮像であると判定した場合、水中での活動であると解析できる（ＳＴ１０３−１参照）。さらに、圧力値から所定の水深以上であると検出された場合には、ダイビングと解析することが可能である。加えて、解析部１０４は、動作情報取得部１０３ｂにより取得された動作情報及び水中での活動という解析結果から、撮像者の活動がダイビングであると解析できる（ＳＴ１０３−２参照）。
【００７９】
図４は、ダイビング中の動画データの一例を示す模式的な図であり、Ａは画質調整前の動画データ、Ｂは画質調整後の動画データを示す。水中で撮像された画像は、図４Ａに示すように、一般的に青みが強く、本来の自然な色調が得られない。そこで、画質調整部１０５は、水中での撮像状況から推定される画質の乱れを改善する画質調整処理として、Ｂ（Blue）のゲインを減ずる色調補正処理を実行する（ＳＴ１０４参照）。なお、ダイビング中の撮像に関連付けられた画質調整処理として、ブレ補正等が選択されてもよい。
【００８０】
これにより、再生部１０６は、図４Ｂに示すように、本来の色調に近い動画データを再生する（ＳＴ１０５参照）。
【００８１】
（動作例１−２  サイクリング）
動作例１−２として、動画データがサイクリング中に撮像された例を挙げる。この場合、撮像者自身が乗っている自転車に画像処理装置１００が取り付けられており、走行しながら風景を撮像している状況を想定する。
【００８２】
まず、動画の撮像時に、撮像者の活動に基づく情報が検出され（ＳＴ１０１参照）、当該情報を、圧力情報取得部１０３ａ、動作情報取得部１０３ｂ及び位置情報取得部１０３ｃ各々が取得する（ＳＴ１０２参照）。
【００８３】
次に、解析部１０４が、取得した情報に基づいて、撮像状況を解析する（ＳＴ１０３参照）。例えば、解析部１０４は、圧力情報取得部１０３ａからの圧力値に基づいて、水中での撮像でないと判定できる（ＳＴ１０３−１参照）。また、解析部１０４は、位置情報取得部１０３ｃにより取得された位置情報から、撮像者の位置が陸地であったことにより、撮像状況が水中又は水上での活動ではないと解析できる（ＳＴ１０３−３参照）。解析部１０４は、動作情報取得部１０３ｂからの角速度情報等に基づいて、取得されたブレの周波数が所定の周波数以上であると判定し、ブレを伴う撮像状況と解析する（ＳＴ１０３−２参照）。さらに解析部１０４は、動作情報取得部１０３ｂからの加速度情報等に基づいて、所定範囲の速度で移動していると判定された場合、撮像者の活動がサイクリングと解析することもできる。
【００８４】
画質調整部１０５は、ブレを伴う撮像状況から推定される画質の乱れを改善する画質調整処理として、ブレ補正処理を実行する（ＳＴ１０４参照）。より具体的に、画質調整部１０５は、検出されたブレの周波数に基づいて動画データの振動を補正する処理を実行してもよい。当該処理は、検出されたブレの方向も考慮されたものであってもよい。
【００８５】
これにより、再生部１０６が、適切にブレ補正された動画データを再生する（ＳＴ１０５参照）。
【００８６】
サイクリング等の車載撮像の場合、通常の手ブレ以上の大きなブレが生じ、手持ち撮像を想定した光学式等の手ブレ補正では対応が難しいことがある。本実施形態によれば、動作情報取得部１０３ｂからブレの方向及び周波数が検出できるため、大きなブレであっても適切なブレ補正を行うことができる。
【００８７】
また、電子式のブレ補正は、一般に、画素を所定方向に移動させることでブレを打ち消すため、周縁の一部の画素が失われ、ブレ量が大きいほど再生される範囲が小さくなることとなる。特に、ユーザ自身がブレ量を指定して補正量を決定する場合には、ブレ量の評価が難しいため、再生範囲が狭くなる、あるいはブレが十分に解消されないという問題があった。本実施形態によれば、動作情報取得部１０３ｂからの情報に基づいて適切な補正を行うことができるため、再生される範囲も適切な範囲となり、ユーザの満足度を向上させることができる。
【００８８】
（動作例１−３  ウィンタースポーツ）
動作例１−３として、動画データが、スノーボード中に撮像された例を挙げる。この場合、撮像者自身がスノーボードをしており、雪上で撮像している状況を想定する。
【００８９】
まず、動画の撮像時に、撮像者の活動に基づく情報が検出され（ＳＴ１０１参照）、当該情報を、圧力情報取得部１０３ａ、動作情報取得部１０３ｂ及び位置情報取得部１０３ｃ各々が取得する（ＳＴ１０２参照）。
【００９０】
次に、解析部１０４が、取得した情報に基づいて、撮像状況を解析する（ＳＴ１０３参照）。例えば、解析部１０４は、圧力情報取得部１０３ａからの圧力値に基づいて、水中での撮像でないと判定でき、圧力値が大気圧よりも低かった場合、高地での撮像であると解析できる（ＳＴ１０３−１参照）。また解析部１０４は、位置情報取得部１０３ｃにより取得された位置情報から、撮像者の位置がスキー場であったと判定した場合、撮像状況が雪上でのスポーツであると解析できる（ＳＴ１０３−３参照）。また解析部１０４は、動作情報取得部１０３ｂにより取得された情報、及び撮像状況が雪上でのスポーツであるとの解析結果に基づき、撮像状況が例えばスノーボードであると解析してもよい（ＳＴ１０３−２参照）。
【００９１】
図５は、スノーボード中の動画データの一例を示す模式的な図であり、Ａは画質調整前の動画データ、Ｂは画質調整後の動画データを示す。雪上で撮像された画像は、図５Ａに示すように、全体的に輝度が高く、白みがかっており、本来の色調が得られないことがある。そこで、画質調整部１０５は、雪上での撮像状況から推定される画質の乱れを改善する画質調整処理として、輝度を減ずる輝度補正処理を実行する（ＳＴ１０４参照）。
【００９２】
なお、画質調整部１０５は、エッジ強調補正処理等を実行することもでき、スノーボード中の撮像に関連付けられた画質調整処理として、ブレ補正処理等を実行することもできる。
【００９３】
これにより、再生部１０６が、図５Ｂに示すように、本来の色調に近い動画データを再生する（ＳＴ１０５参照）。
【００９４】
（動作例１−４  海上でのスポーツ）
動作例１−４として、動画データが、ウィンドサーフィン中に撮像された例を挙げる。この場合、撮像者自身がウィンドサーフィンをしており、海上（水上）で撮像している状況を想定する。
【００９５】
まず、動画の撮像時に、撮像者の活動に基づく情報が検出され（ＳＴ１０１参照）、当該情報を、圧力情報取得部１０３ａ、動作情報取得部１０３ｂ及び位置情報取得部１０３ｃ各々が情報を取得する（ＳＴ１０２参照）。
【００９６】
次に、解析部１０４が、取得した情報に基づいて、撮像状況を解析する（ＳＴ１０３参照）。例えば、解析部１０４は、圧力情報取得部１０３ａにより取得された圧力値に基づいて、水中での撮像でないと判定する（ＳＴ１０３−１参照）。また解析部１０４は、位置情報取得部１０３ｃにより取得された位置情報、及び水中での撮像でないという解析に基づき、海上での撮像であると判定できる（ＳＴ１０３−３参照）。さらに解析部１０４は、動作情報取得部１０３ｂからの動作情報、及び海上での撮像であるとの解析に基づき、撮像者の活動が海上でのスポーツであると解析できる（ＳＴ１０３−２参照）。なお、解析部１０４は、動作情報に基づき、ウィンドサーフィンであると解析してもよい。
【００９７】
図６は、海上で撮像された動画データの一例を示す模式的な図であり、Ａは画質調整前の動画データ、Ｂは画質調整後の動画データを示す。この場合ユーザは、再生された画像に対し、イメージよりも青色が薄く、暗い印象を受け、不満に感じることがある（図６Ａ参照）。これは、ユーザにより記憶された色、すなわち「記憶色」と、実際に記録された「記録色」との差異による。そこで、画質調整部１０５は、記憶色に近づけるための画質調整処理として、Ｂ（Blue）のゲインを増加する色調補正処理を実行する（ＳＴ１０４参照）。なお、ウィンドサーフィン中の撮像に関連付けられた画質調整処理として、ブレ補正等が実行されてもよい。
【００９８】
これにより、再生部１０６は、図６Ｂに示すように、ユーザの記憶色に近い、より鮮やかな青色の動画データを再生する（ＳＴ１０５参照）。
【００９９】
（動作例１−５  ウェディング）
動作例１−５として、動画データが結婚式中に撮像された例を挙げる。この場合、結婚式場内で撮像されている状況を想定する。
【０１００】
まず、動画の撮像時に、撮像者の活動に基づく情報が検出され（ＳＴ１０１参照）、当該情報を、圧力情報取得部１０３ａ、動作情報取得部１０３ｂ及び位置情報取得部１０３ｃ各々が情報を取得する（ＳＴ１０２参照）。
【０１０１】
次に、解析部１０４が、取得した情報に基づいて、撮像状況を解析する（ＳＴ１０３参照）。例えば、解析部１０４は、圧力情報取得部１０３ａの取得した圧力値に基づいて、水中での撮像でないと解析することができる（ＳＴ１０３−１参照）。また、解析部１０４は、動作情報取得部１０３ｂにより取得された動作情報から、ほぼ同じ姿勢であって、時折ゆっくりと向きを変える動作を検出した場合に、イベントでの撮像であると解析することができる（ＳＴ１０３−２参照）。また解析部１０４は、位置情報取得部１０３ｃにより取得された位置情報、及びイベントでの撮像であるとの解析に基づいて、撮像者の位置が結婚式場やホテルであった場合に、結婚式中の撮像であると解析することができる（ＳＴ１０３−３参照）。
【０１０２】
一般に、結婚式中に撮像された画像は、室内であるため暗めであることが多い。そこで、画質調整部１０５は、結婚式という撮像状況から推定される画質の乱れを改善する画質調整処理として、輝度を高める補正処理を実行する（ＳＴ１０４参照）。なお、撮像状況のテーマ性に即した画質調整処理として、わずかにＲ（red）のゲインを高める補正処理を実行してもよい。これにより、結婚式の温かい雰囲気を出すことが可能となる。
【０１０３】
これにより、再生部１０６は、結婚式に適した動画データを再生することができる（ＳＴ１０５参照）。
【０１０４】
以上、本実施形態によれば、動画の撮像に伴って行われる活動に基づいて検出された動作情報、位置情報等に基づいて撮像状況が解析され、動画データに対し、この撮像状況から自動的に画質調整処理を実行することが可能となる。これにより、撮像者が撮像中に画質調整操作を行わずとも、撮像後に適切な画質調整処理が実行された動画データを再生することが可能となる。また、撮像後にユーザがマニュアルで画質調整処理を選択する手間を省くことが可能となる。
【０１０５】
また、特に撮像者自身がスポーツをしながら撮像している場合は、画質が乱れることが多いにもかかわらず、撮像中の画質調整操作が難しい。本実施形態によれば、撮像中の画質調整操作を不要とし、画質が乱れやすいスポーツシーンの動画データであっても所望の画質の動画データを再生することが可能となる。
【０１０６】
また、水中や雪上、水上など、特殊な環境中での撮像の場合は、撮像時に設定が可能なオートホワイトバランス、オート露出調整等の画像処理では調整が不十分なことも多い。本実施形態によれば、画像処理装置１００により適切な画質調整処理を実行ことが可能となるため、特殊な環境下で撮像した動画データであっても、十分な画質調整が可能となる。
【０１０７】
［変形例１−１］
上述の実施形態では、解析部１０４が、情報取得部１０３からの情報に基づいて画像の撮像状況を解析すると説明したが、これに限定されない。例えば解析部１０４は、情報取得部１０３からの情報に加え、撮像された画像データ内の被写体の特徴を解析して抽出された情報に基づいて画像の撮像状況を解析してもよい。
【０１０８】
解析部１０４は、具体的には、画像解析・認識技術により被写体の特徴を解析し、撮像状況を解析できる。
【０１０９】
本変形例によれば、例えば、動作の少ないイベントシーン等においても、撮像状況の解析の精度を高めることができる。したがって、画像データに対し、より適切な画質調整を行うことができる。
【０１１０】
［変形例１−２］
上述の実施形態では、解析部１０４が、情報取得部１０３からの情報に基づいて画像の撮像状況を解析すると説明したが、これに限定されない。例えば解析部１０４は、情報取得部１０３からの情報に加え、画像の撮像とともに録音された音声データから抽出された情報に基づいて画像の撮像状況を解析してもよい。
【０１１１】
解析部１０４は、具体的には、録音された音声データの音量の解析により、盛り上がっている撮像状況か、あるいは静かな状況であるか解析できる。さらに解析部１０４は、音声認識技術により撮像時に録音された音声の種類（人の声、風の音、波の音等）や会話の内容等を解析し、撮像状況を解析することもできる。
【０１１２】
本変形例によれば、例えば、動作の少ないイベントシーン等においても、撮像状況の解析の精度を高めることができる。したがって、画像データに対し、より適切な画質調整を行うことができる。
【０１１３】
なお、本変形例において、解析部１０４は、情報取得部１０３からの情報、音声データから抽出された情報に加え、変形例１−１で説明した画像データ内の被写体の特徴を解析して抽出された情報を用いてもよい。これにより、撮像状況の解析の精度をさらに高めることができる。
【０１１４】
＜第２の実施形態＞
図７は、第２の実施形態に係る画像処理装置２００の機能的構成を示すブロック図である。画像処理装置２００は、画像処理装置１００と同様の画像データ記録部１０１、検出部１０２、情報取得部１０３、解析部１０４、画質調整部１０５及び再生部１０６に加えて、さらに演出処理部２０７を備える。本実施形態においても、画像データは動画データであるとする。なお、以下の説明において、上述の実施形態と同様の構成については同一の符号を付して説明を省略する。また、画像処理装置２００は、画像処理装置１００と同様のハードウェア構成を有するため、その説明を省略する。
【０１１５】
演出処理部２０７は、撮像状況に対応する画像データに対して、解析された撮像状況に基づいて演出処理を実行する。演出処理部２０７は、例えば、解析された撮像状況に関連付けて記憶された演出処理を実行してもよい。あるいは、演出処理部２０７は、記憶された所定のアルゴリズムに基づいて撮像状況から演出処理を選択し、これを実行してもよい。演出処理部２０７は、演出処理が実行された画像データを再生部１０６へ出力する。演出処理部２０７は、例えば、コントローラ１１により実現される。これら演出処理と撮像状況との対応関係は、記憶部１４に格納される。この対応関係の例については、後述する。
【０１１６】
ここでいう画像データの演出処理とは、付加的な情報、画像及び音声を併せて再生することや、所定のテンプレート等を用いて再生すること等により、画像データ、及び画像データと併せて録音された音声を演出する処理をいうものとする。演出処理の具体例としては、情報取得部１０３が取得した情報のうちの所定の情報（以下、付加情報とする）が画像データと併せて表示される処理が挙げられる。上記付加情報の表示態様は、画像データに重畳的に表示されてもよいし、画像データを縮小し表示領域の余白部分に表示されてもよい。付加情報（表示態様も含む）と各撮像状況との対応関係は、記憶部１４等に記憶されていてもよい。
【０１１７】
［画像処理装置の動作］
図８は、画像処理装置２００の動作を示すフローチャートである。
【０１１８】
まず、図３のＳＴ１０１と同様に、動画の撮像と同時に、検出部１０２が、動画（画像）の撮像時における撮像者の活動に基づく情報を検出する（ＳＴ２０１）。そして情報取得部１０３が、検出された情報を取得する（ＳＴ２０２）。
【０１１９】
次に、図３のＳＴ１０２と同様に、解析部１０４が、情報取得部１０３が取得した情報に基づいて、動画の撮像状況を解析する（ＳＴ２０３）。解析部１０４は、例えば、圧力値に基づいて、水中での撮像か否かを判定してもよいし（ＳＴ２０３−１）、動作情報に基づいて動画の撮像に伴って行われる活動を解析してもよい（ＳＴ２０３−２）。あるいは、位置情報に基づいて動画の撮像に伴って行われる活動を解析してもよい（ＳＴ２０３−３）。
【０１２０】
次に、図３のＳＴ１０３と同様に、画質調整部１０５が、撮像状況に対応する動画データに対して、解析された撮像状況に基づいて画質調整処理を実行する（ＳＴ２０４）。
【０１２１】
さらに、演出処理部２０７が、撮像状況に対応する動画データに対して、解析された撮像状況に基づいて演出処理を実行する（ＳＴ２０５）。
【０１２２】
最後に、再生部１０６が、画質調整処理及び演出処理が実行された動画（画像）データを再生する（ＳＴ２０６）。
【０１２３】
なお、画質調整処理の実行（ＳＴ２０４）の前に、演出処理の実行（ＳＴ２０５）のステップが行われてもよい。
【０１２４】
以下、具体的な撮像状況における動作例を記載する。
【０１２５】
（動作例２−１  サイクリング）
動作例２−１として、動画データがサイクリング中に撮像された例を挙げる。この場合、ＳＴ２０１〜ＳＴ２０４は、上述のＳＴ１０１〜ＳＴ１０４と同様であるため、ＳＴ２０５に対応するステップから説明する。
【０１２６】
演出処理部２０８は、画質調整処理された動画データに対し、サイクリングという撮像状況に基づいて演出処理を実行する（ＳＴ２０５参照）。ここでは、演出処理として、走行速度及び走行軌跡を付加情報として動画データと併せて表示される演出処理を実行する。走行速度は、主に、動作情報取得部１０３ｂからの加速度情報に基づいて決定され得る。また走行軌跡は、主に、位置情報取得部１０３ｃからの位置情報に基づいて決定され得る。なお、付加情報は上記に限定されず、走行してからの時間、日時等を表示してもよい。
【０１２７】
これにより、再生部１０６は、画質調整処理が実行され、かつ演出処理が実行された動画データを再生する（ＳＴ２０６参照）。
【０１２８】
図９は、サイクリング中の動画データに演出処理を実行した動画データの一例を示す模式的な図である。同図に示すように、図中の符号Ａ１〜Ａ４は付加情報であって、Ａ１は走行速度、Ａ２は走行軌跡、Ａ３は走行してからの時間、Ａ４は日時を示す。図９では、動画データにこれらの付加情報を重畳的に表示する演出処理の例を示す。このような動画データにより、撮像時の状況をより客観的に認識することが可能となる。
【０１２９】
（動作例２−２  スカイダイビング）
動作例２−２として、動画データがスカイダイビング中に撮像された例を挙げる。この場合、撮像者自身がスカイダイビングしており、空中で撮像している状況を想定する。
【０１３０】
まず、動画の撮像時に、撮像者の活動に基づく情報が検出され（ＳＴ２０１参照）、当該情報を、圧力情報取得部１０３ａ、動作情報取得部１０３ｂ及び位置情報取得部１０３ｃ各々が情報を取得する（ＳＴ２０２参照）。
【０１３１】
次に、解析部１０４が、取得した情報に基づいて、撮像状況を解析する（ＳＴ２０３参照）。例えば、解析部１０４は、圧力情報取得部１０３ａにより取得された圧力値に基づいて低い気圧下における撮像であると判定した場合、撮像状況がスカイスポーツ、登山等の高地での活動であると解析できる（ＳＴ２０３−１参照）。また、解析部１０４は、動作情報取得部１０３ｂにより取得された動作情報から、撮像者の活動がスカイダイビングであると判定できる（ＳＴ２０３−２参照）。具体的には、スカイダイビングであれば、航空機等から飛び降りた直後、非常に大きい加速度で落下するため、この大きな加速度を検出することで、スカイダイビングであると解析できる。また、解析部１０４は、位置情報取得部１０３ｃにより取得された位置情報を参照してもよい（ＳＴ２０３−３参照）。
【０１３２】
空中で撮像された画像は、水上と同様、記憶色と記録色とが異なり、ユーザのイメージに近い画像が得られないことがある。そこで、画質調整部１０５は、記憶色に近づくための画質調整処理として、Ｂ（Blue）のゲインを増加する色調補正処理を実行してもよい（ＳＴ２０４参照）。また、空中の風圧によるブレが懸念されるため、上述のブレ補正処理を実行してもよい。また、強い太陽光が人物等とともに撮像された場合には、画像データ中の輝度等の差が大きくなる。このため、いわゆる白飛び、黒潰れを防止するようなコントラスト補正処理を実行してもよい。
【０１３３】
次に、演出処理部２０７は、解析された撮像状況に基づいて演出処理を実行する（ＳＴ２０５参照）。ここでは、演出処理として、高度及び落下速度を付加情報として動画データと併せて表示される演出処理を実行する。高度は、主に、圧力情報取得部１０３ａからの圧力値に基づいて決定され得る。落下速度は、主に、動作情報取得部１０３ｂからの加速度情報に基づいて決定され得る。
【０１３４】
再生部１０６は、画質調整処理が実行され、かつ演出処理が実行された動画データを再生する（ＳＴ２０６参照）。
【０１３５】
図１０は、スカイダイビング中の動画データに演出を施した動画データの一例を示す模式的な図である。図中の符号Ｂ１，Ｂ２は付加情報を示し、Ｂ１は高度、Ｂ２は落下速度を示す。図１０では、動画データを縮小し、表示領域の余白部分に付加情報を表示する演出処理の例を示す。
【０１３６】
以上のように、本実施形態によれば、画質調整のみならず、画像の撮像状況から、画像データの演出処理を自動的に実行することが可能となる。これにより、ユーザがマニュアルで演出処理を選択する手間を省くことが可能となる。
【０１３７】
なお、画像処理装置２００は、種々の演出処理を適用し得る。
【０１３８】
［変形例２−１］
上述の実施形態では、演出処理として、付加情報が画像データと併せて表示される処理について説明したが、これに限定されない。演出処理は、例えば、動画データからショートムービーを作成するための処理であってもよい。この場合、演出処理部２０７は、撮像状況に基づいて、ショートムービーを作成するためのテンプレートを選択し、当該テンプレートを用いて演出処理を実行してもよい。ここでいうテンプレートは、画質調整処理を含んでいてもよく、あるいは音声データを含んでいてもよい。
【０１３９】
例えば結婚式中の撮像であると解析された場合、演出処理部２０７は、例えば、結婚式中の撮像に関連付けて記憶されたテンプレートを選択し、当該テンプレートを用いた演出処理を実行する。これにより、ショートムービーを再生することが可能となる。
【０１４０】
このような演出処理部２０７により、ユーザは、自身の撮像した動画データから、撮像状況に適したテンプレートを用いたショートムービーを容易に作成することが可能となる。したがって、ユーザがテンプレートを選択する手間を省き、より手軽にショートムービーを楽しむことが可能となる。
【０１４１】
［変形例２−２］
演出処理は、撮像時に録音された音声データから抽出された会話の内容を画像データと併せて表示する処理であってもよい。会話の内容は、撮像時に録音された音声データから音声認識技術により抽出することができる。また、上記演出処理は、会話の内容を画像データに重畳的に表示する処理であってもよいし、画像データを縮小し表示領域の余白に表示する処理であってもよい。これにより、例えば音声が聞き取り難い状況の動画データであっても、会話の内容を理解することが可能な動画データを提供することが可能となる。
【０１４２】
［その他の変形例］
本実施形態においても、解析部１０４は、情報取得部１０３からの情報に加え、変形例１−１で説明した画像データ内の被写体の特徴を解析して抽出された情報や、変形例１−２で説明した撮像時の音声データから抽出された情報を用いて解析を行ってもよい。これにより、解析部１０４の撮像状況の解析精度を高め、かつ、演出処理部２０７が、より適切な演出方法を選択することが可能となる。
【０１４３】
＜第３の実施形態＞
図１１は、第３の実施形態に係る画像処理装置３００の機能的構成を示すブロック図である。画像処理装置３００は、画像処理装置１００と同様の画像データ記録部１０１、検出部１０２、情報取得部１０３、解析部１０４、画質調整部１０５及び再生部１０６に加えて、さらに音声調整部３０８を有する。本実施形態においても、画像データは動画データであるとする。なお、以下の説明において、上述の実施形態と同様の構成については同一の符号を付して説明を省略する。また、画像処理装置３００は、ハードウェア構成について画像処理装置１００と同様であるため、説明を省略する。
【０１４４】
音声調整部３０８は、画像の撮像に伴って記録された音声データに対して、解析された撮像状況に基づいて音声調整処理を実行する。音声調整部３０８は、例えば、コントローラ１１により実現される。音声調整部３０８は、例えば、解析された撮像状況に関連付けて記憶された音声調整処理を実行してもよい。この場合、音声調整処理と撮像状況との対応関係は、記憶部１４に格納される。あるいは、音声調整部３０８は、記憶された所定のアルゴリズムに基づいて撮像状況から音声調整処理を選択し、これを実行してもよい。撮像状況によっては、人物の会話が聞き取り難かったり、屋外で風雨の音が大きかったりする場合がある。このような場合、音量やノイズを調整する処理を実行することができる。この対応関係の例については、後述する。
【０１４５】
［画像処理装置の動作］
図１２は、画像処理装置３００の動作を示すフローチャートである。なお、以下の動作例では、画像データとして動画データを用いるものとして説明する。
【０１４６】
まず、図３のＳＴ１０１と同様に、画像データ記録部１０１が動画（画像）を撮像・記録し、それと同時に、検出部１０２が、動画の撮像時における撮像者の活動に基づく情報を検出する（ＳＴ３０１）。動画の撮像時には、音声データも録音される。そして情報取得部１０３が、検出された情報を取得する（ＳＴ３０２）。
【０１４７】
次に、図３のＳＴ１０２と同様に、情報取得部１０３が取得した情報に基づいて、解析部１０４が、動画の撮像状況を解析する（ＳＴ３０３）。解析部１０４は、例えば、圧力値に基づいて、水中での撮像か否かを判定してもよいし（ＳＴ３０３−１）、動作情報に基づいて動画の撮像に伴って行われる活動を解析してもよい（ＳＴ３０３−２）。あるいは、位置情報に基づいて動画の撮像に伴って行われる活動を解析してもよい（ＳＴ３０３−３）。
【０１４８】
次に、図３のＳＴ１０３と同様に、画質調整部１０５が、撮像状況に対応する動画データに対して、解析された撮像状況に基づいて画質調整処理を実行する（ＳＴ３０４）。
【０１４９】
そして、音声調整部３０８が、動画の撮像に伴って記録された音声データに対して、解析された撮像状況に基づいて音声調整処理を実行する（ＳＴ３０５）。音声調整部３０８は、スカイダイビングという撮像状況に基づいて音声調整処理として、風と認識される音声レベルを下げ、人物の会話と認識される音声レベルを上げる処理を実行することができる。あるいは、音声調整処理部３１１は、サイクリングという撮像状況に基づいて音声調整処理として、振動（ブレ）による音声ノイズのレベルを下げる処理を実行することができる。
【０１５０】
最後に、再生部１０６が、画質調整された動画（画像）データを再生するとともに、音声調整部３０８により出力が調整された音声データを併せて再生する（ＳＴ３０６）。
【０１５１】
このように、本実施形態によれば、撮像状況に応じて音声データの出力を調整することができる。したがって、画質が調整された画像データとともに、撮像状況に適した音声データを楽しむことができる。
【０１５２】
＜第４の実施形態＞
上述の各実施形態においては、画像の撮像、画像処理及び再生が一装置で行われると説明したが、以下の実施形態のように、複数の装置を含む画像処理システムにより行われてもよい。
【０１５３】
［画像処理システムのハードウェア構成］
図１３は、本技術の第４の実施形態に係る画像処理システム４のハードウェア構成を示すブロック図である。画像処理システム４は、画像処理装置４００及び撮像装置４２０を備え、撮像装置４２０で撮像された画像データが、画像処理装置４００において画像処理され、再生されることが可能に構成される。画像処理装置４００及び撮像装置４２０は、相互に通信可能に構成される。なお、本実施形態においても、画像データは動画データであるとする。
【０１５４】
撮像装置４２０は、コントローラ４２１、撮像部４２２、記憶部４２４、通信部４２５、マイクロフォン４２７、及びセンサ部４２８を備える。なお撮像装置４２０は、上記構成の他、図示しない表示部、スピーカ及び操作部を有していてもよい。撮像装置４２０は、撮像専用装置であってもよいし、スマートフォン等の携帯情報端末であってもよい。撮像装置４２０は、画像処理装置１００と同様に、動画撮像が可能に構成される。また、撮像者に装着され、あるいは車載撮像が可能であってもよく、水中における撮像が可能であってもよい。
【０１５５】
コントローラ４２１は、ＣＰＵを有し、撮像装置４２０の各部を統括的に制御する。撮像部４２２は、被写体の光画像から画像データを得る。記憶部４２４は、記録媒体と、それらの記録媒体に対する記録再生機構等により構成され、撮像部４２２が撮像した画像データを記憶可能に構成される。マイクロフォン４２７は、音声データが入力可能に構成される。センサ部４２８は、加速度センサ、圧力センサ、角速度センサ、地磁気センサ等を有する。通信部４２５は、画像処理装置４００と通信可能に構成され、センサ部４２８が検出したセンサ値及び記憶された画像データを、画像処理装置４００へ送信可能に構成される。
【０１５６】
画像処理装置４００は、コントローラ４１、操作部４３、記憶部４４、通信部４５、表示部４６、及びオーディオデバイス部４７を備える。コントローラ４１、操作部４３、記憶部４４、通信部４５、表示部４６、及びオーディオデバイス部４７の各部は、バスを介して相互に接続され、データの転送や制御信号の送受信が可能に構成される。画像処理装置４００は、例えば、情報処理装置で構成され、具体的には、ＰＣ（Personal Computer）、タブレット、スマートフォン等であってもよい。
【０１５７】
コントローラ４１、操作部４３、記憶部４４、通信部４５、表示部４６、及びオーディオデバイス部４７の概略構成は、コントローラ１１、操作部１３、記憶部１４、通信部１５、表示部１６、及びオーディオデバイス部１７と同様であるため、簡略化して以下、説明をする。
【０１５８】
コントローラ４１は、ＣＰＵを有し、画像処理装置４００の各部を統括的に制御する。コントローラ４１は、図示しないＲＯＭや記憶部４４に格納された制御プログラムに従い、所定の処理を実行する。なおコントローラ４１は、後述する撮像装置４２０から通信部４５を介して入力された情報が入力される入力Ｉ／Ｆ４１ａを有する。
【０１５９】
操作部４３は、例えばキーボード、タッチパネル、電源ボタンなどのハードウェアキー、操作ダイアルなどの入力デバイスを備え、ユーザの入力操作を検出し、コントローラ４１に伝達する。操作部４３は、例えば、動画撮像の開始及び終了、撮像状況に応じた画質調整を行うモード等のモード選択、並びに画像データの再生等が可能に構成されてもよい。
【０１６０】
記憶部４４は、記録媒体と、それらの記録媒体に対する記録再生機構等により構成され得る。
【０１６１】
通信部４５は、有線ＬＡＮ、無線ＬＡＮ、ＬＴＥや３Ｇ等の通信システムによりネットワークへ通信可能に構成されるとともに、例えば所定規格の外部バス等により周辺機器と接続され得る。通信部４５は、撮像装置４２０と通信可能に構成される。なお、通信部４５は、他の通信システムを有していてもよい。
【０１６２】
表示部４６は、例えば、ＬＣＤや有機ＥＬパネル等の表示素子により実現され、ファインダとしての機能を有してもよい。
【０１６３】
オーディオデバイス部４７は、マイクロフォン及びスピーカを有する。
【０１６４】
以上のようなハードウェア構成の画像処理システム４において、図４の一点鎖線で示す部分、すなわち、撮像装置４２０の撮像部４２２、記憶部４２４、通信部４２５及びセンサ部４２８、並びに画像処理装置４００のコントローラ４１、記憶部４４、表示部４６、及びオーディオデバイス部４７は、以下のような機能的構成を有する。
【０１６５】
［画像処理システムの機能的構成］
図１４は、画像処理システム４の機能的構成を示すブロック図である。同図に示すように、画像処理システム４は、画像データ記録部４０１、検出部４０２、情報取得部４０３、解析部４０４、画質調整部４０５、再生部４０６、及び画像データ取得部４０９を備える。このうち画像処理装置４００は、情報取得部４０３、解析部４０４、画質調整部４０５、再生部４０６、及び画像データ取得部４０９を備え、撮像装置４２０は、画像データ記録部４０１及び検出部４０２を備える。
【０１６６】
画像データ記録部４０１は、画像を撮像し、画像をデータとして記録するとともに、画像データ取得部４０９の要求に応じて画像データを送信する。画像データ記録部４０１は、例えば撮像装置４２０の撮像部４２１、記憶部４２４及び通信部４２５により実現される。
【０１６７】
検出部４０２は、画像の撮像時における撮像者の活動に基づく情報を検出するとともに、情報取得部４０３の要求に応じてその情報を送信する。検出部４０２は、例えば、撮像装置４２０のセンサ部４２８及び通信部４２５により実現される。検出部４０２は、撮像者の撮像時に受けた圧力値、撮像者の撮像時の動作情報、及び撮像者の撮像時の位置情報等を検出可能に構成される。
【０１６８】
情報取得部４０３は、画像の撮像時における撮像者の活動に基づいて検出された情報を取得する。情報取得部４０３は、画像の撮像に伴って行われた活動に基づく圧力値、動作情報、及び位置情報のうちの少なくともいずれかを取得することができる。すなわち情報取得部４０３は、圧力情報取得部４０３ａと、動作情報取得部４０３ｂと、位置情報取得部４０３ｃとを有する。圧力情報取得部４０３ａは、撮像者の撮像時に受けた圧力値を取得する。動作情報取得部４０３ｂは、撮像者の撮像時の動作情報、すなわち加速度、角速度等に関する情報を取得する。位置情報取得部４０３ｃは、撮像者の撮像時の位置情報を取得する。情報取得部４０３は、例えばコントローラ４１の入力Ｉ／Ｆ４１ａにより実現される。
【０１６９】
解析部４０４は、解析部１０４と同様に、情報取得部４０３が取得した情報に基づいて画像の撮像状況を解析する。解析部４０４は、例えば、コントローラ４１により実現される。
【０１７０】
画質調整部４０５は、画質調整部１０５と同様に、撮像状況に対応する画像データに対して、解析された撮像状況に基づいて画質調整処理を実行する。画質調整部４０５は、例えば、コントローラ４１により実現される。これらの画質調整処理と撮像状況との対応関係は、記憶部４４に格納される。
【０１７１】
再生部４０６は、画質を調整された画像データを再生し、かつ、画像の撮像時に取得された音声データも再生する。再生部４０６は、例えば、表示部４６及びオーディオデバイス部４７により実現される。
【０１７２】
画像データ取得部４０９は、撮像状況に対応する画像データを取得する。具体的に、画像データ取得部４０９は、画像データ記録部４０１が記録した画像データを、通信部４５を介して取得する。画像データ取得部４０９は、例えばコントローラ４１の入力Ｉ／Ｆ４１ａにより実現される。画像データ取得部４０９は、また、画像の撮像時に記録された音声データも取得可能に構成されてもよい。
【０１７３】
［画像処理システムの動作例］
図１５は、画像処理システム４の動作を示すフローチャートである。
【０１７４】
まず、撮像装置４２０による動画の撮像・記録と同時に、検出部４０２が、動画（画像）の撮像時における撮像者の活動に基づく情報を検出する（ＳＴ４０１）。そして画像処理装置４００の情報取得部４０３が、検出部４０２に対して検出された情報の送信を要求することで、当該情報を取得する（ＳＴ４０２）。当該送信の要求は、画像処理装置４００に対するユーザの入力操作に基づき行われてもよい。情報取得部４０３は、例えば、圧力値、動作情報、及び位置情報等を取得し得る。
【０１７５】
そして、画像処理装置４００の画像データ取得部４０９は、画像データ記録部４０１に対して動画データの送信を要求することで、撮像された動画データを取得する（ＳＴ４０３）。当該送信の要求は、画像処理装置４００に対するユーザの入力操作に基づき行われてもよい。
【０１７６】
次に、情報取得部４０３が取得した情報に基づいて、画像処理装置４００の解析部４０４が、動画データの撮像状況を解析する（ＳＴ４０４）。解析部４０４は、例えば、圧力値に基づいて、水中での撮像か否かを判定してもよいし（ＳＴ４０４−１）、動作情報に基づいて動画の撮像に伴って行われる活動を解析してもよい（ＳＴ４０４−２）。あるいは、位置情報に基づいて動画の撮像に伴って行われる活動を解析してもよい（ＳＴ４０４−３）。
【０１７７】
次に、画質調整部４０５が、図３のＳＴ１０４と同様に、撮像状況に対応する動画データに対して、解析された撮像状況に基づいて画質調整処理を実行する（ＳＴ４０５）。
【０１７８】
最後に、画像処理装置５００の再生部５０６が、画質調整処理が実行された動画（画像）データを再生する（ＳＴ４０６）。
【０１７９】
以上のような構成の画像処理装置４００であっても、画像処理装置１００と同様に画質調整処理を実行することができる。すなわち、本実施形態によっても、画像の撮像に伴って行われる活動に基づいて検出された動作情報、位置情報等に基づいて撮像状況が解析され、画像データに対し、この撮像状況から自動的に画質調整処理を実行することが可能となる。
【０１８０】
また、スポーツシーンの撮像では、水中や雪上、水上など、特殊な環境中での撮像となり得るため、撮像装置４２０に搭載されたオートホワイトバランス、オート露出調整等の画像処理では調整が不十分なことも多い。本実施形態によれば、画像処理装置４００により適切な画質調整処理を実行することが可能となり、特殊な環境下で撮像した画像データであっても、十分な画質調整が可能となる。
【０１８１】
さらに本実施形態によれば、画像処理装置４００として、ＰＣ等の比較的メモリ容量の大きい情報処理装置を選択することができる。したがって、画像処理スピードを速めることが可能であり、所望の画像処理を実現することが容易になる。
【０１８２】
［変形例４−１］
図１６のブロック図に示すように、画像処理装置４００は、情報取得部４０３、解析部４０４、画質調整部４０５、再生部４０６、及び画像データ取得部４０９に加えて、演出処理部４０７を有してもよい。演出処理部４０７は、演出処理部２０７と同様に、撮像状況に対応する画像データに対して、解析された撮像状況に基づいて演出処理を実行する。これにより、画像の撮像状況から、画質調整のみならず、画像データの演出処理を実行することが可能となる。したがって、本実施形態においても、演出された画像データを容易に生成し、再生することが可能となる。
【０１８３】
［変形例４−２］
図１７のブロック図に示すように、画像処理装置４００は、画像データ取得部４０９、情報取得部４０３、解析部４０４、画質調整部４０５及び再生部４０６に加えて、音声調整部４０８を有していてもよい。音声調整部４０８は、音声調整部３０８と同様に、画像の撮像に伴って記録された音声データに対して、解析された撮像状況に基づいて音声調整処理を実行する。これにより、撮像状況に応じて音声の出力を調整することができ、画質が調整された画像データとともに、撮像状況に適した音声を楽しむことができる。
【０１８４】
［その他の変形例］
本実施形態においても、解析部４０４は、情報取得部４０３からの情報に加え、変形例１−１で説明した画像データ内の被写体の特徴を解析して抽出された情報や、変形例１−２で説明した撮像時の音声データから抽出された情報を用いて解析を行ってもよい。これにより、解析部４０４の撮像状況の解析の精度を高めることが可能となる。
【０１８５】
＜第５の実施形態＞
以下の実施形態のように、画像処理システムがクラウドシステムとして構成されてもよい。
【０１８６】
［画像処理システムのハードウェア構成］
図１８は、本技術の第５の実施形態に係る画像処理システム５のハードウェア構成を示すブロック図である。画像処理システム５は、画像処理装置５００、撮像装置５２０、センサ装置５８０、及び再生装置５６０を備える。画像処理システム５の画像処理装置５００と各装置とは、ネットワークＮを介して相互に接続されている。なお、本実施形態においても、画像データは動画データであるとする。
【０１８７】
画像処理システム５は、撮像時に検出された情報を用いて撮像装置５２０により撮像した画像データに対して画像処理装置５００が画像処理し、当該画像データを再生装置５６０で再生可能に構成される。画像処理システム５における一部の処理は、再生装置５６０に対するユーザの操作に基づき実行されてもよい。なお、画像処理システム５は、複数の撮像装置５２０、複数のセンサ装置５８０、及び複数の再生装置５６０を備えていてもよい。これにより、複数のユーザが画像処理装置５００を共有することが可能となる。
【０１８８】
撮像装置５２０は、画像データ撮像が可能に構成される。撮像装置５２０は、コントローラ５２１、撮像部５２２、記憶部５２４、通信部５２５、及びマイクロフォン５２７を備える。コントローラ５２１、撮像部５２２、記憶部５２４、通信部５２５、及びマイクロフォン５２７の各部は、バスを介して相互に接続され、データの転送や制御信号の送受信が可能に構成される。なお撮像装置５２０は、上記構成の他、図示しない表示部、スピーカ、センサ部及び操作部を有していてもよい。撮像装置５２０は、動画の撮像が可能な撮像装置であってもよいし、スマートフォン、タブレット端末等の携帯情報端末であってもよい。撮像装置５２０は、画像処理装置１００と同様に、撮像者に装着され、あるいは車載撮像が可能であってもよく、水中における撮像が可能であってもよい。
【０１８９】
コントローラ５２１は、ＣＰＵを有し、撮像装置５２０の各部を統括的に制御する。撮像部５２２は、被写体の光画像から画像データを得る。記憶部５２４は、半導体メモリ、記録媒体と、それらの記録媒体に対する記録再生機構等により構成され、撮像部５２２が撮像した画像データを記憶可能に構成される。通信部５２５は、ネットワークＮへ通信可能に構成され、記憶部５２４が記憶した画像データを画像処理装置５００へネットワークＮを介して送信可能に構成される。マイクロフォン５２７は、音声データが入力可能に構成される。
【０１９０】
センサ装置５８０は、それぞれ、画像の撮像に伴って行われた活動に基づく情報を検出することが可能に構成される。センサ装置５８０は、画像の撮像者又は被写体に装着可能に構成されてもよい。あるいは、撮像装置５２０、撮像者又は被写体が運転する自転車又は自動車等に取り付け可能に構成されてもよい。これにより、センサ装置５８０は、画像の撮像時における撮像者及び被写体のうちの少なくとも一方の活動に基づくセンサ値を検出することができる。また画像処理システム５が複数のセンサ装置５８０を有することにより、画像処理装置５００が撮像者及び被写体双方の活動に基づく情報を検出することが可能となる。
【０１９１】
センサ装置５８０は、通信部５８５及びセンサ部５８８を備える。なおセンサ装置５８０は、上記構成の他、図示しない表示部、スピーカ、記憶部、操作部、及びコントローラを有していてもよい。
【０１９２】
センサ部５８８は、加速度センサ、圧力センサ、角速度センサ、地磁気センサ等を有する。通信部５８５は、ＧＰＳからの信号を受信することで、緯度・経度情報を取得可能に構成されるとともに、センサ部５８８が検出した情報を、ネットワークを介して画像処理装置５００へ送信可能に構成される。なお通信部５８５は、有線又は無線により、撮像装置５２０と接続可能に構成されてもよい。
【０１９３】
画像処理装置５００は、コントローラ５１、記憶部５４、及び通信部５５を備える。コントローラ５１、記憶部５４、及び通信部５５の各部は、バスを介して相互に接続され、データの転送や制御信号の送受信が可能に構成される。画像処理装置５００は、例えば、ネットワークＮ上のサーバ装置（情報処理装置）で構成され得る。
【０１９４】
コントローラ５１、記憶部５４、及び通信部５５の概略構成は、コントローラ１１、記憶部１４、及び通信部１５と同様であるため、簡略化して以下、説明をする。なお、画像処理装置５００は、図示しない表示部、オーディオデバイス部、操作部を有していてもよい。
【０１９５】
コントローラ５１は、ＣＰＵを有し、画像処理装置５００の各部を統括的に制御する。コントローラ５１は、図示しないＲＯＭや記憶部５４に格納された制御プログラムに従い、所定の処理を実行する。なおコントローラ５１は、後述する撮像装置５２０及びセンサ装置５８０から通信部５５を介して入力された情報が入力される入力Ｉ／Ｆ５１ａを有する。
【０１９６】
記憶部５４は、フラッシュメモリ（Flash Memory）メモリなどの半導体メモリ、磁気ディスク、光ディスク、光磁気ディスクなどの記録媒体と、それらの記録媒体に対する記録再生機構等により構成され得る。
【０１９７】
通信部５５は、有線ＬＡＮ、無線ＬＡＮ、ＬＴＥや３Ｇ等の通信システムによりネットワークＮへ通信可能に構成される。これにより通信部５５は、撮像装置５２０、センサ装置５８０、及び再生装置５６０に接続され得る。なお、通信部４５は、所定規格の外部バス等により周辺機器と接続可能に構成されてもよく、他の通信システムを有していてもよい。
【０１９８】
再生装置５６０は、画像データの再生が可能に構成される。再生装置５６０は、コントローラ５６１、操作部５６３、通信部５６５、表示部５６６、及びスピーカ５６７を備える。コントローラ５６１、操作部５６３、通信部５６５、表示部５６６、及びスピーカ５６７の各部は、バスを介して相互に接続され、データの転送や制御信号の送受信が可能に構成される。なお再生装置５６０は、上記構成の他、図示しない記憶部、マイクロフォン、及びセンサ部を有していてもよい。
【０１９９】
再生装置５６０は、ＰＣ、スマートフォン、タブレット端末等の情報処理装置であってもよい。
【０２００】
以上のような構成の画像処理システム５において、図１８の一点鎖線で示した、撮像装置５２０の撮像部５２２、記憶部５２４及び通信部５２５、センサ装置５８０のセンサ部５８８及び通信部５８５、画像処理装置５００のコントローラ５１、記憶部５４、及び通信部５５、並びに再生装置５６０の通信部５６５、表示部５６６及びスピーカ５６７は、以下のような機能的構成を有する。
【０２０１】
［画像処理システムの機能的構成］
図１９は、画像処理システム５の機能的構成を示すブロック図である。同図に示すように、画像処理システム５は、画像データ記録部５０１、検出部５０２、情報取得部５０３、解析部５０４、画質調整部５０５、再生部５０６及び画像データ取得部５０９を備える。このうち画像処理装置５００は、情報取得部５０３、解析部５０４、画質調整部５０５、及び画像データ取得部５０９を備える。撮像装置５２０は、画像データ記録部５０１を備える。センサ装置５８０は、検出部５０２を備える。再生装置５６０は、再生部５０６を備える。
【０２０２】
画像データ記録部５０１は、画像を撮像し、画像データとして記録するとともに、画像データ取得部５０９の要求に応じて画像データを送信する。画像データ記録部５０１は、例えば撮像装置５２０の記憶部５２４及び通信部５２５により実現される。
【０２０３】
検出部５０２は、画像の撮像時における撮像者の活動に基づく情報を検出とともに、情報取得部５０３の要求に応じてその情報を送信する。検出部５０２は、例えば、センサ装置５８０のセンサ部５８８及び通信部５８５により実現される。検出部５０２は、撮像者の撮像時に受けた圧力値、撮像者の撮像時の動作情報、及び撮像者の撮像時の位置情報を検出可能に構成される。
【０２０４】
情報取得部５０３は、画像の撮像時における撮像者及び被写体の少なくとも一方の活動に基づいて検出された情報を取得する。情報取得部５０３は、画像の撮像に伴って行われた活動に基づく圧力値、動作情報、及び位置情報のうちの少なくともいずれかを取得することができる。すなわち情報取得部５０３は、圧力情報取得部５０３ａと、動作情報取得部５０３ｂと、位置情報取得部５０３ｃとを有する。圧力情報取得部５０３ａは、撮像者及び被写体のうちの少なくとも一方の撮像時に受けた圧力値を取得する。動作情報取得部５０３ｂは、撮像者及び被写体のうちの少なくとも一方の撮像時の動作情報、すなわち加速度、角速度等に関する情報を取得する。位置情報取得部５０３ｃは、撮像者及び被写体のうちの少なくとも一方の撮像時の位置情報を取得する。情報取得部５０３は、例えば画像処理装置５００のコントローラ５１の入力Ｉ／Ｆ５１ａにより実現される。
【０２０５】
解析部５０４は、解析部１０４と同様に、情報取得部５０３が取得した情報に基づいて画像の撮像状況を解析する。解析部５０４は、例えば、画像処理装置５００のコントローラ５１により実現される。
【０２０６】
画質調整部５０５は、画質調整部１０５と同様に、撮像状況に対応する画像データに対して、解析された撮像状況に基づいて画質調整処理を実行する。画質調整部５０５は、例えば、コントローラ５１により実現される。これらの画質調整処理と撮像状況との対応関係は、記憶部５４に格納される。
【０２０７】
再生部５０６は、再生部１０６と同様に、画質を調整された画像データを再生する。また、画像の撮像時に取得された音声データも再生してもよい。再生部５０６は、例えば、再生装置５６０の表示部５６６及びスピーカ５６７により実現される。
【０２０８】
画像データ取得部５０９は、撮像状況に対応する画像データを取得する。画像データ取得部５０９は、例えば画像処理装置５００のコントローラ５１及び通信部５５により実現される。画像データ取得部５０９は、また、画像の撮像時に記録された音声データも取得可能に構成されてもよい。
【０２０９】
画像データ取得部５０９は、情報取得部５０３が取得した情報と、ネットワークＮを介して取得された画像データとを照合可能であってもよい。例えば、画像データ取得部５０９は、画像データ及び情報取得部５０３が取得した情報の各々のメタデータから時刻を抽出し、これらを照合してもよい。あるいは画像データ取得部５０９は、情報取得部５０３が取得した情報に画像データとの対応を示すタグ付け等がされている場合、当該タグにより照合してもよく、他の方法により照合してもよい。
【０２１０】
［画像処理システムの動作例］
図２０は、画像処理システム５の動作を示すフローチャートである。
【０２１１】
まず、撮像装置４２０による動画の撮像と同時に、センサ装置５８０の検出部５０２が、動画（画像）の撮像時における撮像者及び被写体のうちの少なくとも一方の活動に基づく情報を検出する（ＳＴ５０１）。そして画像処理装置５００の情報取得部５０３が、検出部５０２に対して検出された情報の送信を要求することで、当該情報を取得する（ＳＴ５０２）。当該送信の要求は、再生装置５６０に対するユーザの入力操作に基づき行われてもよい。情報取得部５０３は、例えば、圧力値、動作情報、及び位置情報等を取得し得る。
【０２１２】
そして画像処理装置５００の画像データ取得部５０９は、画像データ記録部５０１に対して動画データの送信を要求することで、撮像された動画データを取得する（ＳＴ５０３）。あるいは、画像データ取得部５０９は、ネットワークＮ上の動画データベース等に格納された動画データを取得してもよい。当該送信の要求は、再生装置５６０に対するユーザの入力操作に基づき行われてもよい。画像データ取得部５０９は、取得した動画データと検出された情報とを照合し得る。
【０２１３】
次に、画像処理装置５００の情報取得部５０３が取得した情報に基づいて、解析部５０４が、動画の撮像状況を解析する（ＳＴ５０４）。解析部５０４は、例えば、圧力値に基づいて、水中での撮像か否かを判定してもよいし（ＳＴ５０４−１）、動作情報に基づいて動画の撮像に伴って行われる活動を解析してもよい（ＳＴ５０４−２）。あるいは、位置情報に基づいて動画の撮像に伴って行われる活動を解析してもよい（ＳＴ５０４−３）。
【０２１４】
次に、画質調整部５０５が、図３のＳＴ１０４と同様に、撮像状況に対応する動画データに対して、解析された撮像状況に基づいて画質調整処理を実行する（ＳＴ５０５）。
【０２１５】
最後に、再生装置５６０の再生部５０６が、画質を調整された動画（画像）データを再生する（ＳＴ５０６）。
【０２１６】
以上のような構成の画像処理装置５００であっても、画像処理装置１００と同様に処理することができる。すなわち、本実施形態によっても、動画の撮像に伴って行われる活動に基づいて検出された動作情報、位置情報等に基づいて撮像状況が解析され、動画データに対し、この撮像状況から自動的に画質調整を行うことが可能となる。
【０２１７】
さらに本実施形態によれば、クラウドシステムを利用して、撮像状況に基づく画質の調整を行うことが可能となる。これにより、再生装置５６０等のユーザ端末により画像処理装置５００を利用したサービスを享受することが可能となる。
【０２１８】
［変形例５−１］
図２１のブロック図に示すように、画像処理装置５００は、画像データ取得部５０９、情報取得部５０３、解析部５０４、画質調整部５０５及び再生部５０６に加えて、演出処理部５０７を有してもよい。演出処理部５０７は、演出処理部２０７と同様に、撮像状況に対応する画像データに対して、解析された撮像状況に基づいて演出処理を実行する。これにより、画像の撮像状況から、画質調整のみならず、画像データの演出処理を実行することが可能となる。したがって、撮像状況が理解しやすく、かつ撮像時の臨場感を高めることが可能な画像データを、容易に再生することが可能となる。
【０２１９】
［変形例５−２］
図２２のブロック図に示すように、画像処理装置５００は、画像データ取得部５０９、情報取得部５０３、解析部５０４、画質調整部５０５及び再生部５０６に加えて、音声調整部５０８を有していてもよい。音声調整部５０８は、音声調整部５０８と同様に、画像の撮像に伴って記録された音声データに対して、解析された撮像状況に基づいて音声調整処理を実行する。これにより、撮像状況に応じて音声の出力を調整することができ、画質が調整された画像データとともに、撮像状況に適した音声を楽しむことができる。
【０２２０】
［その他の変形例］
本実施形態においても、解析部５０４は、情報取得部５０３からの情報に加え、変形例１−１で説明した画像データ内の被写体の特徴を解析して抽出された情報や、変形例１−２で説明した撮像時の音声データから抽出された情報を用いて解析を行ってもよい。これにより、解析部５０４の撮像状況の解析の精度を高めることが可能となる。
【０２２１】
以上、本技術の実施形態について説明したが、本技術は上述の実施形態にのみ限定されるものではなく、本技術の要旨を逸脱しない範囲内において種々変更を加え得ることは勿論である。
【０２２２】
例えば、上述の実施形態では、画像データが動画データであるとして説明したが、静止画像データであってもよい。この場合、情報取得部は、静止画像の撮像に伴って行われた活動に基づいて検出された情報を取得する。例えば、情報取得部は、静止画像の撮像時を含む所定時間内に検出された圧力値、動作情報、及び位置情報等を取得し得る。また、解析部は、この情報に基づいて静止画像データの撮像状況を解析する。そして、画質調整部が、撮像状況に対応する静止画像データに対して、解析された撮像状況に基づいて画質調整処理を実行する。
【０２２３】
これにより、静止画像であっても、その撮像状況に基づいて画質を調整することができ、撮像状況から推定される画質の乱れを改善した静止画像データや、より撮像状況に適した静止画像データを再生することが可能となる。
【０２２４】
また、音声調整処理部は、静止画像の撮像時を含む所定時間内に記録された音声データに対して、解析された撮像状況に基づいて音声調整処理を実行することが可能である。これにより、静止画像とともに再生され得る音声データに対して、撮像状況に適した音声調整処理を実行することができる。
【０２２５】
例えば、上述の実施形態では、情報取得部が取得する情報として、圧力値、動作情報、及び位置情報を挙げたが、これらに限定されない。
【０２２６】
画像処理装置は、一装置で構成される例に限定されず、ネットワーク上のサーバ装置（情報処理装置）、及びユーザ端末としての情報処理装置等の複数の装置で構成されてもよい。この場合は、情報取得部、及び解析部がサーバ装置のコントローラにより実現され、画質調整部がユーザ端末のコントローラにより実現されてもよい。これによっても、上述の作用効果を有する画像処理装置を実現することができる。
【０２２７】
なお、本技術は以下のような構成もとることができる。
（１）画像の撮像に伴って行われた活動に基づいて検出された情報を取得する情報取得部と、
上記情報に基づいて上記画像の撮像状況を解析する解析部と、
上記撮像状況に対応する画像データに対して、上記解析された撮像状況に基づいて画質調整処理を実行する画質調整部と
を具備する画像処理装置。
（２）上記（１）に記載の画像処理装置であって、
上記画質調整処理は、上記解析された撮像状況から推定される画質の乱れを改善する処理である
画像処理装置。
（３）上記（１）又は（２）に記載の画像処理装置であって、
上記情報取得部は、画像の撮像時における撮像者の活動に基づいて検出された情報を取得する
画像処理装置。
（４）上記（１）から（３）のうちいずれか１つに記載の画像処理装置であって、
上記情報取得部は、画像の撮像に伴って行われた活動に基づく圧力値、動作情報、及び位置情報のうちの少なくともいずれかを取得する
画像処理装置。
（５）上記（４）に記載の画像処理装置であって、
上記情報取得部は、上記撮像者及び被写体のうちの少なくとも一方の撮像時に受けた圧力値を取得する圧力情報取得部を有し、
上記解析部は、上記圧力値に基づいて、水中での撮像か否かを判定する
画像処理装置。
（６）上記（４）又は（５）に記載の画像処理装置であって、
上記情報取得部は、上記撮像者及び被写体のうちの少なくとも一方の動作情報を取得する動作情報取得部を有し、
上記解析部は、上記動作情報に基づいて、上記画像の撮像に伴って行われる活動を解析する
画像処理装置。
（７）上記（６）に記載の画像処理装置であって、
上記動作情報取得部は、振動の周波数を動作情報として取得し、
上記解析部は、上記振動の周波数が所定の周波数以上の場合、振動を伴う撮像状況であると解析し、
上記画質調整部は、振動を伴う撮像状況と解析された場合、上記振動の周波数に基づいて画像データの振動を補正する処理を実行する
画像処理装置。
（８）上記（４）から（７）のうちいずれか１つに記載の画像処理装置であって、
上記情報取得部は、上記撮像者及び被写体のうちの少なくとも一方の撮像時の位置情報を取得する位置情報取得部を有し、
上記解析部は、上記位置情報に基づいて、上記画像の撮像に伴って行われる活動を解析する
画像処理装置。
（９）上記（１）から（８）のうちいずれか１つに記載の画像処理装置であって、
上記解析部は、上記情報取得部により取得された情報及び上記画像内の被写体の特徴を解析して抽出された情報に基づいて上記画像の撮像状況を解析する
画像処理装置。
（１０）上記（１）から（９）のうちいずれか１つに記載の画像処理装置であって、
上記撮像状況に対応する画像データに対して、上記解析された撮像状況に基づいて演出処理を実行する演出処理部をさらに具備する
画像処理装置。
（１１）上記（１）から（１０）のうちいずれか１つに記載の画像処理装置であって、
上記画像の撮像に伴って記録された音声データに対して、上記解析された撮像状況に基づいて上記音声調整処理を実行する音声調整部をさらに具備する
画像処理装置。
（１２）上記（１）から（１１）のうちいずれか１つに記載の画像処理装置であって、
画像を撮像し、画像データとして記録する画像データ記録部をさらに具備する
画像処理装置。
（１３）上記（１）から（１２）のうちいずれか１つに記載の画像処理装置であって、
上記画像データを再生する再生部をさらに具備する
画像処理装置。
（１４）上記（１）から（１３）のうちいずれか１つに記載の画像処理装置であって、
上記撮像状況に対応する画像データを取得する画像データ取得部をさらに具備する
画像処理装置。
（１５）画像の撮像に伴って行われた活動に基づいて検出された情報を取得し、
上記情報に基づいて上記画像の撮像状況を解析し、
上記撮像状況に対応する画像データに対して、上記解析された撮像状況に基づいて画質調整処理を実行する
画像処理方法。
（１６）画像の撮像に伴って行われた活動に基づいて検出された情報を取得する情報取得部と、
上記情報に基づいて上記画像の撮像状況を解析する解析部と、
上記撮像状況に対応する画像データに対して、上記解析された撮像状況に基づいて画質調整処理を実行する画質調整部と
として情報処理装置を機能させるプログラム。
【符号の説明】
【０２２８】
１００，２００，３００，４００，５００…画像処理装置
１０１，４０１，５０１…画像データ記録部
１０３，４０３，５０３…情報取得部
１０３ａ，４０３ａ，５０３ａ…圧力情報取得部
１０３ｂ，４０３ｂ，５０３ｂ…動作情報取得部
１０３ｃ，４０３ｃ，５０３ｃ…位置情報取得部
１０４，４０４，５０４…解析部
１０５，４０５，５０５…画質調整部
１０６，４０６，５０６…再生部
２０７，４０７，５０７…演出処理部
３０８，４０８，５０８…音声調整部
４０９，５０９…画像データ取得部
【図１】
2015195439.tif 000003
【図２】
2015195439.tif 000004
【図３】
2015195439.tif 000005
【図４】
2015195439.tif 000006
【図５】
2015195439.tif 000007
【図６】
2015195439.tif 000008
【図７】
2015195439.tif 000009
【図８】
2015195439.tif 000010
【図９】
2015195439.tif 000011
【図１０】
2015195439.tif 000012
【図１１】
2015195439.tif 000013
【図１２】
2015195439.tif 000014
【図１３】
2015195439.tif 000015
【図１４】
2015195439.tif 000016
【図１５】
2015195439.tif 000017
【図１６】
2015195439.tif 000018
【図１７】
2015195439.tif 000019
【図１８】
2015195439.tif 000020
【図１９】
2015195439.tif 000021
【図２０】
2015195439.tif 000022
【図２１】
2015195439.tif 000023
【図２２】
2015195439.tif 000024