(57)【要約】      （修正有）【課題】ウェアラブル機器からの情報を必要なタイミングで取得し、それらを有効活用する事で、高速かつユーザーの意思に沿った正確なＡＥ・ＡＦ制御を実現する事ができる撮像装置を提供する。【解決手段】カメラ動作において、所定タイミングか否かを判断することが可能なタイミング判定処理、ウェアラブル端末との通信する事が可能な情報取得処理、前記情報取得処理によりウェアラブル端末から得られた情報を元に、主被写体に関する情報を選定する事が可能な被写体情報選定処理、前記被写体情報選定処理により得られた情報を元に、ＡＦ制御へ反映させる事が可能なＡＦ制御情報設定処理、前記被写体情報選定処理により得られた情報を元に、ＡＥ制御へ反映させる事が可能なＡＥ制御情報設定処理を行う。【選択図】図２
2018033056.tif 000002
【特許請求の範囲】
【請求項１】
カメラ動作において所定タイミングか否かを判断することが可能なタイミング判定手段、
ウェアラブル端末との通信する事が可能な通信手段（１０８）、
前記通信手段によりウェアラブル端末から得られた情報を元に、
主被写体に関する情報を選定する事が可能な被写体情報選定手段、
前記被写体情報選定手段により得られた情報を元に、
ＡＦ制御へ反映させる事が可能なＡＦ制御情報設定手段
前記被写体情報選定手段により得られた情報を元に、
ＡＥ制御へ反映させる事が可能なＡＥ制御情報設定手段
を備えた撮像装置。
【請求項２】
前記において、所定タイミングは、
カメラを構えた時・ＡＥ開始釦Ｏｎ・ＬｉｖｅＶｉｅｗ開始釦Ｏｎ・動画記録開始釦Ｏｎである事を特徴とする請求項１に記載の撮像装置。
【請求項３】
前記において、主被写体に関する情報は、
距離情報・被写体位置（範囲）・被写体認識結果・Ｂｖ値・被写体位置（範囲）・シーン認識結果・フリッカ情報であることを特徴とする請求項１に記載の撮像装置。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は撮像装置、特にウェアラブル機器と連携してユーザーの意思に沿ったＡＥ・ＡＦ制御を高速かつ正確に行う事が出来る撮像装置に関するものである。
【背景技術】
【０００２】
従来より、カメラはカメラ単体だけではなく、他カメラを含む他機器と連携を行い、またそれらから得られる情報を有効活用する事で、より高速に、またはより正確に精密に撮影制御を行うように工夫されてきている。
【０００３】
例えば、特許文献１では相互に通信可能な複数台の撮像装置のうち少なくとも1つの撮像装置が合焦点までの距離情報、または合焦点を含む撮影画像を、前記複数台の撮像装置のうちの他の撮像装置に送信し、前記各撮像装置が、前記合焦点までの距離情報、または前記合焦点を含む撮影画像を用いて、各々の被写界深度を決定する事を特徴とする発明が開示されている。
【先行技術文献】
【特許文献】
【０００４】
【特許文献１】特開２０１４−４４５４０号公報
【発明の概要】
【発明が解決しようとする課題】
【０００５】
しかしながら、上述の特許文献に開示された従来技術では、相互に通信可能な複数台の撮像装置はあくまで同一の被写体を撮影する撮影システムであるという前提の元に成り立っている為、少しでもタイミングが狂った場合にユーザーの意図しない結果になりうる事が容易に想像されるという事と、同一被写体を撮影する割には、被写界深度のみを決定する事にしか他撮像装置からの情報を有効利用していない為、ユーザー視点で考えた場合に、ましてや今後普及していくと思われるウェアラブル端末との連携を考慮すると、複数台の撮像装置をわざわざ用意する事のメリットが非常に薄いと感じられてしまいかねない。
【課題を解決するための手段】
【０００６】
上記目的を達成するために、本発明は、
カメラ動作において所定タイミングか否かを判断することが可能なタイミング判定手段）、
ウェアラブル端末との通信する事が可能な通信手段、
前記通信手段によりウェアラブル端末から得られた情報を元に、
主被写体に関する情報を選定する事が可能な被写体情報選定手段、
前記被写体情報選定手段により得られた情報を元に、
ＡＦ制御へ反映させる事が可能なＡＦ制御情報設定手段
前記被写体情報選定手段により得られた情報を元に、
ＡＥ制御へ反映させる事が可能なＡＥ制御情報設定手段
を備えた撮像装置を提供する。
【０００７】
また、前記において、所定タイミングは、
カメラを構えた時・ＡＥ開始釦Ｏｎ・ＬｉｖｅＶｉｅｗ開始釦Ｏｎ・動画記録開始釦Ｏｎである事を特徴とする前記記載の撮像装置を提供する。
【０００８】
また、前記において、主被写体に関する情報は、
距離情報・被写体位置（範囲）・被写体認識結果・Ｂｖ値・被写体位置（範囲）・シーン認識結果・フリッカ情報であることを特徴とする前記記載の撮像装置を提供する。
【発明の効果】
【０００９】
本発明によれば、ユーザーの視点や意思を反映できる、特にメガネ型のウェアラブル機器からの情報を必要なタイミングで取得し、それらを有効活用する事で、高速かつユーザーの意思に沿った正確なＡＥ・ＡＦ制御を実現する事が可能となる。
【図面の簡単な説明】
【００１０】
【図１】本発明の実施例に係る撮像装置のブロック図及びウェアラブル機器の構成図
【図２】上記実施例に係る全体制御のフローチャート
【図３】上記実施例に係るタイミング判定処理のフローチャート
【図４】上記実施例に係る被写体情報選定処理のフローチャート
【図５】上記実施例に係るＡＦ情報設定処理のフローチャート
【図６】上記実施例に係るＡＥ情報設定処理のフローチャート
【図７】上記実施例に係るウェアラブル機器処理のフローチャート
【発明を実施するための形態】
【００１１】
以下に、本発明の好ましい実施の形態を、添付の図面に基づいて詳細に説明する。図１は、本発明の実施形態にかかわる撮像装置とウェアラブル機器の構成図である。
【００１２】
１００は撮影レンズである。撮影レンズの種類としては、単焦点レンズやズームレンズが存在する。１０１は撮像素子である。撮像素子１０１にはＣＣＤやＣＭＯＳセンサなどが用いられ、撮影レンズ１００によって結像された被写体像を電気信号に変換する。１０２はＡ／Ｄ変換器である。Ａ／Ｄ変換器１０２は撮像素子１０１のアナログ出力信号をデジタル信号に変換する。１０３はマイクロコンピュータである。マイクロコンピュータ１０３は各構成要素の制御やデータ処理など撮像装置全体を制御する。
【００１３】
本実施例で説明する、ウェアラブル機器の表示制御のタイミング、接眼検知センサとの通信等のすべての処理をマイクロコンピュータ１０３で行う。１０４は揮発性メモリである。揮発性メモリ１０４にはＡ／Ｄ変換器でデジタル信号に変換された画像データを一時的に保持する。１０５は不揮発性メモリである。不揮発性メモリ１０５にはマイクロコンピュータ１０３で処理する撮像装置の実行プログラムがある。１０６は光学ファインダーである。光学ファインダーを覗きながらユーザが撮影することを想定する。１０７は画像処理部である。
【００１４】
画像処理部１０７では、撮影された画像に対する画像処理を行う。また、撮影後の画像に対し、例えば再生メニューからのＲＡＷ現像機能や、フィルタ効果機能を提供する。１０８は通信部材である。ウェアラブル機器との通信制御をおこなう。例えば、Ｂｌｕｅｔｏｏｔｈ（登録商標） 、ＺｉｇＢｅｅ、Ｗｉｆｉ、などの無線ＬＡＮ技術を想定する。但し、通信技術に関しては、特に本実施例では特に限定しない。１０９は接眼検知センサである。光学ファインダー１０６付近に位置させておき、光学ファインダーが覗かれたかどうか、眼検知センサ１０９を用いて検知する。
【００１５】
検知した結果に関してはマイクロコンピュータ１０３で処理することを想定している。１１０は表示部材である。液晶モニターなどを想定している。撮影して得られた画像の再生や、メニューの表示、再生画像のＲＡＷ現像ＵＩ表示、フィルタ処理のＵＩ表示を行う。また、本実施例では、主表示部材１１０にタッチパネルの機能を有する表示装置を想定している。タッチパネルの操作に応じて、マイクロコンピュータ１０３によって、操作部材１１３同等の制御が行えるものとする。操作部材１１３にはスイッチ、ボタンなどがあり、表示部材１１０で表示されたものに対する操作を行う。
【００１６】
また、本実施例では、副表示部材１１１に表示パネルを想定している。撮影に関する設定値を表示する。音検知部材１１２は、外部環境の音を検知または記録する操作を行う。
【００１７】
ウェアラブル機器の構成を説明する。１２０は表示部材である。表示部材１２０には、通信部材を通して、撮像装置で撮像した画像や、再生画像、メニューなどの表示を行うことが可能である。１１４はウェアラブル機器での撮像で使用するレンズである。１１５は通信部材である。撮像装置の通信部材１０８と通信する処理を制御する。撮像装置の通信部材１０８同様、例えば、Ｂｌｕｅｔｏｏｔｈ（登録商標） 、ＺｉｇＢｅｅ、Ｗｉｆｉ、などの無線ＬＡＮ技術を想定する。通信技術に関しては、特に本実施例では限定しない。１１６はキャプチャ部材である。
【００１８】
１１７は音を検知する部材である。１１８はメガネレンズである。１１９はメガネレンズに装着する視線検知センサである。この視線検知センサから人間の目がウェアラブル機器を通し、どこを見ているかを検知することができる。
【００１９】
［実施例１］
以下、図２〜図７を参照して、本発明の第1の実施例について説明する。まず、全体のフローを示す図２について説明する。
【００２０】
最初に撮像装置は、タイミング判定処理を用いて所望のタイミングが来たか否かを判定する（Ｓ２０１）。前記タイミング判定処理により所望のタイミングが来たと判断したら、次にウェアラブル機器と通信を行い、ウェアラブル側で蓄積していた全ての蓄積情報を取得する（Ｓ２０２）。前記蓄積情報の取得か完了すると、次にその取得した全蓄積情報の中から主被写体に関する蓄積情報だけを選び出す、被写体情報選定処理を行う（Ｓ２０３）。
【００２１】
次にその得られた主被写体に関する蓄積情報をＡＦ制御に適用する、ＡＦ制御情報設定処理を行う（Ｓ２０４）。更に前記取得された主被写体に関する蓄積情報をＡＥ制御に適用する、ＡＥ制御情報設定処理を行い（Ｓ２０５）、全体のフローとしては終了となる。
【００２２】
次に、タイミング判定処理を行う図３について説明する。
タイミング判定処理とは、つまり撮影準備開始操作がされたかどうかを判断する処理となる。タイミング判定処理は、まずウェアラブル機器からの撮影画像を取得する（Ｓ３０１）。  本実施例においてウェアラブル機器はメガネ型を想定しており、つまりそこからの撮影画像は、ユーザーの視点とほぼ同等のものを意味するという事を意味している。前記取得された撮影画像から、まずカメラを構えたか否かを判断する（Ｓ３０２）。前記判断手段によりカメラを構えたと判断されれば、所望のタイミングが来たとして終了となる。
【００２３】
前記判断手段によりカメラを構えていないと判断されれば、次にＡＥ開始釦がＯｎされているか否かを判断する（Ｓ３０３）。前記判断手段によりＡＥ開始釦がＯｎされたと判断されれば、所望のタイミングが来たとして終了となる。前記判断手段によりＡＥ開始釦がＯｎされていないと判断されれば、次にＬｉｖｅＶｉｅｗ開始釦がＯｎされているか否かを判断する（Ｓ３０４）。前記判断手段によりＬｉｖｅＶｉｅｗ開始釦がＯｎされたと判断されれば、所望のタイミングが来たとして終了となる。
【００２４】
前記判断手段によりＬｉｖｅＶｉｅｗ開始釦がＯｎされていないと判断されれば、次に動画記録開始釦がＯｎされているか否かを判断する（Ｓ３０５）。前記判断手段により動画記録開始釦がＯｎされたと判断されれば、所望のタイミングが来たとして終了となり、前記判断手段により動画記録開始釦がＯｎされたと判断されていないと判断されれば、ウェアラブル機器からの撮影画像を取得する（Ｓ３０１）最初のフローに戻る。
【００２５】
次に、被写体情報選定処理を行う図４について説明する。被写体情報選定処理とは、所望のタイミングが来るまでウェアラブル側で蓄積しておいた、この後のカメラ動作で使う為の必要な情報の中から、主被写体に対応した情報だけを抜き出す処理を意味している。
まず最初に取得した蓄積情報を時間軸を基準にソートする（Ｓ４０１）。次に時間の新しい方からカウントして、所定時間以上同一被写体が継続しているか否かを判定する（Ｓ４０２）。前記判定手段により、同一被写体が継続している場合は、その被写体を凝視していたとみなし、その同一被写体を主被写体に設定する（Ｓ４０３）。そうでない場合は、現在カメラ側で見ている被写体と一致する被写体をサーチし（Ｓ４０４）、それを主被写体とする。そうして得られた主被写体に対応する蓄積情報を取得して（Ｓ４０５）、終了となる。
【００２６】
次に、ＡＦ情報設定処理について、図５を用いて説明する。まず、前記被写体情報選定処理により選定された蓄積情報から、距離情報・被写体位置（範囲）・被写体認識結果・Ｂｖ値を取得する（Ｓ５０１）。次に前記距離情報をレンズのＡＦ開始位置に設定する（Ｓ５０２）。その次に前記被写体位置（範囲）をサーチ開始範囲に設定する（Ｓ５０３）。その次に前記被写体認識結果を主被写体に設定する（Ｓ５０４）。その次に前記Ｂｖ値をＡＦ補助光要否判断に設定（Ｓ５０５）。最後にＡＦ制御を開始（Ｓ５０６）して終了となる。
【００２７】
つまり、これらの情報をＡＦ制御開始時から設定する事で、本来ある程度ＡＥやＡＦを動作させてからしか分からなかった情報が既に得られている為、通常ＡＦ動作と比較して高速かつ正確に動作させる事が可能となる。
【００２８】
次に、ＡＥ情報設定処理について、図６を用いて説明する。まず、前記被写体情報選定処理により選定された蓄積情報から、被写体位置（範囲）・シーン認識結果・フリッカ情報を取得する（Ｓ６０１）。その次に被写体位置（範囲）をＡＥ演算の中心位置に設定する（Ｓ６０２）。その次にシーン認識結果をプログラム線図情報に設定（Ｓ６０３）。その次にフリッカ情報を設定（Ｓ６０４）。
【００２９】
最後にＡＥ制御を開始（Ｓ６０５）して終了となる。つまり、これもＡＦ制御同様、これらの情報をＡＥ制御開始時から設定する事で、本来ある程度ＡＥやＡＦを動作させてからしか分からなかった情報が既に得られている為、通常ＡＥ動作と比較して高速かつ正確に動作させる事が可能となる。
【００３０】
次に、カメラと通信を行う事で必要な情報を取得する事が可能な、ウェアラブル機器処理について、図７を用いて説明する。最初に撮像を行い（Ｓ７０１）、次にそれを現像する（Ｓ７０２）事で、撮影された画像データを生成する。次にそれをカメラ側へ送信する（Ｓ７０３）。
【００３１】
次にその画像データから、距離情報・被写体位置（範囲）・被写体認識結果・Ｂｖ値・シーン認識結果・フリッカ情報を演算する（Ｓ７０４）。それを時間情報とセットにし、蓄積情報として保存する（Ｓ７０５）。次にカメラがその蓄積情報の送信要求を出しているかを判断する（Ｓ７０６）。カメラが送信要求を出している場合は、それまで蓄積し続けてきた全蓄積情報を送信し（Ｓ７０７）、送信完了した時点で全蓄積データをクリアする（Ｓ７０８）。そうでない場合は、最初のフローに戻る。
【００３２】
本実施例において、ウェアラブル端末を通して撮影される画像やそこから得られる情報は、ユーザーの視点や意思を反映した重要なデータの１つであると考えている。その上で、これまで説明してきたような実施形態に沿って制御する事で、そのユーザーの視点や意思を解読しカメラが有効に活用する事が出来、高速かつユーザーの意思に沿った正確なＡＥやＡＦ制御を行う事が可能になる。
【００３３】
以上、本発明の好ましい実施形態について説明したが、本発明はこれらの実施形態に限定されず、その要旨の範囲内で種々の変形及び変更が可能である。
【符号の説明】
【００３４】
１００：レンズ
１０１：撮像素子
１０２：Ａ／Ｄ変換器
１０３：マイクロコンピュータ
１０４：揮発性メモリ
１０５：不揮発性メモリ
１０６：光学ファインダー
１０７：画像処理部
１０８：撮像装置の通信部材
１０９：接眼検知センサ
１１０：主表示部材
１１１：副表示部材
１１２：撮像装置の音検知部材
１１３：操作部材
１１４：ウェアラブル機器のレンズ
１１５：ウェアラブル機器の通信部材
１１６：ウェアラブル機器のキャプチャ部材
１１７：ウェアラブル機器の音検知部材
１１８：メガネレンズ
１１９：ウェアラブル機器の視線検知センサ
１２０：ウェアラブル機器の表示部
【図１】
2018033056.tif 000003
【図２】
2018033056.tif 000004
【図３】
2018033056.tif 000005
【図４】
2018033056.tif 000006
【図５】
2018033056.tif 000007
【図６】
2018033056.tif 000008
【図７】
2018033056.tif 000009