(57)【要約】【課題】撮影者が音声サポートや音楽聴講などヘッドホンを使用し、且つファインダーを覗いて撮影を行う状況において、既再生音と周辺音の両方を適切に取得しながら撮影することが可能な撮影装置を提供すること。【解決手段】ヘッドホンと、通信可能に接続された撮像装置と、を備える撮像システムであって、前記ヘッドホンは、音声を再生する再生手段と、を有し、前記撮像装置は、接眼検知手段を有するファインダーと、外部の音を集音する第一の集音手段と、前記ヘッドホンへ音声情報を送信する送信手段と、を有し、前記送信手段は、前記接眼検知手段により接眼検知した場合に、前記第一の集音部より集音した外部音を前記ヘッドホンへ送信する。【選択図】図１
2018191023.tif 000002
【特許請求の範囲】
【請求項１】
ヘッドホンと、通信可能に接続された撮像装置と、を備える撮像システムであって、
前記ヘッドホンは、サポート音声及び外部音を再生可能な再生手段と、を有し、
前記撮像装置は、接眼検知手段を有するファインダーと、
外部の音を集音する第一の集音手段と、
前記ヘッドホンへ音声情報を送信する送信手段と、を有し、
前記送信手段は、前記接眼検知手段により接眼検知した場合に、前記第一の集音部より集音した外部音を前記ヘッドホンへ送信することを特徴とする撮像システム。
【請求項２】
前記送信手段は、前記接眼検知手段により接眼検知した場合に、前記第一の集音部より集音した前記外部音と前記撮像手段に予め記録されているサポート音声との混合音を送信することを特徴とする請求項１に記載の撮像システム。
【請求項３】
前記撮像装置は、前記撮像装置内の駆動部の駆動開始を指示する操作手段を、さらに有し、前記送信手段は、前記接眼検知手段により接眼検知した場合に、前記操作手段が操作されているときは、前記撮像装置内の駆動部が駆動している間は前記第一の集音手段により集音した外部音を送信しないことを特徴とする請求項１又は請求項２に記載の撮像システム。
【請求項４】
前記撮像装置内の駆動部は駆動速度を変更する駆動調整手段を、さらに有し、前記接眼検知手段により接眼検知した場合に、前記操作手段が操作されているときに、前記駆動調整手段は、前記駆動部の駆動速度を変更すること、を特徴とする請求項３に記載の撮像システム。
【請求項５】
前記送信手段は、前記接眼検知手段により接眼検知した場合に、前記操作手段が操作されているときは、前記第一の集音手段により集音した外部音の出力を小さくして送信することを特徴とする請求項３又は請求項４に記載の撮像システム。
【請求項６】
前記撮像装置と通信可能に接続された第二の電子機器を、さらに備える撮像システムであって、前記第二の電子機器は外部音を集音する第二の集音手段を有し、前記送信手段は、前記接眼検知手段により接眼検知した場合に、前記第二の集音部より集音した外部音を送信することを特徴とする請求項１乃至請求項５の何れか一項に記載の撮像システム。
【請求項７】
前記送信手段は、前記接眼検知手段により接眼検知した場合に、前記第一の集音部より集音した前記外部音と前記撮像手段に予め記録されているサポート音声との混合音を送信することを特徴とする請求項６に記載の撮像システム。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、撮像システムに関し、特に音声再生などの電子機器を用いた際のカメラの撮影アシストに関する。
【背景技術】
【０００２】
人の声等をコンピュータに認識させる音声認識機能が付与された電子機器が開発されている。そして、近年では、スマートフォンなどの電子機器において、音声認識でアプリケーションの操作をおこなったり、音声による音声操作（いわゆる音声サポート）が普及している。
【０００３】
音声サポートを受ける場合は、一般的には外部に音が漏れないようにヘッドホンなどの耳に直接装着する音声出力機器を使用することが望ましい。同様に、屋外で音楽を聴講する際も一般的には人に迷惑がかからないようにヘッドホン等の音声出力機器を使用する。
【０００４】
しかしながら、カメラ撮影において上記の音声サポート等ヘッドホンを使用して撮影を行う際は、ヘッドホンから流れる既再生音の音声と同時に周辺の音情報、特に被写体の音声を取得して撮影することがのぞましい。
【０００５】
すなわち、撮影者はすべての音情報を適切に取得するために、カメラ本体から発生する音声などの音量調節やヘッドホンから流れる既再生音との音声制御などの配慮が必要になる。
【０００６】
特許文献１には、カメラ本体から発生する音声に対しての音量調節の手間を省くための技術が開示されている。具体的には、光学ファインダーを覗く撮影者の顔や指などが接眼部に接近したことがアイセンサによって検出されると、合焦音や、シャッター音、警告音、背景音、再生音などを内蔵スピーカから小音量で音を出力させる。一方で、アイセンサによって検出されないときには、内蔵スピーカから大音量で音を出力させる技術が開示されている。これにより、撮影者がファインダーを覗いた時に、切り替え作業なしでカメラ本体から発生する音の音量を抑えることができる。
【先行技術文献】
【特許文献】
【０００７】
【特許文献１】特開２０１０−２６４５９号公報
【発明の概要】
【発明が解決しようとする課題】
【０００８】
しかしながら、上述の特許文献１に開示された従来技術では、カメラ本体から発生する音の音量調節の手間を省いている提案であり、撮影しようとしている被写体が発する声等の周辺音の情報取得手段や、周辺音と既再生音との音の制御に関しては開示されていない。特に、撮影者がヘッドホンを使用して撮影を行う場合は、撮影者は被写体の声や外部音などの外部の音情報が取得しづらくなり、シャッターチャンスを逃してしまう可能性がある。
【０００９】
特に、一眼レフカメラ等のファインダーをのぞいて撮影を行うカメラにおいては、視野範囲も限定されるため被写体含めた外部情報をより取得しづらくなってしまう。即ち、画角変更や構図変更の際に、被写体の声をもとに合わせるのは困難になる。ほかにも、撮影者は撮影画角外からの救急車などの車両等が接近する音も認識することができない。
【００１０】
そこで、本発明の目的は、上記を鑑みてなされたものであり、撮影者が音声サポートや音楽聴講などヘッドホンを使用し、且つファインダーを覗いて撮影を行う状況において、既再生音と周辺音の両方を適切に取得しながら撮影することが可能な撮影装置を提供することにある。
【課題を解決するための手段】
【００１１】
上記の目的を達成するために、本発明に係る撮影装置は、
ヘッドホンと、通信可能に接続された撮像装置と、を備える撮像システムであって、前記ヘッドホンは、音声を再生する再生手段と、を有し、前記撮像装置は、接眼検知手段を有するファインダーと、外部の音を集音する第一の集音手段と、前記ヘッドホンへ音声情報を送信する送信手段と、を有し、前記送信手段は、前記接眼検知手段により接眼検知した場合に、前記第一の集音部より集音した外部音を前記ヘッドホンへ送信することを特徴とする。
【発明の効果】
【００１２】
本発明に係る撮影装置によれば、撮影者がヘッドホンなどの音声再生装置を使用し、且つファインダーを覗いている状況において、ヘッドホンからの再生音と環境内の周辺音の両方を適切に取得しながら撮影することが可能になる。
【図面の簡単な説明】
【００１３】
【図１】本発明の実施形態に係る撮影動作の例を示すフローチャート
【図２（ａ）】本発明の実施形態に係る撮像装置のメカ構成の例を示す図
【図２（ｂ）】本発明の実施形態に係る撮像装置のメカ構成の例を示す図
【図２（ｃ）】本発明の実施形態に係る撮像装置のメカ構成の例を示す図
【図３（ａ）】本発明の実施形態に係る撮像装置の構成例を示すブロック図
【図３（ｂ）】本発明の実施形態に係る撮像装置の構成例を示すブロック図
【図４】本発明の実施形態に係る第一及び第二の電子機器の関係を示す図
【図５（ａ）】本発明の実施形態に係る撮像システムの使用状態の例を示す図
【図５（ｂ）】本発明の実施形態に係る撮像システムの使用状態の例を示す図
【図５（ｃ）】本発明の実施形態に係る撮像システムの使用状態の例を示す図
【図６】従来技術の説明および本発明の課題を説明する図
【発明を実施するための形態】
【００１４】
以下に、本発明の好ましい実施の形態を、添付の図面に基づいて詳細に説明する。
【００１５】
図１は、本発明の実施形態である第一の電子機器（撮像装置）及び第二の電子機器（スマートフォン）で外部の集音を用いた撮影動作を示すフローチャート（第二の実施形態）であり、詳細については後述する。図２は、本発明の実施形態に係る撮像装置のメカ構成の例を示す図である。図２（ａ）および図２（ｂ）はそれぞれ、本発明の実施形態であるカメラを前面および背面から見た図であり、図２（ｃ）は本発明の実施形態であるカメラの撮影レンズを取り外したカメラの前面から見た斜視図である。
【００１６】
１１はカメラ（撮像装置）、１０３はカメラ本体に着脱可能な撮影レンズである。３は測光、測距の開始を指示し、撮影を指示するための２段スイッチとなっているレリーズボタンである。このレリーズボタン３を１段目まで軽く押し込んだ状態を「半押し」といい（以下、ＳＷ１）、この状態では測光および測距が行われる。半押しからさらに２段目まで押すことを「全押し」といい（以下、ＳＷ２）、全押しすることで後述する不図示のシャッター１０１が駆動され、撮影が行われる。１２は撮影画像の確認や選択、メニュー機能の選択・設定に使用する画像表示部（以下、ＴＦＴ）、７は被写体像を確認するための光学ファインダーである。１７はカメラ１１の電源オンとオフを切り替える電源スイッチである。
【００１７】
カメラ１１内には、撮影レンズ１０３を通過した撮影光束が導かれるミラーボックスが設けられており、ミラーボックス内にミラーユニット６０が配設されている。ミラーユニット６０はメインミラーとサブミラーで構成されており、撮影光束をファインダー７の内部にある不図示のペンタダハミラーの方向へ導くために撮影光軸に対して４５°の角度に保持される状態（以下、ミラーダウン位置）と、撮像部２２の方向へ導くために撮影光束から退避した位置に保持される状態（以下、ミラーアップ位置）とを取り得る。
【００１８】
接眼部を有するファインダー７の下方には、接眼検知センサー１４（接近検知ユニット）が設置されている。接眼検知センサー１４は、その前面から一定距離内にある物体（対象物）の有無を検知する。本実施の形態では、接眼検知センサー１４として、対象物から発せられる赤外線を感知する、一般的な赤外線センサーが用いられる。この赤外線センサーにより、使用者がファインダー７を覗くために顔を近づけたことが検知される。なお、接眼検知センサー１４としては、赤外線センサーに限らず、発光部および受光部を有する光センサー、超音波センサーなどを用いることも可能である。
【００１９】
内蔵マイク１９は周辺音を録音するための集音部であり、例えば、動画記録の際に同時録音を行う場合や、静止画記録中又は静止画記録直後の所定時間内にその静止画像に関する覚え書き的な音声記録（いわゆるボイスメモ）等を行なう場合が挙げられる。内蔵マイク１９の位置に関しては、被写体の音を集音しやすいように撮像素子側のカメラ前面側にあることが望ましい。
【００２０】
なお本発明の実施形態のカメラはＣＣＤやＣＭＯＳ等の撮像素子により被写体像を光電変換して画像情報を生成し、任意のメモリ等の電子的記録媒体にその画像情報を記録するデジタルカメラである。
【００２１】
図３は、本発明の実施形態に係る撮像装置の構成例を示すブロック図である。図３（ａ）はカメラ１１のハードウェア構成を概略的に示すブロック図である。
【００２２】
カメラ１１は、フォーカスレンズを含む撮影レンズ１０３、シャッター１０１、および光学像を電気信号に変換するＣＣＤやＣＭＯＳ素子等で構成される撮像部２２を有する。また、カメラ１１は、撮像部２２から出力されるアナログ信号をデジタル信号に変換するＡ／Ｄ変換器２３を有する。
【００２３】
画像処理部２４は、Ａ／Ｄ変換器２３からのデータやメモリ制御部２５からのデータに対し、所定の画素補間、縮小などのリサイズ処理や色変換処理を行う。また、画像処理部２４では、撮像した画像データを用いて所定の演算処理が行われ、システム制御部５０は、この得られた演算結果に基づき、露光制御や測距制御を行う。これにより、ＴＴＬ（スルー・ザ・レンズ）方式のＡＦ（オートフォーカス）処理、ＡＥ（自動露出）処理、およびＥＦ（フラッシュプリ発光）処理が行われる。さらに、画像処理部２４では、撮像した画像データを用いて所定の演算処理が行われ、システム制御部５０は、この得られた演算結果に基づき、ＴＴＬ方式のＡＷＢ（オートホワイトバランス）処理も行う。
【００２４】
Ａ／Ｄ変換器２３からの出力データは、画像処理部２４およびメモリ制御部２５を介して、あるいはメモリ制御部２５を介してメモリ３２に直接書き込まれる。メモリ３２は、撮像部２２によって得られ、Ａ／Ｄ変換器２３によりデジタルデータに変換された画像データや、ＴＦＴ１２に表示するための画像データを格納する。メモリ３２は、所定枚数の静止画像や所定時間の動画像および音声を格納するために、十分な記憶容量を有する。
【００２５】
また、メモリ３２は画像表示用のメモリ（ビデオメモリ）を兼ねている。Ｄ／Ａ変換器２６は、メモリ３２に格納されている画像表示用のデータをアナログ信号に変換し、ＴＦＴ１２に供給する。このように、メモリ３２に書き込まれた表示用の画像データは、Ｄ／Ａ変換器２６を介してＴＦＴ１２により表示される。
【００２６】
ＴＦＴ１２は、前述したように、Ｄ／Ａ変換器２６からのアナログ信号に応じた表示を行う。このように、Ａ／Ｄ変換器２３によって一度Ａ／Ｄ変換され、メモリ３２に蓄積されたデジタルデータをＤ／Ａ変換部２６においてアナログ変換し、ＴＦＴ１２に逐次転送して表示することで、ＴＦＴ１２は電子ビューファインダ（スルー画像表示）として機能する。
【００２７】
不揮発性メモリ５６は電気的に消去・記録可能なメモリである。不揮発性メモリ５６として、例えばＥＥＰＲＯＭ等が用いられる。また、不揮発性メモリ５６には、システム制御部５０の動作用の定数、プログラム等が記憶される。ここで、プログラムとは、本実施の形態において後述するフローチャートで示されるプログラムのことである。
【００２８】
システム制御部５０は、カメラ１１の全体を制御する。システム制御部５０は、不揮発性メモリ５６に記録されたプログラムを実行する。システムメモリ５２には、ＲＡＭが用いられ、システム制御部５０の動作用の定数や変数が記憶されるとともに、不揮発性メモリ５６から読み出したプログラム等が展開される。
【００２９】
また、システム制御部５０は、メモリ３２、Ｄ／Ａ変換器２６、ＴＦＴ１２等を制御することにより、ＴＦＴ１２の表示を制御する表示制御部としても機能する。
【００３０】
システムタイマ５３は、各種制御に要する時間や内蔵された時計の時間を計測する。モード切替スイッチ１６、レリーズ釦３は、システム制御部５０に各種の動作指示を入力する。モード切替スイッチ１６は、システム制御部５０の動作モードを、静止画記録モード、動画記録モード、再生モード等に切り替える。
【００３１】
レリーズボタン３は上述したように半押しでＯＮとなり、信号ＳＷ１を発生する。システム制御部５０は、スイッチ信号ＳＷ１により、ＡＦ（オートフォーカス）処理、ＡＥ（自動露出）処理、ＡＷＢ（オートホワイトバランス）処理、ＥＦ（フラッシュプリ発光）処理等の動作を開始する。いわゆる全押し（撮影指示）でＯＮとなり、信号ＳＷ２を発生する。システム制御部５０は、スイッチ信号ＳＷ２により、撮像部２２からの信号読み出しから記録媒体１５０に画像データを書き込むまでの一連の撮影処理の動作を開始する。
【００３２】
電源制御部８０は、電池検出回路、ＤＣ−ＤＣコンバータ、通電するブロックを切り替えるスイッチ回路等から構成され、電池の装着の有無、電池の種類や電池残量の検出を行う。また、電源制御部８０は、その検出結果およびシステム制御部５０の指示に基づき、ＤＣ−ＤＣコンバータを制御し、必要な電圧を必要な期間、記録媒体１５０を含む各部に供給する。
【００３３】
電源部３０は、アルカリ電池やリチウム電池等の一次電池、ＮｉＣｄ電池やＮｉＭＨ電池、Ｌｉ電池等の二次電池、あるいはＡＣアダプタ等からなる。インターフェース２７は、メモリカードやハードディスク等の記録媒体１５０とのインターフェースである。記録媒体１５０は、メモリカード等の記録媒体、半導体メモリや磁気ディスク等から構成される。
【００３４】
図３（ｂ）は図３（ａ）のカメラシステムに適用させた本発明を示す図であり、カメラ、ヘッドホン、スマートフォンの簡略化した機能構成を示すブロック図である。
【００３５】
２００は第二の電子装置としてのスマートフォン、２０１はスマートフォンの内蔵マイク部、２０２はヘッドホンから音楽等の情報出力する場合のアナウンス音源となる音声データ、２０３はヘッドホン接続検知部、２０４はシステム制御部である。なお、音声データ２０２は撮影アシスト音声情報や、天気予報等の気象情報、地震・津波などの防災情報、時間や、予めユーザーが収録していたＢＧＭなどの音楽等を示す。
【００３６】
３００は撮影者が装着する頭部装着型の音声再生装置としてのヘッドホン、３０１はヘッドホンの音声出力する音声出力部、３０２は出力する音声をコントロールする音声制御部である。ここでヘッドホンは、インナーイヤー型のもの（イヤホン）も含むものとする。音声出力部３０１は、右耳用音声出力部３０１ａと左耳用音声出力部３０１ｂに分けられ、音質などに応じてそれぞれの出力を変更する。なお、撮影者が装着する音声再生装置はヘッドホンではなく、音声を出力するものであればイヤホン等でも構わない。
【００３７】
図４は、本発明の実施形態に係る第一及び第二の電子機器の関係を示す図である。図４（ａ）は本発明の実施形態である第一の電子装置（カメラ）で外部の集音を行うカメラ、ヘッドホンの関係を示す図、図４（ｂ）は本発明の実施例の第二の電子装置（スマートフォン）で外部の集音を行うカメラ、ヘッドホン、スマートフォンの関係を示す図である。
【００３８】
図４（ａ）、（ｂ）に示す、カメラ１１、スマートフォン２００、ヘッドホン３００の関係性の詳細を図１のフローチャートを参照して説明する。
【００３９】
（第一の実施形態）
図１は、本発明の実施形態に係る撮影動作の例を示すフローチャートである。図１のフローチャートは、システム制御部５０によって、各処理ブロックを制御し実行される処理手順を図示したものである。それぞれのシステム制御部が有するメモリ（ＲＯＭ）に格納されているプログラムをメモリ（ＲＡＭ）に展開し、ＣＰＵが実行することにより実現される。
【００４０】
カメラ１１の電源スイッチ１７がオンになっている場合、ステップＳ１５０において、撮影者がヘッドホン３００とカメラ１１あるいはスマートフォン２００と通信して使用しているかを判断する。通信有無は、ヘッドホン３００が接続されているかどうかを検出するところのカメラのヘッドホン接続検知部２０あるいはスマートフォンのヘッドホン接続検知部２０３を経由して、システム制御部５０あるいはシステム制御部２０４より判断する。この際のそれぞれへの接続手段としては、有線コードを用いた接続でもＷＩＦＩやＢＬＵＥＴＯＯＴＨ（登録商標）等の無線接続でも構わない。
【００４１】
ステップＳ１５１においてヘッドホン３００の接続先がカメラ１１かスマートフォンかを判断し、カメラ１１と通信して使用していると判断された場合、ステップＳ１５２において撮影者が接眼検知センサー１４により接眼検知の有無を判断する。接眼検知していない場合、即ちファインダー７を用いないライブビュー撮影時は、ヘッドホン３００を使用した状態で通常カメラ撮影を行う（ステップＳ１５９）。ここで言う通常カメラ撮影とは、音声の制御を伴わない撮影のことを示す。一方で接眼検知した場合、即ちファインダーを覗いて撮影を行う時は、カメラ１１の内蔵マイク１９を用いて周辺音の集音を開始し、ヘッドホン３００の音声出力部３０１ａ及び３０１ｂからスルー音を流す（ステップＳ１５３）。これにより撮影者はヘッドホンを使用して、且つファインダーを覗いている状態においても、周辺音、即ち被写体が発する声などの音声をもとに撮影を行うことができる。さらには、撮影に関係なく、撮影画角外から救急車などの緊急車両等が接近する音も認識することが可能になる。
【００４２】
ところで、カメラ１１内のミラーユニット６０が、ミラーダウン位置からミラーアップ位置に到達した時の部品同士の衝撃音やミラーアップ位置からミラーダウン位置に到達した時の部品同士の衝撃音が発生することになる。
【００４３】
すなわち、上記ステップＳ１５３において、周辺音を集音する際、同時にカメラ内駆動音も集音してしまうと、撮影者は煩わしさを感じてしまうだけでなく、ヘッドホンから流れる既再生音を聞き取る障害になりかねない。
【００４４】
そこでステップＳ１５４において、内蔵マイク１９が設置されているカメラ１１内の駆動部が開始したかを判断する。例えば、レリーズ釦３等の駆動開始操作部材が操作され、ＳＷ２の駆動開始の電気信号が受信されたかを判断する。レリーズ釦３が操作されＳＷ２の電気信号を受信した場合、ステップＳ１５５にて、ステップＳ１５３で行っていた内蔵マイク１９を用いて周辺音の集音を終了（中断）する。
【００４５】
これによりカメラ１１内で発生するミラーユニット６０の動作によるカメラ１１の内部部品同士の衝突により発生する衝撃音を省くことが可能になり、煩わしさを感じることなく撮影者は被写体の発する音声など周辺音を聞き取ることができる。
【００４６】
また、ステップＳ１５４にて、駆動部が駆動開始した場合、カメラ１１のシステム制御部５０により駆動部の速度を低速に変更し、部品同士の衝撃強度を低減させて、衝撃音を小さくしてもよい。例えば、ミラーユニット６０であれば、レリーズ釦３が操作されＳＷ２の電気信号を受信した場合に、通常撮影モードから静音撮影モードに切り替えてもよい。あるいは、ステップＳ１５４にて、駆動部が駆動開始した場合、カメラ１１のシステム制御部５０とヘッドホン３００の音声制御部３０２通信して、ヘッドホン３００の音声出力部３０１ａ及び３０１ｂから小さい音量でスルー音を出力してもよい。
【００４７】
これにより、撮影者はカメラ１１内で発生する衝撃音による煩わしさを低減することができる。
【００４８】
そして次のステップＳ１５６にて、カメラ１１内の駆動が終了した場合、再び内蔵マイク１９から周辺音の集音を開始してヘッドホン３００のヘッドホン３００の音声出力部３０１ａ及び３０１ｂからスルー音を流す（ステップＳ１５７）。
【００４９】
一方で、ステップＳ１５６にて、カメラ１１内の駆動が終了していない場合、即ち継続して駆動している場合は総じて、周辺音の集音はしないことを維持する。例えば、連写撮影など、ミラーユニット６０が、駆動し続けている場合は、集音を行わない。ただし一例として、シャッター速度を変更して長秒撮影を実施する場合は、ミラーユニット６０による衝撃音が発生する間隔があいてしまうため、一端、スルー音をヘッドホンから流すシーケンスを組むことが望ましい。具体的には、システム制御部５０より、ＳＷ２の電気信号を受信してからミラーアップ位置に到達する時間とミラーダウン位置に移動開始するまでの時間を設定したシャッター速度から算出し、ミラーユニット６０が駆動しない間は周辺音の集音を行い、スルー音をヘッドホン３００から流す。
【００５０】
ステップＳ１５８にて、撮影が終了した場合、へッドホン３００から再生されていた既再生音と周辺音との制御は終了する。撮影終了とは例えば、カメラ１１の電源スイッチ１７がオフに切り替わった場合を示す。あるいはＴＦＴ１２で、再生画を表示している時は撮影が終了したとシステム制御部５０により判断され、周辺音の制御は終了する。
【００５１】
（第二の実施形態）
ステップＳ１５１においてヘッドホン３００の接続先がカメラ１１かスマートフォン３００かを判断し、スマートフォン１１と通信して使用していると判断された場合、ステップＳ１８２において撮影者が接眼検知センサー１４により接眼検知の有無を判断する。接眼検知していない場合、即ちファインダー７を用いないライブビュー撮影時は、ヘッドホン３００を使用した状態で通常カメラ撮影を行う（ステップＳ１５９）。一方で接眼検知した場合、即ちファインダー７を覗いて撮影を行う時は、ヘッドホン３００を使用した状態で、スマートフォン２００の内蔵マイク２０１を用いて周辺音の集音を開始し、ヘッドホン３００の音声出力部３０１ａ及び３０１ｂからスルー音を流す（ステップＳ１８３）。
【００５２】
これにより、第一の実施形態のステップＳ１５３と同様、撮影者はヘッドホンを使用していて、且つファインダーを覗いている状態においても、周辺音、即ち被写体が発する声などの音声をもとに撮影を行うことができる。さらには、撮影に関係なく、撮影画角外から救急車などの緊急車両等が接近する音も認識することが可能になる。
【００５３】
また、スマートフォン２００の内蔵マイク２０１より集音をすることにより、カメラ１１内で発生する衝撃音を集音することはなく、カメラ１１の内蔵マイク１９で集音する第一の実施形態で発生する煩わしさは発生しない。
【００５４】
そして接眼検知しなくなるまでステップＳ１８３のスマートフォン２００の内蔵マイク２０１を用いて周辺音の集音をして、ヘッドホン３００の音声出力部３０１ａ及び３０１ｂからスルー音を流す動作を繰り返す（ステップＳ１８４）。接眼検知がしていない場合、即ち撮影者がファインダーを覗くのを終了した場合、同時にスマートフォン２００の内蔵マイク２０１を用いて周辺音の集音を終了する（ステップＳ１８５）。
【００５５】
続いてステップＳ１５８にて、撮影が終了した場合、へッドホン３００から再生されていた既再生音と周辺音との制御は終了する。例えば、カメラ１１の電源１７がオフに切り替わった場合を示す。あるいはＴＦＴ１２を用いて再生画を表示している時は撮影が終了したとシステム制御部５０により判断され、周辺音の制御は終了する。
【００５６】
図５は、本発明の実施形態に係る撮像システムの使用状態の例を示す図である。図５（ａ）は、本発明の実施形態のカメラ及びヘッドホンを使用して撮影者が接眼せずにライブビュー撮影をしている状態を示す図である。図５（ｂ）は本発明の実施形態のカメラ及びヘッドホンを使用して接眼して撮影している状態を示す図である。図５（ｃ）は本発明の実施形態のカメラ及びヘッドホンを使用して接眼し、スマートフォンで周辺音の集音を行う状態を示す図である。
【００５７】
５０１は予めヘッドホン３００に流れている既再生音、５０２は接眼検知した後にヘッドホン３００から流す周辺音である。予め流れている音声５０１は、例えばＢＧＭなどの音楽、ないしは音声サポートボイスである。音声サポートボイスとは、例えば、被写体へピントが合っていないことへの警告などのカメラ撮影アシストの案内であったり、電話着信やメール受信したことなどを知らせるスマートフォンの使用に関するアシスト機能である。
【００５８】
図５（ａ）の接眼検知していない状態は、撮影スルー画をＴＦＴ１２を使用して画角を合わせる、いわゆるライブビュー撮影時である。この状態は、被写体が画角から外れた場合でもファインダーを覗いていない分、視野が限定されていないため図１のステップＳ１５９の動作で通常カメラ撮影を行う。
【００５９】
一方、図５（ｂ）の接眼検知している状態では図１のステップＳ１５３の動作で周辺音５０２を内蔵マイク１９から集音し、ヘッドホン３００の音声出力部３０１ａ及び３０１ｂからスルー音を流す。この際、既再生音５０１と周辺音５０２は同時に再生される。これにより、混合音がヘッドホン３００の再生部３０１から流れ、撮影者は音楽ないしは音声サポートを受けながら、被写体の音情報、即ち周辺音５０２を聞きながら撮影を行える。
【００６０】
またこの状態において、図１のステップＳ１５４の動作でレリーズ釦３が押された場合、周辺音５０２は中断する。効果に関しては上述した通りである。なお、ミラーアップ動作に関わらず、そのほかカメラ１１内において、ストロボポップアップなどの衝撃音を伴う動作が起動することを検知すると同様に周辺音の集音を中断する。また、図５（ｂ）の状態で音声制御中であっても接眼検知をしなくなると、即ち、突如として図５（ａ）の状態になった場合は、必然的に周辺音５０２の集音を終了し、既再生音５０１だけを流した通常カメラ撮影へと変更する。
【００６１】
図５（ｃ）の、集音にスマートフォンを使用して接眼検知している状態では、図１のステップＳ１８３の動作で周辺音５０２を内蔵マイク２０１から集音し、ヘッドホン３００の音声出力部３０１ａ及び３０１ｂからスルー音を流す。この際、既再生音５０１と周辺音５０２は同時に再生される。これにより、混合音がヘッドホン３００の再生部３０１から流れ、撮影者は音楽ないしは音声サポートを受けながら、被写体の音情報、即ち周辺音５０２を聞きながら撮影を行える。また、図５（ｂ）と同様に、突如として図５（ａ）の状態になった場合は、必然的に周辺音５０２の集音を終了し、既再生音５０１だけを流した通常カメラ撮影へと変更する。
【００６２】
図６は、従来技術の説明および本発明の課題を説明する図である。図６（ａ）が従来の課題の説明図、図６（ｂ）が本発明の実施形態に係る効果の説明図である。６０１は撮影者がファインダー７を覗いた時にみえる画角、６０２は音を発する被写体（犬）、６０３は被写体（犬）が発する音（鳴き声）である。
【００６３】
図６（ａ）はヘッドホンを装着してＢＧＭなどの音楽、ないしは音声サポートを受けているため、被写体６０２が音を発生していても、音情報をもとにして追従することが困難になる。具体的には、被写体６０２が撮影者が見ている画角外で鳴き声をあげていたとしても、撮影者は画角外のどちら側にいるかは判断ができない。すなわち画角６０１をタイムリーに合わせづらくなり、シャッターチャンスなどの決定的瞬間を逃してしまう可能性がある。さらには、被写体の音以外でも周辺音を聞き取れないことは、自分に向かって車が接近してきたり、サイレンなどの警告音も認識できないことも起こり得る。
【００６４】
一方、図６（ｂ）の本発明の実施形態では、上述した図１のステップＳ１５３の動作により、被写体が発する音（犬の鳴き声）６０３を撮影者は聞き取ることが可能になり、画角外のどの方向から聞こえるかを把握することが可能になる。すなわち、図６（ｂ）に示すように、犬の鳴き声をもとに画角を合わせることが可能になる。これにより、仮に、撮影者が被写体を見失ったとしても、被写体が発する音６０３をもとに瞬時に画角を合わせることが可能になる。同時に被写体の音以外の周辺音を聞き取ることも可能になり、車が接近してきたり、サイレンなどの警告音も認識することも可能になる。
【００６５】
以上が本発明の好ましい実施形態の説明であるが、本発明は、本発明の技術思想の範囲内において、上記実施形態に限定されるものではなく、対象となる回路形態により適時変更されて適応するべきものである。例えば、上述した実施形態で、撮像装置として説明したカメラは、デジタルスチルカメラやデジタルビデオカメラに適用することができる。
【００６６】
また、本発明は、例えばシステム、装置、方法、コンピュータプログラムもしくは記録媒体などとしての実施形態も可能であり、具体的には、１つの装置で実現しても、複数の装置からなるシステムに適用してもよい。本実施形態に係る撮像装置を構成する各手段および撮像装置の制御方法の各ステップは、コンピュータのメモリなどに記憶されたプログラムが動作することによっても実現できる。このコンピュータプログラムおよびこのプログラムを記録したコンピュータ読み取り可能な記録媒体は本発明に含まれる。
【００６７】
本発明は、上述の実施形態の１以上の機能を実現するプログラムを、ネットワーク又は記憶媒体を介してシステム又は装置に供給し、そのシステム又は装置のコンピュータにおける１つ以上のプロセッサーがプログラムを読出し実行する処理でも実現可能である。また、１以上の機能を実現する回路（例えば、ＡＳＩＣ）によっても実現可能である。
【符号の説明】
【００６８】
１１  カメラ（撮像装置）、２００  スマートフォン、３００  ヘッドホン、
７  ファインダー、１４  接眼検知センサー（接眼検知手段）、１９  内蔵マイク、
２０１  内蔵マイク、６０  ミラーユニット、３  レリーズ釦（駆動開始操作釦）
【図１】
2018191023.tif 000003
【図２（ａ）】
2018191023.tif 000004
【図２（ｂ）】
2018191023.tif 000005
【図２（ｃ）】
2018191023.tif 000006
【図３（ａ）】
2018191023.tif 000007
【図３（ｂ）】
2018191023.tif 000008
【図４】
2018191023.tif 000009
【図５（ａ）】
2018191023.tif 000010
【図５（ｂ）】
2018191023.tif 000011
【図５（ｃ）】
2018191023.tif 000012
【図６】
2018191023.tif 000013