(57)【要約】  収音装置は、収音部と、装着部と、通信部とを備える。収音部は、複数のマイクロホンを含むマイクアレイを有し、マイクアレイによって収音された周囲の音に対応する音響信号を生成する。装着部は、周囲を撮影して画像データを生成するカメラを備えた電子機器を装着可能である。通信部は、音響信号を電子機器に送信する。
2019049494.tif 000002
【特許請求の範囲】
【請求項１】
複数のマイクロホンを含むマイクアレイを有し、前記マイクアレイによって収音された周囲の音に対応する音響信号を生成する収音部と、
周囲を撮影して画像データを生成するカメラを備えた電子機器を装着可能な装着部と、
前記音響信号を前記電子機器に送信する通信部と、
を備える収音装置。
【請求項２】
前記装着部に装着された電子機器のカメラの画角よりも、外側の領域を撮影可能な光学系をさらに備える、請求項１に記載の収音装置。
【請求項３】
前記光学系の位置を可動にする第１の可動部をさらに備える、請求項２に記載の収音装置。
【請求項４】
前記光学系は、
前記カメラの画角を広げるレンズと、
前記カメラの光軸に沿った光を反射または吸収する防止部材と、
を含む、請求項２に記載の収音装置。
【請求項５】
前記光学系は、前記装着部に装着された電子機器のカメラの画角よりも、外側の領域を撮影可能な錐形ミラーを含む、請求項２に記載の収音装置。
【請求項６】
前記装着部は、前記電子機器を固定するために移動することができる固定部材を含む、請求項１から請求項５のいずれかに記載の収音装置。
【請求項７】
前記マイクアレイは、前記固定部材に取り付けられている、請求項６に記載の収音装置。
【請求項８】
前記通信部は、前記固定部材に取り付けられている、請求項６または請求項７に記載の収音装置。
【請求項９】
請求項１から請求項８のいずれかに記載の収音装置と、
前記収音装置に装着可能な前記電子機器と、
を有する、収音システム。
【請求項１０】
前記電子機器は、前記音響信号と前記画像データとに基づいて、収音する方向を決定する制御部をさらに有する、
請求項９に記載の収音システム。
【請求項１１】
前記制御部は、前記カメラから前記マイクアレイまでの相対位置に基づいて、前記マイクアレイが収音する周囲の音の位置座標と前記カメラが撮影した周囲の位置座標とを対応付ける、
請求項１０に記載の収音システム。
【請求項１２】
前記電子機器は、前記カメラの光軸方向を検知するセンサをさらに含み、
前記制御部は、前記センサが検知した前記カメラの光軸方向に応じて、前記カメラの撮影設定条件を変更する、
請求項１０に記載の収音システム。
【請求項１３】
電子機器を収音装置に装着して目的音を収音する方法であって、
前記電子機器は、周囲を撮影して画像データを生成するカメラを備えるものであり、
前記収音装置は、
複数のマイクロホンを含むマイクアレイを有し、前記マイクアレイによって収音された周囲の音に対応する音響信号を生成する収音部と、
前記電子機器を装着可能な装着部と、
前記音響信号を前記電子機器に送信する通信部と、
を備えるものであり、
前記カメラから前記マイクアレイまでの相対位置に基づいて、前記マイクアレイが収音する周囲の音の位置座標と前記カメラが撮影した周囲の位置座標とを対応付けるステップと、
前記音響信号と前記画像データとに基づいて、前記目的音を収音する方向を決定するステップと、
を含む、収音方法。
【請求項１４】
コンピュータに請求項１３に記載の収音方法を実行させるためのプログラム。
【請求項１５】
表示部と、マイクアレイとを含む収音システムを用いたキャリブレーション方法であって、
前記表示部に画像を表示するステップと、
前記画像内の位置を出力するステップと、
前記マイクアレイを用いて音を収音するステップと、
前記音の位置を推定するステップと、
前記画像内の位置の座標と、前記音の位置の座標とを対応付けるステップと、
を含む、キャリブレーション方法。
【請求項１６】
前記画像内の位置を出力するステップにおいて、前記表示部の前記画像内の位置にマークが表示される、
請求項１５に記載のキャリブレーション方法。
【発明の詳細な説明】
【技術分野】
【０００１】
本開示は、目的音を収音する収音装置、収音システム、収音方法、プログラム、及びキャリブレーション方法に関する。
【背景技術】
【０００２】
特許文献１は、一人以上の参加者による談話を記録したデータから、どの参加者がいつ発話したかを推定するための推定装置を開示している。この推定装置は、マイクロホンから出力される音響信号から得られる情報と、カメラから出力される映像信号から得られる情報とを統合することによって、談話参加者が発話した確率を算出している。これにより、談話参加者が発話のない状況で移動した場合であっても、談話参加者の位置を追跡することを可能にしている。
【先行技術文献】
【特許文献】
【０００３】
【特許文献１】特許第５２１５８２６号公報
【発明の概要】
【０００４】
本開示は、目的音を精度良く収音することを可能にする収音装置、収音システム、収音方法、プログラム、及びキャリブレーション方法を提供する。
【０００５】
本開示の一態様の収音装置は、収音部と、装着部と、通信部とを備える。収音部は、複数のマイクロホンを含むマイクアレイを有し、マイクアレイによって収音された周囲の音に対応する音響信号を生成する。装着部は、周囲を撮影して画像データを生成するカメラを備えた電子機器を装着可能である。通信部は、音響信号を電子機器に送信する。
【０００６】
これらの概括的かつ特定の態様は、システム、方法、及びコンピュータプログラム、並びに、それらの組み合わせにより、実現されてもよい。
【０００７】
本開示の収音装置、収音システム、収音方法、プログラム、及びキャリブレーション方法によれば、カメラを備えた電子機器を収音装置に取り付けることによって、目的音を精度良く収音することができる。
【図面の簡単な説明】
【０００８】
【図１】図１は、第１実施形態の収音装置と電子機器を示す図である。
【図２】図２は、第１実施形態の収音装置に電子機器を装着した状態の収音システムを示す図である。
【図３Ａ】図３Ａは、装着部を可動にする可動部の一例を模式的に示す図である。
【図３Ｂ】図３Ｂは、装着部の可動方向を説明するための図である。
【図４Ａ】図４Ａは、光学系の位置を可動にする可動部の一例を模式的に示す分解斜視図である。
【図４Ｂ】図４Ｂは、光学系の位置の可動方向を説明するための図である。
【図５】図５は、収音装置の光学系により広角撮影を可能にすることを説明するための図である。
【図６】図６は、図１の電子機器の構成を示すブロック図である。
【図７】図７は、図１の収音装置の構成を示すブロック図である。
【図８】図８は、収音の全体動作を説明するためのフローチャートである。
【図９】図９は、第１実施形態におけるカメラとマイクアレイの座標の対応付けを説明するためのフローチャートである。
【図１０】図１０は、目的音の収音動作を説明するためのフローチャートである。
【図１１】図１１は、収音システムが垂直置きされて使用されているときの状態を模式的に示す図である。
【図１２】図１２は、収音システムが平面置きされて使用されているときの状態を模式的に示す図である。
【図１３】図１３は、第２実施形態におけるカメラとマイクアレイの座標の対応付けを説明するためのフローチャートである。
【図１４】図１４は、第２実施形態における座標の対応付けを行うときの画面の表示例を示す図である。
【図１５Ａ】図１５Ａは、第３実施形態における広角レンズを模式的に示す図である。
【図１５Ｂ】図１５Ｂは、第３実施形態における錐形ミラーを模式的に示す図である。
【図１５Ｃ】図１５Ｃは、第３実施形態における遮蔽カバーを模式的に示す図である。
【発明を実施するための形態】
【０００９】
（本開示の基礎となった知見）
特許文献１の推定装置は、カメラと複数のマイクロホンの両方を備えた専用の収音機である。本開示は、専用の収音機を用いずに、目的音を精度良く収音することを可能にする。具体的には、本開示は、マイクアレイを備えた収音装置に、カメラを備えた電子機器を取り付けることによって、目的音を収音する。
【００１０】
（第１実施形態）
以下、第１実施形態について、図面を参照しながら説明する。本実施形態では、人物の音声を目的音として収音する例について説明する。
【００１１】
１．  収音システムの構成
図１は、本開示の第１実施形態の収音装置と電子機器を示している。図２は、本開示の第１実施形態の収音システムの構成を示している。図１及び図２に示すように、収音システム１は、電子機器１０と、電子機器１０を装着可能な収音装置２０とを含む。収音システム１は、例えば、会議中の人の音声を収音するために使用される。
【００１２】
電子機器１０は、スマートフォン又はタブレット端末などのモバイル端末である。電子機器１０は、カメラ１１０及び表示部１２０を備える。カメラ１１０の光軸方向と表示部１２０の表示方向は同じ方向である。
【００１３】
カメラ１１０は、ＣＣＤイメージセンサ、ＣＭＯＳイメージセンサ、又はＮＭＯＳイメージセンサなどを含む。カメラ１１０は、周囲を撮影して映像信号である画像データを生成する。表示部１２０は、液晶表示デバイス又は有機ＥＬ表示デバイスで構成される。表示部１２０は、カメラ１１０が撮影した画像などを表示する。
【００１４】
収音装置２０は、マイクアレイ２１１、広角補助部２２０、装着部２３０、及び通信部２４０を備える。収音装置２０は、電子機器１０を装着して電子機器１０と通信する周辺機器である。
【００１５】
マイクアレイ２１１は、複数のマイクロホンを含む。マイクアレイ２１１は、周囲の音を収音して、収音した音に対応する音響信号を生成する。図１では、複数のマイクロホンを直線状に配置しているが、必ずしも複数のマイクロホンを直線状に配置する必要はない。例えば、半円状や円弧状のように２次元に広がる形状に、複数のマイクロホンを配置するようにしても良い。広角補助部２２０は、光学系２２１を含む。光学系２２１は略全方位の画角を有する広角レンズを含む。
【００１６】
装着部２３０は、電子機器１０を装着して固定するための部材である。装着部２３０は、一例では、上板２３０ａ、背板２３０ｂ、及び下ブロック２３０ｃを含む。装着部２３０は、電子機器１０の長手方向（図１及び図２のＺ軸方向）の両端を挟んで、電子機器１０を固定する。本実施形態では、マイクアレイ２１１は、下ブロック２３０ｃに取り付けられる。
【００１７】
通信部２４０は、所定の通信規格（例えばＬＡＮ、ＷｉＦｉ、Ｂｌｕｅｔｏｏｔｈ（登録商標）、ＵＳＢ、ＨＤＭＩ（登録商標））に準拠して外部機器との通信を行う回路を含む。通信部２４０は、本実施形態では、ＵＳＢ端子（オス端子）であり、電子機器１０のＵＳＢ端子（メス端子）に接続される。本実施形態では、通信部２４０は、下ブロック２３０ｃに取り付けられている。後述するように、下ブロック２３０ｃは、電子機器１０を固定するために移動することができる。このため、ＵＳＢ端子である通信部２４０を容易に電子機器１０のＵＳＢ端子に接続することができる。
【００１８】
図３Ａは、装着部２３０を可動にする可動部の一例を模式的に示す図である。図３Ａは、収音装置２０を下方側（図１の矢印Ａで示す方向）から見たときの図を示している。図３Ｂは、装着部２３０の可動方向を説明するための図である。収音装置２０は、下ブロック２３０ｃが上板２３０ａに遠近する方向（図３ＢのＺ軸方向）に、下ブロック２３０ｃ又は背板２３０ｂを可動にする可動部２６１を備える。可動部２６１の構成は、任意である。例えば、可動部２６１は、Ｌ字型の切り欠き２６１ａと略Ｕ字型の切り欠き２６１ｂとを有するスライド機構によって構成される。Ｌ字型の切り欠き２６１ａは、背板２３０ｂの両側面２３２と背面２３１に対して形成される。また、Ｌ字型の切り欠き２６１ａは、背板２３０ｂの中央部よりも下ブロック２３０ｃ寄りの位置に設けられる。略Ｕ字型の切り欠き２６１ｂは、下ブロック２３０ｃの背面側２３３に形成される。背板２３０ｂのＬ字型の切り欠き２６１ａと、下ブロック２３０ｃの略Ｕ字型の切り欠き２６１ｂとが嵌合する。これにより、下ブロック２３０ｃ又は背板２３０ｂをＺ軸方向に動かすことが可能になる。電子機器１０の種類に応じて、電子機器１０のサイズは異なる。可動部２６１により、使用者は、電子機器１０のサイズに応じて、下ブロック２３０ｃ又は背板２３０ｂをＺ軸方向に動かして、電子機器１０を上板２３０ａと下ブロック２３０ｃとの間に固定することができる。
【００１９】
図４Ａは、光学系２２１の位置を可動にする可動部の一例を模式的に示す分解斜視図である。図４Ｂは、光学系２２１の位置の可動方向を説明するための図である。収音装置２０は、光学系２２１を収音装置２０の幅方向（図４Ａ及び図４ＢのＸ軸方向）及び長手方向（図４Ａ及び図４ＢのＺ軸方向）の位置に可動にする可動部２６２を備える。可動部２６２の構成は、任意である。例えば、可動部２６２は、貫通孔２６２ａ、凹部２６２ｂ、及び凸部２６２ｃを有するスライド機構によって構成される。凸部２６２ｃは、貫通孔２６２ａを通って凹部２６２ｂ内を移動可能である。図４Ａに示すように、広角補助部２２０は、光学系２２１と、光学系２２１が取り付けられた取付部材２２２とを含む。図４Ａに示す例では、Ｚ軸方向に延びる貫通孔２６２ａは、取付部材２２２に形成されている。Ｘ軸方向に延びる凹部２６２ｂは、上板２３０ａに形成されている。電子機器１０の種類に応じて、カメラ１１０の位置が異なる。可動部２６２によって、使用者は、収音装置２０の光学系２２１の位置が電子機器１０のカメラ１１０の光軸上となるように、広角補助部２２０を移動させることができる。
【００２０】
図５は、収音装置２０の光学系２２１により広角撮影を可能にすることを説明するための図である。電子機器１０において、表示部１２０が備えられている面に搭載されているカメラ１１０（所謂、インカメラ）は、電子機器１０の所有者自身を撮影するために利用されることが多い。そのため、カメラ１１０は、通常、広角レンズを備えていない。カメラ１１０は、例えば、画角θ１（例えば、４０°〜５０°）の標準レンズを備えている。一方、収音装置２０の光学系２２１は、カメラ１１０に内蔵されているレンズと組み合わせることで、画角θ２（例えば、１７０°〜１８０°）となる広角レンズを含む。画角θ２はこれに限定されるものではなく、カメラ１１０内蔵のレンズよりも広角になるレンズであれば良い。よって、カメラ１１０の光軸上に光学系２２１を配置することで、撮影時の画角が、θ１（例えば、４０°〜５０°）からθ２（例えば、１７０°〜１８０°）に広がる。これにより、収音システム１を平面置きにしたとき、すなわち、カメラ１１０の光軸方向が鉛直方向と略同一のときであっても、収音システム１の周囲にいる人物を撮影することが可能になる。
【００２１】
図６は、電子機器１０の電気的な構成を示している。電子機器１０は、カメラ１１０と表示部１２０に加え、さらに、通信部１３０、制御部１４０、記憶部１５０、センサ１６０、及びバス１７０を備える。
【００２２】
通信部１３０は、所定の通信規格（例えばＬＡＮ、ＷｉＦｉ、Ｂｌｕｅｔｏｏｔｈ、ＵＳＢ、ＨＤＭＩ）に準拠して外部機器との通信を行う回路を含む。通信部１３０は、本実施形態では、ＵＳＢ端子（メス端子）である。通信部１３０は、収音装置２０から出力される音響信号を受信する。
【００２３】
制御部１４０は、電子機器１０全体を制御する。制御部１４０は、半導体素子などで実現可能である。制御部１４０は、例えば、マイコン、ＣＰＵ、ＭＰＵ、ＤＳＰ、ＦＰＧＡ、ＡＳＩＣで構成することができる。制御部１４０の機能は、ハードウェアのみで構成してもよいし、ハードウェアとソフトウェアとを組み合わせることにより実現してもよい。制御部１４０は、カメラ１１０から得られた画像データと、収音装置２０から得られた音響信号に基づいて、収音方向を決定する。制御部１４０は、決定した収音方向に基づいて、音響信号から目的音を取り出す。
【００２４】
記憶部１５０は、カメラ１１０から得られた画像データ及び収音装置２０から得られた音響信号を格納する。記憶部１５０は、例えば、ハードディスク（ＨＤＤ）、ＳＳＤ、ＲＡＭ、ＤＲＡＭ、強誘電体メモリ、フラッシュメモリ、磁気ディスク、又はこれらの組み合わせによって実現できる。
【００２５】
センサ１６０は、加速度を検出する加速度センサ又は角速度を検出するジャイロセンサを含む。センサ１６０の出力に基づいて、電子機器１０が垂直置きされているか、平面置きされているか、又は垂直置きと平面置きとの中間の状態であるかを検出することができる。「垂直置き」とは、カメラ１１０の光軸が水平面方向と略同一になる置き方である。「平面置き」とは、カメラ１１０の光軸が鉛直方向と略同一になる置き方である。
【００２６】
バス１７０は、カメラ１１０、表示部１２０、通信部１３０、制御部１４０、記憶部１５０、及びセンサ１６０を電気的に接続する信号線である。
【００２７】
図７は、収音装置２０の電気的な構成を示している。収音装置２０は、音響入力部（収音部）２１０、通信部２４０、制御部２５０、移動検出部２７０、及び音響出力部２８０を備える。
【００２８】
音響入力部２１０は、マイクアレイ２１１、複数の増幅器２１２、及び複数のＡ／Ｄ変換器２１３を備える。マイクアレイ２１１は、複数のマイクロホンによって周囲の音（音波）を収音して、収音した音を電気信号に変換してアナログの音響信号を出力する。各増幅器２１２は、各マイクロホンから出力されるアナログの音響信号をそれぞれ増幅する。各Ａ／Ｄ変換器２１３は、各増幅器２１２から出力されるアナログの音響信号をデジタルの音響信号に変換する。
【００２９】
制御部２５０は、収音装置２０全体を制御する。制御部２５０は、デジタルの音響信号を通信部２４０を介して、電子機器１０に送信する。制御部２５０は、半導体素子などで実現可能である。制御部２５０は、例えば、マイコン、ＣＰＵ、ＭＰＵ、ＤＳＰ、ＦＰＧＡ、ＡＳＩＣで構成することができる。制御部２５０の機能は、ハードウェアのみで構成してもよいし、ハードウェアとソフトウェアとを組み合わせることにより実現してもよい。
【００３０】
移動検出部２７０は、可動部２６１による下ブロック２３０ｃ又は背板２３０ｂの移動量を検出するための検出素子と、可動部２６２による光学系２２１の移動量を検出するための検出素子を含む。制御部２５０は、移動検出部２７０の出力に基づいて、マイクアレイ２１１の位置及び光学系２２１の位置を検出する。そして、移動検出部２７０は、光学系２２１（及びカメラ１１０）とマイクアレイ２１１の相対位置を検出する。マイクアレイ２１１の位置は、マイクアレイ２１１の中心位置、例えば、マイクアレイ２１１の中央にあるマイクロホンの位置である。移動量の検出方法は特に限定するものではない。例えば、発光素子及び受光デバイスを用いて、光量変化を検出し変位量を出力する光学式リニアインクリメンタルエンコーダや、機械的な位置に比例した電圧を出力する抵抗式ポジショニングセンサにより、移動量を算出するようにすればよい。
【００３１】
音響出力部２８０は、Ｄ／Ａ変換器２８３、増幅器２８２、及びスピーカ２８１を備える。Ｄ／Ａ変換器２８３は、制御部２５０から受け取ったデジタルの音響信号をアナログの音響信号に変換する。増幅器２８２は、アナログの音響信号を増幅する。スピーカ２８１は、増幅されたアナログの音響信号を出力する。音響出力部２８０は、Ｄ／Ａ変換器２８３、増幅器２８２、及びスピーカ２８１を、それぞれ１つ以上含んでもよい。なお、本実施形態においては、収音装置２０は、マイクアレイ２１１によって生成された音響信号を電子機器１０に送信する機能を有している。そのため、収音装置２０は、音響出力部２８０を備えなくてもよい。収音装置２０が音響出力部２８０を備えない場合、電子機器１０のスピーカが、音響出力部２８０の代わりに音響信号を出力してもよい。
【００３２】
２．  収音システムの動作
２．１  全体動作
図８は、電子機器１０の制御部１４０による収音の全体動作を示している。本実施形態においては、電子機器１０の制御部１４０が、マイクアレイ２１１から出力される音響信号とカメラ１１０から出力される画像データとに基づいて、目的音を収音する。
【００３３】
電子機器１０の制御部１４０は、電子機器１０が収音装置２０に装着されたか否かを判断する（Ｓ１）。例えば、使用者によって、電子機器１０の通信部１３０のメス端子に収音装置２０の通信部２４０のオス端子が接続されると、収音装置２０は、収音装置２０に関する情報を電子機器１０に送信する。これにより、電子機器１０は、収音装置２０に装着されたことを検知する。
【００３４】
電子機器１０の長手方向のサイズとカメラ１１０の位置は、電子機器１０の種類に応じて異なる。そのため、電子機器１０のカメラ１１０と収音装置２０のマイクアレイ２１１との位置関係は、収音装置２０に装着される電子機器１０に応じて変わる。よって、電子機器１０の制御部１４０は、電子機器１０が収音装置２０に装着されたことを検知すると（Ｓ１でＹｅｓ）、カメラ１１０の座標とマイクアレイ２１１の座標を対応付ける（Ｓ２）。本明細書において、カメラ１１０とマイクアレイ２１１の座標の対応付けを「キャリブレーション」とも呼ぶ。
【００３５】
制御部１４０は、カメラ１１０とマイクアレイ２１１の座標の対応付けを行った後に、カメラ１１０から得られる画像データとマイクアレイ２１１から得られる音響信号とに基づいて、目的音を収音する（Ｓ３）。
【００３６】
２．２  カメラとマイクアレイの座標の対応付け
図９は、カメラ１１０とマイクアレイ２１１の座標の対応付けの一例（Ｓ２の詳細）を示している。電子機器１０の制御部１４０は、カメラ１１０の絶対位置を取得する（Ｓ２０１）。電子機器１０の記憶部１５０には、カメラ１１０の絶対位置を示す設計情報が格納されている。よって、制御部１４０は、その設計情報を記憶部１５０から読み出すことによって、カメラ１１０の絶対位置を特定する。
【００３７】
制御部１４０は、収音装置２０から、光学系２２１からのマイクアレイ２１１の相対位置を取得する（Ｓ２０２）。具体的には、収音装置２０の制御部２５０は、移動検出部２７０の出力に基づいて、光学系２２１の位置を基準にしたマイクアレイ２１１の相対位置を検出し、電子機器１０に送信する。
【００３８】
収音装置２０の光学系２２１は、使用者により、電子機器１０のカメラ１１０の光軸上に配置される。よって、電子機器１０の制御部１４０は、光学系２２１の位置を基準にしたマイクアレイ２１１の相対位置を、カメラ１１０の位置を基準にしたマイクアレイ２１１の相対位置として、取得する。そして、制御部１４０は、カメラ１１０の絶対位置とマイクアレイ２１１の相対位置とに基づいて、カメラ１１０とマイクアレイ２１１の座標を対応付ける（Ｓ２０３）。例えば、カメラ１１０の座標をマイクアレイ２１１の座標に変換できるような関数又はテーブルを作成する。
【００３９】
２．３  目的音の収音
図１０は、目的音の収音動作の一例（Ｓ３の詳細）を示している。電子機器１０の制御部１４０は、センサ１６０の出力に基づいて、カメラ１１０の光軸方向を検知する（Ｓ３０１）。例えば、制御部１４０は、センサ１６０の出力に基づいて、電子機器１０が垂直置きされているか、又は平面置きされているかを検出することによって、カメラ１１０の光軸方向を水平方向、又は垂直方向であると検知する。
【００４０】
制御部１４０は、検知した光軸方向に応じて画像データを生成する（Ｓ３０２）。具体的には、例えば、制御部１４０は、カメラ１１０の光軸方向に応じて撮影設定条件を変更する。撮影設定条件は、例えば、カメラ１１０の露出である。図１１は、収音システム１が垂直置きされて使用されているときの状態を模式的に示している。図１２は、収音システム１が平面置きされて使用されているときの状態を模式的に示している。図１１に示すように垂直置きのときは、天井にある照明器具３０からの光は、光学系２２１を通ってカメラ１１０に直接入射しない。一方、図１２に示すように平面置きのときは、天井にある照明器具３０からの光が光学系２２１を通ってカメラ１１０に直接入射する。この場合、カメラ１１０によって生成された、動画１フレーム分又は静止画１枚分の画像の中心部は明るく、周辺にいる人物が写っている領域の画像が暗くなる。人物が写っている領域の画像が暗いと、画像データから人物の位置を検出できなくなる。その結果、人物の音声を精度良く抽出することができなくなる。よって、収音システム１は、平面置きのときは、動画１フレーム分又は静止画１枚分に相当する画像データの中心部分を使用せずに、カメラ１１０の露出を決定する。すなわち、使用者がいる位置の画像領域の明るさ又は色に基づいて、露出を決定する。これにより、例えば、ＣＣＤイメージセンサなどのイメージセンサが受光する時間が短くならないようにして、使用者が写っている領域の画像が暗くなることを防止する。一方、収音システム１が、垂直置きのときは、画像データの動画１フレーム分又は静止画１枚分に相当する画像全体を使用して、カメラ１１０の露出を決定する。なお、平面置きのときは、制御部１４０は、生成した画像データの輝度に基づいて、照明器具３０が画像データに含まれるか否かを判断し、その判断結果に基づいて撮影設定条件を変更してもよい。
【００４１】
制御部１４０は、収音装置２０からマイクアレイ２１１が収音した音響信号を取得する（Ｓ３０３）。
【００４２】
制御部１４０は、画像データと音響信号から音源の位置を推定する（Ｓ３０４）。具体的には、制御部１４０は画像データから顔の位置を検出する。顔の位置の検出方法は、任意である。一例として、顔の位置の検出は、動画１フレーム分又は静止画１枚分に相当する画像データを複数の領域に分割して、各領域が顔の特徴と一致しているか否かを判定することによって行う（「Rapid Object Detection using a Boosted Cascade of Simple Features」 ACCEPTED CONFERENCE ON COMPUTER VISION AND PATTERN RECOGNITION 2001を参照）。これにより、例えば、制御部１４０は、画像データ内において水平角θｖ及び垂直角φｖで特定される位置の画像が顔である確率Ｐｖ（θｖ，φｖ）を算出する。画像データにおける水平角θｖ及び垂直角φｖ、すなわち、カメラ１１０の画角の水平角θｖ及び垂直角φｖは、ステップＳ２０３で生成したマイクアレイ２１１とカメラ１１０の座標の対応付けを示す関数又はテーブルに基づいて、マイクアレイ２１１の座標系の水平角θｓ及び垂直角φｓに変換できる。よって、制御部１４０は、カメラ１１０の座標系で示される確率Ｐｖ（θｖ，φｖ）をマイクアレイ２１１の座標系で示される確率Ｐｖ（θｓ，φｓ）に変換する。また、制御部１４０は、音響信号から、音源の位置、すなわち、発声している人物がいる位置を推定する。音源の位置の推定方法は、任意である。例えば、音源の位置の推定は、ＣＳＰ（Cross-Power Spectrum Phase Analysis）法又はＭＵＳＩＣ（Multiple Signal Classification）法を使用して行うことができる。これにより、例えば、制御部１４０は、音響信号から、水平角θｓ及び垂直角φｓで特定される位置に音源が存在する確率Ｐｓ（θｓ，φｓ）を算出する。そして、顔である確率Ｐｖ（θｓ，φｓ）と音源が存在する確率Ｐｓ（θｓ，φｓ）とに基づいて、例えば、確率「Ｐｖ（θｓ，φｓ）×Ｐｓ（θｓ，φｓ）」が最も高くなる水平角θｓ及び垂直角φｓを音源の位置として推定する。なお、確率「Ｐｖ（θｓ，φｓ）×Ｐｓ（θｓ，φｓ）」の代わりに「Ｐｖ（θｓ，φｓ）＋Ｐｓ（θｓ，φｓ）」が最も高くなる水平角θｓ及び垂直角φｓを音源の位置として推定するようにしても良い。
【００４３】
制御部１４０は、推定した音源の位置に基づいて、音響信号に含まれる目的音である音声を収音する（Ｓ３０５）。
【００４４】
３．  効果及び補足
本実施形態の収音システム１は、収音装置２０と、収音装置２０に装着可能な電子機器１０と、を有する。収音装置２０は、複数のマイクロホンを含むマイクアレイ２１１を有し、マイクアレイ２１１によって収音された周囲の音に対応する音響信号を生成する音響入力部（収音部）２１０と、電子機器１０を装着可能な装着部２３０と、音響信号を電子機器１０に送信する通信部２４０と、を備える。収音装置２０は、電子機器１０を装着して電子機器１０と通信する周辺機器である。電子機器１０は、周囲を撮影して画像データを生成するカメラ１１０と、音響信号と画像データとに基づいて、収音する方向を決定する制御部１４０とを備える。電子機器１０は、スマートフォン又はタブレット端末などのモバイル端末である。
【００４５】
このように、本実施形態の収音システム１は、専用の収音機ではない。収音システム１は、電子機器１０を収音装置２０に取り付ける構成を有する。よって、本実施形態の収音システム１によれば、専用の収音機がなくても、目的音を精度良く収音することが可能になる。具体的には、マイクアレイ２１１を備えた収音装置２０に、カメラ１１０を備えた電子機器１０を取り付けることによって、マイクアレイ２１１から出力される音響信号とカメラ１１０によって生成される画像データとを使用して収音する方向を決定することができる。よって、雑音が低減されたクリアな音声を収音することができる。
【００４６】
収音装置２０は、カメラ１１０の画角をより広角にする、カメラ１１０の光軸に配置される光学系２２１をさらに備える。よって、収音装置２０に装着された電子機器１０は、より広い範囲を撮影することが可能になる。例えば、平面置きにしたときであっても、カメラ１１０の周囲にいる人物を撮影することが可能になる。
【００４７】
収音装置２０は、装着部２３０を電子機器１０のサイズに応じて可動にする可動部２６１をさらに備える。具体的には、可動部２６１は、下ブロック２３０ｃが上板２３０ａに遠近する方向に、下ブロック２３０ｃ又は背板２３０ｂを可動にする。これにより、電子機器１０の種類によって電子機器１０のサイズが異なっても、使用者は、電子機器１０のサイズに応じて、下ブロック２３０ｃ又は背板２３０ｂを動かして、電子機器１０を上板２３０ａと下ブロック２３０ｃとの間に固定することができる。
【００４８】
収音装置２０は、光学系２２１の位置をカメラ１１０の位置に応じて可動にする可動部２６２をさらに備える。これにより、電子機器１０の種類によってカメラ１１０の位置が異なっても、使用者は、収音装置２０の光学系２２１の位置を電子機器１０のカメラ１１０の光軸上となるように、光学系２２１を移動させることができる。
【００４９】
電子機器１０の制御部１４０は、光学系２２１からのマイクアレイ２１１の相対位置とカメラ１１０の絶対位置とに基づいて、マイクアレイ２１１の座標とカメラ１１０の座標とを対応付ける。これにより、電子機器１０の種類によって、カメラ１１０とマイクアレイ２１１との位置関係が異なっても、音源の位置を精度良く推定できる。よって、目的音を精度良く収音することが可能になる。
【００５０】
電子機器１０は、カメラ１１０の光軸方向を検知するセンサ１６０をさらに含み、制御部１４０は、センサ１６０が検知したカメラ１１０の光軸方向に応じて、カメラ１１０による撮影設定条件を変更する。ここで、センサ１６０は、例えば、電子機器１０の向きを検出することによって、カメラ１１０の光軸方向を検知してもよい。例えば、平面置きのときは、動画１フレーム分又は静止画１枚分に相当する画像データの中心部分を使用せずに、カメラ１１０の露出を決定する。これにより、例えば、天井に照明器具３０があっても、使用者が写っている領域の画像が暗くなることを防止できる。
【００５１】
（第２実施形態）
第２実施形態は、カメラ１１０とマイクアレイ２１１の座標の対応付けの方法が第１実施形態と異なる。
【００５２】
図１３は、第２実施形態におけるカメラ１１０とマイクアレイ２１１の座標の対応付け（Ｓ２の詳細）を示している。図１４は、座標の対応付けを行うときの表示部１２０の画面の表示例を示している。図１３に示す処理を行う間、カメラ１１０は動作していて、カメラ１１０によって撮影中のライブビュー画像が表示部１２０に表示されている。
【００５３】
電子機器１０の制御部１４０は、所定位置を示すマーク１２１と、マーク１２１と重なる位置に移動してから発声するように使用者を促すメッセージ１２２とを、表示部１２０に表示する（Ｓ２１１）。すなわち、表示部１２０の画像内の所定位置にマーク１２１が表示される。所定位置を示すマーク１２１は、例えば、人物の顔を表すような画像である。これにより、使用者は、表示部１２０を見ながら、自分の顔がマーク１２１と重なるように移動することができる。そして、使用者は、移動後に発声する。
【００５４】
制御部１４０は、収音装置２０からマイクアレイ２１１によって収音された音響信号を取得する（Ｓ２１２）。制御部１４０は、取得した音響信号に基づいて、音源の位置、すなわち、発声している人物がいる位置を推定する（Ｓ２１３）。制御部１４０は、マーク１２１の位置と推定した音源の位置とを対応付ける（Ｓ２１４）。
【００５５】
制御部１４０は、マーク１２１の位置と音源の位置との対応付けを所定回数（例えば、少なくとも３回）行ったか否かを判断する（Ｓ２１５）。所定回数行っていなければ（Ｓ２１５でＮｏ）、ステップＳ２１１に戻り、表示部１２０内の異なる位置にマーク１２１を表示して、マーク１２１の位置と音源の位置との対応付けを行う。マーク１２１の位置と音源の位置との対応付けを複数の位置で行うために、制御部１４０は、ステップＳ２１１においてマーク１２１を表示させる位置を毎回異ならせる。表示部１２０に表示されているマーク１２１の位置は、カメラ１１０の画角の水平角θ及び垂直角φに対応付けることができる。マーク１２１の位置と推定した音源の位置との対応付けを所定回数行うと（Ｓ２１５でＹｅｓ）、計測していない他の位置における対応付けを内挿及び外挿による補間を行うことによって、カメラ１１０とマイクアレイ２１１の座標を対応付ける（Ｓ２１６）。例えば、制御部１４０は、カメラ１１０の座標をマイクアレイ２１１の座標に変換できるような関数又はテーブルを作成する。制御部１４０は、作成した関数又はテーブルを記憶部１５０に格納する。
【００５６】
対応付けの精度を上げる場合は、使用者がカメラ１１０の撮影可能範囲内をなるべく細かく移動するようにすればよい。これにより、内挿の際の補間点が近くなるため、対応付けの精度が上がる。また、精度が低下しやすい外挿を防止するためには、カメラ１１０の撮影可能範囲内の最も外側を移動するようにすれば良い。
【００５７】
なお、マーク１２１の位置と音源の位置との対応付けを行う（Ｓ２１４）前に、制御部１４０は、使用者の顔がマーク１２１の画像領域内にあるか否かを画像データに基づいて判断してもよい。マーク１２１の画像領域に顔がない場合は、対応付けを行わずに、ステップＳ２１１に戻ってもよい。
【００５８】
また、ステップＳ２１１において、表示部１２０は、画像内の所定位置にマーク１２１を表示しなくてもよい。その代わりに、電子機器１０のスピーカが画像内の所定位置を示す音声を出力してもよい。例えば、ステップＳ２１１において、電子機器１０のスピーカが「画像内の左下隅に移動してください」と音声を発し、これに応じて、使用者が画像内の左下隅に対応した位置に移動してもよい。そして、使用者は、移動後に発声する。このような動作によっても、本開示のキャリブレーション方法は実現できる。
【００５９】
本実施形態によれば、第１実施形態と同様に、カメラ１１０とマイクアレイ２１１との座標を対応づけるため、電子機器１０の種類によって、カメラ１１０とマイクアレイ２１１との位置関係が異なっても、音源の位置を精度良く推定できる。
【００６０】
（第３実施形態）
本実施形態の収音システム１は、光学系２２１の構成が第１実施形態と異なる。具体的には、本実施形態の光学系２２１は、収音システム１が平面置きされて使用される場合に、カメラ１１０が照明器具３０を撮影することを防止する。
【００６１】
図１５Ａは、広角レンズを模式的に示している。図１５Ｂは、円錐ミラーを模式的に示している。図１５Ｃは、遮蔽カバーを模式的に示している。図１５Ａ〜図１５Ｃにおいて、図面の上側が天頂側であり、図面の下側がカメラ１１０側である。すなわち、図１５Ａ〜図１５Ｃは、収音システム１が平面置きされた状態の光学系２２１を示している。
【００６２】
図１５Ａに示す光学系２２１は、例えば、略全方位の画角を有する広角レンズ２２１ａで構成される。なお、広角レンズ２２１ａは、装着部２３０に装着された電子機器１０のカメラ１１０の画角を広げることができれば、略全方位の画角を有していなくてもよい。また、広角レンズ２２１ａが画角を広げるとは、装着部に装着された電子機器１０がカメラ１１０の画角よりも外側の領域を撮影可能になることである。
【００６３】
図１５Ｂに示す光学系２２１は、円錐形の錐形ミラー２２１ｂを内蔵した広角レンズ２２１ａで構成される。この場合、天頂側からの光、すなわち、天井に備え付けられた照明器具３０からの光は錐形ミラー２２１ｂによって反射される。よって、照明器具３０からの光は、カメラ１１０に到達しない。なお、図１５Ｂに示す光学系２２１は、広角レンズ２２１ａを備えなくてもよい。図１５Ｂに示す光学系２２１は錐形ミラー２２１ｂを備えているために、天頂側からの光がカメラ１１０に入射することが抑制され、かつ、水平方向（カメラの光軸の垂直方向）からの光がカメラ１１０に入射することができる。これにより、図１５Ｂに示す光学系２２１は、カメラ１１０の画角を広げることができる。光学系２２１が画角を広げるとは、装着部に装着された電子機器１０がカメラ１１０の画角よりも外側の領域を撮影可能になることである。また、錐形ミラー２２１ｂは、四角錐形などの多角錐形であってもよい。四角のテーブルの各辺にいる４人の人物を撮影する場合、錐形ミラー２２１ｂが四角錐形であれば歪みのない映像で撮影することができる。
【００６４】
図１５Ｃに示す光学系２２１は、広角レンズ２２１ａと遮蔽カバー２２１ｃを含む。遮蔽カバー２２１ｃは広角レンズ２２１ａの表面に取り付けられる。この場合、天頂側からの光、すなわち、天井に備え付けられた照明器具３０からの光は遮蔽カバー２２１ｃによって吸収される。よって、照明器具３０からの光は、カメラ１１０に到達しない。錐形ミラー２２１ｂ又は遮蔽カバー２２１ｃを備えた光学系２２１がカメラ１１０の光軸上に配置されたときのカメラ１１０の撮影領域は、カメラ１１０の光軸周辺を除いた領域となる。
【００６５】
本実施形態の収音システム１は、例えば、図１５Ａに示す光学系２２１と、図１５Ｂ又は図１５Ｃに示す光学系２２１の２つを備える。使用者は、収音システム１を垂直置きにして使用するか平面置きにして使用するかに応じて、その２つの光学系２２１の中から、カメラ１１０の光軸上に配置する光学系２２１を選択することができる。平面置きのときに、錐形ミラー２２１ｂ又は遮蔽カバー２２１ｃを備えた光学系２２１を使用することによって、照明器具３０周辺を撮影することなく、図１２の角度θ３（例えば、水平面から４５°の範囲内）で示すように人物がいる方向のみを撮影することが可能になる。この場合、図１０のステップＳ３０２において、収音システム１が平面置きか垂直置きかに関わらず、制御部１４０は同一の撮影設定条件で画像データを生成する。例えば、平面置きのときのカメラ１１０の露出を、垂直置きと同様に、画像全体の明るさと色に基づいて決定する。
【００６６】
なお、照明器具３０からの光を遮蔽する部材は、錐形ミラー２２１ｂ及び遮蔽カバー２２１ｃに限らない。平面置きのときに、カメラ１１０による照明器具３０の撮影を防止できる構成であれば、任意の構成でもよい。また、遮蔽カバー２２１ｃは脱着式により構成しても良い。
【００６７】
本実施形態によれば、収音システム１を平面置きにしたときであっても、カメラ１１０が照明器具３０を撮影することを防止できる。そのため、第１実施形態と同様に、収音システム１の周囲にいる人物の顔を画像データから精度良く検出することができる。よって、目的音を精度良く収音できる。
【００６８】
（他の実施形態）
以上のように、本出願において開示する技術の例示として、第１〜第３実施形態を説明した。しかしながら、本開示における技術は、これに限定されず、適宜、変更、置き換え、付加、省略などを行った実施形態にも適用可能である。また、上記第１〜第３実施形態で説明した各構成要素を組み合わせて、新たな実施形態とすることも可能である。そこで、以下、他の実施形態を例示する。
【００６９】
上記実施形態では、電子機器１０の制御部１４０が、マイクアレイ２１１から出力される音響信号とカメラ１１０から出力される画像データとに基づいて、収音する方向を決定して、目的音を収音した。しかし、収音装置２０の制御部２５０が、マイクアレイ２１１から出力される音響信号とカメラ１１０から出力される画像データとに基づいて、収音する方向を決定して目的音を収音してもよい。
【００７０】
なお、収音の開始および終了を、カメラ１１０から出力される画像データに含まれる口唇の形状（例えば、開いているか否か）に基づいて、決定するようにしても良い。例えば、電子機器１０は、口唇が開いている状態の特徴量を示す情報を格納し、その情報に基づいて画像データにおいて口唇が開いているか否かを判定する。これにより、電子機器１０は、発話の開始時点及び終了時点を検出する。発話の開始時点から発話の終了時点までが発話区間である。あるいは、電子機器１０は、音響信号を入力とし、音響特徴に基づいて発話区間の検出を実施するようにしても良い。または、電子機器１０は、画像データおよび音響信号の双方の特徴量に基づいて発話区間の検出を実施するようにしても良い。
【００７１】
上記実施形態では、可動部２６１は、下ブロック２３０ｃ又は背板２３０ｂを収音装置２０の長手方向（図３ＢのＺ軸方向）に可動させる部材であったが、可動方向は長手方向だけでなくてもよい。例えば、可動部２６１は、下ブロック２３０ｃ又は背板２３０ｂを収音装置２０の厚み方向（図３Ａ及び図３ＢのＹ軸方向）に可動できる構成であってもよい。同様に、可動部２６２は、光学系２２１を収音装置２０の厚み方向（図４Ａ及び図４ＢのＹ軸方向）に可動できる構成であってもよい。
【００７２】
上記実施形態では、電子機器１０及び収音装置２０がＵＳＢ端子を備える例について説明したが、無線通信を行う場合は、収音装置２０は端子を備えなくてもよい。すなわち、電子機器１０の通信部１３０は、収音装置２０の通信部２４０と無線で通信してもよい。
【００７３】
上記実施形態では、収音装置２０は、カメラ１１０の画角よりも広角の光学系２２１を備えたが、カメラ１１０が広角レンズを備えている場合は、収音装置２０は光学系２２１を備えなくてもよい。
【００７４】
（実施形態の概要）
（１）本開示の収音装置２０は、音響入力部２１０（収音部）と、装着部２３０と、通信部２４０とを備える。音響入力部２１０は、複数のマイクロホンを含むマイクアレイ２１１を有し、マイクアレイによって収音された周囲の音に対応する音響信号を生成する。装着部２３０は、周囲を撮影して画像データを生成するカメラ１１０を備えた電子機器１０を装着可能である。通信部２４０は、音響信号を電子機器に送信する。
【００７５】
これにより、専用の収音機がなくても、目的音を精度良く収音することが可能になる。具体的には、マイクアレイ２１１を備えた収音装置２０に、カメラ１１０を備えた電子機器１０を取り付けることによって、マイクアレイ２１１から出力される音響信号とカメラ１１０によって生成される画像データとを使用することが可能になる。このため、雑音が低減されたクリアな音声を収音することができる。
【００７６】
（２）（１）の収音装置２０は、装着部２３０に装着された電子機器１０のカメラ１１０の画角よりも、外側の領域を撮影可能な光学系２２１をさらに備えてもよい。
【００７７】
これにより、収音装置２０に装着された電子機器１０はより広い範囲を撮影することが可能になる。例えば、平面置きにしたときであっても、カメラ１１０の周囲にいる人物を撮影することが可能になる。
【００７８】
（３）（２）の収音装置２０は、光学系２２１の位置を可動にする第１の可動部２６２をさらに備えてもよい。
【００７９】
これにより、電子機器１０の種類毎にカメラ１１０の位置が異なっても、使用者は、収音装置２０の光学系２２１の位置を電子機器１０のカメラ１１０の光軸上となるように、光学系２２１を移動させることができる。すなわち、使用者は、カメラ１１０の位置に応じて、光学系２２１を移動させることができる。
【００８０】
（４）（２）の収音装置２０において、光学系２２１は、カメラ１１０の画角を広げる広角レンズ２２１ａと、カメラ１１０の光軸に沿った光を反射または吸収する防止部材（遮蔽カバー２２１ｃ）と、を含んでもよい。ここで、遮蔽カバー２２１ｃは、例えば、カメラ１１０の光軸に沿った光を９０％以上吸収する。
【００８１】
また、（２）の収音装置２０において、光学系２２１は、装着部２３０に装着された電子機器１０のカメラ１１０の画角よりも、外側の領域を撮影可能な錐形ミラー２２１ｂを含んでもよい。ここで、錐形ミラー２２１ｂは、例えば、カメラ１１０の光軸に沿った光を９０％以上反射する。
【００８２】
これにより、例えば、天井に照明器具３０があっても、その照明器具３０を撮影することを防止できるため、使用者が写っている周辺領域の画像が暗くなることを防止できる。よって、画像データから人物の顔を精度良く検出することができる。
【００８３】
（５）（１）から（４）のいずれかの収音装置２０において、装着部２３０は、電子機器１０を固定するために移動することができる下ブロック２３０ｃ又は背板２３０ｂ（固定部材の一例）を含んでもよい。
【００８４】
これにより、使用者は、電子機器１０のサイズが異なっても、電子機器１０を装着部２３０に固定することができる。
【００８５】
（６）本開示の収音システム１は、（１）から（５）のいずれかに記載の収音装置２０と、収音装置２０に装着可能な電子機器１０と、を有する。
【００８６】
これにより、専用の収音機がなくても、目的音を精度良く収音することが可能になる。
【００８７】
（７）（６）の収音システム１において、電子機器１０は、音響信号と画像データとに基づいて、収音する方向を決定する制御部１４０をさらに有してもよい。
【００８８】
これにより、目的音を精度良く収音することが可能になる。
【００８９】
（８）（７）の収音システム１において、制御部１４０は、カメラ１１０からマイクアレイ２１１までの相対位置に基づいて、マイクアレイ２１１が収音する周囲の音の位置座標とカメラ１１０が撮影した周囲の位置座標とを対応付けてもよい。
【００９０】
これにより、電子機器１０の種類によって、カメラ１１０とマイクアレイ２１１との位置関係が異なっても、音源の位置を精度良く推定できる。
【００９１】
（９）（７）の収音システム１において、収音装置２０は、カメラ１１０の画角よりも広角で、カメラ１１０の光軸に配置される光学系２２１を備え、制御部１４０は、光学系２２１からのマイクアレイ２１１の相対位置とカメラ１１０の絶対位置とに基づいて、マイクアレイ２１１の座標とカメラ１１０の座標とを対応付けてもよい。
【００９２】
これにより、電子機器１０の種類によって、カメラ１１０とマイクアレイ２１１との位置関係が異なっても、音源の位置を精度良く推定できる。
【００９３】
（１０）（７）の収音システム１において、電子機器１０は、カメラ１１０の光軸方向を検知するセンサ１６０をさらに含んでもよい。そして、制御部１４０は、センサ１６０が検知したカメラ１１０の光軸方向に応じて、カメラ１１０の撮影設定条件を変更してもよい。
【００９４】
これにより、例えば、天井に照明器具３０があっても、使用者が写っている領域の画像が暗くなることを防止できる。
【００９５】
（１１）本開示の収音方法は、電子機器を収音装置に装着して目的音を収音する方法であって、カメラからマイクアレイまでの相対位置に基づいて、マイクアレイが収音する周囲の位置座標とカメラが撮影した周囲の音の位置座標とを対応付けるステップと、音響信号と画像データとに基づいて、目的音を収音する方向を決定するステップと、を含む。ここで、電子機器は、周囲を撮影して画像データを生成するカメラを備えるものである。また、収音装置は、複数のマイクロホンを含むマイクアレイを有し、マイクアレイによって収音された周囲の音に対応する音響信号を生成する収音部と、電子機器を装着可能な装着部と、音響信号を電子機器に送信する通信部と、を備えるものである。
【００９６】
これにより、専用の収音機がなくても、目的音を精度良く収音することが可能になる。具体的には、マイクアレイ２１１を備えた収音装置２０に、カメラ１１０を備えた電子機器１０を取り付けることによって、マイクアレイ２１１から出力される音響信号とカメラ１１０によって生成される画像データとを使用することが可能になる。そのため、雑音が低減されたクリアな音声を収音することができる。
【００９７】
（１２）本開示のプログラムは、コンピュータに（１１）の収音方法を実行させる。
【００９８】
本開示の全請求項に記載の収音システム、収音装置、収音方法、キャリブレーション方法は、ハードウェア資源、例えば、プロセッサ、メモリ、及びプログラムとの協働などによって、実現される。
【産業上の利用可能性】
【００９９】
本開示の収音装置は、例えば、電子機器を装着して、会話中の人の音声を収音する収音機として、有用である。
【符号の説明】
【０１００】
１        収音システム
１０      電子機器
２０      収音装置
１１０    カメラ
１２０    表示部
１３０、２４０    通信部
１４０、２５０    制御部
１５０    記憶部
１６０    センサ
１７０    バス
２１０    音響入力部
２１１    マイクアレイ
２１２、２８２    増幅器
２１３    Ａ／Ｄ変換器
２２０    広角補助部
２２１    光学系
２２１ａ  広角レンズ
２２１ｂ  錐形ミラー
２２１ｃ  遮蔽カバー
２３０    装着部
２３０ｂ  背板（固定部材）
２３０ｃ  下ブロック（固定部材）
２６１、２６２    可動部
２７０    移動検出部
２８０    音響出力部
２８１    スピーカ
２８３    Ｄ／Ａ変換器
【図１】
2019049494.tif 000003
【図２】
2019049494.tif 000004
【図３Ａ】
2019049494.tif 000005
【図３Ｂ】
2019049494.tif 000006
【図４Ａ】
2019049494.tif 000007
【図４Ｂ】
2019049494.tif 000008
【図５】
2019049494.tif 000009
【図６】
2019049494.tif 000010
【図７】
2019049494.tif 000011
【図８】
2019049494.tif 000012
【図９】
2019049494.tif 000013
【図１０】
2019049494.tif 000014
【図１１】
2019049494.tif 000015
【図１２】
2019049494.tif 000016
【図１３】
2019049494.tif 000017
【図１４】
2019049494.tif 000018
【図１５Ａ】
2019049494.tif 000019
【図１５Ｂ】
2019049494.tif 000020
【図１５Ｃ】
2019049494.tif 000021
【国際調査報告】
2019049494.tif 000022
2019049494.tif 000023
2019049494.tif 000024