(57)【要約】【課題】目的音を精度良く集音する集音装置及び集音方法を提供する【解決手段】集音装置（１）は、音響信号を集音する装置であって、集音装置から集音装置の周囲の物体までの距離を検出して、距離を示す距離情報を生成する第１のセンサ（２４０）と、集音装置の動きを検出して、動きを示す動き情報を生成する第２のセンサ（２３０）と、集音装置の周囲の音を受音して音響信号を生成する収音部（２５０）と、音響信号の集音を制御する制御部（１１０）と、を備え、制御部は、動き情報に基づいて、距離情報を有効又は無効に設定し、距離情報を有効にしたときに音響信号を集音するか否かを距離情報に基づいて決定する。【選択図】図４
2019175158.tif 000002
【特許請求の範囲】
【請求項１】
音響信号を集音する集音装置であって、
前記集音装置から前記集音装置の周囲の物体までの距離を検出して、前記距離を示す距離情報を生成する第１のセンサと、
前記集音装置の動きを検出して、前記動きを示す動き情報を生成する第２のセンサと、
前記集音装置の周囲の音を受音して音響信号を生成する収音部と、
前記音響信号の集音を制御する制御部と、
を備え、
前記制御部は、前記動き情報に基づいて、前記距離情報を有効又は無効に設定し、前記距離情報を有効にしたときに前記音響信号を集音するか否かを前記距離情報に基づいて決定する、
集音装置。
【請求項２】
前記制御部は、前記動き情報が前記集音装置の移動後の静止を示したときに、前記距離情報を有効にする、
請求項１に記載の集音装置。
【請求項３】
前記距離情報を有効にした後の所定時間内において、
前記距離が所定距離以下であれば、前記制御部は前記音響信号の集音を開始し、
前記距離が所定距離よりも大きければ、前記制御部は前記距離情報を無効にする、
請求項２に記載の集音装置。
【請求項４】
前記制御部は、前記音響信号の集音を開始した後に、前記距離が前記所定距離よりも大きくなったことを検知したときに集音を終了して、前記距離情報を無効にする、
請求項３に記載の集音装置。
【請求項５】
前記制御部を含む第１の機器と、
前記第１のセンサ、前記第２のセンサ、及び前記収音部のうちの少なくとも１つを含み、前記第１の機器に電気的に接続された第２の機器と、
を有する、請求項１に記載の集音装置。
【請求項６】
前記距離情報を無効に設定するとき、前記第１のセンサをＯＦＦ状態にする、
請求項１に記載の集音装置。
【請求項７】
周囲の音を受音して音響信号を生成する収音部と制御部とを備えた集音装置が前記音響信号を集音する集音方法であって、
前記制御部により、
前記集音装置から前記集音装置の周囲の物体までの距離を検出する第１のセンサから前記距離を示す距離情報を取得するステップと、
前記集音装置の動きを検出する第２のセンサから前記動きを示す動き情報を取得するステップと、
前記動き情報に基づいて、前記距離情報を有効にするか無効にするかを決定するステップと、
前記距離情報を有効にしたときに、前記音響信号を集音するか否かを前記距離情報に基づいて決定するステップと、
を含む、集音方法。
【発明の詳細な説明】
【技術分野】
【０００１】
本開示は、音響信号を集音する集音装置及び集音方法に関する。
【背景技術】
【０００２】
特許文献１は、マイクからの入力音声を認識する音声認識装置を開示している。音声認識装置は、測距センサを備え、測距センサによって測定されたマイクとユーザとの距離に応じてマイクのゲインを調整している。この音声認識装置は、入力音声の音声パワーに基づいて検出した発話開始から発話終了までの音声区間において、一時的に、測距センサの動作を止めている。これにより、測距センサによるノイズ発生を抑制して、音声識別の精度を向上させている。
【０００３】
特許文献２は、角度センサを備えた音声認識装置を開示している。この音声認識装置は、角度センサが検出した音声認識装置の角度が所定の角度範囲内となったときに、音声認識動作を開始している。これにより、ユーザが音声認識を開始するためのキー操作を行うことなく、音声認識動作を開始できるようにしている。
【先行技術文献】
【特許文献】
【０００４】
【特許文献１】特開２００９−２２９８９９号公報
【特許文献２】特開２００４−２９４９４５号公報
【発明の概要】
【発明が解決しようとする課題】
【０００５】
本開示は、目的音を精度良く集音する集音装置及び集音方法を提供する。
【課題を解決するための手段】
【０００６】
本開示の集音装置は、音響信号を集音する装置である。集音装置は、集音装置から集音装置の周囲の物体までの距離を検出して、距離を示す距離情報を生成する第１のセンサと、集音装置の動きを検出して、動きを示す動き情報を生成する第２のセンサと、集音装置の周囲の音を受音して音響信号を生成する収音部と、音響信号の集音を制御する制御部と、を備える。制御部は、動き情報に基づいて、距離情報を有効又は無効に設定し、距離情報を有効にしたときに音響信号を集音するか否かを距離情報に基づいて決定する。
【０００７】
これらの概括的かつ特定の態様は、システム、方法、及びコンピュータプログラム、並びに、それらの組み合わせにより、実現されてもよい。
【発明の効果】
【０００８】
本開示の集音装置及び集音方法によれば、目的音を精度良く集音することができる。
【図面の簡単な説明】
【０００９】
【図１】集音装置の外観の一例を示す図
【図２】測定機器に電子機器を装着して集音装置を構成する例を示す図
【図３】集音装置の適用例の一例を示す図
【図４】集音装置の電気的構成の一例を示すブロック図
【図５】集音装置の使用例の一例を示す図
【図６】動作モードの遷移図
【図７】動作モードに応じた各種情報の有効／無効の設定状態と集音状態を示す図
【図８】集音装置の動作の一例を示すフローチャート
【図９】他の実施形態における電子機器の内部構成の一例を示すブロック図
【発明を実施するための形態】
【００１０】
（本開示の基礎となった知見）
特許文献１の音声認識装置は、量子化された音声波形の音声パワーに基づいて、発話開始から発話終了までの音声区間を検出する。この音声認識装置は、音声区間中は測距センサの動作を停止している。よって、例えば、音声区間中に大きな環境騒音がマイクに入力された場合、ユーザがマイクから離れても音声区間が継続しているとして認識される場合があり、発話終了を精度良く特定することができない。特許文献２の音声認識装置は、音声認識装置の角度が所定の角度範囲内となったときに動作を開始している。しかし、音声認識装置を使用する人の身長によって、使用時の角度は異なるため、所定の角度範囲を一意に決定することはできない。そのため、発話開始を精度良く特定することが難しい。以上のように、特許文献１及び特許文献２のような従来技術では、発話開始又は発話終了を精度良く特定できず、目的音を精度良く集音することができなかった。
【００１１】
本開示の集音装置は、目的音を精度良く集音することを目的とする。具体的には、本開示の集音装置は、集音装置の動き（具体的には、加速度）に基づいて、距離センサが生成した距離情報を有効にするか無効にするかを決定する。本開示の集音装置は、距離情報を有効にしたときに、その距離情報に基づいて、集音するか否かを決定する。距離情報の有効期間を制限することにより、目的音以外の音響信号を集音してしまうことを防止する。これにより、目的音を精度良く集音する。
【００１２】
（実施形態）
以下、実施形態について、図面を参照しながら説明する。本実施形態では、人の音声を目的音として集音する例について説明する。
【００１３】
１．  集音装置の構成
図１〜図４を参照して、集音装置の構成について説明する。
【００１４】
１．１  全体構成
図１は、集音装置の外観の一例を示している。図２は、測定機器に電子機器を装着して集音装置を構成する例を示している。本実施形態の集音装置１は、例えば、会話中の人の音声を集音するために使用される。本実施形態における集音とは、目的音である音声を録音することを含む。
【００１５】
図１及び図２に示すように、集音装置１は、電子機器１００と、電子機器１００を装着可能な測定機器２００とを含む。電子機器１００は、例えば、スマートフォン又はタブレット端末などのモバイル端末である。測定機器２００は、電子機器１００を装着して電子機器１００と通信する周辺機器である。測定機器２００は、電子機器１００を装着して固定するための部材である装着部２０１を備える。装着部２０１は、一例では、上板２０１ａ、背板２０１ｂ、及び下ブロック２０１ｃを含み、電子機器１００の長手方向（図１及び図２のＹ軸方向）の両端を挟んで固定する。
【００１６】
図３は、集音装置１の適用例を示している。本実施形態の集音装置１は、例えば、第１言語の発話を入力して、入力した発話を第２言語に翻訳した結果を出力する翻訳装置として使用可能である。このような集音装置１は、図３に示すように、インターネットのようなネットワーク２を介して、音声認識サーバ３、翻訳サーバ４、及び音声合成サーバ５のそれぞれとデータ通信を行う。
【００１７】
音声認識サーバ３は、集音装置１から取得した、話者の発話に対応する音響信号を音声認識して音声認識データ（発話文のテキストデータ）を生成する。
【００１８】
翻訳サーバ４は、第１言語から第２言語への翻訳及び第２言語から第１言語への逆翻訳を行う。翻訳サーバ４は、集音装置１から取得した音声認識データから翻訳データ（翻訳文のテキストデータ）を生成する。また、翻訳サーバ４は、翻訳データから逆翻訳データ（逆翻訳文のテキストデータ）を生成する。
【００１９】
音声合成サーバ５は、集音装置１から取得した翻訳データを音声合成して音声信号を生成する。
【００２０】
図４は、集音装置１の電気的構成を例示している。集音装置１は、双方向に通信する電子機器１００と測定機器２００とにより構成される。
【００２１】
１．２  電子機器の構成
電子機器１００は、制御部１１０、接続部１２０、記憶部１３０、通信部１４０、及び表示部１５０を備える。
【００２２】
制御部１１０は、電子機器１００全体を制御する。制御部１１０は、半導体素子などで実現可能である。制御部１１０は、例えば、マイコン、ＣＰＵ、ＭＰＵ、ＤＳＰ、ＦＰＧＡ、ＡＳＩＣで構成することができる。制御部１１０の機能は、ハードウェアのみで構成してもよいし、ハードウェアとソフトウェアとを組み合わせることにより実現してもよい。
【００２３】
制御部１１０は、機能的構成として、モード切替部１１１、音声区間決定部１１２、及びデータ処理部１１３を含む。
【００２４】
モード切替部１１１は、加速度センサ２３０から出力される加速度情報及び距離センサ２４０から出力される距離情報に基づいて、動作モードを切り替える（図６参照）。モード切替部１１１は、例えば、動作モードを切り替えたタイミングで、現在の動作モードを音声区間決定部１１２に通知する。
【００２５】
音声区間決定部１１２は、動作モードに応じて集音区間を決定する。例えば、音声区間決定部１１２は、モード切替部１１１から現在の動作モードを知らせる通知を受け取ると、現在の動作モードが集音モード（図７参照）か否かを判断する。音声区間決定部１１２は、集音モードの開始から終了までの期間を集音区間に決定する。集音区間は、測定機器２００から取得する音響信号のうち、目的音が含まれる区間に相当する。本実施形態では、人の音声を目的音として集音するため、集音区間は、発話開始から発話終了までの音声区間に相当する。音声区間決定部１１２は、集音モードの開始から終了までの期間を音声区間に決定し、データ処理部１１３に音声区間の開始及び終了を通知する。
【００２６】
データ処理部１１３は、音声区間において音響信号を処理（集音）する。例えば、データ処理部１１３は、音声区間の開始の通知を受け取ると音響信号を記憶部１３０に格納し始める。データ処理部１１３は、例えば、音声区間の終了の通知を受け取ると記憶部１３０への音響信号の格納を終了する。データ処理部１１３は、例えば、音響信号の格納を終了したときに、音声区間に対応する音響信号を、通信部１４０を介して音声認識サーバ３に出力する。なお、データ処理部１１３は、音声区間の開始の通知を受け取ったときに音響信号を音声認識サーバ３に出力し始めてもよい。
【００２７】
接続部１２０は、所定の通信規格（例えば、ＬＡＮ、Ｗｉ−Ｆｉ（登録商標）、Ｂｌｕｅｔｏｏｔｈ（登録商標）、ＵＳＢ、ＨＤＭＩ（登録商標））に準拠して外部機器との通信を行う回路を含む。接続部１２０は、本実施形態では、ＵＳＢ端子（メス端子）である。電子機器１００は、接続部１２０を介して、測定機器２００と電気的に接続される。
【００２８】
記憶部１３０は、例えば、ハードディスク（ＨＤＤ）、ＳＳＤ、ＲＡＭ、ＤＲＡＭ、強誘電体メモリ、フラッシュメモリ、磁気ディスク、又はこれらの組み合わせによって実現できる。記憶部１３０には、目的音の音響信号が格納される。
【００２９】
通信部１４０は、図３に示すネットワーク２を介して、音声認識サーバ３、翻訳サーバ４、及び音声合成サーバ５とデータ通信を行う。通信部１４０は、所定の通信規格（例えば、ＬＡＮ、Ｗｉ−Ｆｉ（登録商標）、Ｂｌｕｅｔｏｏｔｈ（登録商標）、ＵＳＢ、ＨＤＭＩ（登録商標））に準拠して外部機器との通信を行う回路を含む。
【００３０】
表示部１５０は、液晶表示デバイス又は有機ＥＬ表示デバイスで構成される。表示部１５０は、例えば、発話の翻訳結果である翻訳文を表示する。
【００３１】
１．３  測定機器の構成
測定機器２００は、制御部２１０、接続部２２０、加速度センサ２３０、距離センサ２４０、音響入力部（収音部）２５０、及び音響出力部２６０を備える。
【００３２】
制御部２１０は、測定機器２００全体を制御する。制御部２１０は、音響信号を、接続部２２０を介して、電子機器１００に送信する。制御部２１０は、半導体素子などで実現可能である。制御部２１０は、例えば、マイコン、ＣＰＵ、ＭＰＵ、ＤＳＰ、ＦＰＧＡ、ＡＳＩＣで構成することができる。制御部２１０の機能は、ハードウェアのみで構成してもよいし、ハードウェアとソフトウェアとを組み合わせることにより実現してもよい。
【００３３】
接続部２２０は、所定の通信規格（例えば、ＬＡＮ、Ｗｉ−Ｆｉ（登録商標）、Ｂｌｕｅｔｏｏｔｈ（登録商標）、ＵＳＢ、ＨＤＭＩ（登録商標））に準拠して外部機器との通信を行う回路を含む。接続部２２０は、本実施形態では、ＵＳＢ端子（オス端子）であり、電子機器１００のＵＳＢ端子（メス端子）に接続される。測定機器２００は、接続部２２０を介して、電子機器１００と電気的に接続される。
【００３４】
加速度センサ２３０は、集音装置１の加速度を検出して加速度を示す加速度情報を生成する。加速度情報は、集音装置１の移動及び静止などの動きを示す動き情報の一例である。
【００３５】
距離センサ２４０は、距離センサ２４０から周囲の物体までの距離を検出し、距離を示す距離情報を出力する。距離センサ２４０は、例えば、赤外線センサである。距離センサ２４０は、例えば、図２に示す下ブロック２０１ｃのＹ軸方向における下面に取り付けられる。
【００３６】
音響入力部２５０は、周囲の音を受音して、受音した音に対応する音響信号を生成する。音響入力部２５０は、例えば、マイクアレイ、複数の増幅器、及び複数のＡ／Ｄ変換器を備える。マイクアレイは、複数のマイクロホンによって周囲の音（音波）を受音して、受音した音を電気信号に変換してアナログの音響信号を出力する。各増幅器は、各マイクロホンから出力されるアナログの音響信号をそれぞれ増幅する。各Ａ／Ｄ変換器は、各増幅器から出力される音響信号をアナログからデジタルに変換する。本実施形態において、音響入力部２５０は図２に示す下ブロック２０１ｃに配置される。
【００３７】
音響出力部２６０は、音声などの音響信号を出力する。例えば、音響出力部２６０は、発話の翻訳結果に対応する音声信号を出力する。音響出力部２６０は、例えば、Ｄ／Ａ変換器、増幅器、及びスピーカを備える。Ｄ／Ａ変換器は、制御部２１０から受け取った音響信号をデジタルからアナログに変換する。増幅器は、アナログの音響信号を増幅する。スピーカは、増幅されたアナログの音響信号を出力する。
【００３８】
２．  集音装置の動作
図５〜図８を参照して集音装置１の動作について説明する。
【００３９】
図５は、集音装置１の使用例を示している。本実施形態の集音装置１は持ち運び可能な端末である。例えば、使用時は、ホスト１０が集音装置１を手に持ち、距離センサ２４０及び音響入力部２５０を話者（ゲスト２０又はホスト１０）に向けて使用する。例えば、ホスト１０とゲスト２０が対面で会話するとき、ホスト１０は集音装置１の向き（距離センサ２４０及び音響入力部２５０がある側）を話者が変わるたびにホスト１０側又はゲスト２０側に交互に変更する。あるいは、ゲスト２０又はホスト１０が続けて話すときに集音装置１を近づけて、話し終わると集音装置１を遠ざける。
【００４０】
図６は、動作モードの遷移図を示している。集音装置１の動作モードは、待機モード、移動モード、話者特定モード、集音（録音）モード、及び終話モードを含む。
【００４１】
待機モードは、図８に示す集音処理の動作開始時（例えば、集音装置１の電源ＯＮ時）に最初に設定されるモードである。待機モードは、集音装置１が静止している状態である。例えば、待機モードは、動作開始時では、図５に示すように、集音装置１がテーブル３０上に載置されているときのような平面置きの状態である。本実施形態において、動作開始時における集音装置１の姿勢又は位置を待機状態と称する。平面置きとは、集音装置１の主面が水平面（ＸＹ面）と略同一になる置き方である。なお、待機状態は平面置きに限らず、水平面に対して所定の角度となる姿勢であってもよい。集音装置１の移動が開始されると、動作モードは移動モードに移行する。
【００４２】
移動モードは、集音装置１が移動中のときに設定されるモードである。移動モードにおいて、集音装置１が待機状態で静止すると、動作モードは待機モードに戻り、集音装置１が待機状態以外で静止すると、動作モードは話者特定モードに移行する。
【００４３】
話者特定モードは、距離情報に基づいて話者を検出するモードである。話者特定モードにおいて、話者が距離センサ２４０から所定距離ｄ１以内にいれば、動作モードは集音モードに移行する。話者が距離センサ２４０から所定距離ｄ１以内にいない場合は、集音装置１の動きに応じて、移動モード又は待機モードに戻る。
【００４４】
集音モードは、音響入力部２５０が生成した音響信号を処理するモードである。本実施形態においては、音響信号が記憶部１３０に格納される。すなわち、集音モードは、録音するモードである。集音モードにおいて、話者が距離センサ２４０から所定距離ｄ１以内からいなくなると、動作モードは終話モードに移行する。
【００４５】
終話モードは、録音を終了して、集音装置１が移動中か静止中かを判定するモードである。集音装置１の動きに応じて、動作モードは待機モード又は移動モードに移行する。
【００４６】
図７は、各動作モードにおける、加速度情報及び距離情報の有効及び無効の設定状態、及び集音状態を示している。図７に示すように、加速度センサ２３０が生成する加速度情報は、いずれの動作モードにおいても有効に設定される。距離センサ２４０が生成する距離情報は、待機モード、移動モード、及び終話モードでは無効に設定され、話者特定モード及び集音モードにおいて有効に設定される。加速度情報及び距離情報は有効に設定されているときに使用される。距離情報は無効に設定されているときは使用されない。集音（録音）は、集音モードにおいて行われる。
【００４７】
図８は、集音装置１の動作を示している。本実施形態において、図８に示す動作は、電子機器１００の制御部１１０が行う。制御部１１０は、例えば、集音装置１の電源がＯＮされたときに図８に示す動作を行う。制御部１１０は、集音するためのアプリケーションが起動されたときに、図８に示す動作を行ってもよい。図８に示す動作を集音処理とも称する。集音処理中、加速度センサ２３０、距離センサ２４０、及び音響入力部２５０は常にＯＮ状態である。すなわち、集音処理中、加速度センサ２３０は加速度情報を生成し、距離センサ２４０は距離情報を生成し、音響入力部２５０は集音装置１の周囲の音を受音して音響信号を生成している。よって、図８に示す動作の間、電子機器１００は、測定機器２００から、加速度情報、距離情報、及び音響信号を取得している。例えば、ステップＳ１，Ｓ２，Ｓ３，Ｓ８の判断の前に、モード切替部１１１は加速度情報を取得している。ステップＳ４、Ｓ６の判断の前に、モード切替部１１１は距離情報を取得している。
【００４８】
待機モードにおいて、モード切替部１１１は、加速度情報を有効に設定し、距離情報を無効に設定する。モード切替部１１１は、加速度情報に基づいて、集音装置１が移動したか否かを判断する（Ｓ１）。例えば、ホスト１０がテーブル３０上にある集音装置１を手に取ると、加速度情報はゼロより大きくなるため、モード切替部１１１は集音装置１が移動したことを検知して、動作モードを待機モードから移動モードに切り替える。このとき、モード切替部１１１は、移動モードに移行したことを音声区間決定部１１２に通知してもよい。
【００４９】
モード切替部１１１は、加速度情報に基づいて、集音装置１が静止したか否かを判断する（Ｓ２）。モード切替部１１１は、加速度情報が集音装置１の移動後の静止を示したことを検知すると（Ｓ２でＹｅｓ）、加速度情報に基づいて集音装置１の姿勢又は位置を算出し、集音装置１が待機状態か否かを判断する（Ｓ３）。静止しているか否かは、例えば、集音装置１の角度が一定時間、略同一か否かで判断する。
【００５０】
集音装置１が待機状態であれば（Ｓ３でＹｅｓ）、モード切替部１１１は、動作モードを待機モードに戻す。すなわち、ステップＳ１に戻る。例えば、ホスト１０が、集音装置１を再度テーブル３０上に戻すと、モード切替部１１１は、動作モードを待機モードに戻す。このとき、モード切替部１１１は、待機モードに移行したことを音声区間決定部１１２に通知してもよい。
【００５１】
待機状態以外で集音装置１が静止すると（Ｓ３でＮｏ）、モード切替部１１１は動作モードを話者特定モードに切り替えて、距離情報を有効に設定する。例えば、ホスト１０が手に持っている集音装置１をゲスト２０に向けた状態で静止させると、話者特定モードに切り替わる。モード切替部１１１は、話者特定モードに移行したことを音声区間決定部１１２に通知してもよい。モード切替部１１１は、話者特定モードに移行してから所定時間内において、距離情報に基づいて話者が距離センサ２４０から所定距離ｄ１以内にいるか否かを判定する（Ｓ４）。所定距離ｄ１は、例えば、約２０ｃｍである。
【００５２】
モード切替部１１１は、話者特定モードに移行してから所定時間内に、話者が距離センサ２４０から所定距離ｄ１以内にいることを検知すると（Ｓ４でＹｅｓ）、動作モードを集音モードに切り替える。モード切替部１１１は、集音モードに移行したことを音声区間決定部１１２に通知する。音声区間決定部１１２は、集音モードに移行したことの通知を受けて、音声区間の開始をデータ処理部１１３に通知する。データ処理部１１３は、音声区間の開始の通知を受けて、集音を開始する（Ｓ５）。具体的には、データ処理部１１３は、音響入力部２５０が受音して生成した音響信号を記憶部１３０に格納する。すなわち、録音する。
【００５３】
モード切替部１１１は、話者特定モードに移行してから所定時間内に、話者が距離センサ２４０から所定距離ｄ１以内にいることを検知しなければ（Ｓ４でＮｏ）、加速度情報に基づいて集音装置１が移動中か否かを判断する（Ｓ８）。例えば、話者特定モードに移行してから所定時間内において距離センサ２４０と話者との距離が所定距離ｄ１よりも大きければ、所定距離ｄ１以内に話者がいないことを検知する。モード切替部１１１は、集音装置１が移動中であることを検知したとき（Ｓ８でＹｅｓ）は動作モードを移動モードに切り替え（Ｓ２に戻り）、集音装置１が静止中であることを検知したとき（Ｓ８でＮｏ）は動作モードを待機モードに切り替える（Ｓ１に戻る）。移動モード又は待機モードに移行すると、モード切替部１１１は距離情報を無効に設定する。
【００５４】
集音モードにおいて、モード切替部１１１は、距離情報に基づいて、話者が距離センサ２４０から所定距離ｄ１以内にいるか否かを判定する（Ｓ６）。モード切替部１１１は、集音モード中に、話者が集音装置１から所定距離ｄ１の範囲外に移動したことを検知すると（Ｓ６でＮｏ）、動作モードを終話モードに切り替える。モード切替部１１１は、終話モードに移行したことを音声区間決定部１１２に通知する。音声区間決定部１１２は、終話モードに移行したことの通知を受けて、音声区間の終了をデータ処理部１１３に通知する。データ処理部１１３は、音声区間の終了の通知を受けて、集音を停止する（Ｓ７）。
【００５５】
モード切替部１１１は、終話モードに移行すると、距離情報を無効に設定する。終話モードにおいて、モード切替部１１１は、加速度情報に基づいて、集音装置１が移動中か否かを判断する（Ｓ８）。モード切替部１１１は、集音装置１が移動中であることを検知したとき（Ｓ８でＹｅｓ）は動作モードを移動モードに切り替え（Ｓ２に戻り）、集音装置１が静止中であることを検知したとき（Ｓ８でＮｏ）は動作モードを待機モードに切り替える（Ｓ１に戻る）。
【００５６】
終話モードにおいて、データ処理部１１３は、例えば、記憶部１３０に格納した音声区間に対応する音響信号を音声認識サーバ３に送信して、音声認識データを取得する。データ処理部１１３は、音声認識データを取得したこと、すなわち音声認識処理が完了したことをモード切替部１１１に通知してもよい。モード切替部１１１は、音声認識処理が完了した後に、終話モードから待機モード又は移動モードに移行してもよい。
【００５７】
データ処理部１１３は、取得した音声認識データを記憶部１３０に格納してもよい。データ処理部１１３は、音声認識データが示す発話文を表示部１５０に表示してもよい。データ処理部１１３は、取得した音声認識データを翻訳サーバ４に送信して、翻訳データを取得してもよい。データ処理部１１３は、翻訳データを記憶部１３０に格納してもよいし、翻訳データが示す翻訳文を表示部１５０に表示してもよい。データ処理部１１３は、取得した翻訳データを音声合成サーバ５に送信して、翻訳文に対応する音声信号を取得してもよい。データ処理部１１３は、翻訳文に対応する音声信号を測定機器２００に出力し、測定機器２００の音響出力部２６０から翻訳文に対応する音声信号を出力してもよい。
【００５８】
以上の動作により、例えば、録音ボタン等を操作することなく、集音装置１の向き（距離センサ２４０及び音響入力部２５０がある側）をホスト１０側又はゲスト２０側に交互に変更するだけで、ホスト１０とゲスト２０の会話をそれぞれ録音することができる。このとき、テーブル３０に載置されている集音装置１を持ち上げるとき及び集音装置１の向きを変更している間（移動中）は、距離情報が無効に設定されて録音が開始されない。よって、目的音以外の音、例えば環境騒音を録音してしまうことを防止することができる。また、集音装置１が翻訳サーバ４及び音声合成サーバ５と通信することにより、ホスト１０とゲスト２０の発話に対応する翻訳文を表示部１５０に表示したり、発話に対応する翻訳後の音声を音響出力部２６０から出力したりすることができる。
【００５９】
３．  効果及び補足等
本実施形態の集音装置１は、音響信号を集音する。集音装置１は、距離センサ２４０（第１のセンサの一例）と、加速度センサ２３０（第２のセンサの一例）と、音響入力部２５０（収音部の一例）と、制御部１１０とを備える。距離センサ２４０は、集音装置１から集音装置１の周囲の物体までの距離を検出して、距離を示す距離情報を生成する。加速度センサ２３０は、集音装置１の加速度を検出して、加速度を示す加速度情報を生成する。加速度情報は、集音装置１の動きを示す動き情報の一例である。音響入力部２５０は、集音装置１の周囲の音を受音して音響信号を生成する。制御部１１０は、音響信号の集音を制御する。具体的には、制御部１１０は、加速度情報（動き情報の一例）に基づいて、距離情報を有効又は無効に設定し、距離情報を有効にしたときに音響信号を集音するか否かを距離情報に基づいて決定する。
【００６０】
このように距離情報の有効期間を加速度情報に基づいて制限することによって、距離情報に基づく誤動作、具体的には目的音以外の音を集音してしまうことを防止することができる。例えば、集音装置１を手に持とうとしたときに、目的音を発しない物体（例えば、テーブル３０）までの距離が近いことを検出して、集音を誤って開始してしまうことを防止することができる。また、例えば、集音装置１を持ち替えたときなどに、距離センサ２４０によって手や身体までの距離が近いことを検出して集音を誤って開始してしまうことを防止することができる。このように、加速度情報と距離情報とに基づいて集音を制御することによって、目的音が含まれる集音区間を精度良く特定することができる。よって、目的音を精度良く集音することができる。本実施形態の集音装置１によれば、距離情報に基づいて目的音が自動的に集音されるため、例えば、使用者が発話する度に発話の開始ボタン及び終了ボタン等を操作する必要がない。このように、本実施形態の集音装置１によれば、集音するときの利便性が向上する。
【００６１】
制御部１１０は、加速度情報が集音装置１の移動後の静止を示したときに、距離情報を無効から有効に設定する（待機モード→移動モード→話者特定モード）。これにより、例えば、図５に示すように、ホスト１０が集音装置１をテーブル３０上から移動してゲスト２０に向けて静止するまでの間は、距離情報は無効である。よって、集音装置１が距離センサ２４０によってテーブル３０又はホスト１０までの距離が近いことを検知して集音を開始してしまうことを防止することができる。距離情報は、集音装置１が移動後静止したときに有効となるため、ゲスト２０の近傍で静止した集音装置１によって、目的音であるゲスト２０の発話を集音することができる。
【００６２】
距離情報を有効にした後の所定時間内において、距離が所定距離ｄ１以下になれば、制御部１１０は音響信号の集音を開始し（話者特定モード→集音モード）、距離が所定距離ｄ１よりも大きければ、制御部１１０は距離情報を無効にする（話者特定モード→待機モード又は移動モード）。
【００６３】
これにより、例えば、図５に示す状態において、集音装置１が移動後静止したときに、ゲスト２０までの距離が遠ければ集音が開始されず、ゲスト２０までの距離が近いときのみ集音が開始される。これにより、目的音を発するゲスト２０に近づく前に集音してしまうことを防止できる。ゲスト２０に近づいてから集音が開始されるため、目的音であるゲスト２０の発話を精度良く集音することができる。
【００６４】
制御部１１０は、音響信号の集音を開始した後に、距離が所定距離ｄ１よりも大きくなったことを検知したときに集音を終了して、距離情報を無効にする（集音モード→終話モード）。これにより、例えば、ゲスト２０の発話が終了して、ホスト１０が集音装置１をテーブル３０に戻そうとしたとき又は集音装置１の向きをゲスト２０側からホスト１０側に変更しようとしたときに、自動で集音を終了させることができる。これにより、目的音（発話）以外の音を集音することを防止することができる。
【００６５】
（他の実施形態）
以上のように、本出願において開示する技術の例示として、上記実施形態を説明した。しかしながら、本開示における技術は、これに限定されず、適宜、変更、置き換え、付加、省略などを行った実施形態にも適用可能である。また、上記実施形態で説明した各構成要素を組み合わせて、新たな実施形態とすることも可能である。そこで、以下、他の実施形態を例示する。
【００６６】
上記実施形態では、集音モード中に、話者が集音装置１から所定距離ｄ１の範囲外に移動すると（Ｓ６でＮｏ）、終話モードに移行して、集音を停止した。これに代えて、集音装置１は集音を開始してから所定時間が経過したときに、終話モードに移行して集音を停止してもよい。
【００６７】
集音装置１は、話者特定モードにおいて、距離センサ２４０から話者までの距離が所定距離ｄ２よりも小さければ、集音モードに移行せずに、待機モード又は移動モードに戻ってもよい。ここで、ｄ２＜ｄ１である。例えば、所定距離ｄ１は約２０ｃｍであり、所定距離ｄ２は約１ｃｍである。
【００６８】
上記実施形態では、集音処理中、距離センサ２４０は常にＯＮ状態であり、集音装置１は、加速度情報に基づいて、距離センサ２４０が生成した距離情報を有効にするか無効にするかを決定した。しかし、有効／無効に代えて、距離センサ２４０のＯＮ／ＯＦＦを切り替えてもよい。また、音響入力部２５０は、集音処理中、常にＯＮ状態であり、周囲の音を受音していた。しかし、音響入力部２５０は、集音モードのときのみＯＮ状態であって、集音モード以外の他のモードのときはＯＦＦ状態であってもよい。距離センサ２４０や音響入力部２５０をＯＦＦ状態にすることにより、消費電力を低減することができる。
【００６９】
集音装置１は、話者特定モードにおいて、話者との距離が所定距離ｄ１以下になったことを検知したときに、集音開始を知らせるための音を音響出力部２６０から出力してもよい。音に限らず、集音開始を知らせるためのメッセージを表示部１５０に表示してもよいし、ＬＥＤなどの光源を点灯させてもよい。集音装置１は、集音モードにおいて、話者との距離が所定距離ｄ１より大きくなったことを検知したときに、集音終了を知らせるための音を音響出力部２６０から出力してもよい。また、音に限らず、集音終了を知らせるためのメッセージを表示部１５０に表示してもよいし、ＬＥＤなどの光源を消灯させてもよい。
【００７０】
図８のステップＳ４において、集音装置１は距離情報に基づいて話者が距離センサ２４０から所定距離ｄ１以内にいるか否かを判定するとした。しかし、距離センサ２４０が、話者でない物体を話者と誤認識する場合がある。その場合、集音装置１は距離情報に基づいて話者又は物体が距離センサ２４０から所定距離ｄ１以内に存在するか否かを判定する。話者又は物体が距離センサ２４０から所定距離ｄ１以内に存在することを検知すると（Ｓ４でＹｅｓ）、集音を開始する（Ｓ５）。距離情報と音響入力部２５０の入力情報とに基づいて、話者が距離センサ２４０から所定距離ｄ１以内にいるか否かを判定する（Ｓ６）。つまり、音響入力部２５０に発話が入力されたとき、ステップＳ６で話者がいると判断する。
【００７１】
上記実施形態では、加速度センサ２３０、距離センサ２４０、音響入力部（収音部）２５０、及び音響出力部２６０は測定機器２００に設けられたが、加速度センサ２３０、距離センサ２４０、音響入力部２５０、及び音響出力部２６０のうちの１つ以上が電子機器１００に設けられても良い。例えば、図９に示すように、電子機器１００が、加速度センサ１７０、距離センサ１８０、音響入力部（収音部）１６０、及び音響出力部１９０を備え、電子機器１００のみで集音装置１を構成してもよい。また、加速度センサ、距離センサ、音響入力部、及び音響出力部の機能は、電子機器１００と測定機器２００の両方が備えてもよい。
【００７２】
上記実施形態では、音声認識を音声認識サーバ３で行い、翻訳を翻訳サーバ４で行い、音声合成を音声合成サーバ５で行ったが、本開示はこれに限定されない。音声認識、翻訳及び音声合成の少なくとも一つの処理を集音装置１内で行ってもよい。例えば、集音装置１（端末）に、音声認識サーバ３、翻訳サーバ４、及び音声合成サーバ５と同一の機能を全て搭載して、集音装置１のみで翻訳に関連する全ての処理を行うようにしてもよい。
【００７３】
上記実施形態では、動き情報の一例として加速度情報を使用した。動き情報は、加速度情報に代えて又は加えて、集音装置１の角速度を示す角速度情報を含んでもよい。例えば、集音装置１は、角速度を検出するジャイロセンサを備え、集音装置１の角速度から角度を算出してもよい。集音装置１は、算出した角度に基づいて、動作モードを切り替えてもよい。例えば、算出した角度に基づいて、集音装置１が待機状態か否かを判断してもよい。
【００７４】
上記実施形態では、集音は、目的音を録音することであった。しかし、集音は、録音に限らず、集音期間に対応する音響信号を処理することを含む。
【００７５】
上記実施形態では、目的音として人の音声を集音する例について説明したが、目的音は人の音声に限らない。例えば、動物の鳴き声又は車の音などを集音してもよい。
【００７６】
（実施形態の概要）
（１）本開示の集音装置は、音響信号を集音する集音装置（１）であって、集音装置から集音装置の周囲の物体までの距離を検出して、距離を示す距離情報を生成する第１のセンサ（２４０）と、集音装置の動きを検出して、動きを示す動き情報を生成する第２のセンサ（２３０）と、集音装置の周囲の音を受音して音響信号を生成する収音部（２５０）と、音響信号の集音を制御する制御部（１１０）と、を備え、制御部は、動き情報に基づいて、距離情報を有効又は無効に設定し、距離情報を有効にしたときに音響信号を集音するか否かを距離情報に基づいて決定する。
【００７７】
これにより、距離情報の有効期間が制限されるため、目的音を精度良く集音することができる。
【００７８】
（２）（１）の集音装置において、制御部は、動き情報が集音装置の移動後の静止を示したときに、距離情報を有効にしてもよい（待機モード→移動モード→話者特定モード）。
【００７９】
これにより、集音装置が移動中に、誤って集音が開始されてしまうことを防止することができる。
【００８０】
（３）（２）の集音装置において、距離情報を有効にした後の所定時間内において、距離が所定距離以下であれば、制御部は音響信号の集音を開始し（話者特定モード→集音モード）、距離が所定距離よりも大きければ、制御部は距離情報を無効にしてもよい（話者特定モード→待機モード又は移動モード）。
【００８１】
これにより、物体（例えば、人）が集音装置の近傍にいるときのみ集音が開始されるため、目的音以外の音を集音してしまうことを防止することができる。よって、精度良く目的音を集音することができる。また、物体が集音装置の近傍にいる場合は自動的に集音が開始されるため、使用者は集音開始ボタンなどを操作する必要がない。よって、利便性が向上する。
【００８２】
（４）（３）の集音装置において、制御部は、音響信号の集音を開始した後に、距離が所定距離よりも大きくなったことを検知したときに集音を終了して、距離情報を無効にしてもよい（集音モード→終話モード）。
【００８３】
これにより、物体（例えば、人）が集音装置から離れると集音が終了するため、目的音以外の音、例えば環境騒音を集音してしまうことを防止することができる。
【００８４】
（５）（１）の集音装置は、制御部を含む第１の機器（１００）と、第１のセンサ、第２のセンサ、及び収音部のうちの少なくとも１つを含み、第１の機器に電気的に接続された第２の機器（２００）と、を有してもよい。
【００８５】
（６）（１）の集音装置は、距離情報を無効に設定するとき、第１のセンサをＯＦＦ状態にしてもよい。
【００８６】
これにより、消費電力を低減することができる。
【００８７】
（７）本開示の集音方法は、周囲の音を受音して音響信号を生成する収音部と制御部とを備えた集音装置が音響信号を集音する方法である。集音方法は、制御部により、集音装置から集音装置の周囲の物体までの距離を検出する第１のセンサから距離を示す距離情報を取得するステップと、集音装置の動きを検出する第２のセンサから動きを示す動き情報を取得するステップと、動き情報に基づいて、距離情報を有効にするか無効にするかを決定するステップと、距離情報を有効にしたときに、音響信号を集音するか否かを距離情報に基づいて決定するステップと、を含む。
【００８８】
本開示の全請求項に記載の集音装置及び集音方法は、ハードウェア資源、例えば、プロセッサ、メモリ、及びプログラムとの協働などによって、実現される。
【産業上の利用可能性】
【００８９】
本開示の集音装置は、例えば、会話中の人の音声を集音する装置として、有用である。
【符号の説明】
【００９０】
１          集音装置
３          音声認識サーバ
４          翻訳サーバ
５          音声合成サーバ
１００      電子機器
１１０、２１０      制御部
１１１      モード切替部
１１２      音声区間決定部
１１３      データ処理部
１２０、２２０      接続部
１３０      記憶部
１４０      通信部
１５０      表示部
１６０、２５０      音響入力部
１７０、２３０      加速度センサ
１８０、２４０      距離センサ
１９０、２６０      音響出力部
２００      測定機器
【図１】
2019175158.tif 000003
【図２】
2019175158.tif 000004
【図３】
2019175158.tif 000005
【図４】
2019175158.tif 000006
【図５】
2019175158.tif 000007
【図６】
2019175158.tif 000008
【図７】
2019175158.tif 000009
【図８】
2019175158.tif 000010
【図９】
2019175158.tif 000011