(57)【要約】【課題】マイクの集音孔が遮られた状態を複雑な回路構成と演算処理とを要することなく検出することができ、かつ、そのような状態においても通話を含むアプリケーションの実現を容易にする。【解決手段】制御部１１は、第１集音孔（集音孔２１ａ）が遮られたことを検知する第１センサ（近接センサ＃１（１４））と第２集音孔（集音孔２１ｂ）が遮られたことを検知する第２センサ（近接センサ＃２（１５））との検知結果にしたがい、第１集音孔を介して集音される入力音声を取り込む第１マイク（ＭＩＣ＃１）または第２集音孔を介して集音される入力音声を取り込む第２マイク（ＭＩＣ＃２）を選択し、当該選択された第１マイクまたは第２マイクによって取り込まれる入力音声を処理する。【選択図】図２
2014216867.tif 000002
【特許請求の範囲】
【請求項１】
第１集音孔を介して集音される入力音声を取り込む第１マイクと、
第２集音孔を介して集音される入力音声を取り込む第２マイクと、
前記第１集音孔の周辺に設けられ、前記第１集音孔が障害物によって遮られたことを検知する第１センサと、
前記第２集音孔の周辺に設けられ、前記第２集音孔が前記障害物によって遮られたことを検知する第２センサと、
前記第１センサと前記第２センサとの検知結果に従い、前記第１マイクまたは前記第２マイクを選択し、当該選択された第１マイクまたは第２マイクによって集音される入力音声を処理する制御部と、を備えたことを特徴とする携帯端末装置。
【請求項２】
前記第１集音孔は、前記筐体の長手方向側面に、
前記第２集音孔は、前記筐体の短手方向側面に配置されることを特徴とする請求項１記載の携帯端末装置。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、携帯端末装置に関する。
【背景技術】
【０００２】
携帯端末市場では、通話は勿論のこと、インターネットを利用してダウンロードした多数のアプリケーションを実行することができる。
【０００３】
ところで、このような携帯端末装置では、音声を集音するマイクは通常１個実装されるのがほとんどであるが、送信された音声の品質を改善するために２個以上実装されることがある。しかしながら、いずれの実装状態においてもマイクの集音孔が利用者の指等の障害物で遮られてしまうと満足に集音することが出来なくなり、通話など音声に基づくアプリケーションの実行に支障をきたす恐れがある。
【０００４】
また、携帯端末装置を平面状の机等に載置する場合、マイクの集音孔と机とが向かい合うようにすると、スピーカから出力される音波による反射音が非線形成分になり、音響戻り特性を劣化させ、ハウリングやエコーが発生しやすくなる。つまり、マイクの集音特性が劣化して通話が困難になる可能性が高い。
【０００５】
このため、例えば、特許文献１では、複数のマイクが実装されたモバイル装置において、１以上の二次マイクが遮られた場合にユーザに対して警告する技術が開示されている。
【先行技術文献】
【特許文献】
【０００６】
【特許文献１】特表２０１１−５１２７３２号公報
【発明の開示】
【発明が解決しようとする課題】
【０００７】
上記した特許文献１に開示された技術によれば、一次および二次マイク信号についてのノイズレベルを第１および第２マイクの感度の差分と比較することにより、第２マイクが遮られていることを検出し、警告によりユーザに報知する仕組みになっている。このために複雑な回路構成と演算処理とを必要とする。
【０００８】
本発明は上記した課題を解決するためになされたものであり、マイクの集音孔が遮られた状態を複雑な回路構成と演算処理とを要することなく検出することができ、かつ、そのような状態においても通話を含むアプリケーションの実現を容易にした携帯端末装置を提供することを目的とする。
【課題を解決するための手段】
【０００９】
上記した課題を解決するために本発明の携帯端末装置は、第１集音孔を介して集音される入力音声を取り込む第１マイクと、第２集音孔を介して集音される入力音声を取り込む第２マイクと、前記第１集音孔の周辺に設けられ、前記第１集音孔が障害物によって遮られたことを検知する第１センサと、前記第２集音孔の周辺に設けられ、前記第２集音孔が前記障害物によって遮られたことを検知する第２センサと、前記第１センサと前記第２センサとの検知結果に従い、前記第１マイクまたは前記第２マイクを選択し、当該選択された第１マイクまたは第２マイクによって集音される入力音声を処理する制御部と、を備えたことを特徴とする。
【００１０】
本発明において、前記第１集音孔は、前記筐体の長手方向側面に、前記第２集音孔は、前記筐体の短手方向側面に配置されることを特徴とする。
【発明の効果】
【００１１】
本発明によれば、マイクの集音孔が遮られたことを複雑な回路構成と演算処理とを要することなく検出することができ、かつ、その状態においても通話を含むアプリケーションの実現を容易にした携帯端末装置を提供することができる。
【図面の簡単な説明】
【００１２】
【図１】本発明の実施の形態に係る携帯端末装置の外観構造の略図である。
【図２】本発明の実施の形態に係る携帯端末装置の内部構成を示すブロック図である。
【図３】本発明の実施の形態に係る携帯端末装置の動作（実施例１）を示すフローチャートである。
【図４】本発明の実施の形態に係る携帯端末装置の動作（実施例２）を示すフローチャートである。
【図５】本発明の実施の形態に係る携帯端末装置の動作（実施例３）を示すフローチャートである。
【発明を実施するための形態】
【００１３】
以下、添付図面を参照して、本発明を実施するための形態（以下、本実施形態という）について詳細に説明する。なお、本実施形態の説明の全体を通して同じ要素には同じ番号を付している。
【００１４】
（実施形態の構成）
図１は、本実施形態に係る携帯端末装置１０の外観構造を示す略図である。本実施形態では、携帯端末装置１０として、バー型のスマートフォンが例示されている。
【００１５】
図１に示すように、本実施形態に係る携帯端末装置１０は、筐体１００上部に表示部１８が実装されている。また、筐体１００には、内部に実装され、入力音声を取り込む２つのマイク（図示省略）のそれぞれに対向して２つの集音孔２１ａ，２１ｂが配置されている。また、集音孔２１ａ，２１ｂの周辺には、近接センサ１４，１５がそれぞれ実装されている。近接センサ１４，１５は、それぞれ対向して配置された集音孔２１ａ，２１ｂが利用者の手等の障害物により遮られたことを検知する、例えば赤外線型のセンサである。詳細は後述する。
【００１６】
なお、２つの集音孔２１ａ，２１ｂが配置される筐体１００上の位置は任意とするが、利用者の指や手等によって同時に遮られることがないように、実装上可能な範囲で対角位置に配置されることが好ましい。本実施形態に係る携帯端末装置１０では、図１に示すように、集音孔２１ａは筐体１００の長手方向側面に、集音孔２１ｂは筐体１００の短手方向側面（底面）に配置されている。
【００１７】
図２は、本実施形態に係る携帯端末装置１０の内部構成を示すブロック図である。図２に示すように、本実施形態に係る携帯端末装置１０は、制御部１１と、記憶部１２と、音声入出力部１３と、上記した近接センサ１４（近接センサ＃１），１５（近接センサ＃２）と、通信部１６と、操作部１７と、上記した表示部１８とを含み構成される。音声入出力部１３には、上記した２つのマイク２１（ＭＩＣ＃１，ＭＩＣ＃２）と、スピーカ２２（ＳＰ）が接続されている。
【００１８】
制御部１１は、携帯端末装置１０としての全体的な動作を統括的に制御する。制御部１
１は、記憶部１２に格納されたプログラム（ＯＳ、アプリケーションプログラム等）に基づいて処理を実行するコンピュータ（マイクロプロセッサ）を備えており、このプログラムにおいて指示された手順に従って処理を行う。
【００１９】
具体的に、制御部１１は、近接センサ＃１（１４），＃２（１５）の検出結果にしたがい、マイク２１（ＭＩＣ＃１，ＭＩＣ＃２）のいずれか一方を選択する。すなわち、近接センサ＃１（１４）の反応を検出すると、近接センサ＃１（１４）に対応して実装されたＭＩＣ＃１とは別の位置に実装されたＭＩＣ＃２を選択する。また、近接センサ＃２（１５）の反応を検出すると、近接センサ＃２（１５）に対応して実装されたＭＩＣ＃２とは別の位置に実装されたＭＩＣ＃１を選択する。
【００２０】
制御部１１は、選択されたマイク２１（ＭＩＣ＃１またはＭＩＣ＃２）によって取り込まれる入力音声に基づき、例えば、回線交換網を介して行われる音声通話、音声認識、録画・録音等に関する処理をアプリケーションプログラムによって実行する。すなわち、制御部１１は、操作部１７からのキー入力等に応じて所定のイベントが発生すると、そのイベントに対応する所定のアプリケーションプログラムを起動して特定の処理を実行する。制御部１１は、近接センサが反応した側とは反対側のマイクを使用する。
【００２１】
記憶部１２には、制御部１１において処理に利用される各種データが保持される。具体的に、制御部１１によって実行されるプログラムの他、プログラムの処理過程で利用される一時的なデータ等各種データが保持される。記憶部１２は、例えば不揮発性の記憶デバイス（不揮発性半導体メモリ、ハードディスク装置、光ディスク装置など）やランダムアクセス可能な記憶デバイス（例えば、ＳＲＡＭ、ＤＲＡＭ）などによって構成される。
【００２２】
音声入出力部１３は、２つのマイク２１（ＭＩＣ＃１，ＭＩＣ＃２）を介して入力される音声信号や、スピーカ２２（ＳＰ）から出力される音声信号の入出力処理を行う。すなわち、２つのマイク２１（ＭＩＣ＃１，ＭＩＣ＃２）から入力される音声を増幅し、アナログ−デジタル変換を行い、更に符号化等の信号処理を施し、デジタルの音声データに変換して制御部１１に出力する。また、制御部１１から出力される音声データに復号化、デジタル−アナログ変換、増幅等の信号処理を施し、アナログの音声信号に変換してスピーカ２２に出力する。なお、音声入出力部１３は、２つのマイク２１（ＭＩＣ＃１，ＭＩＣ＃２）が同時に遮られた場合に制御部１１による制御の下でゲインコントロールも行う。詳細は後述する。
【００２３】
近接センサ＃１（１４），＃２（１５）は、それぞれ対向し配置された集音孔２１ａ，２１ｂが利用者の手等の障害物により遮られたことを検知するセンサであり、例えば、赤外線型が使用される。赤外線型の近接センサ＃１（１４），＃２（１５）は、赤外線を発光する発光素子と、赤外線の反射光を受光して電気信号に変換する受光素子とから構成される。受光素子は、発光素子から照射された赤外光が遮蔽物に当たって反射した反射波を受けて電力に変換し、変換された電力が一定以上になると対象物が一定距離に近づいたと判定する。
【００２４】
通信部１６は、通信ネットワークに接続される不図示の基地局との間で無線通信を行う。例えば、制御部１１から供給される送信データに所定の変調処理を施して無線信号に変換し、不図示のアンテナを介して送出する。また、アンテナにおいて受信される基地局からの無線信号に所定の復調処理を施して受信データに変換し、制御部１１に出力する。
【００２５】
操作部１７は、例えば、電源キー、通話ボタン（発呼、着呼）、数字キー、文字キー、選択キー、決定キーなど、各種の機能が割り当てられたキー、あるいはボタンを有している。例えば、数字キーがユーザによって操作された場合に、その操作内容に対応する信号
を生成して制御部１１に入力する。なお、操作部１７は、タッチセンサにより構成されてもよく、この場合、タッチ操作に応じた信号が生成され、制御部１１に入力される。
【００２６】
表示部１８は、例えば、液晶表示パネルや有機ＥＬ（Electro-Luminescence）パネルなどの表示デバイスを用いて構成されており、制御部１１により生成される映像信号に応じた画像を表示する。例えば、後記するようにポップアップによる警告メッセージを表示する。なお、上記した操作部１７と表示部１８は、操作部１７が持つ機能と表示部１８が持つ機能とが一体形成されたタッチパネルで代替してもよい。
【００２７】
なお、上記した携帯端末装置１０は、具体的には、ＣＰＵと、メモリを含む周辺ＬＳＩによって構成され、制御中枢となる制御部１１が持つ機能は、ＣＰＵがメモリに記録されたプログラムを逐次読み出し、実行することにより実現される。また、音声入出力部１３と、通信部１６と、操作部１７と、表示部１８と、音声入出力部１３が持つ機能は、ＣＰＵによりプログラマブルに制御される周辺ＬＳＩによって実現され、図示せぬ入出力ポートを介して制御部１１が持つ機能を実現するＣＰＵに接続される。
【００２８】
（実施形態の動作）
以下、図３以降に示すフローチャートを参照しながら図１，図２に示す本実施形態に係る携帯端末装置１０の動作についてアプリケーション毎、詳細に説明する。
【００２９】
実施例１．
最初に図３のフローチャートを参照して音声通話のアプリケーションから説明する。
【００３０】
図３において、利用者は、操作部１７により、発呼、あるいは着呼ボタンの押下を行ったとする（ステップＳ１０１）。これを検出した制御部１１は、まず、近接センサ＃１（１４）の出力を参照し（ステップＳ１０２）、近接センサ＃１（１４）がＯＦＦ（対向して配置された集音孔２１ａが遮られていない）の場合（ステップＳ１０２”ＮＯ”）、ＭＩＣ＃１（２１）を選択して入力音声を取り込み（ステップＳ１０３）、アプリケーションにしたがう通話処理を行う（ステップＳ１０４）。そして、利用者の操作部１７による通話の終了操作を待って（ステップＳ１０５”ＹＥＳ”）通話処理を終了する。通話が継続していた場合（ステップＳ１０５“ＮＯ”）、ステップＳ１０２の近接センサ＃１の出力監視処理に戻る。
【００３１】
一方、近接センサ＃１（１４）が反応してＯＮ（対向して配置された集音孔２１ａが遮られている）の場合（ステップＳ１０２”ＹＥＳ”）、制御部１１は、更に、近接センサ＃２（１５）の出力を参照する（ステップＳ１０６）。ここで、近接センサ＃２（１５）がＯＦＦ（対向して配置された集音孔２１ｂが遮られていない）の場合（ステップＳ１０６”ＮＯ”）、制御部１１は、ＭＩＣ＃２（２１）を選択して入力音声を取り込み（ステップＳ１０７）、アプケーションにしたがう通話処理を行う（ステップＳ１０４）。ここで、近接センサ＃２（１５）もＯＮ（対向して配置された集音孔２１ｂが遮られている）していれば（ステップＳ１０６”ＹＥＳ”）、ＭＩＣ＃１（２１）を選択して入力音声を取り込み（ステップＳ１０８）、音声入出力部１３によるゲインアップを行い、かつ、表示部１８にポップアップによる警告メッセージにより注意喚起後（ステップＳ１０９）、アプケーションにしたがう通話処理を行う（ステップＳ１０４）。
【００３２】
なお、近接センサ＃１（１４），＃２（１５）がともにＯＮして集音孔２１ａ，２１ｂがともに遮られている場合にＭＩＣ＃１（２１）を選択したのは、また、近接センサ＃１（１４），＃２（１５）がともにＯＦＦで集音孔２１ａ，２１ｂがともに遮られていなかった場合にＭＩＣ＃１（２１）を選択したのは、デフォルトで予め優先的に定義されていたことに基づく。
【００３３】
実施例２．
次に、図４のフローチャートを参照しながら音声認識処理について説明する。
【００３４】
図４において、利用者が操作部１７を操作して音声認識処理を選択することにより制御部１１は、該当のアプリケーションプログラムを起動する（ステップＳ２０１）。音声認識処理が起動されると、制御部１１は、まず、近接センサ＃１（１４）の出力を参照し（ステップＳ２０２）、近接センサ＃１（１４）がＯＦＦ（対向して配置された集音孔２１ａが遮られていない）の場合（ステップＳ２０２”ＮＯ”）、ＭＩＣ＃１（２１）を選択して入力音声を取り込み（ステップＳ２０３）、アプリケーションにしたがう音声認識を行う（ステップＳ２０４）。例えば、利用者によって発話された電話番号を音声認識して該当の電話番号に接続する処理を行う。そして、利用者の操作部１７による所定操作、あるいは制御部１１が内蔵するタイマによる所定時間の経過を待って（ステップＳ２０５”ＹＥＳ”）処理を終了する。音声認識処理が継続していた場合（ステップＳ２０５“ＮＯ”）、ステップＳ２０２の近接センサ＃１の出力監視処理に戻る。
【００３５】
一方、近接センサ＃１（１４）が反応してＯＮ（対向して配置された集音孔２１ａが遮られている）になっている場合（ステップＳ２０２”ＹＥＳ”）、制御部１１は、更に、近接センサ＃２（１５）の出力を参照する（ステップＳ２０６）。ここで、近接センサ＃２（１５）がＯＦＦ（対向して配置された集音孔２１ｂが遮られていない）の場合（ステップＳ２０６”ＮＯ”）、制御部１１は、ＭＩＣ＃２（２１）を選択して入力音声を取り込み（ステップＳ２０７）、アプケーションにしたがう音声認識処理を実行する（ステップＳ２０４）。ここで、近接センサ＃２（１５）もＯＮ（対向して配置された集音孔２１ｂが遮られている）していれば（ステップＳ２０６”ＹＥＳ”）、ＭＩＣ＃１（２１）を選択して入力音声を取り込み（ステップＳ２０８）、音声入出力部１３によるゲインアップを行い、かつ、表示部１８にポップアップによる警告メッセージにより注意喚起後（ステップＳ２０９）、アプケーションにしたがう音声認識処理を行う（ステップＳ２０４）。
【００３６】
実施例３．
最後に、図５のフローチャートを参照しながら録画・録音処理について説明する。
【００３７】
図５において、利用者が操作部１７を操作して録画・録音処理を選択することにより、制御部１１は、該当のアプリケーションプログラムを起動する（ステップＳ３０１）。録画・録音処理のためのアプリケーションプログラムが起動されると、制御部１１は、まず、近接センサ＃１（１４）の出力を参照し（ステップＳ３０２）、近接センサ＃１（１４）がＯＦＦ（対向して配置された集音孔２１ａが遮られていない）の場合（ステップＳ３０２”ＮＯ”）、ＭＩＣ＃１（２１）を選択して入力音声を取り込み（ステップＳ３０３）、アプリケーションにしたがう録画・録音処理を行う（ステップＳ３０４）。そして、利用者の操作部１７による所定操作、あるいは制御部１１が内蔵するタイマによる録画・録音処理の経過を待って（ステップＳ３０５”ＹＥＳ”）処理を終了する。録画・録音処理が継続していた場合（ステップＳ３０５“ＮＯ”）、ステップＳ３０２の近接センサ＃１の出力監視処理に戻る。
【００３８】
一方、近接センサ＃１が反応してＯＮ（対向して配置された集音孔２１ａが遮られている）になっていた場合（ステップＳ３０２”ＹＥＳ”）、制御部１１は、更に、近接センサ＃２（１５）の出力を参照する（ステップＳ３０６）。ここで、近接センサ＃２（１５）がＯＦＦ（対向して配置された集音孔２１ｂが遮られていない）の場合（ステップＳ３０６”ＮＯ”）、制御部１１は、ＭＩＣ＃２（２１）を選択して入力音声を取り込み（ステップＳ３０７）、アプケーションにしたがう録画・録音処理を実行する（ステッ
プＳ３０４）。ここで、近接センサ＃２（１５）もＯＮ（対向して配置された集音孔２１ｂが遮られている）していれば（ステップＳ３０６”ＹＥＳ”）、ＭＩＣ＃１（２１）を選択して入力音声を取り込み（ステップＳ３０８）、音声入出力部１３によるゲインアップを行い、かつ、表示部１８にポップアップによる警告メッセージにより注意喚起後（ステップＳ３０９）、アプケーションにしたがう録画・録音処理を行う（ステップＳ３０４）。
【００３９】
（実施形態の効果）
以上説明のように本実施形態に係る携帯端末装置１０によれば、制御部１１は、第１集音孔（集音孔２１ａ）が遮られたことを検知する第１センサ（近接センサ＃１（１４））と第２集音孔（集音孔２１ｂ）が遮られたことを検知する第２センサ（近接センサ＃２（１５））との検知結果に従い、第１集音孔を介して集音される入力音声を取り込む第１マイク２１（ＭＩＣ＃１）または第２集音孔を介して集音される入力音声を取り込む第２マイク２１（ＭＩＣ＃２）を選択し、当該選択された第１マイクまたは第２マイクによって集音される入力音声を処理する。このように、集音孔２１ａ，２１ｂ周辺に設けられるセンサ（近接センサ＃１（１４），＃２（１５））によってマイク２１（ＭＩＣ＃１，＃２）の集音孔２１ａ，２１ｂが遮られたことを、複雑な回路構成と演算処理とを要することなく検出することができる。また、例えば、第１センサの反応を検出すると、第１センサに対応して実装された第１マイク（ＭＩＣ＃１）とは対角位置に実装された第２マイク（ＭＩＣ＃２）を選択して入力音声を取り込むため、満足に集音することが出来なくなり、集音した音声に基づくアプリケーションプログラムの実行が失敗に終わることは回避される。したがって、一方の集音孔が遮られた状態でも通話を含むアプリケーションの実現を容易にした携帯端末装置を提供することができる。
【００４０】
また、本実施形態に係る携帯端末装置１０によれば、第１集音孔（集音孔２１ａ）を筐体１００の長手方向側面に、第２集音孔（集音孔２１ｂ）を筐体１００の短手方向側面に配置することで、例えば、携帯端末装置１０を机等の平面上に載置した場合でも集音孔２１ａ，２１ｂが遮られることにより集音特性やエコーキャンセル性能が劣化することを回避することが出来る。
【００４１】
さらに、本実施形態に係る携帯端末装置１０によれば、制御部１１は、第１マイク２１（ＭＩＣ＃１）を介して入力される第１信号のノイズレベルと第２マイク２１（ＭＩＣ＃２）を介して入力される第２信号のノイズレベルを、第１センサ（近接センサ＃１（１４））および第２センサ（近接センサ＃２（１５））が、第１の集音孔（集音孔２１ａ）および第２集音孔（集音孔２１ｂ）のいずれも遮られていないことを検出したときに出力されるノイズレベルとそれぞれ比較することにより、第１マイク（ＭＩＣ＃１）または第２マイク（ＭＩＣ＃２）のいずれか一方を選択する。このように、ノイズレベルにしたがい一方のマイク２１（ＭＩＣ＃１，ＭＩＣ＃２のいずれか）を選択して入力音声を取り込むことにより、一方の集音孔が遮られた状態でも通話を含むアプリケーションの実現を容易にした携帯端末装置１０を提供することができる。
【００４２】
なお、本実施形態に係る携帯端末装置１０としてスマートフォンのみ例示したが、他に、携帯電話、タブレット端末、ＰＤＡ（Personal  Digital  Assistants）、ゲーム
機、あるいはＰＣ（Personal  Computer）等、マイク２１（ＭＩＣ＃１，ＭＩＣ＃２）を実装する全ての携帯型電子機器への適用が可能である。
【００４３】
以上、本発明の好ましい実施形態について詳述したが、本発明の技術的範囲は上記実施形態に記載の範囲には限定されないことは言うまでもない。上記実施形態に、多様な変更または改良を加えることが可能であることが当業者に明らかである。またその様な変更、または改良を加えた形態も本発明の技術的範囲に含まれ得ることが、特許請求の範囲の記
載から明らかである。
【符号の説明】
【００４４】
１０…携帯端末装置、１１…制御部、１２…記憶部、１３…音声入出力部、１４，１５…近接センサ＃１，＃２、１６…通信部、１７…操作部、１８…表示部、２１…マイク（ＭＩＣ＃１，ＭＩＣ＃２）、２１ａ，２１ｂ…集音孔、１００筐体
【図１】
2014216867.tif 000003
【図２】
2014216867.tif 000004
【図３】
2014216867.tif 000005
【図４】
2014216867.tif 000006
【図５】
2014216867.tif 000007