(57)【要約】      （修正有）【課題】接触操作が困難な場合の操作性を向上させる電子機器を提供する。【解決手段】電子機器１は、センサと、音声入力部と、コントローラとを備える。コントローラは、セキュリティロック状態を解除する際、センサの検出結果から自機に対する接触操作が不可能であり、センサによる認証処理が行えないと判定した場合、音声入力部により音声入力の受け付けを開始し、音声認識によりセキュリティロック状態の解除を行う。【選択図】図２
2018182616.tif 000002
【特許請求の範囲】
【請求項１】
センサと、
音声入力部と、
コントローラと、を備え
前記コントローラは、
前記センサの検出結果から自機に対する接触操作が不可能であると判定した場合、前記音声入力部により音声入力の受け付けを開始する、
電子機器。
【請求項２】
前記センサは、気圧センサであり、
前記コントローラは、
前記気圧センサの検出結果が一定時間内に所定の値よりも大きく変化すると、前記接触操作が不可能であると判定する、
請求項１に記載の電子機器。
【請求項３】
前記センサは、湿度センサおよび温度センサであり、
前記コントローラは、
前記湿度センサおよび前記温度センサの検出結果が一定時間内に所定の値よりも大きく変化すると、前記接触操作が不可能であると判定する、
請求項１に記載の電子機器。
【請求項４】
前記センサは、タッチセンサである、
請求項１に記載の電子機器。
【請求項５】
前記センサは、指紋センサである、
請求項１に記載の電子機器。
【請求項６】
前記コントローラは、
前記タッチセンサが所定の領域よりも広い領域で静電容量の変化を検出すると、前記接触操作が不可能であると判定する、
請求項４に記載の電子機器。
【請求項７】
前記コントローラは、
前記タッチセンサが静電容量の所定の変化を検出すると、前記接触操作が不可能であると判定する、
請求項４に記載の電子機器。
【請求項８】
前記コントローラは、
前記タッチセンサが静電容量の変化を検出した際に、当該静電容量の変化に対応する処理を実行できないと、前記接触操作が不可能であると判定する、
請求項４に記載の電子機器。
【請求項９】
前記コントローラは、
前記指紋センサが静電容量の所定の変化を検出すると、前記接触操作が不可能であると判定する、
請求項５に記載の電子機器。
【請求項１０】
前記コントローラは、
前記指紋センサによって検出される指紋の画像とあらかじめ登録されているユーザの指紋画像との照合を実行しようとする際に、前記指紋センサが指紋を検出できないと、前記接触操作が不可能であると判定する、
請求項９に記載の電子機器。
【請求項１１】
前記コントローラは、
所定の値よりも大きな値を検出した後の検出結果が、前記音声入力を受け付ける前の検出結果から所定の値の範囲内になっても、所定の時間は前記音声入力を受け付ける、請求項２または３に記載の電子機器。
【請求項１２】
ディスプレイを備え、
前記コントローラは、
前記ディスプレイの画面が点灯している間、前記音声入力を受け付ける。
請求項１から１１のいずれか一項に記載の電子機器。
【請求項１３】
前記コントローラは、
入力された音声に含まれる第１音声コマンドを認識すると、当該第１音声コマンドに対応する処理を実行する、
請求項１２に記載の電子機器。
【請求項１４】
前記コントローラは、
入力された音声に含まれる第１音声コマンドを認識すると、自機にかかった機能の制限を解除する、
請求項１３に記載の電子機器。
【請求項１５】
前記コントローラは、
前記第１音声コマンドを認識すると、当該第１音声コマンドを含む前記入力された音声に含まれる特徴量とあらかじめ登録されているユーザの音声の特徴量とを照合し、
前記第１音声コマンドがユーザによって発声されたものだと判定すると、前記機能の制限を解除する、
請求項１４に記載の電子機器。
【請求項１６】
前記コントローラは、
前記機能の制限を解除してから所定の時間は、第２音声コマンドを受け付ける、
請求項１５に記載の電子機器。
【請求項１７】
センサと、音声入力部と、コントローラとを備える電子機器の制御方法であって、
前記センサの検出結果から自機に対する接触操作が不可能であると判定するステップと、前記音声入力部により音声入力の受け付けを開始するステップとを含む、
制御方法。
【請求項１８】
センサと、音声入力部と、コントローラとを備える電子機器に、
前記センサの検出結果から自機に対する接触操作が不可能であると判定するステップと、前記音声入力部により音声入力の受け付けを開始するステップとを実行させる、
コンピュータプログラム。
【発明の詳細な説明】
【技術分野】
【０００１】
本出願は、利用者に情報を提供する電子機器に関する。
【背景技術】
【０００２】
従来、接触を検出するタッチセンサを備えた電子機器が開示されている（下記特許文献１参照）。
【０００３】
また例えば、指紋センサを備えた電子機器が開示されている（下記特許文献２参照）。
【先行技術文献】
【特許文献】
【０００４】
【特許文献１】特開２０１６−２１２６０５
【特許文献２】特開２０１６−１４３０６９
【発明の概要】
【発明が解決しようとする課題】
【０００５】
ユーザは接触操作によって機器を操作ができないことがある。
【０００６】
本出願の目的は、接触操作が困難な場合の操作性を向上させる電子機器を提供することである。
【課題を解決するための手段】
【０００７】
１つの態様に係る電子機器は、センサと、音声入力部と、コントローラとを備え、前記コントローラは、前記センサの検出結果から自機に対する接触操作が不可能であると判定した場合、前記音声入力部により音声入力の受け付けを開始する。
【０００８】
１つの態様に係る制御方法は、センサと、音声入力部と、コントローラとを備える電子機器の制御方法であって、前記センサの検出結果から自機に対する接触操作が不可能であると判定するステップと、前記音声入力部により音声入力の受け付けを開始するステップとを含む。
【０００９】
１つの態様に係る制御プログラムは、センサと、音声入力部と、コントローラとを備える電子機器に、前記センサの検出結果から自機に対する接触操作が不可能であると判定するステップと、前記音声入力部により音声入力の受け付けを開始するステップとを実行させる。
【発明の効果】
【００１０】
接触操作が困難な場合の操作性を向上させる電子機器を提供することができる。
【図面の簡単な説明】
【００１１】
【図１】実施形態に係る電子機器の外観図である。
【図２】実施形態に係る電子機器の機能構成を示すブロック図である。
【図３】実施形態に係る電子機器に表示される画面の例を示すイメージ図である。
【図４】音声コマンドと音声コマンドに基づいて実行される処理とを対応付けて示す図である。
【図５】実施形態に係る電子機器の動作の例を示すイメージ図である。
【図６】実施形態に係る電子機器が行う制御の例を示すフローチャートである。
【発明を実施するための形態】
【００１２】
本出願に係る実施形態について、図面を参照しつつ詳細に説明する。ただし、以下の実施の形態によって本出願が限定されるものではない。また、以下の説明における構成要素には、当業者が容易に想定できるものおよび実質的に同一のものなど、いわゆる均等の範囲のものが含まれる。なお、図面の説明については同一要素には同一符号を付し、重複する説明を省略することがある。
【００１３】
以下に説明する本出願の実施形態に係る電子機器１は、例えば、いわゆるスマートフォンのような端末とすることができる。しかしながら、本出願の実施形態に係る電子機器１はスマートフォンに限定されるものではない。電子機器１は、例えばタブレット、パーソナルコンピュータ、車載電子機器などであってもよい。
【００１４】
図１は、本実施形態に係る電子機器１の外観図である。図１に示すように、電子機器１は、音声入力部としてのマイク１１と、音声出力部としてのスピーカ１２と、タッチパネル１３と指紋センサ１４とを備える。
【００１５】
マイク１１は、電子機器１への入力を受け付ける入力手段のうちの１つである。マイク１１は、周囲の音声を集音する。
【００１６】
スピーカ１２は、電子機器１から出力を行う出力手段の１つである。スピーカ１２は、電話の音声や各種プログラムの情報等を音声で出力する。
【００１７】
タッチパネル１３は、タッチセンサ１３１とディスプレイ１３２とを備える。
【００１８】
タッチセンサ１３１は、電子機器１への入力を受け付ける入力手段のうちの１つである。タッチセンサ１３１は、ユーザの指、スタイラス等の接触を検出する。接触を検出する方法としては、例えば抵抗膜方式や静電容量方式があるが、任意の方式でよい。
【００１９】
ディスプレイ１３２は、電子機器１から出力を行う出力手段の１つである。ディスプレイ１３２は、文字、画像、記号、図形等のオブジェクトを画面上に表示する。ディスプレイ１３２には、例えば液晶ディスプレイ、有機ＥＬ（Ｅｌｅｃｔｒｏ  Ｌｕｍｉｎｅｓｃｅｎｃｅ）ディスプレイが用いられる。
【００２０】
図１のタッチパネル１３において、ディスプレイ１３２はタッチセンサ１３１と重なるように設けられており、ディスプレイ１３２の表示領域はタッチセンサ１３１と重複しているが、本実施形態はこれに限定されない。ディスプレイ１３２およびタッチセンサ１３１は、例えば、並べて配置されてもよいし、離して配置されてもよい。ディスプレイ１３２とタッチセンサ１３１とが重複する場合、ディスプレイ１３２の１または複数の辺は、タッチセンサ１３１のいずれの辺とも沿っていなくてもよい。
【００２１】
指紋センサ１４は、電子機器１への入力を受け付ける入力手段のうちの１つである。指紋センサ１４は、ユーザの指の接触および指の指紋を検出する。ユーザの指の接触および指の指紋を検出する方法としては、静電容量方式や電界検知式があるが、任意の方式でよい。
【００２２】
続いて、図２を参照しながら、電子機器１に表示される画面の例について説明する。図２は電子機器１のディスプレイ１３２に表示される画面のイメージ図である。
【００２３】
図２は、電子機器１のロック画面の一例である。携帯電話機１のディスプレイ１３２が消灯状態から点灯すると、ディスプレイ１３２には図２−ａに示すスクリーンロック画面が表示される。スクリーンロック画面３０において、所定のタッチ操作を行うと、スクリーンロック状態が解除され、ディスプレイ１３２には図２−ｂに示すセキュリティロック画面４０が表示される。セキュリティロック画面４０では、例えば、解除操作として暗証番号の入力がユーザに求められる。そして、あらかじめ登録された暗証番号が入力された場合、セキュリティロック状態が解除される。なお、消灯状態でセキュリティロック状態が有効にされないように設定してある場合、スクリーンロック状態が解除されても、セキュリティロック画面は表示されない。
【００２４】
図２−ｃは、ホーム画面の一例を示している。ホーム画面５０は、ディスプレイ１３２に表示される。ホーム画面５０は、電子機器１にインストールされているアプリケーションのうち、どのアプリケーションを実行するかをユーザに選択させる画面である。電子機器１は、ホーム画面５０にアイコンを配置することができる。図２−ｃに示すホーム画面５０には、複数のアイコン６０が配置され、それぞれのアイコン６０は、電子機器１にインストールされているアプリケーションとあらかじめ対応付けられている。アイコン６０は、画像と文字列を含む。アイコン６０は、画像に代えて、記号または図形を含んでもよい。また、アイコン６０は、画像または文字列のいずれか一方を含まなくてもよい。
【００２５】
上記のセキュリティロック状態が解除されると、例えば、ホーム画面５０がディスプレイ１３２に表示される。また、例えば、セキュリティロックが解除された状態においてフォアグラウンドでアプリケーションが実行され、当該アプリケーションを実行したままスクリーンロックおよびセキュリティロックがかかった場合は、その後セキュリティロック状態が解除されると、当該アプリケーションの実行画面がディスプレイ１３２に表示される。
【００２６】
電子機器１において、セキュリティロック状態の解除は、指紋センサ１４を利用したユーザの指紋認証によって行ってもよい。指紋認証によってセキュリティロック状態を解除する場合は、図２−ｂに示すセキュリティロック画面は表示されない。ディスプレイ１３２が消灯している時に指紋センサ１４によってユーザの指紋認証を行うと、例えば、ディスプレイ１３２は消灯状態から図２−ｃに示すホーム画面５０に遷移する。また、例えば、ディスプレイ１３２は消灯状態から図２−ａに示すスクリーンロック画面３０に遷移した後、図２−ｃに示すホーム画面５０に遷移してもよい。
【００２７】
続いて、図３を参照しながら、電子機器１の機能的な構成について説明する。図３は、電子機器１の機能構成を示すブロック図である。図３に示すように、電子機器１は、音声入力部１１１と、音声出力部１２１と、タッチセンサ１３１と、ディスプレイ１３２と、指紋センサ１４と、通信部２１と、ストレージ２２と、センサ２３と、コントローラ２４とを備える。
【００２８】
音声入力部１１１は、入力を受け付けた音声に対応する信号をコントローラ２４に入力する。音声入力部１１１は、上記のマイク１１を含む。また、音声入力部１１１は、外部のマイクを接続可能な入力インターフェイスであってもよい。外部のマイクは無線または有線で接続される。入力インターフェイスに接続されるマイクは、例えば電子機器に接続可能なイヤホン等に備えられるマイクである。
【００２９】
音声出力部１２１は、コントローラ２４から入力された信号に基づいて、音声を出力する。音声出力部１２１は、上記のスピーカ１２を含む。また、音声出力部１２１は、外部のスピーカを接続可能な出力インターフェイスであってもよい。外部のスピーカは無線または有線で接続される。出力インターフェイスに接続されるスピーカは、例えば電子機器に接続可能なイヤホン等に備えられるスピーカである。
【００３０】
タッチセンサ１３１は、指などの接触を検出し、検出された接触に対応する信号をコントローラ２４に入力する。以下、対応する信号がコントローラ２４に入力された場合の接触を接触操作とよぶ。
【００３１】
ディスプレイ１３２は、コントローラ２４から入力された信号に基づいて、文字、画像、記号、図形等のオブジェクトを画面上に表示する。
【００３２】
通信部２１は、無線により通信する。通信部２１によってサポートされる無線通信規格には、例えば、２Ｇ、３Ｇ、４Ｇ等のセルラーフォンの通信規格や、近距離無線の通信規格などがある。セルラーフォンの通信規格としては、例えば、ＬＴＥ（Ｌｏｎｇ  Ｔｅｒｍ  Ｅｖｏｌｕｔｉｏｎ）、Ｗ−ＣＤＭＡ（Ｗｉｄｅｂａｎｄ  Ｃｏｄｅ  Ｄｉｖｉｓｉｏｎ  Ｍｕｌｔｉｐｌｅ  Ａｃｃｅｓｓ）、ＷｉＭＡＸ（Ｗｏｒｌｄｗｉｄｅ  Ｉｎｔｅｒｏｐｅｒａｂｉｌｉｔｙ  ｆｏｒ  Ｍｉｃｒｏｗａｖｅ  Ａｃｃｅｓｓ）、ＣＤＭＡ２０００、ＰＤＣ（Ｐｅｒｓｏｎａｌ  Ｄｉｇｉｔａｌ  Ｃｅｌｌｕｌａｒ）、ＧＳＭ（登録商標）（Ｇｌｏｂａｌ  Ｓｙｓｔｅｍ  ｆｏｒ  Ｍｏｂｉｌｅ  Ｃｏｍｍｕｎｉｃａｔｉｏｎｓ）、ＰＨＳ（Ｐｅｒｓｏｎａｌ  Ｈａｎｄｙ−ｐｈｏｎｅ  Ｓｙｓｔｅｍ）等がある。近距離無線の通信規格としては、例えば、ＩＥＥＥ８０２．１１、Ｂｌｕｅｔｏｏｔｈ（登録商標）、ＩｒＤＡ（Ｉｎｆｒａｒｅｄ  Ｄａｔａ  Ａｓｓｏｃｉａｔｉｏｎ）、ＮＦＣ（Ｎｅａｒ  Ｆｉｅｌｄ  Ｃｏｍｍｕｎｉｃａｔｉｏｎ）、ＷＰＡＮ（Ｗｉｒｅｌｅｓｓ  Ｐｅｒｓｏｎａｌ  Ａｒｅａ  Ｎｅｔｗｏｒｋ）等がある。ＷＰＡＮの通信規格には、例えば、ＺｉｇＢｅｅ（登録商標）がある。通信部２１は、セルラーフォンの通信規格により無線通信を行う場合、基地局によって割り当てられるチャネルを介し、基地局との間で無線ネットワークを確立し、基地局との間で電話通信及び情報通信を行う。また、通信部２１は、Ｗｉ−Ｆｉ（登録商標）に準拠したＡＰ（Ａｃｃｅｓｓ  Ｐｏｉｎｔ）に接続することで、ＡＰを介して情報通信を行うことができる。
【００３３】
ストレージ２２は、プログラムおよびデータを記憶する。ストレージ２２は、コントローラ２４の処理結果を一時的に記憶する作業領域としても利用される。ストレージ２２は、半導体記憶媒体、および磁気記憶媒体等の任意の非一過的（ｎｏｎ−ｔｒａｎｓｉｔｏｒｙ）な記憶媒体を含んでよい。また、ストレージ２２は、複数の種類の記憶媒体を含んでよい。また、ストレージ２２は、メモリカード、光ディスク、または光磁気ディスク等の可搬の記憶媒体と、記憶媒体の読み取り装置との組み合わせを含んでよい。また、ストレージ２２は、ＲＡＭ（Ｒａｎｄｏｍ  Ａｃｃｅｓｓ  Ｍｅｍｏｒｙ）等の一時的な記憶領域として利用される記憶デバイスを含んでよい。ストレージ２２に記憶されるプログラムには、フォアグランドまたはバックグランドで実行されるアプリケーションと、アプリケーションの動作を支援する制御プログラムとが含まれる。
【００３４】
ストレージ２２には、単語辞書データが記憶される。単語辞書データには、音声認識処理において認識対象とする単語や文字列とその読み方が記憶される。
【００３５】
ストレージ２２には、音響モデルが記憶される。音響モデルは、音声認識する音声の音素の音響的な特徴が記述されたデータである。音響モデルには、例えば、隠れマルコフモデル（Ｈｉｄｄｅｎ  Ｍａｒｋｏｖ  Ｍｏｄｅｌ）などを用いることができる。
【００３６】
ストレージ２２には、言語モデルが記憶される。言語モデルは、音素の並び方に関する制約、すなわち単語列に対する確率分布が記述されたデータである。
【００３７】
ストレージ２２には、言語処理データが記憶される。言語処理データは、所定の文字列とコントローラ２４によって実行され得る所定の処理とが対応付けられたデータである。
【００３８】
いくつかの実施形態において、ストレージ２２には、ユーザの指紋画像が記憶される。
【００３９】
また、いくつかの実施形態において、ストレージ２２には、ユーザの声紋情報が記憶される。
【００４０】
センサ２３は、自機の周囲の状態の変化を検出し、検出結果をコントローラ２４に入力する。センサ２３は、気圧センサ、湿度センサ、温度センサを含んでいてよい。気圧センサは、自機の周囲の気圧の変化を検出する。湿度センサは、自機の周囲の湿度の変化を検出する。温度センサは、周囲の温度の変化を検出する。
【００４１】
指紋センサ１４は、ユーザの指などの接触および当該指の指紋を検出して、検出結果をコントローラ２４に入力する。指紋を検出する方法としては、例えば、静電容量式や電界検知式がある。
【００４２】
コントローラ２４は、演算処理装置である。演算処理装置は、例えば、ＣＰＵ（Ｃｅｎｔｒａｌ  Ｐｒｏｃｅｓｓｉｎｇ  Ｕｎｉｔ）、ＳｏＣ（Ｓｙｓｔｅｍ−ｏｎ−ａ−ｃｈｉｐ）、ＭＣＵ（Ｍｉｃｒｏ  Ｃｏｎｔｒｏｌ  Ｕｎｉｔ）、ＦＰＧＡ（Ｆｉｅｌｄ−Ｐｒｏｇｒａｍｍａｂｌｅ  Ｇａｔｅ  Ａｒｒａｙ）、およびコプロセッサを含むが、これらに限定されない。コントローラ２４は、電子機器１の動作を統括的に制御して各種の機能を実現する。
【００４３】
コントローラ２４は、タッチセンサ１３１が検出した接触操作等に応じて入力される信号に基づいて、電子機器１の機能の実行や設定の変更などの各種制御を実行する。
【００４４】
コントローラ２４は、音声入力部１１１に入力された音声信号を解析することにより、音声を認識（音声認識）する。音声認識処理の一例としては、入力された音声信号から特定した音響特徴と音響モデルとを比較して類似度を判断することに加えて、言語モデルや単語辞書データを用いて発声内容を示すテキスト情報を得る手法が挙げられる。ただし、当該手法は一例であり、発声内容を示すテキスト情報が特定できれば、音声認識処理の手法はこれに限定されない。
【００４５】
コントローラ２４は、音声を認識すると、認識した文字列と言語処理データとを照合する。コントローラ２４は、照合した結果、認識した文字列と言語処理データの文字列とが一致すると、当該一致した文字列に対応する所定の処理を実行する。
【００４６】
コントローラ２４は、タッチセンサ１３１、指紋センサ１４、センサ２３の検出結果の少なくとも１つに基づいて、自機に対する接触操作が可能かを判定する。
【００４７】
コントローラ２４は、タッチセンサ１３１、指紋センサ１４、センサ２３の検出結果の少なくとも１つに基づいて、自機に対する接触操作が不可能であると判定すると、音声入力部１１１によって音声入力の受け付けを開始する。自機に対する接触操作とは、例えば、タッチセンサ１３１に対する操作や指紋センサ１４に対する操作である。なお、電子機器１は、自機に対する接触自体は検出できても、コントローラに所定の信号が入力される接触操作を検出できないことがある。このような場合でも、コントローラ２４は、自機に対する接触操作が不可能であると判定する。
【００４８】
いくつかの実施形態において、コントローラ２４は、センサ２３の１つである気圧センサの検出した値が一定時間内に所定の値よりも大きく変化すると、自機が水中にあると判定する。この時、コントローラ２４は、自機に対する接触操作が不可能であるとして音声入力の受け付けを開始する。コントローラ２４は、気圧センサの検出した値の正の変化量が所定の値よりも大きくなった場合に、音声入力の受け付けを開始してよい。
【００４９】
また、いくつかの実施形態において、コントローラ２４は、センサ２３の１つである湿度センサおよび温度センサの検出した値が一定時間内に所定の値よりも大きく変化すると、自機が浴室内にあると判定する。この時、コントローラ２４は、自機に対する接触操作が不可能であるとして音声入力の受け付けを開始する。コントローラ２４は、湿度センサおよび温度センサの検出した値の正の変化量が所定の値よりも大きくなった場合に、音声入力の受け付けを開始してよい。
【００５０】
また、いくつかの実施形態において、コントローラ２４は、タッチセンサ１３１が所定の領域よりも広い領域で静電容量の変化を検出すると、自機が水に濡れているまたは水中にあると判定する。この時、コントローラ２４は、自機に対する接触操作が不可能であるとして音声入力の受け付けを開始する。
【００５１】
また、いくつかの実施形態において、コントローラ２４は、タッチセンサ１３１が静電容量の所定の変化を検出すると、ユーザの指が濡れているか、または自機が水に濡れているもしくは水中にあると判定する。この時、コントローラ２４は、自機に対する接触操作が不可能であるとして音声入力の受け付けを開始する。
【００５２】
また、いくつかの実施形態において、コントローラ２４は、タッチセンサ１３１が静電容量の変化を検出したときに、当該静電容量の変化に対応する処理を実行できないと、ユーザの指が濡れているか、または自機が水に濡れているもしくは水中にあると判定する。この時、コントローラ２４は、自機に対する接触操作が不可能であるとして音声入力の受け付けを開始する。
【００５３】
また、いくつかの実施形態において、コントローラ２４は、指紋センサ１４が静電容量の所定の変化を検出すると、ユーザの指が濡れているか、または自機が水に濡れているもしくは水中にあると判定する。この時、コントローラ２４は、自機に対する接触操作が不可能であるとして音声入力の受け付けを開始する。
【００５４】
また、いくつかの実施形態において、コントローラ２４は、指紋センサ１４によって検出される指紋を画像に変換する。例えば、静電容量方式では、静電容量の大きさの分布が指紋画像に変換される。また、電圧検知式では、電界強度の強度分布が指紋画像に変換される。コントローラ２４は、指紋センサ１４によって検出される指紋の画像とユーザの指紋画像との特徴点が類似するか照合を行う（指紋認証）。コントローラ２４は、照合を実行しようとする際に、指紋センサが指紋を検出できないと、ユーザの指が濡れているか、または自機が水に濡れているもしくは水中にあると判定する。この時、コントローラ２４は、自機に対する接触操作が不可能であるとして音声入力の受け付けを開始する。
【００５５】
また、いくつかの実施形態において、コントローラ２４は、気圧センサが所定の値よりも大きな値を検出した後の検出結果が、音声入力を受け付ける以前に検出した検出結果から所定の値の範囲内になっても、所定の時間は音声入力を受け付ける。
【００５６】
また、いくつかの実施形態において、コントローラ２４は、湿度センサおよび温度センサが所定の値よりも大きな値を検出した後の検出結果が、音声入力を受け付ける以前に検出した検出結果から所定の値の範囲内になっても、所定の時間は音声入力を受け付ける。
【００５７】
また、いくつかの実施形態において、コントローラ２４は、ディスプレイ１３２の画面が点灯している時にのみ、音声入力を受け付ける。
【００５８】
また、いくつかの実施形態において、コントローラ２４は、入力された音声に含まれる第１音声コマンドを認識すると、当該第１音声コマンドに対応する処理を実行する。
【００５９】
また、いくつかの実施形態において、コントローラ２４は、入力された音声に含まれる第１音声コマンドを認識すると、自機にかかった機能の制限を解除する。自機にかかった制限とは、例えば、上記のセキュリティロックである。
【００６０】
また、いくつかの実施形態において、コントローラ２４は、第１音声コマンドを認識すると、当該第１音声コマンドを含む前記入力された音声に含まれる特徴量とあらかじめ登録されているユーザの声の特徴量とを照合する（声紋認証）。コントローラ２４は、照合した結果、第１音声コマンドがユーザによって発声されたものだと判定すると、機能の制限を解除する。なお、音声認識処理と声紋認証とは、どちらが先に実行されてもよい。音声認識処理が先に実行される場合、コントローラ２４は、第１音声コマンドであると認識した音声に含まれる特徴量のみを声紋認証に用いてもよい。
【００６１】
また、いくつかの実施形態において、コントローラ２４は、機能の制限を解除してから所定の時間は、第２音声コマンドを受け付ける。
【００６２】
続いて、図４を参照して、第１音声コマンドとそれに対応する処理および第２音声コマンドとそれに対応する処理について説明する。図４は、音声コマンドと当該音声コマンドに対応する処理とをそれぞれ対応付けて例示したテーブルである。コントローラ２４は、図４に示すような音声コマンドを認識すると、当該音声コマンドに対応する処理を実行する。
【００６３】
所定の音声コマンドは第１音声コマンドにも第２音声コマンドにもなり得る。例えば、図に示すように、「カレンダーを起動」という音声コマンドは第１音声コマンドとしても第２音声コマンドとしても使用できる。この場合、１つの音声コマンドは第１音声コマンドと第２音声コマンドとのいずれかとしてしか使用できないようにしてもよい。
【００６４】
第１音声コマンドと第２音声コマンドの組合せは限られる。例えば、第１音声コマンドが「ホーム」だった場合、第２音声コマンドとしては、図４−ｂに示す全てのコマンドが使用可能である。しかし、例えば、第１音声コマンドが「〇〇に電話」だった場合、音声入力の受け付けは終了し、第２音声コマンドを利用することはできない。また、例えば、第１音声コマンドが「カレンダーを起動」だった場合、第２音声コマンドは「予定」に限られる。
【００６５】
続いて、図５を参照しながら、電子機器１の動作について説明する。図５は、ユーザの操作とそれに対応して遷移する電子機器１の画面を示すイメージ図である。
【００６６】
ユーザは、スクリーンロックおよびセキュリティロックがかかった電子機器１に対して、指紋センサ１４を用いた指紋認証によるスクリーンロックおよびセキュリティロックの解除を試みる（ステップＳ１１）。この時、ディスプレイ１３２にはスクリーンロック画面３０が表示されている。
【００６７】
指紋センサ１４は、例えば、ユーザの手が濡れている場合、ユーザの指紋を検出できないことがある。この時、コントローラ２４は、ディスプレイ１３２によってユーザに音声入力を促す旨の表示を行う（ステップＳ１２）。
【００６８】
ユーザは、「ホーム」という音声を電子機器１に向けて発声する（ステップＳ１３）。
【００６９】
コントローラ２４は、音声入力部１１１を介して「ホーム」という音声を認識し、ディスプレイ１３２の表示をホーム画面５０へと遷移させる（ステップＳ１４）。
【００７０】
ユーザの手が濡れている場合にユーザの指紋を検出できないこと、すなわち、コントローラ２４が接触操作を不可能であると判定することは、指紋センサ１４が静電容量の所定の変化を検出したか否かを基準に行われる。例えば、指紋センサ１４が静電容量方式の場合、指以外のものが指紋センサ１４に触れると、静電容量の値が指の接触時とは異なって変化する。具体的には、指紋センサ１４が水に濡れる（水中にある）と、指が触れた時と比較して凹凸なく、検出した領域全体の静電容量が変化する。これにより、コントローラ２４は、電子機器１に対する接触操作が不可能であると判定できる。
【００７１】
図５に示す動作によれば、コントローラ２４は、指紋センサ１４によって検出される指紋の画像とあらかじめ登録されている指紋の画像との照合を実行しようとする際に、指紋センサ１４が指紋を検出できないため、ユーザの指が濡れていると判定する。すなわち、コントローラ２４は、指紋センサ１４の検出結果から自機に対する接触操作が不可能であると判定する。この時、コントローラ２４は、音声入力部１１１により音声入力の受け付けを開始する。コントローラ２４は、音声入力を受け付けてる間に、第１音声コマンドを認識すると、当該第１音声コマンドに対応する処理（セキュリティロック状態を解除し、ホーム画面５０に遷移する）を実行する。以上の動作によれば、接触操作が困難な場合に、電子機器１の操作性が向上する。
【００７２】
なお、図５において、音声入力を受けつける期間は、ディスプレイ１３２が点灯している間のみとしてよい。これにより、ユーザが所望する間のみ音声入力を行わせ、音声の誤認識を軽減できる。
【００７３】
また、図５において、第１音声コマンドであると認識した音声の特徴量とユーザの声の特徴量とを照合し、第１音声コマンドがユーザによって発声されたものだと判定した場合のみ、当該第１音声コマンドに対応する処理を実行してもよい。これにより、接触操作が困難な場合に電子機器１の操作性を向上させつつ、電子機器１のセキュリティを高めることができる。
【００７４】
続いて、図６を参照しながら、電子機器１によって実行される制御について説明する。図６は、電子機器１の制御の例を示すフローチャートである。図６における電子機器１の制御は、図５における電子機器１の動作に対応する。
【００７５】
コントローラ２４は、接触操作が可能かを判定する（ステップＳ１０１）。コントローラ２４は、接触操作が可能だと判定すると、（ステップＳ１０１／Ｙｅｓ）、処理を終了する。コントローラ２４は、接触操作が不可能だと判定すると（ステップＳ１０１／Ｎｏ）、音声入力の受け付けを開始する（ステップＳ１０２）。接触操作が不可能か否かは、図５において、指紋センサ１４によって検出される指紋の画像とユーザの指紋画像との照合を実行しようとする際に、指紋センサ１４が指紋を検出できたか否かで判定される。
【００７６】
コントローラ２４は、音声が入力されたかを判定する（ステップＳ１０３）。コントローラ２４は、音声が入力されていないと判定した場合（ステップＳ１０３／Ｎｏ）、ステップＳ１０３を繰り返す。コントローラ２４は、音声が入力されたと判定すると（ステップＳ１０３／Ｙｅｓ）、ステップＳ１０４に進む。
【００７７】
コントローラ２４は、入力された音声が第１音声コマンドかを判定する（ステップＳ１０４）。コントローラ２４は入力された音声が第１音声コマンドでないと判定した場合（ステップＳ１０４／Ｎｏ）、処理をステップＳ１０３に戻す。コントローラ２４は、入力された音声が第１音声コマンドであると判定した場合（ステップＳ１０４／Ｙｅｓ）、ステップＳ１０５に進む。第１音声コマンドは、図５において「ホーム」という音声である。
【００７８】
コントローラ２４は、第１音声コマンドに対応する処理を実行する（ステップＳ１０５）。第１音声コマンドに対応する処理は、図５において、セキュリティロック状態を解除し、ディスプレイ１３２の表示をホーム画面５０に遷移させることである。
【００７９】
また、ステップＳ１０１における、接触操作が不可能かを判定する処理は、センサ２３の１つである気圧センサの検出結果が一定時間内に所定の値よりも大きく変化したかを基準に行われてもよい。例えば、電子機器１が水中にあると、気圧センサの検出する値は地上よりも高くなる。これにより、コントローラ２４は、指紋センサ１４またはタッチセンサ１３１に対する操作が不可能であると判定する。
【００８０】
また、ステップＳ１０１における、接触操作が不可能かを判定する処理は、センサ２３の１つである湿度センサおよび温度センサの検出結果が一定時間内に所定の値よりも大きく変化したかを基準に行われてもよい。例えば、電子機器１が浴室内にあると、湿度および温度は通常の室内よりも高くなる。これにより、コントローラ２４は、指紋センサ１４またはタッチセンサ１３１に対する操作が不可能であると判定する。
【００８１】
また、コントローラは、ステップＳ１０１における、接触操作が不可能かを判定する処理は、タッチセンサ１３１が所定の領域よりも広い領域で静電容量の変化を検出したかを基準に行われてもよい。例えば、電子機器１が水中にあると、指で操作する時よりも大きな領域の静電容量が変化する。これにより、コントローラ２４は、指紋センサ１４またはタッチセンサ１３１に対する操作が不可能であると判定する。
【００８２】
また、ステップＳ１０１における、接触操作が不可能かを判定する処理は、タッチセンサ１３１が静電容量の所定の変化を検出したか否かを基準に行われてもよい。例えば、電子機器１が水に濡れていると、タッチセンサ１３１上の複数の領域において静電容量が変化する。この時、例えば、ディスプレイ１３２に表示される、マルチタッチに対する処理が割り当てられていない画面において、複数の領域の静電容量が変化することがある。これにより、コントローラ２４は、タッチセンサ１３１に対する操作が不可能であると判定してよい。
【００８３】
また、ステップＳ１０１における、接触操作が不可能かを判定する処理は、タッチセンサ１３１が静電容量の変化を検出したときに、コントローラ２４が、当該静電容量の変化に対応する処理を実行できるか否かを基準に行われてもよい。例えば、ディスプレイ１３２が水に濡れていると、水に濡れた部分の静電容量が変化するため、実際に接触操作がなされることにより静電容量が変化しても、当該接触操作（静電容量の変化）に対応する処理を正しく実行することができないことがあり得る。これにより、コントローラ２４は、タッチセンサ１３１に対する操作が不可能であると判定してよい。
【００８４】
ステップＳ１０１において、接触操作が不可能かを判定する処理が、気圧センサ、または湿度センサおよび温度センサの検出結果が所定の値よりも大きくなったかを基準に行われた場合、上記のセンサが所定の値よりも大きな値を検出した後も、検出は継続してよい。その際、コントローラ２４は、所定の値よりも大きな値を検出した後の検出結果が、音声入力を受け付ける以前に検出した検出結果から所定の値の範囲内になっても、所定の時間は音声入力を受け付けてよい。例えば、電子機器１を携帯して水中に入ったユーザが水中から上がってから、または、電子機器１を携帯して入浴したユーザが浴室から出てから、数分の間は電子機器１が濡れたままのことがあり得る。このような時、センサの検出する値が大きな値を検出する以前の値に戻っても、所定の時間は音声入力を受け付けることにより、ユーザは継続して音声による機器操作ができ、電子機器１の操作性が向上する。
【００８５】
また、ステップＳ１０１の後に、ディスプレイ１３２が点灯しているかを判定する処理を追加してもよい。すなわち、上述したように、音声入力を受けつける期間は、ディスプレイ１３２が点灯している間のみとしてよい。
【００８６】
また、図６において、ステップＳ１０５の後に、音声が入力されたかを判定するステップ、および当該音声が第２音声コマンドかを判定するステップ、および当該音声が第２音声コマンドだった場合に第２音声コマンドに対応する処理を実行するステップを追加してもよい。これにより、接触操作が困難な場合に、音声によってより複雑な処理の実行が可能になり、電子機器１の操作性が向上する。
【００８７】
以上、添付の請求項に係る技術を完全かつ明瞭に開示するために特徴的な実施形態に関し記載してきた。しかし、添付の請求項は上記実施形態に限定されるべきものではなく、本明細書に示した基礎的事項の範囲内で、当該技術分野の当業者が創作しうる全ての変形例および代替可能な構成を具現化するように構成されるべきである。
【符号の説明】
【００８８】
１  電子機器
１１  マイク
１２  スピーカ
１３  タッチパネル
１４  指紋センサ
１１１  音声入力部
１２１  音声出力部
１３１  タッチセンサ
１３２  ディスプレイ
２１  通信部
２２  ストレージ
２３  センサ
２４  コントローラ
【図１】
2018182616.tif 000003
【図２】
2018182616.tif 000004
【図３】
2018182616.tif 000005
【図４】
2018182616.tif 000006
【図５】
2018182616.tif 000007
【図６】
2018182616.tif 000008