(57)【要約】【課題】対話型のインタフェースを介して行われる処理を改善すること。【解決手段】１つの態様において、電子機器（例えば、スマートフォン１）は、マイクと、複数の項目に対応するデータを含む電話帳データを記憶するストレージと、前記マイクを介して音声で入力される文字列に対応するレコードを、前記電話帳データから抽出し、抽出したレコードに含まれる項目を報知するコントローラとを有する。例えば、電子機器（例えば、スマートフォン１）は、抽出したレコードに含まれる項目に属する小項目がある場合には、小項目を報知する処理を実現する。コントローラは、自機（例えば、スマートフォン１）を通じてレコードの対象に接触を図るために用いられる項目又は小項目を報知する処理を実現する。【選択図】図１
2014225798.tif 000002
【特許請求の範囲】
【請求項１】
マイクと、
複数の項目に対応するデータを含む電話帳データを記憶するストレージと、
前記マイクを介して音声で入力される文字列に対応するレコードを、前記電話帳データから抽出し、抽出したレコードに含まれる項目を報知するコントローラと
を有する電子機器。
【請求項２】
前記コントローラは、自機を通じて前記レコードの対象に接触を図るために用いられる前記項目を報知する請求項１に記載の電子機器。
【請求項３】
前記コントローラは、前記項目に属する複数の小項目がある場合に、当該小項目を報知する請求項１又は２に記載の電子機器。
【請求項４】
前記コントローラは、前記項目を報知した後に、報知した当該項目が前記マイクを介して音声で入力される文字列と一致すると、前記報知した項目を前記レコードに関する処理として受け付ける請求項１から４のいずれかに記載の電子機器。
【請求項５】
マイクを有する電子機器を制御する制御方法であって、
複数の項目に対応するデータを含む電話帳データを記憶するストレージから、前記マイクを介して音声で入力される文字列に対応するレコードを抽出するステップと、
抽出したレコードに含まれる項目を報知するステップと
を含む制御方法。
【請求項６】
マイクを有する電子機器に、
複数の項目に対応するデータを含む電話帳データを記憶するストレージから、前記マイクを介して音声で入力される文字列に対応するレコードを抽出するステップと、
抽出したレコードに含まれる項目を報知するステップと
を実行させる制御プログラム。
【発明の詳細な説明】
【技術分野】
【０００１】
本出願は、電子機器、制御方法、及び制御プログラムに関する。
【背景技術】
【０００２】
タッチスクリーンを備えるタッチスクリーンデバイスが知られている。タッチスクリーンデバイスは、例えば、携帯電話、スマートフォン及びタブレットなどの電子機器を含むが、これらに限定されない。タッチスクリーンデバイスは、タッチスクリーンを介して指、ペン、又はスタイラスペンのジェスチャを検出する。タッチスクリーンデバイスは、検出したジェスチャに従って動作する。検出したジェスチャに従った動作の例は、例えば、特許文献１に記載されている。
【０００３】
タッチスクリーンデバイスの基本的な動作は、デバイスに搭載されるＯＳ（Ｏｐｅｒａｔｉｎｇ  Ｓｙｓｔｅｍ）によって実現される。タッチスクリーンデバイスに搭載されるＯＳは、例えば、Ａｎｄｒｏｉｄ（登録商標）、ＢｌａｃｋＢｅｒｒｙ（登録商標）  ＯＳ、ｉＯＳ、Ｓｙｍｂｉａｎ（登録商標）  ＯＳ、及びＷｉｎｄｏｗｓ（登録商標）  Ｐｈｏｎｅを含むが、これらに限定されない。
【０００４】
近年、上記電子機器の中に、ジェスチャによる操作だけでなく、音声入力により操作を可能にする対話型のインタフェースを備えるものが普及しはじめている。これらの電子機器は、音声により、例えば、アプリケーションの起動、インターネット検索などの操作を実現する。
【先行技術文献】
【特許文献】
【０００５】
【特許文献１】国際公開第２００８／０８６３０２号
【発明の概要】
【発明が解決しようとする課題】
【０００６】
対話型のインタフェースを備える電子機器には、対話型のインタフェースを介する処理に改善の余地がある。
【課題を解決するための手段】
【０００７】
１つの態様に係る電子機器は、マイクと、複数の項目に対応するデータを含む電話帳データを記憶するストレージと、前記マイクを介して音声で入力される文字列に対応するレコードを、前記電話帳データから抽出し、抽出したレコードに含まれる項目を報知するコントローラとを有する。
【０００８】
１つの態様に係る制御方法は、マイクを有する電子機器を制御する制御方法であって、複数の項目に対応するデータを含む電話帳データを記憶するストレージから、前記マイクを介して音声で入力される文字列に対応するレコードを抽出するステップと、抽出したレコードに含まれる項目を報知するステップとを含む。
【０００９】
１つの態様に係る制御プログラムは、マイクを有する電子機器に、複数の項目に対応するデータを含む電話帳データを記憶するストレージから、前記マイクを介して音声で入力される文字列に対応するレコードを抽出するステップと、抽出したレコードに含まれる項目を報知するステップとを実行させる。
【図面の簡単な説明】
【００１０】
【図１】図１は、実施形態に係るスマートフォンのブロック図である。
【図２】図２は、電話帳データの一例を示す図である。
【図３】図３は、マイクを介して音声で入力される文字列に対応するレコードを、電話帳データから抽出し、抽出したレコードに含まれる項目を報知する処理の一例を示す図である。
【図４】図４は、マイクを介して音声で入力される文字列に対応するレコードを、電話帳データから抽出し、抽出したレコードに含まれる小項目を報知する処理の一例を示す図である。
【図５】図５は、マイクを介して音声で入力される文字列に対応するレコードを、電話帳データから抽出できない場合の処理の一例を示す図である。
【図６】図６は、実施形態に係るスマートフォンの処理手順の一例を示すフローチャートである。
【発明を実施するための形態】
【００１１】
本出願に係る電子機器、制御方法、及び制御プログラムを実施するための実施形態を、図面を参照しつつ詳細に説明する。以下では、電子機器の一例として、スマートフォンを取り上げて説明する。
【００１２】
（実施形態）
図１を参照しながら、実施形態に係るスマートフォン１の機能的な構成について説明する。図１は、実施形態に係るスマートフォンのブロック図である。以下の説明においては、同様の構成要素に同一の符号を付すことがある。重複する説明は省略することがある。
【００１３】
図１に示すように、スマートフォン１は、タッチスクリーンディスプレイ２と、ボタン３と、照度センサ４と、近接センサ５と、通信ユニット６と、レシーバ７と、マイク８と、ストレージ９と、コントローラ１０と、スピーカ１１と、カメラ１２と、姿勢検出ユニット１５と、バイブレータ１８とを備える。
【００１４】
タッチスクリーンディスプレイ２は、ディスプレイ２Ａと、タッチスクリーン２Ｂとを有する。ディスプレイ２Ａ及びタッチスクリーン２Ｂは、例えば、重ねて配置されてもよいし、並べて配置されてもよいし、離して配置されてもよい。ディスプレイ２Ａとタッチスクリーン２Ｂとが重ねて配置される場合、例えば、ディスプレイ２Ａの１ないし複数の辺がタッチスクリーン２Ｂのいずれの辺とも沿っていなくてもよい。
【００１５】
ディスプレイ２Ａは、液晶ディスプレイ（ＬＣＤ：Ｌｉｑｕｉｄ  Ｃｒｙｓｔａｌ  Ｄｉｓｐｌａｙ）、有機ＥＬディスプレイ（ＯＥＬＤ：Ｏｒｇａｎｉｃ  Ｅｌｅｃｔｒｏ−Ｌｕｍｉｎｅｓｃｅｎｃｅ  Ｄｉｓｐｌａｙ）、又は無機ＥＬディスプレイ（ＩＥＬＤ：Ｉｎｏｒｇａｎｉｃ  Ｅｌｅｃｔｒｏ−Ｌｕｍｉｎｅｓｃｅｎｃｅ  Ｄｉｓｐｌａｙ）等の表示デバイスを備える。ディスプレイ２Ａは、文字、画像、記号、及び図形等を表示する。ディスプレイ２Ａが表示する文字、画像、記号、及び図形等を含む画面には、ロック画面と呼ばれる画面、及びホーム画面と呼ばれる画面が含まれる。ホーム画面は、デスクトップ、待受画面、アイドル画面又は標準画面と呼ばれることもある。
【００１６】
タッチスクリーン２Ｂは、タッチスクリーン２Ｂに対する指、ペン、又はスタイラスペン等の接触を検出する。タッチスクリーン２Ｂは、複数の指、ペン、又はスタイラスペン等（以下、単に「指」という）がタッチスクリーン２Ｂに接触した位置を検出することができる。タッチスクリーン２Ｂは、タッチスクリーン２Ｂ（タッチスクリーンディスプレイ２）に対する指の接触を、接触された場所のタッチスクリーンディスプレイ２上での位置とともに、コントローラ１０に通知する。
【００１７】
タッチスクリーン２Ｂの検出方式は、静電容量方式、抵抗膜方式、表面弾性波方式（又は超音波方式）、赤外線方式、電磁誘導方式、及び荷重検出方式等の任意の方式でよい。以下の説明では、説明を簡単にするため、利用者はスマートフォン１を操作するために指を用いてタッチスクリーン２Ｂに接触するものと想定する。
【００１８】
コントローラ１０（スマートフォン１）は、タッチスクリーン２Ｂにより検出された接触、接触が検出された位置、接触が検出された位置の変化、接触が検出された間隔、及び接触が検出された回数の少なくとも１つに基づいて、ジェスチャの種別を判別する。ジェスチャは、指を用いて、タッチスクリーン２Ｂ（タッチスクリーンディスプレイ２）に対して行われる操作である。コントローラ１０（スマートフォン１）が、タッチスクリーン２Ｂを介して判別するジェスチャには、例えば、タッチ、ロングタッチ、リリース、スワイプ、タップ、ダブルタップ、ロングタップ、ドラッグ、フリック、ピンチイン、及びピンチアウトが含まれるがこれらに限定されない。
【００１９】
ボタン３は、利用者からの操作入力を受け付ける。ボタン３の数は、単数であっても、複数であってもよい。
【００２０】
照度センサ４は、スマートフォン１の周囲光の照度を検出する。照度は、光の強さ、明るさ、又は輝度を示す。照度センサ４は、例えば、ディスプレイ２Ａの輝度の調整に用いられる。
【００２１】
近接センサ５は、近隣の物体の存在を非接触で検出する。近接センサ５は、磁界の変化又は超音波の反射波の帰還時間の変化等に基づいて物体の存在を検出する。近接センサ５は、例えば、ディスプレイ２Ａが顔に近づけられたことを検出する。照度センサ４及び近接センサ５は、１つのセンサとして構成されていてもよい。照度センサ４は、近接センサとして用いられてもよい。
【００２２】
通信ユニット６は、無線により通信する。通信ユニット６によってサポートされる無線通信規格には、例えば、２Ｇ、３Ｇ、４Ｇ等のセルラーフォンの通信規格と、近距離無線の通信規格がある。セルラーフォンの通信規格としては、例えば、ＬＴＥ（Ｌｏｎｇ  Ｔｅｒｍ  Ｅｖｏｌｕｔｉｏｎ）、Ｗ−ＣＤＭＡ（Ｗｉｄｅｂａｎｄ  Ｃｏｄｅ  Ｄｉｖｉｓｉｏｎ  Ｍｕｌｔｉｐｌｅ  Ａｃｃｅｓｓ）、ＷｉＭＡＸ（Ｗｏｒｌｄｗｉｄｅ  Ｉｎｔｅｒｏｐｅｒａｂｉｌｉｔｙ  ｆｏｒ  Ｍｉｃｒｏｗａｖｅ  Ａｃｃｅｓｓ）、ＣＤＭＡ２０００、ＰＤＣ（Ｐｅｒｓｏｎａｌ  Ｄｉｇｉｔａｌ  Ｃｅｌｌｕｌａｒ）、ＧＳＭ（登録商標）（Ｇｌｏｂａｌ  Ｓｙｓｔｅｍ  ｆｏｒ  Ｍｏｂｉｌｅ  Ｃｏｍｍｕｎｉｃａｔｉｏｎｓ）、ＰＨＳ（Ｐｅｒｓｏｎａｌ  Ｈａｎｄｙ−ｐｈｏｎｅ  Ｓｙｓｔｅｍ）等がある。近距離無線の通信規格としては、例えば、ＩＥＥＥ８０２．１１、Ｂｌｕｅｔｏｏｔｈ（登録商標）、ＩｒＤＡ（Ｉｎｆｒａｒｅｄ  Ｄａｔａ  Ａｓｓｏｃｉａｔｉｏｎ）、ＮＦＣ（Ｎｅａｒ  Ｆｉｅｌｄ  Ｃｏｍｍｕｎｉｃａｔｉｏｎ）、ＷＰＡＮ（Ｗｉｒｅｌｅｓｓ  Ｐｅｒｓｏｎａｌ  Ａｒｅａ  Ｎｅｔｗｏｒｋ）等がある。ＷＰＡＮの通信規格には、例えば、ＺｉｇＢｅｅ（登録商標）がある。通信ユニット６は、上述した通信規格の１つ又は複数をサポートしていてもよい。
【００２３】
通信ユニット６は、ＧＰＳ衛星からの所定の周波数帯の電波信号を受信し、受信した電波信号を復調処理して、処理後の信号をコントローラ１０に送出する。スマートフォン１は、ＧＰＳ衛星との通信機能を通信ユニット６から分散させて、通信ユニット６から独立した個別の通信部を設けてもよい。
【００２４】
レシーバ７は、音出力部である。レシーバ７は、コントローラ１０から送信される音信号を音として出力する。レシーバ７は、例えば、通話時に相手の声を出力するために用いられる。マイク８は、音入力部である。マイク８は、利用者の音声等を音信号へ変換してコントローラ１０へ送信する。
【００２５】
ストレージ９は、プログラム及びデータを記憶する。ストレージ９は、コントローラ１０の処理結果を一時的に記憶する作業領域としても利用される。ストレージ９は、半導体記憶媒体、及び磁気記憶媒体等の任意の非一過的（ｎｏｎ−ｔｒａｎｓｉｔｏｒｙ）な記憶媒体を含んでよい。ストレージ９は、複数の種類の記憶媒体を含んでよい。ストレージ９は、メモリカード、光ディスク、又は光磁気ディスク等の可搬の記憶媒体と、記憶媒体の読み取り装置との組み合わせを含んでよい。ストレージ９は、ＲＡＭ（Ｒａｎｄｏｍ  Ａｃｃｅｓｓ  Ｍｅｍｏｒｙ）等の一時的な記憶領域として利用される記憶デバイスを含んでよい。
【００２６】
ストレージ９に記憶されるプログラムには、フォアグランド又はバックグランドで実行されるアプリケーションと、アプリケーションの動作を支援する制御プログラムとが含まれる。フォアグランドで実行されるアプリケーションは、例えば、ディスプレイ２Ａに画面が表示される。制御プログラムには、例えば、ＯＳが含まれる。アプリケーション及び制御プログラムは、通信ユニット６による無線通信又は非一過的な記憶媒体を介してストレージ９にインストールされてもよい。
【００２７】
ストレージ９は、例えば、制御プログラム９Ａ、通話アプリケーション９Ｂ、ＳＭＳアプリケーション９Ｃ、Ｅメールアプリケーション９Ｄ、メモ帳アプリケーション９Ｅ、動画アプリケーション９Ｆ、ブラウザアプリケーション９Ｇ、電話帳データ９Ｙ及び設定データ９Ｚなどを記憶する。
【００２８】
制御プログラム９Ａは、スマートフォン１を稼働させるための各種制御に関する機能を提供する。制御プログラム９Ａは、対話型のインタフェース機能を提供する。対話型のインタフェース機能には、対話型のインタフェース機能の実行中であることを示す実行画面をディスプレイ２Ａに表示させる機能が含まれる。対話型のインタフェース機能には、マイク８により入力される音声を認識し、認識結果に応じて音声及び文字などで応答する機能が含まれる。
【００２９】
制御プログラム９Ａは、ユーザにより入力される音声を認識し、認識結果に基づいて処理を実行する機能を提供する。この機能には、音声の認識に成功した場合に、ストレージ９に記憶されているアプリケーションの中から、認識結果に対応するアプリケーションを自動的に実行する機能が含まれる。
【００３０】
制御プログラム９Ａは、ユーザにより入力される音声を認識し、認識結果に基づいて処理を実行できない場合に、ストレージ９に記憶されているアプリケーションの一覧を表示する機能を提供する。認識結果に基づいて処理を実行できない場合には、例えば、音声の認識に失敗した場合、あるいは、ストレージ９に記憶されているアプリケーションの中から、認識結果に対応するアプリケーションを検出できないと判定した場合が含まれる。
【００３１】
制御プログラム９Ａは、マイク８を介して音声で入力される文字列に対応するレコードを、電話帳データ９Ｙから抽出し、抽出したレコードに含まれる項目を報知するための機能を提供する。この機能に関連して、制御プログラム９Ａには、上記レコードに含まれる項目に属する複数の小項目がある場合には、当該小項目を報知する機能が含まれる。この機能に関連して、制御プログラム９Ａには、自機（スマートフォン１）を通じて上記レコードの対象に接触を図るために用いられる項目又は小項目を報知する機能が含まれる。自機を通じて上記レコードの対象に接触を図るために用いられる項目には、電話番号、メールアドレス、ＵＲＬなどが含まれる。項目は、ストレージ９に記憶されている種々のアプリケーションに対応付けられている。自機を通じて上記レコードの対象に接触を図るために用いられる小項目には、自宅、携帯、会社などの項目が含まれる。小項目は、当該小項目が属する項目が対応付けられているアプリケーションに対応付けられている。
【００３２】
その他、制御プログラム９Ａは、通信ユニット６などを制御することによって、ＬＴＥ（Ｌｏｎｇ  Ｔｅｒｍ  Ｅｖｏｌｕｔｉｏｎ）、Ｗ−ＣＤＭＡ（Ｗｉｄｅｂａｎｄ  Ｃｏｄｅ  Ｄｉｖｉｓｉｏｎ  Ｍｕｌｔｉｐｌｅ  Ａｃｃｅｓｓ）、ＷｉＭＡＸ（Ｗｏｒｌｄｗｉｄｅ  Ｉｎｔｅｒｏｐｅｒａｂｉｌｉｔｙ  ｆｏｒ  Ｍｉｃｒｏｗａｖｅ  Ａｃｃｅｓｓ）、ＣＤＭＡ２０００、ＰＤＣ（Ｐｅｒｓｏｎａｌ  Ｄｉｇｉｔａｌ  Ｃｅｌｌｕｌａｒ）、ＧＳＭ（登録商標）（Ｇｌｏｂａｌ  Ｓｙｓｔｅｍ  ｆｏｒ  Ｍｏｂｉｌｅ  Ｃｏｍｍｕｎｉｃａｔｉｏｎｓ）、ＰＨＳ（Ｐｅｒｓｏｎａｌ  Ｈａｎｄｙ−ｐｈｏｎｅ  Ｓｙｓｔｅｍ）などを用いた通信を実現させるための機能を提供する。
【００３３】
制御プログラム９Ａは、通信ユニット６などを制御することによって、ＩＥＥＥ８０２．１１、Ｂｌｕｅｔｏｏｔｈ（登録商標）、ＩｒＤＡ（Ｉｎｆｒａｒｅｄ  Ｄａｔａ  Ａｓｓｏｃｉａｔｉｏｎ）、ＮＦＣ（Ｎｅａｒ  Ｆｉｅｌｄ  Ｃｏｍｍｕｎｉｃａｔｉｏｎ）、ＷＰＡＮ（Ｗｉｒｅｌｅｓｓ  Ｐｅｒｓｏｎａｌ  Ａｒｅａ  Ｎｅｔｗｏｒｋ）等を用いた近距離無線通信を実現させるための機能を提供する。
【００３４】
制御プログラム９Ａは、例えば、通信ユニット６及びマイク８などを制御することによって、通話を実現させるための機能を提供する。
【００３５】
制御プログラム９Ａにより提供される機能は、通話を実現させる場合、通話アプリケーション又はメールアプリケーションなど、ストレージ９に記憶される他のプログラムなどが提供する機能と組み合わせて利用されることがある。例えば、制御プログラム９Ａにより提供される上記対話型のインタフェース機能と、制御プログラム９Ａにより提供される他の機能とは、組み合わせて利用されることがある。制御プログラム９Ａにより提供される各機能は、複数のプログラムモジュールに分割されていてもよいし、他のプログラムと結合されていてもよい。例えば、制御プログラム９Ａにより提供される対話型のインタフェース機能は、他のモジュールに分割されていてもよい。
【００３６】
通話アプリケーション９Ｂは、通話を実現するための機能を提供する。ＳＭＳアプリケーション９Ｃは、ＳＭＳ（Ｓｈｏｒｔ  Ｍｅｓｓａｇｅ  Ｓｅｒｖｉｃｅ）として、所定の文字数以内のメールを送受信するための機能を提供する。Ｅメールアプリケーション９Ｄは、電子メールの作成、送信、受信、及び表示等のための電子メール機能を提供する。メモ帳アプリケーション９Ｅは、テキストデータの作成及び管理するためのテキストエディタ機能を提供する。動画アプリケーション９Ｆは、動画の再生などを行うための機能を提供する。ブラウザアプリケーション９Ｇは、ブラウジング機能を提供する。ストレージ９に記憶されるアプリケーションは一例に過ぎない。図１に示すもの以外に、ナビゲートアプリケーション、音楽プレイヤーアプリケーション、計算機アプリケーション、付箋アプリケーションなど、複数のアプリケーションが記憶されていてもよい。
【００３７】
電話帳データ９Ｙは、電話番号、メールアドレスなどの情報を含む。図２は、電話帳データ９Ｙの一例を示す図である。図２に示すように、電話帳データ９Ｙは、「名前」、「電話番号」、「メールアドレス」、「誕生日」などの項目が含まれる。「電話番号」及び「メールアドレス」の項目には、「自宅」、「会社」、「携帯」の３つの小項目がそれぞれ属している。電話帳データ９Ｙは、「名前」、「電話番号」、「メールアドレス」、「誕生日」などの項目、及び「自宅」、「会社」、「携帯」の小項目に対応するデータを相互に関連付けて構成されている。例えば、図２に示すように、「名前」の項目に対応するデータ“特許一郎”には、「電話番号」の項目に属する小項目「自宅」に対応するデータ“ａａ−ｂｂｂｂ−ｃｃｃｃ”と、同じく「電話番号」の項目に属する小項目「会社」に対応するデータ“ｄｄ−ｅｅｅｅ−ｆｆｆｆ”と、同じく「電話番号」の項目に属する小項目「携帯」に対応するデータ“０Ａ０−ＢＢＢＢ−ＣＣＣＣ”とが関連付けられている。さらに、図２に示すように、「名前」の項目に対応するデータ“特許一郎”には、「メールアドレス」の項目に属する小項目「自宅」に対応するデータ“ＯＮＥ＠ｊｉｔａｋｕ．ｃｏｍ”と、同じく「メールアドレス」の項目に属する小項目「会社」に対応するデータ“ＯＮＥ＠ｋａｉｓｙａ．ｃｏｍ”と、同じく「メールアドレス」の項目に属する小項目「携帯」に対応するデータ“ＯＮＥ＠ｋｅｉｔａｉ．ｃｏｍ”とが関連付けられる。
【００３８】
設定データ９Ｚは、スマートフォン１の動作に関連する各種の設定及び処理に関する情報を含む。
【００３９】
コントローラ１０は、演算処理装置である。演算処理装置は、例えば、ＣＰＵ（Ｃｅｎｔｒａｌ  Ｐｒｏｃｅｓｓｉｎｇ  Ｕｎｉｔ）、ＳｏＣ（Ｓｙｓｔｅｍ−ｏｎ−ａ−ｃｈｉｐ）、ＭＣＵ（Ｍｉｃｒｏ  Ｃｏｎｔｒｏｌ  Ｕｎｉｔ）、及びＦＰＧＡ（Ｆｉｅｌｄ−Ｐｒｏｇｒａｍｍａｂｌｅ  Ｇａｔｅ  Ａｒｒａｙ）を含むが、これらに限定されない。コントローラ１０は、スマートフォン１の動作を統括的に制御して各種の機能を実現する。
【００４０】
具体的には、コントローラ１０は、ストレージ９に記憶されているデータを必要に応じて参照しつつ、ストレージ９に記憶されているプログラムに含まれる命令を実行する。コントローラ１０は、データ及び命令に応じて機能部を制御し、それによって各種機能を実現する。機能部は、例えば、ディスプレイ２Ａ、通信ユニット６、マイク８、及びスピーカ１１を含むが、これらに限定されない。コントローラ１０は、検出部の検出結果に応じて、制御を変更することがある。検出部は、例えば、タッチスクリーン２Ｂ、ボタン３、照度センサ４、近接センサ５、マイク８、カメラ１２、及び姿勢検出ユニット１５を含むが、これらに限定されない。
【００４１】
コントローラ１０は、制御プログラム９Ａを実行することにより、対話型のインタフェースによる処理を実現する。例えば、コントローラ１０は、対話型のインタフェース機能の実行中であることを示す実行画面をディスプレイ２Ａに表示させる。例えば、コントローラ１０は、マイク８により入力される音声を認識し、認識結果に応じて音声及び文字などで応答する。
【００４２】
コントローラ１０は、制御プログラム９Ａを実行することにより、ユーザにより入力される音声を認識し、認識結果に基づく処理を実現する。例えば、コントローラ１０は、音声の認識に成功した場合に、ストレージ９に記憶されているアプリケーションの中から、認識結果に対応するアプリケーションを自動的に起動する。
【００４３】
コントローラ１０は、制御プログラム９Ａを実行することにより、ユーザにより入力される音声を認識し、認識結果に基づいて処理を実行できない場合に、ストレージ９に記憶されているアプリケーションの一覧を表示する処理を実現する。認識結果に基づいて処理を実行できない場合には、例えば、音声の認識に失敗した場合、または、ストレージ９に記憶されているアプリケーションの中から、認識結果に対応するアプリケーションを検出できないと判定した場合が含まれる。
【００４４】
コントローラ１０は、制御プログラム９Ａを実行することにより、マイク８を介して音声で入力される文字列に対応するレコードを、電話帳データ９Ｙから抽出し、抽出したレコードに含まれる項目を報知する処理を実現する。コントローラ１０は、抽出したレコードに含まれる項目に属する小項目がある場合には、小項目を報知する処理を実現する。コントローラ１０は、自機（スマートフォン１）を通じて上記レコードの対象に接触を図るために用いられる項目又は小項目を報知する処理を実現する。
【００４５】
スピーカ１１は、音出力部である。スピーカ１１は、コントローラ１０から送信される音信号を音として出力する。スピーカ１１は、例えば、着信音及び音楽を出力するために用いられる。レシーバ７及びスピーカ１１の一方が、他方の機能を兼ねてもよい。
【００４６】
カメラ１２は、撮影した画像を電気信号へ変換する。カメラ１２には、例えば、ディスプレイ２Ａに面している物体を撮影するインカメラ、ディスプレイ２Ａの反対側の面に面している物体を撮影するアウトカメラが含まれる。
【００４７】
姿勢検出ユニット１５は、スマートフォン１の姿勢を検出する。姿勢検出ユニット１５は、姿勢を検出するために、加速度センサ、方位センサ、及びジャイロスコープの少なくとも１つを備える。
【００４８】
バイブレータ１８は、スマートフォン１の一部又は全体を振動させる。バイブレータ１８は、振動を発生させるために、例えば、圧電素子、又は偏心モータなどを有する。バイブレータ１８による振動は、着信等の各種のイベントを利用者に報知するために用いられる。
【００４９】
図１に示したスマートフォン１の機能構成は例であり、本発明の要旨を損なわない範囲において適宜変更してよい。
【００５０】
図３〜図５を用いて、実施形態におけるスマートフォン１により実行される処理の一例について説明する。図３〜図５に登場するＦ１は、ユーザの指を示す。図３〜図５では、いわゆるロック画面がディスプレイ２Ａに表示されている場合の処理の一例について説明するが、対話型のインタフェースを起動可能な状況であれば、同様の処理を実現できる。以下の説明において、“操作”と表記するものは、スマートフォン１（コントローラ１０）が、タッチスクリーン２Ｂを介して、検出可能な任意のタッチジェスチャであってよい。
【００５１】
図３は、マイク８を介して音声で入力される文字列に対応するレコードを、電話帳データ９Ｙから抽出し、抽出したレコードに含まれる項目を報知する処理の一例を示す図である。図３に示すように、スマートフォン１は、ディスプレイ２Ａにロック画面４０を表示している。ロック画面４０は、スマートフォン１がロック状態にある場合に表示される。スマートフォン１は、ディスプレイ２Ａにロック画面４０が表示されている場合、特定の操作を除いて、ユーザの操作を受け付けない。特定の操作には、例えば、ロック状態を解除するための操作、及び通知画面をディスプレイ２Ａに表示させるための操作が含まれる。ロック状態には、単に、ユーザの操作を受け付けない状態だけでなく、セキュリティロック状態を含んでもよい。図３に示すように、ロック画面４０には、対話型のインタフェースを起動させるためのアイコン４０ａが配置されている。
【００５２】
図３に示すように、スマートフォン１は、タッチスクリーン２Ｂを介して、ロック画面４０に配置されているアイコン４０ａに対する操作を検出すると（ステップＳ１１）、ディスプレイ２Ａに対話型のインタフェースの実行画面５０を表示する（ステップＳ１２）。このとき、スマートフォン１は、ステップＳ１２に示すように、“ご用件をお話下さい。”という音声ガイダンスをスピーカ１１から出力するとともに、音声ガイダンスに対応する吹き出しの画像（Ｏ−１）を実行画面５０に表示する。
【００５３】
続いて、スマートフォン１は、マイク８により音声が入力されると、入力された音声の認識処理を実行する。認識に成功した場合、スマートフォン１は、ユーザに応答するとともに、マイク８を介して入力される文字列に対応するレコードを、ストレージ９に記憶されている電話帳データ９Ｙの中から抽出し、抽出したレコードに含まれる項目を報知する（ステップＳ１３〜ステップＳ１４）。
【００５４】
具体的には、スマートフォン１は、マイク８を介して音声で入力される文字列を“特許一郎”であると認識すると、ステップＳ１３に示すように、認識した文字列に対応する吹き出しの画像（Ｉ−１）を実行画面５０に表示する。続いて、スマートフォン１は、電話帳データ９Ｙに含まれる「名前」の項目に記憶されているデータの中から、特許一郎を検索する。続いて、スマートフォン１は、特許一郎を検出すると、特許一郎に対応するレコードを抽出する。例えば、抽出されるレコードには、「電話番号」、「メールアドレス」、「誕生日」などの項目と、「電話番号」及び「メールアドレス」に属する「自宅」、「会社」、「携帯」の小項目と、各項目に対応するデータとが含まれる。続いて、スマートフォン１は、抽出したレコードに含まれる項目の中から、自機（スマートフォン１）を通じてレコードの対象である特許一郎との接触を図るために用いられる項目である「電話番号」及び「メールアドレス」を音声及び画像により報知する。例えば、スマートフォン１は、ステップＳ１４に示すように、“電話帳に電話番号、メールアドレスが登録されています。何をしますか？”という音声ガイダンスをスピーカ１１から出力するとともに、音声ガイダンスに対応する吹き出しの画像（Ｏ−２）を実行画面５０に表示する。さらに、スマートフォン１は、ユーザの行動を促すための音声及び画像による補助的な報知を行う。例えば、スマートフォン１は、ステップＳ１４に示すように、“マイクに近づいてお話下さい。”という音声ガイダンスをスピーカ１１から出力するとともに、音声ガイダンスに対応する吹き出しの画像（Ｏ−３）を実行画面５０に表示する。
【００５５】
続いて、スマートフォン１は、マイク８により音声が入力されると、入力された音声の認識処理を実行する。認識に成功した場合、スマートフォン１は、ユーザに応答するとともに、認識結果に対応するアプリケーションを自動的に起動し、アプリケーションの画面をディスプレイ２Ａに表示する（ステップＳ１５〜ステップＳ１７）。
【００５６】
具体的には、スマートフォン１は、マイク８を介して音声で入力される文字列を“携帯に電話”であると認識すると、ステップＳ１５に示すように、認識した文字列に対応する吹き出しの画像（Ｉ−２）を実行画面５０に表示する。続いて、スマートフォン１は、特許一郎に対応するレコードの中に携帯の電話番号のデータが含まれるかを判定する。判定の結果、携帯の電話番号が含まれる場合には、スマートフォン１は、ステップＳ１６に示すように、“携帯に電話します。”という音声ガイダンスをスピーカ１１から出力するとともに、音声ガイダンスに対応する吹き出しの画像（Ｏ−４）を実行画面５０に表示する。一方、スマートフォン１は、特許一郎に対応するレコードの中に携帯の電話番号のデータが含まれていない場合、携帯の電話番号が含まれていない旨の音声ガイダンスを出力してもよい。あるいは、スマートフォン１は、携帯の電話番号が含まれていない旨の音声ガイダンスに加えて、その他の指示を要求する音声ガイダンスを出力してもよい。続いて、スマートフォン１は、ステップＳ１７に示すように、通話アプリケーション９Ｂを実行して、特許一郎の携帯の電話番号に対して発信するとともに、通話アプリケーション９Ｂの画面６０をディスプレイ２Ａに表示する。
【００５７】
図３に示す例では、スマートフォン１は、マイク８を介して音声で入力される文字列を“特許一郎”であると認識すると、特許一郎に対応するレコードを抽出する。そして、スマートフォン１は、抽出したレコードに含まれる項目の中から、自機（スマートフォン１）を通じてレコードの対象である特許一郎との接触を図るために用いられる項目である「電話番号」及び「メールアドレス」を音声及び画像により報知する。例えば、スマートフォン１は、“電話帳に電話番号、メールアドレスが登録されています。何をしますか？”という音声ガイダンスをスピーカ１１から出力するとともに、音声ガイダンスに対応する吹き出しの画像を実行画面５０に表示する。このようなことから、スマートフォン１は、対話型のインタフェースを介して、ユーザの音声入力の内容に対応する具体的な情報を提供することができる。スマートフォン１では、提供された具体的な情報に基づいてユーザが希望する動作を判断することができる。このようにして、スマートフォン１では、対話型のインタフェースを介する処理を改善することができる。
【００５８】
図３に示す例では、スマートフォン１は、抽出したレコードに含まれる項目の中から、自機（スマートフォン１）を通じてレコードの対象（特許一郎）に接触を図るために用いられる項目を報知する例を説明したが、これには限定されない。スマートフォン１は、抽出したレコードに含まれる項目をもれなく報知してもよい。スマートフォン１は、抽出した特許一郎に対応するレコードの中から、例えば、自機（スマートフォン１）を通じてレコードの対象に接触を図るために用いられる項目ではない「誕生日」についても報知してもよい。
【００５９】
図４は、マイク８を介して音声で入力される文字列に対応するレコードを、電話帳データ９Ｙから抽出し、抽出したレコードに含まれる小項目を報知する処理の一例を示す図である。
【００６０】
図４に示すように、スマートフォン１は、タッチスクリーン２Ｂを介して、ロック画面４０に配置されているアイコン４０ａに対する操作を検出すると（ステップＳ２１）、ディスプレイ２Ａに対話型のインタフェースの実行画面５０を表示する（ステップＳ２２）。このとき、スマートフォン１は、ステップＳ２２に示すように、“ご用件をお話下さい。”という音声ガイダンスをスピーカ１１から出力するとともに、音声ガイダンスに対応する吹き出しの画像（Ｏ−１）を実行画面５０に表示する。
【００６１】
続いて、スマートフォン１は、マイク８により音声が入力されると、入力された音声の認識処理を実行する。認識に成功した場合、スマートフォン１は、マイク８を介して入力される文字列に対応するレコードを、ストレージ９に記憶されている電話帳データ９Ｙの中から抽出し、抽出したレコードに含まれる項目を報知する（ステップＳ２３〜ステップＳ２４）。
【００６２】
具体的には、スマートフォン１は、マイク８を介して音声で入力される文字列を“特許一郎”であると認識すると、ステップＳ２３に示すように、認識した文字列に対応する吹き出しの画像（Ｉ−１）を実行画面５０に表示する。続いて、スマートフォン１は、電話帳データ９Ｙに含まれる「名前」の項目に記憶されているデータの中から、特許一郎を検索する。続いて、スマートフォン１は、特許一郎を検出すると、特許一郎に対応するレコードを抽出する。例えば、抽出されるレコードには、「電話番号」、「メールアドレス」、「誕生日」などの項目と、「電話番号」及び「メールアドレス」に属する「自宅」、「会社」、「携帯」の小項目と、各項目に対応するデータとが含まれる。続いて、スマートフォン１は、抽出したレコードに含まれる項目の中から、自機（スマートフォン１）を通じてレコードの対象である特許一郎との接触を図るために用いられる項目である「電話番号」及び「メールアドレス」を特定し、特定した「電話番号」及び「メールアドレス」の項目に属する「自宅」、「会社」、「携帯」の小項目を音声及び画像により報知する。例えば、スマートフォン１は、ステップＳ２４に示すように、“電話帳に自宅・会社・携帯の電話番号、自宅・会社・携帯のメールアドレスが登録されています。何をしますか？”という音声ガイダンスをスピーカ１１から出力するとともに、音声ガイダンスに対応する吹き出しの画像（Ｏ−５）を実行画面５０に表示する。さらに、スマートフォン１は、ユーザの行動を促すための音声及び画像による補助的な報知を行う。例えば、スマートフォン１は、ステップＳ２４に示すように、“マイクに近づいてお話下さい。”という音声ガイダンスをスピーカ１１から出力するとともに、音声ガイダンスに対応する吹き出しの画像（Ｏ−３）を実行画面５０に表示する。
【００６３】
続いて、スマートフォン１は、マイク８により音声が入力されると、入力された音声の認識処理を実行する。認識に成功した場合、スマートフォン１は、ユーザに応答するとともに、認識結果に対応するアプリケーションを自動的に起動し、アプリケーションの画面をディスプレイ２Ａに表示する（ステップＳ２５〜ステップＳ２７）。
【００６４】
具体的には、スマートフォン１は、マイク８を介して音声で入力される文字列を“携帯にメール”であると認識すると、ステップＳ２５に示すように、認識した文字列に対応する吹き出しの画像（Ｉ−３）を実行画面５０に表示する。続いて、スマートフォン１は、ステップＳ２６に示すように、“メールアプリを起動します。”という音声ガイダンスをスピーカ１１から出力するとともに、音声ガイダンスに対応する吹き出しの画像（Ｏ−６）を実行画面５０に表示する。続いて、スマートフォン１は、ステップＳ２７に示すように、Ｅメールアプリケーション９Ｄを実行して、Ｅメールアプリケーション９Ｄの画面７０をディスプレイ２Ａに表示する。Ｅメールアプリケーション９Ｄを実行する際、スマートフォン１は、特許一郎の携帯のメールアドレスを宛先アドレスに予め挿入しておく。
【００６５】
上記ステップＳ２５〜ステップＳ２７において、スマートフォン１は、マイク８を介して音声で入力される文字列を、例えば“携帯にショートメール”であると認識した場合には、ＳＭＳアプリケーション９Ｃを実行して、ＳＭＳアプリケーション９Ｃの画面をディスプレイ２Ａに表示する。
【００６６】
図４に示す例では、スマートフォン１は、マイク８を介して音声で入力される文字列を“特許一郎”であると認識すると、特許一郎に対応するレコードを抽出する。そして、スマートフォン１は、抽出したレコードに含まれる項目の中から、自機（スマートフォン１）を通じてレコードの対象である特許一郎との接触を図るために用いられる項目である「電話番号」及び「メールアドレス」を特定し、さらには、特定した「電話番号」及び「メールアドレス」の項目に属する「自宅」、「会社」、「携帯」の小項目を音声及び画像により報知する。例えば、スマートフォン１は、“電話帳に自宅・会社・携帯の電話番号、自宅・会社・携帯のメールアドレスが登録されています。何をしますか？”という音声ガイダンスをスピーカ１１から出力するとともに、音声ガイダンスに対応する吹き出しの画像を実行画面５０に表示する。このようなことから、スマートフォン１は、対話型のインタフェースを介して、ユーザの音声入力の内容に対応するより具体的な情報を提供することができる。スマートフォン１では、提供されたより具体的な情報に基づいてユーザが希望する動作を判断することができる。このようにして、スマートフォン１では、対話型のインタフェースを介する処理を改善することができる。
【００６７】
図５は、マイク８を介して音声で入力される文字列に対応するレコードを、電話帳データ９Ｙから抽出できない場合の処理の一例を示す図である。以下の説明において、“連携アプリケーション（連携アプリ）”と表記するものは、ストレージ９に記憶されているアプリケーションに該当し、対話型のインタフェースを介して実行することができる。
【００６８】
図５に示すように、スマートフォン１は、ロック画面４０をディスプレイ２Ａに表示している。スマートフォン１は、ロック画面４０に配置されているアイコン４０ａに対する操作を検出すると（ステップＳ３１）、ディスプレイ２Ａに対話型のインタフェースの実行画面５０を表示する（ステップＳ３２）。このとき、スマートフォン１は、ステップＳ３２に示すように、“ご用件をお話下さい。”という音声ガイダンスをスピーカ１１から出力するとともに、音声ガイダンスに対応する吹き出しの画像（Ｏ−１）を実行画面５０に表示する。
【００６９】
続いて、スマートフォン１は、マイク８により音声が入力されると、入力された音声の認識処理を実行する。認識に成功した場合、スマートフォン１は、ユーザに応答するとともに、ストレージ９に記憶されている電話帳データ９Ｙの中から、マイク８を介して入力される文字列に対応するレコードを抽出できない場合には、連携アプリケーションの実行指示であるものと判断して処理を実行する（ステップＳ３３〜ステップＳ３４）。
【００７０】
具体的には、スマートフォン１は、マイク８を介して音声で入力される文字列を“天気”であると認識すると、ステップＳ３３に示すように、認識した文字列に対応する吹き出しの画像（Ｉ−４）を実行画面５０に表示する。続いて、スマートフォン１は、電話帳データ９Ｙに含まれる「名前」の項目に記憶されているデータの中から、天気を検索する。天気を検出できなかった場合、スマートフォン１は、続いて、連携アプリケーションを検索する。連携アプリケーションも検出できなかった場合、スマートフォン１は、例えば、ステップＳ３４に示すように、“連携アプリが見つかりませんでした。”という音声ガイダンスをスピーカ１１から出力するとともに、音声ガイダンスに対応する吹き出しの画像（Ｏ−７）を実行画面５０に表示する。さらに、スマートフォン１は、例えば、ステップＳ３４に示すように、アプリケーションの一覧を実行画面５０に表示する。実行画面５０に表示されるアプリケーションの一覧には、ＳＭＳアプリケーション９Ｃに対応するアイコンＡ１、Ｅメールアプリケーション９Ｄに対応するアイコンＡ２、メモ帳アプリケーション９Ｅに対応するアイコンＡ３、動画アプリケーション９Ｆに対応するアイコンＡ４、及びブラウザアプリケーション９Ｇに対応するアイコンＡ５が表示される。
【００７１】
続いて、スマートフォン１は、タッチスクリーン２Ｂを介して、例えば、メモ帳アプリケーション９Ｅに対応するアイコンＡ３に対する操作を検出すると、メモ帳アプリケーション９Ｅを起動し、メモ帳アプリケーション９Ｅの画面８０をディスプレイ２Ａに表示する（ステップＳ３５〜ステップＳ３６）。
【００７２】
図６を用いて、実施形態に係るスマートフォン１による処理手順の一例を説明する。図６は、実施形態に係るスマートフォンの処理手順の一例を示すフローチャートである。図６に示す処理手順は、コントローラ１０が、ストレージ９に記憶されている制御プログラム９Ａなどを実行することによって実現される。
【００７３】
図６に示すように、コントローラ１０は、対話型のインタフェースの実行画面をディスプレイ２Ａに表示させる（ステップＳ１０１）。コントローラ１０は、例えば、タッチスクリーン２Ｂを介して、対話型のインタフェースを起動させるためのアイコン４０ａに対する操作を検出すると、対話型のインタフェースを起動し、インタフェースの実行画面５０をディスプレイ２Ａに表示させる（図３、４参照）。
【００７４】
続いて、コントローラ１０は、マイク８により入力される音声の音声データを取得すると（ステップＳ１０２）、音声データの認識処理を実行し、音声の認識に成功したかを判定する（ステップＳ１０３）。
【００７５】
コントローラ１０は、判定の結果、音声の認識に成功した場合には（ステップＳ１０３，Ｙｅｓ）、ストレージ９に記憶されているアプリケーションの中から、認識結果に対応するアプリケーションを検出できたかを判定する（ステップＳ１０４）。
【００７６】
コントローラ１０は、判定の結果、認識結果に対応するアプリケーションを検出できた場合には（ステップＳ１０４、Ｙｅｓ）、対応するアプリケーションを起動し（ステップＳ１０５）、図６に示す処理手順を終了する。
【００７７】
一方、コントローラ１０は、判定の結果、認識結果に対応するアプリケーションを検出できない場合には（ステップＳ１０４，Ｎｏ）、認識結果に対応する電話帳データがあるかを判定する（ステップＳ１０６）。すなわち、コントローラ１０は、認識結果に対応するデータが、電話帳データ９Ｙに含まれているかを検索する。
【００７８】
コントローラ１０は、判定の結果、認識結果に対応する電話帳データがある場合には（ステップＳ１０６，Ｙｅｓ）、該当のレコードを抽出し、抽出したレコードに含まれる項目を報知する（ステップＳ１０７）。コントローラ１０は、抽出したレコードに含まれる項目を報知する際、例えば、自機（スマートフォン１）を通じてレコードの対象に接触を図るために用いられる項目（電話番号、メールアドレス、ＵＲＬなど）を報知する。コントローラ１０は、例えば、自機（スマートフォン１）を通じて上記レコードの対象に接触を図るために用いられる項目（電話番号、メールアドレス、ＵＲＬなど）に複数の小項目（自宅、携帯、会社など）が属する場合には、小項目をそれぞれ報知する。
【００７９】
続いて、コントローラ１０は、動作指示の音声入力を要求して（ステップＳ１０８）、ステップＳ１０２の手順に戻り、再入力される音声データを取得する。
【００８０】
ステップＳ１０６において、コントローラ１０は、判定の結果、認識結果に対応する電話帳データがない場合には（ステップＳ１０６，Ｎｏ）、音声の再入力を要求して（ステップＳ１０９）、ステップＳ１０２の手順に戻り、再入力される音声データを取得する。
【００８１】
ステップＳ１０３において、コントローラ１０は、判定の結果、音声の認識に失敗した場合には（ステップＳ１０３，Ｎｏ）、失敗回数が閾値を超えているかを判定する（ステップＳ１１０）。
【００８２】
コントローラ１０は、判定の結果、失敗回数が閾値を超えている場合には（ステップＳ１１０，Ｙｅｓ）、連携アプリケーションの一覧を実行画面５０に表示する（ステップＳ１１１）。続いて、コントローラ１０は、連携アプリケーションの一覧に対する操作に応じて、アプリケーションの処理を実行し（ステップＳ１１２）、図６に示す処理手順を終了する。
【００８３】
一方、コントローラ１０は、判定の結果、失敗回数が閾値を超えていない場合には（ステップＳ１１０，Ｎｏ）、ステップＳ１０９の手順に移り、音声の再入力を要求する。
【００８４】
図６に示す処理手順の順番は、図６に示す例に限定されない。図６に示す処理手順において、例えば、ステップＳ１０４の手順と、ステップＳ１０６の手順の順序が逆であってもよい。図６に示す処理手順は、図６に示す全ての処理手順を含んでいなくてもよい。例えば、ステップＳ１１０の手順を省略して、直接ステップＳ１１１の手順を実行してもよい。
【００８５】
添付の請求項に係る技術を完全かつ明瞭に開示するために特徴的な実施形態に関し記載してきた。しかし、添付の請求項は、上記実施形態に限定されるべきものでなく、本明細書に示した基礎的事項の範囲内で当該技術分野の当業者が創作しうるすべての変形例及び代替可能な構成により具現化されるべきである。
【００８６】
例えば、図１に示した制御プログラム９Ａ及び各アプリケーションは、複数のモジュールに分割されていてもよい。あるいは、図１に示した制御プログラム９Ａは、他のプログラムと結合されていてもよい。
【００８７】
上記実施形態では、タッチスクリーンを備える装置の一例として、スマートフォンについて説明したが、添付の請求項に係る装置は、スマートフォンに限定されない。添付の請求項に係る装置は、スマートフォン以外の電子機器であってもよい。電子機器は、例えば、モバイルフォン、タブレット、携帯型パソコン、デジタルカメラ、メディアプレイヤ、電子書籍リーダ、ナビゲータ、及びゲーム機である。あるいは、添付の請求項に係る装置は、据え置き型の電子機器であってもよい。据え置き型の電子機器は、例えば、デスクトップパソコン、及びテレビ受像器である。
【００８８】
上記実施形態の対話型のインタフェースでは、音声入力に対して音声ガイダンスおよびディスプレイ表示によって応答しているが、いずれか一方によって応答するインタフェースを採用してもよい。上記の実施形態において、スマートフォン１は、レコードの対象に接触を図るための項目に属する小項目が１つのみの場合には、項目名に対応する音声入力によりアプリケーションを実行するようにしてもよい。例えば、スマートフォン１は、抽出したレコードの対象に接触を図るための項目である電話番号に対して、自宅、会社および携帯のうちのいずれか１つの小項目が属している場合には、「電話」という音声入力により通話アプリケーション９Ｂをそのまま実行する。
【００８９】
上記実施形態の対話型のインタフェースでは、音声入力によってアプリケーションを起動することができる。このスマートフォン１では、音声入力によって起動することになったアプリケーションが既に起動している場合、当該アプリケーションを実行する。上記実施形態において、スマートフォン１（コントローラ１０）がプログラム（又は、アプリケーション）を起動する場合には、ストレージ９に記憶されているプログラムを新たに読み出してその処理を開始する場合と、既に読み出されているプログラムの処理を新たに開始する場合とが含まれる。上記実施形態において、スマートフォン１（コントローラ１０）がプログラムを実行する場合には、プログラムを起動する場合と、中断中のプログラムを再開する場合と、起動済のプログラムの処理を継続する場合とが含まれる。
【符号の説明】
【００９０】
１  スマートフォン
２  タッチスクリーンディスプレイ
２Ａ  ディスプレイ
２Ｂ  タッチスクリーン
３  ボタン
４  照度センサ
５  近接センサ
６  通信ユニット
７  レシーバ
８  マイク
９  ストレージ
９Ａ  制御プログラム
９Ｂ  通話アプリケーション
９Ｃ  ＳＭＳアプリケーション
９Ｄ  Ｅメールアプリケーション
９Ｅ  メモ帳アプリケーション
９Ｆ  動画アプリケーション
９Ｇ  ブラウザアプリケーション
９Ｙ  電話帳データ
９Ｚ  設定データ
１０  コントローラ
１１  スピーカ
１２  カメラ
１５  姿勢検出ユニット
１８  バイブレータ
【図１】
2014225798.tif 000003
【図２】
2014225798.tif 000004
【図３】
2014225798.tif 000005
【図４】
2014225798.tif 000006
【図５】
2014225798.tif 000007
【図６】
2014225798.tif 000008