(57)【要約】      （修正有）【課題】入力者に固有の情報や環境情報を利用して、口認識や音声認識において入力された言語を正確に認識する言語認識装置、方法及びプログラムを提供する。【解決手段】入力者が言語を発するときの入力者の口唇画像又は音声情報を入力し、入力された入力者の口唇画像又は音声情報を解析して、複数の文字列候補を抽出し、入力者の固有情報を取得、取得された入力者の固有情報に基づいて複数の文字列候補から特定の文字列を選択し、選択された文字列を入力者が発した言語として出力する。【選択図】図１
2016184095.tif 000002
【特許請求の範囲】
【請求項１】
入力者が言語を発するときの該入力者の口唇画像を入力する口唇画像入力手段と、
前記口唇画像入力手段から入力される口唇画像を解析して、複数の文字列候補を抽出する文字列候補抽出手段と、
前記入力者の固有情報を取得する固有情報取得手段と、
前記固有情報取得手段が取得した固有情報に基づいて前記文字列候補抽出手段が抽出した複数の文字列候補から特定の文字列を選択する文字列選択手段と、
前記文字列選択手段が選択した文字列を前記入力者が発した言語として出力する出力手段と、
を備えたことを特徴とする言語認識装置。
【請求項２】
入力者が言語を発するときの音声情報を入力する音声情報入力手段と、
前記音声情報入力手段から入力される音声情報を解析して、複数の文字列候補を抽出する文字列候補抽出手段と、
前記入力者の固有情報を取得する固有情報取得手段と、
前記固有情報取得手段が取得した固有情報に基づいて前記文字列候補抽出手段が抽出した複数の文字列候補から特定の文字列を選択する文字列選択手段と、
前記文字列選択手段が選択した文字列を前記入力者が発した言語として出力する出力手段と、
を備えたことを特徴とする言語認識装置。
【請求項３】
前記入力者に関する環境情報を取得する環境情報取得手段を備え、
前記文字列選択手段は、前記固有情報取得手段が取得した固有情報及び前記環境情報取得手段が取得した環境情報に基づいて前記文字列候補抽出手段が抽出した複数の文字列候補から特定の文字列を選択することを特徴とする請求項１又は請求項２記載の言語認識装置。
【請求項４】
入力者が言語を発するときの該入力者の口唇画像を入力し、
入力された前記入力者の口唇画像を解析して、複数の文字列候補を抽出し、
前記入力者の固有情報を取得し、
取得された前記入力者の固有情報に基づいて前記複数の文字列候補から特定の文字列を選択し、
選択された文字列を前記入力者が発した言語として出力する
ステップを備えたことを特徴とする言語認識方法。
【請求項５】
入力者が言語を発するときの該入力者の音声情報を入力し、
入力された前記入力者の音声情報を解析して、複数の文字列候補を抽出し、
前記入力者の固有情報を取得し、
取得された前記入力者の固有情報に基づいて前記複数の文字列候補から特定の文字列を選択し、
選択された文字列を前記入力者が発した言語として出力する
ステップを備えたことを特徴とする言語認識方法。
【請求項６】
前記入力者に関する環境情報を取得するステップを備え、
前記複数の文字列候補から特定の文字列を選択するステップは、取得された前記入力者の固有情報及び前記入力者に関する環境情報に基づいて前記複数の文字列候補から特定の文字列を選択することを特徴とする請求項４又は請求項５記載の言語認識方法。
【請求項７】
請求項４乃至請求項６のいずれかに記載した言語認識方法をコンピュータに実行させるプログラム。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、携帯端末、ウエアラブル端末等の各種端末機器に使用される言語認識装置、言語認識方法及びプログラムに関するものである。
【背景技術】
【０００２】
スマートフォンに代表される携帯端末の普及は目覚ましいが、最近では、腕時計型やグラス型等の端末、いわゆるウエアラブル端末が普及し始めている。このウエアラブル端末においては、機器が小さいことから、利用者の指によるキー入力やタッチ入力が難しく、音声による入力もできるようになっている。また、利用者の便宜を図って音声により入力できる携帯端末も存在する。
しかしながら、このような音声入力では、認識率が問題となり、利用者の発した言語が正確に入力されないという問題が生じていた。
その一方、電車の中等の公共の場所、静かな場所や人の目が気になる場所等においては、声を出すことがはばかられることから、利用者が声を出さなくても口を動かしたたけで、その口の動きを認識して言語を入力できることが望まれている。
ここで、人の口の動きを認識する口認識により言語を入力するものとして、例えば、特開２０００−６８８８２号公報（特許文献１）には、人の口唇の形状に対応する音声データを格納しておき、人の口の動きをカメラで撮像して得られた口唇の形状の画像データがどの音声データであるかを解析し、解析された音声データを文字メッセージとして送信する無線通信装置が開示されている。
また、特開２０１４−１５０３４８号公報（特許文献２）には、第１カメラによって撮影された撮影者の顔画像を用いて、撮影者が発声した文字列に対応する唇の動きを解析し、解析された唇の動きに対応する読取キーワードを生成し、この読取キーワードと予め対応付けられた画像撮影および動作設定の内容に基づいて、第２カメラ動作を制御する撮影装置が開示されている。
【０００３】
しかしながら、口認識において人の唇の動きを解析しただけでは、その人が発した言語を正確に認識することができず、前記音声入力と同様の問題が生じていた。
ところで、各種端末機器に入力して送信されるメッセージには、比較的単純な言語も多く、入力者の年齢、職業といったような入力者に固有の情報、あるいは、メッセージが発せられる場所、時間といったような環境情報に左右される言語も多い。
本発明は、このような入力者の固有情報や環境情報に着目し、これらを利用して口認識や音声認識における言語の認識率を高めようとするものである。
【先行技術文献】
【特許文献】
【０００４】
【特許文献１】特開２０００−６８８８２号公報
【特許文献２】特開２０１４−１５０３４８号公報
【発明の概要】
【発明が解決しようとする課題】
【０００５】
本発明が解決しようとする課題は、入力者に固有の情報や環境情報を利用して、口認識や音声認識おいて入力された言語を正確に認識できるようにすることである。
【課題を解決するための手段】
【０００６】
本発明は、入力者が言語を発するときの該入力者の口唇画像を入力する口唇画像入力手段と、前記口唇画像入力手段から入力される口唇画像を解析して、複数の文字列候補を抽出する文字列候補抽出手段と、前記入力者の固有情報を取得する固有情報取得手段と、前記固有情報取得手段が取得した固有情報に基づいて前記文字列候補抽出手段が抽出した複数の文字列候補から特定の文字列を選択する文字列選択手段と、前記文字列選択手段が選択した文字列を前記入力者が発した言語として出力する出力手段とを備えた言語認識装置を提供して、上記課題を解決するものである。
【０００７】
本発明は、入力者が言語を発するときの音声情報を入力する音声情報入力手段と、前記音声情報入力手段から入力される音声情報を解析して、複数の文字列候補を抽出する文字列候補抽出手段と、前記入力者の固有情報を取得する固有情報取得手段と、前記固有情報取得手段が取得した固有情報に基づいて前記文字列候補抽出手段が抽出した複数の文字列候補から特定の文字列を選択する文字列選択手段と、前記文字列選択手段が選択した文字列を前記入力者が発した言語として出力する出力手段とを備えた言語認識装置を提供して、上記課題を解決するものである。
【０００８】
本発明は、前記入力者に関する環境情報を取得する環境情報取得手段を備え、前記文字列選択手段は、前記固有情報取得手段が取得した固有情報及び前記環境情報取得手段が取得した環境情報に基づいて前記文字列候補抽出手段が抽出した複数の文字列候補から特定の文字列を選択する言語認識装置を提供して、上記課題を解決するものである。
【０００９】
本発明は、入力者が言語を発するときの該入力者の口唇画像を入力し、入力された前記入力者の口唇画像を解析して、複数の文字列候補を抽出し、前記入力者の固有情報を取得し、取得された前記入力者の固有情報に基づいて前記複数の文字列候補から特定の文字列を選択し、選択された文字列を前記入力者が発した言語として出力するステップを備えた言語認識方法を提供して、上記課題を解決するものである。
【００１０】
本発明は、入力者が言語を発するときの該入力者の音声情報を入力し、入力された前記入力者の音声情報を解析して、複数の文字列候補を抽出し、前記入力者の固有情報を取得し、取得された前記入力者の固有情報に基づいて前記複数の文字列候補から特定の文字列を選択し、選択された文字列を前記入力者が発した言語として出力するステップを備えた言語認識方法を提供して、上記課題を解決するものである。
【００１１】
本発明は、前記入力者に関する環境情報を取得するステップを備え、前記複数の文字列候補から特定の文字列を選択するステップは、取得された前記入力者の固有情報及び前記入力者に関する環境情報に基づいて前記複数の文字列候補から特定の文字列を選択する言語認識方法を提供して、上記課題を解決するものである。
【００１２】
本発明は、前記言語認識方法をコンピュータに実行させるプログラムを提供して、上記課題を解決するものである。
【発明の効果】
【００１３】
本発明の言語認識装置においては、口唇画像入力手段により入力者の口唇画像が入力され、文字列候補抽出手段により入力された口唇画像が解析されて複数の文字列候補が抽出され、固有情報取得手段により前記入力者の固有情報が取得され、文字列選択手段により前記固有情報に基づいて前記複数の文字列候補から特定の文字列が選択され、出力手段により選択された文字列を前記入力者が発した言語として出力されるため、出力する文字列の選択が口唇画像の解析と入力者の固有情報から行われ、口唇画像の解析だけを行った場合に比べてより正確に入力された言語を認識できるという効果を奏する。
【００１４】
本発明の言語認識装置においては、音声情報入力手段により入力者の音声情報が入力され、文字列候補抽出手段により入力された音声情報が解析されて複数の文字列候補が抽出され、固有情報取得手段により前記入力者の固有情報が取得され、文字列選択手段により前記固有情報に基づいて前記複数の文字列候補から特定の文字列が選択され、出力手段により選択された文字列を前記入力者が発した言語として出力されるため、出力する文字列の選択が音声情報の解析と入力者の固有情報から行われ、音声情報の解析だけを行った場合に比べてより正確に入力された言語を認識できるという効果を奏する。
【００１５】
本発明の言語認識装置においては、固有情報取得手段による前記入力者の固有情報の取得に加えて、環境情報取得手段により前記入力者に関する環境情報が取得され、前記文字列選択手段により前記固有情報及び前記環境情報に基づいて前記複数の文字列候補から特定の文字列を選択されるため、出力する文字列の選択が口唇画像または音声情報の解析と入力者の固有情報及び環境情報から行われ、口唇画像または音声情報の解析だけを行った場合に比べてより正確に入力された言語を認識できるという効果を奏する。
【００１６】
本発明の言語認識方法においては、入力者の口唇画像が入力され、前記入力者の口唇画像が解析されて複数の文字列候補が抽出され、前記入力者の固有情報が取得され、前記入力者の固有情報に基づいて前記複数の文字列候補から特定の文字列が選択され、選択された文字列を前記入力者が発した言語として出力されるため、出力する文字列の選択が口唇画像の解析と入力者の固有情報から行われ、口唇画像の解析だけを行った場合に比べてより正確に入力された言語を認識できるという効果を奏する。
【００１７】
本発明の言語認識方法においては、入力者の音声情報が入力され、前記入力者の音声情報が解析されて複数の文字列候補が抽出され、前記入力者の固有情報が取得され、前記入力者の固有情報に基づいて前記複数の文字列候補から特定の文字列が選択され、選択された文字列を前記入力者が発した言語として出力されるため、出力する文字列の選択が口唇画像の解析と入力者の固有情報から行われ、音声情報の解析だけを行った場合に比べてより正確に入力された言語を認識できるという効果を奏する。
【００１８】
本発明の言語認識方法においては、前記入力者の固有情報の取得に加えて、前記入力者に関する環境情報が取得され、前記固有情報及び前記環境情報に基づいて前記複数の文字列候補から特定の文字列を選択されるため、出力する文字列の選択が口唇画像または音声情報の解析と入力者の固有情報及び環境情報から行われ、口唇画像または音声情報の解析だけを行った場合に比べてより正確に入力された言語を認識できるという効果を奏する。
【図面の簡単な説明】
【００１９】
【図１】本発明の言語認識装置を無線通信装置として利用した場合の一実施形態の構成を示すブロック図である。
【図２】固有情報記憶部２２に記憶されている固有情報の例を説明するための図である。
【図３】環境取得部１５が取得する環境情報の例を説明するための図である。
【図４】単語（文字列）と固有情報・環境情報とを関係付けたテーブルの例を説明するための図である。
【図５】無線通信装置１の動作を示すフローチャートである。
【図６】候補単語（文字列）について、入力者の固有情報と環境情報の各項目に付与にされるポイントとその合計を説明するための図である。
【発明を実施するための形態】
【００２０】
［言語認識装置（無線通信装置）の全体構成］
本発明の言語認識装置を無線通信装置に利用した場合の構成について説明する。
図１は、本発明の言語認識装置を無線通信装置に利用した場合の一実施形態の構成を示すブロック図である。図中、１は無線通信装置、１０は無線通信装置１の制御部、１１は文字列候補抽出部、１２は文字列選択部、１３は固有情報取得部、１４は情報変換部、１５は環境情報取得部、２０は無線通信装置１の記憶部、２１は口唇画像データベース、２２は固有情報記憶部である。また、３１はカメラ、３２はマイク、３３はＧＰＳ（Global Positioning System）受信機、３４は電波時計であり、これらは無線通信装置１の入力部となり、さらに、４１はディスプレイ、４２は無線部、４３はアンテナであり、これらは無線通信装置１の出力部となる。
【００２１】
［入力部］
カメラ３１は、入力者が声を出さずに言語を発するときの口（唇）の動きを撮影してその口唇画像を入力する口唇画像入力手段となるものであり、マイク３２は、入力者が声を出して言語を発するときの音声を入力する音声情報入力手段となるものである。そして、カメラ３１とマイク３２は、切替スイッチ（図示せず）によって何れか一方から入力できるようになっている。
ＧＰＳ受信機３３は、ＧＰＳ衛星からの電波を受信して現在位置を測定して入力するものであり、電波時計３４は、標準電波の送信局から送信される原子時計による日付・時刻情報を受信して入力するものである。これらにより、現在の位置及び日付・時刻の環境に関する情報が入力される。また、環境に関する情報として現在の気温・湿度、天気等の気象情報も入力してもよい。なお、現在の位置を入力するものとして、ＧＰＳ受信機３３の他にWi-FiやGoogleマップ等を利用してもよい。
【００２２】
［制御部１０及び記憶部２０］
［文字列候補抽出部１１及び口唇画像データベース２１］
文字列候補抽出部１１は、口唇画像の解析または音声認識を行って文字列候補を抽出すし、口唇画像データベース２１には、各音声言語（母音及び母音と子音の組合せ）に対応する標準的な口唇部の形状を示す画像（標準口唇画像）が格納されている。
そして、文字列候補抽出部１１は、カメラ３１から入力者の口唇画像が入力された場合、入力された口唇画像と口唇画像データベース２１に格納されている標準口唇画像を対比し、どの標準口唇画像に対応するか解析して標準口唇画像を特定し、特定された標準口唇画像に対応する音声で構成される文字列を特定する。この場合、特定された標準口唇画像に対応する音声は一義的に決められず、特定された文字列は複数存在することとなる。
また、文字列候補抽出部１１は、マイク３２から入力者の音声が入力された場合、音声認識手段（図示せず）によって音声認識を行い、入力された音声に対応する文字列を複数特定する。
文字列候補抽出部１１は、このようにして口唇画像の解析または音声認識によって特定された複数の文字列を文字列候補として抽出し、それを後述する文字列選択部１２に送る。
【００２３】
［固有情報取得部１３及び固有情報記憶部２２］
固有情報記憶部２２には、入力者毎に異なる固有の情報（固有情報）が記憶されている。
図２（ａ）、（ｂ）は、固有情報記憶部２２に記憶されている固有情報の例を説明するための図である。
図２（ａ）に示すように、固有情報の項目としては「家族構成」、「職業」、「年代」があり、「家族構成」は「同居人あり」と「同居人なし」に分けられ、「職業」は「社会人」と「無職」に分けられ、「年代」は「２０代」…「５０代」に分けられている。そして、該当する項目は「１」、該当しない項目は「０」のデータが入るようになっており、どの項目に該当するかは入力者等が予め入力しておく。図においては、入力者Ａ（無線通信装置１の所有者）の例が示され、入力者Ａの固有情報は、「同居人あり」、「社会人」、「５０代」となっている。
また、固有情報記憶部２２は、無線通信装置１の記憶部１０に設けず、無線通信装置１とネットワークで接続されるサーバー（図示せず）の記憶部に設けてもよい。この場合は、図２（ｂ）に示すように、多数の入力者（Ａ、Ｂ…）の「家族構成」、「職業」、「年代」のデータが一括して記憶されることとなる。
そして、固有情報取得部１３は、記憶部２０あるいはサーバーの記憶部にある固有情報記憶部２２から入力者の固有情報を取得し、それを後述する文字列選択部１２に送る。
なお、固有情報は、図２に示す例に限定されるものではなく、「家族構成」を同居人の数で分けたり、「職業」を職種等で分けたりしてもよく、「趣味・嗜好」等の情報を加えてもよい。
【００２４】
［情報変換部１４及び環境取得部１５］
情報変換部１４は、ＧＰＳ受信機３３及び電波時計３４等から入力される現在の位置及び日付・時刻等の情報を、予め定められた場所及び時間等の環境情報に変換して、環境情報取得部１５に送る。環境情報取得部１５は、情報変換部１４を介して取得した環境情報を後述する文字列選択部１２に送る。
図３は、環境取得部１５が取得する環境情報の例を説明するための図である。図に示すように、環境情報の項目としては「場所」、「時間」があり、「場所」は「会社」、「家」、「その他」に分けられ、「時間」は、「朝」、「昼」、「夕方」、「夜」に分けられている。
情報変換部１４では、予め入力者（無線通信装置１の所有者）の会社、家の位置情報を記憶しておき、ＧＰＳ受信機３３から入力される位置情報が、いずれに該当するがを判断し、該当する場所の項目を「１」とし、該当しない項目を「０」とする。また、情報変換部１４では、「朝」、「昼」、「夕方」、「夜」に対応する時間帯を設定しておき、電波時計３４から入力される時刻情報が、いずれの時間帯に該当するがを判断し、該当する時間帯の項目を「１」とし、該当しない時間帯の項目を「０」とする。図の例では、「場所」は「会社」、「時間」は「夕方」が環境情報となり、この環境情報を環境取得部１５が取得する。
なお、環境取得部１５が取得する環境情報は、図３に示すものに限定されず、「場所」として入力者がよく利用する施設等を加えてもよく、「場所」、「時間」の他、気温・湿度、天気等の気象情報を加えてもよい。また、環境取得部１５が取得する環境情報は、ＧＰＳ受信機３３及び電波時計３４等からの現在の位置及び日付・時刻等の情報そのものであってもよい（この場合は情報変換部１４は不要となる）。
【００２５】
［文字列選択部１２］
文字列選択部１２は、文字列候補抽出部１１から送られてくる複数の文字列候補から特定の文字列を選択する。この特定の文字列の選択は、固有情報取得部１３から送られてくる固有情報に基づいて、あるいは、固有情報取得部１３から送られてくる固有情報と環境情報取得部１５から送られてくる環境情報に基づいて行われる。具体的には、予め単語（文字列）と固有情報・環境情報とを関係付けたテーブルを記憶しておき、このテーブルに基づいて特定の文字列を選択する。
図４は、単語（文字列）と固有情報・環境情報とを関係付けたテーブルの例を説明するための図である。この例では、各単語に、固有情報及び環境情報の各項目のポイントを付与している。このポイントは、各単語がどのような固有情報及び環境情報の中で使用される可能性が高いか、すなわち、どの家族構成のどの職業のどの年代の人が、どの場所でどの時間に入力する可能性が高いかに基づいて付与される。
例えば、「ただいま」という単語は、家族構成は「同居人あり」の人が、職業は「社会人」の人が、年代は「２０代」の人が、場所は「会社」で、時間は「夕方」に使用する可能性が高いため、「同居人あり」、「社会人」、「２０代」、「会社」、「夕方」の項目にポイント「１」を付与し、これ以外の項目にはポイント「０」を付与する。図においては、「ただいま」の他、「おかえり」、「つかれた」、「そうじ」、「メール」、「しんぶん」、「パパイア」といった日常の会話でよく使用する単語に対して、固有情報及び環境情報の各項目に図に示すようなポイント「１」または「０」が付与されている。
なお、この例では各項目に付与するポイントは「１」か「０」の２段階であるが、「０」から「１」以上の数段階のポイントを付与してもよい。また、各単語一律にポイントを付与するのではなく、例えば、入力者の家族の名前を表す単語（文字列）には他の単語（文字列）より付与するポイントを多くする等、単語（文字列）の種類毎に付与するポイントに重みをつけてもよい。
ここで、文字列選択部１２は、各単語について、入力者が有する固有情報及び環境情報の各項目に付与されたポイントを合計する。例えば、「ただいま」という単語の場合、入力者の固有情報が「同居人あり」、「社会人」、「５０代」で、環境情報が「会社」、「夕方」であれば、「同居人あり」、「社会人」、「５０代」、「夕方」の各１ポイントが加算され、固有情報の合計ポイントは「３」、固有情報と環境情報の合計ポイントは「４」となる。
このようにして文字列選択部１２は、文字列候補抽出部１１から送られてくる複数の文字列候補の各々について、固有情報取得部１３と環境情報取得部１５とから送られてくる固有情報と環境情報に対して付与されているポイントを合計し、固有情報の合計ポイント、あるいは、固有情報と環境情報の合計ポイントの高い文字列を選択する。
そして、文字列選択部１２は、選択した文字列をディスプレイ４１に出力した後、入力者の操作によって、選択した文字列を無線部４２に出力する。
【００２６】
［出力部］
ディスプレイ４１は、文字列選択部１２から送られる文字列を表示する。これにより入力者は、入力した言語がどの文字列に変換されたかを確認することができ。そして、無線部４２は、入力者の操作により文字列選択部１２から送られる文字列を無線制御し、アンテナ４３を介して送信する。
【００２７】
［無線通信装置１の動作］
図５は、無線通信装置１の動作を示すフローチャートであり、以下図５に基づいて無線装置１の動作を説明する。
【００２８】
［入力操作受付〜複数の文字列候補の抽出］
まず、入力者から無線通信装置１の入力操作を受付け（Ｓ１）、入力者から入力される操作がカメラ入力か否かを判断し（Ｓ２）、カメラ入力であれば、入力者が言語を発するときの口唇の動きをカメラ３１が撮影し、撮影した口唇画像を入力する（Ｓ３）。
次いで、文字列候補抽出部１１が、入力された口唇画像と口唇画像データベース２１に格納されている標準口唇画像を対比し、どの標準口唇画像に対応するか解析して標準口唇画像を特定し（Ｓ４）、特定された標準口唇画像に対応する音声で構成される文字列を文字列候補として複数抽出する（Ｓ５）。
例えば、入力された口唇画像を解析した結果、対応する音声が母音で「ああいあ」となったとすると、この「ああいあ」の母音を有する文字列「ただいま」、「パパイア」が文字列候補として抽出される。
なお、この例では、入力された口唇画像の解析を母音までしか行っていないが、子音まで解析して母音と子音を組み合わせた音声で構成される文字列を文字列候補として抽出してもよい。
【００２９】
［固有情報の取得と環境情報の取得］
固有情報取得部１３が、固有情報記憶部２２から入力者の固有情報を取得する（Ｓ６）。
例えば、図２に示すように、入力者Ａの場合、家族構成は「同居人あり」、職業は「社会人」、年代は「５０代」という固有情報を取得し、入力者Ｂの場合、家族構成は「同居人なし」、職業は「無職」、年代は「２０代」という固有情報を取得する。
次いで、環境情報取得部１５が、ＧＰＳ受信機３３及び電波時計３４から入力されて情報変換部１４で変換された環境情報を取得する（Ｓ７）。
例えば、図３に示すように、場所は「会社」、時間は「夕方」という環境情報を取得する。
【００３０】
［特定の文字列の選択］
文字列選択部１２が、文字列候補抽出部１１が抽出した複数の文字列候補から、固有情報取得部１３が取得した固有情報に基づいて、あるいは、固有情報取得部１３が取得した固有情報と環境情報取得部１５が取得した環境情報に基づいて、特定の文字列を選択する（Ｓ８）。具体的には、図４に示すような予め単語（文字列）と固有情報・環境情報とを関係付けたテーブルを記憶しておき、複数の文字列候補の各々について、固有情報と環境情報に対して付与されているポイントを合計し、固有情報の合計ポイント、あるいは、固有情報と環境情報の合計ポイントの高い文字列を選択する（Ｓ８）。
図６（ａ）、（ｂ）は、候補単語（文字列）「ただいま」と「パパイヤ」について、入力者の固有情報と環境情報の各項目に付与にされるポイントとその合計を説明するための図である。
例えば、入力者がＡであり、その固有情報が家族構成は「同居人あり」、職業は「社会人」、年代は「５０代」であり、環境情報が場所は「会社」、時間は「夕方」である場合、図６（ａ）に示すように、「ただいま」については、家族構成、職業、年代、場所に１ポイントが付与され、固有情報の合計ポイントは「３」となり、固有情報と環境情報の合計ポイントは「４」となるが、「パパイヤ」については、どの項目にもポイントが付与されず、固有情報の合計ポイント、固有情報と環境情報の合計ポイント共に「０」となる。
よって、この場合は、固有情報の合計ポイント、固有情報と環境情報の合計ポイント共に「だだいま」の方が「パパイヤ」より高く、文字列選択部１２が選択する単語（文字列）は、「だだいま」となる。
一方、例えば、入力者がＢであり、その固有情報が家族構成は「同居人なし」、職業は「無職」、年代は「２０代」であり、環境情報が場所は「家」、時間は「朝」である場合、図６（ｂ）に示すように、「ただいま」については、どの項目にもポイントが付与されず、固有情報の合計ポイント、固有情報と環境情報の合計ポイント共に「０」となるが、「パパイヤ」については、年代と場所に１ポイントが付与され、固有情報の合計ポイントは「１」となり、固有情報と環境情報の合計ポイントは「２」となる。
よって、この場合は、固有情報の合計ポイント、固有情報と環境情報の合計ポイント共に「パパイヤ」の方が「ただいま」より高く、文字列選択部１２が選択する単語（文字列）は、「パパイヤ」となる。
【００３１】
［文字列の表示〜文字列の送信］
文字列選択部１２が選択した文字列はディスプレイ４１に表示し（Ｓ９）、表示した文字列を送信するかが判断され（Ｓ１０）、入力者の送信操作があった場合、無線部４２は、表示した文字列をアンテナ４３を介して送信する（Ｓ１１）。
【００３２】
［音声認識〜文字列の送信］
前記Ｓ２において、入力者から入力される操作がカメラ入力でないと判断した場合は、入力者から入力される操作がマイク入力であるか否かを判断し（Ｓ１３）、マイク入力であれば、音声認識手段（図示せず）が音声認識を行い（Ｓ１３）、入力された音声に対応する文字列を複数特定し（Ｓ１５）、前記Ｓ６〜Ｓ１１の処理を行う。
【産業上の利用可能性】
【００３３】
本発明の言語認識装置、言語認識方法及びプログラムは、携帯端末、ウエアラブル端末等の各種端末機器に使用され、口唇画像または音声情報の解析だけを行った場合に比べてより正確に入力された言語を認識できる。
【符号の説明】
【００３４】
１  無線通信装置
１０  制御部
１１  文字列候補抽出部
１２  文字列選択部
１３  固有情報取得部
１４  情報変換部
１５  環境情報取得部
２０  記憶部
２１  口唇画像データベース
２２  固有情報記憶部
３１  カメラ
３２  マイク
３３  ＧＰＳ受信機
３４  電波時計
４１  ディスプレイ
４２  無線部
４３  アンテナ
【図１】
2016184095.tif 000003
【図２】
2016184095.tif 000004
【図３】
2016184095.tif 000005
【図４】
2016184095.tif 000006
【図５】
2016184095.tif 000007
【図６】
2016184095.tif 000008