(57)【要約】  対話装置は、ユーザの所在位置を示す位置情報を取得する位置取得部と、各デバイスと所在位置とを関連付けている設定情報を参照して、ユーザの位置情報に関連付けられたデバイスを抽出するデバイス抽出部と、各デバイスと当該デバイスの制御指示を表す指示フレーズとを関連付けている語彙情報を参照して、抽出されたデバイスに関連付けられている指示フレーズを抽出するフレーズ抽出部と、指示フレーズに基づいて、デバイスを制御するための発話文を生成する生成部と、生成された発話文をユーザに対して提示する提示部と、を備える。
2020095633.tif 000002
【特許請求の範囲】
【請求項１】
デバイスを制御する制御情報を生成するための、音声またはテキストからなるユーザ発話を受け付ける対話装置であって、
ユーザの所在位置を示す位置情報を取得する位置取得部と、
各デバイスと所在位置とを関連付けている設定情報を参照して、前記位置取得部により取得された前記位置情報に関連付けられたデバイスを抽出するデバイス抽出部と、
各デバイスと、当該デバイスの制御指示を表し少なくとも一以上の語句または文を含む指示フレーズとを関連付けている語彙情報を参照して、前記デバイス抽出部により抽出されたデバイスに関連付けられている一以上の指示フレーズを抽出するフレーズ抽出部と、
前記フレーズ抽出部により抽出された前記指示フレーズに基づいて、前記デバイスを制御するための発話文を生成する生成部と、
前記生成部により生成された前記発話文を前記ユーザに対して提示する提示部と、
を備える対話装置。
【請求項２】
現在時刻を取得する時刻取得部と、
時間帯または時刻ごとの前記デバイスの制御履歴に関する履歴情報を参照して、前記時刻取得部により取得された前記現在時刻に対応する時間帯または時刻における前記デバイスの制御履歴を取得する履歴取得部と、を更に備え、
前記語彙情報は、前記デバイスごとに、制御内容と前記指示フレーズとを関連付けており、
前記フレーズ抽出部は、前記デバイス抽出部により抽出されたデバイス及び前記履歴取得部により取得された制御履歴に示される制御内容に基づいて、前記指示フレーズを抽出する、
請求項１に記載の対話装置。
【請求項３】
前記履歴情報は、ユーザごとの制御履歴を含み、
前記フレーズ抽出部は、前記ユーザの制御履歴に基づいて、前記指示フレーズを抽出する、
請求項２に記載の対話装置。
【請求項４】
前記提示部は、前記発話文を示すテキストを前記ユーザの端末に表示させる、
請求項１〜３のいずれか一項に記載の対話装置。
【請求項５】
前記提示部は、前記発話文を示すテキストが関連付けられ指示操作可能な操作オブジェクトを前記ユーザの端末に表示させ、
前記対話装置は、前記ユーザの端末において前記操作オブジェクトが操作された場合に、前記テキストの内容の音声からなるユーザ発話を受け付けた場合と同様のデバイスの制御情報を生成する、
請求項１〜４のいずれか一項に記載の対話装置。
【請求項６】
前記設定情報を管理しているシステムから前記設定情報を取得する設定情報取得部、をさらに備え、
前記デバイス抽出部は、前記設定情報取得部により取得された前記設定情報を参照する、
請求項１〜５のいずれか一項に記載の対話装置。
【請求項７】
コンピュータを、デバイスを制御する制御情報を生成するための、音声またはテキストからなるユーザ発話を受け付ける対話装置として機能させるための対話プログラムであって、
前記コンピュータに、
ユーザの所在位置を示す位置情報を取得する位置取得機能と、
各デバイスと所在位置とを関連付けている設定情報を参照して、前記位置取得機能により取得された前記位置情報に関連付けられたデバイスを抽出するデバイス抽出機能と、
各デバイスと、当該デバイスの制御指示を表し少なくとも一以上の語句または文を含む指示フレーズとを関連付けている語彙情報を参照して、前記デバイス抽出機能により抽出されたデバイスに関連付けられている一以上の指示フレーズを抽出するフレーズ抽出機能と、
前記フレーズ抽出機能により抽出された前記指示フレーズに基づいて、前記デバイスを制御するための発話文を生成する生成機能と、
前記生成機能により生成された前記発話文を前記ユーザに対して提示する提示機能と、
を実現させる対話プログラム。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、対話装置及び対話プログラムに関する。
【背景技術】
【０００２】
家電機器を含むいわゆるＩｏＴ（Ｉｎｔｅｒｎｅｔ  ｏｆ  Ｔｈｉｎｇｓ）デバイス等のデバイスを、発話により操作及び制御する技術が知られている。このような技術では、ユーザによる発話の音声認識及び形態素解析等により指示の内容が判断され、制御情報が出力される。特許文献１には、家電機器を管理するサーバが、各家電機器に対応する操作画面を端末装置に提供する技術が記載されている。
【先行技術文献】
【特許文献】
【０００３】
【特許文献１】特開２００２−１８６０５７号公報
【発明の概要】
【発明が解決しようとする課題】
【０００４】
ユーザの発話によりデバイスの制御を実施するシステムにおいて、制御対象の機器に関する情報及び発話内容に関する選択肢等が示されない状況では、ユーザがどのような発話をすべきかを認識するのは困難である。デバイスを制御するための発話内容として予め記憶されたシナリオに基づいて、ユーザに発話内容を案内する技術が存在するが、そのような技術であっても、予め記憶されたシナリオに基づいて案内するので、制御対象のデバイスの変更及びユーザの状況の変化等に応じて柔軟且つ動的に発話内容を提示することはできない。【０００５】
特許文献１に記載された技術では、家電機器を操作するための操作画面が示されるにすぎず、ユーザの発話を支援するものではない。また、この操作画面は、予め記憶されたものであるので、状況に応じて表示内容を動的に変更させることはできない。【０００６】
そこで、本発明は、上記問題点に鑑みてなされたものであり、ユーザの発話によりデバイスを制御する技術において、制御対象のデバイスの種類及びユーザの状況に応じて、好適な発話内容を案内することにより、利便性の向上を図ることを目的とする。
【課題を解決するための手段】
【０００７】
上記課題を解決するために、本発明の一形態に係る対話装置は、デバイスを制御する制御情報を生成するための、音声またはテキストからなるユーザ発話を受け付ける対話装置であって、ユーザの所在位置を示す位置情報を取得する位置取得部と、各デバイスと所在位置とを関連付けている設定情報を参照して、位置取得部により取得された位置情報に関連付けられたデバイスを抽出するデバイス抽出部と、各デバイスと、当該デバイスの制御指示を表し少なくとも一以上の語句または文を含む指示フレーズとを関連付けている語彙情報を参照して、デバイス抽出部により抽出されたデバイスに関連付けられている一以上の指示フレーズを抽出するフレーズ抽出部と、フレーズ抽出部により抽出された指示フレーズに基づいて、デバイスを制御するための発話文を生成する生成部と、生成部により生成された発話文をユーザに対して提示する提示部と、を備える。【０００８】
上記課題を解決するために、本発明の一形態に係る対話プログラムは、コンピュータを、デバイスを制御する制御情報を生成するための、音声またはテキストからなるユーザ発話を受け付ける対話装置として機能させるための対話プログラムであって、コンピュータに、ユーザの所在位置を示す位置情報を取得する位置取得機能と、各デバイスと所在位置とを関連付けている設定情報を参照して、位置取得機能により取得された位置情報に関連付けられたデバイスを抽出するデバイス抽出機能と、各デバイスと、当該デバイスの制御指示を表し少なくとも一以上の語句または文を含む指示フレーズとを関連付けている語彙情報を参照して、デバイス抽出機能により抽出されたデバイスに関連付けられている一以上の指示フレーズを抽出するフレーズ抽出機能と、フレーズ抽出機能により抽出された指示フレーズに基づいて、デバイスを制御するための発話文を生成する生成機能と、生成機能により生成された発話文をユーザに対して提示する提示機能と、を実現させる。【０００９】
上記の形態によれば、ユーザの所在位置を示す位置情報に関連付けられているデバイスが抽出され、抽出されたデバイスの制御指示を表す指示フレーズに基づいて、発話文が生成されるので、ユーザが現在の所在位置において制御操作を実施しようとしている可能性が高いデバイスを適切に制御可能な発話文をユーザに提示できる。ユーザは、提示された発話文を発話することにより、所望のデバイスの制御を実施できる可能性が高いので、利便性の向上が図られる。
【発明の効果】
【００１０】
ユーザの発話によりデバイスを制御する技術において、制御対象のデバイスの種類及びユーザの状況に応じて、好適な発話内容を案内することにより、利便性の向上を図ることが可能となる。
【図面の簡単な説明】
【００１１】
【図１】本実施形態に係る対話装置を含む対話システムの装置構成を示す図である。
【図２】本実施形態に係る対話装置の機能的構成を示す機能ブロック図である。
【図３】対話装置のハードブロック図である。
【図４】設定情報記憶部の構成及び記憶されているデータの例を示す図である。
【図５】図５（ａ）及び図５（ｂ）は、デバイスごとの利用ログの例を示す図である。
【図６】語彙情報記憶部の構成及び記憶されているデータの例を示す図である。
【図７】発話文が表示されたユーザの端末の画面例を示す図である。
【図８】本実施形態の対話方法の処理内容を示すフローチャートである。
【図９】本実施形態の対話方法の処理内容を示すフローチャートである。
【図１０】対話プログラムの構成を示す図である。
【発明を実施するための形態】
【００１２】
本発明に係る対話装置及び対話プログラムの実施形態について図面を参照して説明する。なお、可能な場合には、同一の部分には同一の符号を付して、重複する説明を省略する。
【００１３】
図１は、本実施形態に係る対話システムの装置構成を示す図である。対話システム１は、対話装置１０、外部システム３０及び端末５０を含む。対話装置１０と端末５０とは、互いに通信可能である。また、対話装置１０と外部システムとは互いに通信可能である。
【００１４】
対話装置１０は、デバイスを制御する制御情報を生成するための、音声またはテキストからなるユーザ発話を受け付ける装置である。また、対話装置１０は、外部システム３０が管理するデバイスを操作するために、制御情報を外部システム３０に送信してもよい。対話装置１０は、例えば、サーバ等のコンピュータにより構成されるが、対話装置１０を構成する装置は限定されない。
【００１５】
外部システム３０は、家電機器等を含むいわゆるＩｏＴ（Ｉｎｔｅｒｎｅｔ  ｏｆ  Ｔｈｉｎｇｓ）デバイス等のデバイスを管理するデバイス管理システムを構成する。外部システム３０は、複数のデバイスとそれぞれの通信規格に従った通信をすることが可能である。
【００１６】
外部システム３０は、各デバイスを制御するためのインターフェースを構成しうる設定情報をデバイス毎に有しており、設定情報の利用及び参照により、対話装置１０から受信した制御情報に基づいて、管理下にあるデバイスのいずれかを制御できる。
【００１７】
設定情報記憶部３１は、制御対象のデバイスの設定情報を記憶している記憶手段である。設定情報は、デバイスの制御のために利用及び参照される情報である。設定情報の詳細については後述する。なお、図１に示す例では、設定情報記憶部３１は、外部システム３０内に構成されているが、このような構成には限定されず、外部システム３０からアクセス可能であれば、外部システム３０外に構成されてもよい。
【００１８】
端末５０は、発話によるデバイスの制御において、ユーザとのインターフェースを構成する装置であって、例えば、据置型又は携帯型のパーソナルコンピュータ、高機能携帯電話機（スマートフォン）等により構成されるが、端末５０を構成する装置は限定されず、例えば携帯電話機、携帯情報端末（ＰＤＡ）などの携帯端末でもよい。
【００１９】
端末５０は、ユーザに発せられた音声のデータをユーザ発話として対話装置に送信できる。また、端末５０は、ユーザの音声を音声認識処理によりテキスト化したデータをユーザ発話として対話装置１０に送信してもよい。
【００２０】
また、端末５０は、後述されるように、対話装置１０から送信された発話文をユーザに対して提示できる。具体的には、端末５０は、発話文を示すテキストをディスプレイに表示することにより、発話文をユーザに提示する。また、端末５０は、発話文を示すテキストが関連付けられ指示操作が可能な操作オブジェクトをディスプレイに表示してもよい。操作オブジェクトは、ユーザによる操作が可能なボタンの態様で表示されてもよい。表示された操作オブジェクトに対する操作が受け付けられた場合には、端末５０は、操作オブジェクトが操作された旨の情報、操作オブジェクトに関連付けられた発話文のテキストデータまたは音声データを、ユーザ発話として対話装置１０に送信してもよい。
【００２１】
図２は、本実施形態に係る対話装置１０の機能的構成を示す図である。図２に示すように、対話装置１０は、位置取得部１１、時刻取得部１２、設定情報取得部１３、デバイス抽出部１４、フレーズ抽出部１５、生成部１６、提示部１７、発話受付部１８及び制御指示送信部１９を含む。また、対話装置１０は、語彙情報記憶部２０を含む。対話装置１０に含まれる各機能部は、複数の装置に分散されて構成されても良いし、例えば、一部の機能部が端末５０に構成されてもよい。
【００２２】
なお、図２に示したブロック図は、機能単位のブロックを示している。これらの機能ブロック（構成部）は、ハードウェア及び／又はソフトウェアの任意の組み合わせによって実現される。また、各機能ブロックの実現手段は特に限定されない。すなわち、各機能ブロックは、物理的及び／又は論理的に結合した１つの装置により実現されてもよいし、物理的及び／又は論理的に分離した２つ以上の装置を直接的及び／又は間接的に(例えば、有線及び／又は無線)で接続し、これら複数の装置により実現されてもよい。
【００２３】
機能には、判断、決定、判定、計算、算出、処理、導出、調査、探索、確認、受信、送信、出力、アクセス、解決、選択、選定、確立、比較、想定、期待、見做し、報知（broadcasting）、通知（notifying）、通信（communicating）、転送（forwarding）、構成（configuring）、再構成（reconfiguring）、割り当て（allocating、mapping）、割り振り（assigning）などがあるが、これらに限られない。たとえば、送信を機能させる機能ブロック（構成部）は、送信部（transmitting  unit）や送信機（transmitter）と呼称される。いずれも、上述したとおり、実現方法は特に限定されない。
【００２４】
例えば、本発明の一実施の形態における対話装置１０は、コンピュータとして機能してもよい。図３は、本実施形態に係る対話装置１０のハードウェア構成の一例を示す図である。対話装置１０は、物理的には、プロセッサ１００１、メモリ１００２、ストレージ１００３、通信装置１００４、入力装置１００５、出力装置１００６、バス１００７などを含むコンピュータ装置として構成されてもよい。
【００２５】
なお、以下の説明では、「装置」という文言は、回路、デバイス、ユニットなどに読み替えることができる。対話装置１０のハードウェア構成は、図３に示した各装置を１つ又は複数含むように構成されてもよいし、一部の装置を含まずに構成されてもよい。
【００２６】
対話装置１０における各機能は、プロセッサ１００１、メモリ１００２などのハードウェア上に所定のソフトウェア（プログラム）を読み込ませることで、プロセッサ１００１が演算を行い、通信装置１００４による通信や、メモリ１００２及びストレージ１００３におけるデータの読み出し及び／又は書き込みを制御することで実現される。
【００２７】
プロセッサ１００１は、例えば、オペレーティングシステムを動作させてコンピュータ全体を制御する。プロセッサ１００１は、周辺装置とのインターフェース、制御装置、演算装置、レジスタなどを含む中央処理装置（ＣＰＵ：Central  Processing  Unit）で構成されてもよい。また、プロセッサ１００１は、ＧＰＵ（Graphics  Processing  Unit）を含んで構成されてもよい。例えば、図２に示した各機能部１１〜１９などは、プロセッサ１００１で実現されてもよい。
【００２８】
また、プロセッサ１００１は、プログラム（プログラムコード）、ソフトウェアモジュールやデータを、ストレージ１００３及び／又は通信装置１００４からメモリ１００２に読み出し、これらに従って各種の処理を実行する。プログラムとしては、上述の実施の形態で説明した動作の少なくとも一部をコンピュータに実行させるプログラムが用いられる。例えば、対話装置１０の各機能部１１〜１９は、メモリ１００２に格納され、プロセッサ１００１で動作する制御プログラムによって実現されてもよい。上述の各種処理は、１つのプロセッサ１００１で実行される旨を説明してきたが、２以上のプロセッサ１００１により同時又は逐次に実行されてもよい。プロセッサ１００１は、１以上のチップで実装されてもよい。なお、プログラムは、電気通信回線を介してネットワークから送信されても良い。
【００２９】
メモリ１００２は、コンピュータ読み取り可能な記録媒体であり、例えば、ＲＯＭ（Read  Only  Memory）、ＥＰＲＯＭ（Erasable  Programmable  ＲＯＭ）、ＥＥＰＲＯＭ（Electrically Erasable Programmable ＲＯＭ）、ＲＡＭ（Random  Access  Memory）などの少なくとも１つで構成されてもよい。メモリ１００２は、レジスタ、キャッシュ、メインメモリ（主記憶装置）などと呼ばれてもよい。メモリ１００２は、本発明の一実施の形態に係る対話方法を実施するために実行可能なプログラム（プログラムコード）、ソフトウェアモジュールなどを保存することができる。
【００３０】
ストレージ１００３は、コンピュータ読み取り可能な記録媒体であり、例えば、ＣＤ−ＲＯＭ（Compact  Disc  ＲＯＭ）などの光ディスク、ハードディスクドライブ、フレキシブルディスク、光磁気ディスク(例えば、コンパクトディスク、デジタル多用途ディスク、Ｂｌｕ−ｒａｙ（登録商標）ディスク)、スマートカード、フラッシュメモリ(例えば、カード、スティック、キードライブ)、フロッピー（登録商標）ディスク、磁気ストリップなどの少なくとも１つで構成されてもよい。ストレージ１００３は、補助記憶装置と呼ばれてもよい。上述の記憶媒体は、例えば、メモリ１００２及び／又はストレージ１００３を含むデータベース、サーバその他の適切な媒体であってもよい。
【００３１】
通信装置１００４は、有線及び／又は無線ネットワークを介してコンピュータ間の通信を行うためのハードウェア（送受信デバイス）であり、例えばネットワークデバイス、ネットワークコントローラ、ネットワークカード、通信モジュールなどともいう。
【００３２】
入力装置１００５は、外部からの入力を受け付ける入力デバイス（例えば、キーボード、マウス、マイクロフォン、スイッチ、ボタン、センサなど）である。出力装置１００６は、外部への出力を実施する出力デバイス（例えば、ディスプレイ、スピーカー、LEDランプなど）である。なお、入力装置１００５及び出力装置１００６は、一体となった構成（例えば、タッチパネル）であってもよい。
【００３３】
また、プロセッサ１００１やメモリ１００２などの各装置は、情報を通信するためのバス１００７で接続される。バス１００７は、単一のバスで構成されてもよいし、装置間で異なるバスで構成されてもよい。
【００３４】
また、対話装置１０は、マイクロプロセッサ、デジタル信号プロセッサ（ＤＳＰ：Digital  Signal  Processor）、ＡＳＩＣ（Application  Specific  Integrated  Circuit）、ＰＬＤ（Programmable  Logic  Device）、ＦＰＧＡ（Field  Programmable  Gate  Array）などのハードウェアを含んで構成されてもよく、当該ハードウェアにより、各機能ブロックの一部又は全てが実現されてもよい。例えば、プロセッサ１００１は、これらのハードウェアの少なくとも１つで実装されてもよい。
【００３５】
再び図２を参照して、対話装置１０の各機能部について説明する。位置取得部１１は、ユーザの所在位置を示す位置情報を取得する。具体的には、位置取得部１１は、例えば、ユーザの端末５０が備えるＧＰＳ装置（図示せず）等により取得された位置情報を取得する。位置取得部１１は、本実施形態の対話システム１が適用される空間に設けられた人感センサ（図示せず）により検出された検出情報に基づいて、位置情報を取得してもよい。また、端末５０が移動無線通信端末である場合には、位置取得部１１は、端末５０の在圏情報を位置情報として取得してもよい。位置取得部１１は、その他の周知の手法によりユーザの位置情報を取得してもよい。
【００３６】
時刻取得部１２は、現在時刻を示す情報を取得する。
【００３７】
設定情報取得部１３は、設定情報を取得する。具体的には、設定情報取得部１３は、外部システム３０の設定情報記憶部３１から設定情報を取得する。設定情報は、各デバイスの属性を含みデバイスの制御のために参照される。
【００３８】
図４は、設定情報記憶部３１の構成及び記憶されているデータの例を示す情報である。図４に示すように、設定情報記憶部３１は、デバイスを識別するデバイスＩＤに関連付けて、各種の属性を設定情報として記憶している。図４に示す例では、設定情報記憶部３１は、デバイスＩＤごとに、当該デバイスのカテゴリを示すデバイス、ニックネーム、グループ、デバイス状態及び利用ログ等の設定情報を記憶している。例えば、設定情報記憶部３１は、デバイスＩＤ「１」に関連付けて、デバイス「ＴＶ」、ニックネーム「お父さんのＴＶ」、グループ「リビング」、デバイス状態「ＯＦＦ」及び利用ログ「Ｌ１」等の設定情報を記憶している。
【００３９】
設定情報は、少なくとも「グループ」の情報を含む。「グループ」は、当該デバイスが設けられた所在位置を示す情報であることができる。また、「グループ」は、複数のデバイスをグルーピングするためのその他の情報であってもよい。
【００４０】
また、設定情報は、時間帯または時刻ごとのデバイスの制御履歴に関する情報である利用ログ（履歴情報）を含んでもよい。即ち、設定情報取得部１３は、履歴情報としての利用ログを取得する履歴情報取得部を構成することができる。
【００４１】
図５は、利用ログの例を示す図である。図５（ａ）は、デバイスＩＤ「１」の利用ログＬ１を模式的に示す図である。図５（ｂ）は、デバイスＩＤ「２」の利用ログＬ２を模式的に示す図である。図５（ａ）及び図５（ｂ）に示されるように、利用ログは、制御が実施された時刻、当該デバイスの制御を実施したユーザ及び制御内容を、デバイスの制御履歴として含む。
【００４２】
例えば、図５（ａ）に示されるように、デバイスＩＤ「１」のデバイス「テレビ」は、時刻「ｔ１」において、ユーザＩＤ「Ｕ１」により示されるユーザ「父」により、制御内容「ＯＮ」を実施されている。また、例えば、図５（ｂ）に示されるように、デバイスＩＤ「２」のデバイス「ライト」は、時刻「ｔ１２」において、ユーザＩＤ「Ｕ２」により示されるユーザ「母」により、制御内容「ＯＦＦ」を実施されている。
【００４３】
再び図４を参照して、設定情報は、さらに、ニックネーム及びデバイス情報を設定情報として含んでもよい。ニックネームは、発話文において、当該デバイスを指し示すための名称である。一のデバイスに対して、複数のユーザがそれぞれのニックネームを設定することが可能である。ニックネームの設定では、ユーザからみて、各デバイスがそれぞれにユニークに識別されればよい。デバイス状態は、当該デバイスの動作状態を示す情報であって、リアルタイムに更新される情報である。
【００４４】
設定情報取得部１３は、ユーザ発話を受け付ける待機状態の所定のタイミングにおいて、所定の分量の設定情報を一括で取得してもよい。また、設定情報取得部１３は、後に詳述されるデバイス抽出部１４及びフレーズ抽出部１５等において設定情報が参照されるタイミングにおいて、その都度に必要な設定情報を取得してもよい。
【００４５】
デバイス抽出部１４は、設定情報を参照して、位置取得部１１により取得された位置情報に関連付けられたデバイスを抽出する。上記のとおり、設定情報は、デバイスと当該デバイスの所在位置を示すグループとの関連付けを含むので、デバイス抽出部１４は、設定情報を参照することにより、ユーザの所在位置に所在するデバイスを抽出できる。
【００４６】
例えば、位置取得部１１により取得された位置情報により、ユーザの所在位置がリビングであることが示される場合には、デバイス抽出部１４は、図４に示される設定情報を参照して、「リビング」に関連付けられたデバイスであるデバイスＩＤ「１」の「ＴＶ」、デバイスＩＤ「２」の「ライト」、デバイスＩＤ「３」の「ライト」及びデバイスＩＤ「５」の「エアコン」を抽出する。
【００４７】
フレーズ抽出部１５は、語彙情報を参照して、デバイス抽出部１４により抽出されたデバイスに関連付けられている一以上の指示フレーズを抽出する。語彙情報は、各デバイスと、当該デバイスの制御指示を表し少なくとも一以上の語句または文を含む指示フレーズとを関連付けている情報である。フレーズ抽出部１５は、語彙情報記憶部２０に記憶されている語彙情報を参照して指示フレーズを抽出する。
【００４８】
図６は、語彙情報記憶部２０の構成及び記憶されているデータの例を示す図である。図６に示されるように、語彙情報記憶部２０は、デバイスの種別を示すデバイスカテゴリに少なくとも指示フレーズを関連付けた語彙情報を記憶している。語彙情報記憶部２０は、デバイスカテゴリに関連付けて、制御内容、設定項目、ゆらぎ吸収語句をさらに含んでもよい。
【００４９】
制御内容は、関連付けられている指示フレーズの発話により達せられる目的であって、デバイスに対して実施される制御の内容を示す。設定項目は、例えば制御内容がデバイスのパラメータの変更に関するものである場合等において、指示フレーズに対してオプションとして付加される、パラメータの変更幅等に関する語句である。ゆらぎ吸収語句は、指示フレーズを含む発話文の提示に応じたユーザ発話の語句のゆらぎを吸収するための辞書である。
【００５０】
フレーズ抽出部１５は、例えば、デバイス抽出部により抽出されたデバイスが「ＴＶ」である場合に、デバイスカテゴリ「ＴＶ」に関連付けられた指示フレーズである「つけて」、「けして」、「音量を上げて」、「音量を下げて」及び「チャンネルを変えて」を語彙情報から抽出する。
【００５１】
また、フレーズ抽出部１５は、現在時刻に対応するデバイスの制御履歴に基づいて、指示フレーズを抽出してもよい。具体的には、フレーズ抽出部１５は、設定情報（図４参照）の利用ログを参照して、現在時刻に対応する時間帯または時刻におけるデバイスの制御履歴を利用ログ（図５参照）から取得する。
【００５２】
例えば、現在時刻に時刻「ｔ３」が対応する場合には、フレーズ抽出部１５は、制御履歴（時刻「ｔ３」、ユーザ「Ｕ１」、制御内容「ＯＮ」）を取得する。そして、フレーズ抽出部１５は、抽出した制御履歴に対応するデバイス「ＴＶ」に関連付けられた指示フレーズのうちの、制御内容「ＯＮ」に対応する指示フレーズ「つけて」を抽出する。
【００５３】
なお、フレーズ抽出部１５は、現在時刻に対応する制御履歴の抽出に際して、参照する利用ログを、デバイス抽出部１４により抽出されたデバイスの利用ログに絞り込んで制御履歴の抽出を実施することとしてもよい。また、フレーズ抽出部１５は、利用ログに含まれる制御履歴を、端末５０のユーザの制御履歴に絞り込んだ上で、現在時刻に対応する制御履歴の抽出を実施することとしてもよい。端末５０のユーザに関する情報は、例えば、アカウント情報等に基づく方法の他、その他の周知の手法により取得できる。
【００５４】
生成部１６は、フレーズ抽出部１５により抽出された指示フレーズに基づいて、デバイスを制御するための発話文を生成する。具体的には、生成部１６は、フレーズ抽出部１５により抽出された指示フレーズを発話文として生成してもよい。
【００５５】
また、生成部１６は、フレーズ抽出部１５により抽出された指示フレーズに関連付けられたデバイスカテゴリを、制御対象を示す語句として指示フレーズに付加して、発話文を生成してもよい。例えば、フレーズ抽出部１５によりデバイス「ＴＶ」の制御内容「ＯＮ」に対応する指示フレーズ「つけて」が抽出された場合には、生成部１６は、その制御対象を示す「ＴＶ」及び助詞を指示フレーズ「つけて」に付加して、発話文「ＴＶをつけて」を生成してもよい。
【００５６】
また、生成部１６は、フレーズ抽出部１５により抽出された指示フレーズがデバイスのパラメータの変更を目的とするものである場合に、その変更幅を示す語句を指示フレーズに付加して、発話文を生成してもよい。例えば、フレーズ抽出部１５により、デバイス「エアコン」の制御内容「設定温度を上げる」に対応する指示フレーズ「温度を上げて」が抽出された場合には、生成部１６は、エアコンのパラメータである温度の変更幅を示す語句として設定項目に記憶されている「少し」，「２度」という語句を指示フレーズに付加して、発話文「温度を少し上げて」，「温度を２度上げて」を生成してもよい。
【００５７】
提示部１７は、生成部１６により生成された発話文をユーザに対して提示する。具体的には、提示部１７は、発話文を示すテキスト情報をユーザの端末５０に送信し、発話文を示すテキストを端末５０のディスプレイに表示させる。
【００５８】
図７は、発話文が表示されたユーザの端末５０の画面例を示す図である。図７に示されるように、端末５０の画面Ｄは、発話文を示すテキストｂ１，ｂ２を含む。このように、生成された発話文を示すテキストがユーザの端末５０において提示されることにより、ユーザはその発話文を発することができる。
【００５９】
また、提示部１７は、発話文を示すテキストが関連付けられ指示操作可能な操作オブジェクトをユーザの端末５０に表示させてもよい。この場合には、提示部１７は、図７の画面例において、テキストｂ１及びテキストｂ２のそれぞれを、ユーザにより指示操作可能なボタン等の操作オブジェクトとして構成して、ディスプレイＤに表示させる。提示部１７が、このような操作オブジェクトを端末５０に表示させる場合には、対話装置１０は、ユーザの端末５０において操作オブジェクトが操作された場合に、テキストの内容の音声からなるユーザ発話を受け付けた場合と同様のデバイスの制御情報を生成する。
【００６０】
発話受付部１８は、ユーザの発話をユーザ発話として受け付ける。具体的には、発話受付部１８は、発話文を提示されたユーザが端末５０に対して発した発話を表す音声またはテキストを、端末５０を介して、ユーザ発話として受け付ける。
【００６１】
また、発話文が関連付けられたボタン等の操作オブジェクトが端末５０において提示され、操作オブジェクトに対する指示操作が端末５０において受け付けられた場合には、発話受付部１８は、操作オブジェクトが操作された旨の情報をユーザ発話として受け付ける。
【００６２】
制御指示送信部１９は、ユーザ発話に基づいて、外部システム３０により管理されているデバイスを制御するための制御情報を送信する。具体的には、発話受付部１８により音声データからなるユーザ発話が受け付けられた場合には、制御指示送信部１９は、ユーザ発話に対して、音声認識処理、形態素解析及び所定の解析処理を実施することにより、デバイスを制御するための制御情報を生成し、生成した制御情報を外部システム３０に送信する。なお、ユーザ発話がテキストデータとして受け付けられた場合には、音声認識処理は不要である。
【００６３】
操作オブジェクトが操作された旨の情報がユーザ発話として受け付けられた場合には、制御指示送信部１９は、当該操作オブジェクトに関連付けられた発話文のテキストデータがユーザ発話として受け付けられたものとみなして、そのテキストデータに対する形態素解析及び所定の解析処理を実施することにより、デバイスを制御するための制御情報を生成する。
【００６４】
次に、図８を参照して、対話装置１０における処理内容を説明する。図８は、本実施形態の対話方法の処理内容を示すフローチャートである。
【００６５】
ステップＳ１において、対話装置１０は、ユーザ発話の受付待機状態に制御おされる。具体的には、発話受付部１８が、ユーザ発話の受付待機状態に制御される。
【００６６】
ステップＳ２において、設定情報取得部１３は、外部システム３０の設定情報記憶部３１から設定情報を取得する。
【００６７】
ステップＳ３において、位置取得部１１は、ユーザの所在位置を示す位置情報を取得する。具体的には、位置取得部１１は、例えば、ユーザの端末５０が備えるＧＰＳ装置（図示せず）等、及び、本実施形態の対話システム１が適用される空間に設けられた人感センサにより検出された検出情報に基づいて、ユーザの位置情報を取得する。
【００６８】
ステップＳ４において、位置取得部１１は、ステップＳ３におけるユーザの位置情報の取得に成功したか否かを判定する。位置情報の取得に成功したと判定された場合には、処理はステップＳ５に進む。一方、位置情報の取得に成功したと判定されなかった場合には、処理はステップＳ８に進む。
【００６９】
ステップＳ５において、デバイス抽出部１４は、設定情報を参照して、ステップＳ３において位置取得部１１により取得された位置情報に関連付けられたデバイスを抽出する。前述のとおり、設定情報は、デバイスと当該デバイスの所在位置を示すグループとの関連付けを含むので、デバイス抽出部１４は、設定情報のグループの情報を参照することにより、ユーザの所在位置に所在するデバイスを抽出できる。
【００７０】
ステップＳ６において、フレーズ抽出部１５は、語彙情報を参照して、ステップＳ５においてデバイス抽出部１４により抽出されたデバイスに関連付けられている一以上の指示フレーズを抽出する。
【００７１】
ステップＳ７において、生成部１６は、ステップＳ５においてデバイス抽出部１４により抽出されたデバイス及びステップＳ６においてフレーズ抽出部１５により抽出された指示フレーズに基づいて、デバイスを制御するための発話文を生成する。
【００７２】
一方、ステップＳ８では、生成部１６は、デバイスの種別に依存しない発話文を生成する。具体的には、例えば、生成部１６は、語彙情報からランダムに抽出した指示フレームに基づいて発話文を生成してもよい。また、生成部１６は、発話受付部１８により受け付けられたユーザ発話の履歴を参照して、直近に受け付けられたユーザ発話を発話文としてもよい。
【００７３】
ステップＳ９において、提示部１７は、生成部１６により生成された発話文をユーザに対して提示する。具体的には、提示部１７は、発話文を示すテキスト情報をユーザの端末５０に送信し、発話文を示すテキストを端末５０のディスプレイに表示させる。
【００７４】
次に、図９を参照して、対話装置１０における処理内容の他の例を説明する。図９は、本実施形態の対話方法の処理内容を示すフローチャートである。図８に示した処理ではユーザの位置情報が用いられるのに対して、図９に示す処理では、ユーザの位置情報に加えて、現在時刻の情報が用いられる。
【００７５】
ステップＳ１１〜Ｓ１５の処理は、図８に示したステップＳ１〜Ｓ５の処理と同様である。なお、ステップＳ１４において、位置情報の取得に成功したと判定されなかった場合には、処理はステップＳ２１に進む。
【００７６】
ステップＳ１６において、時刻取得部１２は、現在時刻を示す情報を取得する。ステップＳ１７において、時刻取得部１２は、現在時刻を示す情報の取得に成功したか否かを判定する。現在時刻の取得に成功したと判定された場合には、処理はステップＳ１８に進む。一方、現在時刻の取得に成功したと判定されなかった場合には、処理はステップＳ２１に進む。
【００７７】
ステップＳ１８において、設定情報取得部１３は、ステップＳ１６において取得された現在時刻に対応する時間帯または時刻における、ステップＳ１５において取得されたデバイスの制御履歴を取得する。現在時刻に対応する時間帯は、例えば、現在時刻を含む所定幅の時間帯である。
【００７８】
ステップＳ１９において、フレーズ抽出部１５は、ステップＳ１５において取得されたデバイスに関しての、ステップＳ１８において取得された制御履歴に示される制御内容に関連付けられた指示フレーズを、語彙情報を参照して抽出する。
【００７９】
ステップＳ２０において、生成部１６は、ステップＳ１５においてデバイス抽出部１４により抽出されたデバイス及びステップＳ１９においてフレーズ抽出部１５により抽出された指示フレーズに基づいて、デバイスを制御するための発話文を生成する。
【００８０】
一方、ステップＳ２１では、生成部１６は、デバイスの種別及び現在時刻に依存しない発話文を生成する。具体的には、例えば、生成部１６は、語彙情報からランダムに抽出した指示フレームに基づいて発話文を生成してもよい。また、生成部１６は、発話受付部１８により受け付けられたユーザ発話の履歴を参照して、直近に受け付けられたユーザ発話を発話文としてもよい。
【００８１】
ステップＳ２２において、提示部１７は、生成部１６により生成された発話文をユーザに対して提示する。具体的には、提示部１７は、発話文を示すテキスト情報をユーザの端末５０に送信し、発話文を示すテキストを端末５０のディスプレイに表示させる。
【００８２】
次に、コンピュータを、本実施形態の対話装置１０として機能させるための対話プログラムについて説明する。図１０は、対話プログラムＰ１の構成を示す図である。
【００８３】
対話プログラムＰ１は、対話装置１０における対話処理を統括的に制御するメインモジュールｍ１０、位置取得モジュールｍ１１、時刻取得モジュールｍ１２、設定情報取得モジュールｍ１３、デバイス抽出モジュールｍ１４、フレーズ抽出モジュールｍ１５、生成モジュールｍ１６、提示モジュールｍ１７、発話受付モジュールｍ１８及び制御指示送信モジュールｍ１９を備えて構成される。そして、各モジュールｍ１１〜ｍ１９により、対話装置１０における位置取得部１１、時刻取得部１２、設定情報取得部１３、デバイス抽出部１４、フレーズ抽出部１５、生成部１６、提示部１７、発話受付部１８及び制御指示送信部１９のための各機能が実現される。なお、対話プログラムＰ１は、通信回線等の伝送媒体を介して伝送される態様であってもよいし、図１０に示されるように、記録媒体Ｍ１に記憶される態様であってもよい。
【００８４】
以上説明した本実施形態の対話装置１０では、ユーザの所在位置を示す位置情報に関連付けられているデバイスが抽出され、抽出されたデバイスの制御指示を表す指示フレーズに基づいて、発話文が生成されるので、ユーザが現在の所在位置において制御操作を実施しようとしている可能性が高いデバイスを適切に制御可能な発話文をユーザに提示できる。ユーザは、提示された発話文を発話することにより、所望のデバイスの制御を実施できる可能性が高いので、利便性の向上が図られる。
【００８５】
また、別の形態に係る対話装置では、現在時刻を取得する時刻取得部と、時間帯または時刻ごとのデバイスの制御履歴に関する履歴情報を参照して、時刻取得部により取得された現在時刻に対応する時間帯または時刻におけるデバイスの制御履歴を取得する履歴取得部と、を更に備え、語彙情報は、デバイスごとに、制御内容と指示フレーズとを関連付けており、フレーズ抽出部は、デバイス抽出部により抽出されたデバイス及び履歴取得部により取得された制御履歴に示される制御内容に基づいて、指示フレーズを抽出することとしてもよい。
【００８６】
上記形態によれば、現在時刻に対応する時刻または時間帯におけるデバイスの制御履歴が抽出され、抽出された制御履歴に示される制御内容に対応する指示フレーズに基づいて発話文が生成される。これにより、現在時刻においてユーザが所望する可能性が高い制御操作を実施可能な発話文をユーザに提示できる。
【００８７】
また、別の形態に係る対話装置では、履歴情報は、ユーザごとの制御履歴を含み、フレーズ抽出部は、ユーザの制御履歴に基づいて、指示フレーズを抽出することとしてもよい。
【００８８】
上記形態によれば、発話文の提示対象のユーザの制御履歴に対応する指示フレーズに基づいて発話文が生成される。従って、そのユーザに対して好適な発話文を提示できる。
【００８９】
また、別の形態に係る対話装置では、提示部は、発話文を示すテキストをユーザの端末に表示させることとしてもよい。
【００９０】
上記形態によれば、生成された発話文を示すテキストがユーザの端末において提示されるので、ユーザはその発話文を発することができる。
【００９１】
また、別の形態に係る対話装置では、提示部は、発話文を示すテキストが関連付けられ指示操作可能な操作オブジェクトをユーザの端末に表示させ、対話装置は、ユーザの端末において操作オブジェクトが操作された場合に、テキストの内容の音声からなるユーザ発話を受け付けた場合と同様のデバイスの制御情報を生成することとしてもよい。
【００９２】
上記形態によれば、生成された発話文を示すテキストが関連付けられた操作オブジェクトがユーザ端末において表示され、その操作オブジェクトが操作されることにより、当該発話文の内容が音声により発せられた場合と同様の制御情報が生成されるので、ユーザは所望する制御の指示を容易に実施できる。
【００９３】
また、別の形態に係る対話装置では、設定情報を管理しているシステムから設定情報を取得する設定情報取得部、をさらに備え、デバイス抽出部は、設定情報取得部により取得された設定情報を参照することとしてもよい。
【００９４】
上記形態によれば、予め取得された設定情報に基づいて発話文が生成されるので、発話文の生成処理の度に設定情報を参照するための通信及び処理の負荷が軽減される。
【００９５】
以上、本実施形態について詳細に説明したが、当業者にとっては、本実施形態が本明細書中に説明した実施形態に限定されるものではないということは明らかである。本実施形態は、特許請求の範囲の記載により定まる本発明の趣旨及び範囲を逸脱することなく修正及び変更態様として実施することができる。したがって、本明細書の記載は、例示説明を目的とするものであり、本実施形態に対して何ら制限的な意味を有するものではない。
【００９６】
本開示で説明した各態様／実施形態は、ＬＴＥ（Long  Term  Evolution）、ＬＴＥ−Ａ（LTE-Advanced）、ＳＵＰＥＲ  ３Ｇ、ＩＭＴ−Ａｄｖａｎｃｅｄ、４Ｇ、５Ｇ、ＦＲＡ（Future  Radio  Access）、Ｗ−ＣＤＭＡ（登録商標）、ＧＳＭ（登録商標）、ＣＤＭＡ２０００、ＵＭＢ（Ultra  Mobile  Broadband）、ＩＥＥＥ  ８０２．１１（Ｗｉ−Ｆｉ）、ＩＥＥＥ  ８０２．１６（ＷｉＭＡＸ）、ＩＥＥＥ  ８０２．２０、ＵＷＢ（Ultra-WideBand）、Ｂｌｕｅｔｏｏｔｈ（登録商標）、その他の適切なシステムを利用するシステム及び／又はこれらに基づいて拡張された次世代システムに適用されてもよい。
【００９７】
本開示で説明した各態様／実施形態の処理手順、シーケンス、フローチャートなどは、矛盾の無い限り、順序を入れ替えてもよい。例えば、本明細書で説明した方法については、例示的な順序で様々なステップの要素を提示しており、提示した特定の順序に限定されない。
【００９８】
情報等は、上位レイヤ(または下位レイヤ)から下位レイヤ(または上位レイヤ)へ出力され得る。複数のネットワークノードを介して入出力されてもよい。
【００９９】
入出力された情報等は特定の場所(例えば、メモリ)に保存されてもよいし、管理テーブルで管理してもよい。入出力される情報等は、上書き、更新、または追記され得る。出力された情報等は削除されてもよい。入力された情報等は他の装置へ送信されてもよい。
【０１００】
判定は、１ビットで表される値（０か１か）によって行われてもよいし、真偽値（Boolean：trueまたはfalse）によって行われてもよいし、数値の比較（例えば、所定の値との比較）によって行われてもよい。
【０１０１】
本開示で説明した各態様／実施形態は単独で用いてもよいし、組み合わせて用いてもよいし、実行に伴って切り替えて用いてもよい。また、所定の情報の通知（例えば、「Ｘであること」の通知）は、明示的に行うものに限られず、暗黙的（例えば、当該所定の情報の通知を行わない）ことによって行われてもよい。
【０１０２】
ソフトウェアは、ソフトウェア、ファームウェア、ミドルウェア、マイクロコード、ハードウェア記述言語と呼ばれるか、他の名称で呼ばれるかを問わず、命令、命令セット、コード、コードセグメント、プログラムコード、プログラム、サブプログラム、ソフトウェアモジュール、アプリケーション、ソフトウェアアプリケーション、ソフトウェアパッケージ、ルーチン、サブルーチン、オブジェクト、実行可能ファイル、実行スレッド、手順、機能などを意味するよう広く解釈されるべきである。
【０１０３】
また、ソフトウェア、命令などは、伝送媒体を介して送受信されてもよい。例えば、ソフトウェアが、同軸ケーブル、光ファイバケーブル、ツイストペア及びデジタル加入者回線（ＤＳＬ）などの有線技術及び／又は赤外線、無線及びマイクロ波などの無線技術を使用してウェブサイト、サーバ、又は他のリモートソースから送信される場合、これらの有線技術及び／又は無線技術は、伝送媒体の定義内に含まれる。
【０１０４】
本開示で説明した情報、信号などは、様々な異なる技術のいずれかを使用して表されてもよい。例えば、上記の説明全体に渡って言及され得るデータ、命令、コマンド、情報、信号、ビット、シンボル、チップなどは、電圧、電流、電磁波、磁界若しくは磁性粒子、光場若しくは光子、又はこれらの任意の組み合わせによって表されてもよい。
【０１０５】
なお、本開示で説明した用語及び／又は本明細書の理解に必要な用語については、同一の又は類似する意味を有する用語と置き換えてもよい。
【０１０６】
本開示で使用する「システム」および「ネットワーク」という用語は、互換的に使用される。
【０１０７】
また、本開示で説明した情報、パラメータなどは、絶対値で表されてもよいし、所定の値からの相対値で表されてもよいし、対応する別の情報で表されてもよい。
【０１０８】
本開示で使用する「判断(determining)」、「決定(determining)」という用語は、多種多様な動作を包含する場合がある。「判断」、「決定」は、例えば、判定(judging)、計算(calculating)、算出(computing)、処理(processing)、導出(deriving)、調査(investigating)、探索(looking  up、search、inquiry)（例えば、テーブル、データベース又は別のデータ構造での探索）、確認(ascertaining)した事を「判断」「決定」したとみなす事などを含み得る。また、「判断」、「決定」は、受信(receiving)（例えば、情報を受信すること）、送信(transmitting)(例えば、情報を送信すること)、入力(input)、出力(output)、アクセス(accessing)（例えば、メモリ中のデータにアクセスすること）した事を「判断」「決定」したとみなす事などを含み得る。また、「判断」、「決定」は、解決(resolving)、選択(selecting)、選定(choosing)、確立(establishing)、比較(comparing)などした事を「判断」「決定」したとみなす事を含み得る。つまり、「判断」「決定」は、何らかの動作を「判断」「決定」したとみなす事を含み得る。また、「判断（決定）」は、「想定する（assuming）」、「期待する（expecting）」、「みなす（considering）」などで読み替えられてもよい。
【０１０９】
本開示で使用する「に基づいて」という記載は、別段に明記されていない限り、「のみに基づいて」を意味しない。言い換えれば、「に基づいて」という記載は、「のみに基づいて」と「に少なくとも基づいて」の両方を意味する。
【０１１０】
本開示で「第１の」、「第２の」などの呼称を使用した場合においては、その要素へのいかなる参照も、それらの要素の量または順序を全般的に限定するものではない。これらの呼称は、２つ以上の要素間を区別する便利な方法として本明細書で使用され得る。したがって、第１および第２の要素への参照は、２つの要素のみがそこで採用され得ること、または何らかの形で第１の要素が第２の要素に先行しなければならないことを意味しない。
【０１１１】
「含む（include）」、「含んでいる（including）」、およびそれらの変形が、本明細書あるいは特許請求の範囲で使用されている限り、これら用語は、用語「備える(comprising)」と同様に、包括的であることが意図される。さらに、本明細書あるいは特許請求の範囲において使用されている用語「または（or）」は、排他的論理和ではないことが意図される。
【０１１２】
本開示において、文脈または技術的に明らかに1つのみしか存在しない装置である場合以外は、複数の装置をも含むものとする。
【０１１３】
本開示の全体において、文脈から明らかに単数を示したものではなければ、複数のものを含むものとする。
【符号の説明】
【０１１４】
１０…対話装置、１１…位置取得部、１２…時刻取得部、１３…設定情報取得部、１４…デバイス抽出部、１５…フレーズ抽出部、１６…生成部、１７…提示部、１８…発話受付部、１９…制御指示送信部、２０…語彙情報記憶部、３０…外部システム、３１…設定情報記憶部、５０…端末、Ｍ１…記録媒体、ｍ１０…メインモジュール、ｍ１１…位置取得モジュール、ｍ１２…時刻取得モジュール、ｍ１３…設定情報取得モジュール、ｍ１４…デバイス抽出モジュール、ｍ１５…フレーズ抽出モジュール、ｍ１６…生成モジュール、ｍ１７…提示モジュール、ｍ１８…発話受付モジュール、ｍ１９…制御指示送信モジュール、Ｐ１…対話プログラム。
【図１】
2020095633.tif 000003
【図２】
2020095633.tif 000004
【図３】
2020095633.tif 000005
【図４】
2020095633.tif 000006
【図５】
2020095633.tif 000007
【図６】
2020095633.tif 000008
【図７】
2020095633.tif 000009
【図８】
2020095633.tif 000010
【図９】
2020095633.tif 000011
【図１０】
2020095633.tif 000012
【国際調査報告】
2020095633.tif 000013
2020095633.tif 000014
2020095633.tif 000015
2020095633.tif 000016