(57)【特許請求の範囲】
【請求項１】
音声により対話する利用者を支援する対話支援装置であって、
相手のプロフィールを取得するためのプロフィール取得部と、
前記取得された相手のプロフィールを保持するプロフィール保持部と、
前記相手のプロフィールを構成する各項目をキーワードとして保持するキーワード辞書と、
利用者間の対話音声を認識して前記キーワード辞書に保持された項目を検出し、その旨を通知する音声認識部と、
利用者が相手と対話する際に、その相手のプロフィールを前記プロフィール保持部から取得して表示部に表示し、かつ前記音声認識部にて通知された項目を、前記表示部に表示する相手のプロフィールにおいて削除するかまたは他の項目と区別して表示するように制御する制御手段とを備えた対話支援装置。
【請求項２】
請求項１において、
前記相手のプロフィールの取得が通信回線を介して行われる対話支援装置。
【請求項３】
請求項１において、
前記相手のプロフィールの取得が通信回線を介して行われ、
前記利用者間の対話が電子メールによるものであり、
前記制御手段が、前記相手のプロフィールを表示部に表示する際に、その相手に送信済みのメールを併せて表示するように制御する対話支援装置。
【請求項４】
請求項１ないし３のいずれかにおいて、
前記制御手段が、前記相手のプロフィールを表示部に表示する際に、そのプロフィールに基づいて検索した関連する情報を併せて表示するように制御する対話支援装置。
【請求項５】
請求項１ないし４のいずれかの対話支援装置を複数備えた対話支援システム。
【請求項６】
請求項５において、
前記利用者のプロフィールを取得し一括して保持し、前記対話支援装置の制御手段の要求に応じて前記保持したプロフィールを提供するサーバーを備えた対話支援システム。
【発明の詳細な説明】
【０００１】
【発明の属する技術分野】
本発明は、対話を支援するための装置およびシステムに関する。
【０００２】
【従来の技術】
従来の対話支援装置として、特開平９−８１１８４号公報で開示された技術が知られている。この対話支援装置は、異種言語を用いる人間同士の対話を支援するもので、マイクロフォンから入力された相手の音声を認識部で認識するとともに、その認識語から連想される関連語を連想辞書から検索して、認識語と関連語をそれぞれ訳語付きで表示部に表示する。これにより、相手の発話内容の理解および相手の発話に対する応答を支援できる。
【０００３】
【発明が解決しようとする課題】
しかしながら、この従来の対話装置では、対話が途切れたり、話題が陳腐化して対話が途切れそうなときに、対話を活発化させ、円滑に継続させるような話題を提示することができない。
【０００４】
本発明は、このような従来の問題に鑑みてなされたもので、対話を活発化させ、円滑に継続させるような話題を提示することができる対話支援装置および対話支援システムを提供することを目的とする。
【０００５】
【課題を解決するための手段】
前記目的を達成するために、本願第１の発明は、音声により対話する利用者を支援する対話支援装置であって、相手のプロフィールを取得するためのプロフィール取得部と、前記取得された相手のプロフィールを保持するプロフィール保持部と、前記相手のプロフィールを構成する各項目をキーワードとして保持するキーワード辞書と、利用者間の対話音声を認識して前記キーワード辞書に保持された項目を検出し、その旨を通知する音声認識部と、利用者が相手と対話する際に、その相手のプロフィールを前記プロフィール保持部から取得して表示部に表示し、かつ前記音声認識部にて通知された項目を、前記表示部に表示する相手のプロフィールにおいて削除するかまたは他の項目と区別して表示するように制御する制御手段とを備える。
【０００６】
本願第１の発明によれば、対話をする際に、その相手のプロフィールが表示されるので、対話が途切れたり、話題が陳腐化して対話が途切れそうなときに、利用者は、相手のプロフィールを見て、相手が興味をもっている新たな話題について対話を続けることができる。すなわち、本願第１の発明は、対話を活発化させ、円滑に継続させるような話題を提示することができる。
【０００７】
本願第２の発明は、前記本願第１の発明の対話支援装置を複数備えた対話支援システムである。本願第２の発明によれば、前記本願第１の発明と同様の作用効果がある。本願第２の発明においては、前記利用者のプロフィールを取得し一括して保持し、前記対話支援装置の制御手段の要求に応じて前記保持したプロフィールを提供するサーバーを備えることが好ましい。これによれば、多数の利用者のプロフィールがサーバーで一括管理されるので、各対話支援装置での管理負担を軽減できる。
【０００８】
【発明の実施の形態】
以下、本発明の第１実施形態である対話支援システムを図面にしたがって説明する。まず、このシステムの構成について説明する。このシステムは、図１に示すように、インターネットや電話回線のような通信回線６２を介して通信可能なネットワークサーバー６３および複数の情報機器１，６１からなる。ここで、通信回線６２は、無線によるものでも有線によるものでもよく、また、公衆回線でも専用回線でもよい。情報機器１，６１は、パソコン、携帯端末、インターネットテレビなどの対話装置に対話支援装置を組み込んだもので、対話支援装置として、利用者自身のプロフィールを入力するためのキーボードなどの自己プロフィール入力部４と、相手のプロフィールを入力するためのプロフィール入力部２、すなわち通信回線６２を介して利用者間でプロフィールを通信するための通信部２と、前記入力された相手のプロフィールを保持するプロフィール保持部すなわちプロフィールデータベース６と、利用者が通信回線６２を介して相手と対話する際に、その相手のプロフィールをプロフィールデータベース６から取得して液晶やＣＲＴなどの表示部１１に表示するように制御する制御手段３，５とを備えている。
【０００９】
また、この実施形態では、利用者間の対話が音声によるものであり、情報機器１，６１は、対話支援装置として、さらに、前記相手のプロフィールを構成する各項目をキーワードとして保持するキーワード辞書１３と、利用者間の対話音声を認識してキーワード辞書１３に保持された項目を検出し、その旨を制御手段３，５に通知する音声認識部１２とを備え、制御手段３，５が、音声認識部１２から通知された項目を、前記表示部１１に表示する相手のプロフィールにおいて削除するかまたは他の項目と区別して表示するように制御する。
【００１０】
さらにまた、情報機器１，６１は、利用者の音声を入力するためのマイクなどの音声入力部１０と、利用者を撮影してその画像を入力するためのＣＣＤなどの画像入力部８と、相手の音声を出力するための音声出力部９と、それらならびに表示部１１および音声認識部１２で扱う画像／音声を制御する画像／音声制御部７とを備えている。なお、制御手段３，５は、互いに直接接続されたプロフィール管理部５と制御部３とからなり、プロフィール管理部５は、プロフィールデータベース６、音声認識部１２および画像／音声制御部７に直接接続されており、制御部３は、通信部２、画像／音声制御部７および自己プロフィール入力部４に直接接続されている。また、情報機器６１の構成については、図１では詳細を記載していないが、情報機器１の構成と同様である。
【００１１】
この対話支援システムが備えるサーバー６３は、通信回線６２を介して各情報機器１，６１と通信するための通信部６４と、複数の前記利用者のプロフィールを一括して保持するためのプロフィールデータベース６６と、プロフィールの取得、提供を制御するプロフィール制御部６５とを備え、通信回線６２を介して、前記利用者のプロフィールを取得し一括して保持し、各情報機器１，６１の制御手段３，５の要求に応じて保持したプロフィールを提供する。
【００１２】
次に、この対話支援システムの動作について説明する。まず、利用者は、それぞれ自己の情報機器１，６１の自己プロフィール入力部４を操作して、自分の趣味や最近の話題などを、自身のプロフィールとして入力する。その入力画面の一例を図２に示す。入力されたプロフィールは、図１の通信部２、通信回線６２を介して、相手の情報機器１，６１に送られる。すなわち、通信部２は、相手のプロフィールを自己の情報機器１，６１に入力するためのプロフィール入力部として機能する。送られてきた相手のプロフィールは、プロフィール管理部５で加工され、プロフィールデータベース６に格納されると同時に、音声認識部１２を通じてキーワード辞書１３に保存される。プロフィールデータベース６のデータ構造の一例を図３に、キーワード辞書１３のデータ構造の一例を図４に示す。
【００１３】
次に、利用者間で図１の画像入力部８、表示部１１、音声入力部１０、音声出力部９を利用して、相手の姿を見ながら対話する。ここで、利用者同士は、初対面またはそれに近い間柄であることを想定している。対話の際、プロフィール管理部５は、相手のプロフィールを画像／音声制御部７を通じて、表示部１１に表示するので、対話が途切れたり、話題が陳腐化して対話が途切れそうなときに、利用者は、相手のプロフィールを見て、相手が興味をもっている新たな話題について対話を続けることができる。対話の様子の一例を図５に示す。例えば、「旅行」について対話をしていたが、その話題が陳腐化して対話が途切れそうになったときには、相手のプロフィールを見て、相手が興味をもっている新たな話題の中から「テニス」などを選択して、それについて対話を続けることができる。なお、対話の相手は１人に限らず、例えば４人であれば、表示部１１の画面を４分割して、それぞれの姿とプロフィールを表示すればよい。
【００１４】
一方、図１の音声認識部１２は、利用者間の対話音声をリアルタイムで認識し、キーワード辞書１３に格納された、相手のプロフィールに関連するキーワード（プロフィールを構成する各項目）を検出すると、プロフィール管理部５へ通知し、プロフィール管理部５は、表示部１１に表示されている相手のプロフィールからその項目を削除する。例えば、図５において、利用者間の対話音声の中に「旅行」が検出されると、表示されている相手のプロフィールから「旅行」の項目が削除される。これにより、常に、対話を活発化させ、円滑に継続させるような新鮮な内容の項目だけが、表示部１１に表示される。なお、該当項目を削除する代わりに、表示を薄くするとか、色を変えるとかして、他のまだ新鮮な項目と区別して表示してもよい。
【００１５】
また、制御手段３，５（図１）が、相手のプロフィールを表示部１１に表示する際に、そのプロフィールに基づいて検索した関連するニュースのホームページを併せて表示するように制御することが好ましい。これによれば、例えば、図５において、削除されずに残っている項目が「テニス」だけになったが、最近のテニスについて知識がないような場合でも、「テニス」をキーワードとして所定のニュースのホームページにおいて最近の記事が自動的に検索されてプロフィールに併せて表示されるので、利用者は、それを見て、相手が興味をもっている新たな話題「テニス」について円滑に対話を続けることができる。
【００１６】
以上においては、図１の通信回線６２を介しての対話を、音声によりリアルタイムで行われるものとして説明したが、本発明ではこれに限らず、文字により、例えば電子メールの送受信の繰り返しにより行われるようなものも含まれる。この場合には、情報機器１，６１において、音声入力部１０、音声出力部９、画像入力部８、音声認識部１２、キーワード辞書１３などは備えなくてもよい。そして、この場合、相手と対話する際というのは、相手からのメールを受信して、それに対する返事のメールを作成して送信する際ということになるが、その際に、制御手段３，５が、相手のプロフィールをプロフィールデータベース６から取得して表示部１１に表示するように制御する。したがって、この場合にも、メールの交換すなわち通信回線６２を介しての対話が途切れたり、話題が陳腐化して対話が途切れそうなときに、利用者は、相手のプロフィールを見て、相手が興味をもっている新たな話題について対話を続けることができる。
【００１７】
ここで、制御手段３，５が、相手のプロフィールを表示部１１に表示する際に、その相手に送信済みのメール、例えば最近送信したメールのタイトルおよび内容を併せて表示するように制御することが好ましい。これによれば、利用者は、その相手とどのような話題で対話していたかを思い出してその話題で対話を継続したり、逆にその話題が陳腐化していればプロフィールから他の新鮮な話題を選択したりできるので、よりいっそう、円滑に対話を続けることができる。
【００１８】
また、以上における対話支援システムは、通信回線６２を介して、前記利用者のプロフィールを取得し一括して保持し、情報機器１，６１の制御手段３，５の要求に応じて保持したプロフィールを提供するサーバー６３を備えており、多数の利用者のプロフィールがサーバー６３で一括管理されるので、各情報機器１，６１における対話支援装置での管理負担を軽減できる。
【００１９】
次に、本発明の第２実施形態である対話支援システムについて説明する。このシステムは、図６に示すようなヘッドセット２２および制御端末２３からなる対話支援装置２１を複数備えており、図７に示すように、利用者がヘッドセット２２を装着し、眼の前の小さな表示部（ディスプレィ）１１に映し出された相手のプロフィールを見ながら、相手と対面した状況で対話するものである。
【００２０】
図６に示すように、この対話支援装置２１は、前記第１実施形態での対話支援装置１（図１の情報機器１）と比較すると、画像入力部８および音声出力部９を備えない点、プロフィールの通信および利用者間の対話が通信回線（通信網）６２を介さない点、表示部１１および音声入力部１０を有するヘッドセット２２とその他の構成要素を有する制御端末２３とに分離され、両者間のデータ通信が、ヘッドセット２２が有するセット通信部２５と制御端末２３が有する端末通信部２６とにより近距離通信（Bluetooth）で行われる点で異なっているが、その他の構成は同様であるので説明を省略する。なお、ヘッドセット２２だけに着目すれば公知技術であり、その例として、産総研RWI研究班  適応ビジョンラボで開発されたVizWearがある（技術研究組合  新情報処理開発機構（RWCP）編,『RWC2001研究成果展示要覧』,pp.35）。
【００２１】
第２実施形態の対話支援システムによれば、実際に面と向かって対話をする際に、その相手のプロフィールが表示されるので、対話が途切れたり、話題が陳腐化して対話が途切れそうなときに、利用者は、相手のプロフィールを見て、相手が興味をもっている新たな話題について対話を続けることができる。ここで、プロフィールの通信は、通信回線を介さず、利用者の制御端末２３と相手の制御端末（図示せず）との間で直接行われ、また、利用者間の対話も通信回線を介さず、実際に面と向かって音声により行われる。
【００２２】
なお、第２実施形態の対話支援システムにおいては、ヘッドセット２２と制御端末２３との間にBluetoothの近距離通信を利用したが、通信の方法はこれに限定されるものではなく、例えば有線によって情報を送受信してもよい。さらに、ヘッドセット２２において、音声入力部１０を装着したが、取り外してもよい。この時、制御端末２３側に指向性の高いマイクロフォンを使って利用者の音声を収音すればよい。また、収音せず、話題としたプロフィールを削除するなどの機能を使わない、という選択をスイッチで行うようにしてもよい。
【００２３】
また、第１、第２実施形態の双方において、プロフィール入力部（通信部）２，２４は、通信を用いずスロットで構成することも可能であり、相手のプロフィールを記憶させたＳＤカードなどの記憶媒体をそのスロットに差し込んで相手のプロフィールを入力してもよい。さらにまた、第１、第２実施形態の双方において、プロフィールを通信するとは、プロフィールを互いに交換する場合のみならず、一方から他方に通知するだけの場合も含む。つまり、利用者が相手と対話を行う場合、利用者は自己のプロフィールを使用しないため、自己プロフィール入力部４は必須でない。
以上詳細に説明したように、本実施形態では、対話をする際に、その相手のプロフィールが表示されるので、対話が途切れたり、話題が陳腐化して対話が途切れそうなときに、利用者は、相手のプロフィールを見て、相手が興味をもっている新たな話題について対話を続けることができる。
【００２４】
【発明の効果】
以上、本発明は、対話を活発化させ、円滑に継続させるような話題を提示することができる。
【図面の簡単な説明】
【図１】本発明の第１実施形態の対話支援システムを示す概略図
【図２】同システムにおけるプロフィールの入力画面の一例を示す図
【図３】同システムにおけるプロフィールデータベース６のデータ構造の一例を示す図
【図４】同システムにおけるキーワード辞書１３のデータ構造の一例を示す図
【図５】同システムによる対話の様子の一例を示す図
【図６】本発明の第２実施形態の対話支援システムを示す概略図
【図７】同システムによる対話の様子の一例を示す図
【符号の説明】
１，６１，２１  対話支援装置（情報機器）
２，２４  プロフィール入力部（通信部）
３，５  制御手段（制御部およびプロフィール管理部）
６  プロフィール保持部（プロフィールデータベース）
１１  表示部
１２  音声認識部
１３  キーワード辞書
６２  通信回線
６３  サーバー
【図１】
0003885567.tif 000002
【図２】
0003885567.tif 000003
【図３】
0003885567.tif 000004
【図４】
0003885567.tif 000005
【図５】
0003885567.tif 000006
【図６】
0003885567.tif 000007
【図７】
0003885567.tif 000008