(57)【要約】【課題】ユーザの会話に基づいてユーザの経歴に関する年表を生成する。【解決手段】ユーザ年表生成装置は、ユーザの発言である音声データが入力される音声入力部と、音声入力部に入力された音声データに含まれる複数の単語を抽出する単語抽出部と、単語抽出部で抽出された複数の単語から、ユーザの経歴に関係がある事象を表わす経歴キーワードを特定する経歴特定部と、単語抽出部で抽出された複数の単語から、ユーザが、経歴キーワードが表わす事象に関係した時期を特定する時期特定部と、経歴特定部が特定した経歴と、時期特定部が特定した時期とを関連付ける経歴データを記憶部に記憶させる記憶処理部とを備える。【選択図】図２
2020086957.tif 000002
【特許請求の範囲】
【請求項１】
ユーザの発言である音声データが入力される音声入力部と、
前記音声入力部に入力された音声データに含まれる複数の単語を抽出する単語抽出部と、
前記単語抽出部で抽出された複数の単語から、前記ユーザの経歴に関係がある事象を表わす経歴キーワードを特定する経歴特定部と、
前記単語抽出部で抽出された複数の単語から、前記ユーザが、前記経歴キーワードが表わす事象に関係した時期を特定する時期特定部と、
前記経歴特定部が特定した経歴と、前記時期特定部が特定した時期とを関連付ける経歴データを記憶部に記憶させる記憶処理部と、
を備えるユーザ年表生成装置。
【請求項２】
前記ユーザの誕生した年である誕生年を取得する取得部と、
前記単語抽出部で抽出された複数の単語から、前記ユーザの発言の中心である中心キーワードを特定する話題特定部と、
画像データを識別する画像IDと、当該画像データの内容を特定するキーワードと、当該画像データで表される内容を特定する年代とを関連付ける対応データを記憶する対応データ記憶部から、前記特定部で特定された中心キーワードと、前記ユーザの誕生年以降の年代とに関連付けられる画像IDを選択する画像選択部と、
画像IDで識別される画像データを記憶する画像データ記憶部から、前記画像選択部で選択した画像IDで特定される画像データを選択し、ディスプレイに表示させる表示処理部と、
をさらに備え、
前記経歴特定部は、前記ディスプレイに表示された画像データに対する前記ユーザの発言に基づいて、前記経歴キーワードを特定する
請求項１に記載のユーザ年表生成装置。
【請求項３】
前記画像選択部は、前記ディスプレイに表示された画像データに対するユーザの発言と、前記中心キーワードと、前記誕生年以降の年代とから新たな画像IDを選択し、
前記表示処理部は、前記画像データ記憶部から、前記新たな画像IDで特定される画像データを選択し、ディスプレイに表示させる
請求項２に記載のユーザ年表生成装置。
【請求項４】
前記経歴特定部は、前記複数の単語のうち、前記ユーザの行動を特定する単語を前記経歴キーワードとして特定する
請求項１乃至３のいずれか１に記載のユーザ年表生成装置。
【請求項５】
前記経歴特定部は、前記複数の単語のうち、場所に関する単語を前記経歴キーワードとして特定する
請求項１乃至３のいずれか１に記載のユーザ年表生成装置。
【請求項６】
前記ユーザと会話する第２のユーザから所定の単語である指示ワードが発せられると、
前記経歴特定部は、前記指示ワードと、当該指示ワードに対応する方法キーワード及び時期の特定方法とが関連付けられる方法データとが関連付けられる方法データが記憶される方法データ記憶部から、前記指示ワードと関連付けられる特定方法を抽出し、抽出した前記特定方法で経歴キーワードを特定し、
前記時期特定部は、前記方法データ記憶部において前記指示ワードと関連付けられる前記特定方法で時期を特定する
請求項１乃至５のいずれか１に記載のユーザ年表生成装置。
【請求項７】
前記記憶部に記憶された前記経歴データと前記時期とに基づいて、前記ユーザのユーザ年表の完成度を判定する判定部と、
前記判定部により判定された完成度を前記ユーザに提示する提示部と、を有する
請求項１乃至６のいずれか１に記載のユーザ年表生成装置。
【請求項８】
前記判定部は、当該ユーザの経歴のカテゴリごとにユーザ年表の完成度を判定し、
前記提示部は、前記カテゴリごとに判定された完成度を提示する
請求項７に記載のユーザ年表生成装置。
【請求項９】
前記提示部は前記完成度に応じて当該ユーザに関連する画像の一部を表示し、該完成度が所定の完成度以上となったとき、該画像が表示される
請求項７または請求項８に記載のユーザ年表生成装置。
【請求項１０】
前記提示部は、前記完成度が所定の完成度以上となった場合、当該ユーザのユーザ年表の少なくとも一部を印刷出力可能とする
請求項７乃至９のいずれか１に記載のユーザ年表生成装置。
【請求項１１】
記憶処理部は、前記経歴特定部が特定した経歴と、前記時期特定部が特定した時期と、前記画像と、を関連付ける経歴データを記憶部に記憶させる
請求項２に記載のユーザ年表生成装置。
【請求項１２】
コンピュータに、
ユーザの発言である音声データが入力される音声入力機能と、
前記音声入力機能に入力された音声データに含まれる複数の単語を抽出する単語抽出機能と、
前記単語抽出機能で抽出された複数の単語から、前記ユーザの経歴に関係がある事象を表わす経歴キーワードを特定する経歴特定機能と、
前記単語抽出機能で抽出された複数の単語から、前記ユーザが、前記経歴キーワードが表わす事象に関係した時期を特定する時期特定機能と、
前記経歴特定機能が特定した経歴と、前記時期特定機能が特定した時期とを関連付ける経歴データを記憶部に記憶させる記憶処理機能と、
を実現させるユーザ年表生成プログラム。
【請求項１３】
ユーザの発言である音声データが入力される音声入力部と、
前記音声入力部に入力された音声データに含まれる複数の単語を抽出する単語抽出部と、
前記単語抽出部で抽出された複数の単語から、前記ユーザの経歴に関係がある事象を表わす経歴キーワードを特定する経歴特定部と、
前記単語抽出部で抽出された複数の単語から、前記ユーザが、前記経歴キーワードが表わす事象に関係した時期を特定する時期特定部と、
前記経歴特定部が特定した経歴と、前記時期特定部が特定した時期とを関連付ける経歴データを記憶部に記憶させる記憶処理部と、
を備えるユーザ年表生成装置と、
前記ユーザの音声データを取得する音声取得部と、
前記音声データを前記ユーザ年表生成装置に送信する通信部と、
を備えるユーザ端末と、
を有するユーザ年表生成システム。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、ユーザの会話に基づいて、ユーザの経歴に関する年表を生成するユーザ年表生成装置、ユーザ年表生成プログラム及びユーザ年表生成システムである。
【背景技術】
【０００２】
近年、核家族化が増加していたことから、独立した子供は自身の親と会話をする機会が少ない傾向にある。例えば、長期間に渡って会話をする機会が少ない場合、お互いの状況を把握できていないため、会話をする機会があったとしても、何を話題とすればよいのか分からず、会話が続かないこともある。
【０００３】
仮に、このような状況で親が年をとる等で親に介護が必要となったとき、親と子とで会話も成立しないとお互いの意思の疎通を図れず関係の悪化を招く恐れもある。また、お互いの意思の疎通が図れない場合、介護を受ける側も介護する側もお互いのコミュニケーションに楽しみを感じられない。
【０００４】
このような場合に、子が親の経歴等を知ることで、子は、親とどのような会話をすれば楽しめるのかを考えることができる。また親自身も忘れていた過去の出来事を思い出すことができれば、子に新しい話をしたくなることがでてくる可能性もある。
特許文献１には、自分の生きた証を残すための自分史作成に関する技術が記載される。
【先行技術文献】
【特許文献】
【０００５】
【特許文献１】特開２０１８−９７１８５号公報
【発明の概要】
【発明が解決しようとする課題】
【０００６】
上述した、特許文献１に記載の技術では、質問に対する答えを入力しながら自分史を作成するものであり、自分史を作成する時間を設ける必要があり、またパーソナルコンピューター等を操作して質問に関する答えをキーボードで入力する必要がある。例えば、自分史を作成しようとするユーザがパーソナルコンピューター等の操作に慣れていないこともある。この場合、他人に操作方法を聞いたり、他人に入力してもらう必要が生じる。すなわち、誰にでも容易に自分史を作成することは困難である。
【０００７】
上記課題に鑑み、本発明は、ユーザの経歴に関する年表を生成するユーザ年表生成装置、ユーザ年表生成プログラム及びユーザ年表生成システムに関する。
【課題を解決するための手段】
【０００８】
上記課題を解決するために、本発明の一態様に係るユーザ年表生成装置は、ユーザの発言である音声データが入力される音声入力部と、音声入力部に入力された音声データに含まれる複数の単語を抽出する単語抽出部と、前記単語抽出部で抽出された複数の単語から、前記ユーザの経歴に関係がある事象を表わす経歴キーワードを特定する経歴特定部と、前記単語抽出部で抽出された複数の単語から、前記ユーザが、前記経歴キーワードが表わす事象に関係した時期を特定する時期特定部と、前記経歴特定部が特定した経歴と、前記時期特定部が特定した時期とを関連付ける経歴データを記憶部に記憶させる記憶処理部とを備える。
【発明の効果】
【０００９】
本発明の一態様に係るユーザ年表生成装置、ユーザ年表生成プログラム及びユーザ年表生成システムは、ユーザの会話に基づいてユーザの経歴に関する年表を生成することができる。
【図面の簡単な説明】
【００１０】
【図１】本発明の実施形態に係るユーザ年表生成システムの概略図である。
【図２】本発明の実施形態に係るユーザ年表生成システムのブロック図の一例である。
【図３】本発明の実施形態に係るユーザ年表生成システムで利用される対応データの一例を示すデータ構成図である。
【図４】（ａ）および（ｂ）は、本発明の実施形態に係るユーザ年表生成システムで表示される経歴データの一例である。
【図５】本発明の実施形態に係るユーザ年表生成システムにおける画像提供処理の一例を説明するシーケンス図である。
【図６】本発明の実施形態に係るユーザ年表生成システムにおける年表生成処理の一例を説明するシーケンス図である。
【発明を実施するための形態】
【００１１】
以下に、図面を用いて本発明の実施形態に係るユーザ年表生成装置、ユーザ年表生成プログラム及びユーザ年表生成システムについて説明する。
【００１２】
〈ユーザ年表生成システム〉
図１に示すように、本実施形態に係るユーザ年表生成システム１は、ユーザ年表生成装置１０と、ユーザ端末２０とがネットワーク３０を介して接続される。このユーザ年表生成システム１では、ユーザ端末２０からのリクエストに応じて、ユーザ年表生成装置１０がユーザ端末２０に画像データを提供する。ネットワーク３０は、有線であっても無線であってもよく、ユーザ年表生成装置１０とユーザ端末２０間で通信が実現できるのであれば、どのような通信プロトコルを用いてもよい。
【００１３】
また、図１に示すように、ユーザ端末２０は、シニア世代の第１のユーザＰ１と、第１のユーザＰ１の子である第２のユーザＰ２とが会話をする場に配置される。なお、第２のユーザＰ２は、第１のユーザＰ１の子に限らず、第１のユーザＰ１の介護をする介護者または将来介護者となり得るものであってもよい。ユーザ年表生成装置１０は、第１のユーザＰ１の発言Ｘ２，Ｘ３と第２のユーザＰ２の発言Ｘ１をユーザ端末２０から取得すると、取得した会話に応じた画像データを抽出する。また、ユーザ年表生成装置１０は、抽出した画像データをユーザ端末２０に送信し、画像データを表示させる。
【００１４】
例えば、第１のユーザＰ１と第２のユーザＰ２とが、親子であって、長年離れて暮らしていた場合、何を話題として長時間会話を続けるべきかわからない場合がある。また、第１のユーザＰ１と第２のユーザＰ２とが親子ではなく、被介護者と介護者との関係である場合にも、お互いの関係が親子のように深くないため、会話の際に話題がみつからないこともある。このような状況において、仮に過去の出来事から話題を見つけられると、会話も弾む可能性がある。特に、第１のユーザＰ１が、いわゆるシニア世代といわれる高齢者等であるとき、過去の出来事について忘れがちであるが、何等かのきっかけがあれば、思い出しやすくなる可能性がある。
【００１５】
一般的に、視覚は、聴覚や触覚等と比較し、人の心に与える影響が大きく視覚から得た情報は記憶に残りやすい傾向にある。また、視覚から得る情報から、忘れていたことを思いだすことも多い。したがって、第１のユーザＰ１と第２のユーザＰ２とが会話をする際、ユーザ年表生成システム１を利用してユーザ端末２０で表示する過去の出来事に関連する写真等を見ることで、過去の出来事を思い出しやすくなることがある。
【００１６】
仮に、第１のユーザＰ１の経歴を見ることができれば、第１のユーザＰ１は自身の過去の出来事がわかるために忘れていたことも思い出しやすくなり、また、新たに話したいと思うことも見つかる可能性がある。また、第２のユーザＰ２も第１のユーザＰ１の過去の出来事が分かるために、知らなかったことを深く聞きたいと希望したり、新たに聞いてみたいと思うことが見つかる可能性がある。
【００１７】
これにより、シニア世代のいわれるユーザに生じやすい傾向である過去の一つの出来事を繰り返して何度も話すということが少なくなり、第１のユーザＰ１と第２のユーザＰ２との会話の展開が様々な話題に代わることが増える可能性が高くなる。これにより、第２のユーザＰ２は、第１のユーザＰ１の同じ話を複数回聞くことが少なくなり、長時間および長期の会話で異なる話を聞くことでより会話を楽しむことが可能となる。これは、介護者にとっても介護に単につらさだけでなく、楽しみが増えることになって好ましい。
【００１８】
このように、ユーザ年表生成システム１では、会話の際に新たな話題のきっかけづくりをすることで、第１のユーザＰ１と第２のユーザＰ２との単調になりがちな会話を、変化に富んだ会話にすることができる。両者が会話を楽しむことが可能となり、両者の関係性の向上を図ることができる。
【００１９】
〈ユーザ端末〉
図２のブロック図に示すように、ユーザ端末２０は、少なくとも、音声取得部２１、入力部２２、表示部２３及び通信部２４を備える。
【００２０】
音声取得部２１は、マイクロフォン等の、第１のユーザＰ１と第２のユーザＰ２との会話の音声データを取得するものである。
入力部２２は、第１のユーザＰ１の誕生年、その他のデータの入力及び操作の入力に使用される、タッチパネル、キーボード、操作ボタン等である。
表示部２３は、画像データを表示するディスプレイやプロジェクタ等である。
通信部２４は、ユーザ年表生成装置１０等のその他の装置とデータの送受信を実行する通信インターフェースである。例えば、プリンタにデータを送信することで、印刷を可能としてもよい。
【００２１】
ユーザ端末２０には、例えば、マイクロフォンやディスプレイを有するタブレット端末等を利用することができる。また、図２に示す例では、ユーザ端末２０は、１台の装置として示されるが、複数台の装置で構成されてもよい。具体的には、ＡＩスピーカ等のマイクロフォンを有する音声取得装置と、ディスプレイやプロジェクタ等の画像表示装置の組み合わせであってもよい。
【００２２】
〈ユーザ年表生成装置〉
図２に示すように、ユーザ年表生成装置１０は、音声入力部１０１、誕生年取得部１０２、単語抽出部１０３、話題特定部１０４、画像選択部１０５、表示処理部１０６、推定部１０７、経歴特定部１１１、時期特定部１１２、記憶処理部１１３、判定部１１４及び提示部１１５を備える。また、図２に示すように、ユーザ年表生成装置１０は、記憶部１２０で、対応データＤ１、画像データＤ２、方法データＤ３、経歴データＤ４及びユーザ年表生成プログラムＰを記憶する。
【００２３】
ユーザ年表生成装置１０は、制御部１００、記憶部１２０及び通信部１３０を有するサーバ装置等の情報処理装置である。ユーザ年表生成装置１０は、記憶部１２０に記憶されるユーザ年表生成プログラムＰの実行により、音声入力機能、誕生年取得機能、単語抽出機能、中心キーワード特定機能、画像選択機能、表示処理機能、経歴特定機能、時期特定機能及び記憶処理機能を実現し、制御部１００で各処理を実行する。
【００２４】
具体的には、制御部１００は、種々の演算を実行するＣＰＵ（Central Processing Unit）である。また、記憶部１２０は、ＲＯＭ（Read Only Memory）やＲＡＭ（Random Access Memory）等のメモリである。なお、ユーザ年表生成装置１０は、複数の情報処理装置で形成されていてもよい。例えば、ユーザ年表生成装置１０が２台の情報処理装置で形成され、制御部１００が有する複数の処理部１０１〜１１５のうち、処理部１０１〜１０７と処理部１１１〜１１５が別の情報処理装置で実現されてもよい。また例えば、各データＤ１〜Ｄ５が一つの記憶部１２０に記憶される必要はなく、異なる複数の記憶部に記憶されていてもよい。例えば、画像データＤ２は、外部の複数のサーバ装置に記憶されるものであってもよい。
【００２５】
対応データＤ１は、画像データを識別する画像IDと、当該画像データの内容を特定するキーワードと、画像データで表される内容を特定する年代とを関連付けるデータである。図３に一例を示すように、対応データＤ１で一の画像ＩＤに関連付けられるキーワードは複数あってもよい。例えば、一の画像に、「新幹線」、「東北」、「こまち」、「秋田」等の複数のキーワードを含むことができる。
また、年代は、画像データである写真データの撮影された日付や、画像データであるイラストデータが作成された日付である。また、年代は、画像の表わす内容を特定する日付を含んでもよい。例えば、画像データがある鉄道の写真であったとき、写真が撮影された日付に加え、その路線の開通した日付や、廃線になった日付を含んでもよい。また、年代は、期間の情報であってもよい。具体的には、オリンピックの開催に関する画像データの場合、オリンピックが開催された期間を年代とすることができる。
【００２６】
画像データＤ２は、画像IDで識別され、写真データやイラスト等の画像データである。なお、記憶部１２０には、複数の画像データＤ２が記憶される。また、画像データＤ２は、第１のユーザＰ１や第２のユーザＰ２が撮影した画像であってもよく、また、外部の画像提供者等により提供され、画像記憶サーバ等で記憶されるものであってもよい。このとき、画像提供者は複数存在してもよい。
【００２７】
方法データＤ３は、所定の単語である指示ワードと、当該指示ワードに対応する「中心キーワード」、「経歴」および「時期」の特定方法とが関連付けるデータである。指示ワードとは、どのように「中心キーワード」、「経歴」および「時期」を特定するかの方法を指定するものである。例えば、指示ワード「３０秒前までキャンセル」であるとき、中心キーワード、経歴および時期を特定する際の方法として「その時点から３０秒前までの音声データを含まない音声データから、中心キーワード、経歴及び時期を特定する」というルールを関連付ける。例えば、ユーザ年表生成装置１０では、音声データから、様々な情報を特定するが、音声データには必要な特定において情報と不要な情報が含まれるため、その情報の要否をユーザが明確に指定するために指示ワードが利用される。
【００２８】
経歴データＤ４は、第１のユーザＰ１と第２のユーザＰ２との会話の音声データから生成された第１のユーザＰ１の経歴に関するデータである。例えば、第１のユーザＰ１の誕生から現在までの経歴に関するデータである。
【００２９】
音声入力部１０１は、第１のユーザＰ１及び第２のユーザＰ２とで成立する会話の音声データが入力される。具体的には、ユーザ端末２０で取得された音声データがネットワーク３０を介してユーザ端末２０から送信されると、この音声データが通信部１３０を介して入力される。音声入力部１０１は、第１のユーザＰ１及び第２のユーザＰ２とが会話をしている際に音声データを取得する。したがって、音声入力部１０１には、ユーザ端末２０において画像データＤ２が表示されているときの会話の音声データも入力される。
【００３０】
誕生年取得部１０２は、第１のユーザＰ１の誕生した年である誕生年に関する情報を取得する。例えば、誕生年取得部１０２は、ユーザ端末２０で入力された第１のユーザＰ１の誕生年に関する情報がネットワーク３０を介してユーザ端末２０から発信されると、この誕生年に関する情報を通信部１３０を介して取得する。また、誕生年取得部１０２は、誕生年に関する情報を取得すると、これを第１のユーザＰ１の識別情報と関連付けて記憶部１２０に記憶させる。
【００３１】
誕生年取得部１０２が取得する「誕生年に関する情報」とは、第１のユーザＰ１が誕生した「年」の他、この「年」を特定することができる情報であればよい。例えば、誕生年に関する情報は、西暦で特定されても、和暦で特定されてもよい。また、誕生年に関する情報は、その年に生じた出来事に関する情報であってもよい。具体的には、誕生年に関する情報は、「〇〇オリンピックが開催された年」、「××地震が起こった年」等の情報であってもよい。
【００３２】
また、実際に誕生した「年」を特定できない場合には、誕生年に関する情報は、「△年頃」等の情報であってもよい。なお、誕生年取得部１０２が「△年頃」という誕生年に関する情報を取得した後、正確な誕生年を取得できたとき、その新たに取得した誕生年を第１のユーザＰ１の識別情報と関連付けて記憶部１２０に記憶させてもよい。
【００３３】
単語抽出部１０３は、音声入力部１０１に入力された音声データに含まれる複数の単語を抽出する。当該抽出には、一般的な音声認識技術を利用することができる。単語抽出部１０３は、音声認識により音声データに含まれる単語を抽出し、また、各単語の登場回数をカウントする。また、単語抽出部１０３は、第１のユーザＰ１と第２のユーザＰ２との声を識別し、どのユーザがどの単語を発したかを特定することができる。
【００３４】
話題特定部１０４は、単語抽出部１０３で抽出された複数の単語に基づいて、第１のユーザＰ１の話題の中心となる中心キーワードを特定する。
【００３５】
例えば、話題特定部１０４は、複数の単語のうち、第１のユーザＰ１の行動を特定する単語を中心キーワードとして特定することができる。具体的には、「話題特定部１０４は、〇〇に就職した」の「就職した」や、「××を卒業した」の「卒業した」等の行動を特定する単語を中心キーワードとして特定することができる。行動に関する単語は、話題の中心である可能性が高いためである。
【００３６】
話題特定部１０４は、複数の単語のうち、場所に関する単語を中心キーワードとして特定することができる。具体的には、話題特定部１０４は、「山形に旅行した」の「山形」や、「修学旅行で福岡に行った」の「福岡」等の場所を特定する単語を中心キーワードを特定する単語を中心キーワードとして特定することができる。場所に関する単語は、話題の中心である可能性が高いためである。
【００３７】
話題特定部１０４は、第１のユーザＰ１と第２のユーザＰ２との会話から複数回抽出された単語を中心キーワードとすることができる。例えば、ある期間の第１のユーザＰ１と第２のユーザＰ２との会話に「北海道」という単語が複数回抽出されたとき、話題特定部１０４は、北海道を中心キーワードとする。複数回発言する単語は話題の中心である可能性が高いためである。
【００３８】
話題特定部１０４は、会話に類似する意味の単語が複数回抽出されたとき複数回抽出された単語を中心キーワードとすることができる。具体的には、「犬」、「ドックフード」、「犬小屋」等、類似する意味の単語、または、関連する意味の単語が複数回抽出されたとき、この関連する意味の単語である「犬」、「ドッグフード」及び「犬小屋」を中心キーワードとする。類似する、または、関連する単語を複数回発言するとき、この単語が話題の中心である可能性が高いためである。また例えば、話題特定部１０４は、それを包括する単語「犬」を中心キーワードとしてもよい。
【００３９】
話題特定部１０４は、第２のユーザＰ２の質問に対する第１のユーザＰ１の回答となる単語を中心キーワードとすることができる。例えば、第２のユーザＰ２が第１のユーザＰ１に「修学旅行ではどこに行ったの？」という質問をし、第１のユーザＰ１が「仙台だよ」と答えると、話題特定部１０４は、回答である単語「仙台」を中心キーワードとする。質問に対する回答は、話題の中心となる可能性が高いためである。
【００４０】
話題特定部１０４は、所定時間前から現在までの第１のユーザＰ１の発言から中心キーワードを特定することができる。例えば、話題特定部１０４は、１分前から現在までの第１のユーザＰ１の発言から中心キーワードを特定する。古い発言は話題の中心である可能性は低く、新しい発言が話題の中心となる可能性が高いためである。
【００４１】
話題特定部１０４は、所定の単語である指示ワードと、当該指示ワードに対応する中心キーワードの特定方法とが関連付けられる方法データＤ３が記憶される記憶部１２０から、第１のユーザＰ１又は第２のユーザＰ２が発した指示ワードと対応付けられる特定方法を抽出し、抽出した特定方法で中心キーワードを特定する。これにより、話題特定部１０４は、より正確に話題の中心となる単語を特定キーワードとして特定することが可能となる。
【００４２】
例えば、特定の発言は話題の中心とならないと第１のユーザＰ１又は第２のユーザＰ２に判断されたとき、第１のユーザＰ１又は第２のユーザＰ２から指示ワードである特定の発言がされると、話題特定部１０４は、特定の期間の発言以外から中心キーワードを特定してもよい。具体的には、第２のユーザＰ２が「３０秒前までキャンセル」という指示ワードを発言すると、話題特定部１０４は、この時点から３０秒前までの発言以外の発言から中心キーワードを特定してもよい。
【００４３】
また例えば、特定の単語が話題の中心であると第１のユーザＰ１又は第２のユーザＰ２に判断されたとき、第１のユーザＰ１又は第２のユーザＰ２から指示ワードである特定の発言がされると、話題特定部１０４は、指定される単語を中心キーワードと特定してもよい。具体的には、第２のユーザＰ２が「〇×をキーワード」という指示ワードを発言すると、話題特定部１０４は、この「〇×」を中心キーワードと特定してもよい。
【００４４】
なお、話題特定部１０４は、複数の中心キーワードを特定することもできる。例えば、会話から、第１のユーザＰ１が「修学旅行で仙台に行った」ことが特定されるとき、話題特定部１０４は、「仙台」および「修学旅行」を中心キーワードとすることができる。
【００４５】
話題特定部１０４は、上述の方法の少なくともいずれか１つを実行して中心キーワードを特定する。したがって、話題特定部１０４は、上述した方法から、選択した２以上の方法を組み合わせて中心キーワードを特定してもよい。
【００４６】
画像選択部１０５は、画像データＤ２を識別する画像IDと、画像データＤ２の内容を特定するキーワードと、画像データＤ２で表される内容を特定する年代とを関連付ける対応データＤ１を記憶する記憶部１２０から、話題特定部１０４で特定された中心キーワードと、第１のユーザＰ１の誕生年以降の年代とに関連付けられる画像IDを選択する。
【００４７】
例えば、中心キーワードが「新幹線」であるとき、画像選択部１０５は、新幹線に関する画像データＤ２を選択する。このとき、第１のユーザＰ１と関係のない時期、例えば、第１のユーザＰ１が生まれる前の画像データＤ２は第１のユーザＰ１の話題とは関係ない可能性が高い。したがって、画像選択部１０５は、第１のユーザＰ１の誕生年以降の画像に関する画像データＤ２を選択する。ここで、条件に合致する画像データが複数あるとき、画像選択部１０５は、複数の画像データＤ２を選択してもよい。複数の画像を見ることで、ユーザは、忘れていた記憶を思い出しやすくなるためである。
【００４８】
また、ユーザ端末２０に何らかの画像データＤ２が表示される状態で第１のユーザＰ１と第２のユーザＰ２とで会話をしている場合、画像選択部１０５は、表示された画像データＤ２に対するユーザの発言と、中心キーワードと、誕生年以降の年代とから新たな画像IDを選択する。
【００４９】
例えば、中心キーワードが「新幹線」であり、画像選択部１０５によって複数の新幹線に関する画像データＤ２が選択され、これら複数の画像データＤ２が表示されていたとき、新たに第１のユーザＰ１から「こまち」という単語が発言された場合、画像選択部１０５は、新幹線の一の種類である「こまち」に関する画像データＤ２を選択する。
【００５０】
また例えば、中心キーワードが「仙台」であり、画像選択部１０５によって複数の仙台に関する画像データＤ２が選択され、これら複数の画像データＤ２が表示されていたときに新たに第１のユーザＰ１から「修学旅行」という単語が発言された場合、画像選択部１０５は、「仙台」かつ「修学旅行」に関する画像データＤ２を選択する。例えば、画像選択部１０５は、「仙台」の画像のうち、修学旅行で訪れることが多い場所の画像データＤ２を選択する。
【００５１】
話題特定部１０４が複数の単語を中心キーワードとして特定したとき、画像選択部１０５は、各中心キーワードについて画像データＤ２を選択する。例えば、中心キーワードとして「犬」、「ドッグフード」及び「犬小屋」が特定されたとき、画像選択部１０５は、「犬」に関する画像データＤ２、「ドッグフード」に関する画像データＤ２、「犬小屋」に関する画像データＤ２のそれぞれを選択する。
【００５２】
画像選択部１０５は、第２のユーザＰ２の年代を問い合わせる質問に対する第１のユーザＰ１の回答である年代と同一又は近似する年代と関連付けられる画像IDを選択する。
【００５３】
例えば、中心キーワードが「函館」および「旅行」であり、第２のユーザＰ２から第１のユーザＰ１に対する函館への旅行の年代についての問い合わせに対し、第１のユーザＰ１から「〇〇年頃」という回答があったとする。このとき、画像選択部１０５は、回答された「〇〇年頃」、すなわち、〇〇年前後と関連付けられる画像ＩＤを選択する。また、同様の場合に「高校生の頃」という回答があったとき、画像選択部１０５は、誕生年の情報から第１のユーザＰ１が高校生の年代を特定し、この年代と関連付けられる画像ＩＤを選択する。
【００５４】
表示処理部１０６は、画像IDで識別される画像データＤ２を記憶する記憶部１２０から、画像選択部１０５で選択した画像IDで特定される画像データＤ２を選択し、この画像データＤ２をユーザ端末２０に送信して表示させる。ここで、画像選択部１０５が複数の画像ＩＤを選択したとき、表示処理部１０６は、これら複数の画像ＩＤの画像データＤ２をユーザ端末２０に送信する。また、これら複数の画像データＤ２は、ユーザ端末２０において順番に表示される。
【００５５】
また、画像選択部１０５で新たな画像ＩＤが選択されると、表示処理部１０６は、記憶部１２０から、新たな画像IDで特定される画像データを選択し、この画像ＩＤの画像データＤ２をユーザ端末２０に送信してユーザ端末２０で表示させる。
【００５６】
このように、第１のユーザＰ１と第２のユーザＰ２との会話の際に、会話に関連する画像データがユーザ端末２０で表示される。したがって、第１のユーザＰ１は、会話中に複数の画像を見ながら、過去の出来事を思い出しやすくなる。また、第２のユーザＰ２にとっても、会話に知らないものが登場したとしても、ユーザ端末２０に表示される画像で表されるため、内容の把握がしやすくなる。これにより、第１のユーザＰ１と第２のユーザＰ２との会話の成立を続け、両者を楽しませることができる。また、このような画像の提供により、コミュニケーションのきっかけとなる話題を提供することが可能となる。
【００５７】
推定部１０７は、画像データＤ２が表示されているときの会話の音声データにおける会話の音量、会話の単語量、会話の早さの少なくとも何れかにより会話の盛り上がり度を推定する。また、推定部１０７によって盛り上がり度が推定されたとき、画像選択部１０５は、推定部１０７で推定された盛り上がり度に応じて、新たな画像を選択する。例えば、推定部１０７は、第１のユーザＰ１の声が大きくなった場合、第１のユーザＰ１の話すスピードが速くなった場合、第１のユーザからの肯定的な答えが多い場合等、会話が盛り上がったと推定する。
【００５８】
なお、ユーザ端末２０が第１のユーザＰ１の脈拍、顔の表情、動き等の音声以外の情報を取得可能であるとき、これらの第１のユーザＰ１の情報を用いて会話の盛り上がり度を推定してもよい。
【００５９】
会話の盛り上がりを推定することで、第１のユーザＰ１の興味関心がつよい内容、記憶が強い内容を把握することが可能となる。これにより、話題特定部１０４は、適切な新たな中心キーワードを特定することが可能となり、画像選択部１０５は、適切な画像を選択しやすくなる。
【００６０】
経歴特定部１１１は、単語抽出部１０３で抽出された複数の単語から、第１のユーザＰ１の経歴に関係がある事象を表わす経歴キーワードを特定する。経歴とは、例えば、学歴、職歴、その他第１のユーザＰ１の関わった社会的および個人的な行動等に関する情報である。
【００６１】
経歴特定部１１１は、ユーザ端末２０において表示された画像データＤ２に対する第１のユーザＰ１の発言に基づいて、経歴キーワードを特定する。例えば、第１のユーザＰ１の発言のうち、「〇〇大学を卒業した」、「△△社に入社した」、「××を設計した」、「東京に住んでいた」、「大阪に引っ越しした」等の発言から経歴キーワードを特定することができる。
【００６２】
経歴特定部１１１は、複数の単語のうち、第１のユーザの行動を特定する単語を経歴キーワードとして特定する。例えば、第１のユーザＰ１の発言のうち、「卒業した」、「入社した」、「設計した」、「住んでいた」、「引っ越しした」等の行動を特定する単語を経歴キーワードとして特定することができる。
【００６３】
経歴特定部１１１は、複数の単語のうち、場所に関する単語を経歴キーワードとして特定する。例えば、第１のユーザＰ１の発言のうち、「〇〇大学」、「△△社」、「東  京」、「大阪」等の場所を特定する単語を経歴キーワードとして特定することができる。
【００６４】
また、経歴特定部１１１は、複数の単語の組み合わせを経歴キーワードとして特定してもよい。例えば、「野球部に所属」や「メキシコに旅行」等、単に単語のみでなく複数の単語の組み合わせを経歴キーワードすることができる。
【００６５】
第１のユーザＰ１又は第２のユーザＰ２から所定の単語である指示ワードが発せられると、経歴特定部１１１は、指示ワードと、指示ワードに対応する方法キーワード及び時期の特定方法とが関連付けられる方法データとが関連付けられる方法データＤ３が記憶される記憶部１２０から、指示ワードと関連付けられる特定方法を抽出し、抽出した特定方法で経歴キーワードを特定する。
【００６６】
例えば、上述した話題特定部１０４の処理と同様、第２のユーザＰ２が「３０秒前までキャンセル」という指示ワードを発言すると、経歴特定部１１１は、この時点から３０秒前までの発言以外の発言から経歴キーワードを特定してもよい。また例えば、第２のユーザＰ２が「東京をキーワード」という指示ワードを発言すると、話題特定部１０４は、この「東京」を経歴キーワードと特定してもよい。
【００６７】
時期特定部１１２は、単語抽出部１０３で抽出された複数の単語から、第１のユーザＰ１が、経歴キーワードが表わす事象に関係した時期を特定する。例えば、時期特定部１１２は、第１のユーザＰ１が経歴キーワードを発言した前後の所定時間内に発言された時期に関する単語を経歴キーワードが表す事象に関係した時期として特定する。この時期としては、年代であっても、特定の年代を想定可能な範囲であってもよい。
【００６８】
仮に、「野球部に所属」が経歴キーワードとして特定された場合、その「野球部に所属」を発言した前後の所定時間内の会話において、第１のユーザＰ１が「中学時代と高校時代」という発言をしたとする。このとき、時期特定部１１２は、「野球部に所属」の経歴キーワードに対する時期を「中学時代と高校時代」と特定する。ここで、時期特定部１１２は、第１のユーザＰ１の誕生年から、「中学時代と高校時代」を年代に変換してもよい。
【００６９】
なお、経歴キーワード発言前後の所定時間内について、経歴キーワードの発言前と発言後とで異なる時間であってもよい。すなわち、時期特定部１１２は、経歴キーワードの発言前の第１の所定時間内と、経歴キーワードの発言後の第１の所定時間とは異なる第２の所定時間内における発言から、時期を特定してもよい。例えば、時期特定部１１２は、経歴キーワードの発言前６０秒以内、経歴キーワードの発言後４５秒以内から時期を特定することができる。
【００７０】
第１のユーザＰ１又は第２のユーザから所定の単語である指示ワードが発せられると、時期特定部１１２は、記憶部１２０が記憶する方法データＤ３において指示ワードと関連付けられる特定方法で時期を特定する。
【００７１】
例えば、上述した話題特定部１０４の処理と同様、第２のユーザＰ２が「３０秒前までキャンセル」という指示ワードを発言すると、経歴特定部１１１は、この時点から３０秒前までの発言以外の発言から経歴キーワードを特定してもよい。また例えば、第２のユーザＰ２が「〇年を時期」という指示ワードを発言すると、話題特定部１０４は、この「〇年」を時期と特定してもよい。
【００７２】
記憶処理部１１３は、経歴特定部１１１が特定した経歴と、時期特定部１１２が特定した時期とを関連付ける経歴データＤ４を記憶部１２０に記憶させる。例えば、経歴キーワードとして「野球部に所属」が特定され、時期として「中学時代と高校時代」が特定されたとき、「野球部に所属」と「中学時代と高校時代」とを関連付ける経歴データＤ４を生成し、記憶部１２０に記憶させる。
【００７３】
記憶処理部１１３は、経歴特定部１１１が特定した経歴と、時期特定部１１２が特定した時期と、画像と、を関連付ける経歴データＤ４を記憶部１２０に記憶させることができる。例えば、記憶処理部１１３は、経歴キーワード及び時期に、経歴キーワードまたは時期に関する発言がされた際にユーザ端末２０において表示された画像データの画像ＩＤを関連付けて経歴データＤ４とする。具体的には、経歴キーワード「甲子園に出場」および時期「〇年夏」が特定され、〇年夏の甲子園大会の画像データが表示されていた時、この画像データを特定する画像ＩＤを関連付けて経歴データＤ４とする。
【００７４】
判定部１１４は、記憶部１２０に記憶された経歴データＤ４と時期特定部１１２で特定された時期とに基づいて、第１のユーザＰ１のユーザ年表である経歴データＤ４の完成度を判定する。また、判定部１１４は、この完成度について、完成度データＤ５として生成する。
【００７５】
具体的には、判定部１１４は、第１のユーザＰ１の誕生年から現在の間で、経歴に関する情報がない期間の割合に応じて完成度を判定する。例えば、誕生年から現在の期間における、経歴に関する情報が存在する期間の総割合を、完成度としてもよい。また、誕生年から現在の期間において、所定期間（例えば、２年）以上経歴に関する情報が存在しない期間が少ない場合に完成度が高く、所定期間以上経歴に関する情報が存在しない期間が多い場合に完成度が低いとしてもよい。
【００７６】
判定部１１４は、当該ユーザの経歴のカテゴリごとにユーザ年表の完成度を判定してもよい。経歴のカテゴリとは、例えば、時期に関する分類である、幼少期、小学生、中学生、高校生、大学生、会社人（会社生活）、社会人（家庭生活）、退職後等の時期毎のカテゴリである。このような時期毎にカテゴリを分けて完成度を示すことで、どの時期の話題が少ないのか、どの時期の話題が多いのかを把握しやすい。また、これにより、どの時期の記憶が多いのか等を把握しやすい。
【００７７】
提示部１１５は、判定部１１４により判定された完成度を第１のユーザＰ１および第２のユーザＰ２に提示する。具体的には、提示部１１５は、完成度データＤ５を、ネットワーク３０を介してユーザ端末２０に送信し、表示させる。これにより、第１のユーザＰ１および第２のユーザＰ２は、経歴データＤ４の完成度を確認することができる。このとき、提示部１１５は、完成度データＤ５とともに、経歴データＤ４も送信してもよい。
【００７８】
また、判定部１１４において、カテゴリごとにユーザ年表の完成度が判定されたとき、提示部１１５は、第１のユーザおよび第２のユーザＰ２に、カテゴリごとに判定された完成度を提示すことができる。
【００７９】
完成度の提示方法として、提示部１１５は、完成度に応じて当該ユーザに関連する画像の一部を表示し、該完成度が所定の完成度以上となったとき、該画像が表示されるようにしてもよい。例えば、図４に示すように、提示部１１５は、完成度が所定のイラストＭであるとき、このイラストＭを完成度に応じた割合で提示させる。具体的には、提示部１１５は、完成度が５０％であるとき、図４（ａ）に示す状態の完成度の低いイラストＭを提示し、完成度が８０％になったとき、図４（ｂ）に示す状態の図４（ａ）よりも完成度の高いイラストＭに更新する。
【００８０】
ここで、提示部１１５は、第１のユーザＰ１の写真データを取得できていたとき、第１のユーザＰ１の写真データを図４に示すような完成度の提示に利用することができる。また、提示部１１５が、カテゴリごとに第１のユーザＰ１の写真データを取得できていたとき、このカテゴリごとの写真データを各カテゴリについて完成度の提示に利用することができる。
【００８１】
提示部１１５は、完成度が所定の完成度以上となった場合、当該ユーザのユーザ年表の少なくとも一部を印刷出力可能とすることができるようにしてもよい。例えば、提示部１１５は、完成度が所定の完成度以上となったとき、経歴データＤ４をユーザ端末２０に送信し、印刷させる。
【００８２】
ユーザ年表である経歴データＤ４を生成することで、第１のユーザＰ１の経歴を、本人だけでなく、本人以外の第２のユーザＰ２等にも把握させることが可能になる。これにより、第１のユーザＰ１自身も自分の経歴を振り返ることが可能となるとともに、他者も第１のユーザＰ１とのコミュニケーションを円滑にとることが可能となる。
【００８３】
《画像提供処理》
図５に示すフローチャートを用いて、ユーザ年表生成システム１における画像提供処理について説明する。
まず、ユーザ端末２０は、第１のユーザＰ１と第２のユーザＰ２との会話の音声データを取得する（Ｓ０１）。
続いて、ユーザ端末２０は、ステップＳ０１で取得した音声データをユーザ年表生成装置１０に送信する（Ｓ０２）。
【００８４】
また、ユーザ端末２０には、第１のユーザＰ１の誕生年が入力される（Ｓ０３）。
続いて、ユーザ端末２０は、ステップＳ０３で入力された誕生年をユーザ年表生成装置１０に送信する（Ｓ０４）。
【００８５】
ユーザ年表生成装置１０は、ステップＳ０２でユーザ端末２０から送信された音声データから、単語を抽出する（Ｓ０５）。
【００８６】
続いて、ユーザ年表生成装置１０は、ステップＳ０５で抽出した単語に基づいて、第１のユーザＰ１と第２のユーザＰ２との会話の中心キーワードを特定する（Ｓ０６）。
【００８７】
その後、ユーザ年表生成装置１０は、ステップＳ０４でユーザ端末２０から送信された誕生年と、ステップＳ０６で特定された中心キーワードとに、適合する画像データを選択する（Ｓ０７）。
また、ユーザ年表生成装置１０は、ステップＳ０６で選択した画像データをユーザ端末２０に送信する（Ｓ０８）。
ユーザ端末２０は、ステップＳ０８でユーザ年表生成装置１０から送信された画像データを表示させる（Ｓ０９）。
【００８８】
その後、ユーザ端末２０は、ステップＳ０９で表示された画像データを見ながらの第１のユーザＰ１と第２のユーザＰ２との会話の音声データを取得する（Ｓ１０）。
ユーザ端末２０は、ステップＳ１０で取得した音声データをユーザ年表生成装置１０に送信する（Ｓ１１）。
【００８９】
ユーザ年表生成装置１０は、再び、ステップＳ１１でユーザ端末２０から送信された音声データから、単語を抽出する（Ｓ１２）。
また、ユーザ年表生成装置１０は、ステップＳ１２で抽出された単語に基づいて、新たな画像データを選択する（Ｓ１３）。
その後、ユーザ年表生成装置１０は、ステップＳ１３で選択した新たな画像データをユーザ端末２０に送信する（Ｓ１４）。
【００９０】
なお、ステップＳ１４の後も、会話が継続する間、ステップＳＳ０９〜Ｓ１４の処理を継続する。また、ステップＳ１２〜Ｓ１４の処理においても、新たに中心キーワードを特定し、新たな画像データの選択に新たに特定した中心キーワードを用いてもよい。
【００９１】
《年表生成処理》
図６に示すフローチャートを用いて、ユーザ年表生成システム１における年表作成処理について説明する。ここで、年表作成処理は、画像提供処理と並行して実行され、年表作成処理における一部の処理（Ｓ０１〜Ｓ１１）は、図５に示す画像提供処理の一部の処理と同一であるため、同一の符号を用いて説明を省略する。
【００９２】
まず、ユーザ年表生成装置１０は、ステップＳ１１においてユーザ端末２０から送信された音声データを受信すると、この音声データから、単語を抽出する（Ｓ２１）。
【００９３】
その後、ユーザ年表生成装置１０は、ステップＳ２１で抽出された単語から経歴キーワードを特定する（Ｓ２２）。また、ユーザ年表生成装置１０は、ステップＳ２１で抽出された単語から時期を特定する（Ｓ２３）。ここで、ユーザ年表生成装置１０は、所定期間内であれば、ステップＳ１１で送信された音声データのほか、それ以前にステップＳ０２で送信された音声データに基づいて、ステップＳ２１の経歴キーワードおよびＳ２３の時期を特定してもよい。
【００９４】
続いて、ユーザ年表生成装置１０は、ステップＳ２２で特定した経歴キーワードおよびステップＳ２３で特定した時期を関連付けて経歴データＤ４を生成する（Ｓ２４）。
また、ユーザ年表生成装置１０は、ステップＳ２４で生成した経歴データＤ４の完成度を判定する（Ｓ２５）。
その後、ユーザ年表生成装置１０は、ステップＳ２４で生成した経歴データＤ４およびステップＳ２５で判定した完成度をユーザ端末２０に送信する（Ｓ２６）。
【００９５】
ユーザ端末２０は、ステップＳ２６でユーザ年表生成装置１０から送信された経歴データＤ４および完成度を表示する（Ｓ２７）。
また、ユーザ端末２０は、その後も、第１のユーザＰ１と第２のユーザＰ２との会話の音声データを取得する（Ｓ２８）。
さらに、ユーザ端末２０は、ステップＳ２８で取得した音声データをユーザ年表生成装置１０に送信する（Ｓ２９）。
【００９６】
ユーザ年表生成システム１では、このステップＳ２１〜Ｓ２９の処理が実行される間も、並行して画像提供処理が実行される。したがって、ステップＳ２８で取得する音声データは、表示される画像データを参照しながらの会話である。また、図６のフローチャートにおけるステップＳ２１の単語抽出処理は、図５のフローチャートにおけるステップＳ１２の単語抽出処理と同一であってよい。
【００９７】
本発明を諸図面や実施例に基づき説明してきたが、当業者であれば本開示に基づき種々の変形や修正を行うことが容易であることに注意されたい。従って、これらの変形や修正は本発明の範囲に含まれることに留意されたい。例えば、各手段、各ステップ等に含まれる機能等は論理的に矛盾しないように再配置可能であり、複数の手段やステップ等を１つに組み合わせたり、或いは分割したりすることが可能である。
上記実施の形態に示した構成並びに参考例に示した構成は適宜組み合わせることとしてもよい。
【符号の説明】
【００９８】
１  ユーザ年表生成システム
１０  ユーザ年表生成装置
１０１  音声出力部
１０２  誕生年取得部
１０３  単語抽出部
１０４  話題特定部
１０５  画像選択部
１０６  表示処理部
１０７  推定部
１１１  経歴特定部
１１２  時期特定部
１１３  記憶処理部
１１４  判定部
１１５  提示部
Ｄ１  対応データ
Ｄ２  画像データ
Ｄ３  方法データ
Ｄ４  経歴データ
Ｄ５  完成度データ
２０  ユーザ端末
Ｐ  ユーザ年表生成プログラム
【図１】
2020086957.tif 000003
【図２】
2020086957.tif 000004
【図３】
2020086957.tif 000005
【図４】
2020086957.tif 000006
【図５】
2020086957.tif 000007
【図６】
2020086957.tif 000008