(57)【要約】【課題】ヒューマン・コンピュータ・インタラクションにおける柔軟性を向上することができる情報を出力するための方法および装置を提供する。【解決手段】  音声情報を受信し、音声情報を解析し、声紋情報を生成するステップと、声紋情報を少なくとも１つの予め記憶された声紋情報とマッチングするステップと、声紋情報が少なくとも１つの予め記憶された声紋情報のそれぞれとマッチしないと判定されたことに応答して、新規ユーザを追加するか否かを決定するための音声質問情報を出力し、音声質問情報に基づいてユーザにより返された音声回答情報を受信するステップと、音声回答情報が新規ユーザの追加を示すと判断されたことに応答して、ユーザにアカウントバインディングを促す音声催促情報を出力するステップと、を含む。【選択図】図２
2019091419.tif 000002
【特許請求の範囲】
【請求項１】
端末装置のための情報出力方法であって、
音声情報を受信し、前記音声情報を解析し、声紋情報を生成する第１の受信ステップと、
前記声紋情報を少なくとも１つの予め記憶された声紋情報とマッチングするマッチングステップと、
前記声紋情報が前記少なくとも１つの予め記憶された声紋情報のそれぞれとマッチしないと判定されたことに応答して、新規ユーザを追加するか否かを決定するための音声質問情報を出力し、前記音声質問情報に基づいてユーザにより返された音声回答情報を受信する第１の出力ステップと、
音声回答情報が新規ユーザの追加を示すと判断されたことに応答して、ユーザにアカウントバインディングを促す音声催促情報を出力する第２の出力ステップと、
を含む前記情報出力方法。
【請求項２】
前記端末装置は、少なくとも１つのアカウントのログインをサポートし、前記少なくとも１つのアカウントのそれぞれは、前記少なくとも１つの予め記憶された声紋情報における１つの予め記憶された声紋情報に対応する請求項１に記載の情報出力方法。
【請求項３】
前記第２の出力ステップの後に、さらに
ユーザによりトリガされたアカウントログイン指令の検出に応答して、ユーザによってログインされたアカウントをバインドし、ユーザによってログインされたアカウントに対応する予め記憶された声紋情報として前記声紋情報を記憶する第１の記憶ステップを含む請求項１に記載の情報出力方法。
【請求項４】
第２の出力ステップの後に、さらに
ユーザによりトリガされたアカウントの登録の指令の検出に応答して、ユーザにユーザ情報の入力を促す音声催促情報を出力し、ユーザにより入力されたユーザ情報を受信する第３の出力ステップと、
ユーザ情報を含むアカウント登録要求をサーバに送信して、アカウント登録を行い、登録されたアカウントをバインドし、登録されたアカウントに対応する予め記憶された声紋情報として前記声紋情報を記憶する第２の記憶ステップとを含む請求項１に記載の情報出力方法。
【請求項５】
前記第１の出力ステップは、
前記声紋情報が前記少なくとも１つの予め記憶された声紋情報のそれぞれとマッチせず、かつ、前記声紋情報の生成数および/または生成頻度が所定の値よりも大きいと判定されたことに応答して、新規ユーザを追加するか否かを決定するための音声質問情報を出力するとともに、前記音声質問情報に基づいてユーザにより返された音声回答情報を受信するステップを含む請求項１に記載の情報出力方法。
【請求項６】
前記情報出力方法は、
予め記憶された声紋情報が存在しないと判定したことに応答して、声紋を入力するようにユーザに促す催促情報を出力する第４の出力ステップをさらに含む請求項１に記載の情報出力方法。
【請求項７】
前記情報出力方法は、
前記少なくとも１つの予め記憶された声紋情報に前記声紋情報とマッチする予め記憶された声紋情報が存在すると判定したことに応答して、マッチする予め記憶された声紋情報に対応するアカウントを決定し、決定されたアカウントをターゲットアカウントとして、前記ターゲットアカウントを使用するユーザの予め記憶されたユーザプロファイルを取得して、前記ユーザプロファイルとマッチするサービス情報を出力する第５の出力ステップをさらに含む請求項２に記載の情報出力方法。
【請求項８】
前記第２の記憶ステップの後に、
少なくとも１つの質問情報を出力する第６の出力ステップと、
前記少なくとも１つの質問情報に基づいて前記ユーザから返された音声答案情報を受信したことに応答して、前記サーバが前記音声答案情報に基づいて前記ユーザのユーザプロファイルを確立できるように、前記音声答案情報を前記サーバに送信する送信ステップと、
確立されたユーザプロファイルとマッチする、サーバによって送信されたサービス情報を受信し出力する第２の受信ステップと
をさらに含む請求項４に記載の情報出力方法。
【請求項９】
端末装置のための情報出力装置であって、
音声情報を受信し、前記音声情報を解析し、声紋情報を生成するための第１の受信部と、
前記声紋情報を少なくとも１つの予め記憶された声紋情報とマッチングするためのマッチング部と、
前記声紋情報が前記少なくとも１つの予め記憶された声紋情報のそれぞれとマッチしないと判定されたことに応答して、新規ユーザを追加するか否かを決定するための音声質問情報を出力し、前記音声質問情報に基づいてユーザにより返された音声回答情報を受信するための第１の出力部と、
音声回答情報が新規ユーザの追加を示すと判断されたことに応答して、ユーザにアカウントバインディングを促す音声催促情報を出力するための第２の出力部と、
を含む前記情報出力装置。
【請求項１０】
前記端末装置は、少なくとも１つのアカウントのログインをサポートし、前記少なくとも１つのアカウントのそれぞれは、前記少なくとも１つの予め記憶された声紋情報における１つの予め記憶された声紋情報に対応する請求項９に記載の情報出力装置。
【請求項１１】
前記情報出力装置は、
ユーザによりトリガされたアカウントログイン指令の検出に応答して、ユーザによってログインされたアカウントをバインドし、ユーザによってログインされたアカウントに対応する予め記憶された声紋情報として前記声紋情報を記憶するための第１の記憶部をさらに含む請求項９に記載の情報出力装置。
【請求項１２】
前記情報出力装置は、
ユーザによりトリガされたアカウントの登録の指令の検出に応答して、ユーザにユーザ情報の入力を促す音声催促情報を出力し、ユーザにより入力されたユーザ情報を受信するための第３の出力部と、
ユーザ情報を含むアカウント登録要求をサーバに送信して、アカウント登録を行い、登録されたアカウントをバインドし、登録されたアカウントに対応する予め記憶された声紋情報として前記声紋情報を記憶するための第２の記憶部とをさらに含む請求項９に記載の情報出力装置。
【請求項１３】
前記第１の出力部は、さらに、
前記声紋情報が前記少なくとも１つの予め記憶された声紋情報のそれぞれとマッチせず、かつ、前記声紋情報の生成数および/または生成頻度が所定の値よりも大きいと判定されたことに応答して、新規ユーザを追加するか否かを決定するための音声質問情報を出力し、前記音声質問情報に基づいてユーザにより返された音声回答情報を受信するように構成される請求項９に記載の情報出力装置。
【請求項１４】
前記情報出力装置は、
予め記憶された声紋情報が存在しないと判定したことに応答して、声紋を入力するようにユーザに促す催促情報を出力するための第４の出力部をさらに含む請求項９に記載の情報出力装置。
【請求項１５】
前記情報出力装置は、
前記少なくとも１つの予め記憶された声紋情報に前記声紋情報とマッチする予め記憶された声紋情報が存在すると判定したことに応答して、マッチする予め記憶された声紋情報に対応するアカウントを決定し、決定されたアカウントをターゲットアカウントとして、前記ターゲットアカウントを使用するユーザの予め記憶されたユーザプロファイルを取得して、前記ユーザプロファイルとマッチするサービス情報を出力するための第５の出力部をさらに含む請求項１０に記載の情報出力装置。
【請求項１６】
前記情報出力装置は、
少なくとも１つの質問情報を出力するための第６の出力部と、
前記少なくとも１つの質問情報に基づいて前記ユーザから返された音声答案情報を受信したことに応答して、前記サーバが前記音声答案情報に基づいて前記ユーザのユーザプロファイルを確立できるように、前記音声答案情報を前記サーバに送信するための送信部と、
確立されたユーザプロファイルとマッチする、サーバによって送信されたサービス情報を受信し出力するための第２の受信部と
をさらに含む請求項４に記載の情報出力装置。
【請求項１７】
１つ又は複数のプロセッサと、
１つ又は複数のプログラムが記憶されている記憶装置とを備える端末装置であって、
前記１つ又は複数のプログラムが前記１つ又は複数のプロセッサにより実行されると、前記１つ又は複数のプロセッサに請求項１ないし請求項８の何れか１つに記載の方法を実現させる端末装置。
【請求項１８】
コンピュータ読取可能な記憶媒体であって、
前記コンピュータ読取可能な記憶媒体にはコンピュータプログラムが記憶され、前記プログラムがプロセッサにより実行されると、請求項１ないし請求項８の何れか１つに記載の方法を実現させるコンピュータ読取可能な記憶媒体。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、コンピュータの技術分野に関し、特に、インターネットの技術分野に関し、特に、情報出力方法および装置に関する。
【背景技術】
【０００２】
コンピュータ技術の発展に伴い、音声によるインタラクションは、徐々にヒューマン・コンピュータ・インタラクションの主流になり、ますますスマート装置に採用されている。ユーザのニーズに対するパーソナライズドサービスを提供するために、通常、ユーザプロファイルの確立（establish）のために、ユーザに自己のアカウントを確立することが求められている。
【発明の概要】
【発明が解決しようとする課題】
【０００３】
タッチを主なインタラクション（interaction）の方法とする装置について、使用者は、通常、アカウントを確立するユーザであるが、音声によるインタラクションを主なインタラクションの方法とする装置については、使用者は、アカウントを確立するユーザに限らず、例えば、自宅や会社などの場所では、アカウントを確立するユーザ以外のユーザであってもよい。この場合、カスタマイズドサービスやパーソナライズドサービスを異なるユーザに提供することができるように、ユーザ自己のアカウントを確立する必要となる。
【課題を解決するための手段】
【０００４】
本発明は、情報出力方法および装置を提供する。
【０００５】
第１の形態として、本発明は、端末装置のための情報出力方法を提供する。上記方法は、音声情報を受信し、上記音声情報を解析し、声紋情報を生成するステップと、上記声紋情報を少なくとも１つの予め記憶された声紋情報とマッチングするステップと、上記声紋情報が上記少なくとも1つの予め記憶された声紋情報のそれぞれとマッチしないと判定されたことに応答して、新規ユーザを追加するか否かを決定するための音声質問情報を出力し、上記音声質問情報に基づいてユーザにより返された音声回答情報を受信するステップと、音声回答情報が新規ユーザの追加を示すと判断されたことに応答して、ユーザにアカウントバインディングを促す音声催促情報を出力するステップとを含む。
【０００６】
一部の実施形態において、上記端末装置は、少なくとも１つのアカウントのログインをサポートし、上記少なくとも１つのアカウントのそれぞれは、上記少なくとも１つの予め記憶された声紋情報における１つの予め記憶された声紋情報に対応する。
【０００７】
一部の実施形態において、上記ユーザにアカウントバインディングを促す音声催促情報を出力した後に、さらに、ユーザによりトリガされたアカウントログイン指令（instruction）の検出に応答して、ユーザによってログインされたアカウントをバインドし、上記声紋情報をユーザによってログインされたアカウントに対応する予め記憶された声紋情報として記憶するステップを含む。
【０００８】
一部の実施形態において、ユーザにアカウントバインディングを促す音声催促情報を出力した後に、さらに、ユーザによりトリガされたアカウントの登録の指令の検出に応答して、ユーザにユーザ情報の入力を促す音声催促情報を出力し、ユーザにより入力されたユーザ情報を受信するステップと、ユーザ情報を含むアカウント登録要求をサーバに送信して、アカウント登録を行い、登録されたアカウントをバインドし、上記声紋情報を登録されたアカウントに対応する予め記憶された声紋情報として記憶するステップとを含む。
【０００９】
一部の実施形態において、上記声紋情報が上記少なくとも1つの予め記憶された声紋情報のそれぞれとマッチしないと判定されたことに応答して、新規ユーザを追加するか否かを決定するための音声質問情報を出力し、上記音声質問情報に基づいてユーザにより返された音声回答情報を受信するステップは、上記声紋情報が上記少なくとも1つの予め記憶された声紋情報のそれぞれとマッチせず、かつ、上記声紋情報の生成数および/または生成頻度が所定の値よりも大きいと判定されたことに応答して、新規ユーザを追加するか否かを決定するための音声質問情報を出力し、上記音声質問情報に基づいてユーザにより返された音声回答情報を受信するステップを含む。
【００１０】
一部の実施形態において、上記方法は、予め記憶された声紋情報が存在しないと判定したことに応答して、声紋を入力するようにユーザに促す催促情報を出力するステップをさらに含む。
【００１１】
一部の実施形態において、上記方法は、上記声紋情報とマッチする予め記憶された声紋情報が上記少なくとも１つの予め記憶された声紋情報に存在すると判定したことに応答して、マッチする予め記憶された声紋情報に対応するアカウントを決定し、決定されたアカウントをターゲットアカウントとして、上記ターゲットアカウントを使用するユーザの予め記憶されたユーザプロファイルを取得して、上記ユーザプロファイルとマッチするサービス情報を出力するステップとをさらに含む。
【００１２】
一部の実施形態において、ユーザ情報を含むアカウント登録要求をサーバに送信して、アカウント登録を行い、登録されたアカウントをバインドし、上記声紋情報を登録されたアカウントに対応する予め記憶された声紋情報として記憶するステップの後に、少なくとも１つの質問情報を出力するステップと、上記少なくとも１つの質問情報に基づいて上記ユーザから返された音声答案情報を受信したことに応答して、上記サーバが上記音声答案情報に基づいて上記ユーザのユーザプロファイルを確立できるように、上記音声答案情報を上記サーバに送信するステップと、確立されたユーザプロファイルとマッチする、サーバによって送信されたサービス情報を受信し出力するステップとをさらに含む。
【００１３】
第２の形態として、本発明は、端末装置のための情報出力装置を提供する。上記装置は、音声情報を受信し、上記音声情報に対して解析し、声紋情報を生成するための第１の受信部と、上記声紋情報を少なくとも１つの予め記憶された声紋情報とマッチングするためのマッチング部と、上記声紋情報が上記少なくとも1つの予め記憶された声紋情報のそれぞれとマッチしないと判定されたことに応答して、新規ユーザを追加するか否かを決定するための音声質問情報を出力し、上記音声質問情報に基づいてユーザにより返された音声回答情報を受信するための第１の出力部と、音声回答情報が新規ユーザの追加を示すと判断されたことに応答して、ユーザにアカウントバインディングを促す音声催促情報を出力するための第２の出力部とを含む。
【００１４】
一部の実施形態において、上記端末装置は、少なくとも１つのアカウントのログインをサポートし、上記少なくとも１つのアカウントのそれぞれは、上記少なくとも１つの予め記憶された声紋情報における１つの予め記憶された声紋情報に対応する。
【００１５】
一部の実施形態において、上記装置は、ユーザによりトリガされたアカウントログイン指令の検出に応答して、ユーザによってログインされたアカウントをバインドし、上記声紋情報をユーザによってログインされたアカウントに対応する予め記憶された声紋情報として記憶するための第１の記憶部をさらに含む。
【００１６】
一部の実施形態において、上記装置は、ユーザによりトリガされたアカウントの登録の指令の検出に応答して、ユーザにユーザ情報の入力を促す音声催促情報を出力し、ユーザにより入力されたユーザ情報を受信するための第３の出力部と、ユーザ情報を含むアカウント登録要求をサーバに送信して、アカウント登録を行い、登録されたアカウントをバインドし、上記声紋情報を登録されたアカウントに対応する予め記憶された声紋情報として記憶するための第２の記憶部とを含む。
【００１７】
一部の実施形態において、第１の出力部は、さらに、上記声紋情報が上記少なくとも1つの予め記憶された声紋情報のそれぞれとマッチせず、かつ、上記声紋情報の生成数および/または生成頻度が所定の値よりも大きいと判定されたことに応答して、新規ユーザを追加するか否かを決定するための音声質問情報を出力し、上記音声質問情報に基づいてユーザにより返された音声回答情報を受信するために用いられる。
【００１８】
一部の実施形態において、上記装置は、予め記憶された声紋情報が存在しないと判定したことに応答して、声紋を入力するようにユーザに促す催促情報を出力するための第４の出力部をさらに含む。
【００１９】
一部の実施形態において、上記装置は、上記少なくとも１つの予め記憶された声紋情報に上記声紋情報とマッチする予め記憶された声紋情報が存在すると判定したことに応答して、マッチする予め記憶された声紋情報に対応するアカウントを決定し、決定されたアカウントをターゲットアカウントとして、上記ターゲットアカウントを使用するユーザの予め記憶されたユーザプロファイルを取得して、上記ユーザプロファイルとマッチするサービス情報を出力するための第５の出力部をさらに含む。
【００２０】
一部の実施形態において、上記装置は、少なくとも１つの質問情報を出力するための第６の出力部と、上記少なくとも１つの質問情報に基づいて上記ユーザから返された音声答案情報を受信したことに応答して、上記サーバが上記音声答案情報に基づいて上記ユーザのユーザプロファイルを確立できるように、上記音声答案情報を上記サーバに送信するための送信部と、確立されたユーザプロファイルとマッチする、サーバによって送信されたサービス情報を受信して、出力するための第２の受信部とをさらに含む。
【００２１】
第３の形態として、本発明は、１つ又は複数のプロセッサと、１つ又は複数のプログラムが記憶されている記憶装置とを備える端末装置であって、上記１つ又は複数のプログラムが上記１つ又は複数のプロセッサにより実行されると、上記１つ又は複数のプロセッサに上記形態に記載の方法を実現させる端末装置を提供する。
【００２２】
第４の形態として、本発明は、コンピュータ読取可能な記憶媒体であって、前記コンピュータ読取可能な記憶媒体にコンピュータプログラムが記憶され、該プログラムがプロセッサにより実行されると、上記形態に記載の方法を実現させるコンピュータ読取可能な記憶媒体を提供する。
【発明の効果】
【００２３】
本発明により提供される情報出力方法および装置によれば、音声情報を受信し、音声情報を解析し、声紋情報を生成する。そして、声紋情報を、少なくとも１つの予め記憶された声紋情報とマッチングし、声紋情報が少なくとも１つの予め記憶された声紋情報のそれぞれとマッチしないと判定されたことに応答して、新規ユーザを追加するか否かを決定するための音声質問情報を出力し、音声質問情報に基づいてユーザにより返された音声回答情報を受信する。最後に、音声回答情報が新規ユーザの追加を示すと判断されたことに応答して、ユーザにアカウントバインディングを促す音声催促情報を出力する。これにより、公共の端末装置での声紋認識によるアカウントバインディングを実現し、ヒューマン・コンピュータ・インタラクションにおける柔軟性を向上させることができる。
【図面の簡単な説明】
【００２４】
以下の図面を参照してなされた制限的でない実施形態に対する詳細的な説明により、本発明の他の特徴、目的及び利点はより明らかになる。
【図１】図１は、本発明が適用され得る例示的なシステムアーキテクチャである。
【図２】図２は、本発明の一実施形態に係る情報出力方法のフローチャートである。
【図３】図３は、本発明の他の実施形態に係る情報出力方法のフローチャートである。
【図４】図４は、本発明の一実施形態に係る情報出力装置の構造概略図である。
【図５】図５は、本発明実施形態を実現するための装置に適用されるコンピュータシステムの構成模式図である。
【発明を実施するための形態】
【００２５】
以下、図面及び実施形態を参照しながら本発明をより詳細に説明する。なお、ここで説明する具体的な実施形態は、当該発明を説明するためのものに過ぎず、当該発明を限定するものではないことは理解されている。ただし、説明の便宜上、図面には発明に関連する部分のみを示す。
【００２６】
なお、矛盾がない限り、本発明の実施形態及び実施形態における特徴を相互に組み合せてもよい。以下、図面及び実施形態を参照しながら本発明を詳細に説明する。
【００２７】
図１は、本発明が適用できる情報出力方法又は装置の実施形態の例示的なシステムアーキテクチャ１００を示す。
【００２８】
図１に示されたように、システムアーキテクチャ１００は、端末装置１０１、１０２、１０３と、ネットワーク１０４と、サーバ１０５とを備えても良い。ネットワーク１０４は、端末装置１０１、１０２、１０３とサーバ１０５の間に通信リンクの媒体を提供する。ネットワーク１０４は、各種の接続タイプ、例えば有線、無線通信リンク又は光ケーブル（Optical fiber Cable）などを含んでも良い。
【００２９】
ユーザは、端末装置１０１、１０２、１０３を使用してネットワーク１０４を介してサーバ１０５とインタラクションすることにより、情報などを送受信することができる。端末装置１０１、１０２、１０３には、各種の通信クライアントアプリ、例えば音声対話アプリケーション、音声テキスト変換アプリケーション、Webブラウザアプリケーション、ショッピングアプリケーション、検索アプリケーション、インスタントメッセージングツール、電子メールクライアント、ソーシャルプラットフォームソフトウェアなどがインストールされても良い。ここで、上記音声対話アプリケーションは、様々なサービス情報（例えば、グルメの推薦、映画の推薦、日常生活のリマインダ―、プライベートオーダメイドコンテンツなど）を提供することができる。
【００３０】
端末装置１０１、１０２、１０３は、音声受信機能を有する各種の電子装置であっても良く、スマートフォーン、タブレット、電子書籍リーダー、ＭＰ３プレーヤ（Ｍｏｖｉｎｇ  Ｐｉｃｔｕｒｅ  Ｅｘｐｅｒｔｓ  Ｇｒｏｕｐ  Ａｕｄｉｏ  Ｌａｙｅｒ  ＩＩＩ）、ＭＰ４（Ｍｏｖｉｎｇ  Ｐｉｃｔｕｒｅ  Ｅｘｐｅｒｔｓ  Ｇｒｏｕｐ  Ａｕｄｉｏ  Ｌａｙｅｒ  ＩＶ）プレーヤ、ノードパソコン及びディスクトップコンピュータなどを含むが、それらに限定されない。
【００３１】
サーバ１０５は、各種のサービスを提供するサーバ、例えば端末装置１０１、１０２、１０３における音声によるインタラクションのようなアプリに対してサポートを提供するバックエンドサーバ（backend server）であっても良い。バックエンドサーバは、たくさんのユーザの声紋情報を記憶し管理することができ、端末装置１０１、１０２、１０３からのアカウント登録、ログインなどの要求を受信し、それに応じたサービス情報を端末装置に返すことができる。
【００３２】
説明すべきこととして、本発明実施形態により提供される情報出力方法は、一般的に端末装置１０１、１０２、１０３により実行される。それに応じて、情報出力装置は一般的に端末装置１０１、１０２、１０３に設けられる。
【００３３】
なお、図１における端末装置、ネットワーク及びサーバの数は例示的なものに過ぎないことを理解されるべきである。必要に応じて、任意の数の端末装置、ネットワーク及びサーバを備えても良い。
【００３４】
引き続き図２を参照する。図２には、本発明の一実施形態に係る端末装置のための情報出力方法のフロー２００が示されている。該情報出力方法は、以下のステップを含む。
【００３５】
ステップ２０１において、音声情報を受信し、音声情報を解析して声紋情報を生成する。
【００３６】
本実施形態において、情報出力方法が実行される電子装置（例えば、図１の端末装置１０１、１０２、１０３）は、ユーザから入力された音声情報を受信し、上記音声情報を解析し、声紋情報を生成することができる。上記声紋情報は、声紋（ｖｏｉｃｅｐｒｉｎｔ）特徴を示す様々な種類の情報（例えば、ベクトルまたはマトリクスとして表現され得る）である。上記声紋特徴は、声紋に関連する様々な基本要素（例えば、共鳴ピークの周波数値または音強度など）であってもよい。ここで、電子装置は、様々な声紋認識技術を用いて音声情報を解析して、声紋情報を生成することができる。一例として、電子装置は、声紋認識に使用することができる従来のモデルなど（例えば、隠れマルコフモデルまたはニューラルネットワーク）を使用して声紋特徴を抽出して、声紋情報を生成することができる。なお、声紋情報を生成する方法は、現在広く研究および応用されている公知技術であり、ここではその詳細を省略する。
【００３７】
ステップ２０２において、声紋情報を、少なくとも１つの予め記憶された声紋情報とマッチングする。
【００３８】
本実施形態において、電子装置は、声紋情報を少なくとも１つの予め記憶された声紋情報とマッチングすることができる。一例として、電子装置は、声紋情報と予め記憶された声紋情報との類似度を計算し、声紋情報と予め記憶された声紋情報のうちの１つの類似度が予め設定された類似度閾値よりも大きい場合、声紋情報が当該予め記憶された声紋情報とマッチすると確定する。
【００３９】
本実施形態の一部の任意の実施形態において、少なくとも１つの予め記憶された声紋情報を電子装置のローカルに格納することができる。この場合、電子装置は、予め記憶された声紋情報をローカルから直接に抽出してマッチングさせることができる。
【００４０】
本実施形態の一部の任意の実施形態において、少なくとも１つの予め記憶された声紋情報がサーバ（例えば、図１に示すサーバ１０５）に格納されてもよい。電子装置は、声紋情報をサーバに送信し、声紋情報マッチング結果をサーバから受信することができる。
【００４１】
ステップ２０３において、声紋情報が少なくとも１つの予め記憶された声紋情報のそれぞれとマッチしないと判定されたことに応答して、新規ユーザを追加するか否かを決定するための音声質問情報を出力し、音声質問情報に基づいてユーザにより返された音声回答情報を受信する。
【００４２】
本実施形態において、上記声紋情報が上記少なくとも１つの予め記憶された声紋情報のそれぞれといずれもマッチしないと判定されたことに応答して、上記電子装置は、新規ユーザを追加するか否かを決定するための音声質問情報を出力し、音声質問情報に基づいてユーザにより返された音声回答情報を受信することができる。
【００４３】
ステップ２０４において、音声回答情報が新規ユーザの追加を示すと判断されたことに応答して、ユーザにアカウントバインディングを促す音声催促情報を出力する。
【００４４】
本実施形態において、電子装置は、多様な音声認識技術（例えば、音声認識機能を実現する従来の隠れマルコフモデルまたは人工ニューラルネットワーク）を用いてユーザの音声応答情報を解析して、ユーザの応答内容を決定することができる。次に、音声応答情報が新しいユーザの追加を示すと判定されたことに応答して、ユーザにアカウントをバインドするように促す（提示する）音声催促情報（voice prompt message）を出力する。
【００４５】
本発明実施形態により提供される情報出力方法および装置によれば、受信した音声情報を解析して声紋情報を取得し、声紋情報を予め記憶された少なくとも１つの声紋情報とマッチングし、マッチ失敗であれば、新規ユーザを追加するか否かを決定するための音声質問情報を出力し、上記音声質問情報に基づいてユーザにより返された音声回答情報を受信し、その後、音声回答情報が新規ユーザの追加を示すと判断されたことに応答して、ユーザにアカウントバインディングを促す音声催促情報を出力する。これにより、公共の端末装置での声紋認識によるアカウントバインディングを実現し、ヒューマン・コンピュータ・インタラクションにおける柔軟性を向上させることができる。
【００４６】
以下、他の実施形態に係る情報出力方法のフロー３００を示す図３をさらに参照する。情報出力方法のフロー３００は、以下のステップを含む。
【００４７】
ステップ３０１において、音声情報を受信し、音声情報を解析し、声紋情報を生成する。
【００４８】
本実施形態において、情報出力方法が実行される電子装置（例えば、図１の端末装置１０１、１０２、１０３）は、ユーザにより入力された音声情報を受信し、受信した音声を解析して声紋情報を生成することができる。
【００４９】
ステップ３０２において、声紋情報を少なくとも１つの予め記憶された声紋情報とマッチングする。
【００５０】
本実施形態において、電子装置は、声紋情報を少なくとも１つの予め記憶された声紋情報とマッチングすることができる。一例として、電子装置は、声紋情報と予め記憶された声紋情報との類似度を計算し、声紋情報と予め記憶された声紋情報のうちの１つの類似度が予め設定された類似度閾値よりも大きい場合、声紋情報が当該予め記憶された声紋情報とマッチすると確定する。
【００５１】
本実施形態において、電子装置は、予め記憶された声紋情報が存在しないと判断したことに応答して、声紋の入力を促す催促情報を出力することができる。ここで、電子装置は、音声または文字で催促情報を出力してもよい。
【００５２】
実際に、電子装置は、同時に少なくとも１つのアカウントのログインをサポートすることができ、少なくとも１つのアカウントのそれぞれは、少なくとも１つの予め記憶された声紋情報のうちの１つに対応する。すなわち、上記少なくとも１つのアカウントと、上記少なくとも１つの予め記憶された声紋情報とは１対１対応される。なお、各アカウントがユーザ１人に対応できることに留意されたい。
【００５３】
ステップ３０３において、少なくとも１つの予め記憶された声紋情報に声紋情報とマッチする予め記憶された声紋情報が存在すると判定したことに応答して、マッチする予め記憶された声紋情報に対応するアカウントを決定し、決定されたアカウントをターゲットアカウントとして、ターゲットアカウントを使用するユーザの予め記憶されたユーザプロファイルを取得して、ユーザプロファイルとマッチするサービス情報を出力する。
【００５４】
本実施形態において、予め記憶された声紋情報に声紋情報とマッチする声紋情報が存在すると判断した場合、電子装置は、決定されたアカウントをターゲットアカウントとして使用し、ターゲットアカウントを使用するユーザの予め記憶されたユーザプロファイルを取得し、予め記憶されたユーザプロファイルにマッチするサービス情報を出力する。なお、ユーザプロファイルおよびサービス情報は、サーバに格納されてもよいことに留意されたい。ユーザは、要求をサーバに送信することにより、ユーザプロファイルおよびユーザプロファイルとマッチするサービス情報を取得することができる。なお、ユーザプロファイルは、ユーザ属性を示すタグであってもよい。ユーザ属性は、年齢、職業、居住地、性別などのユーザに関連する様々な種類の情報であってもよい。サービス情報は、異なるタグに応じて設定された異なる種類の情報であってもよい（例えば、女性向けのサービス情報は、化粧品情報、商品の割引情報などであり、若者向けのサービス情報は、グルメの推薦情報、映画の推薦情報などである）。
【００５５】
ステップ３０４において、声紋情報が少なくとも１つの予め記憶された声紋情報のそれぞれとマッチしないと判定されたことに応答して、新規ユーザを追加するか否かを決定するための音声質問情報を出力し、音声質問情報に基づいてユーザにより返された音声回答情報を受信する。
【００５６】
本実施形態において、電子装置は、上記声紋情報が上記少なくとも１つの予め記憶された声紋情報のそれぞれといずれもマッチしないと判定されたことに応答して、新規ユーザを追加するか否かを決定するための音声質問情報を出力し、音声質問情報に基づいてユーザにより返された音声回答情報を受信することができる。
【００５７】
本実施形態の一部の任意の実施形態において、電子装置は、上記声紋情報が上記少なくとも１つの予め記憶された声紋情報のそれぞれとマッチせず、かつ、上記声紋情報の生成数および/または生成頻度が所定の値よりも大きいと判定されたことに応答して、新規ユーザを追加するか否かを決定するための音声質問情報を出力し、上記音声質問情報に基づいてユーザにより返された音声回答情報を受信する。
【００５８】
ステップ３０５において、音声応答情報が新しいユーザの追加を示すと判定されたことに応答して、ユーザにアカウントをバインドするように促す音声催促情報を出力する。
【００５９】
本実施形態において、電子装置は、音声応答情報が新規ユーザの追加を示すと判断されたことに応答して、ユーザにアカウントをバインドするように促す音声催促情報を出力することができる。
【００６０】
ステップ３０６において、ユーザによってトリガされたアカウントログイン指令の検出に応答して、ユーザによってログインされたアカウントをバインディングすることができ、声紋情報をユーザによってログインされたアカウントに対応する予め記憶された声紋情報として記憶する。
【００６１】
本実施形態において、電子装置は、ユーザによりトリガされたアカウントログイン指令の検出に応答して、ユーザによってログインされたアカウントをバインドし、ユーザによってログインされたアカウントに対応する予め記憶された声紋情報として上記声紋情報を記憶する。実際に、ユーザは、様々な方法でアカウントログイン指令をトリガすることができる。一例として、ユーザは、端末装置上のボタンに触れることによって、または音声によって（例えば、「アカウントにログイン」と言って）、アカウントログイン指令をトリガすることができる。
【００６２】
ユーザによってログインされたアカウントに対応する予め記憶された声紋情報として声紋情報を格納した後、電子装置は、さらに、サーバからユーザの予め記憶されたユーザプロファイルおよびそれに対応するサービス情報を取得して出力することができる。
【００６３】
ステップ３０７において、ユーザによりトリガされたアカウントの登録の指令の検出に応答して、ユーザにユーザ情報の入力を促す音声催促情報を出力し、ユーザにより入力されたユーザ情報を受信する。
【００６４】
本実施形態において、上記電子装置は、ユーザによりトリガされたアカウントの登録の指令の検出に応答して、ユーザ情報の入力を促す音声催促情報をユーザに出力し、ユーザにより入力されたユーザ情報を受信することができる。実際には、ユーザは様々な方法でアカウントの登録の指令をトリガすることができる。一例として、ユーザは、端末装置上のボタンに触れることによって、または音声によって（例えば、「アカウント登録」と言って）、アカウントの登録の指令をトリガすることができる。なお、ユーザは、文字入力または音声入力によってユーザ情報を入力することができることに留意されたい。
【００６５】
ステップ３０８において、ユーザ情報を含むアカウント登録要求をサーバに送信して、アカウントの登録を行い、登録されたアカウントをバインドし、上記声紋情報を登録されたアカウントに対応する予め記憶された声紋情報として記憶する。
【００６６】
本実施形態において、ユーザ情報を受信した後、電子装置は、ユーザ情報を含むアカウント登録要求をサーバに送信してアカウントを登録し、登録されたアカウントをバインドし、登録されたアカウントに対応する予め記憶された声紋情報として上記声紋情報を記憶することができる。
【００６７】
本実施形態において、登録されたアカウントに対応する予め記憶された声紋情報として上記声紋情報を記憶する後、電子装置は、少なくとも１つの質問情報（例えば、ユーザの年齢、職業等を問うなど）を出力し、上記ユーザから上記少なくとも１つの質問情報に基づいて返された音声答案情報を受信したことに応答して、上記サーバが上記音声答案情報に基づいて上記ユーザのユーザプロファイルを確立できるように、上記音声答案情報を上記サーバに送信し、確立されたユーザプロファイルとマッチする、サーバによって送信されたサービス情報を受信し出力することができる。
【００６８】
図３から分かるように、本実施形態の情報出力方法のフロー３００は、図２に対応する実施形態と比較して、ユーザログインまたはアカウント登録の過程でのヒューマンコンピュータインタラクション、ユーザプロファイル生成及びサービス情報提示を強調している。したがって、本実施形態は、ヒューマン・コンピュータ・インタラクションにおける柔軟性を向上させるだけでなく、同じ端末装置を使用する異なるユーザのためにカスタマイズドサービスやパーソナライズドサービスを提供し、そのサービスに対応する情報出力を実現することができる。
【００６９】
さらに、図４を参照する。上記の図面に示された方法の実現として、本発明は、情報出力装置の実施形態を提供する。該装置に係る実施形態は、図２に示される方法の実施形態に対応し、該装置は、様々な電子装置に具体的に適用され得る。
【００７０】
図４に示すように、本実施形態に係る情報出力装置４００は、音声情報を受信し、上記音声情報を解析し、声紋情報を生成するための第１の受信部４０１と、上記声紋情報を少なくとも１つの予め記憶された声紋情報とマッチングするためのマッチング部４０２と、上記声紋情報が上記少なくとも１つの予め記憶された声紋情報のそれぞれとマッチしないと判定されたことに応答して、新規ユーザを追加するか否かを決定するための音声質問情報を出力し、上記音声質問情報に基づいてユーザにより返された音声回答情報を受信するための第１の出力部４０３と、音声回答情報が新規ユーザの追加を示すと判断されたことに応答して、ユーザにアカウントバインディングを促す音声催促情報を出力するための第２の出力部４０４とを含む。
【００７１】
本実施形態において、第１受信部４０１は、ユーザによって入力された音声情報を受信し、受信された音声情報を解析して声紋情報を生成することができる。
【００７２】
本実施形態において、マッチング部４０２は、声紋情報を少なくとも１つの予め記憶された声紋情報とマッチングすることができる。一例として、マッチング部４０２は、声紋情報と予め記憶された声紋情報との類似度を計算し、声紋情報と予め記憶された声紋情報のうちの１つの類似度が予め設定された類似度閾値よりも大きい場合、声紋情報が当該予め記憶された声紋情報とマッチすると確認する。
【００７３】
本実施形態において、第１出力部４０３は、声紋情報が少なくとも１つの予め記憶された声紋情報のそれぞれとマッチしないと判定されたことに応答して、新規ユーザを追加するか否かを決定するための音声質問情報を出力し、音声質問情報に基づいてユーザにより返された音声回答情報を受信する。
【００７４】
本実施形態において、第２出力部４０４は、多様な音声認識技術（例えば、音声認識機能を実現できる従来の隠れマルコフモデルや人工ニューラルネットワークなど）を用いてユーザの音声応答情報を解析し、ユーザの返信内容を決定する。次に、音声応答情報が新しいユーザの追加を示すと判定されたことに応答して、ユーザにアカウントをバインドするよう促す音声催促情報を出力する。
【００７５】
本実施形態の一部の任意の実施形態において、端末装置は、少なくとも１つのアカウントのログインをサポートすることができ、少なくとも１つのアカウントのそれぞれは、少なくとも１つの予め記憶された声紋情報のうちの１つに対応する。
【００７６】
本実施形態の一部の任意な実施形態において、装置は、第１の記憶部（図示せず）をさらに含むことができる。第１の記憶部は、ユーザによりトリガされたアカウントログイン指令の検出に応答して、ユーザによってログインされたアカウントをバインドし、上記声紋情報をユーザによってログインされたアカウントに対応する予め記憶された声紋情報として記憶する。
【００７７】
本実施形態の一部の任意の実施形態において、装置は、第３の出力部および第２の記憶部（図示せず）をさらに含むことができる。上記第３出力部は、ユーザによりトリガされたアカウントの登録の指令の検出に応答して、ユーザにユーザ情報の入力を促す音声催促情報を出力し、ユーザにより入力されたユーザ情報を受信することができる。第２の記憶部は、ユーザ情報を含むアカウント登録要求をサーバに送信して、アカウント登録を行い、登録されたアカウントをバインドし、上記声紋情報を登録されたアカウントに対応する予め記憶された声紋情報として記憶することができる。
【００７８】
本実施形態の一部の任意の実施形態において、第１の出力部４０３は、上記声紋情報が上記少なくとも１つの予め記憶された声紋情報のそれぞれとマッチせず、かつ、上記声紋情報の生成数および/または生成頻度が所定の値よりも大きいと判定されたことに応答して、新規ユーザを追加するか否かを決定するための音声質問情報を出力し、上記音声質問情報に基づいてユーザにより返された音声回答情報を受信するために用いられる。
【００７９】
本実施形態の一部の任意の実施形態において、装置は、第４の出力部（図示せず）をさらに含むことができる。第４の出力部は、予め記憶された声紋情報が存在しないと判定したことに応答して、声紋を入力するようにユーザに促す催促情報を出力することができる。
【００８０】
本実施形態の一部の任意の実施形態において、装置は、第５の出力部（図示せず）をさらに含むことができる。第５の出力部は、上記少なくとも１つの予め記憶された声紋情報に上記声紋情報とマッチする予め記憶された声紋情報が存在すると判定したことに応答して、マッチする予め記憶された声紋情報に対応するアカウントを決定し、決定されたアカウントをターゲットアカウントとして、上記ターゲットアカウントを使用するユーザの予め記憶されたユーザプロファイルを取得して、上記ユーザプロファイルとマッチするサービス情報を出力することができる。
【００８１】
本実施形態の一部の任意の実施形態において、装置は、第６の出力部、送信部、および第２の受信部（図示せず）をさらに含むことができる。第６の出力部は、少なくとも１つの質問情報を出力することができる。送信部は、上記少なくとも１つの質問情報に基づいて上記ユーザから返された音声答案情報を受信したことに応答して、上記サーバが上記音声答案情報に基づいて上記ユーザのユーザプロファイルを確立できるように、上記音声答案情報を上記サーバに送信することができる。第２の受信部は、確立されたユーザプロファイルとマッチする、サーバによって送信されたサービス情報を受信し出力することができる。
【００８２】
本発明の実施形態によって提供される装置は、第１の受信部４０１が受信した音声情報を解析して声紋情報を取得し、マッチング部が声紋情報を予め記憶された少なくとも１つの声紋情報とマッチングし、マッチ失敗であれば、第１の出力部が新規ユーザを追加するか否かを決定するための音声質問情報を出力し、上記音声質問情報に基づいてユーザにより返された音声回答情報を受信し、第２の出力部４０４が、音声回答情報が新規ユーザの追加を示すと判断されたことに応答して、ユーザにアカウントバインディングを促す音声催促情報を出力することにより、公共の端末装置での声紋認識によるアカウントバインディングを実現し、ヒューマン・コンピュータ・インタラクションの柔軟性を向上させることができる。
【００８３】
続いて図５を参照する。図５は、本発明実施形態を実現するための電子装置に適用されるコンピュータシステム５００の構成模式図を示した。図５に示された電子装置は１つの例示に過ぎず、本発明実施形態の機能及び使用範囲に如何なる制限をもたらすものではない。
【００８４】
図５に示されたように、コンピュータシステム５００は、読み出し専用メモリ（ＲＯＭ）５０２に記憶されているプログラム又は記憶部５０８からランダムアクセスメモリ（ＲＡＭ）５０３にロードされたプログラムに基づいて様々な適当な動作および処理を実行することができる中央処理装置（ＣＰＵ）５０１を備える。ＲＡＭ５０３には、システム５００の動作に必要な様々なプログラムおよびデータがさらに格納されている。ＣＰＵ５０１、ＲＯＭ５０２およびＲＡＭ  ５０３は、バス５０４を介して互いに接続されている。入力／出力（Ｉ／Ｏ）インターフェース５０５もバス５０４に接続されている。
【００８５】
キーボード、マウスなどを含む入力部５０６、陰極線管（ＣＲＴ）、液晶ディスプレイ（ＬＣＤ）など、およびスピーカなどを含む出力部５０７、ハードディスクなどを含む記憶部５０８、およびＬＡＮカード、モデムなどを含むネットワークインターフェースカードの通信部５０９は、Ｉ／Ｏインターフェース５０５に接続されている。通信部５０９は、例えばインターネットのようなネットワークを介して通信処理を実行する。ドライブ５１０は、必要に応じてＩ／Ｏインターフェース５０５に接続される。リムーバブルメディア５１１は、例えば、マグネチックディスク、光ディスク、光磁気ディスク、半導体メモリなどのようなものであり、必要に応じてドライブ５１０に取り付けられ、したがって、ドライブ５１０から読み出されたコンピュータプログラムが必要に応じて記憶部５０８にインストールされる。
【００８６】
特に、本発明の実施形態によれば、上記のフローチャートに参照して説明された過程はコンピュータソフトウェアプログラムによって実現されても良い。例えば、本発明の実施形態はコンピュータ読取可能な媒体にロードされるコンピュータプログラムを含むコンピュータプログラム製品を備える。当該コンピュータプログラムは、フローチャートに示される方法を実行するためのプログラムコードを含む。このような実施形態において、当該コンピュータプログラムは、通信部５０９を介してネットワークからダウンロードしてインストールされ、及び／又はリムーバブルメディア５１１からインストールされても良い。当該コンピュータプログラムは、中央処理部（ＣＰＵ）５０１により実行される場合に、本発明の方法に限定される上記機能を実行する。説明すべきこととして、本発明のコンピュータ読取可能な媒体は、コンピュータ読取可能な信号媒体、コンピュータ読取可能な記憶媒体、或いは上記両者の任意の組み合わせであっても良い。コンピュータ読取可能な記憶媒体は、例えば電気、磁気、光、電磁気、赤外線、半導体のシステム、サーバ又は部品、或いはこれらの任意の組み合わせであっても良いが、それらに限定されない。コンピュータ読取可能な記憶媒体についてのより具体的な例は、１つ又は複数の導線を含む電気的な接続、携帯可能なコンピュータ磁気ディスク、ハードディスク、ランダムアクセスメモリ（ＲＡＭ）、読取専用メモリ（ＲＯＭ）、消去可能なプログラミング読取専用メモリ（ＥＰＲＯＭ又はフラッシュ）、光ファイバ、携帯可能なコンパクト磁気ディスク読取専用メモリ（ＣＤ−ＲＯＭ）、光学記憶素子、磁気記憶素子、或いは上記の任意の適切な組み合わせを含むが、それらに限定されない。本発明において、コンピュータ読取可能な記憶媒体は、プログラムを含むかまたはプログラムが格納される任意の有形の媒体であっても良い。当該プログラムは、コマンドによりシステム、サーバ又は部品の使用を実行し、或いはそれらに組み合わせて使用されても良い。本発明において、コンピュータ読取可能な信号媒体は、ベースバンドに伝送され或いはキャリアの一部として伝送され、コンピュータ読取可能なプログラムコードがロードされるデータ信号を含んでも良い。このような伝送されるデータ信号は、各種の形式を採用しても良く、電磁気信号、光信号又は上記の任意の適当の組み合わせを含むが、それらに限定されない。コンピュータ読取可能な信号媒体は、コンピュータ読取可能な記憶媒体以外の任意のコンピュータ読取可能な媒体であっても良い。当該コンピュータ読取可能な媒体は、コマンドによりシステム、サーバ又は部品の使用を実行し又はそれらと組み合わせて使用されるプログラムを送信し、伝播し又は伝送することができる。コンピュータ読取可能な媒体に含まれるプログラムコードは、任意の適当の媒体で伝送されても良く、無線、電線、光ケーブル、ＲＦなど、或いは上記の任意の適切な組み合わせを含むが、それらに限定されない。
【００８７】
図面におけるフローチャート及びブロック図は、本発明の各実施形態に係るシステム、方法及びコンピュータプログラム製品により実現可能なシステム構造、機能及び動作を示した。この点において、フローチャート又はブロック図における各ブロックは、１つのモジュール、プログラムセグメント、又はコードの一部を表すことができる。当該モジュール、プログラムセグメント、コードの一部には、１つ又は複数の所定のロジック機能を実現するための実行可能なコマンドが含まれる。なお、幾つかの置換としての実現において、ブロックに示される機能は図面に示される順序と異なる順序であっても良い。例えば、二つの接続的に表示されるブロックは実際に基本的に併行に実行されても良く、場合によっては逆な順序で実行されても良く、関連の機能に従って決定される。なお、ブロック図及び／又はフローチャートにおける各ブロック、及びブロック図及び／又はフローチャートにおけるブロックの組み合わせは、所定の機能又は動作を実行する専用のハードウェアによるシステムで実現されても良く、或いは専用のハードウェアとコンピュータコードの組み合わせで実現されても良い。
【００８８】
本発明実施形態に説明された部は、ソフトウェアの手段で実現されても良く、ハードウェアの手段で実現されても良い。説明された部は、プロセッサに設置されても良い。例えば、第１の受信部と、マッチング部と、第１の出力部と、第２の出力部とを備えるプロセッサとして記載されても良い。なお、これらの部の名称は、ある場面で部の自身に対する限定にはならない。例えば、第１の受信部は、「音声情報を受信する部」と記載されても良い。
【００８９】
他の側面として、本発明は更にコンピュータ読取可能な媒体を提供するする。当該コンピュータ読取可能な媒体は、上記実施形態に説明された装置に含まれたものであっても良く、当該装置に実装されずに別途に存在するものであっても良い。上記コンピュータ読取可能な媒体には、１つ又は複数のプログラムがロードされる。上記１つ又は複数のプログラムが当該装置により実行されると、当該装置に対して次のことを実行させる。すなわち、音声情報を受信し、音声情報を解析し、声紋情報を生成してから、声紋情報を少なくとも１つの予め記憶された声紋情報とマッチングし、声紋情報と少なくとも１つの予め記憶された声紋情報のそれぞれとがマッチしないと判定されたことに応答して、新規ユーザを追加するか否かを決定するための音声質問情報を出力し、音声質問情報に基づいてユーザにより返された音声回答情報を受信し、最後に、音声回答情報が新規ユーザの追加を示すと判断されたことに応答して、ユーザにアカウントバインディングを促す音声催促情報を出力するように実行させる。
【００９０】
以上の記載は、本発明の好適な実施形態及び運用される技術原理に対する説明にすぎない。本願発明範囲は、前記技術特徴による特定の組み合わせからなる発明に限定されることなく、前記の発明技術的思想から逸脱しない限り、前記技術特徴又は均等の特徴による任意の組み合わせによって形成される他の発明も同様に含まれることは、当業者であれば明らかである。例えば、前記特徴と本願に開示された（それらに限定されない）類似の機能を具備する技術特徴が互いに置換され得る発明も本願発明に含まれる。
【図１】
2019091419.tif 000003
【図２】
2019091419.tif 000004
【図３】
2019091419.tif 000005
【図４】
2019091419.tif 000006
【図５】
2019091419.tif 000007
【外国語明細書】
2019091419000001.pdf