(57)【要約】  本明細書の１つ又は複数の実施形態は、相互作用の方法及び装置を提供しており、前記方法は、検知エリア内において配置されているユーザーを検出するステップと、相互作用コンテンツを検知エリア内のユーザーに提供するステップと、相互作用コンテンツのターゲット相互作用オブジェクトが検知エリア内のユーザーの一部分である際に、ターゲット相互作用オブジェクトに関する情報を検知エリア内のユーザーに表示するステップと、を有する。【選択図】図２
2021533510.tif 000002
【特許請求の範囲】
【請求項１】
相互作用の方法であって、
検知エリア内において配置された１人又は複数のユーザーを検出するステップと、
相互作用コンテンツを前記検知エリア内の前記１人又は複数のユーザーに提供するステップと、
前記相互作用コンテンツのターゲット相互作用オブジェクトが前記検知エリア内の前記１人又は複数のユーザーの一部分である際に、前記ターゲット相互作用オブジェクトに関する情報を前記検知エリア内の前記１人又は複数のユーザーに表示するステップと、
を有する方法。
【請求項２】
前記ターゲット相互作用オブジェクトに関する情報を前記検知エリア内の前記１人又は複数のユーザーに表示する前記ステップは、
前記ターゲット相互作用オブジェクトとして機能しているユーザーのアイデンティティ情報を前記ターゲット相互作用オブジェクトに関する前記情報として判定するステップと、
前記アイデンティティ情報を前記検知エリア内の前記１人又は複数のユーザーに表示するステップと、
を有する請求項１に記載の方法。
【請求項３】
前記検知エリア内において配置されている前記１人又は複数のユーザーを識別するステップを更に有し、
前記ターゲット相互作用オブジェクトとして機能している第１ユーザーのアイデンティティが成功裏に識別された際に、前記第１ユーザーのアイデンティティ情報は、前記第１ユーザーの名称を有し、且つ、前記ターゲット相互作用オブジェクトとして機能している第２ユーザーのアイデンティティが成功裏に識別されない際に、前記第２ユーザーのアイデンティティ情報は、前記第２ユーザーに関する視覚的特徴記述情報を有する請求項２に記載の方法。
【請求項４】
前記検知エリア内の前記１人又は複数のユーザーに対応するユーザー基準情報を表示するステップを更に有し、
前記ターゲット相互作用オブジェクトに関する情報を前記検知エリア内の前記１人又は複数のユーザーに表示する前記ステップは、前記ターゲット相互作用オブジェクトとして機能しているユーザーに対応するユーザー基準情報を前記ターゲット相互作用オブジェクトに関する前記情報として判定するステップと、前記判定されたユーザー基準情報を前記検知エリア内の前記１人又は複数のユーザーに目立つように表示するステップと、を有する請求項１に記載の方法。
【請求項５】
前記検知エリア内の前記１人又は複数のユーザーに対応するユーザー基準情報を表示する前記ステップは、
画像取得を前記検知エリア内の前記１人又は複数のユーザーに対して実行するステップと、１つ又は複数の取得されたユーザー画像を前記ユーザー基準情報として表示するステップと、を有する請求項４に記載の方法。
【請求項６】
前記相互作用コンテンツの前記ターゲット相互作用オブジェクトが、前記検知エリア内の前記１人又は複数のユーザーの前記一部分から、前記１人又は複数のユーザーのすべてに、変化した際に、前記ターゲット相互作用オブジェクトに関する前記情報を前記検知エリア内の前記１人又は複数のユーザーに表示するステップを一時停止するステップを更に有する請求項１に記載の方法。
【請求項７】
前記検知エリア内のユーザーによって送信されたイベント支援要求を取得するステップと、
前記イベント支援要求に応答して、対応するイベントの完了を支援するステップと、
を更に有する請求項１に記載の方法。
【請求項８】
前記検知エリア内のユーザーによって送信されたイベント支援要求を取得する前記ステップは、
前記相互作用コンテンツに応答して前記検知エリア内の前記ユーザーによって返された応答情報を受け取るステップであって、前記応答情報は、前記イベント支援要求を有する、ステップ、
を有する請求項７に記載の方法。
【請求項９】
前記検知エリア内のユーザーによって送信されたイベント支援要求を取得する前記ステップは、
前記検知エリア内に複数のユーザーが存在している際に、予め設定された順序に従って、支援されるオブジェクトとしてユーザーを選択するステップと、
対応するイベント支援要求を送信するように、前記選択されたユーザーに順番に要求するステップと、
を有する請求項７に記載の方法。
【請求項１０】
前記検知エリア内のユーザーによって送信されたイベント支援要求を取得する前記ステップは、
前記イベント支援要求を取得するべく、セマンティック認識を取得されたユーザー音声に対して実行するステップと、
前記ユーザー音声のソースユーザーを判定するべく、サウンド特徴認識を前記ユーザー音声に対して実行するステップと、
を有する請求項７に記載の方法。
【請求項１１】
前記イベント支援要求に応答して対応するイベントの完了を支援する前記ステップは、
前記検知エリア内の前記ユーザーがグループの内部者である際に、前記イベント支援要求に応答して対応するグループ管理イベントの完了を支援するステップと、
前記検知エリア内の前記ユーザーが前記グループの外部者である際に、アラートメッセージを前記グループの関連する内部者に送信し、前記グループの前記関連する内部者との間の通信の確立において前記グループの前記外部者を支援し、或いは、前記イベント支援要求に応答して前記グループの前記外部者を訪問イベントの処理場所までガイドするステップと、
前記検知エリア内の前記ユーザーがアドミニストレータである際に、前記イベント支援要求に応答して対応する装置管理イベントの完了を支援するステップと、
を有する請求項７に記載の方法。
【請求項１２】
前記検知エリアは、近距離検知エリアと、遠距離検知エリアと、を有し、且つ、相互作用コンテンツを前記検知エリア内の前記１人又は複数のユーザーに提供する前記ステップは、
相互作用コンテンツを前記近距離検知エリア内のユーザーに提供するステップと、
前記遠距離検知エリアから前記近距離検知エリアに進入するように、前記ユーザーをガイドするべく、ガイダンス情報を前記遠距離検知エリア内のユーザーに送信するステップと、
を有する請求項１に記載の方法。
【請求項１３】
前記検知エリア内の前記１人又は複数のユーザーの関連するイベントを取得するステップを更に有し、
相互作用コンテンツを前記検知エリア内の前記１人又は複数のユーザーに提供する前記ステップは、前記相互作用コンテンツが前記関連するイベントに関係付けられている際に、前記関連するイベントの状態情報に従って、前記検知エリア内の前記１人又は複数のユーザーに提供される前記相互作用コンテンツを調節するステップを有する請求項１に記載の方法。
【請求項１４】
前記検知エリア内の前記１人又は複数のユーザーのアイデンティティタイプを判定するステップを更に有し、
相互作用コンテンツを前記検知エリア内の前記１人又は複数のユーザーに提供する前記ステップは、前記アイデンティティタイプに従って、前記検知エリア内の前記１人又は複数のユーザーに提供される前記相互作用コンテンツを調節するステップを有する請求項１に記載の方法。
【請求項１５】
前記検知エリア内のユーザーによって送信されたユーザー音声を受け取るステップと、
前記ユーザー音声に応答するステップと、
を更に有する請求項１に記載の方法。
【請求項１６】
前記ユーザー音声に応答する前記ステップは、
セマンティック認識を前記ユーザー音声に対して実行するステップと、
複数のセマンティック認識結果のコンフィデンスレベルが、予め設定された値に到達した際に、複数の対応するセマンティック認識結果選択肢を前記検知エリア内の前記ユーザーに表示するステップと、
選択されたセマンティック認識結果選択肢に対応するセマンティック認識結果に従って、前記ユーザー音声に応答するステップと、
を有する請求項１５に記載の方法。
【請求項１７】
前記ユーザー音声に対して応答する前記ステップは、
前記ユーザー音声のソース方向を判定するステップと、
前記ユーザー音声の前記ソース方向において配置されているユーザーに応答するステップと、
を有する請求項１５に記載の方法。
【請求項１８】
前記ユーザー音声のソース方向を判定する前記ステップは、
マイクロフォンアレイを使用することにより、前記ユーザー音声を受け取るステップであって、前記マイクロフォンアレイは、相対的に左側に配設された第１マイクロフォンと、相対的に右側に配設された第２マイクロフォンと、を有する、ステップと、
前記第１マイクロフォン及び前記第２マイクロフォンが前記ユーザー音声を受け取る時点の間の差に従って、前記ユーザー音声の前記ソース方向を判定するステップと、
を有する請求項１７に記載の方法。
【請求項１９】
前記ユーザー音声の前記ソース方向において配置されているユーザーに応答する前記ステップは、
前記ユーザー音声の前記ソース方向において配置されている複数のユーザーが存在している際に、前記複数のユーザーのそれぞれのものの顔面動作に従って、前記ユーザー音声のソースユーザーを判定するステップと、
前記ソースユーザーに応答するステップと、
を有する請求項１７に記載の方法。
【請求項２０】
マイクロフォンアレイを使用することにより、オーディオメッセージを受け取るステップであって、前記マイクロフォンアレイは、前記検知エリアに相対的に近接して配設されている第３マイクロフォンと、前記検知エリアから相対的に離れて配設されている第４マイクロフォンと、を有する、ステップと、
前記第３マイクロフォン及び前記第４マイクロフォンが前記オーディオメッセージ内の高周波数部分を受け取る量に従って、前記オーディオメッセージのソース方向を判定するステップと、
前記ソース方向が、前記検知エリアに相対的に近接した側部であり、且つ、前記検知エリア内においてユーザーが存在している際に、前記オーディオメッセージが、前記検知エリア内の前記ユーザーによって送信されたユーザー音声であると判定するステップと、
を更に有する請求項１５に記載の方法。
【請求項２１】
前記検知エリア内に複数のユーザーが存在している際に、それぞれ、前記ユーザーに対応するプロファイル画像を表示するステップと
その他のユーザーのプロファイル画像とは別個に、前記ユーザー音声のソースユーザーのプロファイル画像を表示するステップと、
を更に有する請求項１５に記載の方法。
【請求項２２】
相互作用の装置であって、
検知エリア内において配置されている１人又は複数のユーザーを検出するように構成された検出ユニットと、
相互作用コンテンツを前記検知エリア内の前記１人又は複数のユーザーに提供するように構成された提供ユニットと、
前記相互作用コンテンツのターゲット相互作用オブジェクトが前記検知エリア内の前記１人又は複数のユーザーの一部分である際に、前記ターゲット相互作用オブジェクトに関する情報を前記検知エリア内の前記１人又は複数のユーザーに表示するように構成された第１表示ユニットと、
を有する装置。
【請求項２３】
前記第１表示ユニットは、
前記ターゲット相互作用オブジェクトとして機能しているユーザーのアイデンティティ情報を前記ターゲット相互作用オブジェクトに関する前記情報として判定し、且つ、
前記アイデンティティ情報を前記検知エリア内の前記１人又は複数のユーザーに表示する、
ように構成されている請求項２２に記載の装置。
【請求項２４】
前記検知エリア内において配置されている前記１人又は複数のユーザーを識別するように構成された識別ユニットを更に有し、
前記ターゲット相互作用オブジェクトとして機能している第１ユーザーのアイデンティティが成功裏に識別された際に、前記第１ユーザーのアイデンティティ情報は、前記第１ユーザーの名称を有し、且つ、前記ターゲット相互作用オブジェクトとして機能している第２ユーザーのアイデンティティが成功裏に識別されない際に、前記第２ユーザーのアイデンティティ情報は、前記第２ユーザーに関する視覚的特徴記述情報を有する請求項２３に記載の装置。
【請求項２５】
前記検知エリア内の前記１人又は複数のユーザーに対応するユーザー基準情報を表示するように構成された第２表示ユニットを更に有し、
前記第１表示ユニットは、前記ターゲット相互作用オブジェクトとして機能しているユーザーに対応するユーザー基準情報を前記ターゲット相互作用オブジェクトに関する前記情報として判定し、且つ、前記判定されたユーザー基準情報を前記検知エリア内の前記１人又は複数のユーザーに目立つように表示するように構成されている請求項２２に記載の装置。
【請求項２６】
前記第２表示ユニットは、
画像取得を前記検知エリア内の前記１人又は複数のユーザーに対して実行し、且つ、１つ又は複数の取得されたユーザー画像を前記ユーザー基準情報として表示する、
ように構成されている請求項２５に記載の装置。
【請求項２７】
前記相互作用コンテンツの前記ターゲット相互作用オブジェクトが、前記検知エリア内の前記１人又は複数のユーザーの前記一部分から、前記１人又は複数のユーザーのすべてに変化した際に、前記ターゲット相互作用オブジェクトに関する前記情報を前記検知エリア内の前記１人又は複数のユーザーに表示するステップを一時停止するように構成された管理ユニットを更に有する請求項２２に記載の装置。
【請求項２８】
前記検知エリア内のユーザーによって送信されたイベント支援要求を取得するように構成された要求取得ユニットと、
前記イベント支援要求に応答して対応するイベントの完了を支援するように構成された支援ユニットと、
を更に有する請求項２２に記載の装置。
【請求項２９】
前記要求取得ユニットは、
前記相互作用コンテンツに応答して前記検知エリア内の前記ユーザーによって返された応答情報を受け取るように構成されており、前記応答情報は、前記イベント支援要求を有する請求項２８に記載の装置。
【請求項３０】
前記要求取得ユニットは、
前記検知エリア内において複数のユーザーが存在している際に、予め設定されたシーケンスに従って支援されたオブジェクトとしてユーザーを選択し、且つ、
対応するイベント支援要求を送信するように、前記選択されたユーザーに順番に要求する、
ように構成されている請求項２８に記載の装置。
【請求項３１】
前記要求取得ユニットは、
前記イベント支援要求を取得するべく、セマンティック認識を取得されたユーザー音声に対して実行し、且つ、
前記ユーザー音声のソースユーザーを判定するべく、サウンド特徴認識を前記ユーザー音声に対して実行する、
ように構成されている請求項２８に記載の装置。
【請求項３２】
前記支援ユニットは、
前記検知エリア内の前記ユーザーがグループの内部者である際に、前記イベント支援要求に応答して対応するグループ管理イベントの完了を支援し、
前記検知エリア内の前記ユーザーが前記グループの外部者である際に、アラートメッセージを前記グループの関連する内部者に送信し、前記グループの前記関連する内部者との間の通信の確立において前記グループの前記外部者を支援し、或いは、前記イベント支援要求に応答して、前記グループの前記外部者を訪問イベントの処理場所までガイドし、且つ、
前記検知エリア内の前記ユーザーがアドミニストレータである際に、前記イベント支援要求に応答して対応する装置管理イベントの完了を支援する、
ように構成されている請求項２８に記載の装置。
【請求項３３】
前記検知エリアは、近距離検知エリアと、遠距離検知エリアと、を有し、且つ、前記提供ユニットは、
相互作用コンテンツを前記近距離検知エリア内のユーザーに提供し、且つ、
前記遠距離検知エリアから前記近距離検知エリアに進入するように、前記ユーザーをガイドするべく、ガイダンス情報を前記遠距離検知エリア内のユーザーに送信する、
ように構成されている請求項２２に記載の装置。
【請求項３４】
前記検知エリア内の前記１人又は複数のユーザーの関連するイベントを取得するように構成されたイベント取得ユニットを更に有し、
前記提供ユニットは、前記相互作用コンテンツが前記関連するイベントに関係付けられている際に、前記関連するイベントの状態情報に従って前記検知エリア内の前記１人又は複数のユーザーに提供される前記相互作用コンテンツを調節するように構成されている請求項２２記載の装置。
【請求項３５】
前記検知エリア内の前記１人又は複数のユーザーのアイデンティティタイプを判定するように構成された判定ユニットを更に有し、
前記提供ユニットは、前記アイデンティティタイプに従って前記検知エリア内の前記１人又は複数のユーザーに提供される前記相互作用コンテンツを調節するように構成されている請求項２２に記載の装置。
【請求項３６】
前記検知エリア内のユーザーによって送信されたユーザー音声を受け取るように構成された音声受信ユニットと、
前記ユーザー音声に応答するように構成された応答ユニットと、
を更に有する請求項２２に記載の装置。
【請求項３７】
前記応答ユニットは、
セマンティック認識を前記ユーザー音声に対して実行し、
複数のセマンティック認識結果のコンフィデンスレベルが、予め設定された値に到達した際に、複数の対応するセマンティック認識結果選択肢を前記検知エリア内の前記ユーザーに表示し、且つ、
前記選択されたセマンティック認識結果選択肢に対応するセマンティック認識結果に従って前記ユーザー音声に応答する、
ように構成されている請求項３６に記載の装置。
【請求項３８】
前記応答ユニットは、
前記ユーザー音声のソース方向を判定し、且つ、
前記ユーザー音声の前記ソース方向において配置されたユーザーに応答する、
ように構成されている請求項３６に記載の装置。
【請求項３９】
前記応答ユニットは、
マイクロフォンアレイを使用することにより、前記ユーザー音声を受け取るステップであって、前記マイクロフォンアレイは、相対的に左側に配設された第１マイクロフォンと、相対的に右側に配設された第２マイクロフォンと、を有する、ステップと、
前記第１マイクロフォン及び前記第２マイクロフォンが前記ユーザー音声を受け取る時点の間の差に従って前記ユーザー音声の前記ソース方向を判定するステップと、
という方式により、前記ユーザー音声の前記ソース方向を判定している請求項３８に記載の装置。
【請求項４０】
前記応答ユニットは、
前記ユーザー音声の前記ソース方向において配置されている複数のユーザーが存在している際に、前記複数のユーザーのそれぞれのものの顔面動作に従って前記ユーザー音声のソースユーザーを判定するステップと、
前記ソースユーザーに応答するステップと、
という方式により、前記ユーザー音声の前記ソース方向において配置されている前記ユーザーに応答している請求項３８に記載の装置。
【請求項４１】
マイクロフォンアレイを使用することにより、オーディオメッセージを受け取るように構成されたオーディオ受信ユニットであって、前記マイクロフォンアレイは、前記検知エリアに相対的に近接して配設された第３マイクロフォンと、前記検知エリアから相対的に離れて配設された第４マイクロフォンと、を有する、オーディオ受信ユニットと、
前記第３マイクロフォン及び前記第４マイクロフォンが前記オーディオメッセージ内の高周波数部分を受け取る量に従って前記オーディオメッセージのソース方向を判定するように構成された方向判定ユニットと、
前記ソース方向が前記検知エリアに相対的に近接した側部であり、且つ、前記検知エリア内にユーザーが存在している際に、前記オーディオメッセージが、前記検知エリア内の前記ユーザーによって送信されたユーザー音声であると判定するように構成されたソース判定ユニットと、
を更に有する請求項３６に記載の装置。
【請求項４２】
前記検知エリア内に複数のユーザーが存在している際に、それぞれ、前記ユーザーに対応するプロファイル画像を表示するように構成されたプロファイル画像表示ユニットと、
その他のユーザーのプロファイル画像とは別個に、前記ユーザー音声のソースユーザーのプロファイル画像を表示するように構成された別個の表示ユニットと、
を更に有する請求項３６に記載の装置。
【発明の詳細な説明】
【技術分野】
【０００１】
関連出願の相互参照
本出願は、「ＩＮＴＥＲＡＣＴＩＯＮ  ＭＥＴＨＯＤ  ＡＮＤ  ＤＥＶＩＣＥ」という名称の、且つ、２０１８年７月２０日付で出願された、中国特許出願第２０１８１０８０６４９３．６号の優先権を主張するものであり、この特許文献の内容は、引用により、そのすべてが本明細書に包含される。
【０００２】
本明細書の１つ又は複数の実施形態は、電子技術の分野に関し、且つ、更に詳しくは、相互作用の方法及び装置に関する。
【背景技術】
【０００３】
インテリジェント技術の継続的な発展に伴って、電子装置は、益々、インテリジェントになっており、これらは、ある程度まで、ユーザーと相互作用することが可能であり、且つ、関係するイベントの完了においてユーザーを支援することができる。例えば、電子装置は、画面上における関係するコンテンツの表示、音声を通じた関係するコンテンツの再生、又はこれらに類似したものの形態において、ユーザーとの間の相互作用のプロセスを完了させることができる。
【発明の概要】
【０００４】
これに鑑み、本明細書の１つ又は複数の実施形態は、相互作用の方法及び装置を提供している。
【０００５】
上述の目的を実現するべく、本明細書の１つ又は複数の実施形態は、以下の技術的解決策を提供している。
【０００６】
本明細書の１つ又は複数の実施形態の第１の態様によれば、相互作用の方法が提供されており、方法は、
検知エリア内において配置された１人又は複数のユーザーを検出するステップと、
相互作用コンテンツを検知エリア内の１人又は複数のユーザーに提供するステップと、
相互作用コンテンツのターゲット相互作用オブジェクトが、検知エリア内の１人又は複数のユーザーの一部分である際に、ターゲット相互作用オブジェクトに関する情報を検知エリア内の１人又は複数のユーザーに表示するステップと、
を含む。
【０００７】
本明細書の１つ又は複数の実施形態の第２の態様によれば、相互作用の装置が提供されており、装置は、
検知エリア内において配置された１人又は複数のユーザーを検出するように構成された検出ユニットと、
相互作用コンテンツを検知エリア内の１人又は複数のユーザーに提供するように構成された提供ユニットと、
相互作用コンテンツのターゲット相互作用オブジェクトが、検知エリア内の１人又は複数のユーザーの一部分である際に、ターゲット相互作用オブジェクトに関する情報を検知エリア内の１人又は複数のユーザーに表示するように構成された表示ユニットと、
を含む。
【図面の簡単な説明】
【０００８】
【図１】例示用の一実施形態による、相互作用のシステムの概略アーキテクチャ図である。
【図２】例示用の一実施形態による、相互作用の方法のフローチャートである。
【図３】例示用の一実施形態による、相互作用シナリオの概略図である。
【図４】例示用の一実施形態による、内部従業員との間の相互作用の実行の概略図である。
【図５】例示用の一実施形態による、相互作用コンテンツを通じたユーザー位置のガイドの概略図である。
【図６】例示用の一実施形態による、相互作用の装置によるユーザーとの間の相互作用の能動的な起動の概略図である。
【図７】例示用の一実施形態による、相互作用コンテンツを通じたユーザー位置のガイドの別の概略図である。
【図８】例示用の一実施形態による、正常な状況下における相互作用シナリオの概略図である。
【図９】例示用の一実施形態による、関連するイベントに応じた相互作用コンテンツの調節の概略図である。
【図１０】例示用の一実施形態による、相互作用の装置による発話者の指定の概略図である。
【図１１】例示用の一実施形態による、相互作用の装置による発話者の指定の別の概略図である。
【図１２】例示用の一実施形態による、相互作用の装置による発話者の指定の更に別の概略図である。
【図１３】例示用の一実施形態による、外部者の発話順序の指定の概略図である。
【図１４】例示用の一実施形態による、相互作用オブジェクトのマーキングの概略図である。
【図１５】例示用の一実施形態による、ターゲット相互作用オブジェクトのマーキングの概略図である。
【図１６】例示用の一実施形態による、ユーザー音声のソースユーザーの判定の概略図である。
【図１７】例示用の一実施形態による、オーディオメッセージのソース方向の判定の概略図である。
【図１８】例示用の一実施形態による、ユーザー音声のソースユーザーのマーキングの概略図である。
【図１９】例示用の一実施形態による、装置の概略構造図である。
【図２０】例示用の一実施形態による、相互作用の装置のブロック図である。
【発明を実施するための形態】
【０００９】
本明細書には、例示用の実施形態について詳述されており、且つ、添付図面には、実施形態が、例示を目的として示されている。以下の説明が、添付図面を参照して実施されている際には、そうではない旨が示されていない限り、異なる添付図面中の同一の符号は、同一又は類似の要素を表している。以下の例示用の実施形態において記述されている実装形態は、そのすべてが、本明細書の１つ又は複数の実施形態と一貫性を有する実装形態であるわけではなく、これらは、その代わりに、添付の請求項において詳述されている、且つ、本明細書の１つ又は複数の実施形態における装置及び方法のいくつかの態様と一貫性を有する、例であるに過ぎない。
【００１０】
その他の実施形態において、対応する方法のステップは、必ずしも、本明細書において図示及び記述されているシーケンスに従って実行されるものではないことに留意されたい。いくつかのその他の実施形態において、方法は、本明細書において記述されているものよりも多くの又は少ない数のステップを含みうる。これに加えて、本明細書において記述されている単一のステップは、その他の実施形態においては、説明のために、複数のステップに分割することができると共に、本明細書において記述されている複数のステップも、その他の実施形態においては、説明のために、単一のステップに組み合わせることができる。
【００１１】
一実施形態において、本明細書における相互作用の解決策は、相互作用の装置に適用することができる。相互作用の装置は、相互作用機能を実装するように専用化された電子装置であってよい。或いは、この代わりに、相互作用の装置は、相互作用機能を有する多機能電子装置であってもよい。例えば、相互作用の装置は、パーソナルコンピュータ（ＰＣ：Ｐｅｒｓｏｎａｌ  Ｃｏｍｐｕｔｅｒ）、タブレット装置、ノートブック、（スマート眼鏡などの）ウェアラブル装置、及びこれらに類似したものを含んでいてもよく、これは、本明細書の１つ又は複数の実施形態において限定されてはいない。実行プロセスにおいて、相互作用の装置は、相互作用の解決策を実装するべく、相互作用のシステムを実行することができる。相互作用のシステムのアプリケーションプログラムは、相互作用の装置上において予めインストールすることができると共に、次いで、相互作用の装置上において起動及び実行することができる。当然のことながら、ＨＴＭＬ５などの技術が使用されている際には、相互作用のシステムは、相互作用の装置上においてアプリケーションプログラムをインストールすることなしに、取得及び実行することができる。
【００１２】
一実施形態において、図１は、例示用の一実施形態による、相互作用のシステムの概略アーキテクチャ図である。図１に示されているように、相互作用のシステムは、サーバー１１と、ネットワーク１２と、相互作用の装置１３と、を含みうる。実行プロセスにおいて、サーバー１１は、処理などの関係する機能を実装するべく、相互作用のシステムのサーバー上においてプログラムを実行することができると共に、相互作用の装置１３は、情報提示及び人間−コンピュータ間の相互作用などの関係する機能を実装し、これにより、サーバー１１と相互作用の装置１３の間の協働を通じて、相互作用のシステムを実装するべく、相互作用のシステムのクライアントのプログラムを実行することができる。
【００１３】
サーバー１１は、独立型のホストを含む物理的なサーバーであってもよく、或いは、サーバー１１は、ホストクラスタによって担持された仮想的なサーバーであってもよい。相互作用の装置１３は、相互作用機能を実装するべく専用化された電子装置であってもよい。或いは、この代わりに、相互作用の装置１３は、相互作用機能を有する多機能電子装置であってもよい。例えば、相互作用の装置は、ＰＣ、タブレット装置、ノートブック、（スマート眼鏡などの）ウェアラブル装置、及びこれらに類似したものを含んでいてもよく、これは、本明細書の１つ又は複数の実施形態において限定されてはいない。相互作用の装置１３及びサーバー１１が互いに相互作用しているネットワーク１２は、複数のタイプの有線又は無線ネットワークを含みうる。一実施形態において、ネットワーク１２は、公衆交換電話網（ＰＳＴＮ：Ｐｕｂｌｉｃ  Ｓｗｉｔｃｈｅｄ  Ｔｅｌｅｐｈｏｎｅ  Ｎｅｔｗｏｒｋ）及びインターネットを含むことができる。相互作用のシステムのクライアントのアプリケーションプログラムは、相互作用の装置上において予めインストールすることができると共に、次いで、相互作用の装置上において起動及び実行することができることに留意されたい。当然のことながら、ＨＴＭＬ５などの技術におけるオンライン「クライアント」が使用されている際には、クライアントは、相互作用の装置上において対応するアプリケーションプログラムをインストールすることなしに、取得及び実行することができる。
【００１４】
一実施形態において、相互作用のシステムは、モバイルグループオフィスプラットフォームに基づいて実装することができる。モバイルグループオフィスプラットフォームは、通信機能を実装してもよく、且つ、例えば、審査及び承認イベント（例えば、休暇の申請、事務用品の申請、及び財政問題などの審査及び承認イベント）、出欠チェックイベント、タスクイベント、又はログイベントなどのグループの内部イベントの処理、或いは、食べ物の注文又は物品の購入などのグループの外部イベントの処理、などの多くのその他の機能の統合された機能プラットフォームとして使用されてもよく、これは、本明細書の１つ又は複数の実施形態において限定されてはいない。同様に、モバイルグループオフィスプラットフォームも、相互作用のシステムを実装することができる。
【００１５】
例えば、モバイルグループオフィスプラットフォームは、例えば、Ｓｋｙｐｅ  Ｆｏｒ  Ｂｕｓｉｎｅｓｓ（登録商標）、Ｍｉｃｒｏｓｏｆｔ  Ｔｅａｍｓ（登録商標）、Ｙａｍｍｅｒ（登録商標）、Ｗｏｒｋｐｌａｃｅ（登録商標）、Ｓｌａｃｋ（登録商標）、ＷｅＣｏｍ（登録商標）、ＦＸｉａｏＫｅ（登録商標）、Ｆｅｔｉｏｎ  ｅｎｔｅｒｐｒｉｓｅ（登録商標）、又はＥａｓｙＣｈａｔ  ｅｎｔｅｒｐｒｉｓｅ（登録商標）などの、企業インスタントメッセージング（ＥＩＭ：Ｅｎｔｅｒｐｒｉｓｅ  Ｉｎｓｔａｎｔ  Ｍｅｓｓａｇｉｎｇ）アプリケーションなどの、関係する技術におけるインスタントメッセージングアプリケーション上において担持することができる。当然のことながら、インスタントメッセージング機能は、モバイルグループオフィスプラットフォームによってサポートされている通信機能の１つに過ぎず、且つ、モバイルグループオフィスプラットフォームは、上述の多くのその他の機能を更に実装していてもよく、これらに関する詳しい説明は、本明細書においては省略する。本明細書における「グループ（ｇｒｏｕｐ）」は、企業、学校、軍隊、病院、及び公共機関などの組織を含みうると共に、本出願においては、限定されていない。
【００１６】
一実施形態において、相互作用のシステムは、モバイルグループオフィスプラットフォーム又は類似のシナリオに限定されるものではなく、且つ、例えば、一般的なインスタントメッセージングアプリケーションなどの、任意のその他のタイプのアプリケーションに基づいて実装されていてもよく、これは、本明細書において限定されてはいない。
【００１７】
図２は、例示用の一実施形態による、相互作用の方法のフローチャートである。図２に示されているように、方法は、相互作用の装置に適用することができると共に、方法は、以下のステップを含むことができる。
【００１８】
ステップ２０２：検知エリア内において配置されている１人又は複数のユーザーを検出する。
【００１９】
一実施形態において、相互作用の装置は、特定の検知距離を有し、且つ、検知距離のカバレージエリアは、３メートル（ｍ）の半径を有する扇形の形状における（或いは、任意のその他の形状における）エリアなどの、検知エリアを形成している。検知エリア内に１人又は複数のユーザーが存在しているかどうかは、検知エリア内の検出を実行することにより、判定することができる。
【００２０】
一実施形態において、相互作用の装置は、任意の方式により、検知エリア内において１人又は複数のユーザーを検出することができる。例えば、相互作用の装置は、顔面検出を通じて、検知エリア内に１人又は複数のユーザーが存在しているかどうかを判定することができる。
【００２１】
ステップ２０４：相互作用コンテンツを検知エリア内の１人又は複数のユーザーに提供する。
【００２２】
一実施形態において、相互作用の装置は、複数の方式のうちの１つ又はこれらの組合せにおいて相互作用コンテンツを提供してもよく、これは、本明細書において限定されてはいない。例えば、相互作用の装置は、表示画面を含むことができると共に、相互作用コンテンツを検知エリア内の１人又は複数のユーザーに提供するべく、表示画面上において相互作用コンテンツを表示することができる。別の例において、相互作用の装置は、スピーカを含むことができると共に、相互作用コンテンツを検知エリア内の１人又は複数のユーザーに提供するべく、スピーカを使用することにより、音声を通じて相互作用コンテンツを再生することができる。更に別の例において、相互作用の装置は、複数のインジケータライトを含むことができると共に、相互作用コンテンツを検知エリア内の１人又は複数のユーザーに提供するべく、インジケータライトのオン／オフ状態、色、又は明滅方式を制御することができる。
【００２３】
一実施形態において、検知エリアは、近距離検知エリアと、遠距離検知エリアと、を含みうる。近距離検知エリアは、遠距離検知エリアよりも、相互作用の装置に近接している。換言すれば、本明細書における「近距離」及び「遠距離」は、相対的な関係にある。例えば、０ｍ〜１．５ｍの範囲が、近距離検知エリアとして指定されており、且つ、１．５ｍ〜３ｍの範囲が、遠距離検知エリアとして指定されている。
【００２４】
一実施形態において、相互作用の装置は、相互作用コンテンツを近距離検知エリア内のユーザーに提供することができると共に、相互作用の装置は、遠距離検知エリアから近距離検知エリアに進入するように、ユーザーをガイドするべく、ガイダンス情報を遠距離検知エリア内のユーザーに送信することができる。この結果、ユーザーは、近距離検知エリア内のユーザーとなり、且つ、相互作用コンテンツがユーザーに提供される。ユーザーが近距離検知エリア内において配置された際に、ユーザーは、適宜、相互作用の装置との間の相互作用を所望しうる。但し、遠距離検知エリアは、相対的に遠い距離に起因して、相対的に良好な相互作用効果を提供することができない。従って、ガイダンス情報をユーザーに送信することができる。この結果、一方において、ユーザーが相互作用の実装を実際に所望しているかどうかを判定することができると共に、他方において、ユーザーは、近距離検知エリアに進入した後に、相対的に良好な相互作用効果を得ることができる。相互作用の装置は、ガイダンス情報を複数の方式のうちの任意のもの又はこれらの組合せにより、送信してもよく、これは、本明細書において限定されてはいない。例えば、相互作用の装置は、ガイダンス情報を表示画面上において表示することができる。別の例において、相互作用の装置は、スピーカを使用することにより、音声を通じて、ガイダンス情報を再生することができる。更に別の例において、相互作用の装置は、近距離検知エリア内に進入するように、ユーザーをガイドするべく、インジケータライトをターンオンしてもよく、或いは、インジケータライトを明滅させてもよい。
【００２５】
一実施形態において、出欠チェック動作において、相互作用の装置は、ユーザーが近距離検知エリアに配置されているのか又は遠距離検知エリア内において配置されているのかを問わず、検知エリア内において配置されている、且つ、出欠チェック期間内において出欠についてチェック済みではない、ユーザーに対して出欠チェック動作を自動的に実装するべく、検知エリア内のユーザーを識別することができる。遠距離検知エリア内におけるユーザーの滞在持続時間が第１の予め設定された持続時間に到達した、或いは、近距離検知エリア内におけるユーザーの滞在持続時間が第２の予め設定された持続時間に到達した、際に、相互作用の装置は、ユーザーが、相互作用動作の実装を所望しうると判定することができると共に、次いで、相互作用コンテンツをユーザーに提供することができる。一般に、ユーザーは、ユーザーが相互作用の装置との間の相互作用を所望している際にのみ、相互作用の装置に接近する。従って、第２の予め設定された持続時間は、適切には、ユーザーの待機時間を低減するべく、第１の予め設定された持続時間未満であってよい。
【００２６】
一実施形態において、相互作用の装置は、ユーザーの間の「挨拶」振る舞いに類似する相互作用コンテンツを検知エリア内のユーザーに能動的に提供することができる。例えば、相互作用コンテンツは、関係するイベントの完了においてユーザーを支援するべく、「どういうご用件ですか？（Ｗｈａｔ  ｃａｎ  Ｉ  ｄｏ  ｆｏｒ  ｙｏｕ？）」を含み、これにより、検知エリア内のユーザーをガイドすることができる。
【００２７】
更には、相互作用の装置は、相互作用コンテンツを予め設定された条件を充足しているユーザーのみに提供するべく、検知エリア内のユーザーが、予め設定された条件を充足しているかどうかを判定することもできる。例えば、予め設定された条件は、遠距離検知エリア内の滞在持続時間が第１の予め設定された持続時間に到達する、近距離検知エリア内の滞在持続時間が第２の予め設定された持続時間に到達する、ユーザーが相互作用の装置を観察している、ユーザーが相互作用の装置に対面している、又はユーザーの顔と相互作用の装置の間の角度が予め設定された角度未満である、或いは、これらに類似したもの、のうちの少なくとも１つを含んでいてもよく、これは、本明細書において限定されてはいない。
【００２８】
一実施形態において、相互作用コンテンツが、関連するイベントに関係付けられている際に、相互作用の装置が、関連するイベントの状態情報に従って、検知エリア内のユーザーに提供される相互作用コンテンツを調節するように、相互作用の装置は、検知エリア内のユーザーの関連するイベントを取得することができる。相互作用コンテンツに関係付けられた関連するイベントが存在していない際には、既定の相互作用コンテンツを提供することができる。例えば、相互作用コンテンツが出欠チェックに関係付けられている際に、正常な状況下において勤務時間内において検出された検知エリア内のユーザーについての対話型コンテンツは、「早退しますか？（ａｒｅ  ｙｏｕ  ｓｕｒｅ  ｔｏ  ｌｅａｖｅ  ｅａｒｌｙ？）」であってよい。検知エリア内のユーザーの関連するイベントが、病気退勤審査及び承認イベントを含んでおり、且つ、それが、病気退勤審査及び承認イベントに関連する休暇が申請された期間内である際には、正常な状況下における勤務時間内であっても、相互作用コンテンツは、「退社時間を記録しますか（ａｒｅ  ｙｏｕ  ｓｕｒｅ  ｔｏ  ｃｌｏｃｋ  ｏｕｔ？）」に調節することができる。別の例において、相互作用コンテンツが外部者の訪問に関係付けられている際に、検知エリア内のユーザーが外部者であり、且つ、対応する関連するイベントが訪問予約イベントであることが得られた場合には、相互作用コンテンツは、「ご訪問予定の者を呼び出しましょうか？（ｗｏｕｌｄ  ｙｏｕ  ｌｉｋｅ  ｔｏ  ｃａｌｌ  ｔｈｅ  ｐｅｒｓｏｎ  ｙｏｕ  ｗｉｌｌ  ｖｉｓｉｔ？）」であってよい。対応する訪問予約イベントが存在していない際には、相互作用コンテンツは、「ご訪問予定の者は、誰でしょうか？（ｐｌｅａｓｅ  ｔｅｌｌ  ｍｅ  ｗｈｏ  ｙｏｕ  ｗｉｌｌ  ｖｉｓｉｔ？）」であってよい。
【００２９】
一実施形態において、相互作用の装置は、検知エリア内のユーザーのアイデンティティタイプを判定することができると共に、次いで、アイデンティティタイプに従って、検知エリア内のユーザーに提供される相互作用コンテンツを調節することができる。例えば、アイデンティティタイプは、検知エリア内のユーザーが、グループに属する内部者であるのか又はグループの外部者であるのか、検知エリア内のユーザーが属する部署、及びこれらに類似したものを含んでいてもよく、これにより、アイデンティティタイプを充足している相互作用コンテンツを検知エリア内のユーザーに提供している。
【００３０】
ステップ２０６：相互作用コンテンツのターゲット相互作用オブジェクトが、検知エリア内の１人又は複数のユーザーの一部分である際に、ターゲット相互作用オブジェクトに関する情報を検知エリア内の１人又は複数のユーザーに表示する。
【００３１】
一実施形態において、検知エリア内に複数のユーザーが存在している際には、ターゲット相互作用オブジェクトは、ユーザーの一部分のみであってよい（ユーザーの一部分の数は、１人又は複数であってよい）。ターゲット相互作用オブジェクトに関する情報を検知エリア内のユーザーに表示することにより、検知エリア内のそれぞれのユーザーが、自身が相互作用コンテンツのターゲット相互作用オブジェクトであるかどうかを明瞭に知りうることを保証することができる。
【００３２】
一実施形態において、検知エリア内のそれぞれのユーザーの画像情報を取得することができると共に、対応するプロファイル画像をそれぞれのユーザーについて生成することができる。次いで、相互作用が実装される前に、すべてのユーザーのプロファイル画像を表示することができる。ターゲット相互作用オブジェクトとの間の相互作用が実行される際には、ターゲット相互作用オブジェクトのプロファイル画像のみが表示され、且つ、その他のユーザーのプロファイル画像がブロックされるか、或いは、ターゲット相互作用オブジェクトに対応するプロファイル画像が、その他のユーザーに対応するプロファイル画像とは別個に表示される。例えば、別個の表示は、ターゲット相互作用オブジェクトのプロファイル画像を中央エリア内において表示するステップと、その他のユーザーのプロファイル画像をエッジエリア内において表示するステップと、を含みうる。別の例において、別個の表示は、ターゲット相互作用オブジェクトのプロファイル画像を相対的に大きなサイズにおいて表示するステップと、その他のユーザーのプロファイル画像を正常な又は相対的に小さなサイズにおいて表示するステップと、を含みうる。更に別の例において、別個の表示は、ターゲット相互作用オブジェクトのプロファイル画像を正常に（カラフルに）表示するステップと、表示するべくその他のユーザーのプロファイルをモノクロ化するステップと、を含みうる。これは、本明細書において限定されてはいない。
【００３３】
一実施形態において、相互作用コンテンツのターゲット相互作用オブジェクトが、検知エリア内のすべてのユーザーである際には（ユーザーの数は、１人又は複数であってよい）、ユーザーが相互作用コンテンツに相対的に合焦するように、ターゲット相互作用オブジェクトに関する情報を検知エリア内のユーザーに表示する必要はない。当然のことながら、ターゲット相互作用オブジェクトに関する情報が、このシナリオにおいて表示される場合にも、本明細書の技術的解決策の実装形態は、影響を受けない。
【００３４】
一実施形態においては、検知エリア内のユーザーが継続的に変化しうる。相互作用コンテンツのターゲット相互作用オブジェクトが、検知エリア内のユーザーの一部分から、すべてのユーザーに変化した（例えば、ターゲット相互作用オブジェクトではないユーザーが検知エリアを離脱した）際には、ターゲット相互作用オブジェクトに関する情報を検知エリア内のユーザーに表示するステップは、「相互作用コンテンツのターゲット相互作用オブジェクトが、検知エリア内のユーザーの一部分である」から「相互作用コンテンツのターゲット相互作用オブジェクトが、検知エリア内のすべてのユーザーである」への滑らかなシナリオ遷移を完了させるべく、一時停止することができる。
【００３５】
一実施形態において、相互作用の装置は、ターゲット相互作用オブジェクトとして機能しているユーザーのアイデンティティ情報を判定してもよく、且つ、その情報をターゲット相互作用オブジェクトに関する情報として使用することができると共に、次いで、アイデンティティ情報を検知エリア内のユーザーに表示することができる。例えば、相互作用の装置は、相互作用コンテンツを提供しつつ、アイデンティティ情報を検知エリア内のユーザーに表示してもよく、或いは、相互作用の装置は、相互作用コンテンツを提供すると共に、アイデンティティ情報を異なる瞬間において表示してもよく、これは、本明細書において限定されてはいない。
【００３６】
一実施形態において、相互作用の装置は、検知エリア内のユーザーを識別することができる。例えば、相互作用の装置は、顔面認識、指紋認識、虹彩認識、歩行認識、又は声紋認識などの生理学的特徴認識方式により、或いは、任意のその他の方式により、ユーザーを識別してもよく、これは、本明細書において限定されてはいない。ターゲット相互作用オブジェクトとして機能している第１ユーザーのアイデンティティが成功裏に識別された際に、アイデンティティ情報は、第１ユーザーの名称（例えば、名前、ニックネーム、肩書、又はその他のタイプ）を含みうる。例えば、第１ユーザーの名称が「Ｘｉａｏ  Ｂａｉ」である際に、相互作用の装置は、「Ｘｉａｏ  Ｂａｉさん、どういうご用件ですか？」を検知エリア内のユーザーに表示してもよく、この場合に、「Ｘｉａｏ  Ｂａｉ」は、ターゲット相互作用オブジェクトに関する情報であり、且つ、「どういうご用件ですか？」は、相互作用コンテンツである。ターゲット相互作用オブジェクトとして機能している第２ユーザーのアイデンティティが成功裏に識別されない際には、アイデンティティ情報は、第２ユーザーに関する視覚的特徴記述情報を提供することができる。例えば、視覚的特徴記述情報は、推定性別、推定身長、推定年齢、皮膚の色、衣服、アクセサリ、相互作用の装置までの距離、相互作用の装置に向かう向き、及びこれらに類似したもののうちの少なくとも１つを含みうる。例えば、相互作用の装置は、「黒いコートを着た男性の方、どういうご用件ですか？」を検知エリア内のユーザーに表示してもよく、この場合には、「黒いコートを着た男性の方」について、推定性別及び衣服が、ターゲット相互作用オブジェクトに関する情報として使用されており、且つ、「どういうご用件ですか？」は、相互作用コンテンツである。
【００３７】
一実施形態において、相互作用の装置は、検知エリア内のユーザーに対応するユーザー基準情報を表示することができる。相互作用の装置は、ターゲット相互作用オブジェクトとして機能しているユーザーに対応するユーザー基準情報を判定してもよく、且つ、その情報をターゲット相互作用オブジェクトに関する情報として使用してもよく、且つ、次いで、相互作用の装置は、判定されたユーザー基準情報を検知エリア内のユーザーに目立つように表示することができる。例えば、相互作用の装置は、画像取得を検知エリア内のユーザーに実行することができると共に、取得されたユーザー画像をユーザー基準情報として表示することができる。従って、相互作用の装置は、検知エリア内のユーザーがターゲット相互作用オブジェクトについて知ることを支援するべく、ターゲット相互作用オブジェクトに対応するユーザー画像の視覚的効果を改善してもよく（例えば、対応するユーザー画像を丸で囲む、或いは、対応するユーザー画像の周りに矢印マークを表示する）、或いは、非ターゲット相互作用オブジェクトに対応するユーザー画像の視覚的効果を弱化してもよい（例えば、対応するユーザー画像のコンテンツをブロックする）。
【００３８】
一実施形態において、相互作用の装置は、検知エリア内のユーザーによって送信されたイベント支援要求を取得することができると共に、イベント支援要求に応答して、対応するイベントの完了を支援することができる。例えば、検知エリア内のユーザーは、相互作用音声「従業員のＸｉａｏ  Ｈｅｉさんを呼び出してください」を相互作用の装置に送信してもよく、且つ、相互作用の装置は、ユーザーのイベント支援要求が、「従業員のＸｉａｏ  Ｈｅｉ」の呼び出し要求であると判定してもよく、且つ、「従業員のＸｉａｏ  Ｈｅｉ」を呼び出すことができる。当然のことながら、音声形態に加えて、検知エリア内のユーザーは、空間内において、予め設定された身体動作を実施するなどの、その他の方式により、イベント支援要求を送信してもよく、これは、本明細書において限定されてはいない。
【００３９】
一実施形態において、相互作用の装置は、相互作用コンテンツに応答して検知エリア内のユーザーによって返された応答情報を受け取ることができる。応答情報は、イベント支援要求を含む。例えば、相互作用コンテンツが、「Ｘｉａｏ  Ｂａｉさん、どういうご用件ですか？」である際に、検知エリア内のユーザーは、「従業員のＸｉａｏ  Ｈｅｉさんを呼び出してください」と回答してもよく、且つ、相互作用の装置は、イベント支援要求が、「従業員のＸｉａｏ  Ｈｅｉ」の呼び出し要求であると判定してもよく、且つ、「従業員のＸｉｏ  Ｈｅｉ」を呼び出してもよい。相互作用の装置が相互作用コンテンツを提供する方式は、必ずしも、検知エリア内のユーザーが応答情報を返す方式と関連付けられてはいない。２つの方式は、同一であってもよく、或いは、異なっていてもよい。これは、本明細書において限定されてはいない。
【００４０】
一実施形態において、検知エリア内に複数のユーザーが存在している際には、相互作用の装置は、予め設定されたシーケンスに従って、支援されるオブジェクトとしてユーザーを選択することができる。次いで、相互作用の装置は、対応するイベント支援要求を送信するように、選択されたユーザーに対して順番に要求している。この結果、検知エリア内のユーザーは、イベント支援要求を順番に送信することが可能であり、これにより、複数のユーザーがイベント支援要求を同時に送信する際に生成される混乱状態に起因して、相互作用の装置が、ユーザーに対応するイベント支援要求を正確に取得できないという状況が回避され、これにより、ユーザー用の支援効率及び相互作用の装置の成功レートの改善が支援される。
【００４１】
一実施形態において、相互作用の装置は、イベント支援要求を取得するべく、取得されたユーザー音声に対してセマンティック認識を実行することができると共に、相互作用の装置は、ユーザー音声のソースユーザーを判定するべく、サウンド特徴認識をユーザー音声に対して実行することができる。この結果、検知エリア内の複数のユーザーが同時に発話した際にも、相互作用の装置は、ユーザーに個々に対応する発話コンテンツを認識することができると共に、ユーザー用の支援効率を改善するべく、対応するイベント支援要求に応答することができる。相互作用の装置は、ユーザーのアイデンティティ情報を取得するべく、検知エリア内のユーザーを予め識別しておくことができる。検知エリア内に複数のユーザーが存在している際に、相互作用の装置は、ユーザー音声のソースユーザーを判定するべく、ユーザーに対応する認識されたサウンド特徴に従って、取得されたユーザー音声にサウンド特徴認識を実行することができる。すべてのサウンド特徴を使用することによるユーザー音声に対するサウンド特徴認識の実行というやり方と比較して、サウンド特徴認識について消費される時間を大幅に低減することができる。
【００４２】
一実施形態において、検知エリア内のユーザーが、グループの内部者である際には、相互作用の装置は、イベント支援要求に応答して、対応するグループ管理イベントの完了を支援することができる。検知エリア内のユーザーがグループの外部者である際には、相互作用の装置は、アラートメッセージをグループの関連する内部者に送信してもよく、グループの関連する内部者との通信の確立においてグループの外部者を支援してもよく、或いは、イベント支援要求に応答して、グループの外部者を訪問イベントの処理場所までガイドしてもよい。検知エリア内のユーザーがアドミニストレータである際には、相互作用の装置は、イベント支援要求に応答して、対応する装置管理イベントの完了を支援することができる。
【００４３】
一実施形態において、相互作用の装置は、検知エリア内のユーザーによって送信されたユーザー音声を受け取ることができると共に、ユーザー音声に応答することができる。例えば、検知エリア内のユーザーは、ユーザー音声を相互作用の装置に能動的に送信することができると共に、ユーザー音声は、イベント支援要求を相互作用の装置に送信する、日々の挨拶を相互作用の装置に付与する、制御命令を相互作用の装置に送信する、或いは、これらに類似した内容を実行する、べく、使用され、これは、本明細書において限定されてはいない。別の例において、検知エリア内のユーザーは、相互作用の装置によって実装された相互作用動作に応答して、対応するユーザー音声を相互作用の装置に送信することができる。例えば、相互作用の装置によって実装された相互作用動作が、検知エリア内のユーザーが支援を必要としているかどうかについて問い合わせることである際に、ユーザーによって送信されるユーザー音声は、必要とされる支援の種類について相互作用の装置に通知することができる。これは、本明細書において限定されてはいない。
【００４４】
一実施形態において、相互作用の装置は、セマンティック認識をユーザー音声に対して実行することができる。同一の発音が、複数の単語又はフレーズに対応しうると共に、相互作用の装置がユーザー音声をピックアップした際に歪又はノイズ干渉が存在しうることから、相互作用の装置は、ユーザー音声に対してセマンティック認識を実行した後に、複数のセマンティック認識結果を取得する場合がある。相互作用の装置は、対応するコンフィデンスレベルを取得するべく、予め定義されたセマンティック認識アルゴリズムに従ってセマンティック認識結果を採点することができる。コンフィデンスレベルが、予め設定されている値に到達した際に、それは、対応するセマンティック認識結果の信頼性が十分に高いことを通知している。更には、予め設定された値に到達する、ユーザー音声とのマッチングの程度を有する複数のセマンティック認識結果が存在している場合には、相互作用の装置は、ユーザーが、ユーザーの真の意図を選択し且つ正確に表現するように、複数の対応するセマンティック認識結果選択肢を検知エリア内のユーザーに表示することができると共に、次いで、選択されたセマンティック認識結果選択肢に対応するセマンティック認識結果に従って、ユーザー音声に応答することができる。選択プロセスにおいて、ユーザーは、ユーザーが選択を所望しているセマンティック認識結果選択肢に対応するセマンティック認識結果を発話してもよく、或いは、ユーザーが選択することを所望しているセマンティック認識結果選択肢の位置（例えば、「第１のもの」、或いは、「最も左のもの」）を発話してもよく、これは、本明細書において限定されてはいない。
【００４５】
一実施形態において、相互作用の装置は、ユーザー音声のソース方向を判定することができると共に、ユーザー音声のソース方向において配置されたユーザーに応答することができる。一状況においては、相互作用の装置が、例えば、相互作用音声の再生などのように、ユーザー音声のソース方向に対して直接的に応答しうるように、ユーザー音声のソース方向の判定の後に、相互作用の装置は、既定により、ユーザー音声を送信しているユーザーのみが、ソース方向において存在していると直接的に判定している。別の状況においては、相互作用の装置は、ユーザー音声のソース方向において存在している１人又は複数のユーザーを判定することができる。複数のユーザーが存在している場合には、相互作用の装置は、ソースユーザーに応答するべく、ユーザー音声のソースユーザーを更に判定することができる。
【００４６】
一実施形態においては、マイクロフォンアレイが、相互作用の装置内において構築されており、且つ、マイクロフォンアレイを使用することにより、ユーザー音声を受け取ることができる。マイクロフォンアレイは、相対的に左側に配設された第１マイクロフォンと、相対的に右側に配設された第２マイクロフォンと、を含む。ユーザー音声のソース方向は、第１マイクロフォン及び第２マイクロフォンがユーザー音声を受け取る時点の間の差に従って、判定されている。例えば、検知エリア内のユーザーが左側に近接した側部に配置されている際には、第１マイクロフォンが、第２マイクロフォンよりも早期にユーザー音声を受け取ることができると共に、検知エリア内のユーザーが右側に近接した側部に配置されている際には、第２マイクロフォンが、第１マイクロフォンよりも早期にユーザー音声を受け取ることができる。受け取る時点の差に従ってユーザー音声のソース方向を判定する方法の特定の解決策については、既存の技術における関係する技術的解決策が参照されてもよく、従って、本明細書においては、その詳述を省略する。
【００４７】
一実施形態において、ユーザー音声のソース方向において配置されている複数のユーザーが存在している際には、相互作用の装置は、複数のユーザーのそれぞれのものの顔面動作に従って、ユーザー音声のソースユーザーを判定することができると共に（例えば、顔面動作は、相互作用の装置内において構築されているカメラを使用することにより、画像取得を通じて取得される）、ソースユーザーに応答することができる。ユーザーの顔面動作は、頬、口、及び顎などの、１つ又は複数の部分の動作を含んでいてもよく、これは、本明細書において限定されてはいない。一例として、口の動作を使用すれば、ユーザー音声のソース方向において複数のユーザーが存在しているが、１人のユーザーのみが、口の開閉動作を実行している際には、そのユーザーをユーザー音声のソースユーザーとして判定することができる。別の例において、複数のユーザーのすべてが口の開閉動作を実行しているが、１人のユーザーの動作が、回数において、且つ、開閉の振幅において、ユーザー音声とマッチングしている際には、そのユーザーをユーザー音声のソースユーザーとして判定することができる。
【００４８】
一実施形態において、相互作用の装置が壁上において取り付けられている際に、ユーザーは、一般に、相互作用の装置の前方においてのみ、通過することが可能であり、且つ、ユーザー音声を送信することができる。相互作用の装置がその他の方式によって取り付けられている際には、相互作用の装置によって取得されるオーディオメッセージが、相互作用の装置の前方又は後方において配置されているユーザーから到来しうるように、ユーザーは、相互作用の装置の前方又は後方において出現しうる。相互作用の装置の検知エリア内にユーザーが存在しており、且つ、別のユーザーが、相互作用の装置の背後を通過する際にちょうど発話した場合には、相互作用の装置は、検知エリア内のユーザーがユーザー音声を送信したものと誤認しうる。従って、オーディオメッセージを受け取った後に、相互作用の装置は、オーディオメッセージのソース方向と、検知エリア内にユーザーが存在しているかどうかと、に基づいて、オーディオメッセージが、検知エリア内のユーザーによって送信されたユーザー音声であるのかどうかを判定することができる。
【００４９】
例えば、マイクロフォンアレイが、相互作用の装置内において構築されており、且つ、マイクロフォンアレイは、検知エリアに相対的に近接した状態において配設された第３マイクロフォンと、検知エリアから相対的に離れた状態において配設された第４マイクロフォンと、を含む。オーディオメッセージが、マイクロフォンアレイを使用することにより、受け取られた際に、オーディオメッセージのソース方向は、第３マイクロフォン及び第４マイクロフォンがオーディオメッセージ内の高周波数部分を受け取る量に従って、判定することができる。ソース方向が、検知エリアに相対的に近接している際には、オーディオメッセージ内の高周波数部分が、相互作用の装置のハウジングの吸収の影響を受けることから、第４マイクロフォンによって受け取られたオーディオメッセージの高周波数部分は、第３マイクロフォンによって受け取られたオーディオメッセージの高周波数部分未満である。ソース方向が、検知エリアから相対的に離れている際にも、オーディオメッセージの高周波数部分が、相互作用の装置のハウジングの吸収の影響を受けることから、第３マイクロフォンによって受け取られたオーディオメッセージの高周波数部分は、第４マイクロフォンによって受け取られたオーディオメッセージの高周波数部分未満である。従って、オーディオメッセージのソース方向は、第３マイクロフォン及び第４マイクロフォンがオーディオメッセージ内の高周波数部分を受け取る量に従って、正確に判定することができる。
【００５０】
ソース方向が、検知エリアに相対的に近接した側部であり、且つ、検知エリア内のユーザーが存在している際には、相互作用の装置は、オーディオメッセージは、検知エリア内のユーザーによって送信されたユーザー音声であると判定することができる。そうではなくて、ソース方向が検知エリアから相対的に離れた側部である際には、或いは、ソース方向が、検知エリアに相対的に近接した側部であるが、検知エリア内にユーザーが存在していない際には、相互作用の装置は、オーディオメッセージは、検知エリア内のユーザーによって送信されたユーザー音声ではないと判定することができる。
【００５１】
第１マイクロフォン、第２マイクロフォン、第３マイクロフォン、及び第４マイクロフォンとの関係において、左−右方向におけるマイクロフォンを弁別するべく、異なるマイクロフォンが、第１及び第２マイクロフォンとして弁別されており、且つ、前−後方向におけるマイクロフォンを弁別するべく、異なるマイクロフォンが、第３マイクロフォン及び第４マイクロフォンとして弁別されていることに留意されたい。但し、マイクロフォンアレイ内に実際に含まれるマイクロフォンの数は、本明細書において限定されてはいない。例えば、マイクロフォンアレイは、１つ又は複数の第１マイクロフォン及び１つ又は複数の第２マイクロフォンを含みうる。別の例において、マイクロフォンアレイは、１つ又は複数の第３マイクロフォン及び１つ又は複数の第４マイクロフォンを含みうる。これに加えて、マイクロフォンアレイが、右−左方向及び前−後方向におけるソース方向を同時に弁別する必要がある際には、マイクロフォンアレイは、必ずしも、４つのマイクロフォンを含む必要はない。換言すれば、第１マイクロフォン、第２マイクロフォン、第３マイクロフォン、及び第４マイクロフォンは、関係する機能を実装する際にマイクロフォンが果たす役割であるに過ぎない。実際には、マイクロフォンアレイは、更に少ない数のマイクロフォンを含みうる。例えば、マイクロフォンアレイは、３つのマイクロフォンを含んでいてもよく、この場合に、マイクロフォン１及びマイクロフォン２は、前−後方向において同一の列において配置されているが、左−右方向においては、離隔しており、且つ、マイクロフォン３は、マイクロフォン１〜３が三角形に類似した位置関係を形成するように、マイクロフォン１及びマイクロフォン２の前方又は背後において配置されている。マイクロフォン１及びマイクロフォン２は、左−右方向におけるユーザー音声のソース方向を弁別するべく、第１マイクロフォン及び第２マイクロフォンとして使用されてもよく、マイクロフォン１及びマイクロフォン２は、第３マイクロフォンとして使用されてもよく、且つ、マイクロフォン３は、第４マイクロフォンとして使用されてもよい（マイクロフォン３は、マイクロフォン１及びマイクロフォン２の背後において配置されている）。或いは、この代わりに、マイクロフォン３は、第３マイクロフォンとして使用されてもよく、且つ、マイクロフォン１及びマイクロフォン２は、前−後方向におけるオーディオメッセージの方向を弁別するべく、第４マイクロフォンとして使用されてもよい（マイクロフォン３は、マイクロフォン１及びマイクロフォン２の前方に配置されている）。
【００５２】
一実施形態において、相互作用の装置は、例えば、カメラを使用することにより、取得を実行し、且つ、次いで、顔面検出及びカウンティングを実行することにより、検知エリア内のいくつかのユーザーを検出してもよく、これは、本明細書において限定されてはいない。検知エリア内に複数のユーザーが存在している際には、相互作用の装置は、複数のユーザーを表すべく、ユーザーに対応するプロファイル画像をそれぞれ表示することができる。ユーザーが検知エリアに進入又は離脱した、或いは、ユーザーの数が変化した、際に、相互作用の装置によって表示されるプロファイル画像は、相応して変化しうる。相互作用の装置が、オーディオメッセージを受け取り、且つ、オーディオメッセージが検知エリア内のユーザーからのものであると判定した際には、相互作用の装置が、ユーザー音声の受け取りに失敗する、或いは、ソースユーザーを誤って認識する、ことを心配することなしに、ユーザーが、相互作用の装置がユーザー音声を成功裏に受け取り、且つ、プロファイル画像の変化を検討することによってソースユーザーを弁別したと判定しうるように、相互作用の装置は、その他のユーザーのプロファイル画像とは別個に、ユーザー音声のソースユーザーのプロファイル画像を表示することができる。ユーザー音声のソースユーザーのプロファイル画像は、任意の方式により、その他のユーザーのプロファイル画像とは別個に表示されてもよく、これは、本明細書において限定されてはいない。例えば、ユーザー音声のソースユーザーのプロファイル画像は、中央エリア内において表示することができると共に、その他のユーザーのプロファイル画像は、エッジエリア内において表示することができる。別の例において、ユーザー音声のソースユーザーのプロファイル画像は、相対的に大きなサイズにおいて表示することができると共に、その他のユーザーのプロファイル画像は、正常又は相対的に小さなサイズにおいて表示することができる。更に別の例において、ユーザー音声のソースユーザーのプロファイル画像は、正常に（カラフルに）表示されてもよく、且つ、その他のユーザーのプロファイル画像は、モノクロ化されてもよく、且つ、次いで、表示されてもよい。
【００５３】
理解の容易性を目的として、一例としてエンタープライズインスタントメッセージングアプリケーション「ＷｅＣｏｍ」を使用することにより、本明細書の１つ又は複数の実施形態の技術的解決策について説明する。図３は、例示用の一実施形態による、相互作用シナリオの概略図である。図３に示されているように、相互作用の装置３が、企業ＡＡのオフィス内において配設されており、且つ、相互作用の装置３がＷｅＣｏｍクライアントに基づいて本明細書の相互作用の解決策を実装しうるように、ＷｅＣｏｍクライアントが、相互作用の装置３上において実行されているものと仮定されている。
【００５４】
一実施形態において、カメラ３１が、相互作用の装置３上において取り付けられており、且つ、カメラ３１は、相互作用の装置３に対応する検知エリアとして、対応する撮影エリア３２を形成することができる。従って、相互作用の装置３は、カメラ３１を使用することにより、撮影エリア３２を撮影することによって得られた画像に従って、例えば、図３の撮影エリア３２に進入するユーザー４などの、撮影エリア３２に進入するユーザーを判定することができる。当然のことながら、カメラ３１の使用に加えて、相互作用の装置３は、サウンド検出、赤外線検出、又はその他の方法を通じて、検知エリアに進入するユーザー判定してもよく、これは、本明細書において限定されてはいない。
【００５５】
図４は、例示用の一実施形態による、内部従業員との間の相互作用の実行の概略図である。図４に示されているように、相互作用の装置３は、画面３３を装備することができると共に、画面３３は、ユーザー４に対応する、且つ、カメラ３１によって取得された、ユーザー画像４１を表示するように、構成することができる。相互作用の装置３は、例えば、カメラ３１によって取得された顔面画像に基づいて顔面認識を実行することにより、ユーザー４を識別してもよく、これは、本明細書において限定されてはいない。相互作用の装置３が、ユーザー４が内部従業員「Ｘｉａｏ  Ｂａｉ」であると認識したと仮定することにより、対応するアイデンティティ情報４２を画面３３上において表示することができる。例えば、アイデンティティ情報４２は、ユーザー４の名称「Ｘｉａｏ  Ｂａｉ」であってよい。
【００５６】
出欠チェック期間においては、相互作用の装置３が、ユーザー４が内部従業員「Ｘｉａｏ  Ｂａｉ」であると認識した後に、内部従業員「Ｘｉａｏ  Ｂａｉ」の出欠チェックデータについて問い合わせることができると共に、出欠がチェック済みではない場合には、内部従業員「Ｘｉａｏ  Ｂａｉ」用の出欠チェック動作を自動的に実装することができる。出欠チェック動作が完了したことをユーザー４に知らせるべく相互作用の装置３は、対応する相互作用コンテンツをユーザー４に提供することができる。例えば、相互作用コンテンツは、画面３３上において示されているラベル４３を含んでいてもよく、且つ、ラベル４３内に含まれている情報は、「出勤時間の記録（ｃｌｏｃｋ  ｉｎ）」であり、これは、出欠チェック動作のタイプが「出勤時間の記録」であることを通知している。相互作用コンテンツは、この代わりに、その他の形態において、ユーザー４に提供することもできる。例えば、相互作用の装置３がスピーカ３４を含んでいる場合には、スピーカ３４を使用することにより、「Ｘｉａｏ  Ｂａｉさん、出勤時間が正常に記録されました」などの音声情報を再生することができる。同様に、相互作用の装置３は、企業ＡＡのその他の内部従業員についても、出勤時間の記録の自動的な出欠チェック動作を実装することができると共に、相互作用の装置３は、企業ＡＡの従業員について退勤時間の記録の自動的な出欠チェック動作を実装することもできる。本明細書においては、その詳述を省略する。
【００５７】
一実施形態において、相互作用の装置３の検知エリアは、相互作用の装置３までの距離に従って、複数のサブエリア内に分割することができる。例えば、図３において、撮影エリア３２は、遠距離撮影エリア３２１（１．５ｍ〜３．０ｍという相互作用の装置３までの距離を有する）と近距離撮影エリア３２２（０ｍ〜１．５ｍという相互作用の装置３までの距離を有する）に分割されている。現時点において、出欠チェック期間内である場合には、相互作用の装置３は、ユーザーが遠距離撮影エリア３２１に配置されているのか又は近距離撮影エリア３２２内に配置されているのか、とは無関係に、ユーザー４用の自動的な出欠チェック動作を実装することができる。出欠チェック期間内ではあるが、ユーザー４が出欠についてチェック済みである場合、或いは、別の期間内である場合には、ユーザー４が遠距離撮影エリア３２１内において配置された際に、相互作用の装置３は、相互作用の装置がユーザー４との相互作用を能動的に起動しえない（即ち、相互作用コンテンツをユーザー４に提供しない）ように、既定により、ユーザー４が、一時的に通過したのみであり、且つ、相互作用の意図を有してはいないと判定することができる。但し、遠距離撮影エリア３２１内のユーザー４の滞在持続時間が、第１の予め設定された持続時間（例えば、３秒）に到達した場合には、相互作用の装置３は、相互作用の装置が相互作用コンテンツをユーザー４に提供しうるように、ユーザー４が相互作用の意図を有していると判定することができる。同様に、出欠チェック期間内ではあるが、ユーザー４が、出欠についてチェック済みである場合には、或いは、別の期間内である場合には、ユーザー４が近距離撮影エリア３２２内において配置された際に、相互作用の装置３は、相互作用の装置がユーザー４との相互作用を能動的に起動しえない（即ち、相互作用コンテンツをユーザー４に提供しない）ように、既定により、ユーザー４が一時的に通過したのみであり、且つ、相互作用の意図を有してはいないと判定することができる。但し、近距離撮影エリア３２２内のユーザー４の滞在持続時間が、第２の予め設定された持続時間に到達した場合には、相互作用の装置３は、相互作用の装置が相互作用コンテンツをユーザー４に提供しうるように、ユーザー４が相互作用の意図を有していると判定することができる。近距離撮影エリア３２２は、相互作用の装置３に相対的に近接していることから、ユーザー４が能動的に近距離撮影エリア３２２に進入するという振る舞いは、第２の予め設定された持続時間が、適宜、第１の予め設定された持続時間未満となりうるように、相互作用の意図を含みうる。例えば、第１の予め設定された持続時間は、３秒であり、且つ、第２の予め設定された持続時間は、１秒である。相対的に特殊な状況においては、第２の予め設定された持続時間は、０であってもよく、これは、相互作用の装置３が、近距離撮影エリア３２２に進入したら、相互作用コンテンツがユーザー４に即座に提供されうるように、既定により、ユーザー４が相互作用の意図を有していると判定することを意味している。
【００５８】
ユーザー４が、遠距離撮影エリア３２１内において配置された際に、相互作用の装置３とユーザー４の間の効果的な通信を保証するべく、且つ、相互作用効率を改善するべく、相互作用の装置３は、相互作用コンテンツを通じて、遠距離撮影エリア３２１から近距離撮影エリア３２２に移動するように、ユーザー４をガイドすることができる。例えば、図５は、例示用の一実施形態による、相互作用コンテンツを通じたユーザー位置に関するガイドの概略図である。図５に示されているように、相互作用の装置３は、画面３３上の相互作用表示エリア５１内において、テキスト形態において、相互作用コンテンツ５１１を表示することができる。例えば、相互作用コンテンツ５１１は、遠距離撮影エリア３２１から近距離撮影エリア３２２に移動するように、ユーザー４をガイドするべく、「１．５メートル以内に近づいてください（ｐｌｅａｓｅ  ｇｅｔ  ｃｌｏｓｅｒ  ｔｏ  ｂｅ  ｗｉｔｈｉｎ  １．５  ｍｅｔｅｒｓ）」である。テキスト形態における相互作用コンテンツ５１１に加えて、相互作用の装置３は、遠距離撮影エリア３２１から近距離撮影エリア３２２に移動するように、ユーザー４をガイドするべく、スピーカ３４を使用することにより、例えば、「Ｘｉａｏ  Ｂａｉさん、少しだけ遠過ぎます（Ｘｉａｏ  ｂａｉ，  ｙｏｕ  ａｒｅ  ａ  ｌｉｔｔｌｅ  ｆａｒ  ｆｒｏｍ  ｍｅ）」（「Ｘｉａｏ  Ｂａｉ」は、アイデンティティ情報であり、且つ、「少しだけ遠過ぎます」は、相互作用コンテンツである）などの、音声の形態において、相互作用コンテンツを再生することができる。これに加えて、相互作用の装置３は、遠距離撮影エリア３２１から近距離撮影エリア３２２に移動するように、ユーザー４をガイドするべく、ユーザー４の注意を引き付けるために、規則的に明滅するようにインジケータライト３５を更に制御してもよく、これは、ユーザー４に相互作用コンテンツを伝達することと等価である。当然のことながら、相互作用の装置３は、テキストの形態、音声の形態、及び光の形態などの方式のうちの任意のものにより、相互作用コンテンツを伝達してもよく、これは、本明細書において限定されてはいない。
【００５９】
ユーザー４が（能動的に、或いは、ガイダンスの下において）近距離撮影エリア３２２に進入した際に、相互作用の装置３は、ユーザーの相互作用の目的を発話するように、ユーザー４をガイドすることができる。例えば、図６は、例示用の一実施形態による、相互作用の装置によるユーザーとの間の相互作用の能動的な起動の概略図である。図６に示されているように、相互作用の装置３は、スピーカ３４を使用することにより、例えば、「Ｘｉａｏ  Ｂａｉさん、どういうご用件ですか？」（「Ｘｉｏａ  Ｂａｉ」は、アイデンティティ情報であり、且つ、「どういうご用件ですか？」は、相互作用コンテンツである）などの、音声の形態において、相互作用コンテンツを再生することができる。これに加えて、相互作用の装置３は、相互作用表示エリア５１内において、テキストの形態において、相互作用コンテンツ５１２を表示することもできる。例えば、相互作用コンテンツ５１２は、音声の形態において、相互作用の装置３に対して相互作用目的を表現するように、ユーザー４をガイドするべく、「このように、お話しください（ｔｒｙ  ｔｏ  ｓａｙ  ｓｏｍｅｔｈｉｎｇ  ｌｉｋｅ  ｔｈｉｓ）」及び「Ｚｈａｎ  Ｓａｎを呼び出してください（ｃａｌｌ  Ｚｈａｎｇ  Ｓａｎ）」であってよい。
【００６０】
相互作用の装置３は、必ずしも、遠距離撮影エリア３２１から近距離撮影エリア３２２までユーザー４をガイドする必要はないことに留意されたい。例えば、相互作用の装置３は、この代わりに、ユーザーの相互作用目的を発話するように、遠距離撮影エリア３２１内のユーザー４を直接的にガイドすることができる。例えば、相互作用の装置３は、周囲環境からのノイズに関する検出を更に実行することができる。ノイズレベルが予め設定された値超である際には、ユーザー４は、まず、遠距離撮影エリア３２１から近距離撮影エリア３２２までガイドされ、且つ、次いで、ユーザー４は、ユーザーの相互作用目的を発話するように、ガイドされる。ノイズレベルが予め設定された値未満である際には、遠距離撮影エリア３２１内のユーザー４は、ユーザーの相互作用目的を発話するように、直接的にガイドされる。
【００６１】
一実施形態において、ユーザー４が企業ＡＡの内部従業員である際には、図５に示されている「Ｘｉａｏ  Ｂａｉさん、少しだけ遠過ぎます」を使用することにより、相互作用の装置３が遠距離撮影エリア３２１から近距離撮影エリア３２２までユーザー４をガイドしうるように、相互作用の装置３は、ユーザー４の名称「Ｘｉａｏ  Ｂａｉ」を取得してもよく、ここで、名称「Ｘｉａｏ  Ｂａｉ」は、アイデンティティ情報として使用されており、且つ、「少しだけ遠過ぎます」は、相互作用コンテンツである。企業ＡＡの外部者の場合には、相互作用の装置３は、対応する名称を取得することに失敗しうる。従って、相互作用プロセスにおいて使用されるアイデンティティ情報は、図５に示されている実施形態におけるものとは異なりうる。例えば、図７は、例示用の一実施形態による、相互作用コンテンツを通じたユーザー位置に関するガイドの別の概略図である。図７に示されているように、相互作用の装置３が、カメラ３１を使用することにより、ユーザーのユーザー画像７１を取得するものと仮定されているが、ユーザーは、企業ＡＡの外部者であり、且つ、相互作用の装置３は、ユーザーの名称を取得することに失敗する。従って、遠距離撮影エリア３２１から近距離撮影エリア３２２まで移動するようにユーザーをガイドする際に、相互作用の装置３は、相互作用表示エリア５１内において、テキストの形態において、相互作用コンテンツ５１３を表示することができる。例えば、相互作用コンテンツ５１３は、「１．５メートル以内に近づいてください」である。相互作用の装置３は、この代わりに、例えば、スピーカ３４を使用することにより、「こんにちは、少しだけ遠過ぎます」（ユーザーのアイデンティティ情報が省略されている）などのように、音声形態において、相互作用コンテンツを再生することもできる。相互作用の装置３は、この代わりに、近距離撮影エリア３２２から遠距離撮影エリア３２１まで移動するように、ユーザーをガイドするべく、規則的に明滅するようにインジケータライト３５を制御することもできる。
【００６２】
一実施形態において、相互作用の装置３は、ＷｅＣｏｍのサーバーにアクセスすることにより、検知エリア内のユーザーの関連するイベントを知ることができると共に、関連付するイベントに基づいて、提供するべき相互作用コンテンツを変更することができる。例えば、図８は、例示用の一実施形態による、正常な状況下における相互作用シナリオの概略図である。図８に示されているように、相互作用の装置３が、勤務時間内において、撮影エリア３２内において配置されたユーザーを検出し、且つ、ユーザー４が、企業ＡＡの内部従業員「Ｘｉａｏ  Ｂａｉ」であると認識したと仮定することにより、相互作用の装置３が、ユーザー４の相互作用目的が退勤時間の記録であると判定したが、依然として勤務時間内である場合に、相互作用の装置３がユーザー４の退勤時間の記録と関係付けられた関連するイベントを見出せない際には、相互作用表示エリア５１内に示される相互作用コンテンツ５１５は、「早退するつもりですか？（ａｒｅ  ｙｏｕ  ｓｕｒｅ  ｔｏ  ｌｅａｖｅ  ｅａｒｌｙ？）」であってよい。図９は、例示用の一実施形態による、関連するイベントに応じた相互作用コンテンツの調節の概略図である。図９に示されているように、相互作用の装置３が、勤務時間内において、撮影エリア３２内において配置されたユーザー４を検出し、且つ、ユーザー４が企業ＡＡの内部従業員「Ｘｉａｏ  Ｂａｉ」であると認識した、と仮定することにより、相互作用の装置３が、ユーザー４が、提出済みの病気退勤審査及び承認イベントを有していることを見出し、且つ、病気退勤審査及び承認イベントにおいて承認されている病気退勤時間内である場合には、相互作用表示エリア５１内に示される相互作用コンテンツ５１４は、「退勤時間を記録しますか？（ａｒｅ  ｙｏｕ  ｓｕｒｅ  ｔｏ  ｃｌｏｃｋ  ｏｕｔ？）」であってよい。
【００６３】
一実施形態においては、相互作用の装置３の撮影エリア３２内に複数のユーザーが存在しうると共に、相互作用の装置３は、適切な相互作用コンテンツを使用することにより、これらのユーザーとの通信を実装することができる。図１０は、例示用の一実施形態による、相互作用の装置による発話者の指定の概略図である。図１０に示されているように、画面３３上において示されているユーザー画像８１〜８２にそれぞれ対応する検知エリア３２内の複数のユーザーが存在していると仮定することにより、相互作用の装置３は、ユーザー画像８１に対応するユーザーを「Ｘｉａｏ  Ｂａｉ」として認識してもよく、且つ、ユーザー画像８２に対応するユーザーを「Ｘｉａｏ  Ｈｅｉ」として認識してもよく、且つ、対応するユーザー画像の周りにおいて、アイデンティティ情報をとして、ユーザーの名称を表示してもよい。例えば、ユーザー画像８１の上方において示されている対応するユーザーのアイデンティティ情報９１は、名称「Ｘｉａｏ  Ｂａｉ」であり、且つ、ユーザー画像８２の上方において示されている対応するユーザーのアイデンティティ情報９２は、名称「Ｘｉａｏ  Ｈｅｉ」である。相互作用の装置３の限られた相互作用能力に起因して、且つ、相互作用の装置３がユーザーの相互作用目的について明瞭に知ることを可能にするべく、相互作用の装置３は、一度に、ユーザーの一部分のみと相互作用しうる。相互作用の装置３は、ユーザーと相互作用の装置３の間の距離の昇順による、ユーザーの顔面とカメラ３１の撮影方向の間の角度の昇順による、或いは、ユーザーの身長の降順による、などの、特定の方式により、ターゲット相互作用オブジェクト（ユーザーの一部分）を選択してもよく、これは、本明細書において限定されてはいない。相互作用の装置３が、ユーザー画像８１に対応するユーザー「Ｘｉａｏ  Ｂａｉ」と相互作用するべく意図していると仮定することにより、検知エリア内のその他のユーザーの誤解を回避するべく、相互作用の装置３は、相互作用コンテンツを提供する際に、相互作用コンテンツに対応するターゲット相互作用オブジェクトが、ユーザー「Ｘｉａｏ  Ｂａｉ」であると検知エリア内のユーザーに表現する必要がある。例えば、相互作用の装置３が、スピーカ３４を使用することにより、相互作用コンテンツ「どういうご用件ですか？」を再生する際に、その他のユーザーにとって、相互作用コンテンツ「どういうご用件ですか？」のターゲット相互作用オブジェクトが、「Ｘｉａｏ  Ｂａｉ」であることが明らかとなるように、実際の再生されるコンテンツが、「Ｘｉａｏ  Ｂａｉさん、どういうご用件ですか？」となりうるように、これに加えて、ユーザー「Ｘｉａｏ  Ｂａｉ」のアイデンティティ情報を再生することができる。
【００６４】
図１１は、例示用の一実施形態による、相互作用の装置による発話者の指定の別の概略図である。図１１に示されているように、ユーザー「Ｘｉａｏ  Ｂａｉ」及びユーザー「Ｘｉａｏ  Ｈｅｉ」などの、複数のユーザーが、同時にそれぞれの相互作用の意図を発話した場合に、相互作用の装置３は、サウンドの混乱状態に起因して、それぞれのユーザーの相互作用目的を正確に知ることができない場合があり、或いは、相互作用の装置３が、同時に複数のユーザーの相互作用目的に応答できない場合があり、或いは、相互作用の装置３が、それぞれの相互作用目的を順番に表現するように、これらのユーザーをガイドするべく、相互作用コンテンツを提供しうるような、その他の理由が存在している。例えば、相互作用の装置３は、相互作用表示エリア５１内において、相互作用コンテンツ５１６を表示することができる。相互作用コンテンツ５１６は、「一人ずつ話してください（ｐｌｅａｓｅ  ｓｐｅａｋ  ｏｎｅ  ｂｙ  ｏｎｅ）」を含むことができる。更には、相互作用の装置３が、以上の実施形態に従って、ユーザーの発話順序が、ユーザー「Ｘｉｏ  Ｂａｉ」が、まず話し、且つ、ユーザー「Ｘｉａｏ  Ｈｅｉ」が、後から話す、というものであると判定した際には、相互作用の装置３は、これに加えて、その他のユーザーが、相互作用コンテンツのターゲット相互作用オブジェクトが、ユーザー「Ｘｉａｏ  Ｂａｉ」であることを知るように、実際の再生されるコンテンツが、「わたしは、明瞭に聞き取ることができません。Ｘｉａｏ  Ｂａｉさん、まず話して下さい」（Ｉ  ｃａｎｎｏｔ  ｈｅａｒ  ｃｌｅａｌｙ．  Ｘｉａｏ  Ｂａｉ，  ｐｌｅａｓｅ  ｓｐｅａｋ  ｆｉｒｓｔ）となりうるように、スピーカ３４を使用することにより、相互作用コンテンツ「わたしは、明瞭に聞き取ることができません。ｘｘ、まず話してください（Ｉ  ｃａｎｎｏｔ  ｈｅａｒ  ｃｌｅａｒｌｙ．  ｘｘ，  ｐｌｅａｓｅ  ｓｐｅａｋ  ｆｉｒｓｔ）」を再生しつつ、ユーザー「Ｘｉａｏ  Ｂａｉ」のアイデンティティ情報を再生することができる。
【００６５】
図１０及び図１１に示されている実施形態における音声の形態に加えて、複数のユーザーの発話順序は、複数のその他の方式により、指定することもできる。例えば、図１２は、例示用の一実施形態による、相互作用の装置による発話者の指定の更に別の概略図である。図１２に示されているように、相互作用の装置３が、ユーザーの発話順序が、ユーザー「Ｘｉａｏ  Ｂａｉ」が、まず話し、且つ、ユーザー「Ｘｉａｏ  Ｈｅｉ」が、後から話す、というものであると判定した際に、相互作用の装置３は、例えば、マーキングボックス８１０を顔面エリアに追加することにより、ユーザー「Ｘｉａｏ  Ｂａｉ」に対応するユーザー画像８１をマーキングすることができる。この結果、相互作用コンテンツが、「どういうご用件ですか？」、「話してください」、及びこれらに類似したものである場合にも、ユーザーは、相互作用コンテンツのターゲット相互作用オブジェクトが、ユーザー「Ｘｉａｏ  Ｂａｉ」であると知ることができる。当然のことながら、図１２に示されている実施形態において、相互作用の装置１３が、相互作用表示エリア５１内において、相互作用テキスト５１７を表示する際に、相互作用テキスト５１７は、相互作用テキスト５１７のフルコンテンツが「Ｘｉａｏ  Ｂａｉさん、話してください」となるように、相互作用コンテンツ「ｘｘ、話してください」に加えて、現時点のターゲット相互作用オブジェクトがユーザー「Ｘｉａｏ  Ｂａｉ」であることをユーザーに通知しうる、ユーザー「Ｘｉａｏ  Ｂａｉ」のアイデンティティ情報を更に含んでいる。
【００６６】
図１３は、例示用の一実施形態による、外部者の発話順序の概略図である。図１３に示されているように、８１及び８２というユーザー画像に対応するユーザーは、いずれも、企業ＡＡの外部者であるものと仮定されており、相互作用の装置３は、これらのユーザーの名称を取得することができないが、相互作用情報に対応するターゲット相互作用オブジェクトを規定するべく、相互作用情報に対応するターゲット相互作用オブジェクトを規定するべく、ユーザーのアイデンティティ情報をその他の方式によって表現することができる。例えば、相互作用の装置３が、ターゲット相互作用オブジェクトが、ユーザー画像８１に対応するユーザーであると判定した際に、ユーザー画像８１が女性ユーザーに対応しており、且つ、ユーザー画像８２が男性ユーザーに対応している場合には、ユーザーのアイデンティティ情報は、「女性の方（ｔｈｉｓ  ｌａｄｙ）」又は「男性の方（ｔｈｉｓ  ｇｅｎｔｌｅｍａｎ）」などのように、性別を通じて表現することができる。従って、スピーカ３４を使用することにより、相互作用の装置３によって再生される音声コンテンツが、「はっきりと聞き取ることができません。女性の方から、まず話してください」である際に、撮影エリア３２内の両方のユーザーは、相互作用コンテンツが、「はっきりと聞き取ることができません。ｘｘ、まず、話してください」であると判定することができると共に、「女性の方」というアイデンティティ情報に基づいて、ターゲット相互作用オブジェクトが、ユーザー画像８１に対応するユーザーであると判定することができる。
【００６７】
相互作用コンテンツが撮影エリア３２内のユーザーに提供された際に、いくつかの状況において、ユーザーは、図４に示されている実施形態における相互作用コンテンツ「出勤時間を正常に記録しました」などの相互作用コンテンツには、応答する必要はない。いくつかのその他の状況において、ユーザーは、相互作用コンテンツに応答することができると共に、応答は、相互作用の装置３がユーザーによる対応するイベントの完了を支援するように、ユーザーによって起動されたイベント支援要求を含むことができる。例えば、図９に示されている実施形態における相互作用コンテンツ「退勤時間を記録しますか？」の場合に、ユーザー「Ｘｉａｏ  Ｂａｉ」によって返された応答が「はい」である際には、相互作用の装置３は、相互作用の装置３が「退勤時間の記録の出欠チェックイベント」の完了を支援しうるように、セマンティック分析に基づいて、ユーザー「Ｘｉａｏ  Ｂａｉ」が「退勤時間の記録の出欠チェックイベント」に対するイベント支援要求を起動したと判定することができる。同様に、例えば、マルチユーザーシナリオにおいて、相互作用の装置３が、図１３の音声「はっきりと聞き取ることができません。女性の方から、まず話してください」を送信した後に、女性ユーザーから返された応答が、「Ｂａｉｂａｉさんを呼び出してください」である場合に、相互作用の装置３は、相互作用の装置３が、「呼び出しイベント」の完了を支援するべく、ユーザー「Ｂａｉｂａｉ」を呼び出しうるように、セマンティック分析に基づいて、ユーザー「Ｘｉａｏ  Ｂａｉ」が「呼び出しイベント」に対するイベント支援要求を起動しており、且つ、呼び出されるオブジェクトは、ユーザー「Ｂａｉｂａｉ」であると判定することができる。
【００６８】
当然のことながら、相互作用コンテンツに対する応答の状況に加えて、撮影エリア３２内のユーザーは、イベント支援要求を相互作用の装置３に対して直接的に起動することができると共に、相互作用の装置３は、対応するイベントの完了を支援することができる。これは、相互作用コンテキストに対する応答の状況に類似しており、従って、本明細書においては、詳述の反復を省略する。
【００６９】
図１０〜図１３に示されている実施形態においては、相互作用の装置３は、相互作用の装置３が、対応するイベントの完了を個々に支援するべく、ユーザーによって個々に起動されたイベント支援要求を判定しうるように、撮影エリア３２内の複数のユーザーが順番に話すことを保証することができる。一実施形態において、相互作用の装置３は、同時に複数のユーザーから送信された複数のユーザー音声を受け取る場合があり、且つ、サウンド特徴に基づいて複数のユーザー音声を正確に分離することができると共に、相互作用の装置３が、複数のユーザーのイベント支援要求を同時に認知しうるように、且つ、対応するイベントの完了を支援し、これにより、複数のユーザーにおける支援効率を大幅に改善しうるように、サウンド特徴認識（例えば、声紋認識）を通じて、それぞれのユーザー音声と撮影エリア３２内のユーザーの間のマッピング関係を更に判定することができる。
【００７０】
一状況において、相互作用の装置３は、取得されたユーザー音声をサウンド特徴データベースと直接的に比較してもよく、サウンド特徴データベースは、例えば、比較結果に基づいて、取得されたユーザー音声に対応する内部従業員を判定するように、企業ＡＡ内のすべての内部従業員の声紋特徴を含みうる。これに加えて、相互作用の装置３は、顔面認識などのその他の方式により、撮影エリア３２内のユーザーを識別することができると共に、企業ＡＡの内部従業員であると偽ることを防止するべく、識別結果をサウンド特徴データベースに基づいて取得された比較結果と比較することができる。例えば、ユーザー音声が、それぞれ、企業ＡＡ内のユーザーＡ及びユーザーＢからであるとサウンド特徴を通じて判定されたが、顔面認識に基づいて、撮影エリア内のユーザーが、ユーザーＡと、認識されえない外部者と、であると判定されたとしよう。この結果、外部者が、ユーザーＢであると偽っている場合があり、且つ、ユーザーＢの記録された音声を使用している場合がある。この状況において、相互作用の装置３は、対応する支援イベントの完了を拒絶することができると共に、警告をユーザーＢに対して送信することができる。
【００７１】
別の状況において、相互作用の装置３は、撮影エリア３２内のユーザーが企業ＡＡ内のユーザーＡ及びユーザーＢであると認識するべく、まずは、顔面認識などの方式により、撮影エリア３２内のユーザーを識別することができる。次いで、相互作用の装置３が２つのユーザー音声を取得した際に、相互作用の装置は、ユーザー音声をサウンド特徴データベース内のその他の声紋特徴と比較することなしに、いずれのユーザー音声がユーザーＡからであり、且つ、いずれのユーザー音声がユーザーＢからであるのか、を判定するべく、単純にユーザー音声をユーザーＡ及びユーザーＢの声紋特徴と比較し、これにより、比較効率を大幅に改善することができる。
【００７２】
これに加えて、撮影エリア３２内のユーザーがアドミニストレータを含んでいる場合があり、従って、相互作用の装置３は、アドミニストレータのイベント支援要求に応答して、例えば、画面３３上の歓迎発話コンテンツの調節、スピーカ３４の音量の調節、又は遠距離撮影エリア３２１及び近距離撮影エリア３２２の範囲の調節、などの対応する装置管理イベントの完了を支援することができる。
【００７３】
図１４は、例示用の一実施形態による、相互作用オブジェクトのマーキングの概略図である。カメラ３１を使用することにより、撮影エリア３２を撮影した後に、相互作用の装置３は、ユーザーが、ユーザーが相互作用の装置３によって検出されたかどうか、並びに、ユーザーが相互作用の装置３と相互作用しうるかどうか、を明瞭に判定するように、撮影エリア３２内に配置されている検出されたユーザーをマーキングすることができる。図１４に示されているように、撮影エリア３２内にユーザーが存在していることを検出した際に、相互作用の装置３は、撮影画像に従って、ユーザー用の対応するプロファイル画像１４０１を生成することができると共に、画面３３上においてプロファイル画像１４０１を表示することができる。又、別のユーザーが撮影エリア３２内において配置されていることが相互作用の装置３によって検出された際にも、そのユーザーに対応するプロファイル画像１４０２を画面３３上において表示することができる。同様に、更にその他のユーザーが撮影エリア３２に進入した際にも、相互作用の装置３は、画面３３上において、対応するプロファイル画像を表示してもよく、従って、本明細書においては、詳述の反復を省略する。
【００７４】
プロファイル画像１４０２に対応するユーザーが、撮影エリア３２から離脱した際には、相互作用の装置３は、画面からプロファイル画像１４０２を削除することができる。その他のユーザーの状況も、このユーザーのものに類似しており、従って、本明細書においては、詳述の反復を省略する。
【００７５】
従って、画面３３がプロファイル画像１４０１及び１４０２を含んでいることを観察した際に、対応するユーザーは、自身が相互作用の装置３によって検出されており、且つ、相互作用オブジェクトとして相互作用の装置３によって判定されており、且つ、自身が、相互作用の装置３と相互作用しうる、ことを確信することができる。別のユーザーが相互作用の装置３と相互作用することを所望しているが、画面３３上において、自身に対応するプロファイル画像を観察できない際には、これは、ユーザーが撮影エリア３２に進入していない場合がある、或いは、ユーザーが撮影エリア３２に進入しているが、相互作用の装置３によって成功裏に検出されておらず、且つ、ユーザーは、ユーザーのプロファイル画像が画面３３上において表示される時点まで、撮影エリア３２に進入する又は再進入する、などの対策を実行しうる、ことを通知している。
【００７６】
図１５は、例示用の一実施形態による、ターゲット相互作用オブジェクトのマーキングの概略図である。相互作用の装置３が、それぞれ、撮影エリア３２内において配置されているユーザー「Ｘｉａｏ  Ｂａｉ」及びユーザー「Ｘｉａｏ  Ｈｅｉ」を認識し、且つ、相互作用の装置３が、ユーザー「Ｘｉａｏ  Ｂａｉ」をターゲット相互作用オブジェクトとして判定しているものと仮定されている。図１５に示されているように、相互作用の装置３は、正常な比率において、画面３３の（相対的に、画面３３のエッジから遠い）中央エリア内においてユーザー「Ｘｉａｏ  Ｂａｉ」に対応するプロファイル画像１４０１を表示することができると共に、相対的に小さな比率において、画面３３のエッジエリア内においてユーザー「Ｘｉａｏ  Ｈｅｉ」に対応するプロファイル画像１４０２を表示することができる。次いで、相互作用の装置３が、スピーカ３４を使用することにより、「どういうご用件ですか？」という相互作用音声を送信した際に、プロファイル画像１４０１及び１４０２の表示比率及び表示位置に従って、相互作用音声に対応するターゲット相互作用オブジェクトが、プロファイル画像１４０２に対応するユーザー「Ｘｉａｏ  Ｈｅｉ」ではなく、プロファイル画像１４０１に対応するユーザー「Ｘｉａｏ  Ｂａｉ」である、ことを判定することができる。
【００７７】
当然のことながら、プロファイル画像の表示比率及び表示位置の構成に加えて、ターゲット相互作用オブジェクトに対応するプロファイル画像をその他の相互作用オブジェクトのプロファイル画像から弁別するべく、その他の調節の態様をプロファイル画像の表示属性に対して実行し、これにより、プロファイル画像に応じた対応するターゲット相互作用オブジェクトの判定を支援することができる。これは、本明細書において限定されてはいない。
【００７８】
相互作用の装置３によって撮影エリア３２内のユーザーとの間の相互作用を起動するというやり方に加えて、例えば、相互作用の装置３が、ユーザー音声のソースユーザーの要件を充足するべく、ユーザー音声に応答するように、相互作用の装置３にユーザー音声を送信する、などのように、撮影エリア３２内のユーザーが、相互作用の装置３との相互作用を起動することもできる。ユーザー音声は、相互作用の装置３によって送信される相互作用音声に応答するべく、使用されてもよく、或いは、撮影エリア３２内のユーザーによって相互作用の装置３に能動的に送信されてもよく、これは、本明細書において限定されてはいない。
【００７９】
一実施形態においては、撮影エリア３２内のユーザーによって送信されたユーザー音声を受け取った際に、相互作用の装置３が、ユーザー音声のソースユーザーを判定する必要があるように、即ち、撮影エリア３２内の複数のユーザーのいずれがユーザー音声を送信したのかを検出する必要があるように、撮影エリア３２内に、複数のユーザーが同時に存在している場合がある。
【００８０】
例えば、図１６は、例示用の一実施形態による、ユーザー音声のソースユーザーの判定の概略図である。図１６に示されているように、マイクロフォンアレイが、相互作用の装置３内において構築されてもよく、マイクロフォンアレイは、マイクロフォン３６及びマイクロフォン３７を含んでいてもよく、且つ、マイクロフォン３６は、相対的に左側において配設されており、且つ、マイクロフォン３７は、相対的に右側において配設されている。従って、撮影エリア３２内のユーザーが、「１５人用の会議室を予約する必要があります（Ｉ  ｎｅｅｄ  ｔｏ  ｒｅｓｅｒｖｅ  ａ  ｃｏｎｆｅｒｅｎｃｅ  ｒｏｏｍ  ｆｏｒ  １５  ｐｅｒｓｏｎｓ）」などの、ユーザー音声を送信した際に、マイクロフォン３６が、マイクロフォン３７よりも早期にユーザー音声を受け取った場合には、これは、ユーザー音声のソースユーザーが、マイクロフォン３６に相対的に近接しており、且つ、マイクロフォン３７から相対的に離れている、ことを通知している。従って、ソースユーザーが、撮影エリア３２内において相対的に左側に近接して配置されているものと判定することができる。例えば、ソースユーザーは、図１０において取得されている画像との組合せにおいて、ユーザー「Ｘｉａｏ  Ｂａｉ」である、と判定することができる。
【００８１】
同様に、マイクロフォン３７が、マイクロフォン３６よりも早期にユーザー音声を受け取った場合にも、これは、ユーザー音声のソースユーザーが、マイクロフォン３７に相対的に近接しており、且つ、マイクロフォン３６から相対的に離れている、ことを通知している。従って、ソースユーザーが、撮影エリア３２内において、相対的に右側に近接して配置されているものと判定することができる。例えば、ソースユーザーは、図１０において取得されている画像との組合せにおいて、ユーザー「Ｘｉａｏ  Ｈｅｉ」であると判定することができる。或いは、この代わりに、マイクロフォン３６及びマイクロフォン３７が、同時に、或いは、ほぼ同時に、ユーザー音声を受け取った場合には、これは、ユーザー音声のソースユーザーが、マイクロフォン３６とマイクロフォン３７の間の中央地点において配置されている、即ち、相互作用の装置３の直接前方に配置されている、ことを通知している。従って、ソースユーザーは、撮影エリア３２の中央位置において配置されていると判定することができる。
【００８２】
一実施形態において、ユーザーは、画面３３及びカメラ３１の向きの前方に配置されているのではなく、相互作用の装置３の設置位置又は設置方式に基づいて、相互作用の装置３の背後において配置されている場合もある。従って、ユーザーは、明らかに、撮影エリア３２内に配置されてはおらず、且つ、ユーザーは、正確には、相互作用の装置３の周りにおいて配置されている場合がある。この状況において、相互作用の装置３が、「１５人用の会議室を予測する必要があります」などのオーディオメッセージを受け取った際に、オーディオメッセージは、必ずしも、撮影エリア３２内のユーザーによって送信されたユーザー音声ではなく、且つ、相互作用の装置の背後において配置されているユーザーによって送信された混信音声である。従って、混信音声が、誤ってユーザー音声として判定されることを防止するべく、オーディオメッセージのソース方向を判定する必要がある。前方からのオーディオメッセージは、撮影エリア３２内のユーザーによって送信されたユーザー音声でありうると共に、後方からのオーディオメッセージは、混信音声である。
【００８３】
例えば、図１７は、例示用の一実施形態による、オーディオメッセージのソース方向の判定の概略図である。図１７に示されているように、マイクロフォンアレイが、相互作用の装置３内において構築されてもよく、且つ、マイクロフォンアレイは、マイクロフォン３６、マイクロフォン３７、及びマイクロフォン３８を含みうる。左−右方向（即ち、図１７における水平方向）において、マイクロフォン３６は、左側において配設され、且つ、マイクロフォン３７は、右側において配設されている。前−後方向（即ち、図１７における上−下方向）において、マイクロフォン３６及びマイクロフォン３７は、ビデオエリア３２に相対的に近接した相互作用の装置３の前部部分内において配設されており、且つ、マイクロフォン３８は、ビデオエリア３２から相対的に離れた相互作用の装置３の後部部分内において配設されている。マイクロフォン３６〜３８は、いずれも、相互作用の装置３内において配置されている。従って、相互作用の装置３の周りにおいて配置されているユーザーによって送信されたオーディオメッセージの場合に、ユーザーが相互作用の装置３の前方において配置されている場合には、オーディオメッセージは、相互作用の装置３の前方から相互作用の装置３を通過し、オーディオメッセージの高周波数部分は、相互作用の装置３のハウジング部分によって吸収され、且つ、マイクロフォン３６〜３８がオーディオメッセージの高周波数部分を受け取った際に、相互作用の装置３の後部部分内において配置されているマイクロフォン３８によって受け取られる高周波数信号の強度は、相互作用の装置３のハウジングの吸収に起因して、マイクロフォン３６及び３７のそれぞれによって受け取られる高周波数信号の強度未満となるようになっている。ユーザーが、相互作用の装置３の背後において配置されている場合には、オーディオメッセージは、相互作用の装置３の後方から相互作用の装置３を通過し、オーディオメッセージの高周波数部分は、相互作用の装置３のハウジング部分によって吸収され、且つ、マイクロフォン３６〜３８がオーディオメッセージの高周波数部分を受け取った際に、相互作用の装置３の前部において配置されたマイクロフォン３６及び３７のそれぞれによって受け取られる高周波数部分の強度は、相互作用の装置３のハウジングの吸収に起因して、マイクロフォン３８によって受け取られる高周波数信号の強度未満となるようになっている。
【００８４】
従って、マイクロフォン３６〜３８がオーディオメッセージの高周波数部分を受け取る量に従って、オーディオメッセージのソース方向が相互作用の装置３の前方であるのか又は後方であるのか、を判定することができる。オーディオメッセージのソース方向が、相互作用の装置３の後方であると判定された際には、オーディオメッセージのソースユーザーは、明確に、撮影エリア３２内のユーザーではない。換言すれば、オーディオメッセージは、混信音声である。オーディオメッセージのソース方向が、相互作用の装置３の前方であると判定された際には、オーディオメッセージのソースユーザーは、撮影エリア３２内のユーザーでありうる。当然のことながら、精度を改善するべく、且つ、誤った判定の確率を低減するべく、更なる判定をその他の条件との組合せにおいて実行することができる。
【００８５】
一実施形態において、画像の取得は、相互作用の装置３上のカメラ３１を使用することにより、実行することができると共に、撮影エリア３２内にユーザーが存在している場合には、オーディオメッセージが、ユーザーからのものであると判定することができる。
【００８６】
一実施形態において、画像の取得は、相互作用の装置３上のカメラ３１を使用することにより、実行することができると共に、撮影エリア３２内において複数のユーザーが存在している場合には、例えば、口の開閉動作が、オーディオメッセージの受信処理の際に実行されているかどうか、並びに、動作が発生する瞬間が、オーディオメッセージの信号の変化が発生する瞬間と一貫性を有しているかどうか、などの、ユーザーの顔面動作を参照して、オーディオメッセージとマッチングする顔面動作を有するユーザーが、オーディオメッセージのソースユーザーとして判定されている。
【００８７】
一実施形態において、画像の取得は、相互作用の装置３上のカメラ３１を使用することにより、実行することができると共に、撮影エリア３２内に複数のユーザーが存在している場合には、マイクロフォン３６及び３７によって判定されたオーディオメッセージのソース方向が左側であるか、右側であるか、或いは、中間であるか、を参照して、対応する方向に対応するユーザーをオーディオメッセージのソースユーザーとして判定することができる。同一の方向において更に複数のユーザーが存在している場合には、ユーザーの顔面アクションを参照して、オーディオメッセージとマッチングする顔面動作を有するユーザーを選別することができると共に、オーディオメッセージのソースユーザーとして判定することができる。
【００８８】
図１８は、例示用の一実施形態による、ユーザー音声のソースユーザーのマーキングの概略図である。図１８に示されているように、ユーザー「Ｘｉａｏ  Ｂａｉ」がユーザー音声のソースユーザーとして判定されたと仮定することにより、撮影エリア３２内のユーザーが、後続の相互作用プロセスにおいてエラーが発生しないことを保証するべく、相互作用の装置３がユーザー音声のソースユーザーを正確に認識しているかどうかを迅速に判定するように、相互作用の装置３は、オリジナルのカラフルモードにおいて、プロファイル画像１４０１を表示することができると共に、表示するべくその他のユーザーに対応するプロファイル１４０２及びこれに類似したものをモノクロ化することができる。
【００８９】
一実施形態において、相互作用の装置３がユーザー音声を認識する際には、ソースユーザーのアクセント、外部環境の過剰なノイズ、或いは、サウンドピックアッププロセスにおいて発生する歪などの、好ましくないファクタのすべてが、相互作用の装置３のセマンティック認識の精度に対して影響を及ぼす。従って、認識プロセスにおいて、相互作用の装置３は、それぞれの候補セマンティック認識結果を採点することができる。相互作用の装置３は、そのコンフィデンスレベルが相対的に低い（例えば、予め設定されたスコア未満である）候補セマンティック認識結果を直接的に破棄することができる。そのコンフィデンスレベルが相対的に高い（例えば、予め設定されたスコア超である）候補セマンティック認識結果の数が１である場合には、候補セマンティック認識結果をセマンティック認識結果として直接的に使用することができる。そのコンフィデンスレベルが相対的に高い候補セマンティック認識結果の数が１超である場合には、相互作用の装置３は、ソースユーザーに、ソースユーザー「Ｘｉａｏ  Ｂａｉ」が選択及び確認するように、例えば、図１８の選択肢１８０１「１．１５人用の会議室を予約する必要があります」及び選択肢１８０２「２．４５人用の会議室を予約する必要があります」などの、そのコンフィデンスレベルが相対的に高い候補セマンティック認識結果に対応する候補セマンティック認識結果選択肢を表示することができる。
【００９０】
例えば、ユーザー「Ｘｉａｏ  Ｂａｉ」は、選択肢１８０１が選択されたことを相互作用の装置３に通知するべく、「第１のもの」、「前者」、又は「１５人のもの」などのコンテンツを含む確認音声を送信することができる。この結果、相互作用の装置３は、ユーザー音声に対応するセマンティック認識結果が「１５人用の会議室を予約する必要があります」であると判定することができると共に、例えば、関連する会議室の予約の完了においてユーザー「Ｘｉａｏ  Ｂａｉ」を支援するなどのように、ユーザー音声に更に応答することができる。
【００９１】
図１９は、例示用の一実施形態による、装置の概略構造図である。図１９を参照すれば、ハードウェアレベルにおいて、装置は、プロセッサ１９０２と、内部バス１９０４と、ネットワークインターフェイス１９０６と、内部メモリ１９０８と、不揮発性メモリ１９１０と、を含んでおり、且つ、当然のことながら、その他のサービスに必要とされるハードウェアを更に含みうる。プロセッサ１９０２は、ロジックレベルにおいて相互作用の装置を形成するべく、不揮発性メモリ１９１０から内部メモリ１９０８に、対応するコンピュータプログラムを読み込み、且つ、次いで、コンピュータプログラムを実行している。当然のことながら、ソフトウェア実装形態に加えて、本明細書の１つ又は複数の実施形態は、例えば、論理装置又はソフトウェア−ハードウェアの組合せなどの、その他の実装形態を排除するものではない。換言すれば、以下の処理手順の実行体は、論理ユニットに限定されるものではなく、且つ、その代わりに、ハードウェア又は論理装置であってもよい。
【００９２】
図２０を参照すれば、ソフトウェア実装形態において、相互作用の装置は、
検知エリア内において配置された１人又は複数のユーザーを検出するように構成された検出ユニット２００１と、
相互作用コンテンツを検知エリア内の１人又は複数のユーザーに提供するように構成された提供ユニット２００２と、
相互作用コンテンツのターゲット相互作用オブジェクトが検知エリア内の１人又は複数のユーザーの一部分である際に、ターゲット相互作用オブジェクトに関する情報を検知エリア内の１人又は複数のユーザーに表示するように構成された第１表示ユニット２００３と、
を含みうる。
【００９３】
任意選択により、第１表示ユニット２００３は、
ターゲット相互作用オブジェクトとして機能するユーザーのアイデンティティ情報をターゲット相互作用オブジェクトに関する情報として判定し、且つ、
アイデンティティ情報を検知エリア内の１人又は複数のユーザーに表示する、
ように構成されている。
【００９４】
任意選択により、相互作用の装置は、
検知エリア内に配置された１人又は複数のユーザーを識別するように構成された識別ユニット２００４を更に含み、この場合に、
ターゲット相互作用オブジェクトとして機能している第１ユーザーのアイデンティティが成功裏に識別された際に、第１ユーザーのアイデンティティ情報は、第１ユーザーの名称を含み、且つ、ターゲット相互作用オブジェクトとして機能している第２ユーザーのアイデンティティが成功裏に識別されない際には、第２ユーザーのアイデンティティ情報は、第２ユーザーに関する視覚的特徴記述情報を含む。
【００９５】
任意選択により、相互作用の装置は、
検知エリア内の１人又は複数のユーザーに対応するユーザー基準情報を表示するように構成された第２表示ユニット２００５を更に含み、この場合に、
第１表示ユニット２００３は、ターゲット相互作用オブジェクトに関する情報としてターゲット相互作用オブジェクトとして機能しているユーザーに対応するユーザー基準情報を判定し、且つ、判定されたユーザー基準情報を検知エリア内の１人又は複数のユーザーに目立つように表示するように構成されている。
【００９６】
任意選択により、第２表示ユニット２００５は、
検知エリア内の１人又は複数のユーザーに対して画像取得を実行し、且つ、ユーザー基準情報として１つ又は複数の取得されたユーザー画像を表示するように構成されている。
【００９７】
任意選択により、相互作用の装置は、
相互作用コンテンツのターゲット相互作用オブジェクトが、検知エリア内の１人又は複数のユーザーの一部分から、すべての１人又は複数のユーザーに変化した際に、ターゲット相互作用オブジェクトに関する情報を検知エリア内の１人又は複数のユーザーに表示するステップを一時停止するように構成された管理ユニット２００６、
を更に含む。
【００９８】
任意選択により、相互作用の装置は、
検知エリア内のユーザーによって送信されたイベント支援要求を取得するように構成された要求取得ユニット２００７と
イベント支援要求に応答して、対応するイベントの完了を支援するように構成された支援ユニット２００８と、
を更に含む。
【００９９】
任意選択により、要求取得ユニット２００７は、
相互作用コンテンツに応答して検知エリア内のユーザーによって返された応答情報を受け取るように構成されており、この場合に、応答情報は、イベント支援要求を含む。
【０１００】
任意選択により、要求取得ユニット２００７は、
検知エリア内に複数のユーザーが存在している際に、予め設定された順番に従って、支援されるオブジェクトとしてユーザーを選択し、且つ、
対応するイベント支援要求を送信するように、選択されたユーザーに順番に要求する、
ように構成されている。
【０１０１】
任意選択により、要求取得ユニット２００７は、
イベント支援要求を取得するべく、取得されたユーザー音声に対してセマンティック認識を実行し、且つ、
ユーザー音声のソースユーザーを判定するべく、ユーザー音声に対してサウンド特徴認識を実行する、
ように構成されている。
【０１０２】
任意選択により、支援ユニット２００８は、
検知エリア内のユーザーが、グループの内部者である際に、イベント支援要求に応答して、対応するグループ管理イベントの完了を支援し、
検知エリア内のユーザーが、グループの外部者である際に、アラートメッセージをグループの関連する内部者に送信し、グループの関連する内部者との間の通信の確立においてグループの外部者を支援し、或いは、イベント支援要求に応答して、グループの外部者を訪問イベントの処理場所までガイドし、且つ、
検知エリア内のユーザーがアドミニストレータである際に、イベント支援要求に応答して、対応する装置管理イベントの完了を支援する、
ように構成されている。
【０１０３】
任意選択により、検知エリアは、近距離検知エリアと、遠距離検知エリアと、を含み、且つ、提供ユニット２００２は、
相互作用コンテンツを近距離検知エリア内のユーザーに提供し、且つ、
遠距離検知エリアから近距離検知エリアに進入するように、ユーザーをガイドするべく、遠距離検知エリア内のユーザーにガイダンス情報を送信する、
ように構成されている。
【０１０４】
任意選択により、相互作用の装置は、
検知エリア内の１人又は複数のユーザーの関連するイベントを取得するように構成されたイベント取得ユニット２００９を更に含み、この場合に、
提供ユニット２００２は、相互作用コンテンツが関連するイベントに関係付けられている際に、関連するイベントの状態情報に従って、検知エリア内の１人又は複数のユーザーに提供される相互作用コンテンツを調節するように構成されている。
【０１０５】
任意選択により、相互作用の装置は、
検知エリア内の１人又は複数のユーザーのアイデンティティタイプを判定するように構成された判定ユニット２０１０を更に含み、この場合に、
提供ユニット２００２は、アイデンティティタイプに従って、検知エリア内の１人又は複数のユーザーに提供される相互作用コンテンツを調節するように構成されている。
【０１０６】
任意選択により、相互作用の装置は、
検知エリア内のユーザーによって送信されたユーザー音声を受け取るように構成された音声受信ユニット２０１１と、
ユーザー音声に応答するように構成された応答ユニット２０１２と、
を更に含む。
【０１０７】
任意選択により、応答ユニット２０１２は、
セマンティック認識をユーザー音声に対して実行し、
複数のセマンティック認識結果のコンフィデンスレベルが、予め設定された値に到達した際に、複数の対応するセマンティック認識結果選択肢を検知エリア内のユーザーに表示し、
選択されたセマンティック認識結果選択肢に対応するセマンティック認識結果に従って、ユーザー音声に応答する、
ように構成されている。
【０１０８】
任意選択により、応答ユニット２０１２は、
ユーザー音声のソース方向を判定し、且つ、
ユーザー音声のソース方向において配置されているユーザーに応答する、
ように構成されている。
【０１０９】
任意選択により、応答ユニット２０１２は、
マイクロフォンアレイを使用することにより、ユーザー音声を受け取るステップであって、マイクロフォンアレイは、相対的に左側に配設された第１マイクロフォンと、相対的に右側に配設された第２マイクロフォンと、を含む、ステップと、
第１マイクロフォン及び第２マイクロフォンがユーザー音声を受け取る時点の間の差に従って、ユーザー音声のソース方向を判定するステップと、
という方式により、ユーザー音声のソース方向を判定している。
【０１１０】
任意選択により、応答ユニット２０１２は、
ユーザー音声のソース方向において配置されている複数のユーザーが存在している際に、複数のユーザーのそれぞれのものの顔面動作に従って、ユーザー音声のソースユーザーを判定するステップと、
ソースユーザーに応答するステップと、
という方式により、ユーザー音声のソース方向において配置されているユーザーに応答している。
【０１１１】
任意選択により、相互作用の装置は、
マイクロフォンアレイを使用することにより、オーディオメッセージを受け取るように構成されたオーディオ受信ユニット２０１３であって、マイクロフォンアレイは、相対的に検知エリアに近接して配設された第３マイクロフォンと、検知エリアから相対的に離れて配設された第４マイクロフォンと、を含む、オーディオ受信ユニットと、
第３マイクロフォン及び第４マイクロフォンがオーディオメッセージ内の高周波数部分を受け取る量に従って、オーディオメッセージのソース方向を判定するように構成された方向判定ユニット２０１４と、
ソース方向が検知エリアに相対的に近接した側であり、且つ、検知エリア内にユーザーが存在している際に、オーディオメッセージが検知エリア内のユーザーによって送信されたユーザー音声であると判定するように構成されたソース判定ユニット２０１５と、
を更に有する。
【０１１２】
任意選択により、相互作用の装置は、
検知エリア内に複数のユーザーが存在している際に、それぞれ、ユーザーに対応するプロファイル画像を表示するように構成されたプロファイル画像表示ユニット２０１６と、
その他のユーザーのプロファイル画像とは別個に、ユーザー音声のソースユーザーのプロファイル画像を表示するように構成された別個表示ユニット２０１７と、
を更に含む。
【０１１３】
上述の実施形態において記述されているシステム、装置、モジュール、又はユニットは、コンピュータチップ又はエンティティによって実装することが可能であり、或いは、特定の機能を有する製品により、実装することができる。通常の実装装置は、コンピュータである。コンピュータの形態は、ＰＣ、ラップトップコンピュータ、セルラー電話機、カメラ電話機、スマートフォン、パーソナルデジタルアシスタント、メディアプレーヤー、ナビゲーション装置、電子メールトランシーバ装置、ゲームコンソール、タブレットコンピュータ、ウェアラブル装置、又はこれらの任意の組合せであってよい。
【０１１４】
通常の構成において、コンピュータは、（ＣＰＵなどの）１つ又は複数のプロセッサ、入出力インターフェイス、ネットワークインターフェイス、及び内部メモリを含む。
【０１１５】
内部メモリは、揮発性メモリ、ランダムアクセスメモリ（ＲＡＭ：Ｒａｎｄｏｍ  Ａｃｃｅｓｓ  Ｍｅｍｏｒｙ）、並びに／或いは、例えば、読み出し専用メモリ（ＲＯＭ：Ｒｅａｄ−Ｏｎｌｙ  Ｍｅｍｏｒｙ）又はフラッシュＲＡＭなどのコンピュータ可読媒体内の不揮発性メモリなどの形態を含みうる。内部メモリは、コンピュータ可読媒体の一例である。
【０１１６】
コンピュータ可読媒体は、永久的媒体及び非永久的媒体、着脱自在の媒体及び非着脱自在の媒体を含み、これらは、任意の方法又は技術を使用することにより、情報の保存を実装しうる。情報は、コンピュータ可読命令、データ構造、プログラムモジュール、又はその他のデータであってよい。コンピュータのストレージ媒体の例は、限定を伴うことなしに、相変化メモリ（ＰＲＡＭ）、スタティックランダムアクセスメモリ（ＳＲＡＭ：Ｓｔａｔｉｃ  Ｒａｎｄｏｍ−Ａｃｃｅｓｓ  Ｍｅｍｏｒｙ）、ダイナミックランダムアクセスメモリ（ＤＲＡＭ：Ｄｙｎａｍｉｃ  Ｒａｎｄｏｍ  Ａｃｃｅｓｓ  Ｍｅｍｏｒｙ）、別のタイプのＲＡＭ、ＲＯＭ、電気的に消去可能なプログラム可能な読み出し専用メモリ（ＥＥＰＲＯＭ：Ｅｌｅｃｔｒｉｃａｌｌｙｙ  Ｅｒａｓａｂｌｅ  Ｐｒｏｇｒａｍｍａｂｌｅ  Ｒｅａｄ−Ｏｎｌｙ  Ｍｅｍｏｒｙ）、フラッシュメモリ又は別のメモリ技術、コンパクトディスク読み出し専用メモリ（ＣＤ−ＲＯＭ：Ｃｏｍｐａｃｔ  Ｄｉｓｃ  Ｒｅａｄ−Ｏｎｌｙ  Ｍｅｍｏｒｙ）、デジタルバーサタイルディスク（ＤＶＤ：Ｄｉｇｉｔａｌ  Ｖｅｒｓａｔｉｌｅ  Ｄｉｓｃ）又は別の光ストレージ装置、カセットテープ、ディスクストレージ、量子メモリ、グラフェンに基づいたストレージ媒体又は別の磁気ストレージ装置、或いは、任意のその他の非送信媒体を含み、これらは、演算装置によってアクセスされうる情報を保存するように構成することができる。本明細書における定義によれば、コンピュータ可読媒体は、変調されたデータ信号及び搬送波などの、一時的なコンピュータ可読媒体（一時的媒体）を含んではいない。
【０１１７】
又、「含む（ｉｎｃｌｕｄｅ）」、「有する（ｃｏｍｐｒｉｓｅ）」という用語、並びに、任意のその他の変形は、非排他的包含をカバーすることを意味していることに留意されたい。これにより、一連の要素を含むプロセス、方法、物品、又は装置は、それらの要素を含むのみならず、明瞭に列挙されてはいないその他の要素をも含み、或いは、プロセス、方法、物品、又は装置の固有の要素を更に含む。更なる限定を伴うことなしに、「１つの〜を含む（ｉｎｃｌｕｄｅ  ｏｎｅ．．．）」というフレーズによって定義されている要素は、その要素を含むプロセス、方法、物品、又は装置内におけるその他の同一の要素を排除するものではない。
【０１１８】
以上においては、本明細書のいくつかの実施形態が記述されている。その他の実施形態も、添付の請求項の範囲に含まれている。いくつかの状況において、請求項において記録されている動作又はステップは、実施形態におけるものとは異なる順序において実行することができると共に、予想される結果を依然として実現することができる。これに加えて、添付の図面において描かれているプロセスは、必ずしも、予想される結果を実現するべく、特定の順序又は連続的な順序を必要としてはいない。いくつかの実装形態においては、マルチタスク処理及び並列処理が実行可能又は有益でありうる。
【０１１９】
本明細書の１つ又は複数の実施形態において使用されている用語は、実施形態を説明するべく使用されているものに過ぎず、且つ、本明細書の１つ又は複数の実施形態を限定することを意図したものではない。又、本明細書の１つ又は複数の実施形態及び添付の請求項において使用されている単数形の「１つの（ａ）」、「その（ｔｈｅ）」、及び「前記（ｓａｉｄ）」は、その他の意味が文脈において明瞭に通知されていない限り、複数形を含むことを意図している。又、本明細書において使用されている「及び／又は（ａｎｄ／ｏｒ）」という用語は、１つ又は複数の関連する列挙されている項目の任意の且つすべての可能な組合せを含むことを理解されたい。
【０１２０】
「第１の（ｆｉｒｓｔ）」、「第２の（ｓｅｃｏｎｄ）」、「第３の（ｔｈｉｒｄ）」という用語、並びに、これらに類似したものが、本明細書の１つ又は複数の実施形態において様々な情報を記述するべく使用されている場合があるが、このような情報は、これらの用語に限定されてはならないことを理解されたい。これらの用語は、同一のタイプの情報の間を弁別するべく使用されているものに過ぎない。例えば、本明細書の１つ又は複数の実施形態の範囲から逸脱することなしに、第１情報は、第２情報と呼称されてもよい。同様に、第２情報も、第１情報と呼称されてもよい。文脈に応じて、本明細書において使用されている「もし〜である場合には（ｉｆ）」という用語は、「〜の際に（ｗｈｅｎ．．．）」又は「〜の際に（ｕｐｏｎ．．．）」、或いは、「〜と判定することに応答して（ｉｎ  ｒｅｓｐｏｎｓｅ  ｔｏ  ｄｅｔｅｒｍｉｎｉｎｇ）」として解釈することができる。
【０１２１】
以上の説明は、本明細書の１つ又は複数の実施形態の例示用の実施形態に過ぎず、且つ、本明細書の１つ又は複数の実施形態を限定することを意図したものではない。本明細書の１つ又は複数の実施形態の精神及び原理内において実施される任意の変更、均等な置換、又は改善は、本明細書の１つ又は複数の実施形態の保護範囲に含まれるものとする。
【図１】
2021533510.tif 000003
【図２】
2021533510.tif 000004
【図３】
2021533510.tif 000005
【図４】
2021533510.tif 000006
【図５】
2021533510.tif 000007
【図６】
2021533510.tif 000008
【図７】
2021533510.tif 000009
【図８】
2021533510.tif 000010
【図９】
2021533510.tif 000011
【図１０】
2021533510.tif 000012
【図１１】
2021533510.tif 000013
【図１２】
2021533510.tif 000014
【図１３】
2021533510.tif 000015
【図１４】
2021533510.tif 000016
【図１５】
2021533510.tif 000017
【図１６】
2021533510.tif 000018
【図１７】
2021533510.tif 000019
【図１８】
2021533510.tif 000020
【図１９】
2021533510.tif 000021
【図２０】
2021533510.tif 000022
【手続補正書】
【提出日】令和3年3月11日(2021.3.11)
【手続補正１】
【補正対象書類名】特許請求の範囲
【補正対象項目名】全文
【補正方法】変更
【補正の内容】
【特許請求の範囲】
【請求項１】
相互作用の方法であって、
検知エリア内において配置された１人又は複数のユーザーを検出するステップと、
相互作用コンテンツを前記検知エリア内の前記１人又は複数のユーザーに提供するステップと、
前記相互作用コンテンツのターゲット相互作用オブジェクトが前記検知エリア内の前記１人又は複数のユーザーの一部分である際に、前記ターゲット相互作用オブジェクトに関する情報を前記検知エリア内の前記１人又は複数のユーザーに表示するステップと、
を有する方法。
【請求項２】
前記ターゲット相互作用オブジェクトに関する情報を前記検知エリア内の前記１人又は複数のユーザーに表示する前記ステップは、
前記ターゲット相互作用オブジェクトとして機能しているユーザーのアイデンティティ情報を前記ターゲット相互作用オブジェクトに関する前記情報として判定するステップと、
前記アイデンティティ情報を前記検知エリア内の前記１人又は複数のユーザーに表示するステップと、
を有する請求項１に記載の方法。
【請求項３】
前記検知エリア内において配置されている前記１人又は複数のユーザーを識別するステップを更に有し、
前記ターゲット相互作用オブジェクトとして機能している第１ユーザーのアイデンティティが成功裏に識別された際に、前記第１ユーザーのアイデンティティ情報は、前記第１ユーザーの名称を有し、且つ、前記ターゲット相互作用オブジェクトとして機能している第２ユーザーのアイデンティティが成功裏に識別されない際に、前記第２ユーザーのアイデンティティ情報は、前記第２ユーザーに関する視覚的特徴記述情報を有する請求項２に記載の方法。
【請求項４】
前記検知エリア内の前記１人又は複数のユーザーに対応するユーザー基準情報を表示するステップを更に有し、
前記ターゲット相互作用オブジェクトに関する情報を前記検知エリア内の前記１人又は複数のユーザーに表示する前記ステップは、前記ターゲット相互作用オブジェクトとして機能しているユーザーに対応するユーザー基準情報を前記ターゲット相互作用オブジェクトに関する前記情報として判定するステップと、前記判定されたユーザー基準情報を前記検知エリア内の前記１人又は複数のユーザーに目立つように表示するステップと、を有する請求項１に記載の方法。
【請求項５】
前記相互作用コンテンツの前記ターゲット相互作用オブジェクトが、前記検知エリア内の前記１人又は複数のユーザーの前記一部分から、前記１人又は複数のユーザーのすべてに、変化した際に、前記ターゲット相互作用オブジェクトに関する前記情報を前記検知エリア内の前記１人又は複数のユーザーに表示するステップを一時停止するステップを更に有する請求項１に記載の方法。
【請求項６】
前記検知エリア内のユーザーによって送信されたイベント支援要求を取得するステップと、
前記イベント支援要求に応答して、対応するイベントの完了を支援するステップと、
を更に有する請求項１に記載の方法。
【請求項７】
前記検知エリア内のユーザーによって送信されたイベント支援要求を取得する前記ステップは、
前記相互作用コンテンツに応答して前記検知エリア内の前記ユーザーによって返された応答情報を受け取るステップであって、前記応答情報は、前記イベント支援要求を有する、ステップ、
を有する請求項６に記載の方法。
【請求項８】
前記検知エリア内のユーザーによって送信されたイベント支援要求を取得する前記ステップは、
前記検知エリア内に複数のユーザーが存在している際に、予め設定された順序に従って、支援されるオブジェクトとしてユーザーを選択するステップと、
対応するイベント支援要求を送信するように、前記選択されたユーザーに順番に要求するステップと、
を有する請求項６に記載の方法。
【請求項９】
前記検知エリア内のユーザーによって送信されたイベント支援要求を取得する前記ステップは、
前記イベント支援要求を取得するべく、セマンティック認識を取得されたユーザー音声に対して実行するステップと、
前記ユーザー音声のソースユーザーを判定するべく、サウンド特徴認識を前記ユーザー音声に対して実行するステップと、
を有する請求項６に記載の方法。
【請求項１０】
前記イベント支援要求に応答して対応するイベントの完了を支援する前記ステップは、
前記検知エリア内の前記ユーザーがグループの内部者である際に、前記イベント支援要求に応答して対応するグループ管理イベントの完了を支援するステップと、
前記検知エリア内の前記ユーザーが前記グループの外部者である際に、アラートメッセージを前記グループの関連する内部者に送信し、前記グループの前記関連する内部者との間の通信の確立において前記グループの前記外部者を支援し、或いは、前記イベント支援要求に応答して前記グループの前記外部者を訪問イベントの処理場所までガイドするステップと、
前記検知エリア内の前記ユーザーがアドミニストレータである際に、前記イベント支援要求に応答して対応する装置管理イベントの完了を支援するステップと、
を有する請求項６に記載の方法。
【請求項１１】
前記検知エリア内の前記１人又は複数のユーザーの関連するイベントを取得するステップを更に有し、
相互作用コンテンツを前記検知エリア内の前記１人又は複数のユーザーに提供する前記ステップは、前記相互作用コンテンツが前記関連するイベントに関係付けられている際に、前記関連するイベントの状態情報に従って、前記検知エリア内の前記１人又は複数のユーザーに提供される前記相互作用コンテンツを調節するステップを有する請求項１に記載の方法。
【請求項１２】
前記検知エリア内の前記１人又は複数のユーザーのアイデンティティタイプを判定するステップを更に有し、
相互作用コンテンツを前記検知エリア内の前記１人又は複数のユーザーに提供する前記ステップは、前記アイデンティティタイプに従って、前記検知エリア内の前記１人又は複数のユーザーに提供される前記相互作用コンテンツを調節するステップを有する請求項１に記載の方法。
【請求項１３】
前記検知エリア内のユーザーによって送信されたユーザー音声を受け取るステップと、
前記ユーザー音声に応答するステップと、
を更に有する請求項１に記載の方法。
【請求項１４】
前記ユーザー音声に応答する前記ステップは、
セマンティック認識を前記ユーザー音声に対して実行するステップと、
複数のセマンティック認識結果のコンフィデンスレベルが、予め設定された値に到達した際に、複数の対応するセマンティック認識結果選択肢を前記検知エリア内の前記ユーザーに表示するステップと、
選択されたセマンティック認識結果選択肢に対応するセマンティック認識結果に従って、前記ユーザー音声に応答するステップと、
を有する請求項１３に記載の方法。
【請求項１５】
前記ユーザー音声に対して応答する前記ステップは、
前記ユーザー音声のソース方向を判定するステップと、
前記ユーザー音声の前記ソース方向において配置されているユーザーに応答するステップと、
を有する請求項１３に記載の方法。
【請求項１６】
前記ユーザー音声のソース方向を判定する前記ステップは、
マイクロフォンアレイを使用することにより、前記ユーザー音声を受け取るステップであって、前記マイクロフォンアレイは、相対的に左側に配設された第１マイクロフォンと、相対的に右側に配設された第２マイクロフォンと、を有する、ステップと、
前記第１マイクロフォン及び前記第２マイクロフォンが前記ユーザー音声を受け取る時点の間の差に従って、前記ユーザー音声の前記ソース方向を判定するステップと、
を有する請求項１５に記載の方法。
【請求項１７】
前記ユーザー音声の前記ソース方向において配置されているユーザーに応答する前記ステップは、
前記ユーザー音声の前記ソース方向において配置されている複数のユーザーが存在している際に、前記複数のユーザーのそれぞれのものの顔面動作に従って、前記ユーザー音声のソースユーザーを判定するステップと、
前記ソースユーザーに応答するステップと、
を有する請求項１５に記載の方法。
【請求項１８】
マイクロフォンアレイを使用することにより、オーディオメッセージを受け取るステップであって、前記マイクロフォンアレイは、前記検知エリアに相対的に近接して配設されている第３マイクロフォンと、前記検知エリアから相対的に離れて配設されている第４マイクロフォンと、を有する、ステップと、
前記第３マイクロフォン及び前記第４マイクロフォンが前記オーディオメッセージ内の高周波数部分を受け取る量に従って、前記オーディオメッセージのソース方向を判定するステップと、
前記ソース方向が、前記検知エリアに相対的に近接した側部であり、且つ、前記検知エリア内においてユーザーが存在している際に、前記オーディオメッセージが、前記検知エリア内の前記ユーザーによって送信されたユーザー音声であると判定するステップと、
を更に有する請求項１３に記載の方法。
【請求項１９】
一以上のプロセッサと、
前記一以上のプロセッサに結合され、請求項１から１８のいずれか一項の方法を実行するために一以上のプロセッサによって実行可能な命令が格納された一以上のコンピュータ可読メモリと、
を有する相互作用のシステム。
【請求項２０】
一以上のプロセッサに請求項１から１８のいずれか一項の方法を実行させるための、前記一以上のプロセッサによって実行可能な命令を有して構成された、コンピュータ可読記憶媒体。
【国際調査報告】
2021533510.tif 000023
2021533510.tif 000024
2021533510.tif 000025
2021533510.tif 000026
2021533510.tif 000027
2021533510.tif 000028