(57)【要約】  ライブ画像の視聴中、又はライブ画像を視聴した後のタイミングで、当該ライブ画像に含まれるオブジェクトに関する所定情報を容易に取得できるようにすることを課題とする。  紐付情報管理部１２１は、ライブ画像Ｌの中で視聴者Ｗにより指定がなされるオブジェクトＪに対し、視聴者Ｗにオブジェクト情報を提供するための紐付情報を、当該指定がなされる前の所定タイミングで紐付けて管理する。提示制御部１２２は、ライブ画像Ｌを視聴者Ｗに提示する。指定受付部１２３は、ライブ画像Ｌの視聴者ＷによるＴＩＧエリアＡに対するタップ操作による指定を受付ける。取得部１２４は、指定が受付けられたオブジェクトＪに紐付けられている紐付情報を取得する。提供制御部１２５は、取得された紐付情報に基づいて、オブジェクト情報を視聴者Ｗに提供する。
2020246237.tif 000002
【特許請求の範囲】
【請求項１】
表示されているライブ画像の中で第１ユーザにより指定がなされる、所定時間帯の所定領域に存在するオブジェクトに対し、当該第１ユーザに所定情報を提供するための情報を、当該指定がなされる前の所定タイミングで紐付けて、当該情報を紐付情報として管理する管理手段と、
前記ライブ画像を前記第１ユーザに提示する制御を実行する提示制御手段と、
前記ライブ画像が提示されている前記第１ユーザによる前記所定領域に対する所定操作がなされた場合、当該所定領域に存在する前記オブジェクトの前記指定がなされたと認識して、当該指定を受付ける第１受付手段と、
前記指定が受付けられた前記オブジェクトに紐付けられて管理されている前記紐付情報を取得する取得手段と、
前記取得手段により取得された前記紐付情報に基づいて、前記所定情報を前記第１ユーザに提供する制御を実行する提供制御手段と、
を備える情報処理システム。
【請求項２】
前記所定タイミング以前に前記オブジェクトを設定する第１設定を行う第１設定手段と、
前記ライブ画像として表示される表示領域のうち少なくとも一部の領域を、前記オブジェクトの前記指定のための前記所定操作がなされる前記所定領域として設定する第２設定を行う第２設定手段と、
をさらに備える、
請求項１に記載の情報処理システム。
【請求項３】
前記第１設定手段は、前記ライブ画像が表示される前に、前記第１設定を行い、
前記第２設定手段は、前記ライブ画像が表示される前に、前記第２設定を行う、
請求項２に記載の情報処理システム。
【請求項４】
前記ライブ画像が表示されている最中に前記所定領域が有効になる前記所定時間帯を設定する第３設定を行う第３設定手段をさらに備える、
請求項２又は３に記載の情報処理システム。
【請求項５】
前記第３設定手段は、前記ライブ画像が表示されるよりも前の時点で前記第３設定を行う、
請求項４に記載の情報処理システム。
【請求項６】
前記第２設定手段は、前記ライブ画像が表示されている最中に、前記第２設定を行い、
前記第３設定手段は、前記ライブ画像が表示されている最中に、前記第３設定を行う、
請求項４又は５に記載の情報処理システム。
【請求項７】
前記第２設定手段は、前記ライブ画像が表示されている最中に、第２ユーザによる指定に基づいて、前記第２設定を行い、
前記第３設定手段は、前記ライブ画像が表示されている最中に、前記第２ユーザによる指定に基づいて、前記第３設定を行う、
請求項６に記載の情報処理システム。
【請求項８】
前記ライブ画像が表示されている最中に、所定時間帯の前記所定領域に存在する前記オブジェクトを認識する認識手段をさらに備え、
前記第２設定手段は、前記認識手段により認識された前記オブジェクトについて、前記第２設定を行い、
前記第３設定手段は、前記認識手段により認識された前記オブジェクトについて、前記第３設定を行う、
請求項６に記載の情報処理システム。
【請求項９】
前記第１設定手段は、前記認識手段により前記オブジェクトが認識された場合に、当該オブジェクトを設定する、
請求項８に記載の情報処理システム。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、情報処理装置システムに関する。
【背景技術】
【０００２】
従来より、静止画像又は動画像にリンク領域を設けて、当該リンク領域に対する操作を受け付けて所定情報を表示させる技術は存在する。
例えば、特許文献１には、旅行用ガイドブックの電子書籍のページに「チケット予約へＧＯ」と表示されたリンク領域に対する操作が行われると、リンク先となるチケット予約専用のＷＥＢページを表示させる技術が記載されている。
また例えば、動画像を含む電子書籍のページの閲覧中とは別のタイミングにおいて、当該電子書籍に含まれていたオブジェクトに関する所定情報を取得することを可能とする技術について、本出願人は既に出願している（特許文献２）。
【先行技術文献】
【特許文献】
【０００３】
【特許文献１】特許５５３７７２４号公報
【特許文献２】特願２０１９−０４７４０６号明細書及び図面
【発明の概要】
【発明が解決しようとする課題】
【０００４】
しかしながら、特許文献１及び特許文献２を含め従来の技術は、撮像により生成された静止画像又は動画像のデータに含まれるオブジェクトに関する所定情報を取得できるようにする技術である。
つまり、従来の技術では、既に存在する画像のデータに含まれるオブジェクトに関する所定情報を取得することが想定されているが、いわゆる生放送のようなライブ画像を想定していない。
ところが、ライブ画像の視聴中、又はライブ画像を視聴した後のタイミングで、当該ライブ画像に含まれるオブジェクトに関する所定情報を取得することを望むユーザも多く存在する。
特許文献１及び特許文献２を含め従来の技術では、このようなユーザからの要望に応えることが充分にできていない状況である。【０００５】
本発明は、このような状況に鑑みてなされたものであり、ライブ画像の視聴中、又はライブ画像を視聴した後のタイミングで、当該ライブ画像に含まれるオブジェクトに関する所定情報を容易に取得できるようにする手法を提供することを目的とする。
【課題を解決するための手段】
【０００６】
上記目的を達成するため、本発明の一態様の情報処理システムは、
表示されているライブ画像の中で第１ユーザにより指定がなされる、所定時間帯の所定領域に存在するオブジェクトに対し、当該第１ユーザに所定情報を提供するための情報を、当該指定がなされる前の所定タイミングで紐付けて、当該情報を紐付情報として管理する管理手段と、
前記ライブ画像を前記第１ユーザに提示する制御を実行する提示制御手段と、
前記ライブ画像が提示されている前記第１ユーザによる前記所定領域に対する所定操作がなされた場合、当該所定領域に存在する前記オブジェクトの前記指定がなされたと認識して、当該指定を受付ける第１受付手段と、
前記指定が受付けられた前記オブジェクトに紐付けられて管理されている前記紐付情報を取得する取得手段と、
前記取得手段により取得された前記紐付情報に基づいて、前記所定情報を前記第１ユーザに提供する制御を実行する提供制御手段と、
を備える。
【発明の効果】
【０００７】
本発明によれば、ライブ画像の視聴中、又はライブ画像を視聴した後のタイミングで、当該ライブ画像に含まれるオブジェクトに関する所定情報を容易に取得することができる。
【図面の簡単な説明】
【０００８】
【図１】本発明の一実施形態に係る情報処理システムにより実現可能なサービスの一例の概要を示す図である。
【図２】本発明の一実施形態に係る情報処理システムの構成を示す図である。
【図３】図２の情報処理システムのうち管理サーバのハードウェア構成の一例を示すブロック図である。
【図４】図３の管理サーバの機能的構成のうち、紐付情報設定支援処理、及び紐付情報提供処理を実行するための機能的構成を示す機能ブロック図である。
【図５】設定者が、オブジェクトの設定を設定者端末にライブ画像が表示される前に行う場合に、設定者端末に表示されるＧＵＩ（Ｇｒａｐｈｉｃａｌ  Ｕｓｅｒ  Ｉｎｔｅｒｆａｃｅ）の一例を示す図である。
【図６Ａ】設定者が、ＴＩＧエリアが有効になる時間帯の設定を設定者端末にライブ画像が表示される前に行う場合に、設定者端末に表示されるＧＵＩの一例を示す図である。
【図６Ｂ】設定者が、ＴＩＧエリアが有効になる時間帯の設定を設定者端末にライブ画像が表示される前に行う場合に、設定者端末に表示されるＧＵＩの一例を示す図である。
【図７Ａ】設定者が、ＴＩＧエリアの位置の設定と、ＴＩＧエリアが有効になる時間帯の設定とを、設定者端末にライブ画像が表示されている最中に行う場合に、設定者端末に表示されるＧＵＩの一例を示す図である。
【図７Ｂ】設定者が、ＴＩＧエリアの位置の設定と、ＴＩＧエリアが有効になる時間帯の設定とを、設定者端末にライブ画像が表示されている最中に行う場合に、設定者端末に表示されるＧＵＩの一例を示す図である。
【図８Ａ】ＴＩＧエリアの位置の設定と、ＴＩＧエリアが有効になる時間帯の設定とが、設定者端末にライブ画像が表示されている最中に自動で行われる場合に、設定者端末に表示されるＧＵＩの一例を示す図である。
【図８Ｂ】ＴＩＧエリアの位置の設定と、ＴＩＧエリアが有効になる時間帯の設定とが、設定者端末にライブ画像が表示されている最中に自動で行われる場合に、設定者端末に表示されるＧＵＩの一例を示す図である。
【図９】衣料品店の店員が商品を試着してライブ画像を配信する場合に本サービスが適用される例を示す図である。
【図１０】衣料品店の店員が商品を試着してライブ画像を配信する場合に本サービスが適用される例のうち図９と異なる例を示す図である。
【図１１】衣料品店の店員が商品を試着してライブ画像を配信する場合に本サービスが適用される例のうち図９及び図１０と異なる例を示す図である。
【図１２】視聴者の操作に基づいてタグの読取りが行われる態様の例を示す図である。
【図１３Ａ】リーダがタグを読取る他の態様の例を示す図である。
【図１３Ｂ】リーダがタグを読取る他の態様の例を示す図である。
【図１３Ｃ】リーダがタグを読取る他の態様の例を示す図である。
【図１３Ｄ】リーダがタグを読取る他の態様の例を示す図である。
【図１４Ａ】図２の情報処理システムで生じ得る遅延を示す図である。
【図１４Ｂ】図１４Ａに示す遅延を利用して同期をとる手法の例を示す図である。
【図１４Ｃ】図１４Ｂとは異なる手法として、ライブ画像にＴＩＧメタデータを直接埋め込むことで同期をとる例を示す図である。
【発明を実施するための形態】
【０００９】
以下、本発明の実施形態について図面を用いて説明する。
【００１０】
まず図１を参照して、後述する図２の情報処理システムの適用対象となる本サービスの概要について説明する。
【００１１】
図１は、本発明の一実施形態に係る情報処理システムにより実現可能なサービスの一例（以下、「本サービス」と呼ぶ）の概要を示す図である。
【００１２】
本サービスは、サービス提供者（図示せず）により提供されるサービスの一例である。
本サービスによれば、ライブ画像に表示されるオブジェクトに、そのオブジェクトに関する情報（以下、「オブジェクト情報」と呼ぶ）を容易に紐付けることができる。
【００１３】
ここで、「ライブ画像」とは、いわゆる生放送と呼ばれるものをすべて含む概念であり、例えば通信環境等の影響を受けて遅延して表示されたものも含まれる。
【００１４】
ここで、「オブジェクト」には、ライブ画像に被写体として登場する人物や物等を示す画像や文字等の領域の他、ライブ画像に重畳されて表示されるテロップ等の画像（静止画像又は動画像）等が含まれる。
【００１５】
「オブジェクト情報」には、オブジェクトに関するあらゆる情報が含まれるが、本サービスでは、ライブ画像そのものでは視聴できない情報（他から取得される情報）であるものとする。
視聴者は、スマートフォン等の端末（後述の図２等の視聴者端末３）に表示されているライブ画像を視聴しながら、ライブ画像に表示されている１以上のオブジェクトのうち所望のオブジェクトを指定する操作を行う。
これにより、視聴者は、自身が指定したオブジェクトに紐付けられているオブジェクト情報を容易に取得することができる。
【００１６】
本サービスでは、ライブ画像は、視聴者に配信等されるものであるとする。また、本実施形態では、視聴者の端末に予めインストールされた、ライブ画像を視聴するための専用のアプリケーションソフトウェア（以下、「視聴アプリ」と呼ぶ）を用いてライブ画像が視聴されるものとする。
ただし、ライブ画像の視聴の手法は、特に限定されず、例えばブラウザ機能によりライブ画像を視聴する手法を採用してもよい。
【００１７】
図１には、ハワイの現地リポーターによる生中継の様子を示すライブ画像Ｌが描画されている。このライブ画像Ｌは、視聴者の端末に表示される。即ち、視聴者は、端末に表示されたライブ画像Ｌを視聴することで、例えば生中継の様子を視聴することができる。
【００１８】
ライブ画像Ｌには、１以上のオブジェクトが表示されている。
具体的には例えば、ライブ画像Ｌには、例えば現地リポーター（人物）を示すオブジェクトＪ１と、「現地リポーター  ○○○○」と表記されたテロップを示すオブジェクトＪ２とが含まれている。
なお、ライブ画像Ｌには、このほかに、女性タレントの衣服（商品）、ホテル（施設）、ヤシの木（動植物）、海（自然物）等が表示されているが、いずれもオブジェクトに該当する。
ここで、オブジェクトＪ１及びＪ２等各種オブジェクトを個々に区別する必要がない場合、これらをまとめて「オブジェクトＪ」と呼ぶ。
【００１９】
視聴者は、ライブ画像Ｌの視聴中、例えばライブ画像Ｌに登場している現地リポーターに興味を持った場合、その現地リポーターを示すオブジェクトＪ１又はオブジェクトＪ２を指定する操作を行う。
【００２０】
オブジェクトＪ１及びオブジェクトＪ２のオブジェクト情報としては、例えば、その現地リポーターに関する情報、具体的には例えば、現地リポーターが女性タレントである場合には、名前（芸名）、所属するプロダクション事務所の名称、公開されているプロフィール等が含まれる。また、それ以外にも、現地リポーターが着用している衣服に関する情報、具体的には例えば、ブランド名、商品名、購入可能な販売店（ＥＣ（Ｅｌｅｃｔｒｏｎｉｃ  Ｃｏｍｍｅｒｃｅ）サイト含む）等が含まれていてもよい。
これにより、視聴者は、自身が指定したオブジェクトＪ１又はオブジェクトＪ２のオブジェクト情報を任意のタイミングで入手することができる。
ここで、「任意のタイミング」とは、ライブ画像の視聴中は勿論のこと、当該ライブ画像とは別のライブ画像の視聴中や、ライブ画像自体の視聴終了後等のタイミングを含む意である。
【００２１】
具体的には、本サービスでは、ライブ画像において、視聴者の操作に基づいて指定され得る１以上のオブジェクトＪ毎に、そのオブジェクト情報を視聴者に提供するための情報が紐付けられて管理されている。
このように、オブジェクトＪに対して紐付けられた情報であって、そのオブジェクト情報を視聴者に提供するための情報を、以下、「紐付情報」と呼ぶ。
【００２２】
「紐付情報」には、視聴者にオブジェクト情報を提供するためのあらゆる情報が含まれる。
具体的には例えば、現地リポーター（人物）を示すオブジェクトＪ１、及び「現地リポーター  ○○○○」と表記されたテロップを示すオブジェクトＪ２の紐付情報としては以下のものを採用することができる。
即ち、その現地リポーターに関する情報、具体的には例えば、現地リポーターが女性タレントである場合には、名前（芸名）、所属するプロダクション事務所の名称、公開されているプロフィール等（オブジェクト情報）が掲載されたＷＥＢページのＵＲＬ（Ｕｎｉｆｏｒｍ  Ｒｅｓｏｕｒｃｅ  Ｌｏｃａｔｏｒ）を紐付情報として採用することができる。また、それ以外にも、現地リポーターが着用している衣服に関する情報、具体的には例えば、ブランド名、商品名、購入可能な販売店等（オブジェクト情報）が掲載されたＷＥＢページのＵＲＬを紐付情報として採用することもできる。
【００２３】
さらにいえば、「紐付情報」として、ＵＲＬを採用することは例示に過ぎない。
例えば、オブジェクトＪに関する各種キーワードを紐付情報として採用することもできる。この場合、視聴者の端末やサーバ等は、当該キーワードを用いて所定の検索用ＷＥＢサイトで検索を行い、その検索結果をオブジェクト情報として視聴者に提供することができる。
【００２４】
また、１つのオブジェクトＪに対して紐付けられる紐付情報の個数は、１個に限定されず、複数個でもよい。
例えば、本サービスにおいて正規とされるＵＲＬを第１紐付情報として採用することもできる。また、そのＵＲＬ以外に、本サービスにより別途抽出された（例えば自動でレコメンド表示された）ＵＲＬを第２紐付情報として採用することもできる。そして、視聴者が、その端末を操作することで、第１紐付情報と第２紐付情報のうち所望の一方を選択することができるようにしてもよい。この場合、選択された方のＵＲＬに存在するＷＥＢサイトが、当該オブジェクトＪのオブジェクト情報として視聴者に提供される。
換言すると、１つのオブジェクトＪに対して視聴者に提供されるオブジェクト情報は、１個に限定されず、複数個であってもよい。
【００２５】
視聴者は、所定のオブジェクトＪに対応付けられた紐付情報を使用する操作を、端末に対して行うことで、当該オブジェクトＪのオブジェクト情報の提供を受けることができる。
例えば、紐付情報がＵＲＬである場合、当該紐付情報を使用する操作とは、当該ＵＲＬにアクセスすることを指示する操作である。この場合、当該ＵＲＬに存在するＷＥＢサイトが視聴者の端末に表示されることで、そのＷＥＢサイトに掲載されているオブジェクト情報が視聴者に提供される。
ここで、サービス提供者（図示せず）は、紐付情報がＵＲＬである場合、視聴者の当該紐付情報を使用する操作により、当該ＵＲＬへのアクセスがあった場合には、そのアクセスの数をカウントして、そのアクセス数に応じて各種の課金の設定を行ってもよい。
【００２６】
ここで、所定のオブジェクトＪに対応付けられた紐付情報を使用する操作のタイミングは、当該オブジェクトＪを含むライブ画像の視聴中に特に限定されず、他のライブ画像の視聴中や、ライブ画像の視聴を終了した後等任意のタイミングとすることが可能である。
このように、所定のオブジェクトＪに対応付けられた紐付情報を使用する操作を任意のタイミングとすることができるように、本サービスでは、当該オブジェクトＪの指定の操作がなされると、当該オブジェクトＪに紐付けられた紐付情報が所定場所（例えば視聴アプリ内の所定の格納場所）に格納される。
これにより、視聴者は、その所定場所に格納された１以上の紐付情報のうち、所望の紐付情報を使用する操作を、任意のタイミングで行うことができるようになる。
【００２７】
ここで、視聴者による「オブジェクトＪを指定する操作（紐付情報を所定場所に格納させる操作）」は、具体的には、ライブ画像の中の、オブジェクトＪが存在し得る、「ＴＩＧエリア」と呼ばれる領域を指定する操作のことをいう。
具体的には例えば、図１のライブ画像Ｌの中の表示されているＴＩＧエリアＡ１を指定する操作が行われることで、ＴＩＧエリアＡ１に存在するオブジェクトＪ１が指定される。
また例えば、図１のライブ画像Ｌの中の表示されているＴＩＧエリアＡ２を指定する操作が行われることで、ＴＩＧエリアＡ２に存在するオブジェクトＪ２が指定される。
ここで、ＴＩＧエリアＡ１及びＡ２等各種ＴＩＧエリアを個々に区別する必要がない場合、これらをまとめて「ＴＩＧエリアＡ」と呼ぶ。
【００２８】
本サービスでは、オブジェクトＪを指定する操作として、当該オブジェクトＪが存在するＴＩＧエリアＡに対するタップの操作が採用されているものとする。即ち、視聴者は、ＴＩＧエリアＡをタップすることで、当該ＴＩＧエリアＡに対応するオブジェクトＪを指定して、そのオブジェクトＪの紐付情報を所定場所に格納させることができる。
具体的には例えば図１の例では、ＴＩＧエリアＡ１がタップされると、ＴＩＧエリアＡ１に対応するオブジェクトＪ１の紐付情報（オブジェクト情報が掲載されたＷＥＢページのＵＲＬ等）が、所定場所に格納される。
【００２９】
ここで、本サービスでは、紐付情報が格納される所定場所として、「ＴＩＧストック」と呼ばれる場所が採用されている。
即ち、視聴者によるＴＩＧエリアＡ１のタップにより指定されたオブジェクトＪ１の紐付情報は、ストック情報として、「ＴＩＧストック」に保存されて管理される。
ここで、紐付情報に基づいて視聴者に提供されるオブジェクト情報は、対応するオブジェクトＪの形態によらず、テキスト、静止画像、動画像等任意の形態を採用することができる。従って、「ＴＩＧストック」は、複数のライブ画像を跨ぐ共通のストックページと把握することもできる。
具体的には例えば、図示はしないが、視聴者は、端末に表示された所定のボタンをタップすることで、「ＴＩＧストック」に保存されている１以上のオブジェクト情報を一覧表示させることができる。
【００３０】
なお、ライブ画像において、視聴者によりタップされたオブジェクトＪに、当該オブジェクトＪの紐付情報が紐付けられていない場合には、視聴者に紐付情報を提供することができない。このような場合には、視聴者がオブジェクトＪをタップしても何ら反応しないようにしてもよいし、タップされたオブジェクトＪには紐付情報が紐付けられていない旨を端末に表示させてもよい。
【００３１】
このように、本サービスによれば、ライブ画像の視聴者は、ライブ画像に表示されているオブジェクトＪが存在するＴＩＧエリアＡをタップするだけで、そのオブジェクトＪのオブジェクト情報を容易に取得することができる。
なお、本サービスは、表示されるライブ画像について、設定者による各種の設定が行われることで初めて実現させることができる。
以下、本サービスを実現させる各種の設定を容易に行うことを可能にする具体的手法について説明する。
【００３２】
図２は、本発明の一実施形態に係る情報処理システムの構成を示す図である。
【００３３】
図２に示す情報処理システムは、管理サーバ１と、設定者端末２と、視聴者端末３と、外部サーバ４と、カメラＣＡＭとを含むように構成されている。
管理サーバ１、設定者端末２、視聴者端末３、及び外部サーバ４の夫々は、インターネット等の所定のネットワークＮを介して相互に接続されている。
【００３４】
管理サーバ１は、サービス提供者（図示せず）により管理され、設定者端末２及び視聴者端末３と適宜通信をしながら、本サービスを実現するための各種処理を実行する。
【００３５】
設定者端末２は、設定者Ｃにより操作される情報処理装置であって、例えばパーソナルコンピュータ、スマートフォン、タブレット等で構成される。
【００３６】
視聴者端末３は、視聴者Ｗにより操作される情報処理装置であって、例えばパーソナルコンピュータ、スマートフォン、タブレット等で構成される。
【００３７】
外部サーバ４は、紐付情報により提供可能となるオブジェクト情報、例えば紐付情報がＵＲＬの場合には当該ＵＲＬに存在している各種ＷＥＢサイト（オブジェクト情報が掲載されたＷＥＢサイト）を管理する。
【００３８】
カメラＣＡＭは、被写体の撮像に用いられるカメラである。なお、カメラＣＡＭの態様は特に限定されない。例えば、監視用として一般的に用いられているカメラ、Ｗｅｂカメラ、スマートフォンやタブレットのカメラ等を採用することができる。
【００３９】
図３は、図２の情報処理システムのうち管理サーバのハードウェア構成の一例を示すブロック図である。
【００４０】
管理サーバ１は、ＣＰＵ（Ｃｅｎｔｒａｌ  Ｐｒｏｃｅｓｓｉｎｇ  Ｕｎｉｔ）１１と、ＲＯＭ（Ｒｅａｄ  Ｏｎｌｙ  Ｍｅｍｏｒｙ）１２と、ＲＡＭ（Ｒａｎｄｏｍ  Ａｃｃｅｓｓ  Ｍｅｍｏｒｙ）１３と、バス１４と、入出力インターフェース１５と、入力部１６と、出力部１７と、記憶部１８と、通信部１９と、ドライブ２０とを備えている。
【００４１】
ＣＰＵ１１は、ＲＯＭ１２に記録されているプログラム、又は、記憶部１８からＲＡＭ１３にロードされたプログラムに従って各種の処理を実行する。
ＲＡＭ１３には、ＣＰＵ１１が各種の処理を実行する上において必要なデータ等も適宜記憶される。
【００４２】
ＣＰＵ１１、ＲＯＭ１２及びＲＡＭ１３は、バス１４を介して相互に接続されている。このバス１４にはまた、入出力インターフェース１５も接続されている。入出力インターフェース１５には、入力部１６、出力部１７、記憶部１８、通信部１９及びドライブ２０が接続されている。
【００４３】
入力部１６は、例えばキーボード等により構成され、各種情報を出力する。
出力部１７は、液晶等のディスプレイやスピーカ等により構成され、各種情報を画像や音声として出力する。
記憶部１８は、ＤＲＡＭ（Ｄｙｎａｍｉｃ  Ｒａｎｄｏｍ  Ａｃｃｅｓｓ  Ｍｅｍｏｒｙ）等で構成され、各種データを記憶する。
通信部１９は、インターネットを含むネットワークＮを介して他の装置（例えば図２の設定者端末２、視聴者端末３、外部サーバ４等）との間で通信を行う。
【００４４】
ドライブ２０には、磁気ディスク、光ディスク、光磁気ディスク、或いは半導体メモリ等よりなる、リムーバブルメディア３０が適宜装着される。ドライブ２０によってリムーバブルメディア３０から読み出されたプログラムは、必要に応じて記憶部１８にインストールされる。
また、リムーバブルメディア３０は、記憶部１８に記憶されている各種データも、記憶部１８と同様に記憶することができる。
【００４５】
なお、図示はしないが、図２の設定者端末２、視聴者端末３、及び外部サーバ４も、図３に示すハードウェア構成と基本的に同様の構成を有することができる。従って、設定者端末２、視聴者端末３、及び外部サーバ４のハードウェア構成の説明については省略する。
【００４６】
このような図３の管理サーバ１の各種ハードウェアと各種ソフトウェアとの協働により、管理サーバ１における紐付情報設定支援処理、及び紐付情報提供処理を含む各種処理の実行が可能になる。その結果、サービス提供者（図示せず）は、上述の本サービスを提供することができる。
「紐付情報設定支援処理」とは、設定者Ｃが、ライブ画像Ｌの中に存在し得るオブジェクトＪに対し、紐付情報を容易に設定できるようにする処理をいう。
「紐付情報提供処理」とは、視聴者Ｗが、ライブ画像Ｌの中に存在し得るオブジェクトＪに紐付けられている紐付情報を容易に取得できるようにする処理をいう。
以下、管理サーバ１において実行される、紐付情報設定支援処理、及び紐付情報提供処理を実行するための機能構成について説明する。
【００４７】
図４は、図３の管理サーバの機能的構成のうち、紐付情報設定支援処理、及び紐付情報提供処理を実行するための機能的構成を示す機能ブロック図である。
【００４８】
図４に示すように、管理サーバ１のＣＰＵ１１においては、紐付情報設定支援処理の実行が制御される場合、設定部１０１が機能する。設定部１０１においては、オブジェクト設定部１１１と、位置設定部１１２と、時間帯設定部１１３と、認識部１１４とが機能する。
また、ＣＰＵ１１においては、紐付情報提供処理の実行が制御される場合、視聴部１０２が機能する。視聴部１０２においては、紐付情報管理部１２１と、提示制御部１２２と、指定受付部１２３と、取得部１２４と、提供制御部１２５と、ストック管理部１２６とが機能する。
【００４９】
設定部１０１のオブジェクト設定部１１１は、オブジェクトＪに紐付情報が紐付けられるタイミング以前のいずれかのタイミングで、オブジェクトＪを設定する。
ここで、「オブジェクトＪを設定する」とは、ライブ画像Ｌに表示され得るオブジェクトＪに対し、当該オブジェクトＪを一意に識別し得る情報（例えばＩＤ等）を付して管理することをいう。
また、「紐付情報が紐付けられるタイミング以前」とは、後述する紐付情報管理部１２１による、オブジェクトＪに対する紐付情報の紐付が行われる以前のことをいう。例えば、設定者端末２にライブ画像が表示される前のタイミングや、設定者端末２にライブ画像が表示された後に、後述する認識部１１４によってオブジェクトＪが認識されたタイミングが、「紐付が行われる以前」に該当する。
オブジェクト設定部１１１による設定がなされたオブジェクトＪは、本サービスに登録されたオブジェクトＪとして、オブジェクトＤＢ１８１に記憶されて管理される。
【００５０】
位置設定部１１２は、所定タイミングに、ライブ画像Ｌとして表示される表示領域のうち少なくとも一部の領域を、視聴者ＷによるオブジェクトＪを指定する操作がなされるＴＩＧエリアＡとして設定する。
ここで、位置設定部１１２は、例えば以下のタイミングで、ライブ画像Ｌの中のＴＩＧエリアＡの位置の設定を行うことができる。
【００５１】
即ち、位置設定部１１２は、設定者端末２にライブ画像Ｌが表示される前に、ライブ画像Ｌの中のＴＩＧエリアＡの位置を設定することができる。
これにより、設定者Ｃは、ライブ画像Ｌの中のＴＩＧエリアＡの位置を予め設定してから、視聴者端末３にライブ画像Ｌを表示させることができる。
【００５２】
また、位置設定部１１２は、設定者端末２にライブ画像Ｌが表示されている最中に、設定者Ｃによる位置を指定する入力操作に基づいて、ライブ画像Ｌの中のＴＩＧエリアＡの位置を設定することができる。
これにより、設定者Ｃは、ライブ画像Ｌの中のＴＩＧエリアＡの位置を予め設定することなく、ライブ画像Ｌを確認しながら、自らＴＩＧエリアＡの位置を設定することができる。
【００５３】
また、位置設定部１１２は、後述する認識部１１４によるオブジェクトＪの認識結果に基づいて、ライブ画像Ｌの中のＴＩＧエリアＡの位置を設定することができる。
これにより、設定者Ｃは、ライブ画像Ｌを自ら確認することなく、オブジェクトＪを自動認識させて、ＴＩＧエリアＡの位置を自動設定させることができる。
【００５４】
時間帯設定部１１３は、ライブ画像Ｌが表示されている最中にＴＩＧエリアＡが有効になる時間帯を設定する。
即ち、ＴＩＧエリアＡは、位置設定部１１２により、ライブ画像Ｌのうちの一領域として設定されるが、時間帯設定部１１３によれば、位置が設定されたＴＩＧエリアＡが有効になる時間帯と、無効になる時間帯とを設定することができる。
ここで、「有効」とは、視聴者がオブジェクトＪを指定する操作（タップの操作）を行うことで紐付情報を取得できる状態のことをいう。「無効」とは、視聴者がオブジェクトＪを指定する操作（タップの操作）を行っても紐付情報を取得できない状態のことをいう。
【００５５】
ここで、時間帯設定部１１３は、例えば以下のタイミングで、ライブ画像Ｌの中でＴＩＧエリアＡが有効になる時間帯の設定を行うことができる。
【００５６】
即ち、時間帯設定部１１３は、設定者端末２にライブ画像Ｌが表示される前に、ライブ画像Ｌの中でＴＩＧエリアＡが有効になる時間帯の設定を行うことができる。
これにより、設定者Ｃは、ライブ画像Ｌの中でＴＩＧエリアＡが有効になる時間帯を予め設定してから、視聴者端末３にライブ画像Ｌを表示させることができる。
【００５７】
また、時間帯設定部１１３は、設定者端末２にライブ画像Ｌが表示されている最中に、設定者Ｃによる時間帯を指定する入力操作に基づいて、ライブ画像Ｌの中でＴＩＧエリアＡが有効になる時間帯を設定することができる。
これにより、設定者Ｃは、ライブ画像Ｌの中のＴＩＧエリアＡが有効になる時間帯を予め設定することなく、ライブ画像Ｌを確認しながら、自らＴＩＧエリアＡが有効になる時間帯を設定することができる。
【００５８】
また、時間帯設定部１１３は、後述する認識部１１４によるオブジェクトＪの認識結果に基づいて、ライブ画像Ｌの中でＴＩＧエリアＡが有効になる時間帯を設定することができる。
これにより、設定者Ｃは、ライブ画像Ｌを自ら確認することなく、オブジェクトＪを自動認識させて、ＴＩＧエリアＡが有効になる時間帯を自動設定させることができる。
【００５９】
認識部１１４は、ライブ画像Ｌが表示されている最中に、所定時間帯の前記所定領域に存在するオブジェクトＪを認識する。
具体的には、認識部１１４は、設定者端末２に表示されているライブ画像Ｌの中に存在するオブジェクトＪを自動で認識する。ここで、認識部１１４がオブジェクトＪを認識する際の具体的手法は特に限定されず、例えば画像認識等の技術を用いることができる。
【００６０】
以上の機能的構成を有する設定部１０１が機能することにより、管理サーバ１における紐付情報設定支援処理を実現させることができる。
【００６１】
視聴部１０２の紐付情報管理部１２１は、表示されているライブ画像Ｌの中で第１ユーザとしての視聴者Ｗにより指定がなされる、所定時間帯のＴＩＧエリアＡに存在するオブジェクトＪに対し、視聴者Ｗにオブジェクト情報を提供するための紐付情報を、視聴者Ｗによる指定がなされる前の所定タイミングで紐付けて管理する。
具体的には、紐付情報管理部１２１は、ライブ画像Ｌに表示されているオブジェクトＪを指定するための操作（例えばタップ操作）が行われる前に、以下の処理を行う。即ち、紐付情報管理部１２１は、ライブ画像Ｌに表示され得るオブジェクトＪとしてオブジェクトＤＢ１８１に記憶されて管理されている１以上のオブジェクトＪの夫々に対し、紐付情報を紐付けて管理する。
【００６２】
提示制御部１２２は、１以上のオブジェクトＪが表示され得るライブ画像Ｌを視聴者端末３に提示する制御を実行する。例えば、提示制御部１２２は、図１のライブ画像Ｌを視聴者端末３に提示する制御を実行する。
【００６３】
また、提示制御部１２２は、ストック情報（紐付情報）をライブ画像Ｌに重畳させて、又はライブ画像Ｌとは独立させて、視聴者Ｗに提示する制御を実行する。
具体的には、提示制御部１２２は、ストック情報として保存されている１以上のオブジェクトＪのサムネイル画像の一覧（例えば「ＴＩＧストック」）を、ライブ画像Ｌに重畳させて、又はライブ画像Ｌとは独立させたページとして、視聴者Ｗに提示する制御を実行する。
【００６４】
また、提示制御部１２２は、オブジェクトＪに対する指定がなされると、ストック情報にオブジェクトＪが加えられた旨を示す動画像（例えばアニメーション）を、ライブ画像Ｌに重畳させて視聴者に提示する制御を実行する。
【００６５】
指定受付部１２３は、ライブ画像Ｌが提示されている視聴者ＷによるＴＩＧエリアＡに対するタップする操作がなされた場合、ＴＩＧエリアＡに存在するオブジェクトＪに対する指定がなされたと認識して、その指定を受付ける。
具体的には例えば、指定受付部１２３は、視聴者端末３に表示されたライブ画像Ｌに対する視聴者ＷによるオブジェクトＪを指定する操作（例えばタップの操作）がなされた場合に、その指定を受付ける。
【００６６】
取得部１２４は、指定が受付けられたオブジェクトＪに紐付けられて管理されている紐付情報を取得する。
具体的には例えば、取得部１２４は、視聴者Ｗによる指定が受付けられたオブジェクトＪに紐付けられて管理されている紐付情報を取得する。
【００６７】
提供制御部１２５は、取得部１２４により取得された紐付情報に基づいて、オブジェクト情報を視聴者端末３に提供する制御を実行する。
【００６８】
ストック管理部１２６は、視聴者Ｗによる指定がなされた１以上のオブジェクトＪの夫々の紐付情報を、ストック情報として、例えば上述の「ＴＩＧストック」に保存して管理する。また、ストック管理部１２６は、所定の分類基準、及び所定の分類手法に基づいて、１以上のストック情報を分類して管理する。
【００６９】
以上の機能的構成を有する視聴部１０２が機能することにより、管理サーバ１における紐付情報提供処理を実現させることができる。
【００７０】
次に、図５乃至図８を参照して、紐付情報設定支援処理の具体例について説明する。
図５は、設定者が、オブジェクトの設定を、設定者端末にライブ画像が表示される前に行う場合に、設定者端末に表示されるＧＵＩの一例を示す図である。
【００７１】
設定者Ｃは、オブジェクトＪの設定を、設定者端末にライブ画像Ｌが表示される前に行う場合、図５に示すＧＵＩ（以下、「オブジェクト事前設定画面」と呼ぶ）を用いる。
なお、本実施形態では、設定者端末２に予めインストールされた、専用のアプリケーションソフトウェア（以下、「設定アプリ」と呼ぶ）を用いて各種の設定を行うものとする。
ただし、各種の設定を行う手法は、特に限定されず、例えばブラウザ機能により各種の設定を行う手法を採用してもよい。
【００７２】
図５に示すオブジェクト事前設定画面は、表示領域Ｆ１及びＦ２を含むように構成されている。オブジェクト事前設定画面によれば、オブジェクトＤＢ１８１において紐付情報に夫々紐付けられて管理されている１以上のオブジェクトＪのうち、１以上のオブジェクトＪを選択することができる。
なお、図５、図６Ａ、図６Ｂ、図８Ａ及び図８Ｂに示すＧＵＩでは、オブジェクトＪのことを「アイテム」と表現しているが、両者の意味は同じである。
このうち、表示領域Ｆ１には、タイムカウンタＭと、「ＴＩＧ編集」と表記されたボタンＢ１と、「ヒートマップ」と表記されたボタンと、「アナリティクス」と表記されたボタンと、「コピー」と表記されたボタンと、「プレビュー」と表記されたボタンとが表示されている。
【００７３】
タイムカウンタＭは、ライブ画像Ｌが表示されている時間を表示する。
「ＴＩＧ編集」と表記されたボタンＢ１は、ＴＩＧエリアＡの位置と、ＴＩＧエリアＡが有効になる時間帯との設定がなされる際に押下されるボタンである。このボタンＢ１が押下されると、図６Ａ及び図６Ｂに示す設定画面に遷移する。
「ヒートマップ」と表記されたボタンは、ライブ画像Ｌを視聴する１以上の視聴者Ｗの夫々が、ライブ画像Ｌのどの領域をタップしているのかを、ヒートマップで表示させる際に押下されるボタンである。
「アナリティクス」と表記されたボタンは、ライブ画像Ｌに対する様々な解析が行われる際に押下されるボタンである。
「コピー」と表記されたボタンは、ライブ画像Ｌの配信元を示すＵＲＬをコピーする際に押下されるボタンである。
「プレビュー」と表記されたボタンは、ライブ画像Ｌの配信元を示すＵＲＬにより特定されるＷＥＢページをプレビューする際に押下されるボタンである。
【００７４】
また、表示領域Ｆ２には、ＴＩＧエリアＡが設定される候補となるオブジェクトＪの一覧Ｈ（以下、「オブジェクト一覧Ｈ」と呼ぶ）と、「登録済みのアイテムから追加」と表記されたボタンＢ２と、「新規アップロード」と表記されたボタンＢ３と、「ＴＩＧ編集」と表記されたボタンＢ１とが表示されている。
【００７５】
オブジェクト一覧Ｈは、設定の対象となるオブジェクトＪ１乃至Ｊ８の夫々を示すサムネイル画像を一覧表示させたものである。ここで、オブジェクト一覧Ｈに表示されたオブジェクトＪ１乃至Ｊ８の夫々には、図５に示すように、紐付情報の一部が夫々併記されていてもよい。
【００７６】
「登録済みのアイテムから追加」と表記されたボタンＢ２は、押下することで本サービスに登録済みのオブジェクトＪをオブジェクト一覧Ｈに追加することができる。
即ち、設定者Ｃは、ボタンＢ２を押下することで、オブジェクトＤＢ１８１に記憶されて管理されている１以上のオブジェクトＪの中から、１以上のオブジェクトＪを選択して、オブジェクト一覧Ｈに追加することができる。
【００７７】
「新規アップロード」と表記されたボタンＢ３は、押下することで、本サービスに未だ登録されていないオブジェクトＪを、本サービスのオブジェクトＪとして登録したうえで、オブジェクト一覧Ｈに追加することができる。
即ち、設定者Ｃは、ボタンＢ３を押下することで、新規のオブジェクトＪをオブジェクトＤＢ１８１に記憶されて管理させるとともに、オブジェクト一覧Ｈに追加することができる。
【００７８】
「ＴＩＧ編集」と表記されたボタンＢ１は、表示領域Ｆ１に表示されているボタンＢ１と同様である。このため、表示領域Ｆ２に表示されているボタンＢ１についての説明は省略する。
【００７９】
図６Ａ及び図６Ｂは、設定者が、ＴＩＧエリアが有効になる時間帯の設定を、設定者端末にライブ画像が表示される前に行う場合に、設定者端末に表示されるＧＵＩの一例を示す図である。
【００８０】
設定者Ｃは、ＴＩＧエリアＡが有効になる時間帯の設定を、設定者端末にライブ画像Ｌが表示される前に行う場合、図６Ａ及び図６Ｂに示すＧＵＩ（以下、「時間帯事前設定画面」と呼ぶ）を用いる。
【００８１】
図６Ａに示す時間帯事前設定画面には、タイムカウンタＭと、オブジェクト一覧Ｈとが表示されている。
タイムカウンタＭは、上述したように、ライブ画像Ｌが表示されている時間を表示する。
オブジェクト一覧Ｈは、上述したように、設定の対象となるオブジェクトＪ１乃至Ｊ８の夫々を示すサムネイル画像を一覧表示させたものである。
【００８２】
設定者ＣがボタンＢ１１を押下することで、タイムカウンタＭに表示された時間のカウントが開始される。設定者Ｃは、時間のカウントが開始された後、任意のタイミングで、オブジェクト一覧Ｈの中から所望のオブジェクトＪを選択する操作を行う。なお、本実施形態では、設定者Ｃが、所望のオブジェクトＪをタップする操作を行うことでオブジェクトＪを選択する。
【００８３】
例えばここで、設定者ＣによるオブジェクトＪ８を選択する操作（タップ操作）が行われると、図６Ｂに示すように、時間帯事前設定画面からオブジェクト一覧Ｈが消え、オブジェクトＪ８を示すサムネイル画像を含むＴＩＧエリアＡが表示される。
【００８４】
図６Ｂの例は、タイムカウンタによる時間のカウントが開始された後、２秒５６の時間が経過したタイミングから、オブジェクトＪ８が存在し得るＴＩＧエリアＡが有効になることを示している。
そして、設定者Ｃは、タイムカウンタＭに表示されている時間を視認しながら、オブジェクトＪ８が存在し得るＴＩＧエリアＡを有効になる時間帯を設定する。
また、設定者Ｃは、時間帯事前設定画面の右下に表示されたボタンＢ１２を押下することで、ＴＩＧエリアＡの表示・非表示を切り替えることもできる。
【００８５】
また、設定者Ｃは、オブジェクトＪ１以外のオブジェクトＪ２乃至Ｊ８のいずれかを追加する場合には、時間帯事前設定画面右上の「＋アイテム」と表記されたボタンＢ１３を押下する。これにより、図６Ａに示すオブジェクト一覧が再び表示されるので、設定者Ｃは、オブジェクトＪ１を選択したときと同様の操作で、任意のオブジェクトＪを選択する。
設定者Ｃは、時間帯事前設定画面において、以上のような操作を行うことで、ＴＩＧエリアＡが有効になる時間帯の設定を、オブジェクトＪ毎に容易に行うことができる。
【００８６】
図７Ａ及び図７Ｂは、設定者が、ＴＩＧエリアの位置の設定と、ＴＩＧエリアが有効になる時間帯の設定とを、設定者端末にライブ画像が表示されている最中に行う場合に、設定者端末に表示されるＧＵＩの一例を示す図である。
【００８７】
設定者Ｃは、ＴＩＧエリアＡの位置の設定と、ＴＩＧエリアＡが有効になる時間帯の設定とを、設定者端末にライブ画像Ｌが表示されている最中に行う場合、図７Ａ及び図７Ｂに示すＧＵＩ（以下、「カスタム設定画面」と呼ぶ）を用いる。
【００８８】
図７Ａ及び図７Ｂに示すカスタム設定画面は、表示領域Ｆ３及びＦ４を含むように構成されている。
【００８９】
表示領域Ｆ３には、ライブ画像Ｌが表示される。設定者Ｃは、表示領域Ｆ３に表示されるライブ画像Ｌを視聴しながら、ＴＩＧエリアＡの位置の設定と、ＴＩＧエリアＡが有効になる時間帯の設定とを自由に行うことができる。
【００９０】
表示領域Ｆ４には、オブジェクト一覧Ｈが表示される。設定者Ｃは、オブジェクト一覧Ｈにサムネイル表示されている１以上のオブジェクトＪの中から、任意のオブジェクトＪを選択し、ライブ画像Ｌの任意の時間帯の任意の位置にＴＩＧエリアＡを設定することができる。
ここで、設定者ＣがＴＩＧエリアＡの位置を設定する手法としては、以下の２つの手法がある。１つ目の手法は、図７Ａに示す手法であり、ライブ画像Ｌのいずれの位置に対しても自由に設定できる手法（以下、「フリー位置設定」と呼ぶ）である。２つ目の手法は、図７Ｂに示す手法であり、ライブ画像Ｌを複数のブロックに分割して、いずれかのブロックにＴＩＧエリアＡを設定する手法（以下、「ブロック位置設定」と呼ぶ）である。
【００９１】
ここで、フリー位置設定が採用された場合、設定者Ｃは、オブジェクト一覧Ｈの中から任意のオブジェクトＪを選択して、任意の位置にＴＩＧエリアＡを設定する。
具体的には例えば、図７Ａに示すように、設定者Ｃは、オブジェクト一覧ＨからオブジェクトＪ５を選択し、ライブ画像Ｌに登場しているオブジェクトＪ５に重畳するようにＴＩＧエリアＡ１１を設定する。また、設定者Ｃは、オブジェクト一覧ＨからオブジェクトＪ７を選択し、ライブ画像Ｌに登場しているオブジェクトＪ７に重畳するようにＴＩＧエリアＡ１２を設定する。
これにより、設定者Ｃは、ライブ画像ＬにおけるＴＩＧエリアＡ１１及びＡ１２の夫々の位置の設定を行うことができる。
【００９２】
また、位置の設定を行ったＴＩＧエリアＡ１１及びＡ１２の夫々には、有効（ＯＮ）と無効（ＯＦＦ）とを任意のタイミングで切り替えることができる切替ボタンＢ２１が設けられている。
これにより、設定者Ｃは、切替ボタンＢ２１を押下することで、有効（ＯＮ）と無効（ＯＦＦ）とを任意のタイミングで切り替えることができる。
また、設定者Ｃは、ライブ画像ＬにオブジェクトＪが登場する前に、各種設定を行い、ライブ画像ＬにオブジェクトＪが登場したタイミングで切替ボタンＢ２１を押下するだけで、ＴＩＧエリアＡ１１の有効／無効を容易に設定することができる。
なお、図７Ａに示す例では、ＴＩＧエリアＡ１１は有効（ＯＮ）とされ、ＴＩＧエリアＡ１２は無効（ＯＦＦ）とされている。
【００９３】
また、ブロック位置設定が採用された場合、設定者Ｃは、オブジェクト一覧Ｈの中から任意のオブジェクトＪを選択して、ブロックＴ１乃至Ｔ９のうちいずれかの位置にＴＩＧエリアＡを設定する。
具体的には例えば、図７Ｂに示すように、設定者Ｃは、オブジェクト一覧ＨからオブジェクトＪ８を選択するとともに、ＴＩＧエリアＡ１３の位置を選択する。ＴＩＧエリアＡ１３の位置は、オブジェクト一覧Ｈにサムネイル表示されているオブジェクトＪ８の右側に設けられているプルダウンボタンＢ２２を押下することで選択することができる。なお、図７Ｂの例では、プルダウンボタンＢ２２を押下することで「４」（ブロックＴ４）が選択されている。
これにより、設定者Ｃは、所定タイミングで、ライブ画像Ｌに登場しているオブジェクトＪ８に重畳するようにＴＩＧエリアＡ１３を設定することができる。
【００９４】
また、図７Ａに示すフリー位置設定と同様に、位置の設定を行ったＴＩＧエリアＡ１３には、有効（ＯＮ）と無効（ＯＦＦ）とを任意のタイミングで切り替えることができる切替ボタンＢ２１が設けられている。
これにより、設定者Ｃは、切替ボタンＢ２１を押下することで、有効（ＯＮ）と無効（ＯＦＦ）とを任意のタイミングで切り替えることができる。
なお、図７Ｂに示す例では、ＴＩＧエリアＡ１３は無効（ＯＦＦ）とされている。
【００９５】
図８Ａ及び図８Ｂは、ＴＩＧエリアの位置の設定と、ＴＩＧエリアが有効になる時間帯の設定とが、設定者端末にライブ画像が表示されている最中に自動で行われる場合に、設定者端末に表示されるＧＵＩの一例を示す図である。
【００９６】
ＴＩＧエリアＡの位置の設定と、ＴＩＧエリアＡが有効になる時間帯の設定とが、設定者端末にライブ画像Ｌが表示されている最中に自動で行われる場合、設定者Ｃは、図８Ａ及び図８Ｂに示すＧＵＩ（以下、「認識オブジェクト事前設定画面」と呼ぶ）を用いる。
【００９７】
ここで、認識オブジェクト事前設定画面には、以下の２つの種類がある。
１種類目の設定画面は、図８Ａに示す設定画面であり、ライブ画像Ｌに存在するオブジェクトＪを追従することなく特定の位置で認識させる手法が採用された場合に用いられる設定画面である。
２種類目の設定画面は、図８Ｂに示す設定画面であり、ライブ画像Ｌに存在するオブジェクトＪを追従して認識させる手法が採用された場合に用いられる設定画面である。
図８Ａ及び図８Ｂに示す認識オブジェクト事前設定画面は、紐付情報を共通にする複数のオブジェクトＪを１つのグループにまとめて、これらを１のオブジェクトＪとして設定する場合に用いられる設定画面である。
設定者Ｃは、設定者端末２にライブ画像Ｌが表示される以前に、認識オブジェクト事前設定画面を編集し、「更新」と表記されたボタンＢ３１を押下することで、オブジェクトＪの設定を行うことができる。
【００９８】
このうち、図８Ａに示す認識オブジェクト事前設定画面は、３種類のオブジェクトＪ１１１乃至Ｊ１１３について、紐付情報Ｋを共通にする１つのオブジェクトＪ１１として設定する。
これにより、設定者端末２にライブ画像Ｌが表示されている最中に、ライブ画像Ｌの特定の位置にオブジェクトＪ１１１乃至Ｊ１１３のうちいずれが表示されると、そのオブジェクトＪが認識されて、ＴＩＧエリアＡが自動設定される。
例えば、図８Ａに示すように、設定者端末２に表示されているライブ画像Ｌの特定の位置にオブジェクトＪ１１３が表示されると、オブジェクトＪ１１３が自動認識されて、ＴＩＧエリアＡ２１が自動設定される。
【００９９】
また、図８Ｂに示す認識オブジェクト事前設定画面は、ｎ種類（ｎは１以上の整数値）のオブジェクトＪ１２−１乃至Ｊ１２−ｎについて、紐付情報Ｋを共通にする１つのオブジェクトＪ１２として設定する。
これにより、設定者端末２にライブ画像Ｌが表示されている最中に、ライブ画像Ｌのいずれかの位置にオブジェクトＪ１２−１乃至Ｊ１２−ｎのうちいずれが表示されると、そのオブジェクトＪが認識されて、ＴＩＧエリアＡが自動設定される。
例えば、図８Ｂに示すように、設定者端末２に表示されているライブ画像ＬにオブジェクトＪ１２−ｒ（ｒは１以上ｎ以下の整数値）が表示されると、オブジェクトＪ１２−ｒが自動認識されて、ＴＩＧエリアＡ２２が自動設定される。
【０１００】
また、図示はしないが、ライブ画像Ｌに存在するすべてのオブジェクトＪを自動認識して、オブジェクトＪに対する紐付情報の紐付けをすべて自動的に行うことができる。
この場合、例えば事前教師データを用いて各種機械学習を施すことで、オブジェクトＪを自動認識できるようにしてもよい。
【０１０１】
次に図９乃至図１１を参照して、衣料品店の店員ＣＬが、商品を紹介するライブ画像Ｌの配信を行う場合に、本サービスが適用される例について説明する。
図９は、衣料品店の店員ＣＬが商品Ｉを試着してライブ画像Ｌを配信する場合に本サービスが適用される例を示す図である。
具体的には例えば、店員ＣＬは、店舗内の所望の商品Ｉを試着しながら紹介を行う。店員ＣＬが商品Ｉを試着しながら紹介する様子は、カメラＣＡＭにより撮像され、ライブ画像Ｌとして、管理サーバ１を介して顧客（視聴者Ｗ）に配信される。なお、このとき、設定者端末２は、カメラＣＡＭ及びリーダＲ等から各種情報を取得してライブ画像Ｌを生成することができる。
以下、このような店舗内の商品Ｉを店員ＣＬが試着しながら紹介を行うライブ画像Ｌの配信について、より詳細に説明する。
【０１０２】
図９に示すように、店員ＣＬは、店舗内の商品Ｉを試着し、店舗内の所定位置に備え付けられているリーダＲを用いて、商品Ｉに付されたタグＤを読取る。
なお、リーダＲに読取られるタグＤの態様は特に限定されない。例えば、ＲＦＩＤ（Ｒａｄｉｏ  ｆｒｅｑｕｅｎｃｙ  ｉｄｅｎｔｉｆｉｅｒ）タグ、ＱＲコード（登録商標）、バーコード等の識別子を採用することができる。
【０１０３】
また、店員ＣＬは、店舗内の所定位置に備え付けられているカメラＣＡＭの前で商品Ｉを紹介する。その結果、タグＤが読取られた商品Ｉと、商品Ｉを試着した状態の店員ＣＬとを被写体とする画像が、カメラＣＡＭにより撮像される。
【０１０４】
設定者端末２は、上述のように、商品Ｉを試着した状態の店員ＣＬを被写体とする撮像画像のデータをカメラＣＡＭから取得する。また、設定者端末２は、商品Ｉに付されたタグＤの情報をリーダＲから取得する。商品Ｉを試着した店員ＣＬの撮像画像は、ライブ画像Ｌの一部又は全部として設定者端末２に表示される。このとき、店員ＣＬにより試着された商品Ｉは、オブジェクト情報を有するオブジェクトＪとして認識されて、商品Ｉを試着している店員ＣＬの像とは切り離されて独自の像としてライブ画像Ｌに表示される。具体的には例えば、図９に示すように、商品Ｉを試着した店員ＣＬの撮像画像と、それとは独立した単体の商品Ｉを示すオブジェクトＪとがライブ画像Ｌとして設定者端末２に表示される。
【０１０５】
また、このライブ画像Ｌは、管理サーバ１を介して、顧客（視聴者Ｗ）が所持する視聴者端末３に配信され、表示される。
顧客（視聴者Ｗ）は、視聴者端末３にライブ画像Ｌとして表示された、商品Ｉを試着する店員ＣＬの姿を見ながら、商品Ｉの購入の有無を決定することができる。このとき、顧客（視聴者Ｗ）は、視聴者端末３にオブジェクトＪとして表示された商品Ｉをタップする操作を行うことで、オブジェクト情報が掲載されたＥＣ（Ｅｌｅｃｔｒｏｎｉｃ  Ｃｏｍｍｅｒｃｅ）サイトＳにアクセスすることができる。
顧客（視聴者Ｗ）は、商品Ｉを購入する場合、ＥＣサイトＳからオンラインで購入してもよいし、衣料品店（実店舗）で直接購入してもよい。例えば、顧客（視聴者Ｗ）は、商品ＩをＥＣサイトＳで購入した場合、ライブ画像Ｌを視聴して興味を持った商品Ｉをすぐに購入することができる。また、例えば、顧客（視聴者Ｗ）は、商品Ｉを衣料品店（実店舗）で直接購入する場合、商品Ｉを実際に試着してから購入を決めることもできる。このとき、顧客（視聴者Ｗ）は、自身がタップして選択した商品Ｉの情報を衣料品店（実店舗）で入手（確認）することもできる。
【０１０６】
即ち、図５等を用いて説明したように、設定者Ｃは、ライブ画像Ｌを視聴しながら、ＴＩＧエリアＡの位置の設定と、ＴＩＧエリアＡが有効になる時間帯の設定を行う必要があった。しかしながら、図９の例の場合、上述のように、ライブ配信を行う店員ＣＬ自身が、商品ＩのタグＤをリーダＲで読み取る操作を行うことができる。その結果、サービス提供者や店員ＣＬは、設定者Ｃによる設定なしに、ライブ画像Ｌの配信を行うことができる。
【０１０７】
また、管理サーバ１は、ライブ画像Ｌを記憶してアーカイブすることができる。即ち、管理サーバ１は、視聴者端末３からの要望に基づいて、視聴者端末３にライブ画像Ｌのアーカイブを配信することで、視聴者Ｗに視聴させることができる。
また、設定者端末２は、管理サーバ１を介して、ライブ画像Ｌを視聴する視聴者Ｗからのコメントを取得できるようにしてもよい。即ち、店員ＣＬは、視聴者Ｗからのコメントを確認しながら、インタラクティブなライブ画像Ｌを配信してもよい。具体的には例えば、店員ＣＬは、視聴者Ｗからの「どんなトップスと合わせたらいいでしょうか」というコメントに応答をしながら、ライブ画像Ｌの配信を行うことができる。
【０１０８】
図１０は、衣料品店の店員が商品を試着してライブ画像を配信する場合に本サービスが適用される例のうち図９と異なる例を示す図である。
【０１０９】
図１０には、店員ＣＬの試着姿が、衣料品店の店舗内に設置された姿見としての大型のディスプレイＤＳＰに映し出される態様の一例が示されている。
上述の図９の例では、店員ＣＬは、カメラＣＡＭにより撮像された自分の試着姿を、設定者端末２に表示されたライブ画像Ｌとして確認しながら配信していた。即ち、カメラＣＡＭにより撮像された店員ＣＬの試着姿は、設定者端末２及び視聴者端末３にライブ画像Ｌとして表示されていた。
これに対して、図１０の例ではさらに、店員ＣＬの試着姿は、店舗内に設置された大型のディスプレイＤＳＰにも映し出される。これにより、店員ＣＬは、ディスプレイＤＳＰを姿見（鏡）として利用して、ライブ画像Ｌの配信をすることができる。
【０１１０】
図１０に示すように、衣料品店の店員ＣＬは、店舗内の所望の商品Ｉを試着し、店舗内の所定位置に備え付けられているリーダＲを用いて、商品Ｉに付されたタグＤを読取る。
【０１１１】
また、店員ＣＬは、店舗内のディスプレイＤＳＰの近傍に備え付けられているカメラＣＡＭの前で商品Ｉを紹介する。その結果、タグＤが読取られた商品Ｉを試着した状態の店員ＣＬを被写体とする撮像画像が撮像される。
なお、店舗内に設置されるディスプレイＤＳＰの態様は特に限定されない。例えばＯＳ（Ｏｐｅｒａｔｉｎｇ  Ｓｙｓｔｅｍ）が内蔵された、タッチ操作を受付けることができるタッチパネル式のディスプレイであってもよい。
また、ディスプレイＤＳＰとして、ミラーサイネージが採用されてもよい。この場合、ディスプレイＤＳＰには、鏡として店員ＣＬの姿が映され、タグＤが読み取られた結果の各種情報等が店員ＣＬの姿に重畳されて表示される。
【０１１２】
カメラＣＡＭにより撮像された商品Ｉを試着した店員ＣＬの撮像画像は、図９の例と同様に、ライブ画像Ｌとして設定者端末２や視聴者端末３に表示される。そして、商品Ｉは、図９の例と同様に、オブジェクト情報を有するオブジェクトＪとして認識されて、（商品Ｉを試着した状態の）店員ＣＬの像とは別の像としてライブ画像Ｌに表示される。
【０１１３】
ここで、ディスプレイＤＳＰがタッチパネル式である場合には、店員ＣＬが、ディスプレイＤＳＰに表示されたライブ画像Ｌに含まれる商品Ｉ（オブジェクトＪ）をタップする操作やドラッグする操作等を行うことができる。この場合、店員ＣＬは、オブジェクトＪの表示上の配置を変更したり、オブジェクトＪの「有効」と「無効」とを切り替えたり操作を行うことができる。
【０１１４】
また、このライブ画像Ｌは、管理サーバ１を介して、顧客（視聴者Ｗ）が所持する視聴者端末３に配信され、表示される。
顧客（視聴者Ｗ）は、視聴者端末３にライブ画像Ｌとして表示された、店員ＣＬの試着姿を見ながら、商品Ｉの購入の有無を決定する。ここで、図９の例と同様に、視聴者端末３にオブジェクトＪとして表示された商品Ｉをタップする操作が行われると、顧客（視聴者Ｗ）は、商品Ｉのオブジェクト情報が掲載されたＥＣサイトＳにアクセスすることができる。これにより、顧客（視聴者Ｗ）は、図９の例と同様に、商品Ｉを購入する場合には、ＥＣサイトＳからオンラインで購入することもできるようになるし、衣料品店（実店舗）で直接購入することもできるようになる。
【０１１５】
図９及び図１０を用いて説明した本サービスが適用される例において、設定者端末２は、カメラＣＡＭ及びリーダＲから各種情報を取得し、ライブ画像Ｌを表示するものとして説明した。しかしながら、設定者端末２と、カメラＣＡＭやリーダＲとは別個のハードウェアである必要はなく、例えばスマートフォンやタブレット端末として提供されてもよい。
設定者端末２としてカメラＣＡＭやリーダＲを含むスマートフォンやタブレット端末が提供される場合、店員ＣＬは、ライブ画像を配信するための専用のアプリケーションソフトウェア（以下、「配信アプリ」と呼ぶ）を用いてライブ画像の配信をすることができる。配信アプリは、上述の設定アプリに含まれる各種機能等を含む配信に係る機能を提供する。
この場合、店員ＣＬは、単一のスマートフォン等で手軽にライブ画像の配信を行うことができる。また、衣料品店としては、普及しているスマートフォン等を用いてライブ画像の配信を行うことができるため、配信のための設備に係るコストを低減することができる。
【０１１６】
図１１は、衣料品店の店員が商品を試着してライブ画像を配信する場合に本サービスが適用される例のうち図９及び図１０と異なる例を示す図である。
上述の図９及び図１０の例では、商品Ｉを試着した店員ＣＬの撮像画像（ライブ画像Ｌ）は、設定者端末２から管理サーバ１に送信される態様となっているが、図１１の例に示すように、ディスプレイＤＳＰにＯＳを内蔵させるとともに、リーダＲとカメラＣＡＭについてもディスプレイＤＳＰに内蔵させる態様もある。この態様の場合、店舗の所定位置にディスプレイＤＳＰ（ＯＳ、リーダＲ、カメラＣＡＭ内蔵型）が設置されるだけでよく、カメラＣＡＭやリーダＲの夫々を店舗内の所定位置に夫々設ける手間が省ける。また、設置が容易なディスプレイＤＳＰ（ＯＳ、リーダＲ、カメラＣＡＭ内蔵型）は、セット商品として販売することもできるだけではなく、ディスプレイＤＳＰ（ＯＳ、リーダＲ、カメラＣＡＭ内蔵型）を単独で販売等することもできる。
【０１１７】
上述の図９乃至図１１に示す衣料品店で適用可能な本サービスの一例では、店員ＣＬが店舗内に備え付けられたリーダＲを用いてタグＤを読取る態様となっている。ただし、この態様は例示に過ぎず、例えばリーダＲを用いることなく、視聴者Ｗの操作に基づいてタグＤの読取りが行われる態様もある。
図１２は、視聴者の操作に基づいてタグの読取りが行われる態様の例を示す図である。
【０１１８】
図１２の例では、視聴者端末３に表示されたオブジェクトＪのタグＤを視聴者Ｗが選択する操作（例えばタップの操作）を行うと、選択されたタグＤを認識する処理が実行されて有効になる。
これにより、設定者Ｃによる設定作業が不要となる。また、紐付情報を有する１以上のオブジェクトＪが、ライブ画像のどのタイミングにどの位置に表示されるのか等を示す情報（以下、「ＴＩＧメタデータ」と呼ぶ）を管理サーバ１に格納しておく必要性もなくなる。さらに、店舗内にリーダＲを用意する必要もなくなる。
【０１１９】
上述の図９乃至図１１に示す衣料品店で適用可能な本サービスの一例では、店員ＣＬが店舗内に備え付けられたリーダＲを用いてタグＤを読取る態様となっている。ただし、この態様は例示に過ぎず、リーダＲがタグＤを読取る態様は他にもある。図１３Ａ乃至図１３Ｄには、リーダＲがタグＤを読取る他の態様の例が示されている。
図１３Ａ乃至図１３Ｄは、リーダＲがタグＤを読取る他の態様を示す図である。
【０１２０】
図１３Ａ及び図１３Ｂには、ファッションショーに出演するモデルが着用する衣類に、予めタグＤを付しておく場合の例が示されている。
図１３Ａの例の場合、モデルが歩く舞台（ランウェイ）の端部付近（モデルがターンする位置付近）の上方（例えば天井等）にリーダＲが設置されている。
これにより、リーダＲは、モデルが歩く舞台（ランウェイ）の端部付近（モデルがターンする位置付近）に差し掛かると、モデルの衣類に予め付されたタグＤの読取りを行うことができる。すると、設定者端末２（及び図示せぬ視聴者端末３）に表示されるライブ画像Ｌの一部に、モデルの衣類を示すオブジェクトＪが表示されるようになる。
図１３Ｂの例の場合、モデルが歩く舞台（ランウェイ）の端部付近（モデルがターンする位置付近）にリーダＲが埋設されている。
これにより、リーダＲは、図１３Ａの場合と同様に、モデルが歩く舞台（ランウェイ）の端部付近（モデルがターンする位置付近）に差し掛かると、モデルの衣類に予め付されたタグＤの読取りを行うことができる。すると、設定者端末２（及び図示せぬ視聴者端末３）に表示されるライブ画像Ｌの一部に、モデルの衣類を示すオブジェクトＪが表示されるようになる。
【０１２１】
図１３Ｃには、ドローン等の小型飛行体ＶにリーダＲとカメラＣＡＭが設置される例が示されている。この場合、例えば地上（例えば観光地）の各所（例えば名所）毎にタグＤが配置される。
これにより、小型飛行体Ｖは、上空から地上（例えば観光地）をカメラＣＡＭを用いて撮像するとともに、リーダＲによって各所のタグＤの読取りを行う。すると、図示はしないが、設定者端末２及び視聴者端末３に表示されたライブ画像Ｌの一部に、地上（例えば観光地）の各所（例えば名所）を示すオブジェクトＪが表示される。なお、小型飛行体Ｖは、屋外のみならず、屋内（例えば大規模な屋内施設のイベント等）で使用することもできる。
【０１２２】
図１３Ｄには、リーダＲを壁に設置する例が示されている。
この場合、例えば室内で開催されるイベントに参加するタレントが着用する衣類に、予めタグＤを付しておく等の態様が可能となる。
これにより、リーダＲは、イベント開催中、タレントの衣類に予め付されたタグＤの読取りを行う。すると、図示せぬ設定者端末２（及び視聴者端末３）に表示されるライブ画像Ｌの一部に、モデルの衣類を示すオブジェクトＪが表示される。
【０１２３】
次に、図１４Ａ乃至図１４Ｃを参照して、視聴者端末３に表示されるデータの同期をとる手法について説明する。
図１４Ａは、情報処理システム内で生じ得る遅延を示す図である。
なお、図１４Ａのうち実線の矢印は、ライブ画像ＬにＴＩＧメタデータＴＭを埋め込まない場合のデータの流れと遅延とを示している。また、図１４Ａのうち破線の矢印は、ライブ画像ＬにＴＩＧメタデータＴＭを直接埋め込んだ場合のデータの流れと遅延とを示している。
【０１２４】
まず、ライブ画像ＬにＴＩＧメタデータＴＭを埋め込まない場合のデータの流れと遅延とについて説明する。
図１４Ａに示すように、カメラＣＡＭにより撮像されたライブ画像Ｌは、設定者端末２と外部サーバ４とに夫々送信される。ここで、カメラＣＡＭから送信されたライブ画像Ｌを設定者端末２が受信するまでの間に僅かな遅延Ｄ１が生じる。また、設定者端末２における設定作業が完了すると、設定者端末２から管理サーバ１にＴＩＧメタデータＴＭが送信される。ここで、設定者端末２から送信されたＴＩＧメタデータＴＭを管理サーバ１が受信するまでの間に僅かな遅延Ｄ２が生じる。その後、管理サーバ１から視聴者端末３にＴＩＧメタデータＴＭが送信される。ここで、管理サーバ１から送信されたＴＩＧメタデータＴＭを視聴者端末３が受信するまでの間に僅かな遅延Ｄ３が生じる。
即ち、カメラＣＡＭで撮像されたライブ画像Ｌが、設定者端末２に受信され、その後、ＴＩＧメタデータＴＭが設定者端末２から管理サーバ１を経て視聴者端末３に受信されるまでの間に遅延Ｄ１乃至Ｄ３が生じる。
【０１２５】
また、カメラＣＡＭから送信されたライブ画像Ｌを外部サーバ４が受信するまでの間にトランスコード（圧縮）等による遅延Ｄ４が生じる。また、外部サーバ４から送信されたライブ画像Ｌを視聴者端末３が受信するまでの間にデコード（復元）等による遅延Ｄ５が生じる。
即ち、カメラＣＡＭで撮像されたライブ画像Ｌが外部サーバ４を経て視聴者端末３に受信されるまでの間に遅延Ｄ４及びＤ５が生じ得る。
【０１２６】
図１４Ｂは、図１４Ａに示す遅延を利用して同期をとる手法の例を示す図である。
【０１２７】
図１４Ｂには、カメラＣＡＭ、設定者端末２、管理サーバ１、外部サーバ４、及び視聴者端末３の夫々により入力され又は出力される、ライブ画像Ｌ、ＴＩＧメタデータＴＭ、又はＴＩＧメタオフセットが時間軸で示されている。時間軸に並行して配列された長方形のブロックは、１秒の長さを示す映像フレームを示している。また、タイムコードに並行して配列された楕円形のブロックは、１秒の長さを示すＴＩＧメタデータＴＭを示している。また、楕円形のブロックの中の数字は、オブジェクトＪが有効となってからの経過時間を示している。
また、「ＴＩＧメタオフセット」とは、ＴＩＧメタデータＴＭを遅延させるために利用されるオフセットのことをいう。「オフセット」とは、異なる機器を時間のズレを持たせて動作させることをいう。オフセットを利用することで、異なるタイムコード上に記録されている関連したデータを同期させることが可能となる。
即ち、ライブ画像Ｌのタイムコードにおける「０５：０６」（５分６秒）のタイミングでオブジェクトＪが有効となる。このため、ＴＩＧメタオフセットは「＋０５：０６」（プラス５分６秒）となり、ＴＩＧメタデータＴＭの経過時間は、ライブ画像Ｌのタイムコードにおける「０５：０６」（５分６秒）のタイミングで「０」（０秒）となる。
【０１２８】
ここで、カメラＣＡＭと設定者端末２とを比較すると、設定者端末２に遅延Ｄ１が生じている。
また、設定者端末２と管理サーバ１とを比較すると、ＴＩＧメタデータＴＭについて管理サーバ１に遅延Ｄ２が生じている。つまり、カメラＣＡＭから管理サーバ１に至るまでの間に遅延Ｄ１及びＤ２が生じている。
また、管理サーバ１と視聴者端末３とを比較すると、視聴者端末３に遅延Ｄ３が生じている。つまり、カメラＣＡＭから設定者端末２及び管理サーバ１を経て視聴者端末３に至るまでの間に遅延Ｄ１乃至Ｄ３が生じている。
【０１２９】
次に、カメラＣＡＭと外部サーバ４とを比較すると、視聴者端末３に遅延Ｄ４が生じている。
また、外部サーバ４と視聴者端末３とを比較すると、視聴者端末３に遅延Ｄ５が生じている。つまり、カメラＣＡＭから外部サーバ４を経て視聴者端末３に至るまでの間に遅延Ｄ４及びＤ５が生じている。
【０１３０】
ここで、カメラＣＡＭから視聴者端末３までの間に生じる遅延の合計時間について、映像フレームとＴＩＧメタデータＴＭとを比較する。すると、図１４Ｂに示す例では、ＴＩＧメタデータＴＭの遅延の合計時間（遅延Ｄ１乃至Ｄ３）よりも映像フレームの遅延の合計時間（遅延Ｄ４及びＤ５）の方が長い。このため、視聴者端末３は、ＴＩＧメタオフセットを利用してＴＩＧメタデータＴＭを敢えて遅延させた状態で表示させる。
具体的には、ＴＩＧメタオフセットが「＋０５：０６」（プラス５分６秒）であるＴＩＧメタデータＴＭを、タイムコードが「０５：０６」（５分６秒）である映像フレームに合わせるように遅延させる。これにより、映像フレームとＴＩＧメタデータＴＭとの同期をとることができる。
【０１３１】
なお、図１４Ｂに示す例の他、ＴＩＧメタデータＴＭの遅延の合計時間（遅延Ｄ１乃至Ｄ３）よりも映像フレームの遅延の合計時間（遅延Ｄ４及びＤ５）の方が短くなる場合もある。このような場合には、ライブ画像Ｌの表示を遅延させる。これにより、映像フレームとＴＩＧメタデータＴＭとの同期をとることができる。
【０１３２】
さらに、視聴者Ｗは、オブジェクトＪが既に有効となっているライブ画像Ｌの途中から視聴を開始する場合がある。このような場合、例えば図１４Ｂに示すように、ＴＩＧメタデータＴＭの遅延の合計時間（遅延Ｄ１乃至Ｄ３´）よりも映像フレームの遅延の合計時間（遅延Ｄ４及びＤ５´）の方が長ければ、視聴者端末３はＴＩＧメタオフセットを利用してＴＩＧメタデータＴＭを遅延させて表示させる。
具体的には、ＴＩＧメタオフセットが「＋０５：０６」（プラス５分６秒）であるＴＩＧメタデータＴＭを、タイムコードが「０５：０９」（５分９秒）である映像フレームに経過時間（３秒）を合わせるように遅延させる。これにより、映像フレームとＴＩＧメタデータＴＭとの同期をとることができる。
【０１３３】
次に、ライブ画像ＬにＴＩＧメタデータＴＭを直接埋め込んだ場合のデータの流れと遅延とについて説明する。
図１４Ａに戻り、設定者端末２は、ライブ画像Ｌのメタデータとして、ライブ画像ＬにＴＩＧメタデータＴＭを直接埋め込んだ状態で外部サーバ４に送信する。すると、外部サーバ４は、ＴＩＧメタデータＴＭが埋め込まれたライブ画像Ｌを視聴者端末３に配信する。
【０１３４】
この場合、カメラＣＡＭと設定者端末２とを比較すると、ライブ画像ＬにＴＩＧメタデータＴＭを直接埋め込まない場合と同様に、設定者端末２に遅延Ｄ１が生じている。
また、設定者端末２と外部サーバ４とを比較すると、外部サーバ４に遅延Ｄ６が生じている。
また、外部サーバ４と視聴者端末３とを比較すると、視聴者端末３に遅延Ｄ７が生じている。つまり、カメラＣＡＭから設定者端末２及び外部サーバ４を経て視聴者端末３に至るまでの間に遅延Ｄ１，Ｄ６，Ｄ７が生じている。
【０１３５】
図１４Ｃは、図１４Ｂとは異なる手法として、ライブ画像にＴＩＧメタデータを直接埋め込むことで同期をとる例を示す図である。
図１４Ｃに示すように、ライブ画像ＬにＴＩＧメタデータＴＭを埋め込んだ場合、映像フレームとＴＩＧメタデータＴＭがセットになっているため、映像フレームとＴＩＧメタデータＴＭとの同期がとれている。
即ち、視聴者端末３は、ＴＩＧメタデータＴＭが埋め込まれたライブ画像Ｌを受信すると、ライブ画像Ｌをデコードする際、ライブ画像ＬのメタデータからＴＩＧメタデータＴＭを取り出し、ライブ画像Ｌを表示する際に同期をとる。
また、上述したように、視聴者Ｗは、オブジェクトＪが既に有効となっているライブ画像Ｌの途中から視聴を開始する場合がある。このような場合で宛ても、映像フレームとＴＩＧメタデータＴＭがセットになっているため、視聴を開始したタイミングから映像フレームとＴＩＧメタデータＴＭとの同期をとることができる。
また、図示はしないが、視聴者ＷによるオブジェクトＪを選択する操作に応じて、管理サーバ１から視聴者端末３に対して紐付情報が送信される。
また、図示はしないが、必要に応じて管理用、あるいはアーカイブでの再利用等を目的としたＴＩＧメタデータＴＭを、設定者端末２から管理サーバ１に別途送信してもよい。
【０１３６】
以上、本発明の一実施形態について説明したが、本発明は、上述の実施形態に限定されるものではなく、本発明の目的を達成できる範囲での変形、改良等は本発明に含まれるものである。
【０１３７】
例えば、上述の実施形態において、オブジェクトＪとして特定されているものは例示に過ぎない。
即ち、ライブ画像ＬにはオブジェクトＪに該当し得る候補は無数に含まれている。このため、上述したように、可能な限り多くのオブジェクトＪに紐付情報を予め紐付けておくことで、視聴者Ｗの利便性をより向上させることができる。
【０１３８】
また、上述の実施形態では、視聴者Ｗによる指定がなされると、オブジェクトＪの紐付情報がストック情報として「ＴＩＧストック」に保存される構成となっているが、これは例示に過ぎない。視聴者Ｗによる指定がなされたオブジェクトＪの紐付情報は、ストック情報として保存されない構成とすることもできる。
【０１３９】
また例えば、図２には設定者Ｃが１人のみ描画されているが、これは例示に過ぎず、設定者Ｃは複数人存在してもよい。この場合、同一のライブ画像Ｌについて、複数人の設定者Ｃが同時に各種設定作業を行ってもよい。これにより、複数人の設定者Ｃによる並列作業が実現できるので、設定作業を効率化させることができる。
【０１４０】
また、図８Ａに示す例では、オブジェクトＪとして野球選手を例に挙げて説明しているが、これに限定されず、例えば野球場の看板等の広告をオブジェクトＪとして自動認識して、ＴＩＧエリアＡを自動設定してもよい。
【０１４１】
また例えば、オブジェクトＪを指定できる領域の形状は、四角形に限定されず、自由矩形とすることもできる。
【０１４２】
また例えば、図１、図７Ａ、図７Ｂ、図８Ａ及び図８Ｂに示すライブ画像Ｌは例示に過ぎず、他の構成としてもよい。
【０１４３】
また、本発明によれば、上述のサービスや効果に加え、以下のようなサービスや効果を実現させることもできる。
即ち、視聴者Ｗは、ライブ画像Ｌに出演している人物（例えば図１の現地リポーター）が身に着けている衣服や装飾品について、視聴者端末３を操作しながらその場で情報を得たり購入したりすることができる。
また、視聴者Ｗは、ライブ画像Ｌに表示されたテロップ（例えば図１のオブジェクトＪ２により示されるテロップ）を指定する操作を行うだけで、テロップにより示される出演者（例えば図１の現地リポーター）や選手等の詳細情報を得ることができる。
また、視聴者Ｗは、ライブ画像Ｌを撮像しているカメラ（図示せず）のアングルに則した詳細な情報を取得することができる。
また、例えばライブ画像Ｌがスポーツの生中継である場合には、視聴者Ｗは、ライブ画像Ｌに表示されているオブジェクトＪを指定する操作を行うだけで、技やルール等の補足情報をタイムリーに取得することができる。
また、視聴者Ｗは、いわゆる「投げ銭」を、ライブ画像Ｌ内の領域を分けて行うこともできる。つまり、視聴者Ｗは、ライブ画像Ｌのうち、どこ（又は誰）であるかを区別しながら「投げ銭」を行うことができる。
また、ライブ画像Ｌを撮像するカメラの切り替えを行う外部装置（図示せず）に対して、ＴＩＧエリアＡ側から所定信号（以下、「表示トリガ」と呼ぶ）を送信できるようにすることもできる。これにより、オブジェクトＪとＴＩＧエリアＡとを容易に同期させることができる。また、ライブ画像Ｌの各シーンとオブジェクトＪとを容易に同期させることもできる。
また、ライブ画像Ｌにテロップ（オブジェクトＪ）を表示させる外部装置（図示せず）から送信されてきた表示トリガに基づいて、テロップ（オブジェクトＪ）とＴＩＧエリアＡとを容易に同期させることができる。また、ライブ画像Ｌの各シーンとオブジェクトＪとを容易に同期させることもできる。
また、設定者Ｃは、ライブ画像Ｌに触れる（タップする）ことで、ライブ画像Ｌのどこ（誰）が人気があるかについて、リアルタイムで集計し、その後のカメラワークやイベント進行に反映させることができる。
また、ライブ画像Ｌが表示されている最中であれば、ＣＭ（コマーシャル）にＴＩＧエリアＡを設定することができる。なお、ＣＭ（コマーシャル）は表示される時間や内容が予め決まっているので、ＴＩＧエリアＡの位置、及びＴＩＧエリアＡが有効になる時間帯を事前設定することができる。
また、収録現場で行われるような、生放送のＣＭ（コマーシャル）にも本サービスを適用することができる。
また、ＴＩＧエリアＡはライブ画像Ｌ全体であってもよい。これにより、例えばコンサートのライブ画像Ｌで、楽曲の演奏中にライブ画像Ｌのどの位置をタップしても当該楽曲のオブジェクト情報を取得できるようにすることができる。
また、視聴者ＷによるＴＩＧエリアＡに対するタップ操作がどの程度行われたのかについて、設定者Ｃやライブ画像Ｌを提供する者にフィードバックすることもできる。
また、設定者Ｃより、ＴＩＧエリアＡを設定する度合いも変わることが予想されるので、高度なスキルを有する専門職としての設定者Ｃが増加することが期待できる。
また、従来のスポンサーは、ＣＭ（コマーシャル）を広告媒体としていたが、ライブ画像Ｌを広告媒体とするスポンサーが増加することが期待できる。
また、ビジネス展示会等のライブ画像Ｌにも本サービスを提供することができる。
また、ニュースや報道番組等のライブ画像Ｌにも本サービスを適用することができる。これにより、視聴者Ｗに対する補足情報や、難解な情報をわかり易く解説した情報を、オブジェクト情報とすることができる。
また、視聴者Ｗが、設定者Ｃとしてライブ映像にＴＩＧエリアＡを設定できるようにすることもできる。即ち、視聴者Ｗが上述の設定アプリを利用できるようにすることもできる。
さらに、視聴者Ｗが、ＴＩＧエリアＡが設定されたライブ画像Ｌを、自ら配信できるようにすることもできる。
また、「ＴＩＧストック」に一定数のオブジェクトＪ（ストック情報）を蓄積させることで、所定のイベントが発生するようにすることができる。
また、１つのオブジェクトＪに対応するＴＩＧエリアＡがタップされた場合、複数のリンク先（ジャンプ先）を選択できるようにすることができる。
また、ＴＩＧエリアＡ以外の領域がタップされると、アニメーションが自動再生されるようにすることができる。これにより、視覚的な表現を用いることで、視聴者Ｗの利便性を高めることができる。
また、「ＴＩＧストック」は、カスタマイズすることもできる。また、オブジェクトＪの指定のための操作の具体的態様に応じて、その効果に変化を持たせることができる。具体的には例えば、操作角度、タップする時間、ダブルタップ等により、効果に変化を持たせることができる。より具体的には例えばオブジェクトＪに第１紐付情報と第２紐付情報とが対応付けられている場合、深く押下操作がなされると第１紐付情報が保存される一方、２回触る（ダブルタップ）と第２紐付情報が保存されるようにすることができる。
また、視聴者Ｗの目の動きによって、オブジェクトＪをストックできるようにすることもできる。
【０１４４】
また、図９乃至図１１の例では、リーダＲによりタグＤが読込まれると、タグＤを付した対象（例えば衣類）がオブジェクトＪとして認識されて、ライブ画像Ｌに表示されるが、これに特に限定されない。リーダＲを用いてタグが読込まれることなく、例えばカメラＣＡＭが画像処理によってタグＤを認識してもよい。また例えば、カメラＣＡＭの画像処理によって対象（例えば衣類）そのものが認識されて、オブジェクトＪとしてライブ画像Ｌに表示されるようにしてもよい。
【０１４５】
また、図２に示すシステム構成や、図３に示す管理サーバ１のハードウェア構成は、本発明の目的を達成するための例示に過ぎず、特に限定されない。
【０１４６】
また、図４に示す機能ブロック図は、例示に過ぎず、特に限定されない。即ち、上述した一連の処理を全体として実行できる機能が情報処理システムに備えられていれば足り、この機能を実現するためにどのような機能ブロックを用いるのかは、特に図４の例に限定されない。
【０１４７】
また、機能ブロックの存在場所も、図４に限定されず、任意でよい。
例えば、図４の例で、紐付情報提供処理や紐付情報設定支援処理の実行に必要となる機能ブロックは、管理サーバ１側が備える構成となっているが、これは例示に過ぎない。例えば専用のアプリを設定者端末２や視聴者端末３にインストールさせることにより、これらの機能ブロックの少なくとも一部を、設定者端末２や視聴者端末３側が備える構成としてもよい。
また、１つの機能ブロックは、ハードウェア単体で構成してもよいし、ソフトウェア単体で構成してもよいし、それらの組み合わせで構成してもよい。
【０１４８】
各機能ブロックの処理をソフトウェアにより実行させる場合には、そのソフトウェアを構成するプログラムが、コンピュータ等にネットワークや記録媒体からインストールされる。
コンピュータは、専用のハードウェアに組み込まれているコンピュータであってもよい。また、コンピュータは、各種のプログラムをインストールすることで、各種の機能を実行することが可能なコンピュータ、例えばサーバの他汎用のスマートフォンやパーソナルコンピュータであってもよい。
【０１４９】
このようなプログラムを含む記録媒体は、各ユーザにプログラムを提供するために装置本体とは別に配布される、リムーバブルメディアにより構成されるだけではなく、装置本体に予め組み込まれた状態で各ユーザに提供される記録媒体等で構成される。
【０１５０】
なお、本明細書において、記録媒体に記録されるプログラムを記述するステップは、その順序に添って時系列的に行われる処理はもちろん、必ずしも時系列的に処理されなくとも、並列的或いは個別に実行される処理をも含むものである。
【０１５１】
また、本明細書において、システムの用語は、複数の装置や複数の手段等より構成される全体的な装置を意味するものである。
【０１５２】
以上まとめると、本発明が適用される情報処理システムは、次のような構成を取れば足り、各種各様な実施形態を取ることができる。
即ち、本発明が適用される情報処理システムは、
表示されているライブ画像（例えば図１のライブ画像Ｌ）の中で第１ユーザ（例えば図２の視聴者Ｗ）により指定がなされる、所定時間帯（例えば図１の現地リポーターがライブ画像に登場している時間帯）の所定領域（例えば図１のＴＩＧエリアＡ１）に存在するオブジェクト（例えば図１の現地リポーター（人物）を示すオブジェクトＪ１）に対し、当該第１ユーザに所定情報（例えばオブジェクト情報）を提供するための情報を、当該指定がなされる前の所定タイミング（例えばライブ画像が設定者端末２に表示される以前のタイミング）で紐付けて、当該情報を紐付情報として管理する管理手段（例えば図４の紐付情報管理部１２１）と、
前記ライブ画像を前記第１ユーザに提示する制御を実行する提示制御手段（例えば図４の提示制御部１２２）と、
前記ライブ画像が提示されている（例えば図２等の視聴者端末３に表示されている）前記第１ユーザによる前記所定領域に対する所定操作（例えばタップ操作）がなされた場合、当該所定領域に存在する前記オブジェクトの前記指定がなされたと認識して、当該指定を受付ける第１受付手段（例えば図４の指定受付部１２３）と、
前記指定が受付けられた前記オブジェクトに紐付けられて管理されている前記紐付情報を取得する取得手段（例えば図４の取得部１２４）と、
前記取得手段により取得された前記紐付情報に基づいて、前記所定情報を前記第１ユーザに提供する（例えば図２等の視聴者端末３に表示させる）制御を実行する提供制御手段（例えば図４の提供制御部１２５）と、
を備える。
【０１５３】
これにより、管理手段がオブジェクトに紐付情報を紐付けて管理し、提示制御手段がライブ画像を視聴者に提示する。そして、第１受付手段が視聴者によるオブジェクトの指定を受付けて、取得手段がそのオブジェクトに紐付けられている紐付情報を取得し、提示制御手段がその紐付情報に基づく所定情報を視聴者に提供する。
その結果、視聴者は、ライブ画像の視聴中、又はライブ画像を視聴した後のタイミングで、当該ライブ画像に含まれるオブジェクトに関する所定情報を容易に取得することができる。
具体的には例えば、上述の実施形態における視聴者Ｗは、ライブ画像Ｌの視聴中、又はライブ画像Ｌを視聴した後のタイミングで、ライブ画像Ｌに含まれるオブジェクトＪに関するオブジェクト情報を容易に取得することができる。
【０１５４】
また、前記所定タイミング以前（例えばオブジェクトＪに紐付情報が紐付けられる以前）に前記オブジェクトを設定する（例えばアイテム登録を行う）第１設定を行う第１設定手段（例えば図４のオブジェクト設定部１１１）と、
前記ライブ画像として表示される表示領域のうち少なくとも一部の領域を、前記オブジェクトの前記指定のための前記所定操作がなされる前記所定領域として設定する第２設定を行う第２設定手段（例えば図４の位置設定部１１２）と、
をさらに備えることができる。
【０１５５】
これにより、第１設定手段がオブジェクトに紐付情報が紐付けられる以前にオブジェクトを設定することができる。
【０１５６】
また、前記第１設定手段は、前記ライブ画像が表示される前に、前記第１設定を行い、
前記第２設定手段は、前記ライブ画像が表示される前に、前記第２設定を行うことができる。
【０１５７】
これにより、第１設定手段が、ライブ画像が表示される前にオブジェクトの設定を行い、第２設定手段が、ライブ画像が表示される前にオブジェクトの指定のための所定操作がなされる所定領域の位置を設定する。
その結果、設定者は、ライブ画像の中の所定領域の位置を予め設定してから、視聴者にライブ画像を提示することができる。
具体的には例えば、上述の実施形態における設定者Ｃは、ライブ画像Ｌの中のＴＩＧエリアＡの位置を予め設定してから、視聴者Ｗにライブ画像Ｌを提示することができる。
【０１５８】
また、前記ライブ画像が表示されている最中に前記所定領域が有効になる前記所定時間帯を設定する第３設定を行う第３設定手段（例えば図４の時間帯設定部１１３）をさらに備えることができる。
【０１５９】
これにより、第３設定手段が、ライブ画像が表示されている最中に所定領域が有効になる所定時間帯を設定する。
その結果、設定者は、ライブ画像の中で所定領域が有効になる時間帯を設定することができる。
具体的には例えば、上述の実施形態における設定者Ｃは、ライブ画像Ｌの中でＴＩＧエリアＡが有効になる時間帯を設定することができる。
【０１６０】
また、前記第３設定手段は、前記ライブ画像が表示されるよりも前の時点で前記第３設定を行うことができる。
【０１６１】
これにより、第３設定手段が、ライブ画像が表示されるよりも前の時点で、ライブ画像が表示されている最中に所定領域が有効になる所定時間帯を設定する。
その結果、設定者は、ライブ画像の中で所定領域が有効になる時間帯を予め設定してから、視聴者にライブ画像を提示することができる。
具体的には例えば、上述の実施形態における設定者Ｃは、ライブ画像Ｌの中でＴＩＧエリアＡが有効になる時間帯を予め設定してから、視聴者Ｗにライブ画像Ｌを提示することができる。
【０１６２】
また、前記第２設定手段は、前記ライブ画像が表示されている最中に、前記第２設定を行い、
前記第３設定手段は、前記ライブ画像が表示されている最中に、前記第３設定を行うことができる。
【０１６３】
これにより、第２設定手段が、ライブ画像が表示される前にオブジェクトの指定のための所定操作がなされる所定領域の位置を設定し、第３設定手段が、ライブ画像が表示されている最中に所定領域が有効になる所定時間帯を設定する。
その結果、設定者は、ライブ画像の中の所定領域が有効になる時間帯を予め設定することなく、所定領域が有効になる時間帯を設定することができる。
具体的には例えば、上述の実施形態における設定者Ｃは、ライブ画像Ｌの中のＴＩＧエリアＡが有効になる時間帯を予め設定することなく、ＴＩＧエリアＡが有効になる時間帯を設定することができる。
【０１６４】
また、前記第２設定手段は、前記ライブ画像が表示されている最中に、第２ユーザによる指定に基づいて、前記第２設定を行い、
前記第３設定手段は、前記ライブ画像が表示されている最中に、前記第２ユーザによる指定に基づいて、前記第３設定を行うことができる。
【０１６５】
これにより、第２設定手段が、ライブ画像が表示される前に、設定者による指定に基づいて、オブジェクトの指定のための所定操作がなされる所定領域の位置を設定する。また、第３設定手段が、ライブ画像が表示されている最中に、設定者による指定に基づいて、所定領域が有効になる所定時間帯を設定する。
その結果、設定者は、ライブ画像の中の所定領域が有効になる時間帯を予め設定することなく、ライブ画像を確認しながら、自ら所定領域が有効になる時間帯を設定することができる。
具体的には例えば、上述の実施形態における設定者Ｃは、ライブ画像Ｌの中のＴＩＧエリアＡが有効になる時間帯を予め設定することなく、ライブ画像Ｌを確認しながら、自らＴＩＧエリアＡが有効になる時間帯を設定することができる。
【０１６６】
また、前記ライブ画像が表示されている最中に、前記所定時間帯の前記所定領域に存在する前記オブジェクトを認識する認識手段（例えば図４の認識部１１４）をさらに備えることができる。
この場合、前記第２設定手段は、前記認識手段により認識された前記オブジェクトについて、前記第２設定を行い、
前記第３設定手段は、前記認識手段により認識された前記オブジェクトについて、前記第３設定を行うことができる。
【０１６７】
これにより、認識手段が、ライブ画像が表示されている最中に、所定時間帯の所定領域に存在するオブジェクトを認識する。
その結果、設定者は、ライブ画像を自ら確認することなく、オブジェクトを自動認識させて、所定領域の位置の設定を行うことができる。
具体的には例えば、上述の実施形態における設定者Ｃは、ライブ画像Ｌを自ら確認することなく、オブジェクトＪを自動認識させて、ＴＩＧエリアＡの位置の設定を行うことができる。
【０１６８】
また、前記第１設定手段は、前記認識手段により前記オブジェクトが認識された場合に、当該オブジェクトを設定することができる。
【０１６９】
これにより、第１設定手段が、認識手段によりオブジェクトが認識された場合に、そのオブジェクトを設定する。
その結果、設定者は、ライブ画像に存在するすべてのオブジェクトを自動認識させて、オブジェクトに対する紐付情報の紐付けをすべて自動で行わせることができる。
具体的には例えば、上述の実施形態における設定者Ｃは、ライブ画像Ｌに存在するすべてのオブジェクトＪを自動認識させて、オブジェクトＪに対する紐付情報の紐付けをすべて自動で行わせることができる。
【符号の説明】
【０１７０】
１：管理サーバ、２：設定者端末、３：視聴者端末、４：外部サーバ、１１：ＣＰＵ、１２：ＲＯＭ、１３：ＲＡＭ、１４：バス、１５：入出力インターフェース、１６：入力部、１７：出力部、１８：記憶部、１９：通信部、２０：ドライブ、３０：リムーバブルメディア、１０１：設定部、１１１：登録部、１１２：位置設定部、１１３：時間帯設定部、１１４：認識部、１２１：紐付情報管理部、１２２：提示制御部、１２３：指定受付部、１２４：取得部、１２５：提供部、１２６：ストック管理部、１８１：オブジェクトＤＢ、Ｃ：設定者、Ｗ：視聴者、Ｌ：ライブ画像、Ｊ：オブジェクト、Ａ：ＴＩＧエリア、Ｂ：ボタン、Ｍ：タイムカウンタ、Ｈ：オブジェクト一覧、Ｆ：表示領域、Ｋ：紐付情報、Ｑ：オブジェクト情報、Ｔ：ブロック、Ｎ：ネットワーク、Ｄ：タグ、ＤＳＰ：ディスプレイ、ＣＡＭ：カメラ、Ｒ：タグ、Ｖ：小型飛行体
【図１】
2020246237.tif 000003
【図２】
2020246237.tif 000004
【図３】
2020246237.tif 000005
【図４】
2020246237.tif 000006
【図５】
2020246237.tif 000007
【図６Ａ】
2020246237.tif 000008
【図６Ｂ】
2020246237.tif 000009
【図７Ａ】
2020246237.tif 000010
【図７Ｂ】
2020246237.tif 000011
【図８Ａ】
2020246237.tif 000012
【図８Ｂ】
2020246237.tif 000013
【図９】
2020246237.tif 000014
【図１０】
2020246237.tif 000015
【図１１】
2020246237.tif 000016
【図１２】
2020246237.tif 000017
【図１３Ａ】
2020246237.tif 000018
【図１３Ｂ】
2020246237.tif 000019
【図１３Ｃ】
2020246237.tif 000020
【図１３Ｄ】
2020246237.tif 000021
【図１４Ａ】
2020246237.tif 000022
【図１４Ｂ】
2020246237.tif 000023
【図１４Ｃ】
2020246237.tif 000024
【手続補正書】
【提出日】令和3年2月9日(2021.2.9)
【手続補正１】
【補正対象書類名】特許請求の範囲
【補正対象項目名】全文
【補正方法】変更
【補正の内容】
【特許請求の範囲】
【請求項１】
ライブ画像の中で第１ユーザにより指定がなされ得るオブジェクトを、当該指定がなされる前の所定タイミングで設定する第１設定手段と、
前記第１ユーザに対してライブ画像が提示されている最中に、前記第１設定手段により設定された前記オブジェクトの少なくとも一部が表示されている領域を、当該オブジェクトに対して前記第１ユーザにより前記指定がなされ得る所定領域として設定する２設定手段と、
前記第１設定手段により設定された前記オブジェクトに対し、前記第１ユーザに所定情報を提供するための情報を紐付けて、当該情報を紐付情報として管理する管理手段と、
前記ライブ画像を前記第１ユーザに提示する制御を実行する提示制御手段と、
前記ライブ画像が提示されている前記第１ユーザにより前記所定領域に対する所定操作がなされた場合、前記オブジェクトの前記指定がなされたと認識して、当該指定を受付ける第１受付手段と、
前記指定が受付けられた前記オブジェクトに紐付けられて管理されている前記紐付情報を取得する取得手段と、
前記取得手段により取得された前記紐付情報に基づいて、前記所定情報を前記第１ユーザに提供する制御を実行する提供制御手段と、
を備える情報処理システム。
【請求項２】
前記ライブ画像が表示されている最中に前記所定領域が有効になる前記所定時間帯を設定する第３設定を行う第３設定手段をさらに備える、
請求項１に記載の情報処理システム。
【請求項３】
前記第２設定手段は、前記ライブ画像が表示されている最中に、第２ユーザによる指定に基づいて、前記第２設定を行い、
前記第３設定手段は、前記ライブ画像が表示されている最中に、前記第２ユーザによる指定に基づいて、前記第３設定を行う、
請求項２に記載の情報処理システム。
【請求項４】
前記ライブ画像が表示されている最中に、所定時間帯の前記所定領域に存在する前記オブジェクトを認識する認識手段をさらに備え、
前記第２設定手段は、前記認識手段により認識された前記オブジェクトについて、前記第２設定を行い、
前記第３設定手段は、前記認識手段により認識された前記オブジェクトについて、前記第３設定を行う、
請求項２に記載の情報処理システム。
【請求項５】
前記第１設定手段は、前記認識手段により前記オブジェクトが認識された場合に、当該オブジェクトを設定する、
請求項４に記載の情報処理システム。
【手続補正書】
【提出日】令和3年6月14日(2021.6.14)
【手続補正１】
【補正対象書類名】特許請求の範囲
【補正対象項目名】全文
【補正方法】変更
【補正の内容】
【特許請求の範囲】
【請求項１】
物品に、当該物品に関する物品情報が付されている場合において、当該物品情報を取得する物品情報取得手段と、
ライブ画像に含まれるオブジェクトのうち、前記ライブ画像が提供されたユーザにより指定がなされると前記物品に関する所定情報が前記ユーザに提供される機能を有するように指定するための情報を、指定情報として第１表示デバイスを介して操作者に提示する制御を、前記物品情報が取得されたことをトリガとして実行する第１提示制御手段と、
前記指定情報を用いて前記操作者により指定されたオブジェクトを対象オブジェクトとして、前記対象オブジェクトに対し、前記所定情報を前記ユーザに提供するための情報を紐付けて、当該情報を紐付情報として管理する管理手段と、
前記ライブ画像を第２表示デバイスを介して前記ユーザに提示する制御を実行する第２提示制御手段と、
前記ライブ画像が提示されている前記ユーザにより前記対象オブジェクトを指定するための所定操作を受付ける受付手段と、
前記所定操作が受付けられた前記対象オブジェクトに紐付けられて管理されている前記紐付情報を取得する取得手段と、
前記取得手段により取得された前記紐付情報に基づいて、前記物品に関する前記所定情報を前記第２表示デバイスを介して前記ユーザに提供する制御を実行する提供制御手段と、
を備える情報処理システム。
【国際調査報告】
2020246237.tif 000025
2020246237.tif 000026
2020246237.tif 000027
2020246237.tif 000028
2020246237.tif 000029
2020246237.tif 000030