(57)【要約】【課題】直感的な操作を用いて各拠点を横断的に見て回ることが可能な技術を提供することを目的とする。【解決手段】第１の映像の第１の対象範囲を第１の表示領域に表示させるとともに、映像群のうち前記第１の対象範囲に対応する第２の対象範囲を第２の表示領域に表示させる制御部を備え、前記制御部は、利用者から入力された操作に基づいて、前記第１の対象範囲および前記第２の対象範囲それぞれを制御する、情報処理装置が提供される。【選択図】図１
2020195021.tif 000002
【特許請求の範囲】
【請求項１】
第１の映像の第１の対象範囲を第１の表示領域に表示させるとともに、映像群のうち前記第１の対象範囲に対応する第２の対象範囲を第２の表示領域に表示させる制御部を備え、
前記制御部は、利用者から入力された操作に基づいて、前記第１の対象範囲および前記第２の対象範囲それぞれを制御する、
情報処理装置。
【請求項２】
前記制御部は、第１の操作が入力された場合、前記第１の操作に基づく前記第１の対象範囲を前記第１の映像内に制限し、前記第１の操作とは異なる第２の操作が入力された場合、前記第２の操作に基づく前記第１の対象範囲を前記第１の映像外に許容し、
前記第１の対象範囲に対応するように前記第２の対象範囲を前記映像群において移動させる、
請求項１に記載の情報処理装置。
【請求項３】
前記制御部は、前記第１の操作に基づいて、前記第１の対象範囲を前記第１の映像内で移動させ、前記第１の対象範囲に前記第１の映像の一端を超える超過領域が存在する場合、前記超過領域に前記第１の映像の前記一端とは反対側の領域を設定する、
請求項２に記載の情報処理装置。
【請求項４】
前記制御部は、前記第２の操作に基づいて、前記第１の対象範囲を前記第１の映像内で移動させ、前記第１の対象範囲に前記第１の映像の一端を超えた超過領域が存在する場合、前記超過領域に前記第１の映像とは異なる第２の映像の領域を設定する、
請求項２または３に記載の情報処理装置。
【請求項５】
前記制御部は、前記超過領域に静止画の領域を一時的に設定し、前記第２の映像が受信された場合、前記静止画の領域を前記第２の映像の領域で置換する、
請求項４に記載の情報処理装置。
【請求項６】
前記制御部は、前記静止画の領域に対する前記第２の映像の領域のブレンド比率を徐々に高くすることによって、前記静止画の領域を前記第２の映像の領域で徐々に置換する、
請求項５に記載の情報処理装置。
【請求項７】
前記制御部は、前記情報処理装置または前記情報処理装置とは異なる映像配信サーバによって保持された前記静止画を取得する、
請求項５または６に記載の情報処理装置。
【請求項８】
前記制御部は、所定の時間ごとに生成された前記静止画を取得する、
請求項７に記載の情報処理装置。
【請求項９】
前記第１の映像と前記第２の映像とは、互いに異なる拠点を撮影した映像である、
請求項４に記載の情報処理装置。
【請求項１０】
前記映像群は、前記第１の映像の撮影拠点と同一拠点を撮影した第３の映像、および、前記第２の映像の撮影拠点と同一拠点を撮影した第４の映像を含む、
請求項４に記載の情報処理装置。
【請求項１１】
前記第３の映像のデータサイズは、前記第１の映像のデータサイズよりも小さく、
あるいは、前記第３の映像のフレーム数は、前記第１の映像のフレーム数よりも少ない、
のいずれかもしくは両方、
前記第４の映像のデータサイズは、前記第２の映像のデータサイズよりも小さく、
あるいは、前記第４の映像のフレーム数は、前記第２の映像のフレーム数よりも少ない、
のいずれかもしくは両方、の
請求項１０に記載の情報処理装置。
【請求項１２】
前記操作の速度、位置および圧力の少なくともいずれか一つに基づいて、前記第１の操作および前記第２の操作のいずれが前記利用者によって入力されたかが判断される、
請求項２〜１１のいずれか一項に記載の情報処理装置。
【請求項１３】
前記情報処理装置は、
通信部によって受信された符号化された映像データを復号して前記第１の映像を得る第１復号化部を備える、
請求項１〜１２のいずれか一項に記載の情報処理装置。
【請求項１４】
第１の映像の第１の対象範囲を第１の表示領域に表示させるとともに、映像群のうち前記第１の対象範囲に対応する第２の対象範囲を第２の表示領域に表示させることを含み、
利用者から入力された操作に基づいて、前記第１の対象範囲および前記第２の対象範囲それぞれを制御することを含む、
情報処理方法。
【請求項１５】
コンピュータを、
第１の映像の第１の対象範囲を第１の表示領域に表示させるとともに、映像群のうち前記第１の対象範囲に対応する第２の対象範囲を第２の表示領域に表示させる制御部を備え、
前記制御部は、利用者から入力された操作に基づいて、前記第１の対象範囲および前記第２の対象範囲それぞれを制御する、
情報処理装置として機能させるためのプログラム。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、情報処理装置、情報処理方法およびプログラムに関する。
【背景技術】
【０００２】
近年、テレワークを働きかた改革として推進している企業が増加し、ＴＶ会議システムを用いて遠隔地のオフィス同士を結び、各拠点メンバー間でのコミュニケーションを重要視する動きが加速している。しかし、従来のＴＶ会議システムは会議室に設置され、オフィス空間におけるコミュニケーションを目的とした対話に十分なシステムとは言い難い。そこで、それぞれのオフィス内にＴＶ会議システムを設置し、各オフィス内に設置されたＴＶ会議システム同士を常時接続することにより同一空間で一緒に作業を行っているかのような感覚を得るための試みがなされている。
【０００３】
ここで、従来のＴＶ会議システムを用いた場合、接続される拠点がその都度限定されてしまうという状況が起こり得る。かかる状況を改善するために、すべての拠点の映像を同時配信してすべての拠点を相互接続させる方式が考えられる。複数の拠点の映像を効率的に閲覧するＵＩ（Ｕｓｅｒ  Ｉｎｔｅｒｆａｃｅ）としては、従来の監視カメラのシステムで利用されるタイル表示ＵＩにおいて、拠点の映像を選択的に切り替えながら閲覧する技術が一般的に利用される（例えば、特許文献１参照）。
【先行技術文献】
【特許文献】
【０００４】
【特許文献１】特開平１０−２３４０３２号公報
【発明の概要】
【発明が解決しようとする課題】
【０００５】
本発明は、直感的な操作を用いて各拠点を横断的に見て回ることが可能な技術を提供することを目的とする。
【課題を解決するための手段】
【０００６】
上記問題を解決するために、本発明のある観点によれば、第１の映像の第１の対象範囲を第１の表示領域に表示させるとともに、映像群のうち前記第１の対象範囲に対応する第２の対象範囲を第２の表示領域に表示させる制御部を備え、前記制御部は、利用者から入力された操作に基づいて、前記第１の対象範囲および前記第２の対象範囲それぞれを制御する、情報処理装置が提供される。
【０００７】
前記制御部は、第１の操作が入力された場合、前記第１の操作に基づく前記第１の対象範囲を前記第１の映像内に制限し、前記第１の操作とは異なる第２の操作が入力された場合、前記第２の操作に基づく前記第１の対象範囲を前記第１の映像外に許容し、前記第１の対象範囲に対応するように前記第２の対象範囲を前記映像群において移動させてもよい。
【０００８】
前記制御部は、前記第１の操作に基づいて、前記第１の対象範囲を前記第１の映像内で移動させ、前記第１の対象範囲に前記第１の映像の一端を超える超過領域が存在する場合、前記超過領域に前記第１の映像の前記一端とは反対側の領域を設定してもよい。
【０００９】
前記制御部は、前記第２の操作に基づいて、前記第１の対象範囲を前記第１の映像内で移動させ、前記第１の対象範囲に前記第１の映像の一端を超えた超過領域が存在する場合、前記超過領域に前記第１の映像とは異なる第２の映像の領域を設定してもよい。
【００１０】
前記制御部は、前記超過領域に静止画の領域を一時的に設定し、前記第２の映像が受信された場合、前記静止画の領域を前記第２の映像の領域で置換してもよい。
【００１１】
前記制御部は、前記静止画の領域に対する前記第２の映像の領域のブレンド比率を徐々に高くすることによって、前記静止画の領域を前記第２の映像の領域で徐々に置換してもよい。
【００１２】
前記制御部は、前記情報処理装置または前記情報処理装置とは異なる映像配信サーバによって保持された前記静止画を取得してもよい。
【００１３】
前記制御部は、所定の時間ごとに生成された前記静止画を取得してもよい。
【００１４】
前記第１の映像と前記第２の映像とは、互いに異なる拠点を撮影した映像であってもよい。
【００１５】
前記映像群は、前記第１の映像の撮影拠点と同一拠点を撮影した第３の映像、および、前記第２の映像の撮影拠点と同一拠点を撮影した第４の映像を含んでもよい。
【００１６】
前記第３の映像のデータサイズは、前記第１の映像のデータサイズよりも小さく、あるいは、前記第３の映像のフレーム数は、前記第１の映像のフレーム数よりも少ない、のいずれかもしくは両方、前記第４の映像のデータサイズは、前記第２の映像のデータサイズよりも小さく、あるいは、前記第４の映像のフレーム数は、前記第２の映像のフレーム数よりも少ない、のいずれかもしくは両方であってもよい。
【００１７】
前記操作の速度、位置および圧力の少なくともいずれか一つに基づいて、前記第１の操作および前記第２の操作のいずれが前記利用者によって入力されたかが判断されてもよい。
【００１８】
前記情報処理装置は、通信部によって受信された符号化された映像データを復号して前記第１の映像を得る第１復号化部を備えてもよい。
【００１９】
また、本発明の他の観点によれば、第１の映像の第１の対象範囲を第１の表示領域に表示させるとともに、映像群のうち前記第１の対象範囲に対応する第２の対象範囲を第２の表示領域に表示させることを含み、利用者から入力された操作に基づいて、前記第１の対象範囲および前記第２の対象範囲それぞれを制御することを含む、情報処理方法が提供される。
【００２０】
また、本発明の他の観点によれば、コンピュータを、第１の映像の第１の対象範囲を第１の表示領域に表示させるとともに、映像群のうち前記第１の対象範囲に対応する第２の対象範囲を第２の表示領域に表示させる制御部を備え、前記制御部は、利用者から入力された操作に基づいて、前記第１の対象範囲および前記第２の対象範囲それぞれを制御する、情報処理装置として機能させるためのプログラムが提供される。
【発明の効果】
【００２１】
以上説明したように本発明によれば、直感的な操作を用いて各拠点を横断的に見て回ることが可能となる。
【図面の簡単な説明】
【００２２】
【図１】複数の拠点（分散した遠隔オフィス）と各拠点に配置された遠隔コミュニケーション装置の例を示す図である。
【図２】配信される映像をその都度切り替える場合について説明するための図である。
【図３】配信される映像をその都度切り替える場合のシーケンス図である。
【図４】本発明の第１の実施形態に係る遠隔コミュニケーションシステムの概略的な構成の一例を示す図である。
【図５】同実施形態に係る遠隔コミュニケーションシステムの機能構成の一例を示す図である。
【図６】端末による表示例を示す図である。
【図７】メイン領域に対してスワイプ操作が入力された場合について説明するための図である。
【図８】メイン領域に対してスワイプ操作が入力された場合について説明するための図である。
【図９】サブ領域に対してスワイプ操作が入力された場合について説明するための図である。
【図１０】サブ領域に対してスワイプ操作が入力された場合について説明するための図である。
【図１１】同実施形態に係る遠隔コミュニケーションシステムの動作例を示すシーケンス図である。
【図１２】同実施形態に係る遠隔コミュニケーションシステムの動作例を示すシーケンス図である。
【図１３】同実施形態に係る遠隔コミュニケーションシステムの動作例を示すシーケンス図である。
【図１４】本発明の第２の実施形態に係る遠隔コミュニケーションシステムの機能構成の一例を示す図である。
【図１５】同実施形態に係る遠隔コミュニケーションシステムの動作例を示すシーケンス図である。
【図１６】同実施形態に係る遠隔コミュニケーションシステムの動作例を示すシーケンス図である。
【図１７】同実施形態に係る遠隔コミュニケーションシステムの動作例を示すシーケンス図である。
【図１８】同実施形態に係る遠隔コミュニケーションシステムによる拠点切り替え操作時の表示例を示す図である。
【発明を実施するための形態】
【００２３】
以下に添付図面を参照しながら、本発明の好適な実施の形態について詳細に説明する。なお、本明細書及び図面において、実質的に同一の機能構成を有する構成要素については、同一の符号を付することにより重複説明を省略する。
【００２４】
また、本明細書及び図面において、実質的に同一または類似の機能構成を有する複数の構成要素を、同一の符号の後に異なるアルファベットを付して区別する。ただし、実質的に同一または類似の機能構成を有する複数の構成要素の各々を特に区別する必要がない場合、同一符号のみを付する。
【００２５】
（０．概要）
近年、テレワークを働きかた改革として推進している企業が増加し、ＴＶ会議システムを用いて遠隔地のオフィス同士を結び、各拠点メンバー間でのコミュニケーションを重要視する動きが加速している。しかし、従来のＴＶ会議システムは会議室に設置され、オフィス空間におけるコミュニケーションを目的とした対話に十分なシステムとは言い難い。そこで、それぞれのオフィス内にＴＶ会議システムを設置し、各オフィス内に設置されたＴＶ会議システム同士を常時接続することにより同一空間で一緒に作業を行っているかのような感覚を得るための試みがなされている。
【００２６】
図１は、複数の拠点（分散した遠隔オフィス）と各拠点に配置された遠隔コミュニケーション装置の例を示す図である。図１を参照すると、破線枠によって示されたオフィスＡ１〜Ａ４が存在している。図１に示された例では、ネットワークＮ１に接続されるオフィスの数が４か所であるが、ネットワークＮ１に接続されるオフィスの数は複数であれば特に限定されない。また、図１に示された例では、各拠点がオフィスであるが、各拠点はオフィスに限定されず、住宅などといった他の場所であってもよい。オフィスＡ１には居室Ｋ１が存在し、オフィスＡ２には居室Ｋ２が存在し、オフィスＡ３には居室Ｋ３が存在し、オフィスＡ４には居室Ｋ４が存在している。
【００２７】
オフィスＡ１は、撮影部Ｄ１１、映像配信サーバＤ１２、複数の端末Ｄ１３およびネットワーク機器Ｄ１４を有している。同様に、オフィスＡ２は、撮影部Ｄ２１、映像配信サーバＤ２２、複数の端末Ｄ２３およびネットワーク機器Ｄ２４を有しており、オフィスＡ３は、撮影部Ｄ３１、映像配信サーバＤ３２、複数の端末Ｄ３３およびネットワーク機器Ｄ３４を有しており、オフィスＡ４は、撮影部Ｄ４１、映像配信サーバＤ４２、複数の端末Ｄ４３およびネットワーク機器Ｄ４４を有している。
【００２８】
端末Ｄ１３、Ｄ２３、Ｄ３３、Ｄ４３は、居室に存在する利用者によって利用される端末であり、タブレット型の小型端末であってもよいし、ＰＣ（Ｐｅｒｓｏｎａｌ  Ｃｏｍｐｕｔｅｒ）と大型ディスプレイまたはプロジェクタとによって構成した大型端末であってもよい。また、端末Ｄ１３、Ｄ２３、Ｄ３３、Ｄ４３は、対話用のカメラ、スピーカマイクロフォンなどのデバイスを搭載あるいは外付けで備えていてもよい。なお、端末Ｄ１３、Ｄ２３、Ｄ３３、Ｄ４３それぞれの台数も、各オフィスの利用メンバー数および利用形態によって適宜変更されてよい。
【００２９】
ネットワークＮ１は、社内ネットワーク網であってもよいし、インターネットであってもよい。ネットワーク機器Ｄ１４、Ｄ２４、Ｄ３４、Ｄ４４は、ネットワークＮ１に接続されており、オフィスＡ１〜Ａ４の任意のオフィス間の通信を可能にしている。ネットワーク機器Ｄ１４、Ｄ２４、Ｄ３４、Ｄ４４は、スイッチングハブまたはルータであってもよく、特にネットワークＮ１がインターネットである場合には、ＶＰＮ（Ｖｉｒｔｕａｌ  Ｐｒｉｖａｔｅ  Ｎｅｔｗｏｒｋ）接続機能を有しているのが望ましい。
【００３０】
しかし、図１に示したような従来のＴＶ会議システムを用いた場合、接続される拠点がその都度限定されてしまうという状況が起こり得る。かかる状況を改善するために、すべての拠点の映像を同時配信してすべての拠点を相互接続させる方式が考えられる。複数の拠点の映像を効率的に閲覧するＵＩ（Ｕｓｅｒ  Ｉｎｔｅｒｆａｃｅ）としては、従来の監視カメラのシステムで利用されるタイル表示ＵＩにおいて、拠点の映像を選択的に切り替えながら閲覧する技術が一般的に利用される。
【００３１】
しかし、複数の拠点の映像を同時配信する技術では、映像の画質に比例して帯域が増加してしまう。一方、遠隔オフィスを結ぶネットワーク環境は、運用コスト削減のために帯域が制限される傾向にある。そのため、複数の拠点の映像が同時配信されるよりも、配信される映像がその都度切り替え可能であるほうが帯域およびコストの削減の観点から望ましい。そこで、本発明の実施形態では、配信される映像をその都度切り替え可能にしつつ、各オフィスの居室内を俯瞰的に捉えることができると同時に、直感的な操作を用いて各拠点を横断的に見て回ることが可能な技術について主に提案する。
【００３２】
さらに、配信される映像をその都度切り替え可能にした場合に生じ得る課題について、図２および図３を参照しながら説明する。図２は、配信される映像をその都度切り替える場合について説明するための図である。図３は、配信される映像をその都度切り替える場合のシーケンス図である。
【００３３】
図２に示されたように、居室Ｋ１の映像が対象範囲Ｆ１として端末Ｄ１３に表示されている場合を想定する。かかる場合において、利用者が拠点切り替え操作によって（例えば、対象範囲Ｆ１を左方向にスクロールさせる操作によって）居室Ｋ２の映像を対象範囲Ｆ４として端末Ｄ１３に表示させる場合を想定する。居室Ｋ１の映像は、映像配信サーバＤ１２から提供され、居室Ｋ２の映像は、映像配信サーバＤ２２から提供される。
【００３４】
図３に示されるように、オフィスＡ１においては、撮影部Ｄ１１によって居室Ｋ１の映像が撮影され、映像配信サーバＤ１２によって居室Ｋ１の映像が符号化される（Ｓ１）。また、オフィスＡ２においては、撮影部Ｄ２１によって居室Ｋ２の映像が撮影され、映像配信サーバＤ２２によって居室Ｋ２の映像が符号化される（Ｓ１）。端末Ｄ１３が、符号化された居室Ｋ１の映像を映像配信サーバＤ１２に要求すると（Ｓ２）、映像配信サーバＤ１２が端末Ｄ１３に対して符号化された居室Ｋ１の映像を提供する処理と（Ｓ３）、端末Ｄ１３が符号化された居室Ｋ１の映像を復号して表示する処理とが繰り返し実行される（Ｓ４）。
【００３５】
利用者によって拠点切り替え操作が行われると（Ｓ５）、端末Ｄ１３は、符号化された居室Ｋ１の映像の停止要求を映像配信サーバＤ１２に送信し（Ｓ６）、映像配信サーバＤ１２において映像の提供が停止される。さらに、端末Ｄ１３が、符号化された居室Ｋ２の映像を映像配信サーバＤ２２に要求すると（Ｓ７）、映像配信サーバＤ２２が端末Ｄ１３に対して符号化された居室Ｋ２の映像を提供する処理と（Ｓ８）、端末Ｄ１３が符号化された居室Ｋ２の映像を復号して表示する処理とが繰り返し実行される（Ｓ９）。ここで、居室Ｋ１の映像から居室Ｋ２の映像への切り替えが行われるまでにはタイムラグが生じる。
【００３６】
図２を参照すると、居室Ｋ１の映像から居室Ｋ２の映像に切り替わるまでの対象範囲の変化が時系列に沿って示されている。より具体的には、左から右に進むにつれて遅い時刻の対象範囲が並べられている。すなわち、対象範囲Ｆ１が表示された後、対象範囲Ｆ２が表示され、対象範囲Ｆ３が表示され、対象範囲Ｆ４が表示される。時刻ｔ１のタイミングで拠点切り替え操作が行われた場合、映像配信サーバＤ２２から端末Ｄ１３に居室Ｋ２の映像が届くまでに時間Ｒ１に示されたタイムラグが生じるため、拠点切り替えがスムーズに実行されない。本発明の実施形態では、かかるタイムラグをなくして拠点切り替えをスムーズに実行するための技術についても提案する。
【００３７】
なお、固定カメラによって撮影された固定画角の映像では、オフィスの中央から職場全体を見渡すことができないという課題が残る。これに対して、撮影部Ｄ１１、Ｄ２１、Ｄ３１、Ｄ４１を３６０度撮影可能なカメラにすることによって、撮影部Ｄ１１、Ｄ２１、Ｄ３１、Ｄ４１の設置場所を中心としてオフィス全体を見渡すことができるようになるという効果が期待される。しかし、撮影部Ｄ１１、Ｄ２１、Ｄ３１、Ｄ４１を３６０度撮影可能なカメラにした場合、撮影される映像が横長になりやすい。そのため、従来の監視カメラのシステムで利用されるタイル表示ＵＩにおいて拠点の映像を選択的に切り替える技術に加え、拠点の映像を所定の方向に（例えば、左右方向に）スクロールさせながら効率的に操作できるＵＩが提供されるのが望ましい。
【００３８】
（１．第１の実施形態）
続いて、本発明の第１の実施形態について説明する。
【００３９】
（１−１．構成の説明）
まず、本発明の第１の実施形態に係る遠隔コミュニケーションシステムの構成例について説明する。図４は、本発明の第１の実施形態に係る遠隔コミュニケーションシステムの概略的な構成の一例を示す図である。図４を参照すると、本発明の第１の実施形態に係る遠隔コミュニケーションシステムは、図１に示したシステムと比較して、管理サーバＰ１を有し、映像配信サーバＤ１２、Ｄ２２、Ｄ３２、Ｄ４２の代わりに、映像配信サーバＰ１２、Ｐ２２、Ｐ３２、Ｐ４２を有し、端末Ｄ１３、Ｄ２３、Ｄ３３、Ｄ４３の代わりに、端末Ｐ１３、Ｐ２３、Ｐ３３、Ｐ４３を有している。
【００４０】
管理サーバＰ１は、ネットワークＮ１に接続されている。図４に示された例では、管理サーバＰ１が、ネットワークＮ１を介して各拠点（映像配信サーバＰ１２、Ｐ２２、Ｐ３２、Ｐ４２）に対して接続されているが、管理サーバＰ１は、いずれかの拠点または管理専門の部門に配置されてもよく、いずれかの映像配信サーバに接続されてもよい。端末Ｐ１３、Ｐ２３、Ｐ３３、Ｐ４３は、各拠点において利用者ごとに配置されてもよく、一部または全部が複数利用者によって共同で利用されてもよい。
【００４１】
図５は、本発明の第１の実施形態に係る遠隔コミュニケーションシステムの機能構成の一例を示す図である。図５には、端末Ｐ１３、Ｐ２３、Ｐ３３、Ｐ４３を代表して、端末Ｐ１３の機能ブロックが示されているが、端末Ｐ２３、Ｐ３３、Ｐ４３の機能ブロックも、端末Ｐ１３の機能ブロックと同様に示され得る。また、図５には、映像配信サーバＰ１２、Ｐ２２、Ｐ３２、Ｐ４２を代表して、映像配信サーバＰ１２の機能ブロックが示されているが、映像配信サーバＰ２２、Ｐ３２、Ｐ４２の機能ブロックも、映像配信サーバＰ１２の機能ブロックと同様に示され得る。
【００４２】
管理サーバＰ１は、コンピュータによって構成される。管理サーバＰ１は、配信管理部１２、配信元情報記憶部１３および通信部１４を備える。通信部１４は、ネットワークＮ１に接続されている。配信管理部１２は、映像配信サーバＰ１２から配信する映像に関する情報（以下、「映像情報」とも言う。）（例えば、拠点名称、カメラ番号など）、映像配信サーバＰ１２のネットワーク情報（例えば、ＩＰアドレス、ポート番号など）を、通信部１４を介して受信し、配信元情報記憶部１３に保持させる。配信元情報記憶部１３によって保持される情報は、映像配信情報ごとに固有の値である。
【００４３】
さらに、配信管理部１２は、通信部１４を介して端末Ｐ１３から拠点の映像の要求を受けた場合、要求された映像に関する情報（映像情報）が配信元情報記憶部１３に保持されていれば、要求された映像の配信元の映像配信サーバＰ１２に対して、要求元の端末Ｐ１３へ映像を配信するように指示を出し、映像配信サーバＰ１２は、その指示に従って要求元の端末Ｐ１３へ映像を配信する。このとき、配信管理部１２は、複数の端末から同時に要求を受け付けた場合、映像配信サーバＰ１２の能力に応じて複数の端末への映像同時配信を行うよう指示してもよい。
【００４４】
端末Ｐ１３は、自身に対応する利用者によって利用される。端末Ｐ１３は、（例えば、無線ＬＡＮ（Ｌｏｃａｌ  Ａｒｅａ  Ｎｅｔｗｏｒｋ）などを介して）ネットワークＮ１に接続されている。本発明の実施形態においては、端末Ｐ１３がタブレット端末である場合を想定する。しかし、端末Ｐ１３の種類は限定されない。例えば、端末Ｐ１３は、スマートフォンであってもよいし、携帯電話であってもよいし、ＰＣ（Ｐｅｒｓｏｎａｌ  Ｃｏｍｐｕｔｅｒ）などであってもよい。なお、端末Ｐ１３は、利用者によって視認される情報の表示を制御する情報処理装置の例として機能し得る。
【００４５】
端末Ｐ１３は、通信部２１、第１復号化部２２、第１表示部２３、第２復号化部２４、第２表示部２５、制御部２６、操作部２７および操作判定部２８を備える。その他、図５には示されていないが、端末Ｐ１３は、必要に応じて、対話用のカメラ、スピーカマイクロフォンなどのデバイスを搭載あるいは外付けで備え、対話用の映像や音声に対する符号化および復号化部を備えていてもよい。通信部２１は、通信インタフェースによって構成され、ネットワークＮ１を介したデータおよび要求の送受信を行う。
【００４６】
第１復号化部２２は、通信部２１によって受信された符号された映像データを復号する。第１表示部２３は、第１復号化部２２による復号によって得られた映像データに基づいて映像を第１の表示領域（以下、「メイン領域」とも言う。）に表示する。ここでは、第１表示部２３がタッチパネルに積層されたディスプレイによって構成される場合を想定するが、第１表示部２３の形態は限定されない。また、第１表示部２３は、第２表示部２５と同一のディスプレイによって構成されてよいが、異なるディスプレイによって構成されてもよい。
【００４７】
第２復号化部２４は、通信部２１によって受信された符号された縮小映像データを復号する。第２表示部２５は、第２復号化部２４による復号によって得られた縮小映像データに基づいて縮小映像を第２の表示領域（以下、「サブ領域」とも言う。）に表示する。ここでは、第２表示部２５がタッチパネルに積層されたディスプレイによって構成される場合を想定するが、第２表示部２５の形態は限定されない。また、第２表示部２５は、第１表示部２３と同一のディスプレイによって構成されてよいが、異なるディスプレイによって構成されてもよい。
【００４８】
操作部２７は、利用者による操作を受け付ける。ここでは、操作部２７がタッチパネルを含んでいる場合を想定する。このとき、映像に対するスクロール操作として、スワイプ操作が利用され得る。しかし、操作部２７の形態は限定されない。例えば、操作部２７は、ポインティングデバイスを含んでもよい。このとき、映像に対するスクロール操作として、ムーブ操作が利用され得る。操作判定部２８は、利用者によって操作部２７に入力された操作を判定する。
【００４９】
制御部２６は、これらの処理ブロックを制御する。例えば、制御部２６は、起動時に（および操作判定部２８による操作判定に基づいて）映像要求を制御したり、第１表示部２３および第２表示部２５による表示を制御したりする。なお、制御部２６は、ＣＰＵ（Ｃｅｎｔｒａｌ  Ｐｒｏｃｅｓｓｉｎｇ  Ｕｎｉｔ）、ＲＯＭ（Ｒｅａｄ  Ｏｎｌｙ  Ｍｅｍｏｒｙ）およびＲＡＭ（Ｒａｎｄｏｍ  Ａｃｃｅｓｓ  Ｍｅｍｏｒｙ）によって構成されてよい。このとき、ＣＰＵによってＲＯＭから読み込まれたプログラムがＲＡＭに展開され、当該プログラムがＣＰＵによって実行されることによって実現され得る。あるいは、制御部２６は、専用のハードウェアによって構成されてもよい。
【００５０】
映像配信サーバＰ１２は、コンピュータによって構成される。映像配信サーバＰ１２は、通信部３１、第１符号化部３３、縮小部３４、第２符号化部３５および制御部３６を備える。また、映像配信サーバＰ１２は、撮影部Ｄ１１と接続されている。通信部３１は、ネットワークＮ１に接続されている。通信部３１は、通信インタフェースによって構成され、ネットワークＮ１を介したデータ送信、要求の受信を行う。また、通信部３１は、管理サーバＰ１への映像情報の送信を行う。
【００５１】
撮影部Ｄ１１は、カメラデバイスによって構成され、拠点内の映像を撮影する。撮影部Ｄ１１は、１または複数の可視光カメラによって構成されてよい。また、本発明の実施形態では、撮影部Ｄ１１が３６０度カメラによって構成される場合を主に想定する。しかし、撮影部Ｄ１１の画角は限定されない。例えば、撮影部Ｄ１１の画角が所定の角度よりも狭い場合には、１つの拠点に複数のカメラが設置され、複数のカメラによって撮影された映像が繋ぎ合わされてもよい。このように、撮影部Ｄ１１の具体的なハードウェア構成は限定されない。
【００５２】
撮影部Ｄ１１は、所定のフレームレートで映像を撮影し、所定のフレームレートで映像を出力してよい。なお、撮影部Ｄ１１によって撮影される映像は、斜め下方向または下方向に撮影された映像であってよい。これによって、拠点に存在する人を閲覧しやすい映像が得られる。しかし、撮影部Ｄ１１による撮影方向は限定されない。
【００５３】
第１符号化部３３は、撮影部Ｄ１１によって得られた映像データを符号化する。第１符号化部３３によって符号化された映像データは、端末Ｐ１３における第１復号化部２２によって復号される。一方、第２符号化部３５は、縮小部３４によって得られた縮小映像データを符号化する。第２符号化部３５によって符号化された縮小映像データは、端末Ｐ１３における第２復号化部２４によって復号される。
【００５４】
縮小部３４は、撮影部Ｄ１１によって得られた映像データを縮小して縮小映像データを得る。また、入力されたフレーム数を所定の割合で間引いてフレームレートを低下させてもよい。なお、本発明の実施形態では、映像配信サーバＰ１２が縮小部３４を備える場合を主に想定する。しかし、撮影部Ｄ１１が設置される拠点と同一拠点に他の撮影部が設置されており、当該他の撮影部が、撮影部Ｄ１１によって撮影される映像のデータサイズよりも小さいデータサイズの映像を撮影可能であれば、当該他の撮影部によって得られた映像データが縮小映像データの代わりに用いられてもよい。かかる場合には、映像配信サーバＰ１２は、縮小部３４を備えていなくてよい。
【００５５】
制御部３６は、これらの処理ブロックを制御する。例えば、制御部３６は、なお、制御部３６は、ＣＰＵ（Ｃｅｎｔｒａｌ  Ｐｒｏｃｅｓｓｉｎｇ  Ｕｎｉｔ）、ＲＯＭ（Ｒｅａｄ  Ｏｎｌｙ  Ｍｅｍｏｒｙ）およびＲＡＭ（Ｒａｎｄｏｍ  Ａｃｃｅｓｓ  Ｍｅｍｏｒｙ）によって構成されてよい。このとき、ＣＰＵによってＲＯＭから読み込まれたプログラムがＲＡＭに展開され、当該プログラムがＣＰＵによって実行されることによって実現され得る。あるいは、制御部３６は、専用のハードウェアによって構成されてもよい。
【００５６】
図６は、端末Ｐ１３による表示例を示す図である。図６を参照すると、端末Ｐ１３によって表示される画面の一例としての画面Ｍ１１が示されており、画面Ｍ１１は、メイン領域Ｗ１とサブ領域Ｗ２とを有している。サブ領域Ｗ２には注目領域枠Ｗ３が存在している。メイン領域Ｗ１には、居室Ｋ１の映像の対象範囲（第１の対象範囲）が表示されている。一方、サブ領域Ｗ２には、映像群のうちメイン領域Ｗ１に表示される対象範囲（第１の対象範囲）に対応する第２の対象範囲が表示される。ここでは、映像群として、居室Ｋ１の縮小映像Ｔ１、居室Ｋ２の縮小映像Ｔ２、（図６には示されていないが）居室Ｋ３の縮小映像Ｔ３、居室Ｋ４の縮小映像Ｔ４を想定する。
【００５７】
より具体的には、右方向に、縮小映像Ｔ１、縮小映像Ｔ２、縮小映像Ｔ３、縮小映像Ｔ４の順に並んだ後に縮小映像Ｔ１に戻るような環状の映像群を想定する。かかる環状の映像群のうち、メイン領域Ｗ１（第１の対象範囲）に対応する第２の対象範囲（ここでは、縮小映像Ｔ４、縮小映像Ｔ１および縮小映像Ｔ２）がサブ領域Ｗ２に表示される。換言すれば、映像群のうち注目領域枠Ｗ３の位置に存在する部分的な縮小映像に対応する縮小前の映像がメイン領域Ｗ１に表示される。
【００５８】
なお、図の簡便さを考慮し、縮小映像Ｔ１〜Ｔ４として、単方向に撮影した映像が各図に示されている。しかし、本発明の実施形態では、３６０度カメラによって全方位が撮影される場合を主に想定する。また、利用者は、メイン領域Ｗ１に対して、左右方向へのスワイプ操作が可能である。利用者は、サブ領域Ｗ２に対しても、左右方向へのスワイプ操作が可能である。スワイプ操作の方向は、映像群が並べられる方向に対応して適宜に変更されてよい。メイン領域Ｗ１およびサブ領域Ｗ２それぞれに対してスワイプ操作が入力された場合の詳細な動作例については、後に説明する。
【００５９】
以上、本発明の第１の実施形態に係る遠隔コミュニケーションシステムの構成例について説明した。
【００６０】
（１−２．動作の説明）
続いて、図７〜図１３を参照しながら（適宜図６を参照）、本発明の第１の実施形態に係る遠隔コミュニケーションシステムの動作例について説明する。図７および図８は、メイン領域Ｗ１に対してスワイプ操作が入力された場合について説明するための図である。図９および図１０は、サブ領域Ｗ２に対してスワイプ操作が入力された場合について説明するための図である。図１１〜図１３は、本発明の第１の実施形態に係る遠隔コミュニケーションシステムの動作例を示すシーケンス図である。
【００６１】
なお、説明を簡便にするため、図１１〜図１３には、端末Ｐ１３、映像配信サーバＰ１２、Ｐ２２の動作を示し、端末Ｐ２３、Ｐ３３、Ｐ４３、映像配信サーバＰ３２、Ｐ４２、管理サーバＰ１の動作を示さない。そして、端末Ｐ１３および映像配信サーバＰ１２、Ｐ２２の動作例について説明し、端末Ｐ２３、Ｐ３３、Ｐ４３、映像配信サーバＰ３２、Ｐ４２、管理サーバＰ１の動作例についての説明は省略する（しかし、各端末から各映像配信サーバへの要求フローは管理サーバＰ１を介して実行され得る）。さらに、終了処理、異常系の処理およびエラー処理に関するシーケンスは、図１１〜図１３から割愛する。
【００６２】
また、図１１〜図１３では、端末Ｐ１３が起動されると、図６に示されるように、映像群のうち、居室Ｋ４の縮小映像Ｔ４、居室Ｋ１の縮小映像Ｔ１、居室Ｋ２の縮小映像Ｔ２が、対象領域（第２の対象領域）としてサブ領域Ｗ２に表示される場合を想定する。そして、図６に示されるように、居室Ｋ１の縮小映像Ｔ１の一部領域が注目領域枠Ｗ３に位置し、この一部領域が、対象領域（第１の対象領域）としてメイン領域Ｗ１に表示される場合を想定する。
【００６３】
まず、図１１に示されるように、オフィスＡ１においては、映像配信サーバＰ１２が起動されると、撮影部Ｄ１１によって居室Ｋ１の映像が撮影され、映像配信サーバＰ１２において、第１符号化部３３によって居室Ｋ１の映像が符号化され、縮小部３４によって居室Ｋ１の映像が縮小され、第２符号化部３５によって居室Ｋ１の縮小映像が符号化される（Ｓ１１）。同様に、オフィスＡ２においては、映像配信サーバＰ２２が起動されると、撮影部Ｄ２１によって居室Ｋ２の映像が撮影され、映像配信サーバＰ２２において、第１符号化部３３によって居室Ｋ２の映像が符号化され、縮小部３４によって居室Ｋ２の映像が縮小され、第２符号化部３５によって居室Ｋ２の縮小映像が符号化される（Ｓ１１）。Ｓ１１における符号化は、端末Ｐ１３からの要求有無に関わらず、バックグラウンドで処理が継続して実行されてもよい。
【００６４】
端末Ｐ１３が起動され、端末Ｐ１３において、制御部２６が符号化された居室Ｋ１の縮小映像Ｔ１（図６）を、通信部２１を介して映像配信サーバＰ１２に要求すると（Ｓ１２）、映像配信サーバＰ１２において、制御部３６が通信部３１を介して要求を受け付け、符号化された居室Ｋ１の縮小映像Ｔ１（図６）を端末Ｐ１３に対して通信部３１を介して提供し（Ｓ１３）、端末Ｐ１３において、第２復号化部２４が符号化された居室Ｋ１の縮小映像Ｔ１（図６）を復号し、制御部２６がサブ領域Ｗ２（図６）に居室Ｋ１の縮小映像Ｔ１（図６）を表示させる（Ｓ１５）。
【００６５】
同様に、端末Ｐ１３において、制御部２６が符号化された居室Ｋ２の縮小映像Ｔ２（図６）を、通信部２１を介して映像配信サーバＰ２２に要求すると（Ｓ１４）、映像配信サーバＰ１２において、制御部３６が通信部３１を介して要求を受け付け、符号化された居室Ｋ２の縮小映像Ｔ２（図６）を端末Ｐ１３に対して通信部３１を介して提供し（Ｓ１４）、端末Ｐ１３において、第２復号化部２４が符号化された居室Ｋ２の縮小映像Ｔ２（図６）を復号し、制御部２６がサブ領域Ｗ２（図６）に居室Ｋ２の縮小映像Ｔ２（図６）を表示させる（Ｓ１６）。
【００６６】
ブロックＢ１は、以降の処理フローにおいても並列動作する。また、ブロックＢ１内の処理フローは縮小映像毎にさらに並列動作してもよい。なお、図６を参照すると、サブ領域Ｗ２には、居室Ｋ４の縮小映像Ｔ４も表示されている。したがって、図１１には示されていないが、同様にして、端末Ｐ１３においては、制御部２６が、居室Ｋ４の縮小映像Ｔ４を映像配信サーバＰ４２から取得し、サブ領域Ｗ２（図６）に表示させる。また、図６に示された例では、居室Ｋ３の縮小映像Ｔ３はまだ表示されていないが、制御部２６は、居室Ｋ３の縮小映像Ｔ３も映像配信サーバＰ３２から取得しておく。
【００６７】
続いて、端末Ｐ１３において、制御部２６が符号化された居室Ｋ１の映像を、通信部２１を介して映像配信サーバＰ１２に要求すると（Ｓ１７）、映像配信サーバＰ１２において、制御部３６が通信部３１を介して要求を受け付け、撮影部Ｄ１１によって撮影されて第１符号化部３３によって符号化された居室Ｋ１の映像を（Ｓ１８）、端末Ｐ１３に対して通信部３１を介して提供する（Ｓ１９）。Ｓ１８における撮影および符号化は、端末Ｐ１３からの要求有無に関わらず、バックグラウンドで処理が継続して実行されてもよい。なお、Ｓ１１において撮影される映像と、Ｓ１８において撮影される映像とは別であってもよいが、共通であるのが効率的である。
【００６８】
端末Ｐ１３において、通信部２１が符号化された居室Ｋ１の映像を受信すると、第１復号化部２２が符号化された居室Ｋ１の映像を復号し、制御部２６が居室Ｋ１の映像の一部領域を、対象範囲（第１の対象範囲）としてメイン領域Ｗ１（図６）に表示させる（Ｓ２０）。端末Ｐ１３において、操作判定部２８は、端末Ｐ１３の利用者によって入力される映像に対する操作（映像操作）の有無および操作の種類を判定する（Ｓ２１）。ブロックＢ２は、操作判定部２８によって映像操作有りと判定されるまで繰り返し実行される。
【００６９】
端末Ｐ１３において、制御部２６は、操作判定部２８によって映像操作有りと判定された場合、利用者から入力された映像操作に基づいて、メイン領域Ｗ１に表示される対象範囲およびサブ領域Ｗ２に表示される対象範囲それぞれを制御する。これによって、直感的な操作を用いて各拠点を横断的に見て回ることが可能な技術が提供され得る。
【００７０】
具体的に、制御部２６は、メイン領域Ｗ１に対するスワイプ操作が入力された場合、メイン領域Ｗ１に表示される対象範囲を居室Ｋ１の映像内に制限する。一方、サブ領域Ｗ２に対するスワイプ操作が入力された場合、メイン領域Ｗ１に表示される対象範囲を居室Ｋ１の映像外に許容する。また、制御部２６は、いずれに対するスワイプ操作が入力されても、メイン領域Ｗ１に表示される対象範囲に対応するようにサブ領域Ｗ２に表示される対象範囲を映像群において移動させる。なお、メイン領域Ｗ１に対するスワイプ操作は、第１の操作の例である。また、サブ領域Ｗ２に対するスワイプ操作は、第２の操作の例である。
【００７１】
例えば、画面Ｍ１１（図６）が表示されている状態において、利用者によってメイン領域Ｗ１に対するスワイプ操作が入力された場合を想定する。かかる場合には、図７の画面Ｍ１３に示されたように、制御部２６は、メイン領域Ｗ１に対するスワイプ操作に基づいて、メイン領域Ｗ１に表示される対象範囲を居室Ｋ１の映像内で移動させる（Ｓ２２）。画面Ｍ１３では、メイン領域Ｗ１に表示される対象範囲が、居室Ｋ１の映像の一端（右端）に達している。なお、メイン領域Ｗ１に対するスワイプ操作によって、利用者は同一の拠点内の映像を回転させながら（撮影方向を変えながら）閲覧することができるため、メイン領域Ｗ１に対するスワイプ操作は、「自拠点回転操作」に相当し得る。
【００７２】
このとき、制御部２６は、メイン領域Ｗ１に表示されている対象範囲に対応するように、サブ領域Ｗ２に表示される対象範囲をリセットする（映像群において移動させる）（Ｓ２３）。画面Ｍ１３では、メイン領域Ｗ１に表示される居室Ｋ１の一部映像（右端領域）に対応する部分的な縮小映像が注目領域枠Ｗ３に位置するように、サブ領域Ｗ２に表示される対象範囲を、映像群において移動させている。なお、メイン領域Ｗ１に表示される対象範囲とサブ領域Ｗ２に表示される対象領域とは、どちらが先に更新されても構わない。
【００７３】
さらに、画面Ｍ１３が表示されている状態において、利用者によってメイン領域Ｗ１に対するスワイプ操作が入力された場合を想定する。かかる場合には、メイン領域Ｗ１に表示される対象範囲に、居室Ｋ１の映像の一端（右端）を超える領域（超過領域）が生じてしまう。このとき、制御部２６は、超過領域に居室Ｋ１の映像の一端（右端）とは反対側の領域（左端領域）を設定する。図８の画面Ｍ１４を参照すると、メイン領域Ｗ１に表示される対象範囲の全体が、居室Ｋ１の映像の一端（右端）を超えているため、制御部２６は、メイン領域Ｗ１に表示される対象範囲の全体に、居室Ｋ１の映像の左端領域を設定している。
【００７４】
このとき、制御部２６は、メイン領域Ｗ１に表示されている対象範囲に対応するように、サブ領域Ｗ２に表示される対象範囲をリセットする（映像群において移動させる）。画面Ｍ１４では、メイン領域Ｗ１に表示される居室Ｋ１の一部映像（左端領域）に対応する部分的な縮小映像が注目領域枠Ｗ３に位置するように、サブ領域Ｗ２に表示される対象範囲を、映像群において移動させている。その後、制御部２６は、ブロックＢ２の先頭に戻って処理を繰り返す。
【００７５】
一方、画面Ｍ１１（図６）が表示されている状態において、利用者によってサブ領域Ｗ２に対するスワイプ操作が入力された場合を想定する。かかる場合には、図９の画面Ｍ１２に示されたように、制御部２６は、サブ領域Ｗ２に対するスワイプ操作に基づいて、サブ領域Ｗ２に表示される対象範囲を映像群において移動させる（Ｓ２４）。なお、サブ領域Ｗ２に対するスワイプ操作によって、利用者は拠点を切り替えながら映像を閲覧することができるため、サブ領域Ｗ２に対するスワイプ操作は、「拠点切り替え操作」に相当し得る。画面Ｍ１２では、注目領域枠Ｗ３に位置する部分的な縮小映像が居室Ｋ１の縮小映像Ｔ１の一端（右端）に達している。
【００７６】
このとき、制御部２６は、サブ領域Ｗ２に表示されている対象範囲に対応するように、メイン領域Ｗ１に表示される対象範囲を更新する。画面Ｍ１２では、注目領域枠Ｗ３に位置する部分的な縮小映像に対応する居室Ｋ１の一部映像（右端領域）がメイン領域Ｗ１に位置するように、メイン領域Ｗ１に表示される対象範囲が更新されている。なお、メイン領域Ｗ１に表示される対象範囲とサブ領域Ｗ２に表示される対象領域とは、どちらが先に更新されても構わない。
【００７７】
さらに、画面Ｍ１２が表示されている状態において、利用者によってサブ領域Ｗ２に対するスワイプ操作が入力された場合を想定する。かかる場合には、制御部２６は、サブ領域Ｗ２に対するスワイプ操作に基づいて、サブ領域Ｗ２に表示される対象範囲を映像群において移動させる。画面Ｍ２１では、居室Ｋ１の縮小映像Ｔ１の右に配置された居室Ｋ２の縮小映像Ｔ２の一部領域（左端領域）が注目領域枠Ｗ３に達している。
【００７８】
制御部２６は、サブ領域Ｗ２に表示されている対象範囲に対応するように、メイン領域Ｗ１に表示される対象範囲を更新する動作（次拠点表示）を開始する（Ｓ２５）。このとき、制御部２６は、メイン領域Ｗ１に表示される対象範囲に、居室Ｋ１の映像の一端（右端）を超える領域（超過領域）が生じる場合、超過領域に居室Ｋ２の映像の領域（左端領域）を設定する。より具体的に、画面Ｍ２１に示されるように、制御部２６は、注目領域枠Ｗ３に位置する部分的な縮小映像に対応する居室Ｋ２の一部映像（左端領域）がメイン領域Ｗ１に位置するように、メイン領域Ｗ１に表示される対象範囲を更新する動作を開始する。
【００７９】
ただし、端末Ｐ１３は、居室Ｋ２の縮小映像Ｔ２をすでに取得しているが、居室Ｋ２の縮小前の映像をまだ取得していない。そのため、端末Ｐ１３において、制御部２６は、通信部２１を介して、居室Ｋ１の映像停止を映像配信サーバＰ１２に要求する（Ｓ２６）。映像配信サーバＰ１２においては、通信部３１によって映像停止要求が受信され、制御部３６が端末Ｐ１３に対する居室Ｋ１の映像送信を停止する（Ｓ２７）。
【００８０】
続いて、端末Ｐ１３において、制御部２６は、通信部２１を介して、居室Ｋ２の映像を映像配信サーバＰ２２に要求する（Ｓ２８）。映像配信サーバＰ２２においては、通信部３１によって映像要求が受信されると、撮影部Ｄ１１によって居室Ｋ２の映像が撮影され、第１符号化部３３によって居室Ｋ２の映像が符号化される（Ｓ２９）。Ｓ２９における撮影および符号化は、端末Ｐ１３からの要求有無に関わらず、バックグラウンドで処理が継続して実行されてもよい。
【００８１】
端末Ｐ１３において、制御部３６が、符号化された居室Ｋ２の映像を端末Ｐ１３に対して通信部３１を介して提供し（Ｓ３０）、端末Ｐ１３において、第１復号化部２２が符号化された居室Ｋ２の映像を復号し、制御部２６がメイン領域Ｗ１に居室Ｋ２の映像を表示させる（Ｓ３１）。ブロックＢ４は、ブロックＢ２と同様に、操作判定部２８によって映像操作有りと判定されるまで繰り返し実行される。
【００８２】
以上、本発明の第１の実施形態に係る遠隔コミュニケーションシステムの動作例について説明した。
【００８３】
なお、上記では、自拠点回転操作の例として、メイン領域Ｗ１に対するスワイプ操作を挙げ、拠点切り替え操作の例として、サブ領域Ｗ２に対するスワイプ操作を挙げて説明した。すなわち、上記では、スワイプ操作の位置に基づいて、自拠点回転操作および拠点切り替え操作のいずれが利用者によって入力されたかが操作判定部２８によって判断される場合を想定した。しかし、自拠点回転操作および拠点切り替え操作のいずれが利用者によって入力されたかは、他の手法によって判断されてもよい。
【００８４】
例えば、操作部２７が感圧式デバイスによって構成される場合、操作判定部２８は、感圧式デバイスによって検出された操作体の圧力に基づいて、自拠点回転操作および拠点切り替え操作のいずれが利用者によって入力されたかを判断してもよい。例えば、利用者は、拠点内の映像を閲覧する場合よりも、拠点を切り替えながら映像を閲覧する場合のほうが、操作体を強く画面に押し当てながらスワイプ操作を入力することが想定される。したがって、操作判定部２８は、操作体の圧力が閾値よりも大きい場合に、拠点切り替え操作が入力されたと判断し、操作体の圧力が閾値よりも小さい場合に、自拠点回転操作が入力されたと判断してもよい。
【００８５】
あるいは、操作判定部２８は、スワイプ操作の速度に基づいて、自拠点回転操作および拠点切り替え操作のいずれが利用者によって入力されたかを判断してもよい。例えば、利用者は、拠点を切り替えながら映像を閲覧する場合よりも、拠点内の映像を閲覧する場合のほうが、映像をじっくりと観察することが想定される。したがって、操作判定部２８は、スワイプ操作の速度が閾値よりも小さい場合に、自拠点回転操作が入力されたと判断し、スワイプ操作の速度が閾値よりも大きい場合に、拠点切り替え操作が入力されたと判断してもよい。
【００８６】
（１−３．まとめ）
本発明の第１の実施形態によれば、居室Ｋ１の映像の対象範囲（第１の対象範囲）をメイン領域Ｗ１に表示させるとともに、映像群のうちメイン領域Ｗ１に表示される対象範囲に対応する対象範囲（第２の対象範囲）をサブ領域Ｗ２に表示させる制御部２６を備える、端末Ｐ１３が提供される。そして、制御部２６は、利用者から入力された操作に基づいて、メイン領域Ｗ１に表示される対象範囲およびサブ領域Ｗ２に表示される対象範囲それぞれを制御する。かかる構成によれば、配信される映像をその都度切り替え可能にしつつ、各オフィスの居室内を俯瞰的に捉えることができると同時に、直感的な操作を用いて各拠点を横断的に見て回ることが可能な技術が提供される。
【００８７】
以上、本発明の第１の実施形態について説明した。
【００８８】
（２．第２の実施形態）
続いて、本発明の第２の実施形態について説明する。以下では、本発明の第２の実施形態に係る遠隔コミュニケーションシステムが有する構成のうち、本発明の第１の実施形態に係る遠隔コミュニケーションシステムが有する構成と異なる構成について主に説明する。そして、本発明の第２の実施形態に係る遠隔コミュニケーションシステムが有する構成のうち、本発明の第１の実施形態に係る遠隔コミュニケーションシステムが有する構成と共通する構成については、詳細な説明を省略する。
【００８９】
具体的に、本発明の第２の実施形態では、遠隔コミュニケーションシステムが、本発明の第１の実施形態に係る端末Ｐ１３、Ｐ２３、Ｐ３３、Ｐ４３の代わりに、端末Ｐ１３Ａ、Ｐ２３Ａ、Ｐ３３Ａ、Ｐ４３Ａを有する。また、本発明の第２の実施形態では、遠隔コミュニケーションシステムが、本発明の第１の実施形態に係る映像配信サーバＰ１２、Ｐ２２、Ｐ３２、Ｐ４２の代わりに、映像配信サーバＰ１２Ａ、Ｐ２２Ａ、Ｐ１２Ａ、Ｐ２２Ａを有する。したがって、以下では、本発明の第２の実施形態に係るＰ１３Ａ、Ｐ２３Ａ、Ｐ３３Ａ、Ｐ４３Ａおよび映像配信サーバＰ１２Ａ、Ｐ２２Ａ、Ｐ１２Ａ、Ｐ２２Ａについて主に説明する。
【００９０】
（２−１．構成の説明）
次に、本発明の第２の実施形態に係る遠隔コミュニケーションシステムの構成例について説明する。図１４は、本発明の第２の実施形態に係る遠隔コミュニケーションシステムの機能構成の一例を示す図である。図１４を参照すると、本発明の第２の実施形態に係る遠隔コミュニケーションシステムは、端末Ｐ１３Ａが静止画保持部２９および合成部３０を有する点、映像配信サーバＰ１２Ａ、Ｐ２２Ａがタイマ３７および静止画送信部３８を有する点において、本発明の第１の実施形態に係る遠隔コミュニケーションシステムと異なっている。したがって、以下では、静止画保持部２９、合成部３０、タイマ３７および静止画送信部３８について主に説明する。
【００９１】
以上、本発明の第２の実施形態に係る遠隔コミュニケーションシステムの構成例について説明した。
【００９２】
（２−２．動作の説明）
次に、図１５〜図１８を参照しながら、本発明の第２の実施形態に係る遠隔コミュニケーションシステムの動作例について説明する。図１５〜図１７は、本発明の第２の実施形態に係る遠隔コミュニケーションシステムの動作例を示すシーケンス図である。図１８は、本発明の第２の実施形態に係る遠隔コミュニケーションシステムによる拠点切り替え操作時の表示例を示す図である。
【００９３】
ここでは、図１８に示されたように、居室Ｋ１の映像が対象範囲Ｆ１として端末Ｄ１３Ａのメイン領域Ｗ１（図６）に表示されている場合を想定する。かかる場合において、利用者が拠点切り替え操作によって（例えば、対象範囲Ｆ１を左方向にスクロールさせる操作によって）居室Ｋ２の映像を対象範囲Ｆ１４として端末Ｄ１３Ａに表示させる場合を想定する。居室Ｋ１の映像は、映像配信サーバＤ１２Ａから提供され、居室Ｋ２の映像は、映像配信サーバＤ２２Ａから提供される。
【００９４】
図１５に示されたＳ５１〜Ｓ５７は、図１１に示されたＳ１１〜Ｓ１７と同様に実行される。そして、図１６に示されたＳ５８〜Ｓ６０、Ｓ６７も、図１２に示されたＳ１８〜Ｓ２１と同様に実行される。ブロックＢ１２は、操作判定部２８によって映像操作有りと判定されるまで繰り返し実行される。
【００９５】
ここで、映像配信サーバＰ１２Ａにおいて、タイマ３７によるタイマ割込が発生すると、制御部３６は、撮影部Ｄ１１によって撮影された居室Ｋ１の映像に基づいて、居室Ｋ１の映像の一部（フレーム）を居室Ｋ１の静止画として生成し（Ｓ６１）、静止画送信部３８は、通信部３１を介して居室Ｋ１の静止画を端末Ｐ１３Ａに送信する（Ｓ６２）。端末Ｐ１３Ａにおいては、通信部２１によって居室Ｋ１の静止画が受信されると、制御部２６によって静止画保持部２９に格納される（Ｓ６３）。
【００９６】
同様に、映像配信サーバＰ２２Ａにおいて、タイマ３７によるタイマ割込が発生すると、制御部３６は、撮影部Ｄ２１によって撮影された居室Ｋ２の映像に基づいて、居室Ｋ２の映像の一部（フレーム）を居室Ｋ２の静止画として生成し（Ｓ６４）、静止画送信部３８は、通信部３１を介して居室Ｋ２の静止画を端末Ｐ１３Ａに送信する（Ｓ６５）。端末Ｐ１３Ａにおいては、通信部２１によって居室Ｋ２の静止画が受信されると、制御部２６によって静止画保持部２９に格納される（Ｓ６６）。
【００９７】
また、図１６に示されていないが、映像配信サーバＰ３２Ａにおいて、タイマ３７によるタイマ割込が発生した場合においても、通信部２１によって居室Ｋ３の静止画が受信されると、制御部２６によって居室Ｋ３の静止画が静止画保持部２９に格納される。同様に、映像配信サーバＰ４２Ａにおいて、タイマ３７によるタイマ割込が発生した場合においても、通信部２１によって居室Ｋ４の静止画が受信されると、制御部２６によって居室Ｋ４の静止画が静止画保持部２９に格納される。
【００９８】
なお、タイマ割込みは、所定の時間ごとに発生するよう設定されていてよい。ここで、タイマ割込が発生する時間間隔は限定されない。一例として、タイマ割込が発生する時間間隔は、居室内の様子が変化するスピードなどに応じて適宜に変化されてよい。
【００９９】
図１６に示されたＳ６８〜Ｓ７４も、図１２に示されたＳ２２〜Ｓ２８と同様に実行される。制御部２６は、拠点切り替え操作に基づいて、メイン領域Ｗ１（図６）に表示される対象範囲を居室Ｋ１の映像において移動させ、メイン領域Ｗ１（図６）に表示される対象範囲に、居室Ｋ１の映像の一端（右端）を超える領域（超過領域）が生じる場合、超過領域に居室Ｋ２の映像の領域（左端領域）を設定する。このとき、制御部２６は、通信部２１を介して、まだ取得していない居室Ｋ２の映像を映像配信サーバＰ２２Ａに要求する（Ｓ７４）。しかし、居室Ｋ２の映像を取得し終わるまでには時間が掛かる。
【０１００】
そこで、制御部２６は、超過領域に居室Ｋ２の静止画の領域を一時的に設定する（Ｓ７５）。ブロックＢ１４は、居室Ｋ２の映像が受信されるまで継続して実行される。端末Ｐ１３Ａからの映像要求に基づいて、撮影部Ｄ２１によって居室Ｋ２の映像が撮影され、映像配信サーバＰ２２Ａにおいて、第１符号化部３３によって居室Ｋ２の映像が符号化される（Ｓ７６）。端末Ｐ１３Ａにおいては、第１復号化部２２が符号化された居室Ｋ２の映像を復号する。
【０１０１】
合成部３０は、居室Ｋ２の映像フレームが所定枚数受信されるまで（Ｓ７７）、居室Ｋ２の静止画の領域に対して居室Ｋ２の映像フレームの領域をブレンドさせる。ブレンド周期は限定されない。例えば、合成部３０は、映像フレームが受信されるたびに映像フレームの領域を静止画の領域に対してブレンドさせてもよい。このとき、合成部３０は、居室Ｋ２の映像の領域のブレンド比率を徐々に高くすることによって、居室Ｋ２の静止画の領域を居室Ｋ２の映像の領域で徐々に置換するのが望ましい（Ｓ７８）。これによって、静止画から映像への置換がより自然に行われ得る。
【０１０２】
そして、制御部２６は、通信部２１によって居室Ｋ２の映像が受信された場合（Ｓ８０）、居室Ｋ２の静止画の領域を居室Ｋ２の映像の領域で置換する（Ｓ８１）。ブロックＢ１６は、ブロックＢ１２と同様に、操作判定部２８によって映像操作有りと判定されるまで繰り返し実行される。
【０１０３】
図１８を参照すると、居室Ｋ１の映像から居室Ｋ２の映像に切り替わるまでにメイン領域Ｗ１（図６）に表示される対象範囲の変化が時系列に沿って示されている。対象範囲Ｆ１が表示された後、対象範囲Ｆ１２が表示され、対象範囲Ｆ１３が表示され、対象範囲Ｆ１４が表示される。時刻ｔ１のタイミングで拠点切り替え操作が行われた場合、映像配信サーバＰ２２Ａから端末Ｐ１３Ａに居室Ｋ２の映像が届くまでに時間が掛かる。
【０１０４】
しかし、本発明の第２の実施形態では、（居室Ｋ２の映像受信完了前の）対象範囲Ｆ１２のうち、居室Ｋ１の映像の一端（右端）を超えた領域（超過領域）に居室Ｋ２の静止画が一時的に設定される。そのため、本発明の第２の実施形態では、図２の時間Ｒ１に示されたタイムラグが発生せずに、拠点切り替えがスムーズに実行される。なお、居室Ｋ２の静止画から居室Ｋ２の映像への置換は、居室Ｋ１の映像の領域が残っている対象範囲Ｆ１２において完了してもよいし、居室Ｋ１の映像の領域が残っていない対象範囲Ｆ１３において完了してもよい。
【０１０５】
以上、本発明の第２の実施形態に係る遠隔コミュニケーションシステムの動作例について説明した。
【０１０６】
（２−３．まとめ）
本発明の第２の実施形態によれば、本発明の第１の実施形態と同様の効果を奏し得る。さらに、本発明の第２の実施形態によれば、制御部２６は、メイン領域Ｗ１に表示される対象範囲に居室Ｋ１の映像の一端を超える超過領域が存在する場合、超過領域に居室Ｋ２の静止画の領域を一時的に設定する。そして、制御部２６は、居室Ｋ２の映像が受信された場合、居室Ｋ２の静止画の領域を居室Ｋ２の映像の領域で置換する。これによって、ネットワーク帯域の消費量を増大させることなく、拠点切り替えをスムーズに実行することが可能となる。
【０１０７】
さらに、本発明の第２の実施形態によれば、タイマ割込に基づいて静止画が生成されることによって、居室内の変化（例えば、昼夜による居室内の変化）に合わせた静止画が生成され得る。
【０１０８】
以上、本発明の第２の実施形態について説明した。
【０１０９】
（３．変形例）
以上、添付図面を参照しながら本発明の好適な実施形態について詳細に説明したが、本発明はかかる例に限定されない。本発明の属する技術の分野における通常の知識を有する者であれば、特許請求の範囲に記載された技術的思想の範疇内において、各種の変更例または修正例に想到し得ることは明らかであり、これらについても、当然に本発明の技術的範囲に属するものと了解される。
【０１１０】
例えば、本発明の第１の実施形態および第２の実施形態においては、遠隔コミュニケーションシステムによって、利用者が各拠点の映像を閲覧する場合について主に説明した。しかし、遠隔コミュニケーションシステムは、スピーカマイクロフォンなどの音声デバイスを用いて、利用者が各拠点の俯瞰音声を聞くことが可能となるように構成されてもよい。あるいは、遠隔コミュニケーションシステムは、利用者が特定の相手または複数の相手との音声対話が可能となるように構成されてもよい。あるいは、遠隔コミュニケーションシステムは、俯瞰映像内にＡＲ（Ａｕｇｍｅｎｔｅｄ  Ｒｅａｌｉｔｙ）によるメッセージ、利用者の属性または応答状況などを表示してもよい。
【０１１１】
本発明の第１の実施形態および第２の実施形態においては、各拠点に３６０度カメラが設置される場合を主に説明した。しかし、各拠点に複数の３６０度カメラが設置されてもよい。かかる場合には、利用者によって自拠点内回転操作が入力された場合に、同一拠点内に設置された複数の３６０度カメラの間で拠点映像を撮影するカメラが切り替えられてもよい。また、映像を閲覧可能な撮影角度（角度制限）が設けられてもよい。あるいは、３６０度カメラの代わりに１８０度カメラなどが用いられてもよい。さらに、上記では、映像配信サーバにおいて映像の縮小が行われる場合を主に説明した。しかし、映像配信サーバの代わりに端末において映像の縮小が行われてもよい。
【０１１２】
本発明の第２の実施形態においては、拠点の静止画が映像配信サーバによって保持される場合を主に説明した。すなわち、端末Ｐ１３Ａの制御部２６が、映像配信サーバＰ１２Ａ、Ｐ２２Ａによって保持された静止画を取得する場合を主に説明した。しかし、拠点の静止画は、端末自身によって保持されてもよい。すなわち、端末Ｐ１３Ａの制御部２６は、端末Ｐ１３Ａによって保持された静止画を取得してもよい。かかる場合には、端末Ｐ１３Ａは、受信した映像の所定のフレーム（例えば、他の拠点に切り替えられてしまう直前に受信したフレームなど）を静止画として保持してもよいし、定期的に映像配信サーバに対して静止画を要求してもよい。
【符号の説明】
【０１１３】
Ｆ１〜Ｆ４、Ｆ１２〜Ｆ１４  対象範囲
Ｐ１    管理サーバ
Ｐ１２、Ｐ２２、Ｐ３２、Ｐ４２  映像配信サーバ
Ｐ１２Ａ、Ｐ２２Ａ、Ｐ３２Ａ、Ｐ４２Ａ  映像配信サーバ
Ｐ１３、Ｐ２３、Ｐ１３Ａ  端末
１２    配信管理部
１３    配信元情報記憶部
１４    通信部
２１    通信部
２２    第１復号化部
２３    第１表示部
２４    第２復号化部
２５    第２表示部
２６    制御部
２７    操作部
２８    操作判定部
２９    静止画保持部
３０    合成部
３１    通信部
３３    第１符号化部
３４    縮小部
３５    第２符号化部
３６    制御部
３７    タイマ
３８    静止画送信部
Ｗ１    メイン領域
Ｗ２    サブ領域
Ｗ３    注目領域枠
【図１】
2020195021.tif 000003
【図２】
2020195021.tif 000004
【図３】
2020195021.tif 000005
【図４】
2020195021.tif 000006
【図５】
2020195021.tif 000007
【図６】
2020195021.tif 000008
【図７】
2020195021.tif 000009
【図８】
2020195021.tif 000010
【図９】
2020195021.tif 000011
【図１０】
2020195021.tif 000012
【図１１】
2020195021.tif 000013
【図１２】
2020195021.tif 000014
【図１３】
2020195021.tif 000015
【図１４】
2020195021.tif 000016
【図１５】
2020195021.tif 000017
【図１６】
2020195021.tif 000018
【図１７】
2020195021.tif 000019
【図１８】
2020195021.tif 000020