(57)【要約】  本出願は、パノラマ画像の表示制御方法を開示し、移動端末により送信されたパノラマ画像トリガ命令を受信することと、受信された前記パノラマ画像トリガ命令に応じて、前記移動端末にバインドされたスマートテレビに前記パノラマ画像トリガ命令を送信し、前記スマートテレビが現在表示されているメディアコンテンツに対応するパノラマ画像を表示するようにすることと、前記移動端末から送信された前記移動端末の立体空間における位置変化パラメータ及び／又は姿勢変化パラメータを受信することと、前記位置変化パラメータ及び／又は姿勢変化パラメータに基づいて、前記パノラマ画像のパノラマ空間における視角調整パラメータ及び／又は視点調整パラメータを確定することと、前記視角調整パラメータ及び／又は視点調整パラメータを前記スマートテレビに送信し、前記スマートテレビが前記視角調整パラメータ及び／又は視点調整パラメータに基づいて、前記パノラマ画像の視角及び／又は視点を調整するようにすることと、を含む。本出願は、対応するパノラマ画像の表示制御装置をさらに提供している。
2019533372.tif 000002
【特許請求の範囲】
【請求項１】
パノラマ画像の表示制御方法であって、移動端末に適用され、
パノラマ画像トリガ操作に応じて、メディアコンテンツサーバにパノラマ画像トリガ命令を送信し、前記メディアコンテンツサーバが前記パノラマ画像トリガ命令を前記移動端末にバインドされたスマートテレビに送信するようにし、前記スマートテレビが現在表示されているメディアコンテンツに対応するパノラマ画像を表示するようにすることと、
前記移動端末に対する操作に応じて、前記移動端末の立体空間におけるディスクリプションパラメータを取得し、前記メディアコンテンツサーバに前記ディスクリプションパラメータを送信し、前記メディアコンテンツサーバが前記ディスクリプションパラメータに基づいて前記パノラマ画像のパノラマ空間における調整パラメータを確定し、前記調整パラメータを前記スマートテレビに送信するようにし、前記スマートテレビが前記調整パラメータに基づいて前記パノラマ画像を調整するようにすることと、を含む、
ことを特徴する前記方法。
【請求項２】
前記ディスクリプションパラメータは、位置変化パラメータと姿勢変化パラメータとを含み、前記調整パラメータは視角調整パラメータと視点調整パラメータとを含み、
ここで、前記移動端末に対する操作に応じて、前記移動端末の立体空間におけるディスクリプションパラメータを取得することは、
前記移動端末に対する移動操作に応じて、前記位置変化パラメータを取得し、前記移動端末に対する回転操作に応じて、前記姿勢変化パラメータを取得すること、を含み、
ここで、前記メディアコンテンツサーバに前記ディスクリプションパラメータを送信し、前記メディアコンテンツサーバが前記ディスクリプションパラメータに基づいて前記パノラマ画像のパノラマ空間における調整パラメータを確定し、前記調整パラメータを前記スマートテレビに送信するようにし、前記スマートテレビが前記調整パラメータに基づいて前記パノラマ画像を調整するようにすることは、
前記位置変化パラメータと前記姿勢変化パラメータと前記メディアコンテンツサーバに送信し、前記メディアコンテンツサーバが前記位置変化パラメータに基づいて、前記パノラマ画像のパノラマ空間における視点調整パラメータを確定し、前記姿勢変化パラメータに基づいて、前記パノラマ画像のパノラマ空間における視角調整パラメータを確定し、前記視点調整パラメータと前記視角調整パラメータとを前記スマートテレビに送信するようにし、前記スマートテレビが前記視点調整パラメータに基づいて前記パノラマ画像の視点を調整し、前記視角調整パラメータに基づいて前記パノラマ画像の視角を調整するようにすること、を含む、
請求項１に記載の方法。
【請求項３】
前記ディスクリプションパラメータは位置変化パラメータを含み、ここで、前記立体空間にＭ個のネットワークアクセスポイントが配置され、ここでＭが３以上であり、ここで、前記移動端末の立体空間におけるディスクリプションパラメータを取得することは、
前記移動端末が基準点位置で受信された前記Ｍ個のネットワークアクセスポイントのＭ個の無線信号強度と、現在位置で受信された前記Ｍ個のネットワークアクセスポイントのＭ個の無線信号強度とに基づいて、前記基準点位置座標と前記現在位置座標とをそれぞれ確定することと、
前記基準点位置座標と前記現在位置座標とに基づいて、前記移動端末の立体空間における位置変化パラメータを確定することと、を含む、
請求項１に記載の方法。
【請求項４】
前記ディスクリプションパラメータは位置変化パラメータを含み、前記移動端末の立体空間におけるディスクリプションパラメータを取得することは、
前記移動端末が複数の位置点で受信されたネットワークアクセスポイントの無線信号強度を確定し、位置点座標と位置点座標に対応する無線信号強度とを関連付けて記憶することと、
移動端末が基準点位置と現在位置でそれぞれ受信されたネットワークアクセスポイントの第１の無線信号強度と第２の無線信号強度とを確定し、記憶されている無線信号強度から前記第１の無線信号強度と第２の無線信号強度とに最も近い無線信号強度をそれぞれサーチし、サーチして得られた前記第１の無線信号強度と第２の無線信号強度とにそれぞれ最も近い無線信号強度に対応する位置点の位置座標を、基準点位置座標及び現在位置座標とすることと、
前記基準点位置座標と現在位置座標とに基づいて、前記移動端末の立体空間における位置変化パラメータを確定することと、を含む、
請求項１に記載の方法。
【請求項５】
前記ディスクリプションパラメータは姿勢変化パラメータを含み、前記移動端末の立体空間におけるディスクリプションパラメータを取得することは、
ジャイロから取得されたセンサーパラメータに基づいて、前記移動端末の基準点偏向角度と現在の偏向角度とをそれぞれ確定することと、
前記移動端末の基準点偏向角度と現在の偏向角度とに基づいて、前記移動端末の姿勢変化パラメータを確定することと、を含む、
請求項１に記載の方法。
【請求項６】
前記方法は、
メディアコンテンツサーバから送信された前記スマートテレビの現在表示されているパノラマ画像データを受信し、前記パノラマ画像を表示すること、をさらに含む、
請求項１に記載の方法。
【請求項７】
前記方法は、
メディアコンテンツサーバから送信された前記調整パラメータを受信することと、
前記調整パラメータに基づいて前記パノラマ画像を調整することと、をさらに含む、
請求項６に記載の方法。
【請求項８】
前記方法は、
メディアコンテンツサーバから送信されたリマインド情報を受信して表示することをさらに含み、前記リマインド情報は、前記移動端末を操作するように前記移動端末のユーザにリマインドするために用いられる、
請求項６又は７に記載の方法。
【請求項９】
パノラマ画像の表示制御方法であって、メディアコンテンツサーバに適用され、
移動端末により送信されたパノラマ画像トリガ命令を受信することと、
受信された前記パノラマ画像トリガ命令に応じて、前記移動端末にバインドされたスマートテレビに前記パノラマ画像トリガ命令を送信し、前記スマートテレビが現在表示されているメディアコンテンツに対応するパノラマ画像を表示するようにすることと、
前記移動端末により送信された前記移動端末の立体空間におけるディスクリプションパラメータを受信することと、
前記ディスクリプションパラメータに基づいて、前記パノラマ画像のパノラマ空間における調整パラメータを確定することと、
前記調整パラメータを前記スマートテレビに送信し、前記スマートテレビが前記調整パラメータに基づいて前記パノラマ画像を調整するようにすることと、を含む、
ことを特徴する前記方法。
【請求項１０】
前記ディスクリプションパラメータは、位置変化パラメータと姿勢変化パラメータとを含み、前記調整パラメータは視角調整パラメータと視点調整パラメータとを含み、
ここで、前記ディスクリプションパラメータに基づいて、前記パノラマ画像のパノラマ空間における調整パラメータを確定することは、
前記位置変化パラメータに基づいて、前記パノラマ画像のパノラマ空間における視点調整パラメータを確定し、前記姿勢変化パラメータに基づいて、前記パノラマ画像のパノラマ空間における視角調整パラメータを確定することと、
ここで、前記調整パラメータを前記スマートテレビに送信し、前記スマートテレビが前記調整パラメータに基づいて前記パノラマ画像を調整するようにすることは、
前記視点調整パラメータと前記視角調整パラメータとを前記スマートテレビに送信し、前記スマートテレビが前記視点調整パラメータに基づいて前記パノラマ画像の視点を調整し、前記視角調整パラメータに基づいて前記パノラマ画像の視角を調整するようにすること、を含む、
請求項９に記載の方法。
【請求項１１】
前記移動端末から送信された前記移動端末の第１の座標系データを受信し、当該第１の座標系によって取得したパラメータが前記移動端末の立体空間における位置座標と姿勢角度を示すために用いられることと、
前記スマートテレビから送信されたパノラマ空間内の第２の座標系データを受信し、当該第２の座標系によって取得したパラメータがパノラマ画像の視点と視角を示すために用いられることと、
前記第１の座標系データと前記第２の座標系データとに基づいて、前記第１の座標系におけるディスクリプションパラメータから前記第２の座標系における調整パラメータへのマッピング関係を確定すること、をさらに含み、
ここで、前記ディスクリプションパラメータに基づいて、前記パノラマ画像のパノラマ空間における調整パラメータを確定することは、
前記マッピング関係と前記ディスクリプションパラメータとに基づいて、前記調整パラメータを確定すること、を含む、
請求項９に記載の方法。
【請求項１２】
前記パノラマ画像に一つのターゲット対象が含まれ、
前記方法は、
前記調整パラメータと前記ターゲット対象の位置とに基づいて、リマインド情報を確定し、前記リマインド情報は、前記移動端末に対して操作を行うことをリマインドするために用いられることと、
前記リマインド情報を前記移動端末に送信して表示させることと、をさらに含む、
請求項９に記載の方法。
【請求項１３】
パノラマ画像の表示制御装置であって、一つ以上のプロセッサと一つ以上のメモリとを含み、前記一つ以上のメモリがコンピュータでの読み取り可能な命令を含み、設定によって前記一つ以上のプロセッサで実行され、
パノラマ画像トリガ操作に応じて、メディアコンテンツサーバにパノラマ画像トリガ命令を送信し、前記メディアコンテンツサーバが前記パノラマ画像トリガ命令を前記移動端末にバインドされたスマートテレビに送信するようにし、前記スマートテレビが現在表示されているメディアコンテンツに対応するパノラマ画像を表示するようにすることと、
前記移動端末に対する操作に応じて、前記移動端末の立体空間におけるディスクリプションパラメータを取得し、前記メディアコンテンツサーバに前記ディスクリプションパラメータを送信し、前記メディアコンテンツサーバが前記ディスクリプションパラメータに基づいて前記パノラマ画像のパノラマ空間における調整パラメータを確定し、前記調整パラメータを前記スマートテレビに送信するようにし、前記スマートテレビが前記調整パラメータに基づいて前記パノラマ画像を調整するようにすることと、を実現するようにする、
前記パノラマ画像の表示制御装置。
【請求項１４】
前記ディスクリプションパラメータは、位置変化パラメータと姿勢変化パラメータとを含み、前記調整パラメータは視角調整パラメータと視点調整パラメータとを含み、前記一つ以上のプロセッサが前記コンピュータでの読み取り可能な命令を実行し、
前記移動端末に対する移動操作に応じて、前記位置変化パラメータを取得し、前記移動端末に対する回転操作に応じて、前記姿勢変化パラメータを取得することと、
前記位置変化パラメータと前記姿勢変化パラメータと前記メディアコンテンツサーバに送信し、前記メディアコンテンツサーバが前記位置変化パラメータに基づいて、前記パノラマ画像のパノラマ空間における視点調整パラメータを確定し、前記姿勢変化パラメータに基づいて、前記パノラマ画像のパノラマ空間における視角調整パラメータを確定し、前記視点調整パラメータと前記視角調整パラメータとを前記スマートテレビに送信するようにし、前記スマートテレビが前記視点調整パラメータに基づいて前記パノラマ画像の視点を調整し、前記視角調整パラメータに基づいて前記パノラマ画像の視角を調整するようにすることと、を実現するようにする、
請求項１３に記載の装置。
【請求項１５】
前記ディスクリプションパラメータは位置変化パラメータを含み、ここで、前記立体空間にＭ個のネットワークアクセスポイントが配置され、ここでＭが３以上であり、ここで、前記一つ以上のプロセッサが前記コンピュータでの読み取り可能な命令を実行し、
前記移動端末が基準点位置で受信された前記Ｍ個のネットワークアクセスポイントのＭ個の無線信号強度と、現在位置で受信された前記Ｍ個のネットワークアクセスポイントのＭ個の無線信号強度とに基づいて、前記基準点位置座標と前記現在位置座標とをそれぞれ確定することと、
前記基準点位置座標と前記現在位置座標とに基づいて、前記移動端末の立体空間における位置変化パラメータを確定することと、を実現するようにする、
請求項１３に記載の装置。
【請求項１６】
前記ディスクリプションパラメータは位置変化パラメータを含み、ここで、前記一つ以上のプロセッサが前記コンピュータでの読み取り可能な命令を実行し、
前記移動端末が複数の位置点で受信されたネットワークアクセスポイントの無線信号強度を確定し、各位置点座標とそれぞれに対応する無線信号強度と関連付けて記憶することと、
移動端末が基準点位置と現在位置でそれぞれ受信されたネットワークアクセスポイントの第１の無線信号強度と第２の無線信号強度とを確定し、記憶されている無線信号強度から前記第１の無線信号強度と第２の無線信号強度とに最も近い無線信号強度をそれぞれサーチし、サーチして得られた前記第１の無線信号強度と第２の無線信号強度とにそれぞれ最も近い無線信号強度に対応する位置点の位置座標を、基準点位置座標及び現在位置座標とすることと、
前記基準点位置座標と現在位置座標とに基づいて、前記移動端末の立体空間における位置変化パラメータを確定することと、を実現するようにする、
請求項１３に記載の装置。
【請求項１７】
前記ディスクリプションパラメータは姿勢変化パラメータを含み、ここで、前記一つ以上のプロセッサが前記コンピュータでの読み取り可能な命令を実行し、
ジャイロから取得されたセンサーパラメータに基づいて、前記移動端末の基準点偏向角度と現在の偏向角度とをそれぞれ確定することと、
前記移動端末の基準点偏向角度と現在の偏向角度とに基づいて、前記移動端末の姿勢変化パラメータを確定することと、を実現するようにする、
請求項１３に記載の装置。
【請求項１８】
前記一つ以上のプロセッサが前記コンピュータでの読み取り可能な命令を実行し、
メディアコンテンツサーバから送信された前記スマートテレビの現在表示されているパノラマ画像データを受信し、前記パノラマ画像を表示することと、を実現するようにする、
請求項１３に記載の装置。
【請求項１９】
前記一つ以上のプロセッサが前記コンピュータでの読み取り可能な命令を実行し、
メディアコンテンツサーバから送信された前記調整パラメータを受信することと、
前記調整パラメータに基づいて前記パノラマ画像を調整することと、を実現するようにする、
請求項１８に記載の装置。
【請求項２０】
前記一つ以上のプロセッサが前記コンピュータでの読み取り可能な命令を実行し、
メディアコンテンツサーバから送信されたリマインド情報を受信して表示し、前記リマインド情報は、前記移動端末を操作するように前記移動端末のユーザにリマインドするために用いられることと、を実現するようにする、
請求項１８又は１９に記載の装置。
【請求項２１】
パノラマ画像の表示制御装置であって、一つ以上のプロセッサと一つ以上のメモリとを含み、前記一つ以上のメモリがコンピュータでの読み取り可能な命令を含み、設定によって前記一つ以上のプロセッサで実行され、
移動端末により送信されたパノラマ画像トリガ命令を受信することと、
受信された前記パノラマ画像トリガ命令に応じて、前記移動端末にバインドされたスマートテレビに前記パノラマ画像トリガ命令を送信し、前記スマートテレビが現在表示されているメディアコンテンツに対応するパノラマ画像を表示するようにすることと、
前記移動端末により送信された前記移動端末の立体空間におけるディスクリプションパラメータを受信することと、
前記ディスクリプションパラメータに基づいて、前記パノラマ画像のパノラマ空間における調整パラメータを確定することと、
前記調整パラメータを前記スマートテレビに送信し、前記スマートテレビが前記調整パラメータに基づいて前記パノラマ画像を調整するようにすることと、を実現するようにする、
前記パノラマ画像の表示制御装置。
【請求項２２】
前記ディスクリプションパラメータは、位置変化パラメータと姿勢変化パラメータとを含み、前記調整パラメータは視角調整パラメータと視点調整パラメータとを含み、前記一つ以上のプロセッサが前記コンピュータでの読み取り可能な命令を実行し、
前記位置変化パラメータに基づいて、前記パノラマ画像のパノラマ空間における視点調整パラメータを確定し、前記姿勢変化パラメータに基づいて、前記パノラマ画像のパノラマ空間における視角調整パラメータを確定することと、
前記視点調整パラメータと前記視角調整パラメータとを前記スマートテレビに送信し、前記スマートテレビが前記視点調整パラメータに基づいて前記パノラマ画像の視点を調整し、前記視角調整パラメータに基づいて前記パノラマ画像の視角を調整するようにすることと、を実現するようにする、
請求項２１に記載の装置。
【請求項２３】
前記一つ以上のプロセッサが前記コンピュータでの読み取り可能な命令を実行し、
前記移動端末から送信された前記移動端末の第１の座標系データを受信し、当該第１の座標系によって取得したパラメータが前記移動端末の立体空間における位置座標と姿勢角度を示すために用いられることと、
前記スマートテレビから送信されたパノラマ空間内の第２の座標系データを受信し、当該第２の座標系によって取得したパラメータがパノラマ画像の視点と視角を示すために用いられることと、
前記第１の座標系データと前記第２の座標系データとに基づいて、前記第１の座標系におけるディスクリプションパラメータから前記第２の座標系における調整パラメータへのマッピング関係を確定することと、を実現するようにし、
ここで、前記ディスクリプションパラメータに基づいて、前記パノラマ画像のパノラマ空間における調整パラメータを確定することは、
前記マッピング関係と前記ディスクリプションパラメータとに基づいて、前記調整パラメータを確定すること、を含む、
請求項２１に記載の装置。
【請求項２４】
前記パノラマ画像に一つのターゲット対象が含まれ、ここで、前記一つ以上のプロセッサが前記コンピュータでの読み取り可能な命令を実行し、
前記調整パラメータと前記ターゲット対象の位置とに基づいて、リマインド情報を確定し、前記リマインド情報は、前記移動端末に対して操作を行うことをリマインドするために用いられることと、
前記リマインド情報を前記移動端末に送信して表示させることと、を実現するようにする、
請求項２１に記載の装置。
【請求項２５】
不揮発性コンピュータでの読み取り可能な記憶媒体であって、
前記記憶媒体に機械可読命令が記憶され、前記機械可読命令は、プロセッサによって実行され、請求項１〜１２のいずれか１項に記載の方法を実現するするようにする、
前記不揮発性コンピュータでの読み取り可能な記憶媒体。
【発明の詳細な説明】
【技術分野】
【０００１】
本出願は２０１７年３月２８日に中国特許庁に提出され、発明の名称が「パノラマ画像の表示制御方法及び装置」である出願番号２０１７１０１９１２５４．Ｘの中国特許出願の優先権を主張し、そのすべての内容が参照として本願に組み込まれる。
【０００２】
本発明はコンピュータ技術分野に関し、特にパノラマ画像の表示制御方法、装置及び記憶媒体に関する。
【背景技術】
【０００３】
パノラマとは、水平視角３６０°であり、垂直視角１８０°である画像である。パノラマ画像が立体感と現実感に富み、コストパフォーマンスの極めて高い仮想現実ソリューションである。パノラマ技術は人物の全体的な動きと人物との相互関係を十分に表現することができ、パノラマの中で、人物と環境が常に一体になり、人と景色が両方とも存在する生き生きとしている画像が生成することができる。
【０００４】
デジタルテレビの普及に伴い、ますます多くのデジタルテレビ端末が計算能力を有するようになり、しかもデジタル処理能力がますます高くなり、ネットワークテレビなどのような直接インターネットに接続することができるスマートテレビが現れる。当面のスマートテレビのビデオの画像の視角範囲が限られ、立体感が欠如しており、スマートテレビでのパノラマビデオの再生はますます多くの注目を集めている。
【発明の概要】
【課題を解決するための手段】
【０００５】
本出願の実施例では、パノラマ画像の表示制御方法を提供し、移動端末に適用され、
パノラマ画像トリガ操作に応じて、メディアコンテンツサーバにパノラマ画像トリガ命令を送信し、前記メディアコンテンツサーバが前記パノラマ画像トリガ命令を前記移動端末にバインドされたスマートテレビに送信するようにし、前記スマートテレビが現在表示されているメディアコンテンツに対応するパノラマ画像を表示するようにすることと、
前記移動端末に対する操作に応じて、前記移動端末の立体空間におけるディスクリプションパラメータを取得し、前記メディアコンテンツサーバに前記ディスクリプションパラメータを送信し、前記メディアコンテンツサーバが前記ディスクリプションパラメータに基づいて前記パノラマ画像のパノラマ空間における調整パラメータを確定し、前記調整パラメータを前記スマートテレビに送信するようにし、前記スマートテレビが前記調整パラメータに基づいて前記パノラマ画像を調整するようにすることと、を含む。
【０００６】
本出願の実施例では、パノラマ画像の表示制御方法をさらに提供し、メディアコンテンツサーバに適用され、
移動端末により送信されたパノラマ画像トリガ命令を受信することと、
受信された前記パノラマ画像トリガ命令に応じて、前記移動端末にバインドされたスマートテレビに前記パノラマ画像トリガ命令を送信し、前記スマートテレビが現在表示されているメディアコンテンツに対応するパノラマ画像を表示するようにすることと、
前記移動端末により送信された前記移動端末の立体空間におけるディスクリプションパラメータを受信することと、
前記ディスクリプションパラメータに基づいて、前記パノラマ画像のパノラマ空間における調整パラメータを確定することと、
前記調整パラメータを前記スマートテレビに送信し、前記スマートテレビが前記調整パラメータに基づいて前記パノラマ画像を調整するようにすることと、を含む。
【０００７】
本出願の実施例では、パノラマ画像の表示制御装置を提供し、一つ以上のプロセッサと一つ以上のメモリとを含み、前記一つ以上のメモリがコンピュータでの読み取り可能な命令を含み、設定によって前記一つ以上のプロセッサで実行され、
パノラマ画像トリガ操作に応じて、メディアコンテンツサーバにパノラマ画像トリガ命令を送信し、前記メディアコンテンツサーバが前記パノラマ画像トリガ命令を前記移動端末にバインドされたスマートテレビに送信するようにし、前記スマートテレビが現在表示されているメディアコンテンツに対応するパノラマ画像を表示するようにすることと、
前記移動端末に対する操作に応じて、前記移動端末の立体空間におけるディスクリプションパラメータを取得し、前記メディアコンテンツサーバに前記ディスクリプションパラメータを送信し、前記メディアコンテンツサーバが前記ディスクリプションパラメータに基づいて前記パノラマ画像のパノラマ空間における調整パラメータを確定し、前記調整パラメータを前記スマートテレビに送信するようにし、前記スマートテレビが前記調整パラメータに基づいて前記パノラマ画像を調整するようにすることと、を実現するようにする。
【０００８】
本出願の実施例では、パノラマ画像の表示制御装置をさらに提供し、一つ以上のプロセッサと一つ以上のメモリとを含み、前記一つ以上のメモリがコンピュータでの読み取り可能な命令を含み、設定によって前記一つ以上のプロセッサで実行され、
移動端末により送信されたパノラマ画像トリガ命令を受信することと、
受信された前記パノラマ画像トリガ命令に応じて、前記移動端末にバインドされたスマートテレビに前記パノラマ画像トリガ命令を送信し、前記スマートテレビが現在表示されているメディアコンテンツに対応するパノラマ画像を表示するようにすることと、
前記移動端末により送信された前記移動端末の立体空間におけるディスクリプションパラメータを受信することと、
前記ディスクリプションパラメータに基づいて、前記パノラマ画像のパノラマ空間における調整パラメータを確定することと、
前記調整パラメータを前記スマートテレビに送信し、前記スマートテレビが前記調整パラメータに基づいて前記パノラマ画像を調整するようにすることと、を実現するようにする。
【０００９】
本出願は、不揮発性コンピュータでの読み取り可能な記憶媒体をさらに提供し、ここで、前記記憶媒体に機械可読命令が記憶され、前記機械可読命令がプロセッサによって実行され、上記の方法を実施するようにする。
【００１０】
本出願に提供される上記の考案を採用し、パノラマ画像の調整がより柔軟になる。
【図面の簡単な説明】
【００１１】
【図１】本出願の実施例に係るシステムアーキテクチャ図である。
【図２】本出願の一つの実施例のサーバ側に応用するパノラマ画像の表示制御方法フローチャートである。
【図３】本出願の一つの実施例における移動端末でのパノラマ画像表示トリガオプション画面の図である。
【図４】本出願の一つの実施例におけるスマートテレビ表示前のパノラマ画像の概略図である。
【図５】本出願の一つの実施例におけるパノラマ画像を水平移動した後の概略図である。
【図６】本出願の一つの実施例におけるパノラマ画像を拡大した後の概略図である。
【図７】本出願の一つの実施例における空間座標系とパノラマ座標系をマッチングするフローチャートである。
【図８】本出願の一つの実施例における空間座標系とパノラマ空間座標系との概略図である。
【図９】本出願の一つの実施例におけるスマートテレビで表示されるイメージ識別コードの概略図である。
【図１０】本出願の一つの実施例における移動端末とスマートテレビとがパノラマ画像を同期を取って表示する概略図である。
【図１１】本出願の一つの実施例における移動端末がパノラマ画像を同期を取って表示すると同時にリマインド情報を表示する概略図である。
【図１２】本出願の一つの実施例におけるユーザがリマインド情報に従って移動端末を調整した後にターゲット対象を発見する概略図である。
【図１３】本出願の一つの実施例の移動端末側に応用するパノラマ画像の表示制御方法フローチャートである。
【図１４】本出願の一つの実施例のサーバ側に応用するパノラマ画像の表示制御装置の構成概略図である。
【図１５】本出願の一つの実施例の移動端末側に応用するパノラマ画像の表示制御装置の構成概略図である。
【図１６】本出願の実施例における計算装置構成概略図である。
【発明を実施するための形態】
【００１２】
下記において、本発明の実施例の図面を結合し、本発明の実施例の技術案を明確的、全面的に説明し、当然、説明されている実施例は、本発明の一部の実施例に過ぎず、全ての実施例ではない。本発明の実施例に基づいて、当業者は、創造的な労力を払わずに得られた全てのその他の実施例は、本発明の範囲内である。
【００１３】
本出願において、パノラマ画像視角調整方法及び装置を提供し、当該方法に係るシステムアーキテクチャが図１に示されている。当該システムアーキテクチャは、移動端末１０１、スマートテレビ１０２、メディアコンテンツサーバ１０３、及びインターネット１０４を含む。移動端末１０１とスマートテレビ１０２とは、インターネット１０４を介してメディアコンテンツサーバ１０３と接続する。
【００１４】
上記の移動端末１０１は、ユーザのスマートフォン又はＰＤＡ又はその他のユーザポータブルデバイスであっても良く、その中に各種のアプリケーションのクライアント側のソフトがインストールされ、ユーザは、上記の移動端末１０１によって、各種のアプリケーションのクライアント側に登録して使用することができ、当該アプリケーションのクライアント側はビデオ再生クライアントであっても良い。上記のインターネット１０４は、有線ネットワークと無線ネットワークを含むことが可能である。スマートテレビ１０２にはビデオ再生アプリケーションのクライアントがインストールされ、オンラインビデオリソース又はローカルビデオリソースを再生するために用いられることができる。
【００１５】
本出願においてパノラマ画像の表示制御方法を提供し、メディアコンテンツサーバ１０３に適用され、図２に示すように、主に下記のステップが含まれる
【００１６】
ステップ２０１において、移動端末により送信されたパノラマ画像トリガ命令を受信する。
【００１７】
ここでのパノラマ画像はパノラマピクチャーであっても良く、パノラマビデオであっても良い。まず、移動端末１０１をスマートテレビ１０２とバインディングさせ、パノラマ画像トリガ命令は、移動端末１０１とスマートテレビ１０２とのバインディング後に、移動端末１０１がメディアコンテンツサーバ１０３に送信されるバインディング確認命令であっても良い。例えば、移動端末がスマートテレビ上に表示されるイメージ識別コードをスキャンすることによって移動端末とスマートテレビとのバインディングを行い、移動端末が上記のイメージ識別コードをスキャンして識別すると同時に、メディアコンテンツサーバに前記パノラマ画像トリガ命令を送信する。メディアコンテンツサーバ１０３が、当該パノラマ画像トリガ命令を受信した後に、スマートテレビ１０２にパノラマ画像表示命令を送信し、スマートテレビがパノラマ画像を表示する。幾つかの実施例において、移動端末１０１がスマートテレビ１０２とバインディングされた後に、移動端末上でパノラマ画像のウェブページを自動的に開き、当該パノラマ画像のウェブページ上でスマートテレビと前記パノラマ画像を同期を取って表示する。
【００１８】
幾つかの実施例において、パノラマ画像トリガ命令はその他方式を採用しても良く、例えばスマートテレビ１０２はメディアコンテンツサーバ１０３にパノラマ画像再生リクエストを送信し、メディアコンテンツサーバは当該再生リクエストを移動端末に送信し、ユーザの選択に従ってパノラマ画像を表示するか否かを決定する。広告に関するパノラマ画像に対する表示を例にして、スマートテレビ１０２で広告を表示する時に、スマートテレビ１０２はメディアコンテンツサーバ１０３にパノラマ画像表示リクエストを送信し、メディアコンテンツサーバ１０３は、パノラマ画像を表示するか否かのリマインド情報を移動端末１０１に送信し、図３に示すように、移動端末１０１はインストールされたビデオＡＰＰに前記リマインド情報３０１を表示し、それと同時に肯定オプション３０２及び否定オプション３０３を表示する。ユーザがオプション３０２を選択した場合、移動端末１０１は、メディアコンテンツサーバ１０３に表示確認メッセージを送信し、メディアコンテンツサーバ１０３は、当該表示確認メッセージをスマートテレビ１０２に送信し、それによって、スマートテレビは広告のパノラマ画像を表示し、当該パノラマ画像はパノラマピクチャーであっても良く、パノラマビデオであっても良い。ユーザがオプション３０３を選択した場合、移動端末１０１は、メディアコンテンツサーバ１０３に表示確認メッセージを送信せず、対応するスマートテレビ１０２にパノラマ画像が表示されない。
【００１９】
ステップ２０２において、受信された前記パノラマ画像トリガ命令に応じて、前記移動端末にバインドされたスマートテレビに前記パノラマ画像トリガ命令を送信し、前記スマートテレビが現在表示されているメディアコンテンツに対応するパノラマ画像を表示するようにする。
【００２０】
スマートテレビは、パノラマ画像トリガ命令を受信した後に、現在表示されているメディアコンテンツに対応するパノラマ画像を表示し、ここでのパノラマ画像データは、前よりメディアコンテンツサーバ１０３からスマートテレビ１０２に送信されたものであっても良い。例えば、スマートテレビは、メディアコンテンツサーバ１０３にビデオをリクエストする時に、当該ビデオに広告が含まれ、メディアコンテンツサーバは、前記ビデオデータをスマートテレビに送信すると同時に、広告に対応する素材もスマートテレビを送信する。ここで、広告に対する出力は広告に対応するパノラマ画像又はパノラマビデオであっても良い。
【００２１】
ステップ２０３において、前記移動端末により送信された前記移動端末の立体空間におけるディスクリプションパラメータを受信する。ここで、前記ディスクリプションパラメータは、位置変化パラメータと姿勢変化パラメータとを含むことができる。
【００２２】
移動端末１０１が位置変化パラメータを取得するのは、室内の測位を利用して移動端末１０１の位置変化パラメータを取得することができ、具体的に、Ｗｉ−Ｆｉ室内の測位又はブルートゥース（登録商標）室内の測位を採用しても良い。具体的に、Ｗｉ−Ｆｉ室内の測位は、移動端末の受信された無線ネットワークアクセスポイントの無線信号強度によって、移動端末に対して測位することができる。あるＷｉ−Ｆｉホットスポットの座標が知られているとした場合、移動端末が当該Ｗｉ−Ｆｉホットスポットの信号を受信し、当該信号の強度が、Ｗｉ−Ｆｉホットスポットから移動端末までの距離と一定の関係が有され、それによって信号強度で移動端末と当該Ｗｉ−Ｆｉホットスポットとの距離を得ることができる。移動端末から三つ以上のＷｉ−Ｆｉホットスポットまでの距離は、これらのＷｉ−Ｆｉホットスポットの座標によって移動端末の座標を得ることができる。Ｗｉ−Ｆｉ室内の測位のもう一つの方式は指紋識別に似ており、複数のセマンティック位置を定義し、セマンティック位置毎にＷｉ−Ｆｉ信号を収集して「指紋ライブラリー」を生成する。測位時に、移動端末で測定したＷｉ−Ｆｉ信号を、生成された「指紋ライブラリー」内のＷｉ−Ｆｉ信号と対比し、この新しい信号が前記「指紋ライブラリー」内のどの位置のＷｉ−Ｆｉ信号と最もマッチングしているかを確認し、この場合、移動端末が当該位置に位置する可能性が一番大きいと見なす。
【００２３】
ブルートゥース（登録商標）室内の測位は、室内にいくつかのブルートゥース（登録商標）ローカルエリヤネットワークアクセスポイントを装着し、ネットワークを複数のユーザに基づく基礎ネットワーク接続モードに維持し、ブルートゥース（登録商標）ローカルエリヤネットワークアクセスポイントが常にこのピコネットのマスタデバイスであることを保ち、そして移動端末の受信されたブルートゥース（登録商標）信号の信号強度を測定することによって、移動端末の所在位置に対して三角測位を行う。
【００２４】
ユーザは移動端末を上下左右、左上、右下等の方向に任意に移動しても良く、移動端末を回転し、遠くに離し、又は近くに寄せても良く、上、下、左、右、左上、左下、右上、右下等の方向に移動すると同時に、遠くに離し、近くに寄せ、及び／又は回転する移動を行ってもよい。移動端末１０１の位置変化パラメータは、移動端末の以前の位置座標と現在の位置座標によって確定されることができ、ここで、移動端末の以前の位置座標と現在の位置座標は、Ｗｉ−Ｆｉ室内の測位又はブルートゥース（登録商標）室内の測位により得られる。前記移動端末１０１の基準点位置座標と現在位置座標とに基づいて、前記移動端末の立体空間における位置変化パラメータを確定する。
【００２５】
移動端末の姿勢変化パラメータの取得について、移動端末１０１にジャイロが設けられ、ジャイロが重力の方向、即ち垂直方向を提供することができる。ジャイロから取得されたセンサーパラメータに基づいて、前記移動端末の基準点における偏向角度と現在位置における偏向角度とをそれぞれ確定し、移動端末１０１の基準点における偏向角度と現在位置における偏向角度とに基づいて、移動端末１０１の姿勢変化パラメータを確定する。
【００２６】
移動端末は、位置変化パラメータ及び／又は姿勢変化パラメータを確定した後に、自身の位置変化パラメータ及び／又は姿勢変化パラメータを示すことができる。回転、移動等の操作行為に基づいて、移動端末は偏向角度変化、位置変化などの変化データを示す。例えば、移動端末を反時計方向へ３０°回転した場合、移動端末に数値−３０°が対応的に表示され、移動端末を左方向にＸ距離移動した場合、移動端末に−Ｘが対応的に表示され、左上方に直接移動した場合、左方向のＸ距離の移動、上方向のＹ距離の移動に分解し、データ（−Ｘ、Ｙ）が対応的に表示され、左方向にＸ距離を直接移動し、上方向にＹ距離を移動する同時に、スマートテレビへの方向にＺ距離を移動した場合、データ（−Ｘ、Ｙ、Ｚ）が対応的に表示され、立体空間においてその他の方向への移動は同様である。
【００２７】
ステップ２０４において、前記ディスクリプションパラメータに基づいて、前記パノラマ画像のパノラマ空間における調整パラメータを確定する。ここで、前記調整パラメータは視点調整パラメータと視角調整パラメータとを含むことができ、ディスクリプションパラメータ内の位置変化パラメータに基づいて、視点調整パラメータを確定することができ、ディスクリプションパラメータ内の姿勢変化パラメータに基づいて、視角調整パラメータを確定することができる。
【００２８】
パノラマ画像データを取得する時に、異なる撮影位置で３６０°のパノラマ画像又は７２０°のパノラマ画像を撮影し、異なる撮影位置が異なる視点に対応し、同時に当該視点座標を記録する。一つの固定の視点で、３６０°のパノラマ画像又は７２０°のパノラマ画像を撮影し、異なる角度が異なる視角に対応する。それによって一つの視点の三次元座標と視角のパノラマ座標ライブラリーが形成され、異なる視点と視角が異なるパノラマ画像に対応する。移動端末の立体空間内の第１の基準点をパノラマ空間内の第２の基準点に対応させ、移動端末の立体空間における座標と姿勢をパノラマ座標ライブラリー内の視点座標と視角に対応させる。移動端末の立体空間における基準点に対する位置変化パラメータ及び／又は姿勢変化パラメータに基づいて、移動端末の現在位置に対応するパノラマ画像の視点と視角のパノラマ空間における第２の基準点に対する視点変化パラメータと視角変化パラメータを確定することができる。
【００２９】
ステップ２０５において、前記調整パラメータを前記スマートテレビに送信し、前記スマートテレビが前記調整パラメータに基づいて前記パノラマ画像を調整するようにする。
メディアコンテンツサーバは、移動端末の現在位置に対応するパノラマ画像の視点と視角のパノラマ空間における第２の基準点に対する視点変化パラメータと視角変化パラメータを取得した後に、視角調整パラメータ及び／又は視点調整パラメータをスマートテレビを送信し、スマートテレビは、当該視角調整パラメータ及び／又は視点調整パラメータに基づいて、移動端末の現在位置に対応するパノラマ画像の視点と視角を確定し、そして当該視点と視角のパノラマ画像を表示する。
【００３０】
図４に示すように、スマートテレビに表示されているのは観光地の広告であり、スマートテレビに広告のパノラマ画像が表示されている。図５に示すように、移動端末を左方向にＸ移動し、上方向にＹ移動した後に、メディアコンテンツサーバは、データのマッチングによってパノラマ画像の視点が左方向にＸ１移動し、上方向にＹ１移動することを確定し、当該視点調整パラメータをスマートテレビに送信する。スマートテレビは、当該視点調整パラメータに基づいて、視点を左方向にＸ１移動し、上方向にＹ１移動した後に対応する視点のパノラマ画像を表示する。図６に示すように、移動端末を後ろにＺ移動した後に、メディアコンテンツサーバは、データのマッチングに基づいて、パノラマ画像の視点が後ろにＺ１移動され、当該視点調整パラメータをスマートテレビに送信する。スマートテレビは、当該視点調整パラメータに基づいて、視点を後ろにＺ１移動した後の視点のパノラマ画像を表示する。パノラマ画像の視点の前後方向の移動は、ユーザの視覚上において画像拡大、縮小の視覚効果があり、視点を後ろにＺ１移動した後に、パノラマ画像が対応する倍数を拡大して表示され、視点を前にＺ１移動した後に、パノラマ画像が対応する倍数を縮小して表示される。
【００３１】
本出願に提供されるパノラマ画像の表示制御方法を採用し、移動端末の立体空間における位置変化と姿勢変化によって、スマートテレビ上のパノラマ画像の視点と視角の調整を制御し、パノラマ画像の調整次元がより多く、より柔軟になる。ユーザがパノラマ画像を見るときに、ビデオカメラを持ちながら任意方向に移動してビデオを撮影するように自然になる。
【００３２】
本出願に提供されるパノラマ画像の表示制御方法は、例えば、広告のパノラマ画像表示の制御に応用することができる。例えば、車内装飾広告用パノラマビデオの表示において、スマートテレビにパノラマビデオを再生し、ユーザは、携帯電話によってスマートテレビに接続し、携帯電話の回転、移動（携帯電話をビデオカメラとして異なる位置に調整する）を制御することによって車内装飾の異なる角度の細部を見ることができる。本出願に提供されるパノラマ画像の表示制御方法は、広告だけではなく、ゲーム、例えば、射撃類のゲームにも応用することもできる。キャラクターの測位、空間内の奨励金、宝物、装備の探索等の補助に用いられることができる。移動端末はゲームのハンドルの代わりにも可能であり、携帯電話によってゲームのキャラクターの移動等を制御することができる。
【００３３】
幾つかの実施例において、ここで、前記ディスクリプションパラメータは、位置変化パラメータと姿勢変化パラメータとを含み、前記調整パラメータは視角調整パラメータと視点調整パラメータとを含み、
ここで、前記ディスクリプションパラメータに基づいて、前記パノラマ画像のパノラマ空間における調整パラメータを確定することは、
前記位置変化パラメータに基づいて、前記パノラマ画像のパノラマ空間における視点調整パラメータを確定し、前記姿勢変化パラメータに基づいて、前記パノラマ画像のパノラマ空間における視角調整パラメータを確定すること、を含み
ここで、前記調整パラメータを前記スマートテレビに送信し、前記スマートテレビが前記調整パラメータに基づいて前記パノラマ画像を調整するようにすることは、
前記視点調整パラメータと前記視角調整パラメータとを前記スマートテレビに送信し、前記スマートテレビが前記視点調整パラメータに基づいて前記パノラマ画像の視点を調整し、前記視角調整パラメータに基づいて前記パノラマ画像の視角を調整するようにすること、を含む。
【００３４】
当該実施例において、移動端末の立体空間におけるディスクリプションパラメータは、位置変化パラメータと姿勢変化パラメータとを含み、移動端末は、前記位置変化パラメータと前記姿勢変化パラメータとをメディアコンテンツサーバに送信する。メディアコンテンツサーバは、位置変化パラメータに基づいて視点調整パラメータを確定し、姿勢変化パラメータに基づいて視角調整パラメータを確定し、視点調整パラメータと視角調整パラメータをスマートテレビに送信する。スマートテレビは、視点調整パラメータに基づいてパノラマ画像の視点を調整し、視角調整パラメータに基づいてパノラマ画像の視角を調整する。
【００３５】
幾つかの実施例において、本出願で考案されたパノラマ画像の表示制御方法は、移動端末の立体空間における座標系をパノラマ空間におけるパノラマ座標系とマッチングすることをさらに含み、それによって、移動端末の三次元の空間における位置変化パラメータ及び／又は姿勢変化パラメータから、前記パノラマ画像の視角調整パラメータ及び／又は視点調整パラメータへのマッピング関係を確定する。図７に示すように、下記のステップを含む。
【００３６】
ステップ７０１において、前記移動端末から送信された前記移動端末の第１の座標系データを受信し、当該第１の座標系によって取得したパラメータが前記移動端末の立体空間における位置座標と姿勢角度を示すために用いられる。
【００３７】
移動端末の所在する立体空間に第１の座標系を確立し、当該第１の座標系は３つの座標軸を含み、即ちＸ軸、Ｙ軸、及びＺ軸であり、同時に一つの移動端末の回転軸を選択する。移動端末はスマートテレビを調整する時に、移動端末をスマートテレビと並行に置く。移動端末にジャイロが設けれら、ジャイロによって重力方向を知ることができ、図８に示すように、重力方向の所在する軸をＹ軸として定義し、Ｙ軸に垂直する面が水平面であり、当該水平面がスマートテレビのスクリーンと並行する軸をＸ軸として定義し、Ｘ軸に垂直し、かつテレビの平面に向かう軸をＺ軸として定義する。Ｘ軸は移動端末の左右方向での移動距離を表し、Ｙ軸は移動端末の上下方向での移動距離を表し、Ｚ軸は移動端末の前后方向での移動距離を表し、同時に移動端末１０１とスマートテレビ１０２との距離を表す。同時に第１の基準点を確定し、移動端末の位置変化パラメータが、移動端末の位置座標の当該第１の基準点に対する位置変化パラメータである。第１の基準点は、移動端末がスマートテレビを調整する前の初期位置であり、幾つかの実施例において、第１の座標系の座標原点を当該第１の基準点として定義することができ、それによって移動端末の位置変化パラメータを確定する際に、直接に移動端末の位置座標パラメータを位置変化パラメータとすることができ、それによって計算量を減少させる。移動端末がスマートテレビ上のパノラマ画像を調整する際に、ある固定位置で、移動端末は回転によって移動端末の姿勢を制御することができ、当該姿勢の変化によってパノラマ画像のある視点にける視角を制御することができる。パノラマ画像が３６０°のパノラマ画像である場合、移動端末の一つの平面内の回転によってパノラマ画像の異なる視角を制御することができ、パノラマ画像が７２０°のパノラマ画像である場合、移動端末の二つの平面内の回転によってパノラマ画像の異なる視角を制御することができる。幾つかの実施例において、上記のＸ軸、Ｙ軸、Ｚ軸のいずれか一つの軸を回転軸とすることができる。幾つかの実施例において、移動端末の前記第１の基準点における回転角度を０°として設定し、姿勢変化パラメータを確定する時に、直接に移動端末の所在位置における回転角度を姿勢変化パラメータとすることができ、それによって計算量を減少させる。第１の座標系データは主に３つの座標軸、座標原点、第１の基準点、及び移動端末の回転軸を含む。
【００３８】
ステップ７０２において、前記スマートテレビから送信されたパノラマ空間内の第２の座標系データを受信し、当該第２の座標系によって取得したパラメータがパノラマ画像の視点と視角を示すために用いられる。
【００３９】
パノラマ空間に第２の座標系を確立し、パノラマ画像の撮影の起点を第２の基準点として定義し、幾つかの実施例において、パノラマ空間座標系の原点を当該第２の基準点（第２の基準点与第２の座標系的原点重合）として定義する。デフォルトとして、パノラマ画像がテレビのスクリーンの所在垂直平面に位置され、水平面に平行するのがＸ軸であり、水平面に垂直するのがＹ軸であり、テレビスクリーンの所在平面に垂直するのがＺ軸である。Ｘ軸は視点の左右方向における移動距離を表し、Ｙ軸は視点の上下方向における移動距離を表し、Ｚ軸は視点の前后方向における移動距離を表す。パノラマ画像が３６０°のパノラマ画像である、一つの角度パラメータで視角を示し、パノラマ画像が７２０°のパノラマ画像である場合、二つの角度パラメータで視角を示す。第２の座標系データは、第２の座標系の３つの座標軸、座標原点、第２の基準点、及び視角を表す角度を含む。
【００４０】
ステップ７０３において、前記第１の座標系データと前記第２の座標系データとに基づいて、前記第１の座標系におけるディスクリプションパラメータから前記第２の座標系における調整パラメータへのマッピング関係を確定する。ここで、ディスクリプションパラメータは、位置変化パラメータ及び／又は姿勢変化パラメータを含み、調整パラメータは視点調整パラメータ及び／又は視角調整パラメータを含む。
【００４１】
メディアコンテンツサーバは、スマートテレビから送信されたパノラマ空間座標系データと移動端末の立体空間座標系データを受信し、パノラマ空間における第２の座標系を移動端末の第１の座標系とマッチングする。第１の座標系の第１の基準点を第２の座標系の第２の基準点に対応させ、第１の座標系のＸ、Ｙ、Ｚ軸を第２の座標系のＸ、Ｙ、Ｚ軸にそれぞれ対応させ、即ち、移動端末の左右方向における移動を、視点の左右方向における移動に対応させ、移動端末の上下方向における移動を視点の上下方向における移動に対応させ、移動端末の前后方向における移動を、視点の前后方向における移動に対応させ、視点の前后移動は、見るときの視覚効果上において、パノラマ画像拡大、縮小の視覚効果がある。移動端末の回転角度をパノラマ画像の視角に対応させ、パノラマ画像が３６０°のパノラマ画像である場合、移動端末の一つの平面内の回転角度をパノラマ画像の３６０°範囲内の視角に対応させ、パノラマ画像が７２０°のパノラマ画像である場合、移動端末の立体空間における回転角度を２つの平面上の回転角度に分解し、当該２つの平面上の回転角度をパノラマ画像の７２０°範囲内における視角に対応させる。また、前記マッピング関係は、第１の座標系と第２の座標系との寸法における対応関係をさらに含み、ユーザの腕の移動による移動端末の上下、左右、前后方向の移動可能距離、ユーザの腕の回転による移動端末１０１の回転可能角度、及びパノラマ画像の視点の左右方向、上下方向、前后方向上の移動可能距離範囲と視角範囲に基づいて、空間座標系の寸法とパノラマ空間における座標の寸法との対応関係を確定する。例えば、移動端末１０１を上下方向に距離ａ移動し、パノラマ画像が対応的に上下方向にａ１移動され、ａとａ１が線形比例関係になっており、比率の大きさは、ユーザの腕の上下方向における移動可能距離範囲とパノラマ画像の視点の上下方向における移動距離範囲とにより決定される。移動端末１０１を左右方向に距離ｂ移動し、パノラマ画像の視点が対応的に左右方向にｂ１移動され、ｂとｂ１とが線形比例関係になっており、比率の大きさは、ユーザの腕の左右方向における移動可能距離範囲とパノラマ画像の視点の左右方向における移動距離範囲とにより決定される。移動端末１０１を前后方向に距離ｃ移動し、パノラマ画像の視点が前后方向にｃ１移動され、ｃとｃ１とが線形比例関係になっており、比率の大きさは、于ユーザの腕の前后方向における移動可能距離範囲とパノラマ画像の視点の前后方向における移動距離範囲により決定される。移動端末を角度θ回転し、パノラマ画像の視角がθ１変わり、θとθ１とが線形比例関係になっており、比率の大きさは、ユーザの腕の回転可能角度範囲とパノラマ画像の視角範囲とにより決定される。
【００４２】
幾つかの実施例において、上記のステップ２０４において、前記ディスクリプションパラメータに基づいて、前記パノラマ画像のパノラマ空間における調整パラメータを確定することは、前記マッピング関係と前記ディスクリプションパラメータとに基づいて、前記調整パラメータを確定することを含む
【００４３】
移動端末１０１は得られた位置変化パラメータと姿勢変化パラメータとをメディアコンテンツサーバ１０３に送信する。メディアコンテンツサーバ１０３は、得られた移動端末１０１の空間座標系における位置変化パラメータと姿勢変化パラメータとに基づいて、同時に上記で確定された立体空間内の第１の座標系における位置パラメータ及び／又は姿勢パラメータから、前記パノラマ空間における視角調整パラメータ及び／又は視点調整パラメータへのマッピング関係に基づいて、パノラマ画像に対する調整パラメータを確定する。幾つかの実施例において、第１の基準点が第１の座標系の座標原点として定義され、移動端末の初期姿勢の回転角度が０°として定義され、例えば、図８に示すように、移動端末の図８における姿勢の回転角度を０°として定義する。第２の基準点が第２の座標系の座標原点（第２の基準点と第２の座標系の座標原点と一致する）として定義されても良く、スマートテレビに表示されるパノラマ画像の初期視角が０°として定義される。第１の基準点を第１の座標系の原点に設定し、移動端末の初期位置の回転角度を０°として設定した場合、位置変化パラメータと姿勢変化パラメータとは、まさしく移動端末の現在位置の位置座標と回転角度である。第２の基準点を第２の座標系の原点に設定し、移動端末に初期表示されるパノラマ画像の回転角度を０°として設定した場合、視角調整パラメータと視点調整パラメータとは、まさしくパノラマ画像の視角と視点である。上記のステップで確定されたマッピング関係に基づいて、移動端末の現在位置の座標に対応する視点を確定し、同時に移動端末の現在位置の回転角度に対応するパノラマ画像の視角を確定する。メディアコンテンツサーバは、確定された視点と視角とをスマートテレビに送信し、スマートテレビが前記確定された視点と視角のパノラマ画像を表示する。
【００４４】
幾つかの実施例において、本出願で考案されたパノラマ画像の表示制御方法は、移動端末をスマートテレビとバインディングすることをさらに含み、イメージ識別コードによって、移動端末をスマートテレビとバインディングすることができ、移動端末がスマートテレビのイメージ識別コードをスキャンしてバインディングを確立し、具体的に下記のステップを含む。
【００４５】
ステップＳ１１において、前記スマートテレビの識別子を含むイメージ識別コードを生成し、前記イメージ識別コードを当該スマートテレビに送信し、当該スマートテレビが前記イメージ識別コードを表示するようにする。
【００４６】
メディアコンテンツサーバ１０３は、スマートテレビ識別子を含むイメージ識別コードを生成し、前記イメージ識別コードを当該スマートテレビに送信し、当該スマートテレビが前記イメージ識別コードを表示するようにする。図９に示すように。当該イメージ識別コードは、スマートテレビの識別子を含むＱＲコード（登録商標）であってもよく、当該スマートテレビ識別子は、ネットワークテレビのＧＵＩＤであってもよい。スマートテレビは、それの表示装置、例えばスクリーンに前記イメージ識別コードを表示することができる。
【００４７】
ステップＳ１２において、前記移動端末が前記イメージ識別コードを識別してから送信されたバインディングリクエストメッセージを受信し、前記バインディングリクエストメッセージに当該移動端末の識別子と当該スマートテレビの識別子を含む。
【００４８】
移動端末は上記のスマートテレビのイメージ識別コードをスキャンして識別し、移動端末は移動端末自身のスキャン機能によって上記のイメージ識別コードをスキャンしてもよく、それのアプリケーションクライアント側に含まれるスキャン機能によって上記のイメージ識別コードをスキャンしてもよい。イメージ識別コードの識別が成功した後に、移動端末はメディアコンテンツサーバ１０３にバインディングリクエストメッセージを送信し、当該バインディングリクエストメッセージに移動端末の識別子とスマートテレビの識別子が含まれる。
【００４９】
ステップＳ１３において、当該移動端末の識別子と当該スマートテレビの識別子との対応関係を確立する。
【００５０】
メディアコンテンツサーバ１０３は上記のバインディングリクエストメッセージを受信した後に、移動端末識別子とスマートテレビ識別子との対応関係を確立し、当該対応関係を記憶する。同時にメディアコンテンツサーバ１０３はスマートテレビにバインディング成功メッセージを送信し、スマートテレビにバインディング成功メッセージを表示する。移動端末がイメージ識別コードの識別に失敗した場合、メディアコンテンツサーバ１０３にバインディング識別メッセージに送信し、メディアコンテンツサーバ１０３は当該バインディング識別メッセージをスマートテレビに送信して表示させ、スマートテレビはイメージ識別コードを再表示し、同時に再度スキャンするように促すためのリマインド情報を表示する。
【００５１】
幾つかの実施例において、上記のステップ２０２において、前記移動端末にバインドされたスマートテレビに前記パノラマ画像トリガ命令を送信することは下記のステップを含む。
【００５２】
ステップＳ２１において、前記対応関係に基づいて、前記移動端末の識別子に対応するスマートテレビの識別子を確定する。
【００５３】
上記のステップにおいて、メディアコンテンツサーバ１０３は、既に移動端末１０１識別子とスマートテレビ１０２識別子との対応関係を確立し、記憶している。メディアコンテンツサーバ１０３は、パノラマ画像トリガ命令を受信した後に、パノラマ画像トリガ命令に当該命令を送信する移動端末の識別子が含まれ、メディアコンテンツサーバは、当該移動端末の識別子に基づいて、記憶されている対応関係から前記移動端末識別子に対応するスマートテレビ識別子をサーチする。
【００５４】
ステップＳ２２において、前記パノラマ画像トリガ命令を前記スマートテレビの識別子に対応するスマートテレビに送信する。
【００５５】
メディアコンテンツサーバ１０３は、スマートテレビの識別子をサーチして得られた後に、パノラマ画像トリガ命令を当該スマートテレビ識別子に対応するスマートテレビに送信し、スマートテレビが現在表示されているメディアコンテンツに対応するパノラマ画像を表示するようにする。
【００５６】
幾つかの実施例において、本出願で考案されたパノラマ画像の表示制御方法は、移動端末とスマートテレビにおいてパノラマ画像を同期をとって表示すること、をさらに含み、移動端末はセカンダリスクリーンとして表示し、ユーザの閲覧に便利である。主に下記のステップを含む。
【００５７】
ステップＳ３１において、前記スマートテレビから送信された現在表示されているパノラマ画像データを受信する。
【００５８】
移動端末とスマートテレビとはパノラマ画像を同期をとって表示し、スマートテレビは、現在表示されているパノラマ画像をメディアコンテンツサーバにリアルタイムで送信することができ、同時にメディアコンテンツサーバは、受信されたパノラマ画像を移動端末に送信し、移動端末とスマートテレビとはパノラマ画像を同期をとって表示するようにする。
【００５９】
ステップＳ３２において、前記現在表示されているパノラマ画像データを前記移動端末に送信し、前記移動端末と前記スマートテレビとは前記パノラマ画像を同期をとって表示する。
【００６０】
図１０に示すように、移動端末とスマートテレビとはパノラマ画像を同期をとって表示し、移動端末にパノラマ画像を同期をとって表示し、一方は、移動端末上の表示装置をセカンダリスクリーンとすることが可能であり、もう一方は、インタラクションに便利であり、例えば、パノラマ画像がパノラマビデオである場合、移動端末上でパノラマビデオ再生のシークバーを制御することができる。
【００６１】
幾つかの実施例において、本出願で考案されたパノラマ画像の表示制御方法は、スマートテレビから送信された調整後のパノラマ画像をリアルタイムに受信するではなく、移動端末はそれの上で表示されているパノラマ画像を単独で調整すること、をさらに含む。主に、上記のステップ２０４の後に、前記パノラマ画像の調整パラメータを前記移動端末に送信し、前記移動端末が前記調整パラメータに基づいて前記パノラマ画像の視角及び／又は視点を調整すること、をさらに含む。
【００６２】
スマートテレビは、メディアコンテンツサーバから送信された再生パノラマ画像確認メッセージを受信してから、パノラマ画像データをメディアコンテンツサーバに送信してもよく、メディアコンテンツサーバは、それを移動端末に送信し、移動端末のＡＰＰで初期のパノラマ画像を表示する。幾つかの実施例において、移動端末に表示されているパノラマ画像ウェブページ（例えばＨ５ページ）で前記パノラマ画像を表示してもよく、当該パノラマ画像は調整していないパノラマ画像であってもよい。移動端末から送信された、パノラマ画像の単独調整のトリガーリクエストを受信した後に、移動端末は、受信されたスマートテレビの表示中のパノラマ画像に対して、後続の調整においてパノラマ画像を自ら独立して調整してもよい。その後の、メディアコンテンツサーバ１０３がスマートテレビにパノラマ画像の調整パラメータを送信する時に、移動端末１０１は、当該調整パラメータに基づいて、それの上に表示されているパノラマ画像に対して調整し、アプリケーションサーバは、前記調整パラメータに基づいて確定されたパノラマ画像を移動デバイスに送信して表示させてもよい。移動端末１０１とスマートテレビとは、パノラマ画像を同期をとって表示し、同時にパノラマ画像を同期をとって調整する。
【００６３】
幾つかの実施例において、本出願で考案されたパノラマ画像の表示制御方法は、ここで、前記パノラマ画像に一つのターゲット対象が含まれ、当該ターゲット対象は、広告画像内の一枚割引券、ゲーム内のパノラマ画像内の敵、キー、道具などであってもよい。
【００６４】
前記方法は、ステップＳ４１をさらに含む。
【００６５】
ステップＳ４１において、前記調整パラメータと前記ターゲット対象の位置とに基づいて、リマインド情報を確定し、前記リマインド情報は、前記移動端末に対して操作を行うことをリマインドするために用いられる。当該ステップを実行する時に、前記視角調整パラメータ及び／又は視点調整パラメータと前記ターゲット対象の位置とに基づいてリマインド情報を確定し、前記リマインド情報は、前記移動端末に対する移動及び／又は回転操作をリマインドするために用いられる。
【００６６】
移動端末とスマートテレビとは、パノラマ画像を同期をとって表示する場合、パノラマ画像を提供する側は、パノラマ画像に一つのターゲット対象を設置することができる。メディアコンテンツサーバは、ターゲット対象の所在位置とスマートテレビ現在表示されているパノラマ画像とに基づいて、リマインド情報を確定し、当該リマインド情報は、ユーザのパノラマ画像からターゲット対象の発見を手伝う。例えば、広告パノラマ画像を例として説明すると、移動端末とスマートテレビとはパノラマ画像を同期をとって表示し、現在のパノラマ画像を２倍拡大したら、ユーザがターゲット対象を発見することができ、その場合、ビデオサーバは、２倍を拡大するようなリマインド情報を移動端末に送信して表示させ、図１１に示すように、移動端末に広告のパノラマ画像を表示し、ここでの広告は、観光スポットの広告である。同時に移動端末にリマインド情報１１０１を表示し、当該リマインド情報１１０１は、２倍拡大したらサプライズがあることをユーザにリマインドする。
【００６７】
ステップＳ４２において、前記リマインド情報を前記移動端末に送信して表示させる。それによって、ユーザは前記リマインド情報に基づいて、前記移動端末を移動及び／又は回転する。
【００６８】
また上記の例に示されているように、移動端末に「２倍拡大したらサプライズがある」というリマインド情報を表示する。ユーザは移動端末をスマートテレビに近づき、２倍拡大した後に、図１２に示すように、スマートテレビ１０２上で割引券１２０２を見つけ、移動端末上で割引券１２０２が同期をとって表示され、同時に割引券発見というリマインド情報１２０１が表示される。ユーザは、移動端末でボタン１２０３、即ち、図１２内の「ギリシャへの旅しよう」ボタン（コントロール）を押下して割引チケットを購入することができ、さらに割引券の共有などのインタラクションも可能である。
【００６９】
本出願はパノラマ画像の表示制御方法をさらに提供し、移動端末１０１に適用され、図１３に示すように、主に下記のステップを含む。
【００７０】
ステップ１３０１において、パノラマ画像トリガ操作に応じて、メディアコンテンツサーバにパノラマ画像トリガ命令を送信し、前記メディアコンテンツサーバが前記パノラマ画像トリガ命令を前記移動端末にバインドされたスマートテレビに送信するようにし、前記スマートテレビが現在表示されているメディアコンテンツに対応するパノラマ画像を表示するようにする。
【００７１】
ステップ１３０２において、前記移動端末に対する操作に応じて、前記移動端末の立体空間におけるディスクリプションパラメータを取得し、前記メディアコンテンツサーバに前記ディスクリプションパラメータを送信し、前記メディアコンテンツサーバが前記ディスクリプションパラメータに基づいて前記パノラマ画像のパノラマ空間における調整パラメータを確定し、前記調整パラメータを前記スマートテレビに送信するようにし、前記スマートテレビが前記調整パラメータに基づいて前記パノラマ画像を調整するようにする。
【００７２】
本出願に提供されたパノラマ画像の表示制御方法を採用し、移動端末の立体空間における位置変化と姿勢変化によって、スマートテレビ上のパノラマ画像の視点と視角の調整を制御する。パノラマ画像の調整次元がより多くなり、より柔軟になる。ユーザがパノラマ画像を見るときに、ビデオカメラを持ちながら任意方向に移動してビデオを撮影するように自然になる。
【００７３】
幾つかの実施例において、ここで、前記ディスクリプションパラメータは、位置変化パラメータと姿勢変化パラメータとを含み、前記調整パラメータは視角調整パラメータと視点調整パラメータとを含み、
【００７４】
ここで、前記移動端末に対する操作に応じて、前記移動端末の立体空間におけるディスクリプションパラメータを取得することは、
前記移動端末に対する移動操作に応じて、前記位置変化パラメータを取得し、前記移動端末に対する回転操作に応じて、前記姿勢変化パラメータを取得することを含み、
ここで、前記ディスクリプションパラメータを前記メディアコンテンツサーバに送信し、前記メディアコンテンツサーバが前記ディスクリプションパラメータに基づいて前記パノラマ画像のパノラマ空間における調整パラメータを確定し、前記調整パラメータを前記スマートテレビに送信するようにし、前記スマートテレビが前記調整パラメータに基づいて前記パノラマ画像を調整するようにすることは、
前記位置変化パラメータと前記姿勢変化パラメータと前記メディアコンテンツサーバに送信し、前記メディアコンテンツサーバが前記位置変化パラメータに基づいて、前記パノラマ画像のパノラマ空間における視点調整パラメータを確定し、前記姿勢変化パラメータに基づいて、前記パノラマ画像のパノラマ空間における視角調整パラメータを確定し、前記視点調整パラメータと前記視角調整パラメータとを前記スマートテレビに送信するようにし、前記スマートテレビが前記視点調整パラメータに基づいて前記パノラマ画像の視点を調整し、前記視角調整パラメータに基づいて前記パノラマ画像の視角を調整するようにすることを含む。
【００７５】
幾つかの実施例において、上記のステップ１３０１において、前記ユーザのパノラマ画像トリガ操作に応じることは、ユーザの表示パノラマ画像オプションに対する選択操作に応答することを含み、それとバインディングされているスマートテレビ上のイメージ識別コードを識別することも含むことができる。
【００７６】
まず、移動端末１０１をスマートテレビ１０２とバインディングさせ、パノラマ画像トリガ命令は、移動端末１０１とスマートテレビ１０２とのバインディング後に、移動端末１０１がメディアコンテンツサーバ１０３に送信されるバインディング確認命令であっても良い。例えば、移動端末がスマートテレビ上に表示されるイメージ識別コードをスキャンすることによって移動端末とスマートテレビとのバインディングを行い、移動端末が上記のイメージ識別コードをスキャンして識別すると同時に、メディアコンテンツサーバに前記パノラマ画像トリガ命令を送信する。メディアコンテンツサーバ１０３が、当該パノラマ画像トリガ命令を受信した後に、スマートテレビ１０２にパノラマ画像表示命令を送信し、スマートテレビがパノラマ画像を表示する。幾つかの実施例において、移動端末１０１がスマートテレビ１０２とバインディングされた後に、移動端末上でパノラマ画像のウェブページを自動的に開き、当該パノラマ画像のウェブページ上でスマートテレビと前記パノラマ画像を同期を取って表示する。
【００７７】
幾つかの実施例において、パノラマ画像トリガ命令はその他方式を採用しても良く、例えばスマートテレビ１０２はメディアコンテンツサーバ１０３にパノラマ画像再生リクエストを送信し、メディアコンテンツサーバは当該再生リクエストを移動端末に送信し、ユーザの選択に従ってパノラマ画像を表示するか否かを決定する。広告に関するパノラマ画像に対する表示を例にして、スマートテレビ１０２で広告を表示する時に、スマートテレビ１０２はメディアコンテンツサーバ１０３にパノラマ画像表示リクエストを送信し、メディアコンテンツサーバ１０３は、パノラマ画像を表示するか否かのリマインド情報を移動端末１０１に送信し、図３に示すように、移動端末１０１はインストールされたビデオＡＰＰに前記リマインド情報３０１を表示し、それと同時に肯定オプション３０２及び否定オプション３０３を表示する。ユーザがオプション３０２を選択した場合、移動端末１０１は、メディアコンテンツサーバ１０３に表示確認メッセージを送信し、メディアコンテンツサーバ１０３は、当該表示確認メッセージをスマートテレビ１０２に送信し、それによって、スマートテレビは広告のパノラマ画像を表示し、当該パノラマ画像はパノラマピクチャーであっても良く、パノラマビデオであっても良い。ユーザがオプション３０３を選択した場合、移動端末１０１は、メディアコンテンツサーバ１０３に表示確認メッセージを送信せず、対応するスマートテレビ１０２にパノラマ画像が表示されない。
【００７８】
幾つかの実施例において、上記のステップ１３０２において、前記移動端末の立体空間における位置変化パラメータを取得する時に、移動端末１０１が位置変化パラメータを取得するのは、室内の測位を利用して移動端末１０１の位置変化パラメータを取得することができる。具体的に、Ｗｉ−Ｆｉ室内の測位又はブルートゥース（登録商標）室内の測位を採用して前記位置変化パラメータを得ることができる。具体的に、Ｗｉ−Ｆｉ室内の測位は、移動端末の受信された無線ネットワークアクセスポイントの無線信号強度によって、移動端末に対して測位することができる。あるＷｉ−Ｆｉホットスポットの座標が知られているとした場合、移動端末が当該Ｗｉ−Ｆｉホットスポットの信号を受信し、当該信号の強度が、Ｗｉ−Ｆｉホットスポットから移動端末までの距離と一定の関係が有され、それによって信号強度で移動端末と当該Ｗｉ−Ｆｉホットスポットとの距離を得ることができる。移動端末から三つ以上のＷｉ−Ｆｉホットスポットまでの距離に基づいて、移動端末の座標を確定することができる。ここで、前記立体空間にＭ個のネットワークアクセスポイントが配置され、ここでＭが３以上である。
【００７９】
前記移動端末の立体空間におけるディスクリプションパラメータを取得することは下記のステップを含む。
【００８０】
ステップＳ５１において、Ｍ個のネットワークアクセスポイントを設置し、ここでＭが３以上である。立体空間に前記Ｍ個のネットワークアクセスポイントを設置する。
【００８１】
ステップＳ５２において、前記移動端末の基準点位置と現在位置で受信されたそれぞれの前記Ｍ個のネットワークアクセスポイントのＭ個の無線信号強度に基づいて、前記基準点位置座標と現在位置座標とをそれぞれ確定し、即ち、前記移動端末が基準点位置で受信された前記Ｍ個のネットワークアクセスポイントのＭ個の無線信号強度と、現在位置で受信された前記Ｍ個のネットワークアクセスポイントのＭ個の無線信号強度とに基づいて、前記基準点位置座標と前記現在位置座標とをそれぞれ確定する。
【００８２】
ステップＳ５３において、前記基準点位置座標と前記現在位置座標とに基づいて、前記移動端末の立体空間における位置変化パラメータを確定する。
【００８３】
幾つかの実施例において、上記のステップ１３０２において、前記移動端末の立体空間における位置変化パラメータを取得する時に、移動端末１０１が位置変化パラメータを取得するのにＷｉ−Ｆｉ室内の測位のもう一つの方式を採用してもよく、指紋識別に似ており、複数のセマンティック位置を定義し、セマンティック位置毎にＷｉ−Ｆｉ信号を収集して「指紋ライブラリー」を生成する。測位時に、移動端末で測定したＷｉ−Ｆｉ信号を、生成された「指紋ライブラリー」内のＷｉ−Ｆｉ信号と対比し、この新しい信号が前記「指紋ライブラリー」内のどの位置のＷｉ−Ｆｉ信号と最もマッチングしているかを確認し、この場合、移動端末が当該位置に位置する可能性が一番大きいと見なす。具体的に主に下記のステップを含む。
【００８４】
ステップＳ６１において、前記移動端末が複数の位置点で受信されたネットワークアクセスポイントの無線信号強度を確定し、位置点座標と位置点座標に対応する無線信号強度とを関連付けて記憶する。
【００８５】
ステップＳ６２において、移動端末が基準点位置と現在位置でそれぞれ受信されたネットワークアクセスポイントの第１の無線信号強度と第２の無線信号強度とを確定し、記憶されている無線信号強度から前記第１の無線信号強度と第２の無線信号強度とに最も近い無線信号強度をそれぞれサーチし、サーチして得られた前記第１の無線信号強度と第２の無線信号強度とにそれぞれ最も近い無線信号強度に対応する位置点の位置座標を、それぞれ基準点位置座標と現在位置座標とする。
【００８６】
ステップＳ６３において、前記基準点位置座標と現在位置座標とに基づいて、前記移動端末の立体空間における位置変化パラメータを確定する。
【００８７】
ブルートゥース（登録商標）室内の測位は、室内にいくつかのブルートゥース（登録商標）ローカルエリヤネットワークアクセスポイントを装着し、ネットワークを複数のユーザに基づく基礎ネットワーク接続モードに維持し、ブルートゥース（登録商標）ローカルエリヤネットワークアクセスポイントが常にこのピコネットのマスタデバイスであることを保ち、そして信号強度を測定することによって、新しく加入されたブラインドノードに対して三角測位を行う。
【００８８】
ユーザは移動端末を上下左右、左上、右下等の方向に任意に移動しても良く、移動端末を回転し、遠くに離し、又は近くに寄せても良く、上、下、左、右、左上、左下、右上、右下等の方向に移動すると同時に、遠くに離し、近くに寄せ、及び／又は回転する移動を行ってもよい。移動端末１０１の位置変化パラメータは、移動端末の以前の位置座標と現在の位置座標によって確定されることができ、ここで、移動端末の以前の位置座標と現在の位置座標は、Ｗｉ−Ｆｉ室内の測位又はブルートゥース（登録商標）室内の測位により得られる。前記移動端末１０１の基準点位置座標と現在位置座標とに基づいて、前記移動端末の立体空間における位置変化パラメータを確定する。
【００８９】
幾つかの実施例において、上記のステップ１３０２において、前記移動端末の立体空間における姿勢変化パラメータを取得する時に、移動端末１０１ジャイロが設けられ、ジャイロが重力の方向、即ち垂直方向を提供することができる。ジャイロから取得されたセンサーパラメータに基づいて、前記移動端末の基準点偏向角度と現在の偏向角度とをそれぞれ確定し、移動端末１０１の基準点偏向角度と現在の偏向角度とに基づいて、移動端末１０１の姿勢変化パラメータを確定する。具体的に主に下記のステップを含む。
【００９０】
ステップＳ７１において、ジャイロから取得されたセンサーパラメータに基づいて、前記移動端末の基準点偏向角度と現在の偏向角度とをそれぞれ確定する。
【００９１】
ステップＳ７２において、前記移動端末の基準点偏向角度と現在の偏向角度とに基づいて、前記移動端末の姿勢変化パラメータを確定する。
【００９２】
また、幾つかの実施例において、移動端末は、位置変化パラメータ及び／又は姿勢変化パラメータを確定した後に、自身の位置変化パラメータ及び／又は姿勢変化パラメータを表示することができる。回転、移動等の操作行為に基づいて、移動端末のユーザインターフェースに角度、位置などの変化データが表示される。例えば、反時計方向へ３０°回転した場合、数値−３０°が対応的に表示され、移動端末１０１を左方向にＸ距離移動した場合、携帯電話に対応的に−Ｘが表示され、左上方に直接移動した場合、左方向のＸ距離の移動＋上方向のＹ距離の移動に分解し、データ（−Ｘ、Ｙ）が対応的に表示され、立体空間においてその他の方向への移動は同様である。
【００９３】
幾つかの実施例において、本出願で考案されたパノラマ画像の表示制御方法は、移動端末とスマートテレビにパノラマ画像を同期をとって表示することがさらに含み、移動端末の表示装置をセカンダリスクリーンとして、ユーザの閲覧に便利である。主に、メディアコンテンツサーバから送信された前記スマートテレビの現在表示されているパノラマ画像データを受信し、前記パノラマ画像を表示することを含む。
【００９４】
移動端末とスマートテレビとはパノラマ画像を同期をとって表示し、スマートテレビは、現在表示されているパノラマ画像をメディアコンテンツサーバにリアルタイムで送信することができ、同時にメディアコンテンツサーバは、受信されたパノラマ画像を移動端末に送信し、移動端末とスマートテレビとはパノラマ画像を同期をとって表示するようにする。図１０に示すように、移動端末とスマートテレビとはパノラマ画像を同期をとって表示し、移動端末にパノラマ画像を同期をとって表示し、一方は、移動端末上の表示装置をセカンダリスクリーンとすることが可能であり、もう一方は、インタラクションに便利であり、例えば、パノラマ画像がパノラマビデオである場合、移動端末上でパノラマビデオ再生のシークバーを制御することができる。
【００９５】
幾つかの実施例において、本出願で考案されたパノラマ画像の表示制御方法は、スマートテレビから送信された調整後のパノラマ画像をリアルタイムに受信するではなく、移動端末はそれの上で表示されているパノラマ画像を単独で調整すること、をさらに含む。主に、上記のステップ２０４の後に、さらに下記のステップを含む。
【００９６】
ステップＳ８１において、メディアコンテンツサーバから送信された調整パラメータを受信する。
【００９７】
スマートテレビは、メディアコンテンツサーバから送信された再生パノラマ画像確認メッセージを受信してから、パノラマ画像データをメディアコンテンツサーバに送信してもよく、メディアコンテンツサーバは、それを移動端末に送信し、移動端末のＡＰＰで初期のパノラマ画像を表示する。幾つかの実施例において、移動端末上のパノラマ画像ウェブページで前記パノラマ画像を表示してもよく、当該パノラマ画像は調整していないパノラマ画像である。幾つかの実施例において、ユーザのパノラマ画像を単独調整するトリガーリクエストを受信した後に、移動端末は、受信されたスマートテレビの表示中のパノラマ画像に対して、後続の調整においてパノラマ画像を自ら独立して調整してもよい。
【００９８】
ステップＳ８２において、前記調整パラメータに基づいて前記パノラマ画像を調整する。即ち、視角調整パラメータに基づいて、パノラマ画像の視角を調整し、視点調整パラメータに基づいて、パノラマ画像の視点を調整する。
【００９９】
後続にメディアコンテンツサーバ１０３がスマートテレビに調整パラメータを送信する時に、同時に移動端末に当該調整パラメータを送信し、移動端末は、当該調整パラメータに基づいて、それに表示されているパノラマ画像の視点と視角を調整する。移動端末１０１とスマートテレビとはパノラマ画像が同期をとって表示され、パノラマ画像を同時に同期をとって調整する。
【０１００】
幾つかの実施例において、本出願で考案されたパノラマ画像の表示制御方法は、メディアコンテンツサーバから送信されたリマインド情報を受信して表示することをさらに含み、前記リマインド情報が前記移動端末を操作（移動又は回転）するように前記移動端末のユーザにリマインドするために用いられる。ユーザが前記リマインド情報に基づいて、前記移動端末を移動又は回転するようにする。
【０１０１】
例えば、広告パノラマ画像を例として説明すると、移動端末とスマートテレビとはパノラマ画像を同期をとって表示し、移動端末にリマインド情報を表示し、リマインド情報は、２倍拡大したらサプライズがあることをユーザにリマインドする。ユーザは移動端末をスマートテレビに近づき、２倍拡大した後に、図１２に示すように、スマートテレビ１０２上で割引券を見つけ、移動端末上で割引券が同期をとって表示され、ユーザは、移動端末で「ギリシャへの旅しよう」ボタンを押下して割引チケットを購入することができ、さらに割引券の共有などのインタラクションも可能である。
【０１０２】
本出願は、パノラマ画像の表示制御装置１４００をさらに提供し、メディアコンテンツサーバ１０３に適用され、図１４に示すように、かきのユニットを含む。
【０１０３】
トリガー命令受信ユニット１４０１は、移動端末により送信されたパノラマ画像トリガ命令を受信するために用いられる。
【０１０４】
トリガー命令送信ユニット１４０２は、受信された前記パノラマ画像トリガ命令に応じて、前記移動端末にバインドされたスマートテレビに前記パノラマ画像トリガ命令を送信し、前記スマートテレビが現在表示されているメディアコンテンツに対応するパノラマ画像を表示するようにするために用いられる。
【０１０５】
位置姿勢変化パラメータ受信ユニット１４０３は、前記移動端末から送信された前記移動端末の立体空間における位置変化パラメータ及び／又は姿勢変化パラメータを受信するために用いられる。
【０１０６】
調整パラメータ確定ユニット１４０４は、前記位置変化パラメータ及び／又は姿勢変化パラメータに基づいて、前記パノラマ画像のパノラマ空間における視角調整パラメータ及び／又は視点調整パラメータを確定するために用いられる。
【０１０７】
調整パラメータ送信ユニット１４０５は、前記視角調整パラメータ及び／又は視点調整パラメータを前記スマートテレビに送信し、前記スマートテレビが前記視角調整パラメータ及び／又は視点調整パラメータに基づいて、前記パノラマ画像の視角及び／又は視点を調整するために用いられる。
【０１０８】
本出願に提供されるパノラマ画像の表示制御装置を採用し、移動端末の立体空間における位置変化及び姿勢変化によって、スマートテレビ上のパノラマ画像の視点及び視角の調整を制御し、パノラマ画像の視点と視角を同時に調整することができ、パノラマ画像に対する調整次元がより多く、より柔軟になる。同時にユーザがパノラマ画像を見るときに、ビデオカメラを持ちながら任意方向に移動してビデオを撮影するように自然になる。
【０１０９】
幾つかの実施例において、前記装置１４００は、さらに、下記のユニットを含む。
【０１１０】
座標系パラメータ受信ユニット１４０６は、前記移動端末から送信された前記移動端末の第１の座標系データを受信し、前記スマートテレビから送信されたパノラマ空間内の第２の座標系データを受信するために用いられ、当該第１の座標系が前記移動端末の立体空間における位置座標と姿勢角度を表すために用いられ、当該第２の座標系がパノラマ画像の視点と視角を表すために用いられ、異なる視点と視角が異なるパノラマ画像に対応する。
【０１１１】
マッピング関係確定ユニット１４０７は、前記第１の座標系データと前記第２の座標系データとに基づいて、前記第１の座標系における位置変化パラメータ及び／又は姿勢変化パラメータから前記第２の座標系における視角調整パラメータ及び／又は視点調整パラメータへのマッピング関係を確定するために用いられる。
【０１１２】
前記調整パラメータ確定ユニット１４０４は、前記マッピング関係と前記位置変化パラメータ及び／又は姿勢変化パラメータに基づいて、前記視角調整パラメータ及び／又は視点調整パラメータを確定するために用いられる。
【０１１３】
本出願は、パノラマ画像の表示制御装置１５００をさらに提供し、移動端末１０１に適用され、図１５に示すように、下記のユニットを含む。
【０１１４】
トリガー命令送信ユニット１５０１は、ユーザのパノラマ画像トリガ操作に応じて、メディアコンテンツサーバにパノラマ画像トリガ命令を送信し、前記メディアコンテンツサーバが前記パノラマ画像トリガ命令を前記スマートテレビに送信するようにし、前記スマートテレビが現在表示されているメディアコンテンツに対応するパノラマ画像を表示するようにするために用いられる。
【０１１５】
位置姿勢変化パラメータ取得ユニット１５０２は、前記ユーザの移動及び／又は回転操作に応じて、自身の立体空間における位置変化パラメータ及び／又は姿勢変化パラメータを取得し、それを前記メディアコンテンツサーバに送信し、前記メディアコンテンツサーバが前記位置変化パラメータ及び／又は姿勢変化パラメータに基づいて、前記パノラマ画像のパノラマ空間における視角調整パラメータ及び／又は視点調整パラメータを確定し、それを前記スマートテレビに送信し、前記スマートテレビが前記視角調整パラメータ及び／又は視点調整パラメータに基づいて、前記パノラマ画像の視角及び／又は視点を調整するようにするために用いられる。
【０１１６】
本出願に提供されるパノラマ画像の表示制御装置を採用し、移動端末の立体空間における位置変化及び姿勢変化によって、スマートテレビ上のパノラマ画像の視点及び視角の調整を制御し、パノラマ画像の視点と視角を同時に調整することができ、パノラマ画像に対する調整次元がより多く、より柔軟になる。同時にユーザがパノラマ画像を見るときに、ビデオカメラを持ちながら任意方向に移動してビデオを撮影するように自然になる。
【０１１７】
幾つかの実施例において、前記位置姿勢変化パラメータ取得ユニット１５０２は、
３以上であるＭ個のネットワークアクセスポイントを設置し、
前記移動端末の基準点位置と現在位置で受信されたそれぞれの前記Ｍ個のネットワークアクセスポイントのＭ個の無線信号強度に基づいて、前記基準点位置座標と現在位置座標とをそれぞれ確定し、
前記基準点位置座標と現在位置座標とに基づいて、前記移動端末の立体空間における位置変化パラメータを確定するために用いられる。
【０１１８】
幾つかの実施例において、前記位置姿勢変化パラメータ取得ユニット１５０２は、
複数の位置点で受信されたネットワークアクセスポイントの無線信号の強度を確定し、位置点座標と対応する無線信号強度とを記憶し、
移動端末の基準点位置と現在位置で受信されたネットワークアクセスポイントの第１の無線信号強度と第２の無線信号強度を確定し、記憶されている無線信号強度から前記第１の無線信号強度と第２の無線信号強度とに最も近い無線信号強度をそれぞれサーチし、サーチして得られた前記第１の無線信号強度と第２の無線信号強度とにそれぞれ最も近い無線信号強度に対応する位置点の位置座標を、基準点位置座標及び現在位置座標とし、
前記基準点位置座標と現在位置座標とに基づいて、前記移動端末の立体空間における位置変化パラメータを確定するために用いられる。
【０１１９】
幾つかの実施例において、前記位置姿勢変化パラメータ取得ユニット１５０２は、
ジャイロから取得されたセンサーパラメータに基づいて、前記移動端末の基準点偏向角度と現在の偏向角度とをそれぞれ確定し、
前記移動端末の基準点偏向角度と現在の偏向角度とに基づいて、前記移動端末の姿勢変化パラメータを確定するために用いられる。
【０１２０】
図１６には、パノラマ画像の表示制御装置１４００とパノラマ画像の表示制御装置１５００との所在する計算装置の構成図が示されている。図１６に示すように、当該計算装置は、一つ又は複数のプロセッサ（ＣＰＵ）１６０２、通信モジュール１６０４、メモリ１６０６、ユーザインターフェース１６１０、及びこれらのモジュールを互いに接続するための通信バス１６０８を含む。
【０１２１】
プロセッサ１６０２は、通信モジュール１６０４によってデータを送受信することができ、ネットワーク通信及び／又はローカル通信を実現するようにする。
【０１２２】
ユーザインターフェース１６１０は一つ又は複数の出力デバイス１６１２を含み、一つ又は複数のスピーカー及び／又は一つ又は複数の可視化のディスプレイを含む。ユーザインターフェース１６１０は、一つ又は複数の入力デバイス１６１４も含み、例えば、キーボード、マウス、音声命令入力ユニット又は拡声器、タッチスクリーンディスプレイ、タッチセンシティブタブレット、姿勢キャプチャカメラ又はその他の入力ボタン又はコントローラー等を含む。
【０１２３】
メモリ１６０６は、ＤＲＡＭ、ＳＲＡＭ、ＤＤＲ  ＲＡＭ、又はその他のランダムアクセス固体記憶装置などの高速ランダムアクセスメモリ、又は１つまたは複数の磁気ディスク記憶装置、光ディスク記憶装置、フラッシュメモリ装置などの不揮発性メモリ、又は他の不揮発性固体記憶装置であってもよい。
【０１２４】
メモリ１６０６にプロセッサ１６０２で実行可能な命令セットが記憶され、例えばコンピュータでの読み取り可能な命令、上記の本出願におけるパノラマ画像の表示制御方法内の各ステップを実現するようにし、同時に本出願におけるパノラマ画像の表示制御装置内の各モジュールの機能を実現する。前記メモリ１６０６は、オペレーションシステム１６１６とアプリケーション１６１８を含む。
【０１２５】
オペレーションシステム１６１６は、様々な基本的なシステムサービスを処理し、ハードウェア関連のタスクを実行するために使用されるプログラムを含む。
【０１２６】
アプリケーション１６１８は、パノラマ画像の表示を制御するための各種のアプリケーションプログラムを含み、このようなアプリケーションプログラムは上記の各実施例内のフローを実現することができ、例えば、パノラマ画像の表示制御装置１４００内の一部又はすべてのユニット又はパノラマ画像の表示制御装置１５００内の一部又はすべてのユニットを含むことができる。パノラマ画像の表示制御装置１４００とパノラマ画像の表示制御装置１５００内の各ユニットのうちの少なくとも一つのユニットは機械実行可能な命令が記憶されることができる。プロセッサ１６０２は、メモリ１６０６内の各ユニットのうちの少なくとも一つのユニット内の機械実行可能な命令を実行することによって、上記各ユニット内の少なくとも一つのモジュールの機能を実現することができる。
【０１２７】
なお、上述の各フローチャートおよび構成図における全てのステップおよびモジュールが必ずしも必要なわけではなく、実際の必要に応じて一部のステップ又はモジュールが省略されてもよい。各ステップの手順は固定したのではなく、必要に応じて適宜に調整できる。各々のモジュールは、単に説明を容易にするために機能に応じて定義されており、実際は、１つのモジュールが複数のモジュールによって実現されてもよく、また複数のモジュールの機能も１つの同一のモジュールによって実現されてもよい。これらのモジュールは同じ機器に設置されてもよく、異なる機器に設置されることもできる。
【０１２８】
各実施例内のハードウェアモジュールは、ハードウェア又はハードウェアとソフトウェアの方式で実現されてもよい。上記のソフトウェアは、不揮発性メモリに記憶される機械可読命令を含む。そのため、各実施例はソフトウェア製品として表されてもよい。
【０１２９】
各実施例において、ハードウェアは専用のハードウェア又は機械可読命令を実行するハードウェアで実現されてもよい。例えば、ハードウェアは、専用に設計され、特定の操作を実施するための永久性回路又はロジックデバイス（例えば、ＦＰＧＡ又はＡＳＩＣのような専用プロセッサ）であってもよい。ハードウェアは、ソフトウェアで一時に配置され、特定の操作を実施するためのプログラミング可能なロジックデバイス又は回路（例えば、汎用プロセッサ又はその他のプログラミング可能なプロセッサ）であってもよい。
【０１３０】
また、本出願における各実施例は、コンピュータのようなデータ処理デバイスに実行されるデータ処理プログラムによって実現されてもよい。明らかに、データ処理プログラムは本出願になる。また、一つの記憶媒体に記憶されるデータ処理プログラムは、プログラムを記憶媒体から直接読み取むこと、又はプログラムをデータ処理デバイスの記憶デバイス（例えば、ハードディスク及び／又はメモリ）にインストール又はコピーすることによって実行される。そのため、このような記憶媒体も本出願になり、本出願はデータ処理プログラムを記憶する不揮発性メモリをさらに提供し、このようなデータ処理プログラムは、本出願上記の方法実施例のいずれか一つの実施例を実行するために用いられる。
【０１３１】
図１６におけるモジュールに対応する機械可読命令は、コンピュータ上で動作するオペレーティングシステムなどに、本明細書に記載される操作の一部又はすべてを実行させることができる。不揮発性コンピュータでの読み取り可能な記憶媒体は、コンピュータ内の拡張ボードに挿入されることによって設置されたメモリ、又はコンピュータに接続され、拡張ユニットに設けられたメモリに書き込むことができる。安装在  拡張ボード又は拡張ユニットに装着されるＣＰＵなどは、命令に従って実際操作の一部又はすべてを実行することができる。
【０１３２】
以上に記載しているのは、単なる本発明の好ましい実施例であって、本発明を限定するわけではない。本発明の趣旨と原理に基づいて実施されるいずれの改修、同様な変形又は改善は、全て本発明の範囲内である。
【符号の説明】
【０１３３】
１０１  移動端末
１０２  スマートテレビ
１０３  メディアコンテンツサーバ
１０４  インターネット
【図１】
2019533372.tif 000003
【図２】
2019533372.tif 000004
【図３】
2019533372.tif 000005
【図４】
2019533372.tif 000006
【図５】
2019533372.tif 000007
【図６】
2019533372.tif 000008
【図７】
2019533372.tif 000009
【図８】
2019533372.tif 000010
【図９】
2019533372.tif 000011
【図１０】
2019533372.tif 000012
【図１１】
2019533372.tif 000013
【図１２】
2019533372.tif 000014
【図１３】
2019533372.tif 000015
【図１４】
2019533372.tif 000016
【図１５】
2019533372.tif 000017
【図１６】
2019533372.tif 000018
【国際調査報告】
2019533372.tif 000019
2019533372.tif 000020
2019533372.tif 000021
2019533372.tif 000022