(57)【要約】【課題】  撮像対象の付近で装置の輻輳を生じさせることなく、多数のユーザが限られた領域内に存在する撮像対象を同時に観察することができる多重映像配信システムを提供することを目的とする。【解決手段】  異なる視座及び／又は視線方向から撮像対象を撮像して撮像信号を生成・送信する複数の子装置と、該撮像信号に基づいて「表示範囲が異なる複数系統の映像信号」を生成・送信する親装置とから構成される多重映像配信システムであって、前記親装置は、「前記子装置の各々から受信した撮像信号」及び「前記子装置の各々の位置情報と視線方向情報」に基づいて、撮像対象の表面の３次元マッピングデータを生成し、該３次元マッピングデータに基づいて「『所定の視座と視線方向から撮像対象を見た視像』に相当する映像信号」を生成する機能を有するように構成する。【選択図】図１
2020123990.tif 000002
【特許請求の範囲】
【請求項１】
３次元的に配置され、異なる視座及び／又は視線方向から撮像対象を撮像して撮像信号を生成し、必要な変換を行った上で後記親装置に送信する複数の子装置と；
前記子装置の各々から受信した撮像信号に基づいて「表示範囲が異なる複数系統の映像信号」を生成・送信する親装置と；
から構成される多重映像配信システムであって、
前記親装置は、「前記子装置の各々から受信した撮像信号」及び「前記子装置の各々の位置情報と視線方向情報」に基づいて、撮像対象の表面を３次元空間内にマッピングした３次元マッピングデータを生成し、該３次元マッピングデータに基づいて「『所定の視座と視線方向から撮像対象を見た視像』に相当する映像信号」を生成する機能を有する、
ことを特徴とする多重映像配信システム。
【請求項２】
前記親装置は、
複数の端末装置から受信した表示範囲設定信号に基づいて「表示範囲が異なる複数系統の映像信号」を生成する機能と；
生成した各々の系統の映像信号を、「該系統の映像信号がそれに基づいて生成された表示範囲設定信号を生成した端末装置」宛に送信する機能と；
を有する、
ことを特徴とする、請求項１に記載の多重映像配信システム。
【請求項３】
前記親装置は、
前記端末装置から受信した視座設定信号と視線方向設定信号に基づいて視座と視線方向を設定した上で、「該視座と該視線方向から撮像対象を見た視像』に相当する映像信号」を生成する機能と；
生成した映像信号を、「該系統の映像信号がそれに基づいて生成された視座設定信号と視線方向設定信号を生成した端末装置」宛に送信する機能と；
を有する、
ことを特徴とする、請求項２に記載の多重映像配信システム。
【請求項４】
前記親装置は、「両眼の視座のずれを反映した２系統の映像信号」を生成する機能を有する、
ことを特徴とする、請求項３に記載の多重映像配信システム。
【請求項５】
前記親装置は、
過去の前記３次元マッピングデータを蓄積する機能と；
前記端末装置から表示範囲設定信号を受信した時点より以前の３次元マッピングデータに基づいて映像信号を生成する機能と；
を有する、
ことを特徴とする、請求項２乃至４のいずれか一項に記載の多重映像配信システム。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、多重映像配信システムに関し、特に、複数のユーザが、表示範囲が異なる映像を同時に楽しむことができる多重映像配信システムに関する。
【背景技術】
【０００２】
複数のユーザが、表示範囲が異なる映像を同時に楽しむことができる多重映像配信システムとしては、従来、特許文献１や特許文献２に記載されているような、
「『撮像対象がある現地』に存在する子装置」と「『遠隔地にいるユーザ』が使用する端末装置」とを対応付けた上で、子装置が撮像対象を撮像して生成した撮像信号を、「現地に存在する親装置」が映像信号に変換した上で、端末装置に送信する多重映像配信システム
が提案されている。
【０００３】
しかし、従来のシステムでは、端末装置と子装置とが一対一又は略一対一に対応づけられることが通常であるため、端末装置を使用するユーザの数が増えると子装置の数も増えてしまい、現地で輻輳してしまうという問題が生じる。そして、この問題は、多数のユーザが、限られた領域内に存在する撮像対象（例えば、洞窟内の生物、劇場で演じられる演劇、スタジアムで実施されるスポーツイベントやコンサートなど）の映像を同時に楽しもうとする場合、より深刻になる。
【０００４】
また、従来のシステムでは、「現地に存在する子装置」からの撮像信号や、「現地に存在する親装置」からの映像信号は、リアルタイムでライブ配信されるのが通常であるため、「撮像対象がある現地」と「ユーザのいる遠隔地」との間に時差がある場合、遠隔地にいるユーザは、例えば、現地で日中に行われているイベントを深夜でないと楽しめないという問題が生じる。
【先行技術文献】
【特許文献】
【０００５】
【特許文献１】特許第６０８９２５６号公報
【特許文献２】特開２０１７−１０３７９６号公報
【発明の概要】
【発明が解決しようとする課題】
【０００６】
本発明は、このような事情に鑑みてなされたものであり、撮像対象の付近で装置の輻輳を生じさせることなく、多数のユーザが、限られた領域内に存在する撮像対象を同時に観察することができる多重映像配信システムを提供することを目的とする。
【０００７】
また、本発明は、「撮像対象がある現地」と「ユーザのいる遠隔地」の間に時差がある場合でも、「ユーザのいる遠隔地」の時刻に近い時刻（ただし日付は前日であることもある）での撮像対象の状態を観察することができる多重映像配信システムを提供することを目的とする。
【課題を解決するための手段】
【０００８】
上記目的を達成するために、多重映像配信システムに係る本発明の第１の様態は、
３次元的に配置され、異なる視座及び／又は視線方向から撮像対象を撮像して撮像信号を生成し、必要な変換を行った上で後記親装置に送信する複数の子装置と；
前記子装置の各々から受信した撮像信号に基づいて「表示範囲が異なる複数系統の映像信号」を生成・送信する親装置と；
から構成される多重映像配信システムであって、
前記親装置は、「前記子装置の各々から受信した撮像信号」及び「前記子装置の各々の位置情報と視線方向情報」に基づいて、撮像対象の表面を３次元空間内にマッピングした３次元マッピングデータを生成し、該３次元マッピングデータに基づいて「『所定の視座と視線方向から撮像対象を見た視像』に相当する映像信号」を生成する機能を有する、
ように構成した。
【０００９】
本発明の第１の様態において、子装置は、入射光を光電変換するイメージセンサー（ＣＣＤ（Charge Coupled Device）やＣＭＯＳ（Complementary Metal Oxide Semiconductor）等）から構成される撮像手段と、該撮像手段からの電気信号（以下「撮像電気信号」と略記する）を、デジタルＲＧＢ、ＬＶＤＳ（Low Voltage Differential Signaling）（又はＬＤＩ（ＬＶＤＳ Display Interface））、ＧＶＩＦ（GigabitVideo InterFace）、ＵＳＢ（Universal Serial Bus）、DisplayPort、WirelessＨＤ（High Definition）、ＷＨＤＩ（Wireless Home Digital Interface）、ＷｉＧｉｇ（Wireless Gigabit）などの方式で伝送される非圧縮の映像信号（以下「非圧縮映像信号」という）に変換し、さらに、該非圧縮映像信号を、Ｈ.２６１、Ｈ.２６３、Ｈ.２６４、ＭＰＥＧ（Moving Picture Experts Group）−１、ＭＰＥＧ−２、ＭＰＥＧ−４等の規格によって圧縮符号化された映像信号（以下「圧縮映像信号」という）に変換する信号変換手段と、該圧縮映像信号を親装置に送信する通信手段によって構成することができる。
【００１０】
なお、子装置は、上記の構成に替えて、信号変換手段での変換を、非圧縮映像信号までに留める構成とすることもできる。そして、この構成を取る場合、通信手段は親装置に該非圧縮映像信を送信することになる。
【００１１】
また、子装置の位置情報としては、子装置の撮像手段の視座の鉛直下方の地面点の緯度・経度と子装置の撮像手段の視座の高度を使用することができる。また、子装置の視線方向情報としては、子装置の撮像手段の視線の鉛直方向の傾斜角θと水平方向の回転角φとを使用することができる。
【００１２】
なお、本明細書及び特許請求の範囲でいう撮像手段の「視座」「視座の高度」「視座の鉛直下方の地面点」「視線」「視線の鉛直方向の傾斜角θ」「視線の水平方向の回転角φ」「撮像範囲」「視点（撮像範囲の中心）」等の意味するところは、図５に示した通りである。
【００１３】
また、本明細書及び特許請求の範囲でいう「所定の視座と視線方向から撮像対象を見た視像」や「該視像に相当する映像信号」等の意味するところは、図６に示した通りである。
【００１４】
上記目的を達成するために、多重映像配信システムに係る本発明の第２の様態は、第１の様態の多重映像配信システムにおいて、
複数の端末装置から受信した表示範囲設定信号に基づいて「表示範囲が異なる複数系統の映像信号」を生成する機能と；
生成した各々の系統の映像信号を、「該系統の映像信号がそれに基づいて生成された表示範囲設定信号を生成した端末装置」宛に送信する機能と；
を有する、
するように構成した。
【００１５】
上記目的を達成するために、多重映像配信システムに係る本発明の第３の様態は、第２の様態の多重映像配信システムにおいて、
前記親装置は、
前記端末装置から受信した視座設定信号と視線方向設定信号に基づいて視座と視線方向を設定した上で、「該視座と該視線方向から撮像対象を見た視像』に相当する映像信号」を生成する機能と；
生成した映像信号を、「該系統の映像信号がそれに基づいて生成された視座設定信号と視線方向設定信号を生成した端末装置」宛に送信する機能と；
を有する、
するように構成した。
【００１６】
上記目的を達成するために、多重映像配信システムに係る本発明の第４の様態は、第３の様態の多重映像配信システムにおいて、
前記親装置は、「両眼の視座のずれを反映した２系統の映像信号」を生成する機能を有する、
を有する、
ように構成した。
【００１７】
上記目的を達成するために、多重映像配信システムに係る本発明の第５の様態は、第２乃至第４のいずれか一つの様態の多重映像配信システムにおいて、
前記親装置は、
過去の前記３次元マッピングデータを蓄積する機能と；
前記端末装置から表示範囲設定信号を受信した時点より以前の３次元マッピングデータに基づいて映像信号を生成する機能と；
を有する、
ように構成した。
【発明の効果】
【００１８】
本発明の多重映像配信システムによれば、所定の領域内に存在する撮像対象の表面をくまなく撮像できるだけの数の子装置だけを用意すれば、該領域における撮像対象の表面の形状及び各表面点の色を表現する３次元マッピングデータを生成することができ、また、３次元マッピングデータが作成できれば、いかなる視座と視線方向が設定されたとしても、『該視座と視線方向から撮像対象を見た視像』に相当する映像信号を生成することができるため、端末装置を使用するユーザの数が増えても子装置を増やす必要がなく、したがって、撮像対象の付近で小装置が輻輳することはなくなる。
【００１９】
特に、本発明の第５の様態の多重映像配信システムによれば、ユーザが端末装置を操作している時点よりも以前の撮像対象を観察した視像に相当する映像をタイムシフト生成することができるため、「撮像対象がある現地」と「ユーザのいる遠隔地」の間に時差がある場合でも、「ユーザのいる遠隔地」の時刻に近い時刻での撮像対象の状態を観察することができる。
【図面の簡単な説明】
【００２０】
【図１】本発明の実施例１に係る多重映像配信システムの構成及び機能を説明するためのブロック図である。
【図２】本発明の実施例１に係る多重映像配信システムの構成及び機能を説明するためのイメージ図である。
【図３】本発明の実施例１に係る多重映像配信システムにおける、子装置の配備原則を説明するための説明図である。
【図４】本発明の実施例１に係る多重映像配信システムにおける、撮像対象の表面点の３次元空間へのマッピング方法を説明するための説明図である。
【図５】本明細書及び特許請求の範囲でいう撮像手段の「視座」「視座の高度」「視座の鉛直下方の地面点」「視線」「視線の鉛直方向の傾斜角θ」「視線の水平方向の回転角φ」「撮像範囲」「視点（撮像範囲の中心）」等の意味を説明するための説明図である。
【図６】本明細書及び特許請求の範囲でいう「所定の視座と視線方向から撮像対象を見た視像」や「該視像に相当する映像信号」を説明するための説明図である。
【発明を実施するための形態】
【００２１】
以下、図面を参照して本発明の実施形態について説明する。ただし、本発明はかかる実
施形態に限定されず、その技術思想の範囲内で種々の変更が可能である。
【実施例１】
【００２２】
図１は、本発明の実施例１に係る多重映像配信システムの構成及び機能を説明するためのブロック図である。
また、図２は、本発明の実施例１に係る多重映像配信システムの構成及び機能を説明するためのイメージ図であり、特に、本発明の実施例１に係る多重映像配信システムを用いてエジプトのスフィンクスの映像を多重同時配信する場合の子装置の配備方法を例示している。
【００２３】
本実施例においては、多重映像配信システムは、子装置α_1α〜子装置ζ_1ζと親装置2から構成され、親装置2は、さらにインターフェース部21とサーバ22から構成される。また、サーバ22は、ユーザが使用する端末装置Ａ_4A〜端末装置Ｈ_4Hとインターネット3を介して接続されている。
【００２４】
子装置のうち、子装置α_1α、子装置β_1β及び子装置ζ_1ζは、撮像対象であるスフィンクスの周りの地上に固定されている。一方、子装置γ_1γ、子装置δ_1δ及び子装置ε_1εは撮像手段を搭載したドローンであって、スフィンクスの周りの空中を浮遊している。
【００２５】
また、各子装置は、ＣＭＯＳカメラモジュールである撮像手段と、ＣＭＯＳカメラモジュールのイメージセンサーからの撮像電気信号を非圧縮映像信号に変換し、該圧縮映像信号をさらに圧縮映像信号に変換する信号変換手段と、該圧縮映像信号を親装置2に送信する通信手段を備えている。そして、子装置α_1α、子装置β_1β及び子装置ζ_1ζは、生成した圧縮映像信号を通信手段からケーブルを介して親装置2に送信し、子装置γ_1γ、子装置δ_1δ及び子装置ε_1εは、生成した圧縮映像信号を通信手段から無線通信によって親装置2に送信する。
【００２６】
さらに、各子装置は、付属する撮像手段の視座の水平位置を測定するＧＰＳセンサー、高度を測定する高度センサー、及び、撮像手段の視線方向の傾斜角θと回転角φを測定するジャイロセンサーを搭載しており、それらのセンサーによる測定結果を伝達する信号（以下「位置・視線方向信号」と総称する）を通信手段から親装置2に送信する。
【００２７】
なお、図中には、紙上での表現の都合上、子装置α_1α〜子装置ζ_1ζの６つの子装置しか記載されていないが、子装置の配備原則は下記の通りであり、この原則を全うするために必要な数の子装置が配備される。
［子装置の配備原則］
「撮像対象のすべての表面点が、複数の子装置の撮像手段の撮像可能範囲に入っていること」
【００２８】
以下では、図３を用いて、上記の子装置の配備原則を説明する。
図３では、撮像対象はＡ〜Ｆの側面を持つが、これらの側面は、下記の通り、いずれも複数の子装置の撮像可能範囲に入っている。
側面Ａ……子装置i＋子装置ii
側面Ｂ……子装置ii＋子装置iii
側面Ｃ……子装置iii＋子装置iv
側面Ｄ……子装置iii＋子装置iv
側面Ｅ……子装置iii＋子装置iv＋子装置v
側面Ｆ……子装置i＋子装置v
【００２９】
一方、親装置2は、インターフェース部21によって、子装置α_1α〜子装置ζ_1ζから送信される圧縮映像信号及び位置・視線方向信号を受信してサーバ22に転送する。サーバ22では、これらの複数の子装置からの信号に基づいて、撮像対象の表面点を３次元空間内にマッピングするとともに、各表面点の色をＲＧＢ値又はＨＳＶ値によって定義する。
【００３０】
以下では、図４を用いて、撮像対象の表面点（図では★で記している）の３次元空間内へのマッピング方法の手順を説明する。なお、図３の撮像対象は図２と同じであるが、記述を簡略にするため、図３に記されていた子装置iii〜子装置vは表示していない。
【００３１】
（１）３次元空間座標軸の設定
撮像対象の表面点をマッピングする３次元空間のデカルト座標軸を下記のように設定する。
Ｘ軸……緯度方向（東方向が正）
Ｙ軸……経度方向（北方向が正）
Ｚ軸……鉛直方向（上方向が正）
原点……撮像対象の中心の鉛直下方の地面点
【００３２】
（２）子装置iと子装置iiの各々の撮像手段の視座の座標の算出
上記の通り、側面Ａにある表面点★は、子装置iと子装置iiの双方によって撮像される。一方、子装置iと子装置iiの各々の撮像手段の視座の位置情報（撮像手段の視座の高度と鉛直下方の地面点の緯度・経度）は、子装置iと子装置iiの各々から送信される位置・視線方向信号に含まれている。この情報に基づいて、子装置iと子装置iiの各々の撮像手段の視座の座標を算出する。
子装置iの撮像手段の視座の座標……（ｘ1，ｙ1，ｚ1）
子装置iiの撮像手段の視座の座標……（ｘ2，ｙ2，ｚ2）
【００３３】
（３）子装置iと子装置iiの各々の撮像手段の視線の単位方向ベクトルの算出
子装置iと子装置iiの各々の撮像手段の視線方向情報（撮像手段の視線方向の傾斜角θと回転角φ）は、子装置iと子装置iiの各々から送信される位置・視線方向信号に含まれている。この情報に基づいて、子装置iと子装置iiの各々の撮像手段の視線の単位方向ベクトルを算出する。
子装置iの撮像手段の視線の単位方向ベクトル……（sinθ1・cosφ1，sinθ1・sinφ1，cosθ1）
子装置iiの撮像手段の視線の単位方向ベクトル……（sinθ2・cosφ2、sinθ2・sinφ2、cosθ2）
【００３４】
（４）子装置iと子装置iiの各々の撮像手段による「表面点★の撮像線」の単位方向ベクトルの算出
子装置iと子装置iiの各々から送信される圧縮映像信号には、子装置iと子装置iiの各々の撮像手段の視線と、各々の撮像手段の視座から表面点★を結んだ直線（以下「表面点★の撮像線」という）との間の２次元的な偏差角度（Δθ、Δφ）の情報が含まれており、これと上記の視線方向情報を組み合わせることによって、子装置iと子装置iiの各々の撮像手段の「表面点★の撮像線」の単位方向ベクトルを算出する。
子装置iの撮像手段の「表面点★の撮像線」の単位方向ベクトル……（sin（θ1＋Δθ1）・cos（φ1＋Δφ1）、sin（θ1＋Δθ1）・sin（φ1＋Δφ1）、cos（θ1＋Δθ1））
子装置iiの撮像手段の「表面点★の撮像線」の単位方向ベクトル……（sin（θ2＋Δθ2）・cos（φ2＋Δφ2）、sin（θ2＋Δθ2）・sin（φ2＋Δφ2）、cos（θ2＋Δθ2））
【００３５】
（５）表面点★の座標の算出
上記の手順（３）と（４）から、子装置iと子装置iiの各々の撮像手段による「表面点★の撮像線」が通る点（＝子装置iと子装置iiの各々の撮像手段の視座）と単位方向ベクトルが定まったため、これらから、子装置iと子装置iiの各々の撮像手段による「表面点★の撮像線」の直線の方程式が算出される。
そして、表面点★はこれら２つの直線の交点であるから、２つの直線の方程式からなる連立方程式を解くことによって、表面点★の座標が算出される。
【００３６】
上記の手順を撮像対象の全ての表面点に行うことで、撮像対象の表面を３次元マッピングが完成する。なお、この撮像対象の表面は、一般に複数の曲面から構成され、しかも、これらの曲面は時間ｔとともに変化する。これらの曲面の方程式を以下で表現する（ここで添字ｔは、各曲面が時間ｔとともに変化することを表している）。
曲面１……ｆ1,ｔ（ｘ，ｙ，ｚ）＝０
曲面２……ｆ2,ｔ（ｘ，ｙ，ｚ）＝０
曲面３……ｆ3,ｔ（ｘ，ｙ，ｚ）＝０
………
曲面ｎ……ｆn,ｔ（ｘ，ｙ，ｚ）＝０
【００３７】
一方、ユーザが使用する端末装置Ａ_4A〜端末装置Ｈ_4Hは、コントローラ、ＩＰアドレスが付与さられた通信ユニット及び没入型３Ｄ−ＨＭＤ（Head Mounted Display）から構成される。
【００３８】
コントローラは、ユーザが行うボタン操作、レバー操作、ダイヤル操作等に基づいて視座設定信号を生成し、該視座設定信号を通信ユニットに送信する。一方、ＨＭＤの内部には加速度センサーとジャイロセンサーが内蔵されており、ＨＭＤは、これらのセンサーの出力結果に基づいて視座設定信号を生成し、該視線方向設定信号を通信ユニットに送信する。
【００３９】
通信ユニットは、コントローラから受信した視線方向設定信号とＨＭＤから受信した視線方向設定信号を、付与されたＩＰアドレスを送信元ＩＰアドレスとするインターネット・プロトコルに準拠した信号に変換し、インターネット3を介して親装置2のサーバに22に送信する。
【００４０】
サーバ22は、インターネット3を介して端末装置Ａ_4A〜端末装置Ｈ_4Hの各々から受信した視座設定信号と視線方向設定信号に基づいて、前記３次元空間において、端末装置Ａ_4A〜端末装置Ｈ_4Hの各々を使用するユーザの両眼に対して仮想的な視座と視線方向をセット設定する。その上で、「『端末装置Ａ_4A〜端末装置Ｈ_4Hの各々を使用するユーザの右眼に対して設定された仮想的な視座と視線方向から撮像対象を見た視像』に相当する映像信号」と「『端末装置Ａ_4A〜端末装置Ｈ_4Hの各々を使用するユーザの左眼に対して設定された仮想的な視座と視線方向から撮像対象を見た視像』に相当する映像信号」を生成する。
【００４１】
一般に、図６でイメージ的に示している通り、映像信号が伝達するのは、表示範囲を構成する１つひとつの画素の色情報である。以下では、サーバ22が、「『所定の視座と視線方向から撮像対象を見た視像』に相当する映像信号」が伝達する画素の色情報の決定方法を説明する。
【００４２】
（１）「映像信号の各画素に対応する視像線」の直線の方程式の算出
「『所定の視座と視線方向から撮像対象を見た視像』に相当する映像信号」が色情報を伝達する画素のうち、表示範囲の中心にある画素は「視線方向にある撮像対象の表面点」に対応する。そして、表示範囲のそれ以外の画素は、「視座を起点とする直線で、視線から一定の偏差角度だけずれた直線（以下「画素に対応する視像線」という）方向にある撮像対象の表面点」に対応する。
上記の通り、サーバ22は、端末装置Ａ_4A〜端末装置Ｈ_4Hの各々から視線方向設定信号を受信するため、これ基づいて、視線の単位方向ベクトルが算出される。また、上記の通り、映像信号の各画素には視線からの偏差角度が対応づけられるから、これらの情報によって、「各画素に対応する視像線」の単位方向ベクトルが算出される。また、「各画素に対応する視像線」は視座を通り、一方、視座の座標は、端末装置Ａ_4A〜端末装置Ｈ_4Hの各々から受信する視座設定信号に基づいて、視座の座標が算出される。したがって、端末装置Ａ_4A〜端末装置Ｈ_4Hの各々から受信する視線方向設定信号と視座設定信号に基づいて、「画素に対応する視像線」の直線の方程式が算出される。
【００４３】
（２）映像信号の各画素に対応する表面点の特定
上記の通り、撮像対象の表面は、複数の曲面１（ｆ1,ｔ（ｘ，ｙ，ｚ）＝０）〜曲面ｎ（ｆn,ｔ（ｘ，ｙ，ｚ）＝０）によって構成され、特に、親装置が端末装置Ａ_4A〜端末装置Ｈ_4Hの各々から視座設定信号と視線方向設定信号を受信した時点ｔ0での撮像対象の表面は、処理時間を無視すると、複数の曲面１（ｆ1,ｔ＝ｔ0（ｘ，ｙ，ｚ）＝０）〜曲面ｎ（ｆn,ｔ＝ｔ0（ｘ，ｙ，ｚ）＝０）によって構成されるため、これらの曲面の方程式と「各画素に対応する視像線」の直線の方程式との連立方程式を解くことにより、「各画素に対応する視像線」と撮像対象の表面との交点の座標が定まる。一般に、この交点は複数存在するが、そのうち、視座からの距離が最も近い交点が、映像信号の各画素に対応する表面点となる。
【００４４】
（３）映像信号の各画素の色の決定
上記の通り、３次元空間内にマッピングされた撮像対象の各表面点には、ＲＧＢ値又はＨＳＶ値によって定義によって色が定義されているから、この色が映像信号の各画素の色となる。
【００４５】
なお、以上では、サーバ22が「子装置から受信した撮像信号と位置・視線方向信号に基づく３次元マッピングデータの生成」と「該３次元マッピングデータに基づく映像信号の生成」にタイムラグなく行われる構成を説明したが、サーバ22が、過去の３次元マッピングデータを蓄積する記憶手段を有するようにした上で、端末装置Ａ_4A〜端末装置Ｈ_4Hの各々から視座設定信号と視線方向設定信号を受信した時点よりもΔtだけ以前の３次元マッピングデータ（具体的には、曲面の方程式：ｆ1,ｔ＝ｔ0−Δt（ｘ，ｙ，ｚ）＝０）〜ｆn,ｔ＝ｔ0−Δt（ｘ，ｙ，ｚ）＝０）を用いる構成とすることもできる。
【００４６】
この構成においては、ユーザは、コントローラのボタン、レバー、ダイヤル等を操作することによって、自分自身が撮像対象の状態を観察したい時刻（ｔ0−Δt）を指定することができる。そして、コントローラは、ユーザが指定した時刻に基づいて観測時点設定信号を生成し、通信手段及びインターネットを介して、サーバ22に送信する。
これによって、ユーザは、自身がコントローラを操作している時刻ｔ0よりもΔtだけ過去に遡った時点での撮像対象の状態を観察できるようになる。
【００４７】
親装置は、上記のようにして生成した「『端末装置Ａ_4A〜端末装置Ｈ_4Hの各々を使用するユーザの右眼に対して設定された仮想的な視座と視線方向から撮像対象を見た視像』に相当する映像信号」と「『端末装置Ａ_4A〜端末装置Ｈ_4Hの各々を使用するユーザの左眼に対して設定された仮想的な視座と視線方向から撮像対象を見た視像』に相当する映像信号」の２系統の映像信号を、インターネット3を介して端末装置Ａ_4A〜端末装置Ｈ_4Hの各々に送信する。一方、端末装置Ａ_4A〜端末装置Ｈ_4Hの各々では、前記２系統の映像信号を通信手段で受信し、該２系統の映像信号に基づく映像をＨＭＤの左右の表示部に表示する。これによって、ユーザは、没入感のある視覚体験を楽しむことができる。
【００４８】
なお、生成した上記の２系統の映像信号と、該映像信報との対応付けは、端末装置Ａ_4A〜端末装置Ｈ_4Hの各々の通信ユニットから受信したＩＰアドレスに基づいて行う。
一方、サーバ22では、受信した観測時点設定信号に基づいて、映像信号を生成する際に使用する３次元マッピングデータの時点を設定する。
【産業上の利用可能性】
【００４９】
本発明は、多重映像配信システムの子装置を構成する撮像手段、信号変換手段及び通信手段、親装置を構成するインターフェース部及びサーバ、端末装置を構成するコントローラ及びＨＭＤに係る装置を製造する産業において利用することができる。また、多重映像配信システムを使用したサービス（特に観光サービス）を提供する産業においても利用することができる。
【符号の説明】
【００５０】
1α‥‥‥子装置α
1β‥‥‥子装置β
1γ‥‥‥子装置γ
1δ‥‥‥子装置δ
1ε‥‥‥子装置ε
1ζ‥‥‥子装置ζ
2‥‥‥親装置
21‥‥‥インターフェース部
22‥‥‥サーバ
3‥‥‥インターネット
4A‥‥‥端末装置Ａ
4B‥‥‥端末装置Ｂ
4C‥‥‥端末装置Ｃ
4D‥‥‥端末装置Ｄ
4E‥‥‥端末装置Ｅ
4F‥‥‥端末装置Ｆ
4G‥‥‥端末装置Ｇ
4H‥‥‥端末装置Ｇ
5‥‥‥撮像手段
51‥‥‥撮像手段の視座
511‥‥‥撮像手段の視座の高度
512‥‥‥撮像手段の視座の鉛直下方の地面点
52‥‥‥撮像手段の視線
522‥‥‥撮像手段の視線の鉛直方向の傾斜角
523‥‥‥撮像手段の視線の水平方向の回転角
53‥‥‥撮像手段の撮像範囲
531‥‥‥撮像手段の視点（撮像範囲の中心）
【図１】
2020123990.tif 000003
【図２】
2020123990.tif 000004
【図３】
2020123990.tif 000005
【図４】
2020123990.tif 000006
【図５】
2020123990.tif 000007
【図６】
2020123990.tif 000008