(57)【要約】【課題】  遠隔地にいる複数の利用者が、現地にある別個の対象をリアルタイムで同時に観察することができるライブ映像配信システムを提供することを目的とする。【解決手段】  表示範囲が異なる複数系統の映像信号を生成する映像信号生成手段と、通信手段１とを備える現地システムと、映像表示手段と、表示範囲設定信号生成手段と、通信手段２とを備える複数の端末装置とから構成されるライブ映像配信システムであって、映像信号の系統と端末装置とは対応付けられており、現地システムは、各系統の映像信号の表示範囲を、各系統に対応付けられた端末装置が生成した表示範囲設定信号報に基づいて定める機能と、映像信号を送信する機能とを有し、端末装置は、表示範囲設定信号を送信する機能と、自身に対応付けられた系統の映像信号を受信する機能と、映像信号に基づいて映像を表示する機能とを有するように構成する。【選択図】図１
2019213207.tif 000002
【特許請求の範囲】
【請求項１】
利用者が、「該利用者が使用する端末装置との間で無線信号を直接送受信できない遠隔地に配置され、撮像手段と、該撮像手段が撮像した結果に基づいて映像信号をリアルタイムで生成・送信する映像信号送信手段とを備える無人移動体（無人航空機、無人潜水機及び無人宇宙機を含む）」の移動を制御し、前記映像信号に基づくライブ映像を楽しむための無人移動体用端末装置であって、
該無人移動体用端末装置は、
利用者の頭部に装着されて、映像を表示するＨＭＤ（Head Mounted Display）と；
該ＨＭＤを装着した利用者が、該ＨＭＤに表示されたライブ映像を見ながら手で操作する操作コントローラと；
公衆ネットワークを介して、前記無人移動体との間で信号の送受信を行う通信ユニットと；
から構成され、
前記操作コントローラは、利用者の手操作に基づいて、前記無人移動体の移動を制御する移動制御信号を生成して、前記通信ユニットに送信する機能を有し、
前記通信ユニットは、
前記無人移動体の映像信号送信手段から映像信号を受信し、必要な変換を行った上で、前記ＨＭＤに送信する機能と；
前記操作コントローラから移動制御信号を受信し、必要な変換を行った上で、前記無人移動体に送信する機能と；
を有し、
前記ＨＭＤは、前記通信ユニットから映像信号を受信し、該映像信号に基づく映像を表示する機能を有する、
ことを特徴とする無人移動体用端末装置。
【請求項２】
前記ＨＭＤは、利用者の頭部の位置や動きを検知し、該検知した結果に基づいて、前記映像信号の表示範囲を設定する表示範囲設定信号を生成して、前記通信ユニットに送信する機能を有し、
前記通信ユニットは、前記ＨＭＤから表示範囲設定信号を受信し、必要な変換を行った上で、前記無人移動体に送信する機能を有する、
ことを特徴とする、請求項１に記載の無人移動体用端末装置。
【請求項３】
請求項２に記載の無人移動体用端末装置によって制御される無人移動体であって、
前記撮像手段は、前記表示範囲設定信号に基づいて撮像範囲を変化させる機能を有する、
ことを特徴とする無人移動体。
【請求項４】
請求項２又は３に記載の無人移動体用端末装置によって制御される無人移動体であって、
前記撮像手段は広角カメラであり、
前記映像信号送信手段は、前記表示範囲設定信号に基づいて、前記広角カメラの撮像範囲から一定の範囲を切り出した表示範囲の映像信号を生成・送信する機能を有する、
ことを特徴とする無人移動体。
【請求項５】
請求項１又は２の無人移動体用端末装置における通信ユニット。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、無人移動体用端末装置、該無人移動体用端末装置によって制御される無人移動体、及び、無人移動体用端末装置用通信ユニットに関し、特に、遠隔地にいる複数の利用者が、現地にある別個の対象をリアルタイムで同時に観察することができるライブ映像配信システムで利用される無人移動体用端末装置、無人移動体及び通信ユニットに関する。また、特に、遠隔地にいる利用者が、あたかも自分自身が現地で動きながら観察しているかのような臨場感をもって映像を楽しむことができるライブ映像配信システムで利用される無人移動体用端末装置、無人移動体及び通信ユニットに関する。
【背景技術】
【０００２】
観光産業は、現在、全世界のＧＤＰの約１０％を占めるに至っており、今後、「２１世紀最大の産業」となるとの予測がある。
このような趨勢の中、従来の観光地での観光に飽き足らず、秘境、さらには、宇宙空間、深海といったフロンティア空間における観光に対するニーズも高まりつつある。
【０００３】
しかし、秘境に数多くの観光客が押し寄せると、希少な自然環境や貴重な遺跡が破壊されるという問題が生じる。また、宇宙空間、深海といったフロンティア空間における観光については、現地に赴くために多大なコストがかかるだけではなく、無重力や高気圧などの集権環境の影響で身体に過大な負荷がかかったり、現地への移動手段（宇宙船や深海調査船など）が破損した場合に生命が危険にさらされたりするリスクが伴う。
【０００４】
上記のような問題を解決する方法として、遠隔地にいる利用者に対して現地の映像を表示することにより、「疑似的な観光体験」を提供する方法が考えられる。しかし、その場合、表示される映像の表示範囲が「利用者以外の他者」によって設定されているのであれば、テレビ電話やテレビの生中継放送と変わらず、「観光体験」というには程遠い。したがって、「疑似的な観光体験」を実現するためは、遠隔地にいる利用者が映像の表示範囲を自ら設定でき、利用者自身が観察したい対象をリアルタイムで観察することができるライブ映像配信システムが必要となる。
【０００５】
遠隔地にいる利用者が映像の表示範囲を自ら設定できるライブ映像配信システムとしては、従来、特許文献１に記載されたような「遠隔監視カメラ」（以下「従来技術１」という）や、特許文献２に記載されたような「無人ヘリコプターを用いたモニタシステム」（以下「従来技術２」という）などが提案されている。
【０００６】
しかし、これら従来のシステムは、映像を撮像する装置と表示する装置とが一対で構成されているため、各々の時点で映像の表示範囲を設定できるのは、一人の利用者に限定される。この結果、複数の利用者が、現地にある別個の観察対象を同時に観察することができないという問題がある。
【０００７】
また、従来のシステムでは、映像を表示する装置は、画面に映像を表示するタイプ（ＣＲＴディスプレイ、ＦＤＰ、プロジェクタ等）であり、利用者は、自分自身は静止し、自らの視線を画面に固定した状態で画面に表示された映像を見ることになる。このため、映像の表示範囲を動かすことができたとしても、映像の表示範囲の動きと、利用者の身体の動きや視線の動きとは全く連動しない。このため、利用者は、あたかも自分自身が現地で動きながら観察しているかのような臨場感をもって映像を楽しむには至らない。
【０００８】
また、特に、従来技術１においては、映像を撮像する監視用カメラ１は雲台２の上に固定されており、観察する視線は動かせても視座は自由に移動させられないため、映像表示部７に表示されるのは、雲台２の周囲にある観察対象だけに限定されるという問題があった。一方、特に、従来技術２においては、無人ヘリコプタＨ側の画像送信部５から画像表示部７側の画像受信部６に対して、画像信号が直接無線伝送されるため、観察対象のある現地と利用者のいる遠隔地との間の距離を、無線信号の伝送可能距離より大きく取れないという問題があった。
【０００９】
なお、本明細書及び特許請求の範囲でいう「撮像範囲」「視座」「視線」「視点（撮像範囲の中心）」の意味するところは、図４に示した通りである。
【先行技術文献】
【特許文献】
【００１０】
【特許文献１】特開平１１−２３４６５９号公報
【特許文献２】特開２００２−２９３２９８
【発明の概要】
【発明が解決しようとする課題】
【００１１】
本発明は、このような事情に鑑みてなされたものであり、遠隔地にいる複数の利用者が、現地にある別個の対象をリアルタイムで同時に観察することができるライブ映像配信システムを提供することを目的とする。特に、観察対象のある現地と利用者のいる遠隔地との間の距離が遠い場合でも利用できるライブ映像配信システムを提供することを目的とする。
【００１２】
また、本発明は、現地において観測する視線及び視座を自由に動かすことができるライブ映像配信システムを提供することを目的とする。特に、遠隔地にいる利用者が、あたかも自分自身が現地で動きながら観察しているかのような臨場感をもって映像を楽しむことができるライブ映像配信システムを提供することを目的とする。
【課題を解決するための手段】
【００１３】
上記目的を達成するために、ライブ映像配信システムに係る本発明の第１の様態は、
表示範囲が異なる複数系統の映像信号を生成する映像信号生成手段と、公衆ネットワークとの間で信号をやり取りするための通信手段１と、を備える現地システムと；
映像表示手段と、表示範囲設定信号生成手段と、公衆ネットワークとの間で信号をやり取りするための通信手段２と、を備える複数の端末装置と；
から構成されるライブ映像配信システムであって、
前記現地システムの映像信号生成手段が生成する映像信号の系統と前記端末装置とは対応付けられており、
前記現地システムは、
前記各系統の映像信号の表示範囲を、各系統に対応付けられた前記端末装置の表示範囲設定信号生成手段が生成し、公衆ネットワークを介して受信した表示範囲設定信号が担う表示範囲設定情報に基づいて定める機能と；
前記映像信号生成手段が生成した映像信号を公衆ネットワークに送信する機能と；
を有し、
前記端末装置は、
前記表示範囲設定信号生成手段が生成した表示範囲設定信号を公衆ネットワークに送信する機能と；
前記現地システムの映像信号生成手段が生成する映像信号のうち、自身に対応付けられた系統の映像信号を、公衆ネットワークを介して受信する機能と；
前記受信した映像信号が担う映像情報に基づいて映像を表示する機能と；
を有する、
ように構成した。
【００１４】
また、上記目的を達成するために、ライブ映像配信システムに係る本発明の第２の様態は、
表示範囲が異なる複数系統の映像信号を生成する映像信号生成手段と、後記中継装置との間で信号をやり取りするための通信手段１’と、を備える現地システムと；
前記現地システムとの間で信号をやり取りするための通信手段３Ａと、公衆ネットワークとの間で信号をやり取りするための通信手段３Ｂと、を備える中継装置と；
映像表示手段と、表示範囲設定信号生成手段と、公衆ネットワークとの間で信号をやり取りするための通信手段２と、を備える複数の端末装置と；
から構成されるライブ映像配信システムであって、
前記現地システムの映像信号生成手段が生成する映像信号の系統と前記端末装置とは対応付けられており、
前記現地システムは、
前記各系統の映像信号の表示範囲を、各系統に対応付けられた前記端末装置の表示範囲設定信号生成手段が生成し、「公衆ネットワーク及び前記中継装置」を介して受信した表示範囲設定信号が担う表示範囲設定情報に基づいて定める機能と；
前記映像信号生成手段が生成した映像信号を前記中継装置に送信する機能と；
を有し、
前記端末装置は、
前記表示範囲設定信号生成手段が生成した表示範囲設定信号を公衆ネットワークに送信する機能と；
前記現地システムの映像信号生成手段が生成する映像信号のうち、自身に対応付けられた系統の映像信号を、「公衆ネットワーク及び前記中継装置」を介して受信する機能と；
前記受信した映像信号が担う映像情報に基づいて映像を表示する機能と；
を有する、
ように構成した。
【００１５】
本発明の第１及び第２の様態において、現地システムの映像信号生成手段は、入射光を光電変換するイメージセンサー（ＣＣＤ（Charge Coupled Device）やＣＭＯＳ（Complementary Metal Oxide Semiconductor）等）から構成される撮像手段と、撮像手段からの電気信号（以下「撮像電気信号」と略記する）を、デジタルＲＧＢ、ＬＶＤＳ（Low Voltage Differential Signaling）（又はＬＤＩ（ＬＶＤＳ Display Interface））、ＧＶＩＦ（GigabitVideo InterFace）、ＵＳＢ（Universal Serial Bus）、DisplayPort、WirelessＨＤ（High Definition）、ＷＨＤＩ（Wireless Home Digital Interface）、ＷｉＧｉｇ（Wireless Gigabit）などの方式で伝送される非圧縮の映像信号（以下「非圧縮映像信号」という）に変換し、さらに、該非圧縮映像信号を、Ｈ.２６１、Ｈ.２６３、Ｈ.２６４、ＭＰＥＧ（Moving Picture Experts Group）−１、ＭＰＥＧ−２、ＭＰＥＧ−４等の規格によって圧縮符号化された映像信号（以下「圧縮映像信号」という）に変換する映像信号変換手段によって構成することができる。そして、その場合には、現地システムの通信手段１から公衆ネットワークへ、又は、又は通信手段１’から中継装置へ、前記圧縮映像信号が送信される。
【００１６】
なお、撮像手段を複数のイメージセンサーで構成することによって、３Ｄ映像の映像信号を送信するようにすることができる。
【００１７】
また、撮像手段を半天周カメラや全天周カメラなどの広角カメラによって構成し、広角カメラからの撮像電気信号から、表示範囲設定信号が担う表示範囲設定情報に基づいて定められた表示範囲に対応する撮像範囲の撮像電気信号を切り出し、切り出した撮像電気信号を映像信号に変換する構成や、広角カメラからの撮像電気信号を映像信号に変換した後、変換した映像信号から、表示範囲設定信号が担う表示範囲設定情報に基づいて定められた表示範囲の映像信号を切り出す構成とすることができる。
【００１８】
公衆ネットワークとしては、インターネットとアクセスネットワーク（モバイルアクセスネットワーク及び／又は固定アクセスネットワーク）から構成されるネットワークを利用することができ、さらに、モバイルアクセスネットワークとしては、公衆無線ＬＡＮ、又は、３ＧやＬＴＥ（Long Term Evolution）等の携帯電話回線によるアクセスネットワークを利用することができる。また、固定アクセスネットワークとしては、ＦＴＴＨ（Fiber To The Home）、ＣＡＴＶ（Cable TeleVision）、ＤＳＬ（Digital Subscriber Line）等によるアクセスネットワークを利用することができる。
【００１９】
なお、公衆ネットワークがインターネットを含む場合には、映像信号は、ＩＰ（Internet Protocol）パケット化した上で送信することが好ましい。
【００２０】
映像信号の系統と端末装置との対応付けは、各端末装置に対してＩＰアドレスを与えた上で、現地システムでは、各系統の映像信号の表示範囲の設定や送信を、各端末装置から受信したＩＰアドレスに基づいて行うことで実現される。その場合、特に、現地システムから映像信号を送信する際には、対応付けられるべき端末装置のＩＰアドレスを宛先ＩＰアドレスとして指定する。
【００２１】
端末装置の映像表示手段としては、ＣＲＴ（Cathode Ray Tube）ディスプレイ、ＦＤＰ（Flat Panel Display）（液晶ディスプレイ、有機ＥＬ（Electro-Luminescence）ディスプレイ、プラズマディスプレイ等）、プロジェクタ、ＨＭＤ（Head Mounted Display）などを使用することができる。
【００２２】
なお、現地システムの映像信号生成手段が生成し、公衆ネットワーク又は「公衆ネットワーク及び前記中継装置」を介して受信する映像信号が３Ｄ映像の映像信号である場合には、端末装置の映像表示手段としても、３Ｄディスプレイを採用することが好ましい。特に、視野の大部分を覆う没入型（非透過型）３Ｄ−ＨＭＤ（３Ｄ対応のＨＭＤ）を採用することで、没入感のある視覚体験を提供することができる。
【００２３】
端末装置の表示範囲設定信号生成手段は、表示範囲の中心を定める表示中心設定信号を生成する表示中心設定信号生成手段と、表示範囲の拡がり（上下左右の幅）を定める表示幅設定信号を生成する表示幅設定信号生成手段によって構成することができる。そして、その場合には、端末装置が、それらの信号が担う情報に基づいて表示範囲設定信号を生成し、公衆ネットワークに送信してもよいし、現地システムがそれらの信号を受信し、受信した信号が担う情報に基づいて映像信号の表示範囲を定めてもよい。特に、後者の場合、端末装置から送信される表示範囲設定信号は、表示中心設定信号と表示幅設定信号とから構成されることになる。
【００２４】
なお、前記映像表示手段が、画面に映像を表示するタイプ（ＣＲＴディスプレイ、ＦＤＰ、プロジェクタ等）である場合には、端末装置の表示範囲設定信号生成手段は、マウスやトラックボールなどのポインティングデバイスによって画面上のカーソルを動かすことで表示範囲の中心を設定し、画面上の倍率バーをスライド又はクリックすることで表示範囲の拡がりを設定する構成とすることができる。
【００２５】
一方、前記映像表示手段がタッチパネル機能付きのディスプレイ（以下「タッチパネルディスプレイ」と略記する）である場合には、該タッチパネル機能を活用することで、映像表示手段と表示範囲設定信号生成手段とを兼ねさせることができる。そして、その場合には、タッチパネルディスプレイに対して、スライドやタップ等の操作を行うことで視点を指定し、ピンチインやピンチアウト等の操作を行うことで表示範囲の拡がりを指定する構成とすることができる。
【００２６】
また、端末装置は、各家庭などに分散して配置してもよいし、観光センターのような場所にまとめて設置してもよい。
【００２７】
特に、本発明の第２の様態において、現地システムと中継装置との間の信号のやり取りは、無線又は有線の専用回線で行うことができる。なお、現地システムが宇宙空間にある場合には、中継装置としては、通信衛星を利用することができる。
【００２８】
また、特に、本発明の第２の様態において、現地システムと端末装置との間で信号のやり取りを中継装置を介して行う際、中継装置において何らかの信号変換処理を行ってもよい。したがって、本明細書及び特許請求の範囲において、「〜信号を『公衆ネットワーク及び前記中継装置』を介して受信」という場合、中継装置において信号変換処理を行う構成も含む。
【００２９】
上記目的を達成するために、ライブ映像配信システムに係る本発明の第３の様態は、第１又は第２の様態のライブ映像配信システムにおいて、
前記端末装置は、
利用者の身体の位置や動きを検知する身体検知手段を備え、
前記表示範囲設定信号生成手段は、前記身体検知手段が検知した結果に基づいて表示範囲設定信号を生成する、
ように構成した。
【００３０】
本発明の第３の様態において、端末装置の身体検知手段としては、加速度センサーや方位センサーを使用することができる。特に、端末装置の映像表示手段がＨＭＤである場合には、ＨＭＤに各種センサーを内蔵又は付属させ、それらのセンサーによって利用者の頭部の動きを検知する構成とすることができる。
【００３１】
上記目的を達成するために、ライブ映像配信システムに係る本発明の第４の様態は、第３の様態のライブ映像配信システムにおいて、
利用者の身体の運動を補助する身体運動補助手段を備える、
ように構成した。
【００３２】
本発明の第４の様態において、身体運動補助手段としては、トランポリンやバンジーコードを使用することができる。また、水を張ったプールを利用することができる。
【００３３】
上記目的を達成するために、ライブ映像配信システムに係る本発明の第５の様態は、第１の様態のライブ映像配信システムにおいて、
前記現地システムは、
所定の撮像範囲を撮像する撮像手段と、後記親装置及び／又は公衆ネットワークとの間で信号をやり取りするための通信手段１Ａと、を備える複数の子装置と；
前記子装置との間で信号をやり取りするための通信手段１Ｂと、公衆ネットワークとの間で信号をやり取りするための通信手段１Ｃと、を備える親装置と；
を備え、
前記子装置と前記端末装置とは対応付けられており、
前記子装置は、
前記撮像手段の撮像範囲を、自身に対応付けられた前記端末装置の前記表示範囲設定信号生成手段が生成し、公衆ネットワークを介して又は「公衆ネットワーク及び前記親装置」を介して受信した表示範囲設定信号が担う表示範囲設定情報に基づいて定める機能と；
前記撮像手段が撮像した結果に基づいて映像信号を生成し、該映像信号を前記親装置又は公衆ネットワークに送信する機能と；
を有し、
前記端末装置は、
自身に対応付けられた前記子装置が生成する映像信号を、公衆ネットワークを介して又は「公衆ネットワーク及び前記親装置」を介して受信する機能と；
前記受信した映像信号が担う映像情報に基づいて映像を表示する機能と；
を有する、
ように構成した。
【００３４】
本発明の第５の様態において、子装置と端末装置との間の信号のやり取りは、以下のケースが可能である。
［ケース１］
映像信号：子装置→親装置→公衆ネットワーク→端末装置
表示範囲設定信号：子装置←親装置←公衆ネットワーク←端末装置
［ケース２］
映像信号：子装置→公衆ネットワーク→端末装置
表示範囲設定信号：子装置←親装置←公衆ネットワーク←端末装置
［ケース３］
映像信号：子装置→親装置→公衆ネットワーク→端末装置
表示範囲設定信号：子装置←公衆ネットワーク←端末装置
【００３５】
上記目的を達成するために、ライブ映像配信システムに係る本発明の第６の様態は、第２の様態のライブ映像配信システムにおいて、
前記現地システムは、
所定の撮像範囲を撮像する撮像手段と、後記親装置との間で信号をやり取りするための通信手段１Ａ’と、を備える複数の子装置と；
前記子装置との間で信号をやり取りするための通信手段１Ｂと、中継装置との間で信号をやり取りするための通信手段１Ｄと、を備える親装置と；
を備え、
前記子装置と前記端末装置とは対応付けられており、
前記子装置は、
前記撮像手段の撮像範囲を、自身に対応付けられた前記端末装置の前記表示範囲設定信号生成手段が生成し、「公衆ネットワーク、前記中継装置及び前記親装置」を介して受信した表示範囲設定信号が担う表示範囲設定情報に基づいて定める機能と；
前記撮像手段が撮像した結果に基づいて映像信号を生成し、該映像信号を前記親装置に送信する機能と；
を有し、
前記端末装置は、
自身に対応付けられた前記子装置が生成する映像信号を、「公衆ネットワーク、前記中継装置及び前記親装置」を介して受信する機能と；
前記受信した映像信号が担う映像情報に基づいて映像を表示する機能と；
を有する、
ように構成した。
【００３６】
本発明の第５及び第６の様態において、現地システムは、現地システムを構成する複数の子装置が、各々、自身に対応付けられた端末装置の表示範囲設定信号生成手段が生成する表示範囲設定信号が担う表示範囲設定情報に基づいて撮像手段の撮像範囲を定め、撮像手段が撮像した結果に基づいて映像信号を生成することにより、表示範囲が異なる複数系統の映像信号を生成することができる。
【００３７】
子装置の撮像手段は、入射光を光電変換するイメージセンサー（ＣＣＤイメージセンサーやＣＭＯＳイメージセンサー等）によって構成することができる。
【００３８】
子装置の通信手段１Ａによって送信される映像信号は、それが公衆ネットワークに送信される場合には、圧縮映像信号とすることが好ましい。一方、それが親装置に送信される場合には、圧縮映像信号とするか、非圧縮映像信号とするかを選択することができる。また、子装置の通信手段１Ａ’から親装置に送信される映像信号は、圧縮映像信号とするか、非圧縮映像信号とするかを選択することができる。
【００３９】
なお、子装置の通信手段１Ａ又は通信手段１Ａ’が親装置に非圧縮映像信号を送信する場合には、親装置は、該非圧縮映像信号を圧縮符号化された映像信号に変換する信号変換手段を備えることが好ましい。そして、その場合には、撮像電気信号を圧縮映像信号に変換する映像信号変換は、その一部（撮像電気信号→非圧縮映像信号）を子装置で行い、残りの一部（非圧縮映像信号→圧縮映像信号）を親装置で行うことになる。
【００４０】
子装置と親装置との間の信号をやり取りは、無線又は有線の通信によって行うことができる。
【００４１】
親装置の通信手段１Ｃとしては、無線又は有線のＬＡＮルーターを使用することができる。
【００４２】
子装置と端末装置との対応付けは、各子装置及び各端末装置に対してＩＰアドレスを与えた上で、子装置から映像信号を送信する際には、対応付けられるべき端末装置のＩＰアドレスを宛先ＩＰアドレスとして指定し、端末装置から表示範囲設定信号を送信する際には、対応付けられるべき子装置のＩＰアドレスを送信先ＩＰアドレスとして指定することによって、実現できる。
【００４３】
なお、子装置と端末装置との対応付けは、恒常的なものである必要はなく、一時的なものであってよい。また、厳密に１対１で対応する必要もない。例えば、子装置１〜３が存在し、端末装置Ａ〜Ｆが存在する場合、以下で例示するように、対応付けが変化してもよい。
［時刻Ｔ１〜Ｔ２］
子装置１⇔端末装置Ａ、子装置２⇔端末装置Ｂ、子装置３⇔端末装置Ｃ
［時刻Ｔ３〜Ｔ４］
子装置１⇔端末装置Ｄ、子装置２⇔端末装置Ｅ、子装置３⇔（対応付けられる端末装置はない）
［時刻Ｔ５〜Ｔ６］
子装置１⇔端末装置Ａ、子装置２⇔端末装置Ｆ、子装置３⇔端末装置Ｄ
【００４４】
また、子装置からの映像信号を複数の端末装置で受信し、映像信号が担う映像情報に基づく映像を各々の映像表示手段で表示する構成とすることができる。ただし、その場合には、そのうちの一つの端末装置だけから表示範囲設定信号を送信できるような構成とする必要がある。
【００４５】
なお、子装置と端末装置との間で信号のやり取りを親装置又は「親装置及び中継装置」を介して行う際、親装置及び／又は中継装置において信号変換処理を行ってもよい。したがって、本明細書及び特許請求の範囲において、「〜信号を『公衆ネットワーク及び前記親装置』を介して受信」又は「〜信号を『公衆ネットワーク、前記中継装置及び前記親装置』を介して受信」という場合、親装置及び／又は中継装置において信号変換処理を行う構成も含む。
【００４６】
特に、「映像信号を、『公衆ネットワーク及び前記親装置』を介して受信」又は「映像信号を、『公衆ネットワーク、前記中継装置及び前記親装置』を介して受信」という場合、子装置が非圧縮映像信号を親装置に送信し、親装置が、受信した非圧縮映像信号を圧縮映像信号に変換した上で、中継装置又は公衆ネットワークに送信する構成も含む。
【００４７】
また、特に、「『公衆ネットワーク及び前記親装置』を介して受信した表示範囲設定信号」又は「『公衆ネットワーク、前記中継装置及び前記親装置』を介して受信した表示範囲設定信号」という場合、端末装置が、表示範囲設定一次信号（例えば、表示中心設定信号と表示幅設定信号とから構成される）を親装置に送信し、親装置が、受信した表示範囲設定一次信号を表示範囲設定二次信号に変換した上で子装置に送信する構成も含む。
【００４８】
上記目的を達成するために、ライブ映像配信システムに係る本発明の第７の様態は、第５又は第６の様態のライブ映像配信システムにおいて、
前記子装置は、前記撮像手段が同一の視座から撮像する場合でも、表示範囲が異なる映像信号を生成する機能を有する、
ように構成した。
【００４９】
本発明の第７の様態において、子装置は、撮像手段を３ウェイ雲台の上に設置し、３ウェイ雲台を３つの回転軸のまわりに回転させることで、撮像装置の前後・左右のティルト及びパンを実現する構成とすることができる。
【００５０】
また、子装置は、撮像手段を自由雲台の上に設置し、自由雲台のボールジョイントを回転させることによって、撮像装置の視線を設定する構成とすることができる。
【００５１】
また、子装置は、撮像手段にズーム機能を有せしめた上で、ズームを変化させることによって撮像手段の撮像範囲を変化させる構成とすることができる。また、撮像手段を反天周カメラや全天周カメラなどの広角カメラによって構成し、広角カメラからの撮像電気信号から一部の撮像範囲の撮像電気信号を切り出し、切り出した撮像電気信号を映像信号に変換する構成や、広角カメラからの撮像電気信号を映像信号に変換した後、変換した映像信号から一部の表示範囲の映像信号を切り出す構成とすることができる。
【００５２】
上記目的を達成するために、ライブ映像配信システムに係る本発明の第８の様態は、第５の様態のライブ映像配信システムにおいて、
前記子装置は、「軌道上、移動面上又は空間中の移動」を含む運動（以下「運動」と略記する）を行うための手段（以下「運動手段」と略記する）を備え、
前記端末装置は、運動制御信号生成手段を備え、該運動制御信号生成手段で生成した運動制御信号を公衆ネットワークに送信する機能を有し、
前記子装置は、自身に対応付けられた前記端末装置の前記運動制御信号生成手段で生成され、公衆ネットワークを介して又は「公衆ネットワーク及び前記親装置」を介して受信した運動制御信号が担う運動制御情報に基づいて運動を行う機能を有する、
ように構成した。
【００５３】
本発明の第８の様態において、子装置と端末装置との間の信号のやり取りは、以下のケースが可能である。
［ケースＩ］
映像信号：子装置→親装置→公衆ネットワーク→端末装置
運動制御信号：子装置←親装置←公衆ネットワーク←端末装置
［ケースII］
映像信号：子装置→公衆ネットワーク→端末装置
運動制御信号：子装置←親装置←公衆ネットワーク←端末装置
［ケースIII］
映像信号：子装置→親装置→公衆ネットワーク→端末装置
運動制御信号：子装置←公衆ネットワーク←端末装置
【００５４】
上記目的を達成するために、ライブ映像配信システムに係る本発明の第９の様態は、第６の様態のライブ映像配信システムにおいて、
前記子装置は、「軌道上、移動面上又は空間中の移動」を含む運動（以下「運動」と略記する）を行うための手段（以下「運動手段」と略記する）を備え、
前記端末装置は、運動制御信号生成手段を備え、該運動制御信号生成手段で生成した運動制御信号を公衆ネットワークに送信する機能を有し、
前記子装置は、自身に対応付けられた前記端末装置の前記運動制御信号生成手段で生成され、「公衆ネットワーク、前記中継装置及び前記親装置」を介して受信した運動制御信号が担う運動制御情報に基づいて運動を行う機能を有する、
ように構成した。
【００５５】
本発明の第８及び第９の様態において、子装置は、自身に対応付けられた端末装置の運動制御信号生成手段が生成する運動制御信号が担う運動制御情報に基づいて運動を行うことにより、撮像手段の視座が設定され、その結果として撮像手段の撮像範囲を自ずと定めることができる。したがって、子装置の運動制御信号は、本発明の第１乃至第５の発明における表示範囲設定信号の一種又は一部であり、子装置の運動制御信号生成手段は、本発明の第１乃至第７の様態における表示範囲設定信号生成手段の一種又は一部である。
【００５６】
子装置の運動手段は、親装置の内部又は親装置の外部に設けられた軌道上を移動する構成、親装置の内部又は親装置の外部に設けられた移動面上を移動する構成、及び、親装置の内部又は親装置の外部の一定範囲内の空間中に浮遊して移動する構成から選択する、又は、前記の構成を組み合わせた構成とすることができる。また、それらの構成に、子装置の回転軸又は回転中心のまわりの回転運動を行う構成を組み合わせた構成とすることができる。
【００５７】
なお、空間中に浮遊して移動する構成を採用する場合には、子装置の運動手段としては、ヘリコプターやプロペラ機などで使用されるような回転翼型の推進装置や、ジェット機やロケットなどで使用される噴流型の推進装置を使用することができる。
【００５８】
また、子装置が親装置の外部の空間中に浮遊して移動できる構成とした場合には、子装置が親装置の一定範囲外に逸脱しないように、子装置と親装置とをワイヤやロープなどの係留手段によって係留することが好ましい。特に、宇宙空間や海中のように、浮力があったり、重力が働かなかったりする状況下では、特段の推進装置が用いなくても、係留手段を緩めたり、引っ張ったりすることで、子装置は空間中に浮遊して移動することができる。この場合、ワイヤやロープなどの係留手段が子装置の運動手段に該当する。なお、子装置と親装置が有線で通信する場合には、該通信用のケーブルを、前記係留手段として兼用することができる。
【００５９】
端末装置の運動制御信号生成手段としては、１つ又は複数のレバーを操作することによって、前後への直進、左右への曲進、上昇、下降等の運動を制御するジョイスティックコントローラを使用することができる。その場合には、比例制御されるプロポ型ジョイスティックコントローラを使用することが好ましい。
【００６０】
また、端末装置の運動制御信号生成手段は、利用者の身体の位置や動きを検知して運動制御信号を生成する構成とすることができる。
【００６１】
特に、子装置が、「軌道上、移動面上又は空間中の移動」（以下「移動運動」と略記する）に加えて、自身の回転軸又は回転中心のまわりの回転運動を行うことができる構成の場合には、端末装置の運動制御信号生成手段として、前記ジョイスティックコントローラによって移動運動を制御する信号（以下「移動運動制御信号」と略記する）を生成し、利用者の頭部の動きを検知して回転運動を制御する信号（以下「回転運動制御信号」と略記する）を生成する構成とすることができる。そして、その場合には、端末装置が、それらの信号が担う情報に基づいて二次的な運動制御信号を生成し、公衆ネットワークに送信してもよいし、現地システムがそれらの信号を受信し、受信した信号が担う情報に基づいて映像信号の表示範囲を定めてもよい。特に、後者の場合、端末装置から送信される運動制御信号は、移動運動制御信号と回転運動制御信号とから構成されることになる。
【００６２】
なお、特に、端末装置の映像表示手段がＨＭＤである場合には、ＨＭＤに加速度センサーや方位センサーを内蔵又は付属させ、それらのセンサーによって利用者の頭部の動きを検知する構成とすることができる。
【００６３】
なお、子装置と端末装置との間で信号のやり取りを親装置又は「親装置及び中継装置」を介して行う際、親装置及び／又は中継装置において信号変換処理を行ってもよい。したがって、本明細書及び特許請求の範囲において、「〜信号を『公衆ネットワーク及び前記親装置』を介して受信」又は「〜信号を『公衆ネットワーク、前記中継装置及び前記親装置』を介して受信」という場合、親装置及び／又は中継装置において信号変換処理を行う構成も含む。
【００６４】
特に、「『公衆ネットワーク及び前記親装置』を介して受信した運動制御信号」又は「『公衆ネットワーク、前記中継装置及び前記親装置』を介して受信した運動制御信号」という場合、端末装置が、運動制御一次信号（例えば、移動運動制御信号と回転運動制御信号とから構成される）を親装置に送信し、親装置が、受信した運動制御一次信号を運動制御二次信号に変換した上で子装置に送信する構成も含む。
【００６５】
上記目的を達成するために、ライブ映像配信システムに係る本発明の第１０の様態は、第８又は第９の様態のライブ映像配信システムにおいて、
前記親装置は、前記運動制御信号が担う運動制御情報に基づかずに、前記子装置の運動を制御する独自の信号（以下「現地運動制御信号」と略記する）を生成し、前記子装置に送信する機能を有する、
ように構成した。
【００６６】
本発明の第１０の様態において、親装置は、子装置から受信した映像信号が担う映像情報に基づいて自動的に又はマニュアル操作によって現地運動制御信号を生成する構成とすることができる。
【００６７】
また、子装置は、「自身と親装置との位置関係」及び／又は「他の子装置を含む障害物との接近状況又は接触状況」を検知する接近検知手段を備え、該接近検知手段で検出した結果を親装置に送信する機能を有するともに、親装置は、受信した結果に基づいて自動的に又はマニュアル操作によって現地運動制御信号を生成する構成とすることができる。
【００６８】
なお、子装置が、運動制御信号を、親装置を介さず、公衆ネットワーク又は「公衆ネットワーク及び前記中継装置」を介して受信する場合（上記の［ケースIII］の場合）、子装置は、運動制御信号と現地運動制御信号の双方を受信することになるが、その場合には、子装置の運動は、現地運動制御信号によって優先的に制御される構成とすることが好ましい。
【００６９】
上記目的を達成するために、ライブ映像配信システムに係る本発明の第１１の様態は、第８乃至第１０の様態のいずれか一つライブ映像配信システムにおいて、
前記子装置は、前記運動制御信号が担う運動制御情報と前記現地運動制御情報が担う運動制御情報に基づかずに、自律的に運動を行う機能を有する、
ように構成した。
【００７０】
本発明の第１１の様態において、子装置は、撮像手段が撮像した結果に基づいて、運動手段を自律的に制御する構成とすることができる。
【００７１】
また、子装置は、「自身と親装置との位置関係」及び／又は「他の子装置を含む障害物との接近状況又は接触状況」を検知する接近検知手段を備えるとともに、該接近検知手段の検出結果の情報に基づいて、運動手段を自律的に制御する構成とすることができる。
【００７２】
上記目的を達成するために、ライブ映像配信システムに係る本発明の第１２の様態は、第１乃至１１のいずれか一つの様態のライブ映像配信システムにおいて、
前記現地システムは、現地システムの周囲の音声を集音して音声信号を生成する音声信号生成手段を備え、
前記端末装置は、
放音手段を備え；
現地システムの音声信号生成手段が生成した音声信号を、公衆ネットワーク又は「公衆ネットワーク及び中継装置」を介して受信する機能と；
前記受信した音声信号が担う音声情報に基づいて音声を放出する機能と；
を有する、
ように構成した。
【００７３】
本発明の第１２の様態において、現地システムの音声信号生成手段を複数のマイクロフォンで構成することにより、ステレオ音声信号を送信するようにすることができる。そして、その場合には、端末装置は、左右の放音部から音声を放出構成とすることが好ましい。
【００７４】
本発明の第１２の様態において、現地システムは、ＭＰＥＧ規格によって圧縮符号化した映像・音声信号を送信する構成とすることで、映像（ビデオ）情報と音声（オーディオ）情報を一体的に扱うことができる。
【００７５】
端末装置は、公衆ネットワーク又は「公衆ネットワーク及び前記中継装置」を介して受信した音声信号が担う音声情報に基づいて音声を出力する、スピーカなどの放音手段を備えることが好ましい。
【００７６】
上記目的を達成するために、ライブ映像配信システムに係る本発明の第１３の様態は、第１乃至１２のいずれか一つの様態のライブ映像配信システムにおいて、
前記現地システムは可搬型である、
ように構成した。
【００７７】
上記目的を達成するために、ライブ映像配信システムに係る本発明の第１４の様態は、第１３の様態のライブ映像配信システムにおいて、
前記親装置は長距離移動手段を備える、
ように構成した。
【００７８】
本発明の第１４の様態において、親装置の長距離移動手段としては、自動車、船舶、航空機、潜水船、宇宙船等の汎用的な長距離移動手段を、必要に応じて改造した上で、使用することができる。また、移動に際しては、親装置に運転員が乗ってマニュアル操作で運転することも、親装置に運転員が乗らずにマニュアル操作で運転することも、親装置が自律的に移動することも可能である。
【００７９】
上記目的を達成するために、ライブ映像配信システムに係る本発明の第１５の様態は、第１乃至第１４のいずれか一つの様態のライブ映像配信システムを用いたライブ映像マルチ配信システムであって、
互いに離れた場所に設置された複数の前記現地システムと、
複数の前記端末装置と、
から構成され、
前記端末装置は、現地システムを選択する手段を備える、
ように構成した。
【発明の効果】
【００８０】
本発明のライブ映像配信システムによれば、利用者は、マニュアル操作や身体運動によって、手元の端末装置の表示範囲設定信号生成手段を作動させることによって、現地システムの映像信号生成手段が生成する映像信号のうち、手元の端末装置に対応付けられた系統の映像信号の表示範囲を設定し、その表示範囲の内部にある観察対象の映像を手元の端末装置の映像表示手段に表示させることができる。このため、利用者自身が観察したい対象をリアルタイムで観察することができる。しかも、複数の利用者が、相互に独立に映像の表示範囲を設定することができるので、各々が観察したい別個の対象をリアルタイムで同時に観察することができる。なお、この際、現地システムの映像信号生成手段が生成する映像信号の系統と端末装置とは対応付けられているため、他の利用者のマニュアル操作や身体運動によって、自らの手元の端末装置に表示される映像の表示範囲が変えられるような問題は生じない。
【００８１】
したがって、現地システムを秘境、あるいは、宇宙空間、深海といったフロンティア空間に設置し、端末装置を遠隔地に設置することで、遠隔地にいる利用者に対して、「疑似的な観光体験」を提供できるようになる。このため、利用者は、秘境やフロンティア空間に赴く必要がないため、希少な自然環境や貴重な遺跡が破壊されることがなくなる。また、現地に赴くためのコストが不要となり、無重力や高気圧などによって身体に過大な負荷がかかったり、現地への移動手段の破損によって生命が危険にさらされたりするリスクを回避又は軽減できる。
【００８２】
また、現地システムと端末装置との間の信号のやり取りは、公衆ネットワーク又は「公衆ネットワーク及び中継装置」を介して行うので、端末装置を作動させる利用者が、観察対象が存在する現地から遠距離の場所にいても問題がない。特に、公衆ネットワークとしてインターネットを利用する場合には、インターネットへのアクセスの問題を除けば、地球上であれば、距離的な制約はない。
【００８３】
なお、本発明のライブ映像配信システムは、秘境やフロンティア空間における（疑似）観光だけではなく、従来の観光地での（疑似）観光にも適用でき、さらには、高温・低温、高汚染、高放射線量などの過酷環境地域での調査や監視にも適用できる。特に、過酷環境地域での調査や監視においては、現地に滞在する必要性がなくなるか、滞在人数や日数を提言することができるため、現地滞在に伴う身体への負荷や生命の危険のリスクを軽減できる。
【００８４】
特に、本発明の第１の様態のライブ映像配信システムによれば、現地システムが直接に公衆ネットワークにアクセスするため、中継装置を設ける必要がない。
【００８５】
一方、特に、本発明の第２の様態のライブ映像配信システムによれば、現地システムは中継装置と通信するため、観察対象が、例えば宇宙空間や海中のように、アクセス可能な公衆ネットワークが存在しない地域や領域に存在するであっても、観察を行うことができる。
【００８６】
また、特に、本発明の第３の様態のライブ映像配信システムによれば、端末装置の表示手段に表示される映像の表示範囲が、利用者の身体の位置や動きに対応して設定されるため、現地にある観察対象を臨場感をもって観察することができる。
【００８７】
また、特に、本発明の第４の様態のライブ映像配信システムによれば、身体運動補助手段なしでは実現できないような身体の運動が実現でき、しかも、端末装置の表示手段に表示される映像の表示範囲は、その運動に対応して設定しているため、多様な視覚体験を提供することができる。特に、現地システムが海中や宇宙空間に設置されており、一方、身体運動補助手段として水を張ったプールを利用する場合には、利用者がプールで水中遊泳することで、あたかも宇宙遊泳や深海遊泳をするような「模擬的な観光体験」を提供することができる。
【００８８】
また、特に、本発明の第５及び第６の様態のライブ映像配信システムによれば、現地システムは、現地システムを構成する複数の子装置の各々が、自身に対応付けられた端末装置の表示範囲設定信号生成手段が生成する表示範囲設定信号が担う表示範囲設定情報に基づいて撮像手段の撮像範囲を定め、撮像手段が撮像した結果に基づいて映像信号を生成することにより、表示範囲が異なる複数系統の映像信号を生成することができる。このため、端末装置の利用者が多数になって、多数の系統の映像信号を生成・送信する必要が生じた場合でも、子装置を増やすことによって容易に対応することができる。
【００８９】
また、特に、本発明の第７の様態のライブ映像配信システムによれば、子装置が移動運動を行って撮像手段の視座を移動させなくとても、映像の表示範囲を変更することができる。このため、子装置の周囲にある対象であれば、観察対象を迅速に変更することができる。
【００９０】
また、特に、本発明の第８及び第９の様態のライブ映像配信システムによれば、子装置は運動を行うことができるため、子装置の撮像装置の視座を自由に移動させることができる。このため、利用者は、広い範囲に存在する観察対象を観察することができる。特に、地上から空中に浮遊する機能を有する場合には、空中から地上を観察することができる。また、宇宙空間や海中に浮遊する機能を有する場合には、疑似的に宇宙遊泳や海中遊泳を行っているような体験を提供することができる。
【００９１】
また、特に、本発明の第１０の様態のライブ映像配信システムによれば、子装置は、遠隔地にいる利用者のマニュアル操作や身体運動の結果として生成される運動制御信号に基づいて運動を行うだけではなく、親装置が生成して子装置に送信する現地運動制御信号に基づいた運動を行うことができる。これにより、子装置相互の位置関係や、子装置と親装置又はその他の障害物との位置関係を、現地の監視者又はセンサーが検知し、その検知結果に基づいて親装置から現地運動制御信号を送信することにより、子装置相互の衝突や、子装置と親装置又はその他の障害物との衝突を回避することができる。
【００９２】
また、特に、本発明の第１１の様態のライブ映像配信システムによれば、子装置は、遠隔地にある端末装置から送信される運動制御信号や、親装置から送信される現地運動制御信号に基づいて運動を行うだけではなく、自律的に運動を行うことができる。このため、子装置は、子装置自身の自律的な運動によって、子装置相互の衝突や、子装置と親装置又はその他の障害物との衝突を回避することができる。
【００９３】
また、特に、本発明の第１２の様態のライブ映像配信システムによれば、遠隔地にいる利用者は、現地の観察対象を視覚的に観察するだけではなく、現地の状況を聴覚的にも認識できるようになる。したがって、現地システムを観光地（秘境、フロンティア空間を含む）に設置した場合には、臨場感が増した「疑似的な観光体験」を提供することができる。
【００９４】
また、特に、本発明の第１３の様態のライブ映像配信システムによれば、現地システムを様々な場所に移動させて使用することができる。
【００９５】
また、特に、本発明の第１４の様態のライブ映像配信システムによれば、現地システムは、親装置の長距離移動手段によって、観察対象が存在する場所に移動することができる。特に、親装置の長距離移動手段として、自動車、船舶、航空機、潜水船、宇宙船等の汎用的な長距離移動手段を使用した場合、子装置を小型・軽量化することによって、汎用的な長距離移動手段に、人間が実際に搭乗するよりも多数の子装置を積載することができる。
【００９６】
また、特に、本発明の第１５の様態のライブ映像配信システムによれば、現地システムを異なる観光地（秘境、フロンティア空間を含む）に設置し、端末装置を用いて現地システムを選択するような構成とすることによって、一箇所に留まる利用者に対して、複数の観光地における「疑似的な観光体験」を提供することができる。
【図面の簡単な説明】
【００９７】
【図１】本発明の実施例１に係るライブ映像配信システムの構成及び機能を説明するためのブロック図である。
【図２】本発明の実施例２に係るライブ映像配信システムのうち、現地システム（親装置及び子装置）と中継装置の構成及び機能を説明するためのイメージ図である。
【図３】本発明の実施例３に係るライブ映像配信システムのうち、現地システム（親装置及び子装置）と中継装置の構成及び機能を説明するためのイメージ図である。
【図４】撮像手段の撮像範囲、視座、視線及び視点（撮像範囲の中心）を説明するための説明図である。
【発明を実施するための形態】
【００９８】
以下、図面を参照して本発明の実施形態について説明する。ただし、本発明はかかる実
施形態に限定されず、その技術思想の範囲内で種々の変更が可能である。
【実施例１】
【００９９】
図１は、本発明の実施例１に係るライブ映像配信システムの構成及び機能を説明するためのブロック図である。
本実施例においては、ライブ映像配信システムは、子装置Ａ_1A〜子装置Ｆ_1Fと親装置2から構成される現地システム、中継装置3、及び、端末装置Ａ_5A〜端末装置Ｆ_5Fから構成される。
【０１００】
子装置Ａ_1A〜子装置Ｆ_1Fは、陸上を移動する親装置2に積載されて現地（例えば、秘境を含む観光地、高温・低温、高汚染、高放射線量などの過酷環境地域など）まで長距離移動し、現地到着後に、親装置2の外部に放出されて、前後上下への直進運動や上下左右への旋回運動を行ったり、自身の回転軸又は回転中心のまわりの回転運動を行ったりする。ただし、子装置Ａ_1A〜子装置Ｆ_1Fと親装置2とはケーブルで接続されているため、子装置Ａ_1A〜子装置Ｆ_1Fが移動できるのは、ケーブルが伸びきる範囲内に限定される。
【０１０１】
一方、親装置2と中継装置3は無線通信によって情報のやり取りをし、中継装置3と端末装置Ａ_5A〜端末装置Ｆ_5Fは、インターネット4との間で情報をやり取りする。
【０１０２】
また、子装置Ａ_1A〜子装置Ｆ_1Fには、それぞれ現地システム内で定義された識別番号が割り振られ、一方、端末装置Ａ_5A〜端末装置Ｆ_5Fを構成する通信ユニットには、それぞれＩＰアドレスが与えられている。前記識別番号と前記ＩＰアドレスとが対応付けられることによって、子装置Ａ_1Aと端末装置Ａ_5A、子装置Ｂ_1Bと端末装置Ｂ_5B、子装置Ｃ_1Cと端末装置Ｃ_5C、子装置Ｄ_1Dと端末装置Ｄ_5D、子装置Ｅ_1Eと端末装置Ｅ_5E、子装置Ｆ_1Fと端末装置Ｆ_5Fは、それぞれ対応付けられている。
【０１０３】
子装置Ａ_1A〜子装置Ｆ_1Fは、通常のヘリコプターと同様にメインローターとテールローターを備えており、それらの回転によって空中を浮遊して、直進運動、旋回運動及び回転運動を行うことができる。また、子装置Ａ_1A〜子装置Ｆ_1Fは、運動制御手段を備えており、該運動制御手段は、親装置2からケーブルを介して送信される運動制御二次信号に基づいて、ローターの回転数、ピッチ角、回転面の傾き等を制御する。
【０１０４】
また、子装置Ａ_1A〜子装置Ｆ_1Fは、それぞれ、２つのＣＭＯＳカメラモジュールと、２つのイメージセンサーからの撮像電気信号を非圧縮の３Ｄ映像信号に変換する映像信号変換手段とを備えており、生成された３Ｄ非圧縮映像信号を、ケーブルを介して親装置2に送信する。
【０１０５】
なお、本実施例では、撮像手段としてＣＭＯＳカメラモジュールを使用しているが、それ以外の撮像手段（例えばＣＣＤカメラモジュールなど）を使用してもよい。
【０１０６】
さらに、子装置Ａ_1A〜子装置Ｆ_1Fは、前記イメージセンサーと前記映像信号変換手段とによって生成される非圧縮映像信号が担う映像情報に基づき、他の子装置、親装置及びそれら以外の障害物への接近を判断する接近判断手段を備えている。そして、前記運動制御手段は、親装置2から送信される前記運動制御二次信号に加えて、前記接近判断手段が判断した結果にも基づいて、ローターの回転数、ピッチ角、回転面の傾き等を制御することにより、他の子装置、親装置及びそれら以外の障害物との接触を回避することができる。
【０１０７】
また、子装置Ａ_1A〜子装置Ｆ_1Fは、マイクロフォンを備えており、それぞれが集音した音声信号を、ケーブルを介して親装置2に送信する。
【０１０８】
前記３Ｄ非圧縮映像信号と音声信号は、ＨＤＭＩ（登録商標）（High-Definition Multimedia Interface）信号又はＭＨＬ（登録商標）（Mobile High-definition Link）信号として伝送される。また、この実施形態においては、ケーブルを用いた有線伝送が採用されているが、これに代えて、WirelessＨＤやＷＨＤＩ（Wireless Home Digital Interface）などの規格に則った無線伝送を採用することも可能である。
【０１０９】
一方、親装置2は、子装置Ａ_1A〜子装置Ｆ_1Fに運動制御二次信号を送信するとともに、子装置Ａ_1A〜子装置Ｆ_1Fから３Ｄ非圧縮映像信号及び音声信号を受信するためのインターフェース部21を備えている。また、親装置2は、情報処理を担うサーバ22と、中継装置3との間で無線信号のやり取りをするための送受信アンテナ23と、親装置2が長距離移動するための走行装置24を備えている。
【０１１０】
走行ユニット24は、通常の自動車と同様の車輪及びその駆動手段（原動機及び／又は電動機、トランスミッション等）からなる。なお、走行ユニット24は、親装置2に搭乗した運転者のマニュアル操作によって走行させても、遠隔操作によって走行させても、又は、自動走行させてもよい。このうち、遠隔操作による走行や自動走行の場合には、駆動手段はサーバ22からの信号によって制御される。
【０１１１】
サーバ22は、送受信アンテナ23から受信した運動制御一次信号に基づき、子装置Ａ_1A〜子装置Ｆ_1Fの移動を制御する運動制御二次信号を生成し、各子装置が接続されているインターフェース部21の各ポートに送信する。該運動制御二次信号は、ローターの回転数、ピッチ角、回転面の傾き等の情報を含む。
【０１１２】
なお、前記運動制御一次信号には、それを発信した端末装置を構成する通信ユニットに与えられたＩＰアドレスが付帯しており、サーバ22は、該ＩＰアドレスに基づき、対応する識別番号が割り振られた子装置が接続されているインターフェース部21のポートに、前記運動制御二次信号を送信する。
【０１１３】
また、サーバ22は、各子装置が接続されているインターフェース部21から、子装置Ａ_1A〜子装置Ｆ_1Fのイメージセンサーが撮像した撮像電気信号を映像信号変換手段が変換した３Ｄ非圧縮映像信号と、子装置Ａ_1A〜子装置Ｆ_1Fのマイクロフォンが集音した音声信号とを受信し、それぞれ、ストリーミング配信可能な映像信号及び音声信号に変換して、送受信アンテナ23に送信する。特に、３Ｄ非圧縮映像信号については、圧縮符号化処理を行い、３Ｄ圧縮映像信号として送信する。
【０１１４】
なお、サーバ22は、前記３Ｄ圧縮映像信号及び音声信号を送信する際には、インターフェース部21の各ポートに接続されている子装置の識別番号に基づき、最終送信先の端末装置を決定した上で、該端末装置の通信ユニットに割り振られたＩＰアドレスを送信先ＩＰアドレスとするインターネット・プロトコルに準拠した信号として送信する。
【０１１５】
なお、サーバ22は、インターフェース部21から受信した３Ｄ非圧縮映像信号に基づき、子装置相互の接近、各子装置と親装置及びそれら以外の障害物への接近を判断する接近判断機能を有する。そして、サーバ22は、送受信アンテナ23から受信した運動制御一次信号に加えて、前記接近判断機能によって判断された結果にも基づいて、運動制御二次信号を生成してインターフェース部21に送信する。これによって、各子装置が、他の子装置、親装置及びそれら以外の障害物との接触を回避することができる。
【０１１６】
送受信アンテナ23は、サーバ22から受信した３Ｄ非圧縮映像信号及び音声信号を、３ＧやＬＴＥなどのモバイル信号として中継装置3に送信する。
【０１１７】
一方、中継装置3は、モバイル基地局であり、送受信アンテナ23から受信したモバイル信号を受信し、必要な変換を行った上で、インターネット4に送信する。
【０１１８】
一方、端末装置Ａ_5A〜端末装置Ｆ_5Fは、操作コントローラ、ＩＰアドレスが与えられた通信ユニット、没入型３Ｄ−ＨＭＤ及びヘッドフォンから構成される。
【０１１９】
操作コントローラは、通常のラジコンヘリのプロポ型ジョイスティックコントローラと同様に、利用者のレバー操作やダイヤル操作に基づいて運動制御一次信号を生成し、該運動制御一次信号を通信ユニットに送信する。
【０１２０】
通信ユニットは、操作コントローラから受信した運動制御一次信号を、与えられたＩＰアドレスを送信元ＩＰアドレスとするインターネット・プロトコルに準拠した信号に変換し、内蔵するインターネットインターフェースを経由してインターネットに送信する。
【０１２１】
また、通信ユニットは、内蔵するインターネットインターフェースを経由してインターネットから前記ストリーミング配信された３Ｄ圧縮映像信号と音声信号を受信し、必要な復号化処理を行った上で、ＨＭＤ及びヘッドフォンに送信する。特に、３Ｄ圧縮映像信号については、伸張復号化処理を行い、３Ｄ非圧縮映像信号として送信する。
【０１２２】
ＨＭＤは、通信ユニットから受信した３Ｄ非圧縮映像信号に基づき、左右の投射部から映像を投射する。これにより、利用者は現場の観察対象を含む３Ｄ映像を楽しむことができる。また、ヘッドフォンは、通信ユニットから受信した音声信号に基づき、左右の放音部から音声を放出する。これにより、利用者は現場の音声を楽しむことができる。
【０１２３】
なお、ＨＭＤとヘッドフォンとは一体的な装置とすることができる。その際、前記通信ユニットからデコードされた３Ｄ非圧縮映像信号及び音声信号の送信は、ＨＤＭＩ（登録商標）信号又はＭＨＬ（登録商標）信号として有線伝送することができる。又は、WirelessＨＤ信号やＷＨＤＩ信号として無線伝送することができる。
【０１２４】
また、本実施例では、運動制御一次信号は、利用者が操作コントローラを操作することによって生成される構成としているが、ＨＭＤに加速度センサー及び方位センサーを付属又は内蔵させ、それらのセンサーの検知結果に基づいて生成される構成とすることもできる。
【０１２５】
さらに、利用者は前記ＨＭＤとヘッドフォンを装着した上で、トランポリンやバンジーコードなどの身体運動補助手段の援けを借りて、上下運動や回転運動を行うことができる。その場合、ＨＭＤの左右の投射部には、利用者の身体運動に連動した映像が表示されるので、利用者は、あたかも現地（特に秘境を含む観光地）で上下運動や回転運動を行っているかのような臨場感をもって映像を楽しむことができる。
【０１２６】
なお、利用者の身体運動が激しすぎ、利用者の視線が急激に移動する場合、子装置のＣＭＯＳカメラモジュールの視線の移動が追従できないことがある。このような場合、撮像手段として３６０°の視野角（立体角）をカバーする全天周カメラを使用した上で、利用者の視線に対応した撮像範囲の撮像電気信号、又は、利用者の視線に対応した表示範囲の映像信号を電子的に生成する構成にしておけば、このような追従遅れを回避することができる。
【０１２７】
また、本実施例における子装置と端末装置とは、一対で使用することができる。その場合、親装置が担っている機能のうち、走行ユニット24が担っている長距離移動機能以外の機能、すなわち、サーバ22及び通信アンテナ23が担っている信号変換処理機能及び通信機能を、子装置に担わせる構成とすることができる。
【実施例２】
【０１２８】
図２は、本発明の実施例２に係るライブ映像配信システムのうち、現地システム（親装置及び子装置）と中継装置の構成及び機能を説明するためのイメージ図である。
本実施例においては、ライブ映像配信システムは、子装置Ａ_1A〜子装置Ｆ_1Fと親装置2から構成される現地システム、中継装置Ａ_3Aと中継装置Ｂ_3B、及び、端末装置Ａ_5A〜端末装置Ｆ_5F（図示されない）から構成される。
【０１２９】
子装置Ａ_1A〜子装置Ｆ_1Fは、海上及び海中を移動する親装置2に搭載されて深海まで長距離移動し、現地到着後に、親装置2の外部に放出されて、上下左右に移動したり回転したりする。ただし、子装置Ａ_1A〜子装置Ｆ_1Fと親装置2とはケーブルで接続されているため、子装置Ａ_1A〜子装置Ｆ_1Fが移動できるのは、ケーブルが伸びきる範囲内に限定される。
一方、親装置2と中継装置Ａ_3Aはケーブルを介して情報のやり取りをし、中継装置Ａ_3Aと中継装置Ｂ_3Bは無線通信によって情報のやり取りをし、中継装置Ｂ_3Bと端末装置Ａ_5A〜端末装置Ｆ_5F（図示されない）は、インターネット4との間で情報をやり取りする。
【０１３０】
また、子装置Ａ_1A〜子装置Ｆ_1Fと端末装置Ａ_5A〜端末装置Ｆ_5F（図示されない）は、それぞれ、識別番号及びＩＰアドレスが割り振られ、実施例１と同様に対応付けられる。
【０１３１】
子装置Ａ_1A〜子装置Ｆ_1Fの構成と機能は、基本的には、実施例１と同じであるが、海中での移動は、スクリュープロペラの回転、舵の角度、海水の注入・排水によって行う。
【０１３２】
一方、親装置2は、海上及び海中を自力航行可能な潜水船であり、その内部に、実施例１と同様の機能を有するインターフェース部21及びサーバ22（図示されない）を備える。ただし、実施例１とは異なり、送受信アンテナの代わりに、中継装置Ａ_3Aと接続されるケーブルを接続するインターフェース部を備える。
【０１３３】
また、中継装置Ａ_3Aは、親装置2の上方海面に停泊する通信船であり、親装置2との間でケーブルを介して映像信号、音声信号及び運動制御信号のやり取りをする一方、中継装置Ｂ_3Bとの間で、無線通信によって映像信号、音声信号及び運動制御信号のやり取りをする。一方、中継装置Ｂ_3Bは陸上に設置されたモバイル基地局であり、実施例１における中継装置３と同様の機能を有する。
【０１３４】
一方、端末装置Ａ_5A〜端末装置Ｆ_5Fは、ヘッドフォン一体型ＨＭＤであり、ＨＭＤの内部には、コントロールユニット、通信ユニット、加速度センサー及び方位センサーが内蔵されている。また、ヘッドフォン一体型ＨＭＤは防水仕様となっており、利用者はヘッドフォン一体型ＨＭＤ頭部に装着し、必要な潜水具を装着した上で、プールに張られた水中を遊泳する。
【０１３５】
コントロールユニットは、加速度センサー及び方位センサーからの信号に基づき、利用者の頭部の位置と顔面（視線）の向きを特定し、その結果に基づいて運動制御一次信号を生成し、送信ユニットに送信する。送信ユニットは、受信した運動制御一次信号を、実施例１と同じように、内蔵するインターネットインターフェースを経由してインターネットに送信する。
【０１３６】
また、ヘッドフォン一体型ＨＭＤの左右の投射部には、通信ユニットから受信した３Ｄ非圧縮映像信号に基づいて映像が投射される。この映像は、前記コントロールユニットが特定した利用者の頭部の位置と顔面（視線）の向きの動きに連動して変化するため、利用者は、あたかも深海中を遊泳しているかのような感覚をもって映像を楽しむことができる。
【０１３７】
なお、本実施例における子装置と端末装置（ヘッドフォン一体型ＨＭＤ）とは、一対で使用することができる。その場合、親装置が担っている機能のうち、サーバ22及び通信アンテナ23が担っている信号変換処理機能及び通信機能を子装置に担わせる構成とすることができる。
【０１３８】
また、本実施例における端末装置（ヘッドフォン一体型ＨＭＤ）は、本発明に係るライブ映像配信システムの現地システムとは独立に使用することも可能である。例えば、観光地の情景を多数の撮像手段を用いて様々な位置・角度からあらかじめ撮像しておき、取得された多数の撮像データに基づいて、任意の視点における映像信号を生成する任意視点
（Free Viewpoint）映像生成装置と組み合わせて使用することが可能である。この場合、任意視点映像生成装置は、ヘッドフォン一体型ＨＭＤのコントローラが生成する運動制御一次信号が担う視点情報に基づいて、映像信号を生成する。
【実施例３】
【０１３９】
図３は、本発明の実施例３に係るライブ映像配信システムのうち、現地システム（親装置及び子装置）と中継装置の構成及び機能を説明するためのイメージ図である。
この実施形態においては、ライブ映像配信システムは、子装置Ａ_1A〜子装置Ｆ_1Fと親装置2から構成される現地システム、中継装置Ａ_3Aと中継装置Ｂ_3B、及び、端末装置Ａ_5A〜端末装置Ｆ_5F（図示されない）から構成される。
【０１４０】
子装置Ａ_1A〜子装置Ｆ_1Fは、地上から発射され、大気圏内外を飛行する親装置2に搭載されて大気圏外まで長距離移動し、現地到着後に、親装置2の外部に放出されて、上下左右に移動したり回転したりする。ただし、子装置Ａ_1A〜子装置Ｆ_1Fと親装置2とはケーブルで接続されているため、子装置Ａ_1A〜子装置Ｆ_1Fが移動できるのは、ケーブルが伸びきる範囲内に限定される。
一方、親装置2と中継装置Ａ_3A、中継装置Ａ_3Aと中継装置Ｂ_3Bは、それぞれ無線通信によって情報のやり取りをし、中継装置Ｂ_3Bと端末装置Ａ_5A〜端末装置Ｆ_5F（図示されない）は、インターネット4との間で情報をやり取りする。
【０１４１】
また、子装置Ａ_1A〜子装置Ｆ_1Fと端末装置Ａ_5A〜端末装置Ｆ_5F（図示されない）は、それぞれ、識別番号及びＩＰアドレスが割り振られ、実施例１と同様に対応付けられる。
【０１４２】
子装置Ａ_1A〜子装置Ｆ_1Fの構成と機能は、基本的には、実施例１と同じであるが、大気圏外での移動は、ジェット噴射によって行う。
【０１４３】
一方、親装置2は、大気圏外に飛行可能な宇宙船であり、その内部に、実施例１と同様の機能を有するインターフェース部21及びサーバ22（図示されない）を備える。また、実施例１と同様に、中継装置Ａ_3Aとの間で無線信号をやり取りする。なお、親装置2は、発射時に使用したロケット（本明細書及び特許請求の範囲でいう「長距離移動手段」の一部）を切り離す構成とすることができる。
【０１４４】
また、中継装置Ａ_3Aは、大気圏外に存在する通信衛星であり、親装置2及び中継装置Ｂ_3Bとの間で、無線通信によって映像信号、音声信号及び運動制御信号のやり取りをする。一方、中継装置Ｂ_3Bは地上に設置されたモバイル基地局であり、実施例１における中継装置３と同様の機能を有する。
【０１４５】
一方、端末装置Ａ_5A〜端末装置Ｆ_5F（図示されない）の構成と機能は、基本的には、実施例２と同じである。ヘッドフォン一体型ＨＭＤの左右の投射部には、通信ユニットから受信した３Ｄ非圧縮映像信号に基づいて映像が投射される。この映像は、コントロールユニットが特定した利用者の頭部の位置と顔面（視線）の向きの動きに連動して変化するため、利用者は、あたかも、宇宙空間中を遊泳しているかのような感覚をもって映像を楽しむことができる。
【産業上の利用可能性】
【０１４６】
本発明は、現地システムを構成する映像信号生成手段（撮像手段、映像信号変換手段、運動手段）、音声信号生成手段及び通信手段、端末装置を構成する表示範囲設定信号生成手段（身体検知手段、運動制御信号生成手段）、映像表示手段、放音手段及び通信手段に係る装置を製造する産業において利用することができる。また、現地システムの長距離移動手段として利用可能な自動車、船舶、宇宙船（宇宙船を大気圏外に運ぶロケットを含む）を製造する産業において利用することができる。さらに、ライブ映像配信システムを使用した観察に係るサービス（特に観光サービス）を提供する産業においても利用することができる。
【符号の説明】
【０１４７】
1A‥‥‥子装置Ａ
1B‥‥‥子装置Ｂ
1C‥‥‥子装置Ｃ
1D‥‥‥子装置Ｄ
1E‥‥‥子装置Ｅ
1F‥‥‥子装置Ｆ
2‥‥‥親装置
21‥‥‥インターフェース部
22‥‥‥サーバ
23‥‥‥送受信アンテナ
24‥‥‥走行ユニット 
3‥‥‥中継装置
3A‥‥‥中継装置Ａ
3B‥‥‥中継装置Ｂ
4‥‥‥インターネット
5A‥‥‥端末装置Ａ
5B‥‥‥端末装置Ｂ
5C‥‥‥端末装置Ｃ
5D‥‥‥端末装置Ｄ
5E‥‥‥端末装置Ｅ
5F‥‥‥端末装置Ｆ
61‥‥‥撮像手段
611‥‥‥視座
62‥‥‥視線
63‥‥‥撮像範囲
631‥‥‥視点（撮像範囲の中心）
【図１】
2019213207.tif 000003
【図２】
2019213207.tif 000004
【図３】
2019213207.tif 000005
【図４】
2019213207.tif 000006