(57)【要約】  本発明は二つ以上の動画を端末機にローディングして多様な角度の動画を見せる空間映像再生方法及びそのシステムに関するもので、特に再生中の動画及びこれと隣接する動画を一緒にローディングして所望の角度の動画をドラッグ（ｄｒａｇ）して選択し、選択された動画の所望の部分を上下左右移動及びズームイン（ｚｏｏｍ  ｉｎ）、ズームアウト（ｚｏｏｍ  ｏｕｔ）などを通じて自在にリアルタイムで見られるように構成された空間映像再生方法及びそのシステムに関するものである。
2017532918.tif 000002
【特許請求の範囲】
【請求項１】
サーバーが端末機から動画選択信号を待つ待機段階と、
サーバーが前記動画選択信号によって選択された動画を前記端末機に送信し、端末機が前記選択された動画を再生する再生段階と、
前記端末機のアングル変化信号によって他の角度の動画に切り替えるアングル変化段階と、を含むことを特徴とする３６０度空間映像再生方法。
【請求項２】
前記待機段階は、前記サーバーが二つ以上の動画撮影手段によって生成された二つ以上の動画が保存されたレイヤー（ｌａｙｅｒ）ＤＢを構築するＤＢ構築段階を含むことを特徴とする請求項１に記載の３６０度空間映像再生方法。
【請求項３】
前記再生段階は、前記サーバーが前記選択された動画に隣接する一つ以上の隣接動画を前記端末機に送信する段階を含むことを特徴とする請求項１または２に記載の３６０度空間映像再生方法。
【請求項４】
前記アングル変化段階は、前記サーバーが前記他の角度の動画に隣接する一つ以上の隣接動画を前記端末機に送信する段階を含むことを特徴とする請求項１または２に記載の３６０度空間映像再生方法。
【請求項５】
動画再生と所望の角度の動画を選択することができるようにするアプリケーションが設置される端末機と、
前記端末機と有無線ネットワークを通じてデータを送受信するサーバーと、
前記サーバーに備えられ、動画を保存するレイヤーＤＢと、を含むことを特徴とする３６０度空間映像再生システム。
【請求項６】
前記サーバーは、前記端末機から送信された動画選択信号またはアングル変化信号によって該当動画を検索し、前記該当動画とともに隣接動画を一つ以上選別して端末機に送信する動画選択モジュールと、
前記端末機に設置されて動画の再生と所望の角度の動画を選択することができるようにするアプリケーションを提供するアプリケーション提供モジュールと、
各種データを前記端末機に送受信するデータ送信モジュールと、を含むことを特徴とする請求項５に記載の３６０度空間映像再生システム。
【請求項７】
前記サーバーは、被写体の周辺に設置された複数の動画撮影手段によって撮影された動画を収集して前記レイヤーＤＢに保存する動画収集モジュールをさらに含むことを特徴とする請求項５または６に記載の３６０度空間映像再生システム。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は二つ以上の動画を端末機にローディングして多様な角度の動画を見せる空間映像再生方法及びそのシステムに関するもので、特に、再生中の動画及びこれと隣接する動画を一緒にローディングして所望の角度の動画をドラッグ（ｄｒａｇ）して選択し、選択された動画の所望の部分を上下左右に移動及びズームイン（ｚｏｏｍ  ｉｎ）、ズームアウト（ｚｏｏｍ  ｏｕｔ）などを通じて自在にリアルタイムで見ることができるように構成された空間映像再生方法及びそのシステムに関するものである。
【背景技術】
【０００２】
従来の動画特殊効果技法にはタイムスライス（ｔｉｍｅ  ｓｌｉｃｅ）技法と３６０度パノラマ映像技法などがある。
【０００３】
まず、タイムスライス技法とは、被写体に向けて多様な角度で複数の写真カメラを周辺に所定間隔に設置し、瞬間的に同時に撮影した後コンピューターを利用して写真を連結して被写体の静止された動作をまるでムービーカメラで撮影したように見せる映像技法を言い、スチールカメラでムービーを取る技法であるが、被写体は静止したまま動かない。一種の写真を利用したアニメーションであるが、ただ静止された被写体が立体的に描写される。この技法を利用してタバコを吸う人を取る場合、人はもちろん人が吐き出す煙も空に止まったまま動かないまま画面が切られることなく人物周りを一周回るカメラの動きを作ることができる。
【０００４】
言い換えれば、映像の１フレームを一つのショートの中で立体的に描くことができる。従って、映像は時間と空間を超える感じを与える。通常２０〜５０台のスチルカメラを被写体から等間隔で円形または一直線に設置し、同時に、シャッターを押して写真を撮った後これを連結して編集する。このようにすれば被写体がマネキングのように止められる静止動作が画面に現われる。
そこで、タイムスライス技法は静止映像を多様な角度で連結してなるものであるため、動く動画を多様な角度で再生するには限界があり、特に、使用者（ユーザー）が鑑賞しようとする特定方向の動画を選択的に見ることができないという問題があった。
【０００５】
一方、３６０度パノラマ映像技法とは、固定された場所でカメラを３６０度回しながら撮影した後、連続したイメージを使用者がマウスやタッチスクリーン操作を通じて周辺空間を回して見ることができるイメージ処理技術を言い、現在常用化されたポータルサイトのロードビューなどに適用された技術と言える。これは既存のイメージが持っている単調で一方的な空間情報を超えて、使用者が直接操作することができて楽しさと満足感を使用者に提供する。ウェブ技術と結合して動線を通じる多重空間情報を構造化して見せることができる。また、周辺空間に対する情報を立体的に提供することにより対象空間を直接隅々まで見たがる使用者の欲求を最も最大限に充足することができる映像技術である。
【発明の概要】
【発明が解決しようとする課題】
【０００６】
しかしながら、３６０度パノラマ映像技法も上記タイムスライス技法と同じく、動く動画を使用者が所望の角度でリアルタイムで切り替えて再生することができないという問題点があり、特に映像歪曲が深刻であるという問題があった。パノラマ映像再生方法に関する韓国特許公開番号１０−２０１１−０１０３６９２号でも動画適用に限界があることを見せる。即ち、一台のカメラで３６０度の周辺に広がった静止された被写体のみを見せるという問題点がある。
【０００７】
本発明は上記問題点を解決するために、動画を再生し、動画の感想中に使用者が所望の角度の動画を選択して再生し、選択された動画の所望の部分を上下左右に移動及びズームイン（ｚｏｏｍ  ｉｎ）、ズームアウト（ｚｏｏｍ  ｏｕｔ）を具現して、能動的で、且つよりリアルな映像を鑑賞することができる動画再生方法及びシステムを得ることを目的とする。
【課題を解決するための手段】
【０００８】
上記技術的課題を達するために、本発明では３６０度空間映像再生方法が提供される。
まず、サーバーが端末機から動画選択信号を待つ待機段階を実施する。上記待機段階は上記サーバーが二つ以上の動画撮影手段によって生成された二つ以上の動画が保存されたレイヤー（ｌａｙｅｒ）ＤＢ（Ｄａｔａ  Ｂａｓｅ）を構築するＤＢ構築段階を含むことができる。
【０００９】
次に、サーバーが上記動画選択信号によって選択された動画を上記端末機に送信し、端末機が上記選択された動画を再生する再生段階を実施する。この時、上記サーバーが上記選択された動画に隣接する一つ以上の隣接動画を端末機に送信する段階を含むことができる。
【００１０】
次に、上記端末機のアングル変化信号によって他の角度の動画に切り替えるアングル変化段階を実施する。
【００１１】
また、上記アングル変化段階は上記サーバーが上記他の角度の動画に隣接する一つ以上の隣接動画を端末機に送信する段階を含むことができる。
【００１２】
一方、上記技術的課題を達するために、本発明では３６０度空間映像再生システムが提供される。
即ち、動画の再生と所望の角度の動画を選択することができるようにするアプリケーションが設置される端末機と、上記端末機と有無線ネットワークを通じてデータを送受信するサーバーと、上記サーバーに備えられて動画を保存するレイヤーＤＢと、を含むことを特徴とする３６０度空間映像再生システムが提供される。
【００１３】
ここで、上記サーバーは上記端末機から送信された動画選択信号またはアングル変化信号によって該当動画を検索し、上記該当動画とともに隣接動画を一つ以上選別して端末機に送信する動画選択モジュールと、上記端末機に設置されて動画の再生と所望の角度の動画を選択することができるようにするアプリケーションを提供するアプリケーション提供モジュールと、各種データを上記端末機に送受信するデータ送信モジュールと、を含むことができる。
【００１４】
また上記サーバーは、被写体の周辺に設置された複数の動画撮影手段によって撮影された動画を収集して上記レイヤーＤＢに保存する動画収集モジュールをさらに含むことができる。
【発明の効果】
【００１５】
本発明の３６０度空間映像提供方法及びシステムによれば、使用者の要求によって多様な角度の動画を提供することにより、既存のタイムスライス技法やパノラマ技法が動画を多様な角度で表現することができない問題点を克服することができる。
【００１６】
即ちタイムスライス技法が静止映像のみを表現することができ、双方向操作が不可能な問題点を克服することができる。また、パノラマ技法が静止映像のみを表現することができ、映像歪曲が深刻な問題点を克服することができる。
【００１７】
さらに、本発明によれば、少ないデータの送信量で多様な角度の動画をリアルタイムで提供することができるという有利な効果がある。
【図面の簡単な説明】
【００１８】
【図１】本発明の３６０度空間映像を具現するための流れ図である。
【図２】被写体を中心にカメラ２０台を所定間隔に配置して動画を獲得する概念を示す配置図である。
【図３】本発明において動画選択信号によって選択された動画とその隣接動画をストリーミングでローディングすることを説明する概念図である。
【図４】本発明のアングル変化選択信号によって選択された動画とその隣接動画をストリーミングでローディングすることを説明する概念図である。
【図５】本発明のアングル変化選択信号によって選択された動画とその隣接動画をストリーミングでローディングすることを説明するまた他の概念図である。
【図６】本発明のアングル変化選択信号によって選択された動画とその隣接動画をストリーミングでローディングすることを説明するまた他の概念図である。
【図７】本発明の３６０度空間映像再生システムを示す全体構成図である。
【図８】本発明で用いられることができる代表的な端末機としてスマートフォンを例示している。
【図９】本発明を実際に具現するために動画撮影手段２０台を所定間隔に配置した写真である。
【発明を実施するための形態】
【００１９】
以下、本発明の好ましい実施例を添付された図面を参照して詳しく説明する。まず、各図面の構成要素に参照符号を付けるに際に、同じ構成要素についてはたとえ他の図面上に表示されてもできるだけ同じ符号を付けるようにしている事に留意すべきである。本発明を説明するに先だち、係わる公知構成または機能に対する具体的な説明が本発明の要旨を曖昧にする虞があると判断される場合にはその詳細な説明は省略する。
【００２０】
以下、本発明の３６０度空間映像再生方法を図１を参照して説明する。図１は本発明の３６０度空間映像を具現するための流れ図である。
【００２１】
まず、サーバー２０が端末機１０から動画選択信号を待つ待機段階を実施する（Ｓ１５）。上記待機段階は上記サーバー２０が二つ以上の動画撮影手段（ＣＡＭ１、ＣＡＭ２、、ＣＡＭ２０）によって生成された二つ以上の動画が保存されたレイヤー（ｌａｙｅｒ）ＤＢ３０を構築するＤＢ構築段階（Ｓ１０）を含むことができる。
【００２２】
ここで動画選択信号は上記端末機１０に既設置されたアプリケーションを通じて使用者のボタン操作または画面タッチ操作などを通じて端末機１０からサーバー２０に送信される信号である。
【００２３】
ここで、レイヤー（ｌａｙｅｒ）は２０台の動画撮影手段で取った場合２０個のレイヤーを有するが、多数のカメラで撮った動画それぞれが一つのレイヤーになる。
【００２４】
一方、上記レイヤーＤＢ３０は次のように構築されることができる。
即ち、被写体を中心に３６０度に所定間隔で配置された動画撮影手段と被写体との間の距離を測定して、上記動画撮影手段のフォーカス及び軸を整列して動画を撮影する。配置された動画撮影手段が多いほどより精密な角度の動画を具現することができることは自明である。
【００２５】
図２は被写体を中心にカメラ２０台を所定間隔で配置して動画を獲得する概念を示す配置図である。本実施例では直径を７Ｍに設定し、カメラ２０台と直径７Ｍは空間効率によって変更されることができる。また、好ましくは、被写体の垂直上空にもカメラが設置されることができる（図示しない）。
【００２６】
このように撮影された動画はそれぞれの映像データと音声データを非線形編集プログラムによってカラーマッチング、クロマキーイング（ｃｈｒｏｍａ  ｋｅｙｉｎｇ）、それぞれの映像に対する同一化されたシンク作業編集などの後半作業を経て映像信号と音声信号を同期化させる。
【００２７】
ここで非線形編集プログラムとは、撮影された動画をコンピューターでアップロードして編集する常用プログラムで、多様なコーデック（Ｃｏｄｅｃ）で変換して加工することができるツール（ｔｏｏｌ）を言う。素材の前、後、上、下分けずに移動しながら所望の部分を編集することができることから、従来の線形編集プログラムに対応して非線形編集プログラムと呼ぶ。
【００２８】
一方、カラーマッチングとは、数台の動画撮影手段が互いに違う方向に撮影する場合、それぞれ絵の色が異なることがあるが、この時、絵の差を補正して色感で異質感が感じられないようにカラーを調整することを言う。これも上記非線形編集プログラムを利用して行われる。
【００２９】
一方、クロマキーイングとは、映像合成方式の一つとして特定色の単一背景の前で撮影した後その色を除去して、所望の絵の上に合成する方法を言い、背景色を主に緑色や青色を使う。
【００３０】
上記のような後半作業を経て映像信号と音声信号を同期化させた動画をレイヤーＤＢ３０に構築する。好ましくは、同期化された映像信号及び音声信号を各レイヤー別に分離して、獲得した映像を圧縮及び多重化し、多様な動画再生要求仕様に合わせてコーディング作業を実施することにより、多様な双方向性コンテンツを上記レイヤーＤＢ３０に構築する。上記コーディング作業はＣ＃プログラミング言語とアンドロイド運営体制下のＵｎｉｔｙ３Ｄ映像処理エンジンを利用することが好ましい。
【００３１】
次に、サーバー２０が上記動画選択信号によって選択された動画を上記端末機１０に送信し、端末機１０が上記選択された動画を再生する再生段階を実施する（Ｓ２５）。この時、上記サーバー２０が上記選択された動画に隣接する一つ以上の隣接動画を端末機１０に送信する段階を含むことができる（Ｓ２０）。一方、後述するアングル変化信号がない場合には上記選択された動画を完了時まで再生する（Ｓ２６）。
【００３２】
図３は本発明において動画選択信号によって選択された動画とその隣接動画をストリーミングでローディングすることを説明する概念図である。
図３は被写体の周辺に総２０台の動画撮影手段で獲得した動画が用意されている。横方向の長い棒表示はレイヤーを意味する。本実施例では動画の長さを１０分（１０：００）にＺＨ設定した。
【００３３】
図３を参照すれば、端末機１０から１番カメラ（ＣＡＭ１）の動画が選択されると、サーバー２０がこれに相応する動画を端末機１０に送信し、１番カメラを中心に隣接するカメラＣＡＭ２、ＣＡＭ３、ＣＡＭ４、ＣＡＭ５及びＣＡＭ１７、ＣＡＭ１８、ＣＡＭ１９、ＣＡＭ２０が獲得した動画を端末機１０に送る。従って、計９つの動画が送信される。送信される動画の個数は自在に調整することができるが、個数が多くなるほど同時に送信すべきデータ量が多くなる。結果的に、上記１番カメラの動画を除いた残り８つの動画は使用者のアングル変化要求に即時に対処するための予備領域にストリーミングされた映像になる。そこで、６番カメラ〜１６番カメラの動画をいっぺんにサーバー２０からダウンロードしなくてもいいので、データ送信効率化を図ることができる。
【００３４】
また、本発明によれば、現在再生されている動画で１８０度反対方向の角度に直ちに切り替えるように具現することが現実的に困難であり、またそうする必要性も少ないので、順次に隣接する動画のみを送る。従って、使用者が図２の１０番カメラ（ＣＡＭ１０）の動画を鑑賞しない間には不必要な１０番カメラの動画及びその隣接動画を現在再生中の動画及びその隣接動画とともにいっぺんに送らなくてもいい。
【００３５】
次に、上記端末機１０で使用者の操作によりアングル変化信号が発生すると、それによって他の角度の動画に切り替えるアングル変化段階を実施する（Ｓ３０）。
【００３６】
また、上記アングル変化段階は、サーバー２０が上記アングル変化信号によって選択された他の角度の動画及びこれに隣接する一つ以上の隣接動画を端末機１０に送信する段階（Ｓ２０）を行うことができる。
【００３７】
図４は本発明のアングル変化選択信号によって選択された動画とその隣接動画をストリーミングでローディングすることを説明する概念図である。
【００３８】
図３の説明と類似するように、端末機１０からアングル変化信号をサーバー２０が受信すれば、サーバー２０がこれに相応する動画とその隣接動画を端末機１０に送信する。即ち図３に示された矢印は端末機１０を通じてアングル（角度）変化時点を示す。図３を見れば初期１番カメラ（ＣＡＭ１）で２番カメラの動画を経て現在４番カメラ（ＣＡＭ４）の動画が再生中にある（赤色）。そして、４番カメラの動画に隣接する隣接動画（ＣＡＭ１、ＣＡＭ２、ＣＡＭ３及びＣＡＭ５、ＣＡＭ６、ＣＡＭ７）がストリーミングされている（黄色）。一方、すべて２０個の動画は現在再生時点に同期化された状態にある（灰色）。破線からなる矢印は今後使用者の要求によって変化される角度を意味する。もし９番カメラ（ＣＡＭ９）で角度変化が発生すると、上述したとおり９番カメラの動画及び複数のその隣接動画がストリーミングされることは自明である。
【００３９】
図５は本発明のアングル変化選択信号によって選択された動画とその隣接動画をストリーミングでローディングすることを説明するまた他の概念図である。図４で説明した原理と同様に、角度変化によって現在９番カメラの動画が再生され、その隣接動画８つがストリーミングされることを示す。
【００４０】
図６は本発明のアングル変化選択信号によって１番カメラから２０番カメラまで変換した後、また１番カメラに移動し、その後、１０番カメラまで変換した後、２番カメラまで変換されることを示し、最終的に２番カメラが選択された後１９番カメラ、２０番及び１番カメラ〜５番カメラの隣接動画がストリーミングされることを示す。
【００４１】
一方、上記技術的課題を達するために、本発明では３６０度空間映像再生システムが提供される。
【００４２】
図７は本発明の３６０度空間映像再生システムを示す全体構成図である。図７に示すように、本発明では動画の再生と所望の角度の動画を選択することができるようにするアプリケーションが設置される端末機１０と、上記端末機１０と有無線ネットワーク４０を通じてデータを送受信するサーバー２０と、上記サーバー２０に備えられ、動画を保存するレイヤーＤＢ３０と、を含むことを特徴とする３６０度空間映像再生システムが提供される。上記端末機１０はタッチ方式のスマートフォン、一般のＰＣなどの機器で、アプリケーションを設置可能である。
【００４３】
図８は本発明で用いられることができる代表的な端末機１０として、スマートフォンが例示されている。図８に示すように、動画の左、右を移動選択すれば、選択信号によって本発明のシステムによって選択された動画に転換されてプレーされることを示す。さらに、本発明のシステムは選択された特定部分のズームイン（ｚｏｏｍ  ｉｎ）、ズームアウト（ｚｏｏｍ  ｏｕｔ）機能まで提供することが好ましい。
【００４４】
ここで、上記サーバー２０は上記端末機１０から送信された動画選択信号またはアングル変化信号によって該当動画を検索し、上記該当動画とともに隣接動画を一つ以上選別して端末機１０に送信する動画選択モジュール２１と、上記端末機１０に設置されて動画の再生と所望の角度の動画を選択することができるようにするアプリケーションを提供するアプリケーション提供モジュール２３と、各種データを上記端末機１０に送受信するデータ送信モジュール２５とを含むことができる。
【００４５】
また、上記サーバー２０は、被写体の周辺に設置された複数の動画撮影手段（ＣＡＭ１、ＣＡＭ２、、ＣＡＭ２０）によって撮影された動画を収集して上記レイヤーＤＢ３０に保存する動画収集モジュール２７をさらに含むことができる。上記動画収集モジュール２７は非線形編集プログラムのような常用プログラムが内蔵されて後半作業や同期化をさせることができるようにすることが好ましい。
【００４６】
図９は本発明を実際に具現するために動画撮影手段２０台を所定間隔で配置した写真である。本実施例では直径を７ｍに設定し、カメラ２０台と直径７ｍは空間効率によって変更されることができることは既に記述した。
【００４７】
一方、本発明による実施例は多様なコンピューター構成要素を通じて実行されることができるプログラム命令語の形態で具現されてコンピューター判読可能な記録媒体に記録されることができる。上記コンピューター判読可能な記録媒体はプログラム命令語データファイルデータ構造などを単独または組み合わせて含むことができる。上記コンピューター判読可能な記録媒体に記録されるプログラム命令語は本発明のために特別に設計されて構成されたものであるか、コンピューターソフトウェア分野の当業者に公知されて使用可能なものであることができる。コンピューター判読可能な記録媒体の例にはハードディスクプロッピィーディスク及び磁気テープのような磁気媒体ＣＤ−ＲＯＭ、ＤＶＤのような光記録媒体フロプティカルディスク（プロッピィー）ディスク（ｆｌｏｐｔｉｃａｌ（Ｆｌｏｐｐｙ）ｄｉｓｋ）のような磁気−光媒体（ｍａｇｎｅｔｏ−ｏｐｔｉｃａｌ  ｍｅｄｉａ）及びＲＯＭ、ＲＡＭ、フラッシュメモリーなどのようなプログラム命令語を保存して実行するように特別に構成されたハードウェア装置が含まれる。プログラム命令語の例にはコンパイラーによって作われるのと同じ機械語コードだけではなく、インタープリターなどを利用してコンピューターによって実行されることができる高級言語コードも含まれる。上記ハードウェア装置は本発明による処理を実行するために一つ以上のソフトウェアモジュールとして作動するように構成されることができる。
【００４８】
以上で説明したように、本発明の課題と同範囲内で多様な設計変更を試みることもできるが、このような設計変更によって本発明で全く予想つかない新しい効果が現われない限り、本発明の権利範囲内に属すものとすべきである。
【図１】
2017532918.tif 000003
【図２】
2017532918.tif 000004
【図３】
2017532918.tif 000005
【図４】
2017532918.tif 000006
【図５】
2017532918.tif 000007
【図６】
2017532918.tif 000008
【図７】
2017532918.tif 000009
【図８】
2017532918.tif 000010
【図９】
2017532918.tif 000011
【国際調査報告】
2017532918.tif 000012
2017532918.tif 000013
2017532918.tif 000014
2017532918.tif 000015
2017532918.tif 000016
2017532918.tif 000017
2017532918.tif 000018
2017532918.tif 000019