(57)【要約】【課題】編集精度を編集者の主観的な判断に依存することなく一定以上に保ちながら、パノラマ画像を編集する際の負担を軽減することができる、撮影システム等を提供する。【解決手段】撮影装置４は、基準位置５から略等距離に配置された複数のマーカ３上の撮影経路７を走行しながら、パノラマ画像の連続撮影を行う。撮影したパノラマ画像のうち、基準位置５の真上で撮影されたパノラマ画像においてのみ、パノラマ画像中の各マーカの垂直方向（仰角方向）の位置座標が一致する。したがって、映像編集者等は、各パノラマ画像の各マーカの表示位置を確認することで、基準位置５の近くで撮影されたパノラマ画像を容易に特定でき、パノラマ画像の各フレームの要・不要の判断を容易に行うことができる。【選択図】図１
2016134651.tif 000002
【特許請求の範囲】
【請求項１】
同一高度に取り付けられた２つ以上のマーカと、
前記マーカ上の経路を走行しながらパノラマ画像を撮影する撮影装置と、
からなることを特徴とする撮影システム。
【請求項２】
編集装置を更に有し、
前記編集装置は、
前記パノラマ画像中の各々の前記マーカの垂直方向の位置情報を取得する取得手段と、
取得した各々の前記マーカの垂直方向の位置情報が最も近い前記パノラマ画像を特定する特定手段と、
を備えることを特徴とする請求項１に記載の撮影システム。
【請求項３】
前記編集装置は、
前記特定手段により特定した撮影方向の異なる複数のパノラマ画像中のマーカの水平方向の位置情報を取得する手段と、
前記複数のパノラマ画像中の前記マーカの水平方向の位置情報に基づいて、前記複数のパノラマ画像の方位を合わせるためのスライド量を決定する手段と、
を更に備えることを特徴とする請求項２に記載の撮影システム。
【請求項４】
同一高度に取り付けられた２つ以上のマーカ上の経路を走行しながら撮影したパノラマ画像を記憶する記憶手段と、
前記パノラマ画像中の各々の前記マーカの垂直方向の位置情報を取得する取得手段と、
取得した各々の前記マーカの垂直方向の位置情報が最も近い前記パノラマ画像を特定する特定手段と、
を備えることを特徴とする編集装置。
【請求項５】
同一高度に取り付けられた２つ以上のマーカ上の経路を走行しながら撮影したパノラマ画像を記憶する記憶ステップと、
前記パノラマ画像中の各々の前記マーカの垂直方向の位置情報を取得する取得ステップと、
取得した各々の前記マーカの垂直方向の位置情報が最も近い前記パノラマ画像を特定する特定ステップと、
を含むことを特徴とする編集方法。
【請求項６】
コンピュータを、
同一高度に取り付けられた２つ以上のマーカ上の経路を走行しながら撮影したパノラマ画像を記憶する記憶手段、
前記パノラマ画像中の各々の前記マーカの垂直方向の位置情報を取得する取得手段、
取得した各々の前記マーカの垂直方向の位置情報が最も近い前記パノラマ画像を特定する特定手段、
として機能させることを特徴とするプログラム。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、パノラマ映像の技術に関する。特に、パノラマ映像を容易に編集するための技術に関する。
【背景技術】
【０００２】
近年、空間内を移動しながら連続撮影した周囲３６０°（全方位）のパノラマ画像を用いて、空間内を自由に移動するユーザの視野に応じた映像を提供するコンテンツサービスが普及しつつある（例えば、非特許文献１〜３など）。
【先行技術文献】
【非特許文献】
【０００３】
【非特許文献１】“Google Street View”、［online］、Google,Inc、［平成２４年１０月１７日検索］、インターネット <http://maps.google.co.jp/intl/ja/help/maps/streetview/ >
【非特許文献２】“Quick Time VRを利用した動画パノラマＶＲ（MotionVR of the Month 2006 calendar）”、［online］、Apple Computer,Inc、［平成２４年１０月１７日検索］、インターネット<http://www.worldinmotionvr.com/motionvr_month/calendar.html>
【非特許文献３】“３６０ＶＲ（ＷＥＢコンテンツ集）”、［online］、３６０、［平成２４年１０月１７日検索］、インターネット <http://unimoto.sakura.ne.jp/360vr/>
【発明の概要】
【発明が解決しようとする課題】
【０００４】
上記したパノラマ画像は、例えば、全方位カメラを撮影車、走行台等（以下、単に「カート」と呼ぶ）に載せ、カートを走行させながら連続撮影を行うことにより得られる。図８を参照する。例えば、図８の撮影経路７１上の基準位置５１と基準位置５２との間で撮影したパノラマ画像から映像コンテンツを作成する場合を考える。この場合、撮影の現場では、通常、基準位置５１より手前の撮影開始位置６１から全方位カメラを載せたカートの走行及び撮影を開始する。そして、撮影経路７１上を走行しながらパノラマ映像を時々刻々と連続撮影していく。そして最後に、基準位置５２の先の撮影終了位置６２でカートを停止させ、同時に撮影を終了する。つまり、撮影の現場では、通常、コンテンツ上必要とする区間（基準位置５１と基準位置５２との区間）より余分に撮影を行っている。
【０００５】
余分に撮影を行う主な理由は、カートが一定の走行速度に達するまでの助走区間（図８の撮影開始位置６１から基準位置５１までの区間）及び当該一定の走行速度から減速して停止するまでの減速区間（図８の基準位置５２から撮影終了位置６２までの区間）を設けることで、基準位置５１から基準位置５２の区間でカートの走行速度をなるべく一定に保ち、撮影間隔が均一になるような映像を得るためである。また、余分な区間を含めて撮影をしておくことで、万が一、コンテンツ上必要な区間の一部が撮影されていない等の事態（この場合、撮影のやり直しとなる）を回避する目的もある。このような観点から、コンテンツ上必要な区間より余分な区間を含めてパノラマ画像を撮影するが通常である。
【０００６】
ところで、余分に撮影したパノラマ画像は、映像コンテンツにおいては不要なフレームとなるため、映像編集時において除外する必要がある。このため、映像編集者等は、映像編集ソフト等を用いて基準位置５１から基準位置５２の区間で撮影したパノラマ画像のフレームを抽出し、それ以外の不要なフレームを除外する作業を行う。しかしながら、フレームの要・不要の判断は、コンテンツ編集者の主観に依るところが大きく、編集者間で映像コンテンツの編集精度にバラつきが生ずる問題がある。また、要・不要なパノラマ画像を見極める作業は、編集者にとって負担の大きい作業でもあった。
【０００７】
本発明は、前述した問題点に鑑みてなされたものであり、その目的とすることは、編集精度を編集者の主観的な判断に依存することなく一定以上に保ちながら、パノラマ画像を編集する際の負担を軽減する、撮影システム等を提供することである。
【課題を解決するための手段】
【０００８】
前述した目的を達成するために第１の発明は、同一高度に取り付けられた２つ以上のマーカと、前記マーカ上の経路を走行しながらパノラマ画像を撮影する撮影装置と、からなることを特徴とする撮影システムである。
第１の発明によれば、撮影装置が撮影したパノラマ画像のうち、各マーカから等距離の撮影経路上の位置（基準位置）の真上で撮影されたパノラマ画像においてのみ、パノラマ画像中の各マーカの垂直方向（仰角方向）の位置座標が一致する。したがって、映像編集者等は、各パノラマ画像の各マーカの表示位置を確認することで、基準位置の近くで撮影されたパノラマ画像を容易に特定できる。そして、特定した当該パノラマ画像に基づいて、撮影したパノラマ画像の各フレームの要・不要の判断を容易に行うことができる。すなわち、第１の発明によれば、映像編集者等の主観に依らない客観的な情報（パノラマ画像中の各マーカの位置情報）に基づいて映像編集を行うことができるため、編集精度のバラつき、及び映像編集の負担を軽減することができる。
【０００９】
編集装置を更に有し、前記編集装置は、前記パノラマ画像中の各々の前記マーカの垂直方向の位置情報を取得する取得手段と、取得した各々の前記マーカの垂直方向の位置情報が最も近い前記パノラマ画像を特定する特定手段と、を備えることが望ましい。これにより、映像編集者等は、自動で特定される基準パノラマ画像（基準位置の最も近くで撮影されたパノラマ画像）に基づいて、容易にパノラマ画像の要・不要の判断等を行うことができるため、編集精度のバラつき、及び映像編集の編集負担を更に軽減することができる。
【００１０】
前記編集装置は、前記特定手段により特定した撮影方向の異なる複数のパノラマ画像中のマーカの水平方向の位置情報を取得する手段と、前記複数のパノラマ画像中の前記マーカの水平方向の位置情報に基づいて、前記複数のパノラマ画像の方位を合わせるためのスライド量を決定する手段と、を更に備えることが望ましい。これにより、特定手段により特定したパノラマ画像中のマーカの水平方向の位置情報に基づいて、パノラマ画像間の方位合わせを行うことが可能となる。
【００１１】
前述した目的を達成するために第２の発明は、同一高度に取り付けられた２つ以上のマーカ上の経路を走行しながら撮影したパノラマ画像を記憶する記憶手段と、前記パノラマ画像中の各々の前記マーカの垂直方向の位置情報を取得する取得手段と、取得した各々の前記マーカの垂直方向の位置情報が最も近い前記パノラマ画像を特定する特定手段と、を備えることを特徴とする編集装置である。
【００１２】
前述した目的を達成するために第３の発明は、同一高度に取り付けられた２つ以上のマーカ上の経路を走行しながら撮影したパノラマ画像を記憶する記憶ステップと、前記パノラマ画像中の各々の前記マーカの垂直方向の位置情報を取得する取得ステップと、取得した各々の前記マーカの垂直方向の位置情報が最も近い前記パノラマ画像を特定する特定ステップと、を含むことを特徴とする編集方法である。
【００１３】
前述した目的を達成するために第４の発明は、コンピュータを、同一高度に取り付けられた２つ以上のマーカ上の経路を走行しながら撮影したパノラマ画像を記憶する記憶手段、前記パノラマ画像中の各々の前記マーカの垂直方向の位置情報を取得する取得手段、取得した各々の前記マーカの垂直方向の位置情報が最も近い前記パノラマ画像を特定する特定手段、として機能させることを特徴とするプログラムである。
【発明の効果】
【００１４】
本発明の撮影システム等により、編集精度を編集者の主観的な判断に依存することなく一定以上に保ちながら、パノラマ画像を編集する際の負担を軽減することができる。
【図面の簡単な説明】
【００１５】
【図１】・・・・本実施形態における撮影システム１を示す概念図
【図２】・・・・編集装置１０のハードウェア構成の例を示す図
【図３】・・・・撮影システム１の動作を説明するフローチャート１
【図４】・・・・各撮影位置で撮影したパノラマ画像を表示した図
【図５】・・・・２つの撮影経路上で撮影を行う様子を示す概念図
【図６】・・・・撮影システム１の動作を説明するフローチャート２
【図７】・・・・２つの撮影経路上で特定された基準パノラマ画像を表す図
【図８】・・・・一般的なパノラマ画像の撮影の様子を表す概念図
【発明を実施するための形態】
【００１６】
以下図面に基づいて、本発明の実施形態を詳細に説明する。
【００１７】
＜撮影システム１＞
図１は、本実施形態に係る撮影システム１の概要図である。撮影システム１は、主に、複数のマーカ３（マーカ３Ａとマーカ３Ｂ）と、撮影経路７上を走行しながらパノラマ画像を撮影する撮影装置４と、撮影したパノラマ画像を編集する編集装置１０と、から構成される。
以下、各構成について説明する。
【００１８】
（マーカ３）
図１に示すように、複数のマーカ３（マーカ３Ａとマーカ３Ｂ）が、撮影経路７上の基準位置５から略等距離の異なる位置に、取り付けられている。図１の場合、マーカ３Ａは基準位置５を基点として南に距離ｄ、マーカ３Ｂは基準位置５を基点として北に距離ｄ、の位置に取り付けられている。なお、マーカ３Ａとマーカ３Ｂは同一高度上に存在するものとする。また、マーカは、人又はコンピュータが識別しやすい態様、例えば、所定の色や所定の形状、とするのが望ましい。
【００１９】
（撮影装置４）
撮影装置４は、全方位のパノラマ画像を撮影可能な全方位カメラと、全方位カメラの撮影制御等を行う制御装置と、全方位カメラと制御装置とを載置して走行するカートと、から構成される。そして、撮影装置４は、撮影経路７上を走行（図１の場合、「南」から「北」の方角へ走行）しながら、パノラマ画像の連続撮影を行う。撮影し取得した時系列のパノラマ画像は、制御装置の記憶部に記憶されるとともに、後述する編集装置１０の記憶部１２に格納される。
【００２０】
なお、本実施形態とは異なり、全方位カメラの撮影制御等を行う制御装置は、カートに載置するのではなく、別の位置に固定配置してもよい。この場合、制御装置は、無線等の通信手段を用いて、走行する全方位カメラの撮影制御等を行う。また、本実施形態とは異なり、制御装置と全方位カメラとは一体に構成されていてもよい。さらに、本実施形態とは異なり、カートを用いずに、人が全方位カメラを保持して移動しながら撮影を行ってもよい。
【００２１】
（編集装置１０）
編集装置１０は、撮影装置４により撮影したパノラマ画像を編集するための汎用のコンピュータである。編集装置１０は、パノラマ画像の映像編集を容易に行うための各種手段、を映像編集者等に提供する。
【００２２】
図２は、編集装置１０のハードウェア構成図である。なお、図２のハードウェア構成は一例であり、用途、目的に応じて様々な構成を採ることが可能であり、デスクトップＰＣ（Personal Computer）、ノートＰＣ、タブレットＰＣ、スマートフォン等のいずれであっても良い。
【００２３】
図２に示すように、編集装置１０は、制御部１１、記憶部１２、メディア入出力部１３、通信制御部１４、入力部１５、表示部１６、周辺機器Ｉ／Ｆ部１７等が、バス１８を介して接続される。
【００２４】
制御部１１は、ＣＰＵ（Central Processing Unit）、ＲＯＭ（Read Only Memory）、ＲＡＭ（Random Access Memory）等により構成される。ＣＰＵは、記憶部１２、ＲＯＭ、記憶媒体等に格納されるプログラムをＲＡＭ上のワークメモリ領域に呼び出して実行し、バス１８を介して接続された各装置を駆動制御し、画像表示装置１が行う後述する処理を実現する。ＲＯＭは、不揮発性メモリであり、コンピュータのブートプログラムやＢＩＯＳ等のプログラム、データ等を恒久的に保持する。ＲＡＭは、揮発性メモリであり、ロードしたプログラムや、データ等を一時的に保持すると共に、制御部１１が各処理を行うために使用するワークエリアを備える。
【００２５】
記憶部１２は、ＨＤＤ（Hard Disk Drive）等であり、制御部１１が実行するプログラムや、プログラム実行に必要なデータ、ＯＳ（Operating System）等が格納されている。これらのプログラムコードは、制御部１１により必要に応じて読み出されてＲＡＭに移され、ＣＰＵに読み出されて実行される。
【００２６】
本実施形態では、記憶部１２には、撮影装置４により撮影し取得した時系列のパノラマ画像が格納されている。また、記憶部１２には、マーカの識別情報が保持されていてもよい。例えば、識別情報には、マーカの色情報（赤、青、緑など）やマーカの形状情報（円、三角、四角など）、マーカの位置情報（配置方位（北、南など））などが含まれる。制御部１１は、マーカの識別情報に基づいて、パノラマ画像中のマーカを自動識別することができる。
【００２７】
メディア入出力部１３は、例えば、ＣＤドライブ、ＤＶＤドライブ、ＭＯドライブ、フロッピー（登録商標）ディスクドライブ、等のメディア入出力装置であり、画像等のデータの入出力を行う。
通信制御部１４は、通信制御装置、通信ポート等を有し、コンピュータとネットワーク間の通信を媒介する通信インターフェースであり、ネットワークを介して、他の装置間との通信制御を行う。
【００２８】
入力部１５は、データの入力を行い、例えば、キーボード、マウス等のポインティングデバイス、テンキー等の入力装置を有する。入力部１５を介して、コンピュータに対して、操作指示、動作指示、データ入力等を行うことができる。
【００２９】
表示部１６は、液晶パネル等のディスプレイ装置、ディスプレイ装置と連携してコンピュータのビデオ機能を実現するための論理回路等（ビデオアダプタ等）を有する。尚、入力部１５及び表示部１６は、タッチパネルディスプレイのように、一体となっていても良い。
本実施形態では、表示部１６には、記憶部１２に格納されたパノラマ画像が表示される。
【００３０】
周辺機器Ｉ／Ｆ（Interface）部１７は、コンピュータと周辺機器とのデータ送受信を行うためのポートやアンテナ等であり、コンピュータは周辺機器Ｉ／Ｆ部１７を介して周辺機器とのデータの送受信を行う。周辺機器との接続形態は、有線（例えば、ＵＳＢ（Universal Serial Bus）等）、無線（例えば、Bluetooth（登録商標）等）を問わない。バス１８は、各装置間の制御信号、データ信号等の授受を媒介する経路である。
【００３１】
＜撮影システム１の動作＞
次に、図３のフローチャートを参照して、撮影システム１の動作について説明する。
まず、撮影装置４が、マーカ３Ａとマーカ３Ｂ上の撮影経路７を走行しながら、パノラマ画像の連続撮影を行う（ステップＳ１０１）。撮影し取得した時系列のパノラマ画像は、編集装置１０の記憶部１２に格納される（ステップＳ１０２）。
【００３２】
次に、編集装置１０の制御部１１は、記憶部１２からパノラマ画像を読込み、読込んだパノラマ画像を表示部１６に表示する（ステップＳ１０３）。ここで、制御部１１は、入力部１５を介して映像編集者等の操作を受付けることによって、任意のパノラマ画像を表示部１６に表示させることができる。
【００３３】
図４は、表示部１６に表示される各パノラマ画像の例を表す図である。図４（ａ）〜図４（ｅ）の各パノラマ画像９−１〜９−５は、図４右下図の撮影経路７上の各撮影位置Ｐ１〜Ｐ５で各々撮影したパノラマ画像である。ここで、パノラマ画像中に表示されるマーカ３ａとマーカ３ｂは、実空間に存在するマーカ３Ａとマーカ３Ｂに対応する。
【００３４】
例えば、図４（ａ）は、撮影位置Ｐ１で撮影したパノラマ画像９−１を表示した図である。撮影位置Ｐ１では、マーカ３Ａとマーカ３Ｂは、撮影位置Ｐ１から見て同じ方位に位置している（図４の右下図参照）。このとき、パノラマ画像９−１では、マーカ３ａとマーカ３ｂは共に同じ水平方向（図４のθ１）に表示される。ただし、撮影位置Ｐ１からマーカ３Ａまでの距離と、撮影位置Ｐ１からマーカ３Ｂまでの距離が異なるため、撮影位置Ｐ１から各マーカを望む仰角が異なる。このため、パノラマ画像中のマーカ３ａの垂直方向（仰角方向）の位置座標とマーカ３ｂの垂直方向（仰角方向）の位置座標が異なる。
【００３５】
また、図４（ｂ）は、撮影位置Ｐ２で撮影したパノラマ画像９−２を表示した図である。撮影位置Ｐ２では、マーカ３Ａとマーカ３Ｂは、撮影位置Ｐ２から見て異なる方位に位置している。このとき、パノラマ画像９−２では、マーカ３ａとマーカ３ｂは異なる水平方向（図４のθ１とθ２）に各々表示される。また、撮影位置Ｐ２からマーカ３Ａまでの距離と、撮影位置Ｐ２からマーカ３Ｂまでの距離が異なるため、撮影位置Ｐ２から各マーカを望む仰角が異なる。このため、マーカ３ａの垂直方向（仰角方向）の位置座標とマーカ３ｂの垂直方向（仰角方向）の位置座標も異なる。
【００３６】
そして、図４（ｃ）は、撮影位置Ｐ３（基準位置５の真上）で撮影したパノラマ画像９−３を表示した図である。撮影位置Ｐ３では、マーカ３Ａとマーカ３Ｂは、撮影位置Ｐ２の場合と同様に、撮影位置Ｐ３から見てマーカ３Ａとマーカ３Ｂは異なる方位に位置している。このとき、パノラマ画像９−３では、パノラマ画像９−２と同様に、マーカ３ａとマーカ３ｂは異なる水平方向（図４のθ１とθ２）に表示される。ただし、撮影位置Ｐ３とマーカ３Ａとの距離と、撮影位置Ｐ３とマーカ３Ｂの距離が一致するため、撮影位置Ｐ３から各マーカを望む仰角が一致する。このため、パノラマ画像中のマーカ３ａとマーカ３ｂの垂直方向（仰角方向）の位置座標（図４のφ）が一致する。
【００３７】
また、図４（ｄ）は、撮影位置Ｐ４で撮影したパノラマ画像９−４を表示した図である。撮影位置Ｐ４では、マーカ３Ａとマーカ３Ｂは、撮影位置Ｐ２、Ｐ３の場合と同様に、撮影位置Ｐ４から見て異なる方位に位置している。このとき、パノラマ画像９−４では、パノラマ画像９−２、９−３と同様に、マーカ３ａとマーカ３ｂは異なる水平方向（図４のθ１とθ２）に各々表示される。また、撮影位置Ｐ２の場合と同様に、撮影位置Ｐ４とマーカ３Ａとの距離と、撮影位置Ｐ４とマーカ３Ｂの距離が異なるため、撮影位置Ｐ４から各マーカを望む仰角が異なる。このため、パノラマ画像中のマーカ３ａの垂直方向（仰角方向）の位置座標とマーカ３ｂの垂直方向（仰角方向）の位置座標も異なる。
【００３８】
また、図４（ｅ）は、撮影位置Ｐ５で撮影したパノラマ画像９−５で表示した図である。撮影位置Ｐ５では、マーカ３Ａとマーカ３Ｂは、撮影位置Ｐ５から見て同じ方位に位置している。このとき、撮影したパノラマ画像９−５では、マーカ３ａ、マーカ３ｂは共に同じ水平方向（図４のθ２）に表示される。
【００３９】
以上のように、基準位置５の真上（図４、右下図の撮影位置Ｐ３）で撮影されたパノラマ画像９−３（図４（ｃ）参照）においてのみ、パノラマ画像中のマーカ３ａとマーカ３ｂの垂直方向（仰角方向）の位置座標が一致することが分かる。したがって、映像編集者等は、表示部１６に表示されるパノラマ画像ごとに、マーカ３ａとマーカ３ｂの垂直方向（仰角方向）の表示位置を確認することで、基準位置５の近くで撮影されたパノラマ画像を容易に特定することができる。そして、特定した当該パノラマ画像に基づいて、パノラマ画像の各フレームの要・不要の判断を容易に行うことができる。
【００４０】
図３のフローチャートに戻る。以降の処理は、編集装置１０が、基準パノラマ画像を自動で特定等する処理に関する。ここで、基準パノラマ画像とは、基準位置５の最も近くで撮影されたパノラマ画像を指す。
【００４１】
編集装置１０の制御部１１は、パノラマ画像ごとに、パノラマ画像中のマーカ３ａとマーカ３ｂを識別し、識別したマーカ３ａとマーカ３ｂの垂直方向（仰角方向）の位置情報を取得する（ステップＳ１０４）。そして、制御部１１は、マーカ３ａとマーカ３ｂの垂直方向（仰角方向）の位置情報が最も近いパノラマ画像を、基準パノラマ画像として特定する（ステップＳ１０５）。これにより、映像編集者等は、自動で特定された基準パノラマ画像に基づいて、パノラマ画像の各フレームの要・不要の判断を容易に行うことができる。
【００４２】
なお、制御部１１は、マーカを識別する際に、記憶部１２に保持されているマーカの識別情報（色情報、形状情報、位置情報など）を利用して、パノラマ画像中のマーカ３ａとマーカ３ｂを識別するようにしてもよい。
【００４３】
さらに、編集装置１０の制御部１１は、ステップＳ１０３において特定した基準パノラマ画像に基づいて、時系列のパノラマ画像の中から、必要なフレームの抽出、或いは不要なフレームの除去を自動で行ってもよい（ステップＳ１０６）。例えば、制御部１１は、基準パノラマ画像を境として時系列順に後のパノラマ画像、或いは時系列順に前のパノラマ画像を、自動抽出又は自動削除することで、自動編集処理を行うこともできる。
【００４４】
また、図８のように撮影経路上に２つの基準位置（例えば、映像コンテンツの開始位置と終了位置）が規定されている場合には、編集装置１０の制御部１１は、撮影した時系列のパノラマ画像から２つの基準パノラマ画像を特定し、特定した当該２つの基準パノラマ画像に基づいて、２つの基準位置間のパノラマ画像をコンテンツ上必要なフレームとして自動抽出、或いは当該パノラマ画像以外をコンテンツ上不要なフレームとして自動削除することで、自動編集処理を行うことができる。
【００４５】
以上、撮影システム１の動作について説明をした。本実施形態によれば、撮影装置４が、基準位置５から略等距離に取り付けた複数のマーカ（マーカ３Ａとマーカ３Ｂ）上の撮影経路７を走行しながら、パノラマ画像の連続撮影を行う。そして、撮影したパノラマ画像のうち、基準位置５の真上で撮影されたパノラマ画像においてのみ、パノラマ画像中の各マーカの垂直方向（仰角方向）の位置座標が一致する。したがって、映像編集者等は、各パノラマ画像の各マーカの表示位置を確認することで、基準位置の近くで撮影されたパノラマ画像を容易に特定できる。そして、特定した当該パノラマ画像に基づいて、パノラマ画像の各フレームの要・不要の判断を容易に行うことができる。すなわち、本実施形態によれば、映像編集者等の主観に依らない客観的な情報（パノラマ画像中の各マーカの位置情報）に基づいて映像編集を行うことができるため、編集精度のバラつき、及び映像編集の負担を軽減することができる。
【００４６】
また、編集装置１０は、撮影したパノラマ画像の各マーカの位置情報に基づいて、基準パノラマ画像（基準位置の最も近くで撮影されたパノラマ画像）を自動で特定する手段等を提供する。これによって、映像編集者等は、自動で特定される基準パノラマ画像に基づいて、容易にパノラマ画像の要・不要の判断等を行うことができるため、編集精度のバラつき、及び映像編集の編集負担を更に軽減することができる。
【００４７】
なお、本実施形態とは異なり、撮影装置４が、パノラマ画像を表示する手段、基準パノラマ画像を自動で特定する手段、特定した基準パノラマ画像に基づいて自動で編集を行う（必要なフレームの自動抽出（或いは不要なフレームの自動除去））手段、等を備える構成であってもよい。すなわち、撮影装置４側に、編集装置１０の制御部１１の一部又は全部の機能を備えるようにしてもよい。
【００４８】
また、パノラマ画像の編集の後処理として、制御部１１は、パノラマ画像中に表示されるマーカを背景と同化させる等して、パノラマ画像からマーカを除去する処理を施してもよい。これによって、映像編集用のマーカを、最終的な映像コンテンツ上に表示しないようにすることもできる。
【００４９】
（複数の撮影経路上でのパノラマ画像の撮影）
ところで、図１のように撮影経路が単一であることは稀であり、通常は、複数の撮影経路上でパノラマ画像を撮影し、各撮影経路で撮影したパノラマ画像を繋げて一連の映像コンテンツを作成する。本実施形態に係る撮影システム１は、このように複数の撮影経路上で撮影を行う場合にも適用できる。
【００５０】
図５は、撮影装置４の走行方向が異なる２つの撮影経路７−１、７−２上でパノラマ画像を撮影する場合の撮影システム１の例を示す概念図である。ここで、説明を簡単にするため、２つの撮影経路７−１、７−２上で撮影したパノラマ画像のうち、図５に示す「コンテンツ区間Ｗ」に含まれるパノラマ画像から映像コンテンツを作成する場合を想定する。
【００５１】
ここで、コンテンツ区間Ｗに含まれるパノラマ画像を取得するため、撮影経路７−１と撮影経路７−２が交差する位置に基準位置５を規定する。そして、当該基準位置５から略等距離の異なる位置の、同一高度上に各マーカ（マーカ３Ａ、３Ｂ、３Ｃ、３Ｄ）を取り付ける。
【００５２】
ここで、マーカ３Ａとマーカ３Ｂは、撮影装置４を、撮影経路７−１上を「南」から「北」へ走行させながら撮影した時系列のパノラマ画像から、基準位置５の近くで撮影したパノラマ画像を特定するために用いられる。
【００５３】
一方、マーカ３Ｃとマーカ３Ｄは、撮影装置４を、撮影経路７−２上を「西」から「東」へ走行させながら撮影した時系列のパノラマ画像から、基準位置５の近くで撮影したパノラマ画像を特定するために用いられる。
【００５４】
上記のようにマーカを取り付けることで、撮影経路７−１、撮影経路７−２で各々撮影した時系列のパノラマ画像の中から、「コンテンツ区間Ｗ」に含まれるパノラマ画像を特定することが可能となる。
【００５５】
図６のフローチャートを参照して、複数の撮影経路がある場合の、撮影システム１の動作について説明をする。
撮影装置４は、まず、マーカ３Ａとマーカ３Ｂ上の撮影経路７−１を「南」から「北」へ走行しながら、パノラマ画像の連続撮影を行う（ステップＳ２０１）。以降、撮影した時系列のパノラマ画像を、「パノラマ画像群ＧＸ」と呼ぶ。
【００５６】
同様に、マーカ３Ａとマーカ３Ｂ上の撮影経路７−２を「西」から「東」へ走行しながら、パノラマ画像の連続撮影を行う（ステップＳ２０２）。以降、撮影した時系列のパノラマ画像を、「パノラマ画像群ＧＹ」と呼ぶ。
撮影した「パノラマ画像群ＧＸ」、及び「パノラマ画像ＧＹ」は、編集装置１０の記憶部１２に格納される（ステップＳ２０３）。
【００５７】
次に、編集装置１０の制御部１１は、記憶部１２からパノラマ画像群ＧＸ、及びパノラマ画像群ＧＹを読込み、表示部１６に表示する（ステップＳ２０４）。ここで、制御部１１は、入力部１５を介して映像編集者等の操作を受付けることによって、任意のパノラマ画像を表示部１６に表示させることができる。
【００５８】
前述したように、基準位置５の真上で撮影されたパノラマ画像においてのみ、パノラマ画像中の各マーカの垂直方向（仰角方向）の位置座標が一致するため、映像編集者等は、表示部１６に表示されるパノラマ画像群ＧＸ、及びパノラマ画像群ＧＹの各フレームの各マーカの垂直方向（仰角方向）の表示位置を確認することで、パノラマ画像群ＧＸのうち基準位置５の近くで撮影されたパノラマ画像（「パノラマ画像Ｘ」と呼ぶ）、及びパノラマ画像群ＧＹのうち基準位置５の近くで撮影されたパノラマ画像（「パノラマ画像Ｙ」と呼ぶ）を特定することができる。そして、特定したパノラマ画像Ｘ、及びパノラマ画像Ｙに基づいて、パノラマ画像群ＧＸ、及びパノラマ画像群ＧＹの各フレームの要・不要の判断を容易に行うことができる。すなわち、複数経路で撮影したパノラマ画像から、コンテンツ区間Ｗに含まれるパノラマ画像を容易に特定でき、所望の映像コンテンツを容易に作成できる。
【００５９】
また、以降に示すように、コンテンツ区間Ｗに含まれるパノラマ画像を自動で特定等してもよい。
【００６０】
この場合、編集装置１０の制御部１１は、まず、各撮影経路（７−１、７−２）上の基準パノラマ画像Ｘ、及び基準パノラマ画像Ｙを自動で特定する（スッテプＳ２０５）。ここで、基準パノラマ画像Ｘとは、パノラマ画像群ＧＸのうち基準位置５の最も近くで撮影されたパノラマ画像である。基準パノラマ画像Ｙとは、パノラマ画像群ＧＹのうち基準位置５の最も近くで撮影されたパノラマ画像である。
【００６１】
具体的には、制御部１１は、パノラマ画像群ＧＸの各フレームに表示されるマーカ３ａとマーカ３ｂを識別し、識別したマーカ３ａとマーカ３ｂの垂直方向（仰角方向）の位置情報を取得し、取得したマーカ３ａとマーカ３ｂの垂直方向（仰角方向）の位置情報が最も近いパノラマ画像を、基準パノラマ画像Ｘとして特定する。
【００６２】
同様に、パノラマ画像群ＧＹの各フレームに表示されるマーカ３ｃとマーカ３ｄを識別し、識別したマーカ３ｃとマーカ３ｄの垂直方向（仰角方向）の位置情報を取得し、取得したマーカ３ｃとマーカ３ｄの垂直方向（仰角方向）の位置情報が最も近いパノラマ画像を、基準パノラマ画像Ｙとして特定する。
【００６３】
なお、制御部１１は、マーカ３ａ〜マーカ３ｄを識別する際に、記憶部１２に保持されているマーカの識別情報（色情報、形状情報、位置情報など）を利用してもよい。
【００６４】
そして、編集装置１０の制御部１１は、特定した基準パノラマ画像Ｘ、及び基準パノラマ画像Ｙに基づいて、「コンテンツ区間Ｗ」に含まれるパノラマ画像を自動で特定する（ステップＳ２０６）。
【００６５】
具体的には、制御部１１は、ステップＳ２０５において特定した基準パノラマ画像Ｘに基づいて、パノラマ画像群ＧＸから「コンテンツ区間Ｗ」に含まれる必要なフレームを抽出し（或いは、不要なフレームを削除し）、同様に、ステップＳ２０５において特定した基準パノラマ画像Ｙに基づいて、パノラマ画像群ＧＹから「コンテンツ区間Ｗ」に含まれる必要なフレームを抽出する（或いは不要なフレームを削除する）。
【００６６】
これによって、映像編集者等は、ステップＳ２０６において自動で特定された「コンテンツ区間Ｗ」に含まれるパノラマ画像群ＧＸの各フレーム、及びパノラマ画像群ＧＹの各フレームを繋げて「コンテンツ区間Ｗ」に含まれるパノラマ画像から構成される一連の映像コンテンツを容易に作成することができる。
【００６７】
ここで、パノラマ画像群ＧＸとパノラマ画像群ＧＹを繋げて映像コンテンツを作成する際に、各パノラマ画像群の方位を合わせる画像補正を行うことが望ましい。特に、図５のように、撮影方向が異なるパノラマ画像をそのまま繋げると、映像コンテンツ中に撮影方向が異なる（表示座標系が異なる）パノラマ画像が混在することになる。撮影方向が異なるパノラマ画像が映像コンテンツ中に混在すると、パノラマ画像の表示制御処理等が複雑になる。したがって、予め、各撮影経路で撮影したパノラマ画像間の方位を合わせておく（表示座標系を揃えておく）のが肝要である。
【００６８】
そこで、編集装置１０の制御部１１は、ステップＳ２０５において特定した基準パノラマ画像Ｘと基準パノラマ画像Ｙに基づいて、パノラマ画像間の方位を合わせる画像補正を行ってもよい（ステップＳ２０７）。
【００６９】
図７（ａ）は、特定された基準パノラマ画像Ｘを表す図であり、図７（ｂ）は、特定された基準パノラマ画像Ｙを表す図である。図７に示すように、基準パノラマ画像Ｘ、基準パノラマ画像Ｙのいずれも基準位置５の真上で撮影したパノラマ画像であるため、パノラマ画像中の各マーカの垂直方向（仰角方向）の位置座標が一致する。
【００７０】
一方、撮影装置４の撮影経路７−１上の走行方向Ｄと、撮影装置４の撮影経路７−２上の走行方向Ｅとは、その方位方向が９０°異なるため、基準パノラマ画像Ｘと基準パノラマ画像Ｙは、互いに水平方向（方位方向）に９０°スライド（ローテーション）した画像となっている。このため、図７に示すように、基準パノラマ画像Ｘと基準パノラマ画像Ｙに表示される各マーカの表示位置も、互いに水平方向（方位方向）に９０°ずれて表示される。
【００７１】
ここで、ステップＳ２０７において、制御部１１は、基準パノラマ画像Ｘと基準パノラマ画像Ｙが同一の方位を向くように（基準パノラマ画像Ｘと基準パノラマ画像Ｙが同一の表示画像となるように）、基準パノラマ画像Ｘ、及び／又は基準パノラマ画像Ｙの水平方向（方位方向）のスライド量を決定し、当該スライド量に基づいて、パノラマ画像群ＧＸ、及び／又はパノラマ画像群ＧＹをスライド（ローテーション）させ画像補正を行う。
【００７２】
これによって、複数の撮影経路７−１、７−２で撮影したパノラマ画像郡ＧＸとパノラマ画像群ＧＹのパノラマ画像間の表示方位を揃えることができる。なお、スライド量の決定は、制御部１１によって自動で算出してもよいし、映像編集者等が手動で設定してもよい。
【００７３】
また、パノラマ画像のスライド量を決定する際、制御部１１は、基準パノラマ画像Ｘと基準パノラマ画像Ｙに表示されるマーカを目印として用いてもよい。この場合、制御部１１は、基準パノラマ画像Ｘと基準パノラマ画像Ｙに表示されるマーカの水平方向の位置情報を取得し、取得したマーカの水平方向の位置情報が一致するように、基準パノラマ画像Ｘ、及び／又は基準パノラマ画像Ｙの水平方向（方位方向）のスライド量を決定する。そして、決定したスライド量に基づいて、制御部１１は、パノラマ画像群ＧＸ、及び／又はパノラマ画像群ＧＹをスライド（ローテーション）させ画像補正を行う。
【００７４】
この場合、少なくとも方位合わせの目印とするマーカは、他のマーカと区別しやすい態様で実空間上に取り付けることが望ましい（基準パノラマ画像Ｘに表示されるマーカが基準パノラマ画像Ｙのいずれのマーカと対応するかを把握する必要があるため）。例えば、図５のマーカ３Ａを目印としてスライド量を決定する場合には、マーカ３Ａは、他のマーカ（マーカ３Ｂ、３Ｃ、３Ｄ）と異なる色、形状等で形成するのが望ましい。なお、方位合わせ用のマーカは、基準パノラマ画像を特定するためのマーカ（図５のマーカ３Ａ〜マーカ３Ｄ）と、別途に設けてもよい。この場合も、方位合わせ用のマーカは、他のマーカと区別しやすい態様で実空間上に取り付けることが望ましい。
【００７５】
以上、複数の撮影経路上でパノラマ画像を撮影する場合に、本発明を適用する例を説明した。
【００７６】
添付図面を参照しながら、本発明に係る撮影システム等の好適な実施形態について説明したが、本発明はかかる例に限定されない。その他、当業者であれば、本願で開示した技術的思想の範疇内において、各種の変更例又は修正例に想到し得ることは明らかであり、それらについても当然に本発明の技術的範囲に属するものと了解される。
【符号の説明】
【００７７】
１………撮影システム
３、３Ａ〜３Ｄ………実空間上のマーカ
３ａ〜３ｄ………パノラマ画像上に表示されるマーカ
４………撮影装置
５………基準位置
７………撮影経路
９−１〜９−５………パノラマ画像
Ｐ１〜Ｐ５………撮影位置
１０………編集装置
１１………制御部
１２………記憶部
１３………メディア入出力部
１４………通信制御部
１５………入力部
１６………表示部
１７………周辺機器Ｉ／Ｆ部
１８………バス
【図１】
2016134651.tif 000003
【図２】
2016134651.tif 000004
【図３】
2016134651.tif 000005
【図４】
2016134651.tif 000006
【図５】
2016134651.tif 000007
【図６】
2016134651.tif 000008
【図７】
2016134651.tif 000009
【図８】
2016134651.tif 000010