(57)【要約】【課題】撮影した映像の撮影箇所および撮影領域の特定が、特別な装置や機器を用いずに、コストが少なく簡易に１つの映像で撮影箇所および撮影領域と詳細な映像が同時に確認出来る方法を提供する。【解決手段】ビデオカメラを1台もしくは固定焦点カメラの両方を用いて、撮影を行い、撮影データを、市販の画像編集ソフトと映像編集ソフトを用いて、パノラマ静止画像を映像内に合成し、静止画上に撮影箇所および撮影領域が分かる枠、囲い等を表示させる。  これにより、表示している詳細な映像と、撮影した映像の撮影箇所および撮影領域の特定が簡易に１つの映像で同時に確認出来る。【選択図】図４
2009272843.tif 000002
【特許請求の範囲】
【請求項１】
ビデオカメラ1台もしくは、ビデオカメラと固定焦点カメラの両方を用いて撮影したビデオ映像を、パノラマ静止画像に加工し、撮影したビデオ映像と合成し、撮影箇所および撮影領域を静止画像やパノラマ静止画像上に表示させる方法であって、
一つの画面の中に、撮影したビデオ映像と、加工したパノラマ静止画像上にビデオ映像の撮影箇所および撮影領域を枠、囲いなどで表示する方法。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、静止画部分に、表示しているビデオ映像の位置を表示させることにより、一つの画面で撮影箇所および撮影領域が分かるようにする方法である。
【背景技術】
【０００２】
ビデオ映像および静止画像やパノラマ静止画像は、一般的な映像や写真に利用されているほか、人間が容易に近づくことができない危険な検査対象や、広範囲なため一度に全体を見通すことができない検査対象等を、航空機等から望遠撮影して容易に外観を詳細検査するのに利用されている。
【０００３】
上記のビデオ映像および静止画像やパノラマ静止画像は、次のような課題を解決する必要がある。
ビデオ映像はズームし詳細な映像を撮影した場合おいては、全体の、どの部位を撮影しているか分かりづらく部位の特定が困難であった。
映像をパノラマ静止画像に変換した場合は、詳細に見るために印刷またはパソコン等を用いて確認するが、印刷の場合は、ロール紙等の長い用紙を用いて印刷し該当箇所を確認しなければならない。
パノラマ静止画像をパソコン等で確認する場合には、該当箇所をスクロールして確認する必要があり特定の箇所を、瞬時に探し出すことは困難であった。
【０００４】
映像の、撮影箇所および撮影領域の確認が困難である。具体的には、ズーム映像の場合は撮影箇所の確認には、表示された撮影時間等で想定せざるを得ないため、都度撮影時間の計算が必要になるなどの問題があった。
パノラマ静止画の場合、ロール紙等の長い用紙に印刷する方法やパソコンで確認することは、その操作性等において大きな問題があった。
【０００５】
ところで、ビデオ映像の撮影箇所および撮影領域が分かるようにする従来技術としては次のものがある。
ａ）移動体に搭載されたカメラの指向方向と、移動体の位置を観測装置により取得するとともに、カメラのズーム比を取得し、付帯データを映像信号に多重化して一本の映像信号として基地局に送信し受信局で映像と付帯データを分離することにより、映像と付帯データとしての移動体の位置と撮影領域を地図上に表示する（特許文献１）。
ｂ）記録再生装置に、シーンチェンジを認識する機能を持つことで、パノラマ静止画作成や、動画の区切りとその区切り情報をパノラマ静止画の情報として付加する機能を実現し、動画が関連付けされたパノラマ静止画を記録する機能を実現し、パノラマ静止画の再生時に、一定時間関連付けされた情報がある位置で静止し閲覧した際に、当該の動画を再生することができる。
動画への関連情報を持つパノラマ静止画の記録再生装置（特許文献２）。
【特許文献１】特開平１１−１８７３６３号公報
【特許文献２】特開２００６?５６１０号公報
【発明の開示】
【発明が解決しようとする課題】
【０００６】
しかるに、上記従来技術ａ）では、移動体の位置と撮影領域を地図上に表示し、撮影した映像と地図表示を一画面中で対応付けて同時に見ることができるが、大掛かりな専用装置とシステムを必要としコストが大幅にかかってしまうため、簡易に撮影箇所および撮影領域と詳細な映像が同時に確認出来る方法ではない。また、従来技術ｂ）でも動画が関連付けされたパノラマ静止画を記録する機能を実現し、パノラマ静止画の再生時に、一定時間関連付けされた情報がある位置で静止し閲覧した際に、当該の動画を再生することができるが、パノラマ静止画は画面上でスクロールやカーソルで指定する必要があり、動画を再生した際に静止画上に撮影箇所および撮影領域を枠、囲いなどで表示しないため撮影箇所および撮影領域確認が困難であり、専用の装置を必要とするため、簡易に撮影箇所および撮影領域と詳細な映像が同時に確認出来る方法ではない。
解決しようとする問題点は、撮影した映像の表示、撮影箇所および撮影領域の特定が、特別な装置や機器を必要とせず、コストをかけずに簡易に行うことである。
本発明は、このような問題に鑑みなされたもので、撮影した詳細な映像の表示、撮影箇所および撮影領域の特定が特別な装置や機器を用いずに、コストが少なく簡易に１つの画面で同時に確認出来る方法の提供を課題とする。
【課題を解決するための手段】
【０００７】
本発明は、ビデオカメラ1台もしくはビデオカメラと固定焦点カメラの両方を用いて、撮影を行い、パソコンを使用し、市販の画像編集ソフトと映像編集ソフトを用いて、パノラマ静止画像に加工し、ビデオ映像とパノラマ静止画を合成し、さらにパノラマ静止画上に撮影箇所および撮影領域が分かる枠、囲いなどを表示させる方法であって、これにより、特別な装置や機器を用いずに、撮影した詳細な映像の撮影箇所および撮影領域の特定を静止画上で簡易に１つの画面で同時に確認出来ることを最も主要な特徴とする。
【発明の効果】
【０００８】
本発明は、映像と映像をパノラマ合成した静止画上に撮影箇所および撮影領域が分かる枠、囲いなどを表示させる方法で、撮影した詳細な映像の表示、撮影箇所および撮影領域の特定を静止画上で簡易に１つの画面で同時に確認出来る。
また、パソコンを使用し、市販の画像編集ソフトと映像編集ソフトを用いて、パノラマ静止画像を映像内に合成することで、特別な装置を必要とせず、コストを大幅に削減出来る。
【発明を実施するための最良の形態】
【０００９】
つぎに、本発明の実施形態を図面に基づき説明する。
映像と映像をパノラマ合成した静止画上にどの位置を撮影しているかが分かる枠、囲いなどを表示させるという目的を、市販のされているものを用いて、最小のコストで撮影した映像の撮影箇所および撮影領域の特定が、簡易に１つの画面で撮影箇所および撮影領域と詳細な映像が同時に確認出来る方法を実現した。
【００１０】
（（本発明の概要））
図１は、本発明のシステムの構成の一例を示す概要図である。同図において、パソコン３０は本システムの中心となるものであり、ビデオ映像データ取込編集手段３１と、モザイキング処理手段３２と、パノラマ合成静止画像編集手段３３と、映像、静止画合成手段３４と、映像連動、枠、囲い等合成手段３５と、合成データ圧縮手段３６とから構成されている。
【００１１】
前記パソコン３０に接続されている、HDビデオデッキ２１、ビデオデッキ２２光学ディスク記録装置２３、ハードディスク２４はビデオ映像データ読み込み手段２０の一例であり、図示しないビデオカメラによって撮影され、ビデオ画像データ記憶媒体１０の一例であるHDビデオテープ１１、ビデオテープ1２、光学ディスク１３、ハードディスク１４に記録されたビデオ映像データを読み込んで前記パソコン３０にデータ信号として送るためのものである。
【００１２】
また、前記パソコン３０に接続されたパソコン４１、映像再生可能な携帯プレーヤー４２、ハードディスク４３、ＤＶＤ／ＣＤ?Ｒドライブ４４及びビデオデッキ４５は合成映像データ格納手段４０の一例であり、さらには、プリンタ５１は作成された合成映像の1シーンを印刷出力するための合成データ出力手段５０の一例を示すものである。  
【００１３】
ここで、ＨＤビデオデッキ２１がＨＤＳＤＩ入力ボードに接続されている場合は、ビデオ映像データはデジタル信号のまま、例えばＨＤＳＤＩのインタフェースを用いてパソコン３０に取り込まれる。パソコン３０がアップル社のマッキントッシュ（同社の登録商標）であれば、データは例えば、アップル社の「Final Cut Pro」（同社の登録商標）により内部に一時格納され、編集する映像の長さ、色彩、コントラスト、明るさ等の画質調整を行う。また、ビデオデッキ２２がアナログ方式（例えばS-VHS方式）であれば、前記デジタル変換／ビデオ画像データ取込編集手段３１に、例えばビデオキャプチャボードを使用することにより、アナログ画像データをデジタル画像データに変換して、アップル社の「Final Cut Pro」（同社の登録商標）によりパソコン３０に取り込み編集することができる。ビデオデッキ２２がデジタルビデオデッキである場合は、ビデオ画像データはデジタル信号のまま、例えばIEEE1394等のインタフェースを用いてパソコン３０に取り込まれる。光学ディスク１３、ハードディスク１４がデジタル方式（例えばmovie方式）であれば、アップル社の「Final Cut Pro」（同社の登録商標）によりパソコン３０に取り込み編集することができる。
【００１４】
モザイキング処理手段３２は、取り込まれたビデオ映像データから展開静止画像を作成するものであり、例えば、展開静止画像はアップル社の「Final Cut Pro」「Quick Time Pro」（同社の登録商標）により作成される。
静止画の加工は、静止画の端はレンズの歪みが大きいので短冊上にトリミング加工を行い歪み部分を除去する。
加工にはアドビシステムズ社の「Adobe Photoshop」（同社の登録商標）、パノラマ合成にはEcho One社の「Double take」（同社の登録商標）等が利用可能である。
【００１５】
パノラマ合成静止画像編集手段３３は、モザイキング処理によって得られたパノラマ画像に対して、色彩、コントラスト、明るさ、画像の圧縮等の画質調整を行うものであり、市販の画像編集ソフトが使用できる。
例えば、アドビシステムズ社の「Adobe Photoshop」（同社の登録商標）が利用可能である。
代表的な圧縮画像ファイル形式として、JPEG、GIF、TIFF形式等がある。
【００１６】
映像、静止画合成手段３４は、映像データとパノラマ合成静止画像を合成し、映像と静止画の色彩、コントラスト、明るさ、画像の画質調整を行うものであり市販の映像編集ソフトが使用できる。
例えば、アップル社の「Final Cut Pro」（同社の登録商標）が利用可能である。
【００１７】
映像、静止画合成手段３４は、映像データとパノラマ合成静止画像を合成し、映像と静止画の色彩、コントラスト、明るさ、画像の画質調整を行うものであり市販の映像編集ソフトが使用できる。
例えば、アップル社の「Final Cut Pro」（同社の登録商標）が利用可能である。
【００１８】
映像連動、枠、囲い等合成手段３５は、パノラマ静止画像を映像内に合成した映像に、静止画上に撮影箇所および撮影領域が分かる枠、囲い等を合成表示させ、映像に合わせて枠、囲い等を移動または回転等の動作を付加するもので市販の映像合成編集ソフトが使用できる。
例えば、アップル社の「Motion」（同社の登録商標）が利用可能である。
これにより、撮影した映像の撮影箇所および撮影領域の特定が簡易に１つの媒体で同時に確認出来ることが可能になる。
【００１９】
合成データ圧縮手段３６は、様々な形態で閲覧が可能なように、様々な動画形式の映像データに変換するために圧縮するためのものである。実施例では圧縮は市販ソフトウェアで行い、代表的な圧縮がファイル形式として、Mpeg2、H.264、DivX、WMV、AVI形式等がある。
【００２０】
合成データ格納表示手段４０は、映像が視聴可能な機器で閲覧が可能なように、様々な動画形式の映像データに加工された映像データを表示閲覧可能にするための手段である。
【００２１】
図２、は、前記市販ソフトウェアを使用した処理プログラム３７によってパソコン３０が行う作業のビデオカメラが1台の場合のフローチャートを表したものである。以下、図２を参照して説明する。
【００２２】
まず、ステップ101において撮影されたビデオテープ等から、ビデオデッキ等によって映像データを読み取り、ステップ102においてビデオ編集ソフトでパソコン内に映像を取込む。ステップ103において、必要とする映像を映像と静止画の色彩、コントラスト、明るさ、必要とするカットなどを編集し、そのままデジタルデータとして、ビデオ編集ソフトが対応しているデジタル動画ファイル形式（例えばMov形式）でハードディスクに保存する（ステップ104）。
【００２３】
次に、ステップ103において、必要とする映像を映像と静止画の色彩、コントラスト、明るさ、必要とするカットなどを編集したデータを、ステップ105において、映像データから静止画を最適なフレームで切出し保存する。
ステップ106において、切出された画像データを画像編集ソフトによりストリップ（短冊状の画像）に切出しハードディスクに保存する。ステップ107において、ストリップ（短冊状の画像）に切出した画像データを繋げるモザイキング処理をパノラマ合成ソフトで行う。
【００２４】
ステップ108において静止画像データ（例えば、TIFFファイル形式）としてハードディスクに保存する。必要であれば、画質の調整を行う。必要でなければ、画像圧縮を行い、圧縮画像データとして保存する。ファイル形式は、JPEG、GIF、BMP等である。
【００２５】
次に、ステップ109において、ステップ104において保存した映像データとステップ108において保存した静止画像データを、ビデオ編集ソフトまたは映像合成ソフトで合成する。
【００２６】
ステップ110において、映像合成ソフトにより、ステップ109において、合成された映像データと静止画像データの、静止画像データ上に映像データの動きに連動させた枠、囲い等を位置と時間軸を同期させて合成加工し、映像データとして保存する。
【００２７】
ステップ111において、映像が視聴可能な機器で閲覧が可能なように、様々な動画形式の映像データに変換し各媒体に保存する。ファイル形式は、HDSDI、NTSC、Mpeg2、H.264、DivX、WMV、AVI形式等がある。
【００２８】
図３、は、前記市販ソフトウェアを使用した処理プログラム３７によってパソコン３０が行う作業を主ビデオカメラと固定焦点カメラの両方を用いた場合のフローチャートを表したものである。以下、図３を参照して説明する。
【００２９】
まず、ステップ201において、撮影された主ビデオカメラの映像データをビデオ編集ソフトでパソコン内に映像を取込む。ステップ202において、必要とする映像を映像と静止画の色彩、コントラスト、明るさ、必要とするカットなどを編集し、そのままデジタルデータとして、ビデオ編集ソフトが対応しているデジタル動画ファイル形式（例えばMov形式）でハードディスクに保存する（ステップ203）。
【００３０】
次に、ステップ204において、固定焦点カメラの映像をビデオ編集ソフトでパソコン内に映像を取込む。
ステップ205において、映像と静止画の色彩、コントラスト、明るさ、主カメラの映像と同じカットなどを編集したデータを、ステップ206において、映像データから静止画を最適なフレームで切出し保存する。
ステップ207において、切出された画像データをソフトによりストリップ（短冊状の画像）に切出す必要があるか否か判断し、必要がある場合は、ステップ208において、切出された画像データを画像編集ソフトによりストリップ（短冊状の画像）に切出しハードディスクに保存する。ストリップ（短冊状の画像）に切出した画像データを繋げるモザイキング処理をパノラマ合成ソフトで行う。単一の画像で良い場合はそのままハードディスクに保存する。図４はその概念図である。
【００３１】
ステップ209において静止画像データ（例えば、TIFFファイル形式）としてハードディスクに保存する。必要であれば、画質の調整を行う。必要でなければ、画像圧縮を行い、圧縮画像データとして保存する。ファイル形式は、JPEG、GIF、BMP等である。
【００３２】
次に、ステップ210において、ステップ203で保存した映像データとステップ209において保存した静止画像データを、ビデオ編集ソフトまたは映像合成ソフトで合成する。
【００３３】
ステップ211において、映像合成ソフトにより、ステップ210において、合成された映像データと静止画像データの、静止画像データ上に映像データの動きに連動させた枠、囲い等を位置と時間軸を同期させて合成加工し、映像データとして保存する。
【００３４】
ステップ212において、映像が視聴可能な機器で閲覧が可能なように、様々な動画形式の映像データに変換し各媒体に保存する。ファイル形式は、HDSDI、NTSC、Mpeg2、H.264、DivX、WMV、AVI形式等がある。
【実施例１】
【００３５】
図４は、本発明の１実施例のイメージ図であって、１は、図５と同様である。
【００３６】
ビデオ映像部分１は、ズーム撮影された映像を表示している。静止画パノラマ合成部分２は、ズーム撮影された映像をパノラマ合成し静止画として映像に合成し、表示している。ビデオ映像表示領域枠３は、表示されている映像の枠、囲い等として映像に連動し静止画上で撮影部分を示す。
【実施例２】
【００３７】
図５の実施例は、ビデオ映像部分１は、ズーム撮影された映像を表示している。静止画パノラマ合成部分２は、固定焦点カメラで撮影された映像をパノラマ合成し静止画として映像に合成し、表示している。ビデオ映像表示領域枠３は、表示されている映像の枠、囲い等として映像に連動し静止画上で撮影部分を示す。
パノラマ合成した静止画は、変形していても映像上に合成出来るとともに、枠、囲い等も同様に撮影している映像に連動し回転や移動する。
【産業上の利用可能性】
【００３８】
映像を確認しながら、必要な箇所を静止画に表示されている枠、囲い等により、位置特定が簡易にでき、特殊な機器を用いなくても、一般にある機器で視聴出来るため、コストが大幅に削減出来る。また、映像を撮影した箇所の状況を現地で比較確認にも容易に利用が可能である。
【図面の簡単な説明】
【００３９】
【図１】システムの構成の一例を示す概要図。
【図２】ビデオカメラが1台の場合の作業のフローチャート。
【図３】主ビデオカメラと固定焦点カメラの両方を用いた場合の作業のフローチャート
【図４】実施例のイメージ図（実施例１）
【図５】実施例のイメージ図（実施例１）
【符号の説明】
【００４０】
１    ビデオ映像部分
２    静止画パノラマ合成部分
３    ビデオ映像表示領域枠
１１  ＨＤビデオテープ
１２  ビデオテープ
１３  光学ディスク１３
１４  ハードディスク
２１  ＨＤビデオデッキ
２２  ビデオデッキ
２３  光学ディスク記録装置
３０  パソコン
４１  パソコン
４２  映像再生可能な携帯プレーヤー
４３  ハードディスク
４４  ＤＶＤ／ＣＤ?Ｒドライブ
４５  ビデオデッキ
５１  プリンタ
【図１】
2009272843.tif 000003
【図２】
2009272843.tif 000004
【図３】
2009272843.tif 000005
【図４】
2009272843.tif 000006
【図５】
2009272843.tif 000007