(57)【特許請求の範囲】
【請求項１】
カメラで撮影・記録された第１及び第２の映像を同期して表示する複数映像の画像表示装置において、
入力された第１及び第２の映像データを読取る読取り部と、
前記読取られた第１及び第２の映像データの表示操作を行う表示操作部と、
前記表示操作部の操作に従って前記読取られた第１及び第２の映像データから同期表示すべき第１及び第２の画像をそれぞれ選択する第１及び第２の画像選択部と、
前記第１及び第２の画像選択終了に伴い前記選択された第１及び第２の画像の画像データを取込む同期設定部と、
前記同期設定部に取込まれた画像データに記録された撮影時刻情報に基づき前記第１の画像に対する第２の画像の撮影時刻の差分値を演算し記憶する差分値記憶部と、
前記表示操作部からの同期再生指令に応じて、前記差分値記憶部に記憶された撮影時刻の差分値に基づき、前記第２の映像データから前記第１の画像の撮影時刻に最も近い第２の画像を読取るように前記第２の画像選択部を制御する同期制御部と、
前記第１及び第２の画像を同一画面上に表示する画像表示部を備え、
前記表示操作部からの同期再生指令に応じて、前記同期制御部の動作により前記読取り部で読取られた第１及び第２の映像データ間の撮影時刻のずれを調整して、前記画像表示部に前記第１及び第２の映像を同期表示する
ことを特徴とする複数映像の同期表示装置。
【請求項２】
前記表示操作部からの同期再生指令に応じて、前記第１の画像を含む第１の映像データの最初の撮影時刻がセットされ、前記表示操作部の操作内容に従ってカウント値を進める表示時刻カウンタを備え、前記同期制御部は前記表示時刻カウンタの値と前記撮影時刻の差分値とを加算した値に最も近い撮影時刻を有する第２の画像を読取るように前記第２の画像選択部を制御することを特徴とする請求項１記載の複数映像の同期表示装置。
【請求項３】
前記同期設定部は、前記表示操作部に設けられた同期設定指示手段の操作に応じて、前記第１及び第２の画像の画像データを取込むことを特徴とする請求項１または２記載の複数映像の同期表示装置。
【請求項４】
前記読取り部が読取る第１及び第２の映像データは、メモリカード、ハードディスクに記録された映像データ、またはネットワーク接続したカメラ映像データであることを特徴とする請求項１乃至３のいずれか一つに記載された複数映像の同期表示装置。
【請求項５】
カメラで撮影・記録された第１及び第２の映像を同期して同時に表示する複数映像の画像表示方法において、
入力された第１及び第２の映像データを読取る第１のステップと、
前記読取られた第１及び第２の映像データを再生表示し、前記第１及び第２の映像のうちから同期表示すべき第１及び第２の画像をそれぞれ選択する第２のステップと、
前記第１及び第２の画像の選択終了に伴い前記選択された第１及び第２の画像の画像データを取込む第３のステップと、
前記取込まれた画像データに記録された撮影時刻情報に基づき前記第１の画像に対する第２の画像の撮影時刻の差分値を演算し記憶する第４のステップと、
同期再生指令に応じて、前記撮影時刻の差分値に基づき、前記第２の映像データから前記第１の画像の撮影時刻に最も近い第２の画像を読取り、前記第１及び第２の映像データ間の撮影時刻のずれを調整して、同一画面上に前記第１及び第２の映像データを同期表示する第５のステップを含む
ことを特徴とする複数映像の同期表示方法。
【請求項６】
前記第５のステップは、前記同期再生指令に応じて、前記第１の画像を含む第１の映像データの最初の撮影時刻がセットされ、表示操作部の操作内容に従ってカウント値を進める表示時刻カウンタの値と、前記撮影時刻の差分値とを加算した値に最も近い撮影時刻を有する第２の画像を読取るステップを含むことを特徴とする請求項５記載の複数映像の同期表示方法。 
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、撮影時刻、フレームレートの異なる複数映像の同期表示装置及び同期表示方法に関するものである。
【背景技術】
【０００２】
異なるカメラで撮影・記録された映像、例えば複数の車載カメラで撮影された全景、拡大映像は、フレームレートが異なり、映像と同時記録される撮影時刻についても、時刻同期されていない場合が多い。このような映像を同期して同時に表示するためには、複数の映像の表示開始位置と映像の再生スピード（フレームレート）の両方を同期して表示する必要がある。
【０００３】
特許文献１では、同一時間帯の複数映像を表示することができる画像表示装置が提案されている。特許文献２では、フレームレートの異なる複数映像を、最適なフレームレートに変換して表示できる画像処理装置が提案されている。特許文献３では、フレームレートの異なる複数映像を、時刻を同期させてコマ送り／戻しできる画像表示処理装置が提案されている。
【先行技術文献】
【特許文献】
【０００４】
【特許文献１】特開2005-27337号公報
【特許文献２】特開2007-116418号公報
【特許文献３】特開2008-141608号公報
【発明の概要】
【発明が解決しようとする課題】
【０００５】
このように、従来の装置は、記録された撮影時刻を元にフレームレートの異なる複数映像を表示することはできるが、それぞれの記録された撮影時刻が異なる場合、複数映像の表示開始位置を調整して同期させることができなかった。
【０００６】
本発明は、上記の点に鑑み、複数映像をそれぞれ再生、一時停止、コマ送りなどの操作を行うことによって、映像の再生開始位置を簡単に同調させ、以降、複数映像を同期して表示できる機能を持つ複数映像の同期表示装置及び同期表示方法を提供することを目的とするものである。
【課題を解決するための手段】
【０００７】
本発明は、カメラで撮影・記録された第１及び第２の映像を同期して表示する複数映像の画像表示装置において、入力された第１及び第２の映像データを読取る読取り部と、前記読取られた第１及び第２の映像データの表示操作を行う表示操作部と、前記表示操作部の操作に従って前記読取られた第１及び第２の映像データから同期表示すべき第１及び第２の画像をそれぞれ選択する第１及び第２の画像選択部と、前記第１及び第２の画像選択終了に伴い前記選択された第１及び第２の画像の画像データを取込む同期設定部と、前記同期設定部に取込まれた画像データに記録された撮影時刻情報に基づき前記第１の画像に対する第２の画像の撮影時刻の差分値を演算し記憶する差分値記憶部と、前記表示操作部からの同期再生指令に応じて、前記差分値記憶部に記憶された撮影時刻の差分値に基づき、前記第２の映像データから前記第１の画像の撮影時刻に最も近い第２の画像を読取るように前記第２の画像選択部を制御する同期制御部と、前記第１及び第２の画像を同一画面上に表示する画像表示部を備え、前記表示操作部からの同期再生指令に応じて、前記同期制御部の動作により前記読取り部で読取られた第１及び第２の映像データ間の撮影時刻のずれを調整して、前記画像表示部に前記第１及び第２の映像を同期表示する。
【発明の効果】
【０００８】
本発明の複数映像の同期表示装置によれば、複数映像をそれぞれ再生、早送り、巻き戻し、コマ送り、一時停止等の操作を行うことによって、映像の再生開始位置を簡単に同調させ、以降、複数映像を同期して表示できる。
【図面の簡単な説明】
【０００９】
【図１】本発明の実施の形態に関する利用形態の一例を示す概略説明図である。
【図２】本実施の形態に係る複数映像の同期表示装置の機能ブロック図である。
【図３】本実施の形態に係る同期表示装置の外観を示す説明図である。
【図４】本実施の形態に係る同期表示動作における同期設定フローを示すフローチャートである。
【図５】本実施の形態に係る同期表示動作における同期再生フローを示すフローチャートである。
【図６】本実施の形態による同期表示動作の一例を示す説明図である。
【図７】本実施の形態による同期表示動作の他の例を示す説明図である。
【発明を実施するための形態】
【００１０】
以下、添付の図面を参照して、本発明に係る複数映像の同期表示装置及び同期表示方法について好適な実施の形態を説明する。
実施の形態．
本実施の形態として、図１に示すように、例えば、自動車に搭載された２台のカメラ２０１，３０１で撮影した全景映像と拡大映像をそれぞれ記録装置２０２，３０２に記録したものを、例えばＳＤカード等のメモリカード２０３，３０３にそれぞれ記録した後、同一の画像表示装置１００で読取りそれらの全景映像と拡大映像を同期して表示させる場合について説明する。
【００１１】
図２は本実施の形態における複数映像の同期表示装置１００を示す概略構成図で、２台のカメラで撮影されメモリカード２０３，３０３に記録された２つの映像データＶＡ，ＶＢを読取る読取り部１０と、読取られた２つの映像データを画像として同期表示し得るように処理する画像処理部２０と、この画像処理部２０の出力により２つの映像データに含まれる画像ＰＡ，ＰＢを２つの表示面Ａ、Ｂに並べて同時に表示する画像表示部３０と、この画像表示部３０に表示すべき画像の表示操作（再生、早送り、巻き戻し、コマ送り、一時停止など）を行う表示操作部４０とから構成される。
【００１２】
画像処理部２０は、読取り部１０で読取られた２つの映像データＶＡ，ＶＢのうち、表示操作部４０の操作に従って同期表示すべき第１及び第２の画像ＰＡ，ＰＢをそれぞれ選択する第１及び第２の画像選択部２１，２２と、第１及び第２の画像ＰＡ，ＰＢの選択終了に伴い選択されたそれらの画像データを取込む同期設定部２３と、同期設定部２３に取込まれた画像データから第１の画像ＰＡに対する第２の画像ＰＢの撮影時刻の差分値を演算し記憶する差分値記憶部２４と、表示操作部４０からの同期再生指令に応じて、差分値記憶部２４に記憶された撮影時刻の差分値に基づき、第２の映像データＶＢから第１の画像ＰＡの撮影時刻に最も近い撮影時刻を有する第２の画像ＰＢを読取るように第２の画像選択部２２を制御する同期制御部２５と、同期再生時に第１の画像ＰＡを含む映像データＶＡの最初の撮影時刻をセットされ、表示操作部４０の操作内容に従ってカウント値を進める表示時刻カウンタを備えている。
【００１３】
図３は、本実施の形態に係る同期表示装置１００の外観を示すもので、画像表示部３０の表示面Ａには全景画像、表示面Ｂには拡大画像が表示され、表示操作部４０には押しボタン等の同期設定指示手段４１が設けられている。
【００１４】
次に、本実施の形態に係る同期表示装置１００の動作を、図４及び図５により説明する。
図４は、同期表示動作における同期設定フローを示すフローチャートで、まず、画像表示部３０の表示面Ａに、再生、早送り、巻き戻し、コマ送り、一時停止等の操作により同期表示すべき第１の画像ＰＡを選択し、一時停止させる（ステップＳ１〜Ｓ３）。
次に、画像表示部３０の表示面Ｂに、再生、早送り、巻き戻し、コマ送り、一時停止等の操作により同期表示すべき第２の画像ＰＢを選択し、一時停止させる（ステップＳ４〜Ｓ６）。
そして、画像表示部３０の表示面Ａ，Ｂにそれぞれ同期表示すべき画像が表示された段階で、表示操作部４０に設けられた同期設定指示手段４１を操作することにより、画像処理部２０の同期設定部２３において同期設定を実行し、そのときの２つの画像データを取込む（ステップＳ７）。
更に、次のステップＳ８において同期設定部２３に取込まれた２つの画像データに基づき、第１の画像ＰＡに対する第２の画像ＰＢの撮影時刻の差分値を演算し差分値記憶部２４に記憶する。
【００１５】
図５は、同期表示動作における同期再生フローを示すフローチャートで、表示操作部４０からの同期再生指令により、第１の画像ＰＡを含む映像データから最初の撮影時刻を表示時刻カウンタ２６にセットする（ステップＳ１１）。
次に表示操作部４０で操作した内容、例えば再生、早送り、巻き戻し、コマ送り、一時停止等に従って表示時刻カウンタ２６を進める（ステップＳ１２）。次のステップＳ１３において表示時刻カウンタ２６の値に最も近い撮影時刻を有する画像ＰＡを読取る。
更に、表示時刻カウンタ２６の値とステップＳ８で記憶された撮影時刻の差分値とを加算した値に最も近い撮影時刻を有する画像ＰＢを読取る。
そして、読取った画像ＰＡ，ＰＢを図３に示すように画像表示部３０の２つ表示面Ａ，Ｂに同時に表示する。
【００１６】
図６，７は、本実施の形態による同期表示動作の異なる例を示す説明図である。
図６は、１５:３０：０から０．１秒ごとに撮影された画像フレームを有する映像ＶＡと、時計が０．５秒ずれたカメラで同時に０．１秒ごとに撮影された拡大映像を撮影した映像ＶＢを対象に、表示時刻カウンタの値１５:３０：０に映像ＶＢの撮影時刻の差分値０．５秒を加算して同期表示する場合を示している。
図６(a)は映像ＶＡと映像ＶＢに含まれる画像フレームをそれらの撮影時刻と共に示す模式図、同図(ｂ)は映像ＶＡと映像ＶＢに含まれる画像フレームの撮影時刻のずれ（０．５秒の差分）を示す模式図、同図(ｃ)は撮影時刻のずれを調整して映像ＶＡと映像ＶＢに含まれる画像フレームを同期表示した場合の模式図である。
【００１７】
また、図７は、１５:３０：０から１０枚／秒のフレームレートで撮影された映像ＶＡと、時計が０．４秒ずれたカメラで同時に５枚／秒のフレームレートで撮影された拡大映像を撮影した映像ＶＢを対象に、表示時刻カウンタ２６の値１５:３０：０に映像ＶＢの撮影時刻の差分値０．４秒を加算して同期表示する場合を示している。
図７(a)は映像ＶＡと映像ＶＢに含まれる画像フレームをそれらの撮影時刻と共に示す模式図、同図(ｂ)は映像ＶＡと映像ＶＢに含まれる画像フレームの撮影時刻のずれ（０．４秒の差分）を示す模式図、同図(ｃ)は撮影時刻のずれを調整してフレームレートの異なる映像ＶＡと映像ＶＢに含まれる画像フレームを同期表示した場合の模式図である。
【００１８】
なお、上記の説明では、入力される映像データとして、メモリカードに記録された２つの映像データを対象としたが、この代わりにネットワーク接続したカメラ映像データを直接入力できるようにすれば、蓄積された過去の映像だけでなく、リアルタイムで複数の映像を同期表示することができる。
【００１９】
また、複数映像を同期して表示した映像を記録する記録部、例えばハードディスクやメモリカードに記録する記録部を付加すれば、同期表示した映像を、そのまま記録でき、次回から同期設定作業を行う必要がなくなる。
【００２０】
以上のように本発明の複数映像の同期表示装置及び同期表示方法によれば、複数映像をそれぞれ再生、早送り、巻き戻し、コマ送り、一時停止等の操作を行うことによって、映像の再生開始位置を簡単に同調させ、以降、複数映像を同期して表示できる。
【符号の説明】
【００２１】
２０１，３０１  カメラ
２０２，３０２  記録装置
２０３，３０３  メモリカード
１００  同期表示装置
１０  読取り部
２０  画像処理部
２１，２２  画像選択部
２３  同期設定部
２４  差分値記憶部
２５  同期制御部
２６  表示時刻カウンタ
３０  画像表示部
４０  表示操作部
４１  同期設定指示手段
【図２】
0005511646.tif 000002
【図４】
0005511646.tif 000003
【図５】
0005511646.tif 000004
【図６】
0005511646.tif 000005
【図７】
0005511646.tif 000006
【図１】
0005511646.tif 000007
【図３】
0005511646.tif 000008