(57)【要約】【課題】  監視対象の映像内に計測情報を内挿して管理データ量を削減し、かつ、映像と計測情報との一体管理を実現する。【解決手段】  監視対象１１の映像を周波数成分に分解し、電子透かし内挿処理部１７にて所定の周波数成分領域内に当該監視対象１１と関連性を有する物理変量の計測情報を電子透かしにより内挿し、ＪＰＥＧ圧縮映像化し記憶装置１５に保存する。  そして、記憶装置１５からＪＰＥＧ圧縮映像を読み出して復号化した後、電子透かし読み取り処理部２３にて所定の周波数成分領域内から計測情報を取り出し、表示部２６に映像と計測情報とを一体的に表示する電子透かしを用いた映像管理システムである。【選択図】図１
2009182853.tif 000002
【特許請求の範囲】
【請求項１】
計測情報内挿処理系と監視情報管理系とで構成され、
前記計測情報内挿処理系は、監視対象を撮像カメラで撮影し、その撮影映像を複数の周波数成分に周波数分解する手段と、前記監視対象と関連性を有する物理変量を計測し、前記分解された所定の周波数成分領域内に計測情報を内挿する電子透かし内挿処理手段と、この電子透かし内挿処理手段で前記計測情報を内挿した映像を量子化処理により圧縮したＪＰＥＧ圧縮映像に変換する可変長符号化手段とを備え、
前記監視情報管理系は、前記ＪＰＥＧ圧縮映像を逆量子化処理により前記複数の周波数成分領域を有する映像に変換する可変長復号化手段と、この可変長復号化手段で変換された映像のうち、前記所定の周波数成分領域内に内挿されている前記計測情報を取り出す電子透かし読み取り処理手段と、この読み取り後の複数の周波数成分領域を有する映像を前記撮影映像に復元し、前記電子透かし読み取り処理手段で読み取った計測情報と復元された撮影情報とを表示する手段とを備えたことを特徴とする電子透かしを用いた映像管理システム。
【請求項２】
請求項１に記載の電子透かしを用いた映像管理システムにおいて、
前記撮像カメラは車両の前方周辺の状況の映像を撮影し、前記監視対象と関連性を有する物理変量としては、車両の走行速度、ブレーキの押し圧力、アクセルの押圧力、車内湿度、車内温度の少なくとも１つを計測し、
さらに、前記計測情報内挿処理系には、前記可変長符号化手段で変換されたＪＰＥＧ圧縮映像を順次無線送信する手段を追加し、
前記監視情報管理系には、前記計測情報内挿処理系から送信されてくるＪＰＥＧ圧縮映像を受信し、前記可変長復号化手段に入力する手段を追加し、
前記電子透かし読み取り処理手段で読み取った前記車両の走行速度、ブレーキの押し圧力、アクセルの押圧力、車内湿度、車内温度の少なくとも１つである計測情報と前記復元された前記車両の前方周辺の状況の映像とを表示し、車両の走行に関するドライバの挙動を検証することを特徴とする電子透かしを用いた映像管理システム。
【請求項３】
計測情報内挿処理系と監視情報管理系とで構成され、
前記計測情報内挿処理系は、車両の前方周辺の映像を撮像カメラで撮影し、その撮影映像を複数の周波数成分に周波数分解する手段と、前記監視対象と関連性を有する車両の走行速度、ブレーキの押し圧力、アクセルの押圧力、車内湿度、車内温度の少なくとも１つを計測し、前記分解された所定の周波数成分領域内に計測情報を内挿する電子透かし内挿処理手段と、この電子透かし内挿処理手段で前記計測情報を内挿した映像を量子化処理により圧縮し、ＪＰＥＧ圧縮映像に変換し、記憶装置に保存する可変長符号化手段とを備え、
前記監視情報管理系は、適宜な時期または車両事故時に前記記憶装置に保存されるＪＰＥＧ圧縮映像を読み出して逆量子化処理により前記複数の周波数成分領域を有する映像に変換する可変長復号化手段と、この可変長復号化手段で変換された映像のうち、前記所定の周波数成分領域内に内挿されている前記計測情報を取り出す電子透かし読み取り処理手段と、この計測情報取り出し後の複数の周波数成分領域を有する映像を前記撮影映像に復元し、前記電子透かし読み取り処理手段で読み取った前記車両の走行速度、ブレーキの押し圧力、アクセルの押圧力、車内湿度、車内温度の少なくとも１つの計測情報と前記復元された前記車両の前方周辺の映像とを表示し、ドライバの運転挙動状態を把握する手段とを備え、
車両事故時に車両の走行状態を検証するドライブレコーダの機能を有することを特徴とする電子透かしを用いた映像管理システム。
【請求項４】
請求項１ないし請求項３の何れか一項に記載の電子透かしを用いた映像管理システムにおいて、
前記監視情報管理系には、前記電子透かし読み取り処理手段で取り出した計測情報と前記復元された撮影情報とを紐付けしてデータベースに保存する情報書き込み・読み出し制御手段と、予め計測対象ごとに異常と判断するためのしきい値が設定され、外部から検索対象のもとに検索指示を受けたとき、前記データベースに保存される計測対象に関する計測情報を順次情報書き込み・読み出し制御手段を介して抽出し、前記しきい値を超えていると判断したとき、その計測情報及び当該計測情報に紐付けされた前記復元された撮影映像とを前記データベースから読み出し表示する検索処理手段をさらに備えたことを特徴とする電子透かしを用いた映像管理システム。
【請求項５】
請求項１に記載の電子透かしを用いた映像管理システムにおいて、
前記電子透かし内挿処理手段は、前記監視対象と関連性を有する計測対象の状態変化を映像的に検知して予め定める状態変化を表す情報に変換し、前記分解された所定の周波数成分領域内に前記状態変化を表す情報を内挿することを特徴とする電子透かしを用いた映像管理システム。
【請求項６】
請求項１又は請求項３に記載の電子透かしを用いた映像管理システムにおいて、
前記監視情報管理系が遠隔地の監視センタに設置されている場合、
前記可変長符号化手段で前記計測情報が内挿された映像を量子化処理により圧縮して得られるＪＰＥＧ圧縮映像をネットワークを通して前記監視センタの前記監視情報管理系に転送することを特徴とする電子透かしを用いた映像管理システム。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、カメラの撮影映像に電子透かし情報を内挿し管理する電子透かしを用いた映像管理システムに関する。
【背景技術】
【０００２】
デジタル化社会の到来に伴い、不特定多数の人の間で画像，音楽などのデジタル情報が活発に流通されている。デジタル情報は容易に複製できることから著作権侵害の問題がクローズアップされている、そこで、著作権を保護するために、デジタル情報（映像などの主情報）の中に人間では知覚できない著作者などの情報（副情報）を電子的に埋め込む電子透かしの技術が有力な手段として注目され、既に提案されている（特許文献１）。
【０００３】
ところで、近年、著作権を伴う画像，音楽などのデジタル情報だけでなく、社会生活基盤の中で映像を取り扱う多くの監視システムが開発されている。
【０００４】
例えば車両の事故発生原因を含む車両走行時のドライバの挙動などを把握するために撮像カメラおよびドライブレコーダを搭載し、或いはセキュリティを確保する意味から、企業の敷地内、市街地、駐車場、エレベータ内に撮像カメラを設置し、撮像カメラで撮影された映像を伝送し管理するシステムが開発されている。
【０００５】
このようなシステムは、車両前方周辺の映像だけでなく、例えばドライバの運転挙動などを厳密に把握する必要から走行速度、ブレーキ・アクセルの圧力、車内温度などの計測情報が必要であり、また、セキュリティ面からは監視対象となる人間の映像だけでなく、例えば監視区域侵入時の日時計測情報などが必要となる。
【０００６】
従来、かかる映像管理システムでは、映像と計測情報とを別々に伝送し、これら情報の受け取る情報管理装置では、受信した映像と計測情報とを記憶装置などに別々に保存し管理する。
【特許文献１】特開２００７−２１５０１１号公報
【発明の開示】
【発明が解決しようとする課題】
【０００７】
しかし、以上のような映像管理システムでは、映像と計測情報とを別々に伝送し管理するためにシステム全体が複雑な構成となり、また、情報管理装置の記憶装置には多量の情報量が蓄積され、情報の管理が難くなる問題がある。
【０００８】
また、情報管理装置側では、後日、映像を表示する際、その映像と関連する計測情報も同時に取り出す必要があるが、そのためには映像と計測情報との対応付けが必要となる。映像と計測情報との対応関係が崩れると、映像の価値、信頼性が大きく低下し、所望の目的を果せなくなる。さらに映像と計測情報とを別々に出力した場合には両情報の対応関係が難しくなるなどの問題がある。
【０００９】
本発明は上記事情に鑑みてなされたもので、監視対象の映像内に電子透かしを用いて計測情報を内挿して保存管理すべきデータ量を削減し、かつ、映像と計測情報との一体性を保持しつつ管理可能とする電子透かしを用いた映像管理システムを提供することを目的とする。
【課題を解決するための手段】
【００１０】
上記課題を解決するために、本発明は、計測情報内挿処理系と監視情報管理系とで構成され、
前記計測情報内挿処理系は、監視対象を撮像カメラで撮影し、その撮影映像を複数の周波数成分に周波数分解する手段と、前記監視対象と関連性を有する物理変量を計測し、前記分解された所定の周波数成分領域内に計測情報を内挿する電子透かし内挿処理手段と、この電子透かし内挿処理手段で前記計測情報を内挿した映像を量子化処理により圧縮したＪＰＥＧ圧縮映像に変換する可変長符号化手段とを備え、
前記監視情報管理系は、前記ＪＰＥＧ圧縮映像を逆量子化処理により前記複数の周波数成分領域を有する映像に変換する可変長復号化手段と、この可変長復号化手段で変換された映像のうち、前記所定の周波数成分領域内に内挿されている前記計測情報を取り出す電子透かし読み取り処理手段と、この読み取り後の複数の周波数成分領域を有する映像を前記撮影映像に復元し、前記電子透かし読み取り処理手段で読み取った計測情報と復元された撮影映像とを表示する手段とを備えた電子透かしを用いた映像管理システムである。
【００１１】
また、本発明は、上記構成において、車両の走行状態をテストする前記映像管理システムに適用する場合、
前記撮像カメラは車両の前方周辺の状況の映像を撮影し、前記監視対象と関連性を有する物理変量としては、車両の走行速度、ブレーキの押し圧力、アクセルの押圧力、車内湿度、車内温度の少なくとも１つを計測し、
さらに、前記計測情報内挿処理系には、前記可変長符号化手段で変換されたＪＰＥＧ圧縮映像を順次無線送信する手段を追加し、
前記監視情報管理系には、前記計測情報内挿処理系から送信されてくるＪＰＥＧ圧縮映像を受信し、前記可変長復号化手段に入力する手段を追加し、
前記電子透かし読み取り処理手段で読み取った前記車両の走行速度、ブレーキの押し圧力、アクセルの押圧力、車内湿度、車内温度の少なくとも１つである計測情報と前記復元された前記車両の前方周辺の状況の映像とを表示し、走行車両におけるドライバの挙動を検証する構成である。
【００１２】
さらに、本発明は、計測情報内挿処理系と監視情報管理系とで構成され、
前記計測情報内挿処理系は、車両の前方周辺の映像を撮像カメラで撮影し、その撮影映像を複数の周波数成分に周波数分解する手段と、前記監視対象と関連性を有する車両の走行速度、ブレーキの押し圧力、アクセルの押圧力、車内湿度、車内温度の少なくとも１つを計測し、前記分解された所定の周波数成分領域内に計測情報を内挿する電子透かし内挿処理手段と、この電子透かし内挿処理手段で前記計測情報を内挿した映像を量子化処理により圧縮し、ＪＰＥＧ圧縮映像に変換し、記憶装置に保存する可変長符号化手段とを備え、
前記監視情報管理系は、適宜な時期または車両事故時に前記記憶装置に保存されるＪＰＥＧ圧縮映像を読み出して逆量子化処理により前記複数の周波数成分領域を有する映像に変換する可変長復号化手段と、この可変長復号化手段で変換された映像のうち、前記所定の周波数成分領域内に内挿されている前記計測情報を取り出す電子透かし読み取り処理手段と、この計測情報取り出し後の複数の周波数成分領域を有する映像を前記撮影映像に復元し、前記電子透かし読み取り処理手段で読取った前記車両の走行速度、ブレーキの押し圧力、アクセルの押圧力、車内湿度、車内温度の少なくとも１つの計測情報と前記復元された前記車両の前方周辺の映像とを表示し、ドライバの運転挙動状態を把握する手段とを備え、車両事故時に車両の走行状態を検証するドライブレコーダの機能を有する電子透かしを用いた映像管理システムである。
【発明の効果】
【００１３】
本発明によれば、監視対象の映像内に電子透かしを用いて計測情報を内挿することにより保存管理すべきデータ量を削減でき、また、映像と計測情報との一体性を保持しつつ管理することができる電子透かしを用いた映像管理システムを提供できる。
【発明を実施するための最良の形態】
【００１４】
以下、本発明の実施の形態について図面を参照して説明する。  
（第１の実施の形態）  
図１は本発明に係る電子透かしを用いた映像管理システムの第１の実施の形態を示す構成図である。
【００１５】
この映像管理システムは、監視対象の映像に計測情報を内挿処理する計測情報内挿処理系１と、この計測情報内挿処理系１により一体化された監視情報から映像と計測情報とを分離し出力する監視情報管理系２とで構成される。
【００１６】
計測情報内挿処理系１には、監視対象１１を撮影する撮像カメラ１２と、監視対象１１と関連性を有する所望の物理変量を計測する計測センサ１３と、ＣＰＵで構成される計測情報内挿処理部１４と、データベース１５が設けられている。
【００１７】
ここで、監視対象１１は、例えば車両の事故解析などを行う場合には、車両の前方周辺の映像となるが、計測対象はドライバの挙動などを把握するためのブレーキやアクセルの押圧状態となるが、監視目的から監視対象１１とは密接な関連性を有する。
【００１８】
撮像カメラ１２は、監視対象１１である例えば果物の映像を撮影し、デジタル映像情報を計測情報内挿処理部１４に導入する。計測センサ１３は、監視対象１１の監視目的に応じた所望の物理変量（例えば外気温度）を計測する。
【００１９】
計測情報内挿処理部１４は、撮像カメラ１２からのデジタル映像を２次元の離散コサイン（ＤＣＴ：Discrete  Cosine  Transform）変換を実施し、高周波成分と低周波成分とに周波数分解する離散コサイン変換部１６と、これら両周波数成分領域のうち、低周波成分領域（ＤＣＴ係数）に計測センサ１３の計測情報を内挿する電子透かし内挿処理部１７と、この計測情報を内挿した映像を量子化してＪＰＥＧ圧縮映像に変換し、データベース１５に保存する可変長符号化部１８とで構成される。
【００２０】
監視情報管理系２は、データベース１５のＪＰＥＧ圧縮映像を読み出す情報読み取り部２１と、前述した符号化の処理手順と逆の処理を実行する可変長復号化部２２と、低周波成分領域から電子透かし情報である計測情報を取り出す電子透かし読み取り処理部２３と、逆離散コサイン変換し、低周波成分領域の電子透かし情報のあった画素値を元の映像に復元して取り出す逆離散コサイン変換部２４と、表示制御部２５と、表示部２６とで構成される。
【００２１】
次に、以上のような構成された映像管理システムの作用について説明する。
【００２２】
撮像カメラ１２が監視対象１１である例えば果物の映像を撮影する。計測情報内挿処理系１の離散コサイン変換部１６は、撮像カメラ１２で撮像されたデジタル映像の所定画素数ブロックごとに２次元の離散コサイン変換を実施し、高周波成分と低周波成分とに周波数分解し、電子透かし内挿処理部１７に渡す。
【００２３】
電子透かし内挿処理部１７では、周波数分解された周波数成分領域のうち、低周波成分領域が多少変化しても画質に大きな影響を与えないことを考慮し、当該低周波成分領域内に計測センサ１３の計測情報を内挿する。ここで、計測情報とは、例えば監視対象１１が果物である場合、その果物の生育状況や糖度に影響を与える外気温度情報等に相当する。
【００２４】
さらに、可変長符号化部１８にて低周波成分領域値（ＤＣＴ係数）と高周波成分領域値（ＤＣＴ係数）に対し、量子化処理を行った後、ランレングス符号化とハフマン符号化を実施し、計測情報を埋め込んだＪＰＥＧ圧縮映像に変換し、データベース１５に保存する。
【００２５】
なお、電子透かしを内挿しない場合でも、映像の全ての画素値データを保存するので、基本的にはデータ記憶容量が増えない。そのため、それほど情報量の多くない計測情報を内挿することが可能である。
【００２６】
このデータベース１５に保存された計測情報を埋め込んだＪＰＥＧ圧縮映像は、監視情報管理系２で必要に応じて随時読み取り、映像と計測情報に分離して表示部２６に表示する。
【００２７】
すなわち、監視情報管理系２の情報読み取り部２１は、データベース１５に保存されるＪＰＥＧ圧縮映像を読み出し、可変長復号化部２２に送出する。
【００２８】
可変長復号化部２２では、読み出したＪＰＥＧ圧縮映像に対するランレングス符号，ハフマン符号を復号し、逆量子化処理を実施することにより、高周波成分領域と低周波成分領域とを求めた後、電子透かし読み取り処理部２３によって低周波成分領域から予め定められた規則に従って電子透かし情報である計測情報を取り出すとともに、この計測情報を取り出した後の復号化された高周波成分領域と低周波成分領域とを逆離散コサイン変換部２４に送出する。
【００２９】
ここで、逆離散コサイン変換部２４は、高周波成分領域と低周波成分領域とを逆離散コサイン変換し、低周波成分領域値電子透かし情報のあった画素値をゼロに戻して画質に影響を除去し、映像を取り出し、表示制御部２５に出力する。
【００３０】
表示制御部２５は、映像をフレームメモリないし画像メモリ（図示せず）に書き込むと共に、予め定められる映像上の所定領域に計測情報を書き込み、表示部２６に映像と計測情報とを同時に表示する。
【００３１】
従って、以上のような実施の形態によれば、監視対象１１の映像内に当該監視対象１１と関連性をもった計測情報を埋め込んで一体化しデータベース１５に保存するので、映像と計測情報とが常に対応関係をもって保存でき、情報の管理がし易くなる。また、監視対象１１の映像内である例えば背景領域などに映像に影響を与えず、かつ、基本的にデータ記憶容量を増やさずに計測情報を埋め込み、データベース１５に保存することから、データ量の削減化に大きく貢献する。
【００３２】
なお、上記実施の形態では、データベース１５に保存されている計測情報を埋め込んだ映像，つまりＪＰＥＧ圧縮映像を適宜な時期に読み出し、映像に埋め込んだ計測情報を取り出し、同期を取りながら映像と計測情報とを同時に表示したが、例えばデータベース１５に保存されているＪＰＥＧ圧縮映像を適宜な記憶媒体に読み取り、適宜な場所に設置されるファイルに保存し、必要なときに監視情報管理系２を用いて、復号化処理を実施し、映像と計測情報とを同時に表示する構成であってもよい。
【００３３】
（第２の実施の形態）  
図２は本発明に係る電子透かしを用いた映像管理システムの第２の実施の形態を示す構成図である。なお、同図において、図１と同一または等価な構成部分には同一符号を付して説明する。
【００３４】
この実施の形態は、車両（二輪車を含む）に計測情報内挿処理系１を搭載し、教習所やサーキットにてドライバの走行状態をテストするなどの走行テスト管理システムに適用する例である。
【００３５】
この計測情報内挿処理系１の出力側には記憶装置１５ａ及び無線送信処理部３１が接続され、車両に搭載される。
【００３６】
一方、監視情報管理系２は、監視センタ３２などに設置され、無線情報処理部３３、可変長復号化部２２、電子透かし読み取り処理部２３、逆離散コサイン変換部２４、表示制御部２５及び表示部２６の他、分離した映像と計測情報とを対応付けを持って保存するデータベース３４及び所望とする指令を入力する入力部３５が設けられている。
【００３７】
次に、この実施の形態における作用を説明する。  
車両に搭載された撮像カメラ１２は、車両に前方周辺部の映像を撮像し、計測情報内挿処理部１４に導入する。また、計測センサ１３としては、速度計やブレーキ，アクセルへの押圧力を計測する圧力計等が使用され、車両走行時の走行速度やブレーキ，アクセルの押圧力などを計測し、計測情報として電子透かし内挿処理部１７に送出する。
【００３８】
この状態において、計測情報内挿処理部１４の離散コサイン変換部１６，電子透かし内挿処理部１７及び可変長符号化部１８を用いて、前述したように車両の前方周辺部の映像の中に日時を含む車両走行時の走行速度や押圧力などの計測情報を電子透かしにより埋め込んだＪＰＥＧ圧縮映像を生成し、情報記憶装置１５ａに記憶する他、無線送信処理部３１にて所定の通信プロトコルに従って、遠隔地に設置される監視センタ３２などに設置される監視情報管理系２へ連続的に無線送信する。
【００３９】
監視センタ３２の監視情報管理系２では、無線受信処理部３３にて計測情報内挿処理系１から送られてくるＪＰＥＧ圧縮映像を順次受信し、可変長復号化部２２及び電子透かし読み取り処理部２３にて復号化し、低周波成分領域から計測情報を取り出す。
【００４０】
しかる後、逆離散コサイン変換部２４は、この計測情報を取り出した後の復号化された高周波成分領域と低周波成分領域とを逆離散コサイン変換し、低周波成分領域値の電子透かし情報のあった画素値をゼロにした映像を取り出し、表示制御部２５に送る、この表示制御部２５では、復元された映像と電子透かし読み取り処理部２３で取り出した走行速度や圧力情報とを対応付けてデータベース３４に記憶するとともに、順次表示部２６に表示する。
【００４１】
従って、この実施の形態によれば、電子透かし読み取り処理部２３にてＪＰＥＧ圧縮映像から車両速度やアクセル，ブレーキの押圧力などの計測情報を抽出した後、この抽出された計測情報と映像とを表示部２６に同時、かつ、時系列的に表示し監視できるので、ドライバの運転状態を確実に検証できる。
【００４２】
なお、この実施の形態では、車両の走行状態を検証する走行テストシステムに適用した例であるが、車両の追突事故時などの事故原因解析にも容易に適用できる。
【００４３】
具体的には２通り考えられる。  
その１つの例は、第１の実施の形態において、車両の追突事故時などにデータベース１５に保存される時系列的なＪＰＥＧ圧縮映像を別の記憶媒体にコピーし、監視センタ３２に設置される図１に示す監視情報管理系２で読み取り、前述する一連の処理を実施し、ＪＰＥＧ圧縮映像から監視映像と計測情報とを分離し、表示部２６に同時に表示し、車両追突時の状況を検証する。
【００４４】
もう１つの例は、図２の構成を利用して車両の追突事故時などを検証する例である。  
この例は、図２に示す無線送信処理部３１は、ＪＰＥＧ圧縮映像をＯＳＩ参照モデルに従ってパケットし、かつ、所定の通信プロトコルにより、無線送信する。
【００４５】
パケット化されたＪＰＥＧ圧縮映像は、基地局（図示せず）で受信し、ネットワークを介して遠隔地に設置される監視センタ３２などに設置される監視情報管理系２に転送する。
【００４６】
ここで、監視センタ３２では、前述した第２の実施の形態と同様の処理を行い、車両ごとに映像と日時を含む走行速度や押圧力などの計測情報とを紐付けしてデータベース３４に順次保存していく。
【００４７】
その後、車両の追突事故などが発生した際、データベース３４に車両名（例えば車両番号）ごとに保存される監視情報のうち、入力部３５から監視対象となる事故車両名及び追突事故日時を指定し、事故車両名及び追突事故日時に基づく、対応付けされた映像と計測情報とを読み出して表示部２６に表示し、あるいは事故車両名及び追突事故日時よりも数１０秒前の日時を指定し、事故車両名及び指定日時から時系列的に記憶される映像と計測情報とを順次読み出して順次表示部２６に表示し、車両追突時の状況を解析する。
【００４８】
従って、この実施の形態によれば、第１の実施の形態及び第２の実施の形態と同様の効果を奏する他、車両の追突時などの場合、車両名及び追突時間情報から容易に数１０秒前の映像及び計測情報を読み出して表示でき、映像をもとに、急ブレーキをかけたとか、あるいは急アクセルをかけたなど、事故状況、事故原因を詳細に分析することができる。
【００４９】
なお、計測情報としては、走行速度、アクセル，ブレーキの押圧力だけでなく、例えば車内温度、車内湿度を計測し、総合的に判断することも可能である。
【００５０】
（第３の実施の形態）  
図３は本発明に係る電子透かしを用いた映像管理システムの第３の実施の形態を説明する図である。なお、同図において、図１，図２と同一または等価な構成部分には同一符号を付して説明する。
【００５１】
この実施の形態は、映像検索処理機能を備えた映像管理システムの例である。  
この映像管理システムにおいて、計測情報内挿処理系１は図１または図２の何れかの構成を用いる。
【００５２】
一方、監視情報監視系２は、図３に示すように、可変長復号化部２２にてＪＰＥＧ圧縮映像から高周波成分領域と低周波成分領域とを求めた後、電子透かし読み取り処理部２３によって低周波成分領域から規則に従って計測情報を取り出した後、情報書き込み・読み出し制御部４１によって映像と日時情報を含む計測情報とを紐付けしてデータベース４２に保存する。後に映像情報を再生する際、計測情報を検索キーとし、映像及び計測情報を検索する。４３は検索処理部、４４は表示部、４５は入力部である。
【００５３】
以上のような構成とすることにより、検索処理部４３は、計測対象ごとに異常と判断するためのしきい値が設定され、入力部４５から計測対象の指定による検索キー情報を受け取ると、情報書き込み・読み出し制御部４１を介してデータベース４２から計測対象に関する計測情報を順次読み出し、しきい値を超えたか否かを判断し、超えている場合に何らかの異常値が計測されたと判断し、その計測情報に紐付けされた映像だけを検索し、表示部４４に再生表示するか、映像と計測情報とを同時に再生表示する。
【００５４】
これにより、何らかの異常値が計測されたところだけを選択的に映像を再生して表示でき、あるいは映像と計測情報とを同時に再生し表示できる。よって、何らかの異常値が計測されたところだけを確実に映像確認できる。
【００５５】
また、異常値が計測された映像にどのような計測情報が含まれているか、つまり異常値が計測された計測情報の一覧を表示することができ、ユーザはその表示された一覧から確認したいものだけを頭出し（選択）を行い、何らかの異常値が計測された映像のうち確認したい映像だけを表示部４４に表示することもできる。
【００５６】
さらに、監視対象（例えば車両名）ごとに計測情報の平均値、最大値，最小値などを取り出し、車両の走行状態やドライバの運転状態を検証することができる。
【００５７】
（第４の実施の形態）  
この実施の形態における映像管理システムは、図１に示す計測情報内挿処理系１と例えば図３に示す監視情報監視系２とを組み合わせた構成とし、一般的な物理的なプロセス変量（例えば温度、圧力、湿度等）の計測ではなく、特定の状態を検知し、映像情報に内挿する例である。
【００５８】
撮像カメラ１２は、例えば二輪車を含む車両の前方周辺部の映像や商品販売店の店内の映像を撮影し、計測情報内挿処理系１に導入する。
【００５９】
一方、計測センサ１３としては、何らかの状態を映像的に検知するセンサであって、例えば信号機などの色情報（赤色、黄色、青色等）を検出する色検知センサや動き情報を検出する動き検知センサなどである。動き検知センサとしては、常時は動きのない静止映像を捉えるが、経時的に映像に変化（動き）が有ったことを検知するセンサであって、商品販売店における商品の持ち去りや置き去りなどの変化映像を検知する場合に有効である。
【００６０】
なお、計測センサ１３は、必要に応じて色情報（赤色、黄色、青色等）ごとの分類分けデータ（例えば赤色：１、黄色：２，青色：３など）や映像の動きの有・無データ（例えば有り：１，無し：０など）置き換えて出力すると、少ない情報で状態変化を表すことができる。
【００６１】
計測情報内挿処理系１においては、実施の形態で説明したように撮像カメラ１２で撮像された映像の中に計測センサ１３で検知された色情報や動き情報を内挿し、最終的にＪＰＥＧ圧縮映像に変換し、データベース１５に保存するか、あるいは有線・無線にて監視情報監視系２に送信する。
【００６２】
監視情報監視系２では、前述したように映像情報と色情報や動き情報とに分離した後、情報書き込み・読み出し制御部４１によって映像情報と日時情報を含む色情報や動き情報とを紐付けしてデータベース４２に保存する。
【００６３】
このような構成とすることにより、ユーザが入力部４５から色情報などを検索キーとして入力すれば、検索処理４３は、入力された検索キー情報に基づき、情報書き込み・読み出し制御部４１を介してデータベース４２から例えば信号機が赤色のときだけの映像を取り出して表示部４４に表示できる。
【００６４】
また、ユーザが入力部４５から動き有り情報を検索キー情報として入力すれば、検索処理４３は、入力された検索キー情報に基づき、情報書き込み・読み出し制御部４１を介してデータベース４２から例えば商品の動きありに関する店内の映像だけを取り出して表示部４４に表示できる。
【００６５】
（その他の実施の形態）
（１）  上記実施の形態では、映像に計測情報や状態変化情報を内挿したが、例えば映像のセキュリティを確保するために、映像に閲覧用パスキーを内挿して当該映像をロックし、一定の条件のもとにロックを解除する構成であってもよい。ここで、パスキーとは、ＰＣにログインする際に入力するパスワードなどの暗証番号に相当する情報である。
【００６６】
具体的には、図４に示すように、撮像カメラ１２で撮像された監視対象１１の映像Ｖ１を暗号化処理部５１で例えば映像閲覧用のパスキーを用いて暗号化し、監視対象１１の映像Ｖ１と認識し難い映像Ｖ２に変換した後、離散コサイン変換部１６にて高周波成分と低周波成分とに周波数分解し、電子透かし内挿処理部１７に渡す。
【００６７】
電子透かし内挿処理部１７は、低周波成分領域値内に電子透かしにより映像閲覧用パスキーを内挿し、映像情報Ｖ２にロックをかけたパスキー内挿の監視情報を得た後、可変長符号化部１８に送出する。可変長符号化部１８は、ロックをかけたパスキー内挿の監視情報からＪＰＥＧ圧縮監視情報Ｖ３に変換し、データベース１５に保存し、あるいは有線，無線にて監視情報管理系２に送信する。
【００６８】
監視情報管理系２においては、情報読み取り部２１がデータベース１５からＪＰＥＧ圧縮監視情報Ｖ３を読取るか、あるいは受信処理部５１にて計測情報内挿処理系１から送信されてくる有線，無線によるＪＰＥＧ圧縮監視情報Ｖ３を受信し、可変長復号化部２２にてＪＰＥＧ圧縮監視情報から高周波成分領域値と低周波成分領域値とを求めた後、電子透かし読み取り処理部５３に送る。
【００６９】
この電子透かし読み取り処理部５３は、例えば本発明に係る映像管理システムの製造元などで作成される専用の表示ソフトで定める読取処理方式を用いて、低周波成分領域値に埋め込まれている映像閲覧用パスキーを読み出した後、逆離散コサイン変換部２４にて高周波成分領域値と低周波成分領域値とを逆離散コサイン変換し、監視対象１１の映像Ｖ１と認識し難い映像Ｖ２に相当する映像情報Ｖ４に変換する。
【００７０】
この暗号解読処理部５４は、電子透かし読み取り処理部５３で読取った映像閲覧用パスキーを用いて、映像Ｖ４のロックを解除して映像情報Ｖ１に相当する映像情報を取り出し、表示制御部２５を介して表示部２６に表示する。
【００７１】
従って、この実施の形態によれば、電子透かし読み取り処理部５３において、例えば製造元などで作成される専用の表示ソフトを持たなければ、映像を再生できなくなり、万が一外部に映像が流出しても、気密情報としての本来の映像を保護することができる。
【００７２】
なお、計測情報に気密性が高い場合、計測センサ１３で計測された計測情報を暗号化して映像に内挿し、電子透かし読み取り処理部５３にて専用の表示ソフトで定める読取方式を用いて、暗号化された計測情報を読み取り、この読み出した計測情報を、計測情報の暗号解除キーとして用いることにより、さらにセキュリティ性を上げることができる。
【００７３】
（２）  また、撮像カメラ１２及び計測センサ１３の内部または撮像カメラ１２及び計測センサ１３の出力側にスリープ（ｓｌｅｅｐ）機能を設け、前回の映像及び計測情報と今回の映像及び計測情報との間に変化がない場合、再び変化するまで、計測情報内挿処理系１の動作を中断させる構成であってもよい。
【００７４】
このような構成とすれば、動きの少ない監視対象１１の映像及びセンサデータを計測しているとき、完全に変化が無くなる場合が考えられる。この間においても、映像及び計測情報を取り込んで計測情報内挿処理系１で所定の処理を実行すると、多くの無駄なデータ量が生成され、データベース１５に保存する必要がある。
【００７５】
しかし、以上のようにスリープ機能を設ければ、映像及び計測情報に変化がなくなったとき、映像及び計測情報を作成しないので、データベース１５のデータ量を大幅に削減でき、データベース１５を効率的に利用できる。
【００７６】
（３）  さらに、撮像カメラ１２や計測センサ１３には、撮像・計測周期、感度その他多くの調整パラメータが設定されているが、例えば撮像カメラ１２や計測センサ１３が遠隔地に設置されている場合、監視センタなどからネットワーク経由で機器指定のもとにる調整パラメータを送信し、撮像カメラ１２や計測センサ１３のパラメータを変更調整する構成としてもよい。
【００７７】
これにより、遠隔地から撮像カメラ１２や計測センサ１３の最適なパラメータを設定でき、メンテナンスの負担軽減を図ることができる。
【００７８】
（４）  ドライバの運転状態を計測する手段としては、速度計やブレーキなどの圧力計だけでなく、例えばドライバのハンドル操作位置を感知する計測センサを設け、事故時にドライバがハンドルのどの位置に接触していたかを計測してもよい。
【００７９】
その他、本発明は、上記実施の形態に限定されるものでなく、その要旨を逸脱しない範囲で種々変形して実施できる。
【図面の簡単な説明】
【００８０】
【図１】本発明に係る電子透かしを用いた映像管理システムの一実施の形態を示す構成図。
【図２】本発明に係る電子透かしを用いた映像管理システムの他の実施の形態を示す構成図。
【図３】本発明に係る電子透かしを用いた映像管理システムのさらに他の実施の形態を説明する監視情報管理系の構成図。
【図４】本発明に係る電子透かしを用いた映像管理システムのさらに他の実施の形態を示す構成図。
【符号の説明】
【００８１】
１…計測情報内挿処理系、２…監視情報管理系、１１…監視対象、１２…撮像カメラ、１３…計測センサ、１４…計測情報内挿処理部、１５…データベース、１５ａ…情報記憶装置、１６…離散コサイン変換部、１７…電子透かし内挿処理部、１８…可変長符号化部、２１…情報読み取り部、２２…可変長復号化部、２３…電子透かし読み取り処理部、２４…逆離散コサイン変換部、２５…表示制御部、２６…表示部、３１…無線送信処理部、３２…監視センタ、３３…無線受信処理部、３４…データベース、３５…入力部、４１…情報書き込み・読み取り制御部、４２…データベース、４３…検索処理部、４４…表示部、４５…入力部、５１…暗号化処理部、５２…受信処理部、５３…電子透かし読み取り処理部、５４…暗号解除処理部。
【図１】
2009182853.tif 000003
【図２】
2009182853.tif 000004
【図３】
2009182853.tif 000005
【図４】
2009182853.tif 000006