(57)【要約】【課題】従来の電子透かし多重化装置においては音声信号に電子透かしが多重化されていないため、音声信号に対する改竄を検出することができない。このため、例えば重要な会議の内容等、誰がどのような発言をしたか等、映像信号だけでなく音声信号が証拠として重要な応用分野においては、証拠材料として十分なものではなかった。【解決手段】映像信号および音声信号に位置情報と時刻情報とＩＤ情報を電子透かしとして多重化する。このことにより、証拠性の高い映像音声記録装置を提供するとともに、映像信号および音声信号の情報の改竄がなされていないことを自動的に確認できる機能を提供する。【選択図】  図１
2004222129.tif 000002
【特許請求の範囲】
【請求項１】
映像信号を入力する映像信号入力手段と、
音声信号を入力する音声信号入力手段と、
装置固有の識別子を保持するＩＤ格納手段と、
時刻情報を発生する時刻測定手段と、
少なくとも、時刻測定手段から入力されてくる時刻情報とＩＤ格納手段から入力されてくるＩＤ情報とから透かし情報を生成する透かし情報生成手段と、
映像信号入力手段から入力される映像信号に前記透かし情報生成手段で生成された透かし情報を電子透かしとして多重する映像透かし情報多重化手段と
音声信号入力手段から入力される音声信号に前記透かし情報生成手段で生成された透かし情報を電子透かしとして多重する音声透かし多重化手段と
映像信号透かし多重化手段で電子透かしが多重化された映像信号を出力する透かし映像信号出力手段と
音声信号透かし多重化手段で電子透かしが多重化された音声信号を出力する透かし音声信号出力手段と
を具備することを特徴とする電子透かし多重化装置。
【請求項２】
映像信号を入力する映像信号入力手段と
音声信号を入力する音声信号入力手段と、
装置の位置を求める測位手段と
時刻情報を発生する時刻測定手段と
少なくとも前記測位手段から入力されてくる位置情報と、時刻測定手段から入力されてくる時刻情報とから、透かし情報を生成する透かし情報生成手段と、
映像信号入力手段から入力される映像信号に前記透かし情報生成手段で生成された透かし情報を電子透かしとして多重する映像透かし多重化手段と
音声信号入力手段から入力される音声信号に前記透かし情報生成手段で生成された透かし情報を電子透かしとして多重する音声透かし多重化手段と
映像信号透かし多重化手段で電子透かしが多重化された映像信号を出力する透かし映像信号出力手段と
音声信号透かし多重化手段で電子透かしが多重化された音声信号を出力する透かし音声信号出力手段と
を具備することを特徴とする電子透かし多重化装置。
【請求項３】
撮像手段と集音手段を具備し、撮像手段が生成する映像信号を映像信号入力手段に入力し、集音手段が生成する音声信号を音声入力手段に入力することを特徴とする請求項１から請求項２記載の電子透かし多重化装置。
【請求項４】
透かし映像信号出力手段から出力されてくる透かし情報が多重化された映像信号と透かし音声信号出力手段から出力されてくる透かし情報が多重化された音声信号を記録媒体に記録する記録手段と
を具備することを特徴とする、請求項１から請求項３記載の電子透かし多重化装置。
【請求項５】
請求項４記載の電子透かし情報多重化装置により電子透かしが多重化された映像信号と音声信号が記録された記録媒体を再生する再生手段と、前記再生手段により再生された映像信号に多重化された透かし情報を検出する映像信号透かし検出手段と、
前記再生手段により再生された音声信号に多重化された透かし情報を検出する音声信号透かし検出手段と、
前記映像信号透かし検出手段から出力される透かし情報と前記音声信号透かし検出手段から出力される透かし情報とを比較し、双方の透かし情報の内容の比較により一致不一致の判定を行ない、結果を出力する判定結果出力手段と
を具備することを特徴とする電子透かし検出装置。
【請求項６】
透かし映像信号出力手段から出力されてくる透かし情報が多重化された映像信号と透かし音声信号出力手段から出力されてくる透かし情報が多重化された音声信号を伝送路符号化を行ない外部へ送出する送出手段と
を具備することを特徴とする、請求項１〜請求項３記載の電子透かし多重化装置。
【請求項７】
請求項６記載の電子透かし多重化装置により送出されくる電子透かし情報が多重化された映像信号及び電子透かし情報が多重化された音声信号が記録された信号を受信し、伝送路復号化と再生を行なう受信再生手段と、
前記受信再生手段により再生された映像信号に多重化された透かし情報を検出する映像信号透かし検出手段と、
前記受信再生手段により再生された音声信号に多重化された透かし情報を検出する音声信号透かし検出手段と
前記映像信号透かし検出手段から出力される透かし情報と前記音声信号透かし検出手段から出力される透かし情報とを比較し、双方の透かし情報の内容の比較により一致不一致の判定を行ない、結果を出力する判定結果出力手段と
を具備することを特徴とする電子透かし検出装置。
【請求項８】
映像信号を入力する映像信号入力手段と、
音声信号を入力する音声信号入力手段と、
装置固有の識別子を保持するＩＤ格納手段と、
時刻情報を発生する時刻測定手段と、
少なくとも、時刻測定手段から入力されてくる時刻情報とＩＤ格納手段から入力されてくるＩＤ情報とから透かし情報を生成する透かし情報生成手段と、
前記透かし情報からハッシュ化したハッシュ透かし情報を生成する多重透かしハッシュ化手段と、
映像信号入力手段から入力される映像信号に前記透かし情報生成手段で生成された透かし情報もしくは多重透かしハッシュ化手段から入力されるハッシュ透かし情報を電子透かしとして多重する映像透かし多重化手段と、
音声信号入力手段から入力される音声信号に前記透かし情報生成手段で生成された透かし情報もしくは前記多重透かしハッシュ化手段から入力されるハッシュ透かし情報を電子透かしとして多重する音声透かし多重化手段と、
映像信号透かし多重化手段で電子透かしが多重化された映像信号を出力する透かし映像信号出力手段と、
音声信号透かし多重化手段で電子透かしが多重化された音声信号を出力する透かし音声信号出力手段と
を具備することを特徴とする電子透かし多重化装置。
【請求項９】
映像信号を入力する映像信号入力手段と、
音声信号を入力する音声信号入力手段と、
装置の位置を求める測位手段と、
時刻情報を発生する時刻測定手段と、
少なくとも前記測位手段から入力されてくる位置情報と、時刻測定手段から入力されてくる時刻情報とから透かし情報を生成する透かし情報生成手段と、
前記透かし情報からハッシュ化したハッシュ透かし情報を生成する多重透かしハッシュ化手段と、
映像信号入力手段から入力される映像信号に前記透かし情報生成手段で生成された透かし情報もしくは多重透かしハッシュ化手段から入力されるハッシュ透かし情報を電子透かしとして多重する映像透かし多重化手段と、
音声信号入力手段から入力される音声信号に前記透かし情報生成手段で生成された透かし情報もしくは多重透かしハッシュ化手段から入力されるハッシュ透かし情報を電子透かしとして多重する音声透かし多重化手段と、
映像信号透かし多重化手段で電子透かしが多重化された映像信号を出力する透かし映像信号出力手段と、
音声信号透かし多重化手段で電子透かしが多重化された音声信号を出力する透かし音声信号出力手段と
を具備することを特徴とする電子透かし多重化装置。
【請求項１０】
撮像手段と集音手段を具備し、撮像手段が生成する映像信号を映像信号に入力し、集音手段が生成する音声信号を音声入力手段に入力することを特徴とする請求項８から請求項９記載の電子透かし多重化装置。
【請求項１１】
透かし映像信号出力手段から出力されてくる透かし情報が多重化された映像信号と透かし音声信号出力手段から出力されてくる透かし情報が多重化された音声信号を記録媒体に記録する記録手段
を具備することを特徴とする、請求項８から請求項１０記載の電子透かし多重化装置。
【請求項１２】
請求項１１記載の電子透かし情報多重化装置により電子透かしが多重化された映像信号及び電子透かしが多重化された音声信号が記録された記録媒体を再生する再生手段と、
前記再生手段により再生された映像信号に多重化された透かし情報を検出する映像信号透かし検出手段と、
前記再生手段により再生された音声信号に多重化された透かし情報を検出する音声信号透かし検出手段と、
前記映像透かし検出手段もしくは前記音声透かし検出手段から出力される透かし情報をハッシュ化しハッシュ化透かし情報として出力する検出透かしハッシュ化手段と、
前記検出透かしハッシュ化手段により生成されるハッシュ化透かし情報と前記映像信号透かし検出手段もしくは音声信号透かし検出手段により検出される透かし情報を比較し、双方の透かしの内容の比較により一致不一致の判定を行ない、結果を出力する比較判定結果出力手段と
を具備することを特徴とする電子透かし検出装置。
【請求項１３】
透かし映像信号出力手段から出力されてくる透かし情報が多重化された映像信号と透かし音声信号出力手段から出力されてくる透かし情報が多重化された音声信号を伝送路符号化を行ない外部へ送出する送出手段と
を具備することを特徴とする請求項８から請求項１０記載の電子透かし多重化装置。
【請求項１４】
請求項１３記載の透かし情報多重化装置により送出されくる電子透かしが多重化された映像信号及び電子透かし情報が多重化された音声信号が記録された信号を受信し、伝送路復号化と再生を行なう受信再生手段と、
前記受信再生手段により再生された映像信号中に多重化された透かし情報を検出する映像信号透かし検出手段と、
前記受信再生手段により再生された音声信号に多重化された透かし情報を検出する音声信号透かし検出手段と、
前記映像透かし検出手段もしくは前記音声透かし検出手段から出力される透かし情報をハッシュ化しハッシュ化透かし情報として出力するハッシュ生成手段と、前記ハッシュ生成手段により生成されるハッシュ化透かし情報と、前記映像透かし検出手段もしくは音声信号透かし検出手段により検出される透かし情報とを比較し、双方の透かし情報の内容の比較により一致不一致の判定を行ない、結果を出力する比較判定結果出力手段と
を具備することを特徴とする電子透かし検出装置。
【発明の詳細な説明】
【０００１】
【発明の属する技術分野】
本発明は電子透かしを用いて、ビデオカメラ等の撮像、集音手段により生成される映像信号、音声信号に対して撮像時刻および記録した機器の地理的な撮像位置等の唯一性の高い情報を付与する技術に関し、特に音声信号の改ざんまでを検出可能な機能を持った、電子透かし多重化装置、電子透かし検出装置に関する。
【０００２】
【従来の技術】
近年、ビデオカメラ等で撮影を行なった映像信号をさまざまな用途の証拠素材として用いる機会が増えている。
【０００３】
例えば、防犯用の監視カメラで撮影した映像信号に対して、時刻情報や、位置情報といった唯一性が高い情報をすかし信号として映像信号に多重化することにより、その映像の証拠性は非常に高くなる。
【０００４】
前記のような実施例として特開２００２−１７６６３０号公報がある。
【０００５】
図９は従来の電子透かし多重化装置、検出装置の構成を示すものである。
【０００６】
１００はビデオカメラ等の撮像部である。１０１はマイクロホン等の集音機能を持つマイク部である。
【０００７】
１０２のＧＰＳ信号入力部は自動車等に搭載されているいわゆるカーナビゲータに用いられる技術を利用して取り込む。すなわち、ＧＰＳ衛星から送信されるＧＰＳ信号をＧＰＳ入力部１０２で受信して地理的位置情報（経度，緯度を２軸とする座標値）を取得する。この地理的位置情報は、透かし情報生成部１０４に入力する。
【０００８】
１０３のタイマは現時点の時刻情報について透かし情報生成部１０４に入力する。
【０００９】
透かし情報生成部１０４は記録した機器の地理的な位置情報および記録した時間情報を実際に電子透かしとして多重化するフォーマットに変換を行なう。
【００１０】
フォーマット変換された電子透かし情報は映像信号透かし多重化部１０５において、電子透かしとして映像信号に多重化される。なお前記映像信号は撮像部１００から映像信号透かし多重化部１０５に入力される。
【００１１】
電子透かし埋め込み処理の具体的手順としては、例えば、公知の下記の文献（１）、あるいは文献（２）の方法を適用することができる。
【００１２】
文献（１）：中村，小川，高嶋“ディジタル画像の著作権保護のための周波数領域における電子透かし方式”，ＳＣＳＩ’９７−２６Ａ
文献（２）：中村，小川，富岡，高嶋“電子透かしにおける平行移動・切り取り耐性向上の一手法”，ＳＣＳＩ’９９
これらの文献に記載される電子透かし入れ手順は、画像情報を周波数空間に展開して得られたＤＣＴ（離散コサイン変換）係数（文献１）あるいは複素ＦＦＴ（高速フーリエ変換）係数（文献２）の値に対して、電子透かし情報を重畳させた後、逆ＤＣＴ変換あるいは逆複素ＦＦＴ変換を行い、画像情報に復元するものである。したがって、これら文献に記載の電子透かし入れアルゴリズムによって上述した時空間情報を電子透かしとして多重する場合、その電子透かしは、ビデオフレームの有効画素領域に直接埋め込まれることになる。
【００１３】
電子透かしの埋め込みに際しては、秘密鍵により乱数系列の初期値を決定し、この乱数系列に基づいて、周波数空間上における、埋め込み対象となる周波数係数（ＤＣＴ係数、複素ＦＦＴ係数）の位置を決定している。したがって、秘密鍵情報を知らなければ、電子透かしの検出を行うことができず、多重化された時空間情報の改竄そのものを行うことができない。電子透かしはビデオフレームの有効画素領域に直接埋め込まれているため、改竄などを目的として電子透かしの消去、書換えを試みた場合にその痕跡がビデオ映像上に残ることとなる。これにより、時刻情報および位置情報が付与された映像ソースを証拠物件等として使用する場合に真贋判定の判断材料を提供することができる。
【００１４】
なお前記秘密鍵情報は埋め込みパラメータ設定部１０６より映像信号透かし多重化部へ入力される。
【００１５】
電子透かし多重化装置により多重化された信号は、多重化信号出力部１０７へ渡される。
【００１６】
一方マイク部１０１で集音された音声信号も多重化信号出力部１０７へ入力される。前記多重化信号出力部においては、伝送路符号化への変換が行なわれ、受信信号入力部１０８へ出力される。
【００１７】
受信信号入力部１０８においては、伝送されてきた信号の受信を行ない、伝送路復号化と、映像信号と音声信号の分離を行なう。
【００１８】
分離された映像信号は、映像信号透かし検出処理部１０９において映像信号の透かしの検出が行なわれる。この時前述の秘密鍵情報は、検出パラメータ設定部１１１から映像信号透かし検出処理部１０９に渡され、このことにより、電子透かしの検出が可能になる。
【００１９】
検出した電子透かし情報は、透かし情報表示処理部１１０に渡されることにより、透かし情報として表示される。
【００２０】
また映像信号は、映像信号再生処理部に渡されることにより映像信号として再生表示される。
【００２１】
また音声信号は受信信号入力部１０８より音声信号再生部１１３に渡され、音声信号としての再生処理が行なわれる。
【００２２】
【特許文献１】
特開２００２−１７６６３０号公報
【非特許文献１】
中村，小川，高嶋「ディジタル画像の著作権保護のための周波数領域における電子透かし方式」，ＳＣＳＩ’９７−２６Ａ
【非特許文献２】
中村，小川，富岡，高嶋  「電子透かしにおける平行移動・切り取り耐性向上の一手法」，ＳＣＳＩ’９９
【００２３】
【発明が解決しようとする課題】
上記のような構成では、音声信号に電子透かしが多重化されていないため、音声信号に対する改竄を検出することができない。このため、例えば重要な会議の内容等、誰がどのような発言をしたか等、映像信号だけでなく音声信号が証拠として重要な応用分野においては、証拠材料として十分なものではない。
【００２４】
【課題を解決するための手段】
前記の課題を解決するために、本発明の電子透かし多重化装置は映像信号および音声信号に位置情報と時刻情報とＩＤ情報を電子透かしとして多重化する。
【００２５】
また本発明の電子透かし検出装置は映像信号中と音声信号中に多重化された電子透かし情報を検出し、それぞれ検出された位置情報、時刻情報、ＩＤ情報等の各項目毎に一致しているか比較することにより、記録された映像情報、音声情報が改竄されているかを判定することができる。
【００２６】
このことにより、証拠性の高い映像音声記録装置を提供するとともに、映像信号および音声信号の情報の改竄がなされていないことを自動的に確認できる、従来にない機能を提供することができる。
【００２７】
【発明の実施の形態】
本発明の請求項１記載の発明は、
映像信号を入力する映像信号入力手段と、
音声信号を入力する音声信号入力手段と、
装置固有の識別子を保持するＩＤ格納手段と、
時刻情報を発生する時刻測定手段と、
少なくとも、時刻測定手段から入力されてくる時刻情報とＩＤ格納手段から入力されてくるＩＤ情報とから透かし情報を生成する透かし情報生成手段と、
映像信号入力手段から入力される映像信号に前記透かし情報生成手段で生成された透かし情報を電子透かしとして多重する映像透かし情報多重化手段と
音声信号入力手段から入力される音声信号に前記透かし情報生成手段で生成された透かし情報を電子透かしとして多重する音声透かし多重化手段と
映像信号透かし多重化手段で電子透かしが多重化された映像信号を出力する透かし映像信号出力手段と
音声信号透かし多重化手段で電子透かしが多重化された音声信号を出力する透かし音声信号出力手段と
を具備することを特徴とする電子透かし多重化装置である。
【００２８】
映像信号中と音声信号中に機器ＩＤ、撮影した時刻について記述した情報をすかし信号として、多重することにより、真贋判定の判断材料と使用でき得る証拠性の高い映像信号と音声信号を生成することができる。
【００２９】
さらに本電子透かし多重化装置で生成した信号を、本多重化装置に対応した電子透かし検出装置において映像信号中と音声信号中に多重化された透かし情報を比較することにより、映像信号と音声信号の改竄がされていないこと判定できる機能を提供することができる。
【００３０】
本発明の請求項２記載の発明は、
映像信号を入力する映像信号入力手段と
音声信号を入力する音声信号入力手段と、
装置の位置を求める測位手段と
時刻情報を発生する時刻測定手段と
少なくとも前記測位手段から入力されてくる位置情報と、時刻測定手段から入力されてくる時刻情報とから、透かし情報を生成する透かし情報生成手段と、
映像信号入力手段から入力される映像信号に前記透かし情報生成手段で生成された透かし情報を電子透かしとして多重する映像透かし多重化手段と
音声信号入力手段から入力される音声信号に前記透かし情報生成手段で生成された透かし情報を電子透かしとして多重する音声透かし多重化手段と
映像信号透かし多重化手段で電子透かしが多重化された映像信号を出力する透かし映像信号出力手段と
音声信号透かし多重化手段で電子透かしが多重化された音声信号を出力する透かし音声信号出力手段と
を具備することを特徴とする電子透かし多重化装置である。
【００３１】
映像信号中と音声信号中に撮影した場所、撮影した時刻について記述した情報をすかし信号として、多重することにより、真贋判定の判断材料と使用でき得る証拠性の高い映像信号と音声信号を生成することができる。
【００３２】
さらに本電子透かし多重化装置で生成した信号を、本多重化装置に対応した電子透かし検出装置において映像信号中と音声信号中に多重化された透かし情報を比較することにより、映像信号と音声信号の改竄がされていないことを判定できる機能を提供することができる。
【００３３】
本発明の請求項３記載の発明は、
撮像手段と集音手段を具備し、撮像手段が生成する映像信号を映像信号入力手段に入力し、集音手段が生成する音声信号を音声入力手段に入力することを特徴とする請求項１から請求項２記載の電子透かし多重化装置である。
【００３４】
撮像手段と集音手段を電子透かし多重化機能と一体化し、装置の隠蔽性を高め、さらに証拠性の高い映像信号と音声信号を生成することができる。
【００３５】
本発明の請求項４記載の発明は、
透かし映像信号出力手段から出力されてくる透かし情報が多重化された映像信号と透かし音声信号出力手段から出力されてくる透かし情報が多重化された音声信号を記録媒体に記録する記録手段と
を具備することを特徴とする、請求項１から請求項３記載の電子透かし多重化装置である。
【００３６】
電子透かし多重化機能と記録手段を一体化し、装置の隠蔽性を高め、さらに証拠性の高い映像信号と音声信号が記録された記録媒体を提供することができる。
【００３７】
本発明の請求項５記載の発明は、
請求項４記載の電子透かし情報多重化装置により電子透かしが多重化された映像信号と音声信号が記録された記録媒体を再生する再生手段と、
前記再生手段により再生された映像信号に多重化された透かし情報を検出する映像信号透かし検出手段と、
前記再生手段により再生された音声信号に多重化された透かし情報を検出する音声信号透かし検出手段と、
前記映像信号透かし検出手段から出力される透かし情報と前記音声信号透かし検出手段から出力される透かし情報とを比較し、双方の透かし情報の内容の比較により一致不一致の判定を行ない、結果を出力する判定結果出力手段と
を具備することを特徴とする電子透かし検出装置である。
【００３８】
電子透かし信号として、映像信号中と音声信号中に多重化された、撮影時刻、機器ＩＤ、撮影した場所についての情報を検出し、映像信号中の値と音声信号中の値を比較することにより、映像信号および音声信号の情報の改竄がなされていないことを自動的に判定できる機能を提供することができる。
【００３９】
本発明の請求項６記載の発明は、
透かし映像信号出力手段から出力されてくる透かし情報が多重化された映像信号と透かし音声信号出力手段から出力されてくる透かし情報が多重化された音声信号を伝送路符号化を行ない外部へ送出する送出手段と
を具備することを特徴とする、請求項１〜請求項３記載の電子透かし多重化装置である。
【００４０】
映像信号中と音声信号中に撮影時刻、機器ＩＤ、撮影した場所について記述した情報をすかし情報として、多重する。さらに多重化された信号を、ＬＡＮ、インターネット等のネットワークへ送出する機能をもつ。
【００４１】
本装置において生成し出力される信号を、本多重化装置に対応した電子透かし装置において、映像信号に多重化された透かし情報と音声信号に多重化された透かし情報として多重化し、その双方を比較することにより、映像信号および音声信号の情報の改竄がなされていを自動的に確認する機能が提供できる。
【００４２】
さらにネットワークへ送出する機能を持つことにより、例えば、監視カメラと遠隔地にあるセンター確認装置のように、電子透かし多重化装置と電子透かし検出装置がはなれた地点に置かれている場合でも情報の改竄がなされていないことを確認する機能が提供できる。
【００４３】
本発明の請求項７記載の発明は、
請求項６記載の電子透かし多重化装置により送出されくる電子透かし情報が多重化された映像信号及び電子透かし情報が多重化された音声信号が記録された信号を受信し、伝送路復号化と再生を行なう受信再生手段と、
前記受信再生手段により再生された映像信号に多重化された透かし情報を検出する映像信号透かし検出手段と、
前記受信再生手段により再生された音声信号に多重化された透かし情報を検出する音声信号透かし検出手段と
前記映像信号透かし検出手段から出力される透かし情報と前記音声信号透かし検出手段から出力される透かし情報とを比較し、双方の透かし情報の内容の比較により一致不一致の判定を行ない、結果を出力する判定結果出力手段と
を具備することを特徴とする電子透かし検出装置である。
【００４４】
伝送路から受信した映像信号中と音声信号中に電子透かし信号として多重化された撮影時刻、機器ＩＤ、撮影した場所についての情報を検出する。そしてそれぞれの映像信号中の値と音声信号中の値を比較する。このことにより、映像信号および音声信号の情報の改竄がなされていないことを自動的に確認する機能を提供する。
【００４５】
特に、ネットワークから信号を受信する機能を持つことにより、例えば、監視カメラと遠隔地にあるセンター確認装置のように、電子透かし多重化装置と電子透かし検出装置がはなれた地点に置かれている場合でも情報の改竄がなされていないことを確認できる機能が提供できる。
【００４６】
本発明の請求項８記載の発明は、
映像信号を入力する映像信号入力手段と、
音声信号を入力する音声信号入力手段と、
装置固有の識別子を保持するＩＤ格納手段と、
時刻情報を発生する時刻測定手段と、
少なくとも、時刻測定手段から入力されてくる時刻情報とＩＤ格納手段から入力されてくるＩＤ情報とから透かし情報を生成する透かし情報生成手段と、
前記透かし情報からハッシュ化したハッシュ透かし情報を生成する多重透かしハッシュ化手段と、
映像信号入力手段から入力される映像信号に前記透かし情報生成手段で生成された透かし情報もしくは多重透かしハッシュ化手段から入力されるハッシュ透かし情報を電子透かしとして多重する映像透かし多重化手段と、
音声信号入力手段から入力される音声信号に前記透かし情報生成手段で生成された透かし情報もしくは前記多重透かしハッシュ化手段から入力されるハッシュ透かし情報を電子透かしとして多重する音声透かし多重化手段と、
映像信号透かし多重化手段で電子透かしが多重化された映像信号を出力する透かし映像信号出力手段と、
音声信号透かし多重化手段で電子透かしが多重化された音声信号を出力する透かし音声信号出力手段と
を具備することを特徴とする電子透かし多重化装置である。
【００４７】
撮影時刻、機器ＩＤについて記述した情報を透かし情報として生成する。さらに前記透かし情報をハッシュ化を行い、ハッシュ化透かし情報として生成する。そして映像信号または音声信号のうち一方に透かし情報を多重化し、残る一方にハッシュ化した透かし情報を多重化する。
【００４８】
これにより真贋判定の判断材料と使用でき得る証拠性の高い映像信号と音声信号を生成することができる。
【００４９】
本装置において生成し、出力される信号を本多重化装置に対応した、電子透かし装置において透かしを検出比較することにより、映像信号および音声信号の情報の改竄がなされていないことを判定できる機能を提供する。
【００５０】
さらに多重化する透かし情報をハッシュ化することにより透かし情報の量を削減を行なった上で映像信号および音声信号に多重化を行なうことが可能になり視聴者に違和感を与えず証拠素材の生成を行うことができる。
【００５１】
本発明の請求項９記載の発明は、
映像信号を入力する映像信号入力手段と、
音声信号を入力する音声信号入力手段と、
装置の位置を求める測位手段と、
時刻情報を発生する時刻測定手段と、
少なくとも前記測位手段から入力されてくる位置情報と、時刻測定手段から入力されてくる時刻情報とから透かし情報を生成する透かし情報生成手段と、
前記透かし情報からハッシュ化したハッシュ透かし情報を生成する多重透かしハッシュ化手段と、
映像信号入力手段から入力される映像信号に前記透かし情報生成手段で生成された透かし情報もしくは多重透かしハッシュ化手段から入力されるハッシュ透かし情報を電子透かしとして多重する映像透かし多重化手段と、
音声信号入力手段から入力される音声信号に前記透かし情報生成手段で生成された透かし情報もしくは多重透かしハッシュ化手段から入力されるハッシュ透かし情報を電子透かしとして多重する音声透かし多重化手段と、
映像信号透かし多重化手段で電子透かしが多重化された映像信号を出力する透かし映像信号出力手段と、
音声信号透かし多重化手段で電子透かしが多重化された音声信号を出力する透かし音声信号出力手段と
を具備することを特徴とする電子透かし多重化装置である。
【００５２】
撮影場所、撮影時刻について記述した情報を透かし情報として生成する。さらに前記透かし情報をハッシュ化を行い、ハッシュ化透かし情報として生成する。そして映像信号または音声信号のうち一方に透かし情報を多重化し、残る一方にハッシュ化した透かし情報を多重化する。
【００５３】
これにより真贋判定の判断材料と使用でき得る証拠性の高い映像信号と音声信号を生成することができる。
【００５４】
本装置において生成し、出力される信号を本多重化装置に対応した、電子透かし装置において透かしを検出比較することにより、映像信号および音声信号の情報の改竄がなされていないことを判定できる機能を提供する。
【００５５】
さらに多重化する透かし情報をハッシュ化することにより透かし情報の量を削減を行なった上で映像信号および音声信号に多重化を行うことにより、視聴者に違和感を与えず証拠素材の生成を行うことができる。
【００５６】
本発明の請求項１０記載の発明は、
撮像手段と集音手段を具備し、撮像手段が生成する映像信号を映像信号に入力し、集音手段が生成する音声信号を音声入力手段に入力することを特徴とする請求項８から請求項９記載の電子透かし多重化装置である。
【００５７】
撮像手段と集音手段を電子透かし多重化機能と一体化し、装置の隠蔽性を高め、さらに証拠性の高い映像信号と音声信号を生成することができる。
【００５８】
さらに多重化する透かし情報をハッシュ化することにより透かし情報の量を削減を行なった上で映像信号および音声信号に多重化を行うことにより、視聴者に違和感を与えず証拠素材の生成を行うことができる。
【００５９】
本発明の請求項１１記載の発明は、
透かし映像信号出力手段から出力されてくる透かし情報が多重化された映像信号と透かし音声信号出力手段から出力されてくる透かし情報が多重化された音声信号を記録媒体に記録する記録手段
を具備することを特徴とする、請求項８から請求項１０記載の電子透かし多重化装置である。
【００６０】
電子透かし多重化機能と記録手段を一体化し、装置の隠蔽性を高め、証拠性の高い映像信号と音声信号が記録された記録媒体を提供することができる。
【００６１】
さらに多重化する透かし情報をハッシュ化することにより透かし情報の量を削減を行なった上で映像信号および音声信号に多重化を行うことにより、視聴者に違和感を与えず証拠素材の生成を行うことができる。
【００６２】
本発明の請求項１２記載の発明は、
請求項１１記載の電子透かし情報多重化装置により電子透かしが多重化された映像信号及び電子透かしが多重化された音声信号が記録された記録媒体を再生する再生手段と、
前記再生手段により再生された映像信号に多重化された透かし情報を検出する映像信号透かし検出手段と、
前記再生手段により再生された音声信号に多重化された透かし情報を検出する音声信号透かし検出手段と、
前記映像透かし検出手段もしくは前記音声透かし検出手段から出力される透かし情報をハッシュ化しハッシュ化透かし情報として出力する検出透かしハッシュ化手段と、
前記検出透かしハッシュ化手段により生成されるハッシュ化透かし情報と前記映像信号透かし検出手段もしくは音声信号透かし検出手段により検出される透かし情報を比較し、双方の透かしの内容の比較により一致不一致の判定を行ない、結果を出力する比較判定結果出力手段と
を具備することを特徴とする電子透かし検出装置である。
【００６３】
映像信号中と音声信号中に埋め込まれた、撮影時刻、機器ＩＤ、撮影した場所についての情報を検出する。そしてそれぞれの映像信号中の値と音声信号中の値を比較する。ことにより、映像信号および音声信号の情報の改竄がなされていないことを自動的に判定できる機能を提供する。
【００６４】
さらに多重化する透かし情報をハッシュ化することにより透かし情報の量を削減を行い、聴取者に違和感を与えずに映像信号及び音声信号の再生を行なうことができる。
【００６５】
本発明の請求項１３記載の発明は、
透かし映像信号出力手段から出力されてくる透かし情報が多重化された映像信号と透かし音声信号出力手段から出力されてくる透かし情報が多重化された音声信号を伝送路符号化を行ない外部へ送出する送出手段と
を具備することを特徴とする請求項８から請求項１０記載の電子透かし多重化装置である。
【００６６】
映像信号中と音声信号中に撮影時刻、機器ＩＤ、撮影した場所について記述した情報を透かし情報として、多重化する。さらに埋め込まれた信号を、ＬＡＮ、インターネット等のネットワークへ送出する機能をもつ。
【００６７】
本装置において生成し、出力される信号を本多重化装置に対応した、電子透かし装置をその双方を比較することにより、映像信号および音声信号の情報の改竄がなされていことを自動的に確認する機能が提供できる。さらにネットワークへ送出する機能を持つことにより、例えば、監視カメラと遠隔地にあるセンター確認装置のように、電子透かし多重化装置と電子透かし検出装置がはなれた地点に置かれている場合でも情報の改竄がなされていないことを判定できる機能が提供できる。
【００６８】
さらに多重化する透かし情報をハッシュ化することにより透かし情報の量を削減を行なった上で映像信号および音声信号に多重化を行ない、視聴者に違和感を与えず証拠素材の生成を行うことができる。
【００６９】
本発明の請求項１４記載の発明は、
請求項１３記載の透かし情報多重化装置により送出されくる電子透かしが多重化された映像信号及び電子透かし情報が多重化された音声信号が記録された信号を受信し、伝送路復号化と再生を行なう受信再生手段と、
前記受信再生手段により再生された映像信号中に多重化された透かし情報を検出する映像信号透かし検出手段と、
前記受信再生手段により再生された音声信号に多重化された透かし情報を検出する音声信号透かし検出手段と、
前記映像透かし検出手段もしくは前記音声透かし検出手段から出力される透かし情報をハッシュ化しハッシュ化透かし情報として出力するハッシュ生成手段と、前記ハッシュ生成手段により生成されるハッシュ化透かし情報と、前記映像透かし検出手段もしくは音声信号透かし検出手段により検出される透かし情報とを比較し、双方の透かし情報の内容の比較により一致不一致の判定を行ない、結果を出力する比較判定結果出力手段と
を具備することを特徴とする電子透かし検出装置である。
【００７０】
伝送路から受信した映像信号中と音声信号中に電子透かし信号として埋め込まれた撮影時刻、機器ＩＤ、撮影した場所についての情報を検出する。そしてそれぞれの映像信号中の値と音声信号中の値を比較する。このことにより、映像信号および音声信号の情報の改竄がなされていないことを自動的に判定できる機能を提供する。
【００７１】
特に、ネットワークから信号を受信する機能を持つことにより、例えば、監視カメラと遠隔地にあるセンター確認装置のように、電子透かし多重化装置と電子透かし検出装置がはなれた地点に置かれている場合でも情報の改竄がなされていないことを確認する機能が提供できる。
【００７２】
さらに多重化する透かし情報をハッシュ化することにより透かし情報の量を削減を行い、聴取者に違和感を与えず映像信号、音声信号の再生を行うことができる。
【００７３】
（実施の形態１）
本実施の形態においては映像信号中と音声信号中に撮影時刻、機器ＩＤ、撮影した場所について記述した情報を透かし情報として、多重化する機能をもつ、請求項１から請求項４記載の電子透かし多重化装置について説明するものであり、本多重化装置に対応した、電子透かし装置をその双方を比較することにより、映像信号および音声信号の情報の改竄がなされていないことを確認する機能を提供する。
【００７４】
図１は本発明の第１の実施の形態である、電子透かし多重化装置の構成を示すブロック図である。
【００７５】
図１の電子透かし多重化装置において
１はビデオカメラ等の撮像手段である。
２は映像信号入力手段である。
３はマイクロホン等の集音手段である。
４は音声信号入力手段である。
５は電子透かし多重化装置の位置を測定する測位手段である。
６は時刻測定手段である。
７は装置のＩＤ情報を保持するＩＤ格納手段である。
８は電子透かしとして多重化する透かし情報を生成する透かし情報生成手段である。
９は映像信号に透かし情報を多重化する映像信号透かし多重化手段である。
１０は映像信号に対する電子透かしの初期パラメータを設定する、埋め込みパラメータ設定手段である。
１１は透かし映像信号出力手段である。
１２は音声信号に透かし情報を多重化する音声信号透かし多重化手段である。
１３は透かし音声信号出力手段である。
１４は透かし情報が多重化された映像信号および音声信号を記録媒体に記録を行なう記録手段である。
１５は記録媒体である。
【００７６】
以下図１を用いて、本発明の実施形態１の電子透かし多重化装置の動作について説明する。
【００７７】
まず撮像手段１により画像の撮影が行なわれ、映像信号入力手段２に入力される。
【００７８】
映像信号入力手段２においては入力される映像信号を映像信号透かし多重化手段９の入力形式として規定されるフォーマットに変換して映像信号透かし多重化手段に渡す。
【００７９】
映像信号入力手段２において行なわれる信号の処理は、実施の形態によってさまざまなケースが考えられる。
【００８０】
今、映像信号透かし多重化手段９への入力が非圧縮のディジタルフォーマットの映像信号であるとする。
【００８１】
この時、撮像手段１がアナログ出力のビデオカメラである場合においては、映像信号入力手段２ではアナログ映像信号を受信してＣＣＩＲ６５６等のディジタル信号に変換する機能を提供する。
【００８２】
また撮像手段１がＤＶフォーマットのビデオカメラである場合においては、ＤＶ方式で圧縮された映像信号がＩＥＥＥ１３９４のインターフェースで映像信号入力手段２に入力されてきており、映像信号入力手段２においてはＩＥＥＥ１３９４フォーマットの伝送路復号化とＤＶ方式の画像圧縮伸長が実施され、ＣＣＩＲ６５６等のディジタル非圧縮方式に変換されて、映像信号透かし多重化手段９に渡される。
【００８３】
また撮像手段１から入力されてくる、映像信号がそのまま映像信号透かし多重化手段にたいして渡せるフォーマットであるならば、映像信号入力手段２は特に信号処理を行なわず、そのまま映像信号透かし多重化手段９に渡す処理を行なう場合もある。
【００８４】
集音手段３においては、集音された音声信号が、音声信号入力手段４に入力される。
【００８５】
音声信号入力手段４においては入力される音声信号を規定されるフォーマットに変換して音声信号透かし多重化手段に渡す。
【００８６】
音声信号入力手段４において行なわれる信号の処理も、実施の形態によってさまざまなケースが考えられる。
【００８７】
今、音声信号透かし多重化手段への入力が非圧縮のディジタルフォーマットの音声信号で規定されているとする。
【００８８】
例えば、集音手段３がアナログ出力のマイクロホンである場合においては、音声信号入力手段４ではアナログ音声を受信して、ＡＥＳ／ＥＢＵ方式等のディジタル非圧縮のフォーマットの信号に変換する機能を提供する。
【００８９】
また集音手段がＤＶフォーマットのビデオカメラに装備されたマイクロホンである場合においては、ビデオカメラ上で集音された音声信号がＩＥＥＥ１３９４の伝送フォーマットで音声信号入力手段２に入力されてくる。この時音声信号入力手段４においてＩＥＥＥ１３９４フォーマットの伝送路復号化が行なわれ、ディジタル非圧縮方式に変換されて、音声信号透かし多重化装置に渡される。
【００９０】
ＩＥＥＥ１３９４等のフォーマット等映像信号と音声信号が多重化されて入力されてくる場合においては以下のような構成になる。
【００９１】
撮像手段１と集音手段１から入力されてくる音声信号が１つの伝送路によって入力される。このため映像信号入力手段と音声信号入力手段の処理が一部共通の構成手段で実施される。
【００９２】
なお集音手段３から入力されてくる、音声信号がそのまま音声信号透かし多重化手段１２にたいして渡せるフォーマットであるならば、音声信号入力手段４は特に信号処理を行なわず、そのまま映像信号透かし多重化手段１２に渡す処理を行なう場合もある。
【００９３】
測位手段５はＧＰＳ衛星から送信されるＧＰＳ信号を受信して地理的位置情報（経度，緯度を２軸とする座標値）を取得し、予め蓄積されているデータベース情報をもとに、地理的位置情報を地図上の住所情報である都道府県、市町村、番地等の位置情報に変換した後、透かし情報生成手段８に入力する。
【００９４】
学術用途や海洋あるいは砂漠における用途のように、位置情報を住所情報として表現するのが不適切な場合には、前述の地理的位置情報をそのまま位置情報として透かし情報生成手段８に送出する。
【００９５】
時刻測定手段６は内部に精度の高い時計機構を内蔵しており、この時計機構が持つ時計情報を年、月、日、秒等の時刻情報に変換を行なう。この時刻情報を透かし情報生成手段８に入力を行なう。
【００９６】
なお前記時計機構は、クロックタイマを内蔵するなどして内部で生成した情報により時間を生成するようになっていてもよいし、周回衛星を利用するなどして、外部から取得した情報により時間を測定するようになっていてもよい。
【００９７】
ＩＤ格納手段７は、この電子透かし多重化装置が固有にもつＩＤ情報を保持する手段である。このＩＤは世界中で、唯一無二のものである。データの格納手段としては、ＥＥＰＲＯＭ等の半導体メモリ、ハードディスク等の磁気記録デバイス、ＤＶＤ等の光ディスク等、データが保持できる手段であればいずれの場合でも実現できる。ただし、その証拠性を高めるためには、ＩＤの値が装置外部から参照できないようにしておき、電子透かし多重化装置の使用者はＩＤの値を知り得ない構成にしておくことが望ましい。ＩＤの値そのものは、例えば規定された文字数の英数文字等が考えられる。
【００９８】
透かし情報生成手段８においては、入力されてくる位置情報、時刻情報、ＩＤ情報を組み合わせて、２値の任意長のデータ列である透かし情報を生成する。生成された透かし情報は、映像信号透かし多重化手段９と音声信号透かし多重化手段１２へ入力される。
【００９９】
映像信号透かし多重化手段９においては、透かし情報生成手段８において生成された透かし情報を電子透かし信号として映像信号に多重化を行なう。
【０１００】
電子透かし埋め込み処理の具体的手順としては、例えば、公知の下記の文献（１）、あるいは文献（２）の方法を適用することができる。
【０１０１】
文献（１）：中村，小川，高嶋“ディジタル画像の著作権保護のための周波数領域における電子透かし方式”，ＳＣＳＩ’９７−２６Ａ
文献（２）：中村，小川，富岡，高嶋“電子透かしにおける平行移動・切り取り耐性向上の一手法”，ＳＣＳＩ’９９
これらの文献に記載される電子透かし入れ手順は、画像情報を周波数空間に展開して得られたＤＣＴ（離散コサイン変換）係数（文献１）あるいは複素ＦＦＴ（高速フーリエ変換）係数（文献２）の値に対して、電子透かし情報を重畳させた後、逆ＤＣＴ変換あるいは逆複素ＦＦＴ変換を行い、画像情報に復元するものである。したがって、これら文献に記載の電子透かし入れアルゴリズムによって上述した時空間情報を電子透かしとして多重する場合、その電子透かしは、ビデオフレームの有効画素領域に直接埋め込まれることになる。
【０１０２】
電子透かしの埋め込みに際しては、秘密鍵により乱数系列の初期値を決定し、この乱数系列に基づいて、周波数空間上における、埋め込み対象となる周波数係数（ＤＣＴ係数、複素ＦＦＴ係数）の位置を決定している。したがって、秘密鍵情報を知らなければ、電子透かしの検出を行うことが非常に困難になり、多重化された時空間情報の改竄そのものを行うことができない。電子透かしはビデオフレームの有効画素領域に直接埋め込まれているため、改竄などを目的として電子透かしの消去、書換えを試みた場合にその痕跡がビデオ映像上に残ることとなる。これにより、この時空間情報が付与された映像ソースを証拠物件等として使用する場合に真贋判定の判断材料を提供することができる。
【０１０３】
埋め込みパラメータ設定手段１０においては、前記乱数系列の初期値を提供する。
【０１０４】
なお前記乱数系列の初期値を固定値にしておいても、電子透かし情報の埋め込みを行なうことはできる。この時は、埋め込みパラメータ設定手段１０を持たずに、電子透かし多重化装置を構成することができる。
【０１０５】
但しその場合においては、電子透かしの検出が乱数系列の初期値を用いる場合と比較して容易であるため、その証拠性比較的低くなる。
【０１０６】
音声信号透かし多重化手段１３においては、透かし情報生成手段８により生成された透かし信号を音声信号に多重化を行なう。
【０１０７】
電子透かしを多重する手段としては、様々な方法があるが、例えば、元の音声データに関連した２種類の遅延に２進数の１及び０をそれぞれ割り当てることで、音声データに対して情報を多重するようにした、文献（３）に記述された、Ｍｕｌｔｉｐｌｅ  Ｂｉｔ  Ｈｏｐｐｉｎｇ  Ａｎｄ  Ｈｉｄｎｇ技術を用いることができる。
【０１０８】
文献（３）：Ｆｉｆｔｈ  Ｉｎｔｅｒｎａｔｉｏｎａｌ  Ｓｙｍｐｏｓｉｕｍｏｎ  Ｓｉｇｎａｌ  Ｐｒｏｃｅｓｓｉｎｇ  ａｎｄ  ｉｔｓ  Ａｐｐｌｉｃａｔｉｏｎｓ，  ＩＳＳＰＡ  ´９９，  Ｂｒｉｓｂａｎｅ，  Ａｕｓｔｒａｌｉａ，  ２２−２５  Ａｕｇｕｓｔ，  １９９９  Ｏｒｇａｎｉｚｅｄ  ｂｙ  ｔｈｅ  Ｓｉｇｎａｌ  Ｐｒｏｃｅｓｓｉｎｇ  Ｒｅｓｅａｒｃｈ  Ｃｅｎｔｒｅ，  ＱＵＴ，  Ｂｒｉｓｂａｎｅ，  Ａｕｓｔｒａｌｉａ  Ｐ９１−Ｐ９４，Ｐ９５−Ｐ９８
この技術を用いることで、再生時に聴取者に違和感を与えず、かつ容易に改善できないように音声データに所定のデータを組み込むことができる。
【０１０９】
透かし映像信号出力手段１１においては、映像信号透かし多重化手段１１から入力されてくる、
電子透かしが多重化された映像信号を記録手段１４の入力形式に適した形式に変換を行う。
【０１１０】
例えば記録手段１４の入力形式が、アナログの映像信号である場合においては、映像信号のＤ／Ａ変換を行う。
【０１１１】
例えば記録手段１４の入力形式が、ＩＥＥＥ１３９４の形式である場合においてはＤＶ方式等伝送に適した方式への圧縮とＩＥＥＥ１３９４への伝送路符号化を行う。
【０１１２】
透かし音声信号出力手段１１においては、音声信号透かし多重化手段１１から入力されてくる、電子透かしが多重化された音声信号を記録手段１４の入力形式に適した形式に変換を行う。例えば記録手段１４の入力形式が、アナログの音声信号である場合においては、音声信号のＤ／Ａ変換を行う。
【０１１３】
例えば記録手段１４の入力形式が、ＩＥＥＥ１３９４の形式である場合においてはＩＥＥＥ１３９４への伝送路符号化を行う。
【０１１４】
なおＩＥＥＥ１３９４方式においては、映像信号と音声信号が多重化されて、物理的な伝送路としては１本の伝送路を経由して記録手段１４に入力される。
【０１１５】
記録手段１４においては電子透かし信号が多重化された映像信号および音声信号を次期ディスク、光ディスク、あるいは磁気テープ等の記録メディア１５に記録を行なう。記録時のフォーマットは、ＶＨＳ方式のようなアナログの方式、ＤＶ、ＭＰＥＧ１、ＭＰＥＧ２、ＭＰＥＧ４等のディジタル方式の圧縮フォーマットでの記録でもよい。
【０１１６】
以上の様に本実施の形態においては、映像信号中と音声信号中に撮影時刻、機器ＩＤ、撮影した場所について記述した情報をすかし信号として、多重する、機能をもつ。本多重化装置に対応した、電子透かし検出装置において映像信号中と音声信号中に多重化された透かし情報を比較することにより、映像信号と音声信号の改竄がされていないという機能を提供することができる。
【０１１７】
なお本実施の形態において、透かし情報生成手段８は測位手段５で生成される位置情報と時刻測定手段６で生成される時刻情報と、ＩＤ格納手段７から出力されるＩＤ情報から電子透かし情報を生成している。
【０１１８】
この構成に限らず、電子透かし多重化装置内に測位手段５と時刻測定手段６をもつが、ＩＤ格納手段を持たないという構成で、透かし情報生成手段は測位手段で生成される位置情報と、時刻測定手段で生成される時刻情報から透かし情報を多重する構成でも、十分唯一性が高く、その映像の証拠性は非常に高くなる。
【０１１９】
またね電子透かし多重化装置内に時刻測定手段６をとＩＤ格納手段はもつが、即位手段を持たないという構成で、透かし情報生成手段は時刻測定手段で生成される時刻情報と、ＩＤ格納手段から出力されるＩＤ情報から透かし情報を多重する構成でも、監視カメラ等の固定カメラ等においては十分唯一性が高く、その映像の証拠性は有効である。
【０１２０】
なお本実施例においては、図１の破線で囲んだ映像信号および音声信号に電子透かしを多重する機能を提供するブロックと撮像手段１と集音手段３及び記録手段１５が一体化した筐体の装置、いわゆるビデオカメラレコーダについて説明した。
【０１２１】
これらブロックを一体化した装置にし、なおかつ装置の構成で各手段間の信号の受け渡しの信号が外部からアクセスできなくすることによりよりデータ改竄行為に対する耐性の強い装置を提供することができる。
【０１２２】
またこれとは逆に、図１の破線で囲んだ映像信号および音声信号に電子透かしを多重する機能を提供するブロックを１つの筐体の装置として、撮像手段１、集音手段３と記録手段１５を別の筐体の装置とした構成にすることもできる。
【０１２３】
この場合、たとえば撮像手段１、集音手段３を市販の低価格の監視カメラを使用する。また記録手段を市販の民生用ＶＴＲデッキ等を使用するという構成にすることができ、比較的低価格な電子透かし情報多重化装置を実現するといったまた別の効果が生じる。
【０１２４】
同様に、撮像手段１と集音手段３と図１の破線で囲んだ映像信号および音声信号に電子透かしを多重する機能を提供するブロックを一体化した筐体のカメラ装置として実現し、記録手段１５を別の筐体の装置とした構成にすることもできる。
【０１２５】
これにより、例えば記録手段を市販の民生用ＶＴＲデッキ等を使用するという構成にすることができ、比較的低価格な電子透かし情報多重化装置を実現することができる。
【０１２６】
さらに図１の破線で囲んだ映像信号および音声信号に電子透かしを多重する機能を提供するブロックと記録手段を一体化した記録装置として提供し、たとえば撮像手段１、集音手段３を市販の低価格の監視カメラを使用する構成にすることにより比較的低価格な電子透かし情報多重化装置を実現することができる。
【０１２７】
なお図１の構成の各手段のうちそれぞれの手段は専用回路でも実現できるし、ＣＰＵ上のソフトウエア処理でも実現できる。
【０１２８】
このため、たとえば１の撮像手段と３の集音手段を民生用ビデオカメラで実現し、その他の部分をパーソナルコンピュータを用いて実現することも可能になる。
【０１２９】
この場合パーソナルコンピュータ内部において図１の各手段は例えば以下の通り実現される。
【０１３０】
２の映像信号入力手段は、ＰＣＩバスに接続されるＰＣカードとそれを操作するパーソナルコンピュータ中のＣＰＵとメモリとハードディスクで実行されるソフトウエア処理。
４の音声信号入力手段はＰＣＩバスに接続されるＰＣカードとそれを操作するパーソナルコンピュータ中のＣＰＵとメモリとハードディスクで実行されるソフトウエア処理。
５の測位手段はＰＣＩバスに接続されるＰＣカード。
６の時刻測定手段はパーソナルコンピュータが持つタイマ。
７のＩＤ格納手段はパーソナルコンピュータのネットワークカードでＩＤ自身はＭＡＣアドレス。
８の透かし情報生成手段はパーソナルコンピュータ中のＣＰＵとメモリとハードディスクで実行されるソフトウエア処理。
９の映像信号透かし多重化手段はパーソナルコンピュータ中のＣＰＵとメモリとハードディスクで実行されるソフトウエア処理。
１０の埋め込みパラメータ設定手段はパーソナルコンピュータ中のＣＰＵとメモリとハードディスクで実行されるソフトウエア処理。
１１の透かし映像信号出力手段はＰＣＩバスに接続されたＰＣカードとパーソナルコンピュータ中のＣＰＵとメモリとハードディスクで実行されるソフトウエア処理。
１２の音声信号透かし多重化手段はＰＣＩバスに接続されたＰＣカードとパーソナルコンピュータ中のＣＰＵとメモリとハードディスクで実行されるソフトウエア処理。
１３の透かし音声信号出力手段はＰＣＩバスに接続されたＰＣカードとパーソナルコンピュータ中のＣＰＵとメモリとハードディスクで実行されるソフトウエア処理。
１４の記録手段はパーソナルコンピュータがもつＤＶＤ−ＲＡＭ／ＲＷドライブ。
１５の記録媒体はＤＶＤ−ＲＡＭメディアもしくはＤＶＤ−ＲＷメディア。
【０１３１】
（実施の形態２）
本実施の形態においては、第１の実施の形態の電子透かし多重化装置に対応した請求項５記載の電子透かし検出装置について説明するものである。
【０１３２】
電子透かし情報として、映像信号中と音声信号中に多重化された、撮影時刻、機器ＩＤ、撮影した場所についての情報を検出し、映像信号中の値と音声信号中の値を比較することにより、映像信号および音声信号の情報の改竄がなされていないことを自動的に確認する機能を提供する。
【０１３３】
図２は本発明の実施の形態２の電子透かし検出装置の構成を示すブロック図である。
【０１３４】
図２の電子透かし検出装置において、
１７は記録媒体である。
１８は記録媒体から映像信号と音声信号を再生する再生手段である。
１９は映像信号中に多重された透かし情報を検出する、映像信号透かし検出手段である。
２０は再生映像信号を表示し、再生音声を鳴らす表示手段である。
２１は音声信号中に多重された透かし情報を検出する、音声信号透かし検出手段である。
２２は映像信号に対する、電子透かし検出の初期パラメータを設定する検出パラメータ設定手段である。
２３は透かし比較手段である。
２４は判定結果出力手段である。
【０１３５】
図２の記録メディア１７は実施の形態１の電子透かし多重化手段再生手段１８において記録されたものである。
【０１３６】
再生手段１８は記録メディア１７からのデータの読み出しと、読み出したデータの映像信号電子透かし検出手段１９での処理に適した形式への映像信号への変換と読み出したデータの音声電子透かし検出手段２１での処理に適した形式の音声信号への変換を行なう。
【０１３７】
たとえば映像信号透かし検出手段がディジタル非圧縮方式の映像信号の入力を行ない、映像信号が記録メディアにＶＨＳ方式等アナログ方式で記録されている場合においては、再生手段１８はＡ／Ｄ変換の処理を行なう。
【０１３８】
また映像信号透かし検出手段がディジタル非圧縮方式で入力されてくる映像信号についての処理を行ない、記録メディアに、ＤＶ、ＭＰＥＧ１、ＭＰＥＧ２、ＭＰＥＧ４等の圧縮フォーマットで記録されている場合においては、再生手段１８において圧縮伸長が行なわれる。
【０１３９】
このような処理が行なわれた後、映像信号は映像信号透かし検出手段１９に渡される。
【０１４０】
また音声信号透かし検出手段がディジタル非圧縮方式の音声信号の入力を行ない、音声信号が、記録メディアにＶＨＳ等アナログ方式で記録されている場合においては、再生手段１８においてＡ／Ｄ変換の処理が行なわ  れる。
【０１４１】
また音声信号透かし検出手段がディジタル非圧縮方式の音声信号の入力を行ない、記録メディアにＭＰＥＧ１、ＭＰＥＧ２、ＭＰＥＧ４等の圧縮フォーマットで記録されている場合においては、再生手段１８において圧縮伸長が行なわれる。
【０１４２】
このような処理が行なわれた後、音声信号は音声信号透かし検出手段２１に渡される。
【０１４３】
映像信号に対しては、映像信号透かし検出手段１９によって透かし情報を検出する。
【０１４４】
電子透かし検出処理の具体的手順としては、例えば、前述の文献（１）、あるいは文献（２）の方法を適用することができる。この方法を用いるためには透かし検出のためには、埋め込み対象となる周波数係数の位置を決定のための乱数系列の初期値を設定のための秘密鍵が必要であるが、この秘密鍵の値は検出パラメータ設定手段２２から入力される。
【０１４５】
なお埋め込み対象となる周波数係数の位置を固定にする方法においては秘密鍵は必要なく、よって検出パラメータ設定手段２２も必要でなくなる。
【０１４６】
検出する信号は、実施の形態１で記述した、位置情報、時刻情報、ＩＤ情報である。
【０１４７】
映像電子透かし検出手段１９から検出された透かし情報は透かし比較手段２３に入力される。
【０１４８】
一方音声信号に対しては、音声信号透かし検出手段２１において多重化された音声信号に多重化されたの透かし情報をを検出することができる。
【０１４９】
具体的な検出の方法はたとえば、文献（３）の方法をとることができる。
【０１５０】
検出する信号は、実施の形態１で記述した、位置情報、時刻情報、ＩＤ情報である。
【０１５１】
検出された透かし情報は、透かし比較手段２３に渡される。
【０１５２】
透かし比較手段２３においては、入力される透かし検出の結果の双方の比較を行なう。具体的には、映像信号に多重されていた位置情報、時刻情報、ＩＤ情報と音声信号に多重されている位置情報、時刻情報、ＩＤ情報のそれぞれと一致しているかどうかの判定を行なう。
【０１５３】
判定した結果は、判定結果出力手段２４に渡される。判定結果出力手段は、たとえば、判定結果専用の小型ＬＣＤや、再生される映像信号上にオーバーレイで重ねて表示するという形式で表示される。
【０１５４】
オーバレイ表示の場合は、表示手段２０がもつディスプレイ等を用いて表示することもできる。
【０１５５】
表示する内容は、位置情報、時刻情報、ＩＤ情報のぞれぞれの情報が映像信号に多重されていたものと音声信号に多重されていたものが一致しているかどうかの判定結果、あるいはそれぞれの情報すべてが一致しているかどうかの判定結果、またはそれぞれの情報とすべての情報が一致しているかどうかの両方の判定結果を表示する等いずれの形式でも構わない。また必要に応じて位置情報と時刻情報、ＩＤ情報そのものを表示させてもよい。
【０１５６】
表示手段２０は、再生手段２０が出力する、映像信号および音声信号を表示する機能を持つ。たとえば、ＣＲＴディスプレイ装置やスピーカ装置を具備し、使用者が再生している映像信号と音声信号を直接確認できる機能を提供する。
【０１５７】
なお前述の判定結果出力手段が、再生映像信号上にオーバーレイさせて表示させる機能の場合においては、表示手段中の映像表示手段が、判定結果出力手段２４の機能を兼ねることになる。
【０１５８】
上記のように本実施の形態の電子透かし信号検出装置は、電子透かし信号として、映像信号中と音声信号中に多重化された、撮影時刻、機器ＩＤ、撮影した場所についての情報を検出し、映像信号中の値と音声信号中の値を比較することにより、映像信号および音声信号の情報の改竄がなされていないことを自動的に確認する機能を提供する。
【０１５９】
なお本実施の形態において映像信号透かし検出手段と音声信号透かし検出手段において、位置情報、時刻情報、ＩＤ情報の少なくとも３種類の情報を検出し、透かし比較手段２３においてそれぞれを比較する機能を持ったが、
映像信号透かし検出手段と音声信号透かし検出手段において、位置情報と時刻情報の少なくとも２種類の情報を検出し、透かし比較手段２３において比較する機能を持つ構成でも、十分透かし情報の唯一性が高く、証拠性の高い情報とすることができる。
【０１６０】
また映像信号透かし検出手段と音声信号透かし検出手段において、時刻情報とＩＤ情報の少なくとも２種類の情報を検出し、透かし比較手段２３において比較する機能を持つ構成でも、十分透かし情報の唯一性が高く、証拠性の高い情報とすることができる。
【０１６１】
なお図２の構成の各手段のうちそれぞれの手段は専用回路でも実現できるし、ＣＰＵ上のソフトウエア処理でも実現できる。
【０１６２】
このため、たとえば２０の表示手段と２４の表示結果出力手段をパーソナルコンピュータ用のモニタとスピーカで構成し、その他の部分をパーソナルコンピュータを用いて実現することも可能になる。
【０１６３】
この場合パーソナルコンピュータ内部において図２の各手段は例えば以下の通り実現される。
１７の記録媒体はＤＶＤ−ＲＡＭメディアもしくはＤＶＤ−ＲＷメディア。
１８の再生手段はＤＶＤ−ＲＡＭ／ＲＷドライブとパーソナルコンピュータ中のＣＰＵとメモリとハードディスクで実行されるソフトウエア処理。
１９の映像信号透かし検出手段はパーソナルコンピュータ中のＣＰＵとメモリとハードディスクで実行されるソフトウエア処理。
２１の音声信号透かし検出手段はパーソナルコンピュータ中のＣＰＵとメモリとハードディスクで実行されるソフトウエア処理。
２２の検出パラメータ設定手段はパーソナルコンピュータ中のＣＰＵとメモリとハードディスクで実行されるソフトウエア処理。
２３の透かし比較手段はパーソナルコンピュータ中のＣＰＵとメモリとハードディスクで実行されるソフトウエア処理。
【０１６４】
（実施の形態３）
本実施の形態においては映像信号中と音声信号中に撮影時刻、機器ＩＤ、撮影した場所について記述した情報をすかし情報として、多重化し、多重化された映像信号、音声信号をＬＡＮ、インターネット等の伝送路へ送出する機能をもつ、請求項６記載の電子透かし多重化装置について説明するものであり、本装置において生成し、出力される信号を本多重化装置に対応した、電子透かし装置をその双方を比較することにより、映像信号および音声信号の情報の改竄がなされていないことを確認する機能を提供する。
【０１６５】
図３は本発明の第１の実施の形態である、電子透かし多重化装置の構成を示すブロック図である。
【０１６６】
以下図３を用いて、電子透かし多重化装置の動作について説明する。
【０１６７】
図３の電子透かし多重化装置において
１はビデオカメラ等の撮像手段である。
２は映像信号入力手段である。
３はマイクロホン等の集音手段である。
４は音声信号入力手段である。
５は電子透かし多重化装置の位置を測定する測位手段である。
６は時刻測定手段である。
７は装置のＩＤを保持するＩＤ格納手段である。
８は電子透かしとして多重化する透かし情報を生成する透かし情報生成手段である。
９は映像信号に透かし情報を多重化する映像信号透かし多重化手段である。
１０は映像信号に対する電子透かしの初期パラメータを設定する、埋め込みパラメータ設定手段である。
１１は透かし映像信号出力手段である。
１２は音声信号に透かし情報を多重化する音声信号透かし多重化手段である。
１３は透かし音声信号出力手段である。
【０１６８】
以上の構成は、実施の形態１と同じものである。
【０１６９】
実施の形態１と異なるのは以下の通りである。
２５は送出手段である。
２６が伝送路である。
【０１７０】
撮像手段１、映像信号入力手段２、集音手段３、音声信号入力手段４、測位手段５、時刻測定手段６、ＩＤ格納手段７、透かし情報生成手段８、映像信号透かし多重化手段９、埋め込みパラメータ設定手段１０、音声信号透かし多重化手段１２については、実施の形態１と同様の動作を行う。
【０１７１】
透かし映像信号出力手段１１においては、映像信号透かし多重化手段１１から入力されてくる、電子透かしが多重化された映像信号を送出手段２５の入力形式に適した形式に変換を行う。
【０１７２】
例えば記録手段１４の入力形式が、アナログの映像信号である場合においては、映像信号のＤ／Ａ変換を行う。
【０１７３】
透かし音声信号出力手段１１においては、映像信号透かし多重化手段１１から入力されてくる、電子透かしが多重化された音声信号を記録手段１４の入力形式に適した形式に変換を行う。
【０１７４】
例えば記録手段１４の入力形式が、アナログの音声信号である場合においては、音声信号のＤ／Ａ変換を行う。
【０１７５】
送出手段２５は、透かし映像信号出力手段１１と透かし音声信号出力手段から入力されてくる映像信号と音声信号を伝送路２６へ送出できるフォーマットに変換して出力する。
【０１７６】
変換を行うフォーマットとして例えば、ＩＥＥＥ８０２．３（ＣＤＭＡ／ＣＡ）方式のＬＡＮのフォーマットに変換を行う．
具体的には、１００ＢＡＳＥ−Ｔ、１０００ＢＡＳＥ−Ｘ等の方式である。
【０１７７】
変換を行われた信号はＬＡＮ、インターネット等のネットワークへ送出される。
【０１７８】
上記のように本実施の形態の電子透かし多重化装置は映像信号中と音声信号中に撮影時刻、機器ＩＤ、撮影した場所について記述した情報をすかし信号として多重化する。さらに多重化された信号を、ＬＡＮ、インターネット等のネットワークへ送出する機能をもつ。
【０１７９】
本装置において生成し、出力される信号を本多重化装置に対応した、電子透かし装置により、その双方を比較することにより、映像信号および音声信号の情報の改竄がなされていを確認する機能が提供できる。さらにネットワークへ送出する機能を持つことにより、例えば、監視カメラと遠隔地にあるセンター確認装置のように、電子透かし多重化装置と、電子透かし検出装置がはなれた地点に置かれている場合でも情報の改竄がなされていを確認する機能が提供できる。
【０１８０】
なお上記の実施例においては、透かし映像信号出力手段１１が出力する形式が、ＩＥＥＥ８０２．３（ＣＤＭＡ／ＣＡ）方式の伝送フォーマットであるとしたが、これに限らず、ＩＥＥＥ８０２．１方式のＨＩＬＩ方式、ＩＥＥＥ８０２．５方式のトークンリング方式でも同様の効果が得られる。
【０１８１】
また透かし映像信号出力手段１１が出力する形式がＩＥＥＥ８０２．１１ａおよびＩＥＥＥ８０２．１１ｂの無線ＬＡＮ方式では、電子透かし検出装置に物理的に結線を行わなくてよいというまた別の効果が期待される。
【０１８２】
また透かし映像信号出力手段１１が出力する形式がＩＥＥ１３９４方式でも比較的低価格で送出手段が実現できるというまた別の効果が期待できる。
【０１８３】
なお本実施の形態において、透かし情報生成手段８は測位手段５で生成される位置情報と時刻測定手段６で生成される時刻情報と、ＩＤ格納手段７から出力されるＩＤ情報から電子透かし情報を生成している。
【０１８４】
この構成に限らず、電子透かし多重化装置内に測位手段５と時刻測定手段６をもつが、ＩＤ格納手段を持たないという構成で、透かし情報生成手段は測位手段で生成される位置情報と、時刻測定手段で生成される時刻情報から透かし情報を多重する構成でも、十分唯一性が高く、その映像の証拠性は非常に高くなる。
【０１８５】
また  電子透かし多重化装置内に時刻測定手段６をとＩＤ格納手段はもつが、即位手段を持たないという構成で、透かし情報生成手段は時刻測定手段で生成される時刻情報と、ＩＤ格納手段から出力されるＩＤ情報から透かし情報を多重する構成でも、監視カメラ等の固定カメラ等においては十分唯一性が高く、その映像の証拠性は非常に高くなる。
【０１８６】
なお本実施例においては、図３の破線で囲んだ映像信号および音声信号に電子透かしを多重する機能を提供するブロックと撮像手段１と集音手段３及び送出手段２５が一体化した筐体の装置、について説明した。
【０１８７】
これらブロックを一体化した装置にし、なおかつ装置の構成で各手段間の信号の受け渡しの信号が外部からアクセスできなくすることによりよりデータ改竄行為に対する耐性の強い装置を提供することができる。
【０１８８】
またこれとは逆に、図３の破線で囲んだ映像信号および音声信号に電子透かしを多重する機能を提供するブロックを１つの筐体の装置として、撮像手段１、集音手段３と送出手段１５を別の筐体の装置とした構成にすることもできる。
【０１８９】
この場合、たとえば撮像手段１、集音手段３を市販の低価格の監視カメラを使用する。また送出手段を民生用のパーソナルコンピュータ等を使用するという構成にすることができ、比較的低価格な電子透かし情報多重化装置を実現するといったまた別の効果が生じる。
【０１９０】
同様に、撮像手段１と集音手段３と図３の破線で囲んだ映像信号および音声信号に電子透かしを多重する機能を提供するブロックを一体化した筐体のカメラ装置として実現し、送出手段２５を別の筐体の装置とした構成にすることもできる。
【０１９１】
これにより、例えば送出手段を市販の民生用ＶＴＲデッキ等を使用するという構成にすることができ、比較的低価格な電子透かし情報多重化装置を実現することができる。
【０１９２】
さらに図３の破線で囲んだ映像信号および音声信号に電子透かしを多重する機能を提供するブロックと送出手段を一体化した記録装置として提供し、たとえば撮像手段１、集音手段３を市販の低価格の監視カメラを使用する構成にすることにより比較的低価格な電子透かし情報多重化装置を実現することができる。
【０１９３】
なお図３の構成の各手段のうちそれぞれの手段は専用回路でも実現できるし、ＣＰＵ上のソフトウエア処理でも実現できる。
【０１９４】
このため、前述の通り撮像手段と３の集音手段を市販の監視カメラで実現し、その他の部分をパーソナルコンピュータを用いて実現することも可能になる。
【０１９５】
この場合パーソナルコンピュータ内部において図３の各手段は例えば以下の通り実現される。
２の映像信号入力手段は、ＰＣＩバスに接続されるＰＣカードとそれを操作するパーソナルコンピュータ中のＣＰＵとメモリとハードディスクで実行されるソフトウエア処理。
４の音声信号入力手段はＰＣＩバスに接続されるＰＣカードとそれを操作するパーソナルコンピュータ中のＣＰＵとメモリとハードディスクで実行されるソフトウエア処理。
５の測位手段はＰＣＩバスに接続されるＰＣカード。
６の時刻測定手段はパーソナルコンピュータが持つタイマ。
７のＩＤ格納手段はパーソナルコンピュータのネットワークカードでＩＤ自身はＭＡＣアドレス。
８の透かし情報生成手段はパーソナルコンピュータ中のＣＰＵとメモリとハードディスクで実行されるソフトウエア処理。
９の映像信号透かし多重化手段はパーソナルコンピュータ中のＣＰＵとメモリとハードディスクで実行されるソフトウエア処理。
１０の埋め込みパラメータ設定手段はパーソナルコンピュータ中のＣＰＵとメモリとハードディスクで実行されるソフトウエア処理。
１１の透かし映像信号出力手段はＰＣＩバスに接続されたＰＣカードとパーソナルコンピュータ中のＣＰＵとメモリとハードディスクで実行されるソフトウエア処理。
１２の音声信号透かし多重化手段はＰＣＩバスに接続されたＰＣカードとパーソナルコンピュータ中のＣＰＵとメモリとハードディスクで実行されるソフトウエア処理。
１３の透かし音声信号出力手段はＰＣＩバスに接続されたＰＣカードとパーソナルコンピュータ中のＣＰＵとメモリとハードディスクで実行されるソフトウエア処理。
２５の送出手段はネットワークカードとそれを操作するパーソナルコンピュータ中のＣＰＵとメモリとハードディスクで実行されるソフトウエア処理。
【０１９６】
（実施の形態４）
本実施の形態においては、実施の形態３の電子透かし多重化装置に対応した請求項７記載の電子透かし検出装置について説明するものである。
【０１９７】
電子透かし信号として、映像信号中と音声信号中に多重化された、撮影時刻、機器ＩＤ、撮影した場所についての情報を検出する。そしてそれぞれの映像信号中の値と音声信号中の値を比較する。ことにより、映像信号および音声信号の情報の改竄がなされていないことを確認する機能を提供する。
【０１９８】
図４は本発明の実施の形態４の電子透かし検出装置の構成を示すブロック図である。
【０１９９】
図４の電子透かし検出装置において、
１９は映像信号中に多重された透かし情報を検出する、映像信号透かし検出手段である。
２０は再生映像信号を表示し再生音声を鳴らす表示手段である。
２１は音声信号中に多重された透かし情報を検出する、音声信号透かし検出手段である。
２２は映像信号に対する、電子透かし検出の初期パラメータを設定する検出パラメータ設定手段である。
２３は透かし比較手段である。
２４は判定結果出力手段である。
【０２００】
上記の構成は実施の形態２と同様である。
【０２０１】
実施の形態２とちがう構成は以下の通り。
２７は伝送路である。
２８は受信再生手段である。
【０２０２】
以下図４を用いて実施の形態４の電子透かし検出装置の動作について説明する。
【０２０３】
再生手段２８は、実施の形態３の電子透かし多重化装置から送出された信号を、伝送路２７を経由して受信再生手段２８において受信する。
【０２０４】
ここで伝送路２７はＬＡＮ、インターネット等のネットワークである。
【０２０５】
このとき伝送されてくる信号は、ＩＥＥＥ８０２．３（ＣＤＭＡ／ＣＡ）方式の伝送フォーマットであり、受信再生手段２８は前記フォーマットの信号から伝送路複合化を行う。
【０２０６】
さらに複合化を行った信号を映像信号電子透かし検出手段１９での処理に適した形式への映像信号への変換と読み出したデータの音声電子透かし検出手段２１での処理に適した形式への音声信号の変換を行なう。
【０２０７】
たとえば映像信号透かし検出手段がディジタル非圧縮方式で入力されてくる映像信号についての処理を行ない、伝送されてくる信号が、ＤＶ、ＭＰＥＧ１、ＭＰＥＧ２、ＭＰＥＧ４等の圧縮フォーマットで記録されている場合においては、受信再生手段２８において圧縮伸長が行なわれる。
【０２０８】
このような処理が行なわれた後、映像信号は映像信号透かし検出手段１９に渡される。
【０２０９】
音声信号もまた、映像信号透かし検出手段がディジタル非圧縮方式の信号を受信する構成で、ＤＶ、ＭＰＥＧ１、ＭＰＥＧ２、ＭＰＥＧ４等の圧縮フォーマットで記録されている場合においては、再生手段１８において圧縮伸長が行なわれる。
【０２１０】
このような処理が行なわれた後、音声信号透かし検出手段２１に渡される。
【０２１１】
以降映像信号透かし検出手段１９、表示手段２０、音声信号透かし検出手段２１、検出パラメータ設定手段２２、透かし比較手段２３、判定結果出力手段２４の動作は実施の形態３で説明したものと同様である。
【０２１２】
前記のように本実施の形態の電子透かし検出装置は、伝送路から受信した映像信号中と音声信号中に電子透かし信号として多重化された撮影時刻、機器ＩＤ、撮影した場所についての情報を検出する。そしてそれぞれの映像信号中の値と音声信号中の値を比較する。このことにより、映像信号および音声信号の情報の改竄がなされていないことを確認する機能を提供する。
【０２１３】
特に、ネットワークから信号を受信する機能を持つことにより、例えば、監視カメラと遠隔地にあるセンター確認装置のように、電子透かし多重化装置と、電子透かし検出装置がはなれた地点に置かれている場合でも情報の改竄がなされていを確認する機能が提供できる。
【０２１４】
なお上記の実施例においては、受信再生手段１１が出力する形式が、ＩＥＥＥ８０２．３（ＣＤＭＡ／ＣＡ）方式の伝送フォーマットであるとしたが、これに限らず、ＩＥＥＥ８０２．１方式のＨＩＬＩ方式、ＩＥＥＥ８０２．５方式のトークンリング方式でも同様の効果が得られる。
【０２１５】
また受信再生手段２８が受信する形式がＩＥＥＥ８０２．１１ａおよびＩＥＥＥ８０２．１１ｂの無線ＬＡＮ方式では、電子透かし検出装置に物理的に結線を行わなくてよいというまた別の効果が期待される。
【０２１６】
また受信再生手段２８が出力する形式がＩＥＥ１３９４方式でも比較的低価格で送出機能が実現できるというまた別の効果が期待できる。
【０２１７】
なお本実施の形態において映像信号透かし検出手段と音声信号透かし検出手段において、位置情報、時刻情報、ＩＤ情報の少なくとも３種類の情報を検出し、透かし比較手段２３においてそれぞにおいて比較する機能を持ったが、映像信号透かし検出手段と音声信号透かし検出手段において、位置情報と時刻情報報の少なくとも２種類の情報を検出し、透かし比較手段２３において比較する機能を持つ構成でも、十分透かし情報の唯一性が高く、証拠性の高い情報とすることができる。
【０２１８】
また映像信号透かし検出手段と音声信号透かし検出手段において、時刻情報とＩＤ情報の少なくとも２種類の情報を検出し、透かし比較手段２３において比較する機能を持つ構成でも、十分透かし情報の唯一性が高く、証拠性の高い情報とすることができる。
【０２１９】
なお図４の構成の各手段のうちそれぞれの手段は専用回路でも実現できるし、ＣＰＵ上のソフトウエア処理でも実現できる。
【０２２０】
このため、たとえば２０の表示手段と２４の表示結果出力手段をパーソナルコンピュータ用のモニタとスピーカで構成し、その他の部分をパーソナルコンピュータを用いて実現することも可能になる。
【０２２１】
この場合パーソナルコンピュータ内部において図４の各手段は例えば以下の通り実現される。
２８の受信再生手段はネットワークカードと、ＣＰＵとメモリとハードディスクで実行されるソフトウエア処理。
１９の映像信号透かし検出手段はパーソナルコンピュータ中のＣＰＵとメモリとハードディスクで実行されるソフトウエア処理。
２１の音声信号透かし検出手段はパーソナルコンピュータ中のＣＰＵとメモリとハードディスクで実行されるソフトウエア処理。
２２の検出パラメータ設定手段はパーソナルコンピュータ中のＣＰＵとメモリとハードディスクで実行されるソフトウエア処理。
２３の透かし比較手段はパーソナルコンピュータ中のＣＰＵとメモリとハードディスクで実行されるソフトウエア処理。
【０２２２】
（実施の形態５）
本実施の形態の電子透かし多重化装置は請求項８から請求項１１記載の電子透かし多重化装置について説明するものであり、本実施の形態の装置は、撮影時刻、機器ＩＤ、撮影した場所について記述した情報を透かし情報として生成する。
【０２２３】
さらに前記透かし情報をハッシュ化を行い、ハッシュ化透かし情報として生成する。そして映像信号または音声信号のうち一方に透かし情報を多重化し、残る一方にハッシュ化した透かし情報を多重化する。このことにより証拠性の高い映像信号と音声信号を生成することができる。
【０２２４】
本装置において生成し、出力される信号を本多重化装置に対応した、電子透かし装置において透かしを検出比較することにより、映像信号および音声信号の情報の改竄がなされていないことを判定できる機能を提供する。
【０２２５】
図５は本発明の第１の実施の形態である、電子透かし多重化装置の構成を示すブロック図である。
１はビデオカメラ等の撮像手段である。
２は映像信号入力手段である。
３はマイクロホン等の集音手段である。
４は音声信号入力手段である。
５は電子透かし多重化装置の位置を測定する測位手段である。
６は時刻測定手段である。
７は装置のＩＤを保持するＩＤ格納手段である。
８は電子透かしとして多重化する透かし情報を生成する透かし情報生成手段である。
９は映像信号に透かし情報を多重化する映像信号透かし多重化手段である。
１０は映像信号に対する電子透かしの初期パラメータを設定する、埋め込みパラメータ設定手段である。
１１は透かし映像信号出力手段である。
１２は音声信号に透かし情報を多重化する音声信号透かし多重化手段である。
１３は透かし音声信号出力手段である。
１４は透かし信号が多重化された映像信号および音声信号を記録媒体に記録を行なう記録手段である。
１５は記録媒体である。
【０２２６】
以上の構成は、実施の形態１と同じものである。
【０２２７】
本実施の形態において実施の形態１と異なるものは以下の通りである。
３０は多重透かしハッシュ化手段である。
【０２２８】
以下本実施例の動作について、図５を用いて説明する。
【０２２９】
撮像手段１、映像信号入力手段２、集音手段３、音声信号入力手段４、測位手段５、時刻測定手段６、ＩＤ格納手段７、映像信号透かし多重化手段９、埋め込みパラメータ設定手段１０、透かし音声信号多重化手段１３、記録手段１４、記録媒体１５については、実施の形態１と同様の動作を行う。
【０２３０】
透かし情報生成手段８においては、入力されてくる位置情報、時刻情報、ＩＤ情報を組み合わせて、２値の任意長のデータ列である透かし情報を生成する。生成された透かし情報は、映像信号透かし多重化手段９と多重透かしハッシュ化手段へ入力される。
【０２３１】
多重透かしハッシュ化手段においては透かし情報をハッシュ関数（ｈａｓｈ  ｆｕｎｃｔｉｏｎ）を用いて、ハッシュ値に変換する作業であるハッシュ化を行う。
【０２３２】
ハッシュ化を行なうことにより透かし情報の圧縮を行なう。ハッシュ関数は２つの異なるデータの入力を行なった際に、その出力であるハッシュ値が同じになる確率が極めて低いため、データ改竄の確認に用いることが可能である。
【０２３３】
ハッシュ化の方法としては具体的に文献（４）に示される、ＭＤ５やＳＨＡ−１、ＨＭＡＣがあり、ハッシュ化に関しては認証技術、セキュリティ技術として公知であるのでここでは詳しい説明は省略する。
【０２３４】
文献（４）ネットワーク技術  長谷和幸著  アイテック情報処理技術者教育センター発行  Ｐ３５８−３５９
音声信号透かし多重化部１３においては、ハッシュ透かし情報生成手段８により生成されたハッシュ透かし信号を音声信号に多重化を行なう。
【０２３５】
電子透かしを埋め込む手段としては、様々な方法があるが、例えば、元の音声データに関連した２種類の遅延に２進数の１及び０をそれぞれ割り当てることで、音声データに対して情報を埋め込むようにした、文献（３）に記述された、Ｍｕｌｔｉｐｌｅ  Ｂｉｔ  Ｈｏｐｐｉｎｇ  Ａｎｄ  Ｈｉｄｎｇ技術を用いることができる。
【０２３６】
文献（３）：Ｆｉｆｔｈ  Ｉｎｔｅｒｎａｔｉｏｎａｌ  Ｓｙｍｐｏｓｉｕｍｏｎ  Ｓｉｇｎａｌ  Ｐｒｏｃｅｓｓｉｎｇ  ａｎｄ  ｉｔｓ  Ａｐｐｌｉｃａｔｉｏｎｓ，  ＩＳＳＰＡ  ´９９，  Ｂｒｉｓｂａｎｅ，  Ａｕｓｔｒａｌｉａ，  ２２−２５  Ａｕｇｕｓｔ，  １９９９  Ｏｒｇａｎｉｚｅｄ  ｂｙ  ｔｈｅ  Ｓｉｇｎａｌ  Ｐｒｏｃｅｓｓｉｎｇ  Ｒｅｓｅａｒｃｈ  Ｃｅｎｔｒｅ，  ＱＵＴ，  Ｂｒｉｓｂａｎｅ，  Ａｕｓｔｒａｌｉａ  Ｐ９１−Ｐ９４，Ｐ９５−Ｐ９８
この技術を用いることで、再生時に聴取者に違和感を与えず、かつ容易に改善できないように音声データに所定のデータを組み込むことができる。
【０２３７】
以上のように本実施の形態の電子透かし多重化装置は、撮影時刻、機器ＩＤ、撮影した場所について記述した情報を透かし情報として生成する。さらに前記透かし情報をハッシュ化を行い、ハッシュ化透かし情報として生成する。そして映像信号に透かし情報を多重化し、音声信号にハッシュ化した透かし情報を多重化する。
【０２３８】
これにより証拠性の高い映像信号、音声信号を生成することができる。
【０２３９】
なお本装置において生成し出力される信号を、本多重化装置に対応した電子透かし装置において、透かしの検出比較することにより、映像信号および音声信号の情報の改竄がなされていないことを判定できる機能を提供する。
【０２４０】
さらに多重化する透かし情報をハッシュ化することにより透かし情報の量を削減を行い、多重化を行う音声データの量が少ない場合でも、聴取者に違和感を与えず電子透かしデータの生成を行うことができる。
【０２４１】
なお本実施の形態においては、透かし情報生成手段８で生成した透かし情報を映像信号透かし多重化手段に於いて映像信号に多重化し、多重透かしハッシュ化手段３０で生成されたハッシュ化透かし情報を音声信号透かし多重化手段において音声信号に多重化される構成について説明した。
【０２４２】
このような構成ではなく、透かし情報生成手段８で生成した透かし情報を音声信号に多重化を行い、多重透かしハッシュ化手段３０で生成されたハッシュ化透かし情報を映像信号に多重化する構成によっても、映像信号の画質劣化が低く抑えられるというまた別の効果が得られる。
【０２４３】
なお本実施の形態において、透かし情報生成手段８は測位手段５で生成される位置情報と時刻測定手段６で生成される時刻情報と、ＩＤ格納手段７から出力されるＩＤ情報から電子透かし情報を生成している。
【０２４４】
この構成に限らず、電子透かし多重化装置内に測位手段５と時刻測定手段６をもつが、ＩＤ格納手段７を持たないという構成で、透かし情報生成手段は測位手段で生成される位置情報と、時刻測定手段で生成される時刻情報から透かし情報を多重する構成でも、十分唯一性が高く、その映像の証拠性は非常に高くなる。
【０２４５】
また  電子透かし多重化装置内に時刻測定手段６をとＩＤ格納手段７はもつが、測位手段５を持たないという構成で、透かし情報生成手段は時刻測定手段で生成される時刻情報と、ＩＤ格納手段から出力されるＩＤ情報から透かし情報を多重する構成でも、監視カメラ等の固定カメラ等においては唯一性が高く、その映像の証拠性は十分高くなる。
【０２４６】
なお本実施例においては、図５の破線で囲んだ映像信号および音声信号に電子透かしを多重する機能を提供するブロックと撮像手段１と集音手段３及び記録手段１５が一体化した筐体の装置、いわゆるビデオカメラレコーダについて説明した。
【０２４７】
このように一体化した装置にし、かつ装置の構成上、各手段間の信号の受け渡しの信号が外部からアクセスできなくすることによりよりデータ改竄行為に対する耐性の強い装置を提供することができる。
【０２４８】
またこれとは逆に、図５の破線で囲んだ映像信号および音声信号に電子透かしを多重する機能を提供するブロックを１つの筐体の装置として、撮像手段１、集音手段３と記録手段１５を別の筐体の装置とした構成にすることもできる。
【０２４９】
この場合、たとえば撮像手段１、集音手段３を市販の低価格の監視カメラを使用する。また記録手段を市販の民生用ＶＴＲデッキ等を使用するという構成にすることができ、比較的低価格な電子透かし情報多重化装置を実現できるというまた別の効果が生じる。
【０２５０】
同様に、撮像手段１と集音手段３と図５の破線で囲んだ映像信号および音声信号に電子透かしを多重する機能を提供するブロックを一体化した筐体のカメラ装置として実現し、記録手段１５を別の筐体の装置とした構成にすることもできる。
【０２５１】
これにより、例えば記録手段を市販の民生用ＶＴＲデッキ等を使用するという構成にすることができ、比較的低価格な電子透かし情報多重化装置を実現することができる。
【０２５２】
さらに図５の破線で囲んだ映像信号および音声信号に電子透かしを多重する機能を提供するブロックと記録手段を一体化した記録装置として提供し、たとえば撮像手段１、集音手段３を市販の低価格の監視カメラを使用する構成にすることにより比較的低価格な電子透かし情報多重化装置を実現することができる。
【０２５３】
なお図５の構成の各手段のうちそれぞれの手段は専用回路でも実現できるし、ＣＰＵ上のソフトウエア処理でも実現できる。
【０２５４】
このため、たとえば１の撮像手段と３の集音手段を民生用ビデオカメラで実現し、その他の部分をパーソナルコンピュータを用いて実現することも可能になる。
【０２５５】
この場合パーソナルコンピュータ内部において図１の各手段はたとえば以下の通り実現される。
２の映像信号入力手段は、ＰＣＩバスに接続されるＰＣカードとそれを操作するパーソナルコンピュータ中のＣＰＵとメモリとハードディスクで実行されるソフトウエア処理。
４の音声信号入力手段はＰＣＩバスに接続されるＰＣカードとそれを操作するパーソナルコンピュータ中のＣＰＵとメモリとハードディスクで実行されるソフトウエア処理。
５の測位手段はＰＣＩバスに接続されるＰＣカード。
６の時刻測定手段はパーソナルコンピュータが持つタイマ。
７のＩＤ格納手段はパーソナルコンピュータのネットワークカードでＩＤ自身はＭＡＣアドレス。
８の透かし情報生成手段はパーソナルコンピュータ中のＣＰＵとメモリとハードディスクで実行されるソフトウエア処理。
９の映像信号透かし多重化手段はパーソナルコンピュータ中のＣＰＵとメモリとハードディスクで実行されるソフトウエア処理。
１０の埋め込みパラメータ設定手段はパーソナルコンピュータ中のＣＰＵとメモリとハードディスクで実行されるソフトウエア処理。
１１の透かし映像信号出力手段はＰＣＩバスに接続されたＰＣカードとパーソナルコンピュータ中のＣＰＵとメモリとハードディスクで実行されるソフトウエア処理。
１２の音声信号透かし多重化手段はＰＣＩバスに接続されたＰＣカードとパーソナルコンピュータ中のＣＰＵとメモリとハードディスクで実行されるソフトウエア処理。
１３の透かし音声信号出力手段はＰＣＩバスに接続されたＰＣカードとパーソナルコンピュータ中のＣＰＵとメモリとハードディスクで実行されるソフトウエア処理。
１４の記録手段はパーソナルコンピュータがもつＤＶＤ−ＲＡＭ／ＲＷドライブ。
１５の記録媒体はＤＶＤ−ＲＡＭメディアもしくはＤＶＤ−ＲＷメディア。
３０の多重化透かしハッシュ化手段はパーソナルコンピュータ中のＣＰＵとメモリとハードディスクで実行されるソフトウエア処理。
【０２５６】
（実施の形態６）
本実施の形態においては、第５の実施の形態の電子透かし多重化装置に対応した請求項１２記載の電子透かし検出装置について説明するものである。
【０２５７】
電子透かし信号として、映像信号中と音声信号中に多重化された、撮影時刻、機器ＩＤ、撮影した場所についての情報を検出する。そしてそれぞれの映像信号中の値と音声信号中の値を比較する。ことにより、映像信号および音声信号の情報の改竄がなされていないことを確認する機能を提供する。
【０２５８】
図６は本発明の実施の形態６の電子透かし検出装置の構成を示すブロック図である。
【０２５９】
図６の電子透かし検出装置において、
１７は記録媒体である。
１８は再生手段である。
１９は映像信号中に多重された透かし情報を検出する、映像信号透かし検出手段である。
２０は再生映像信号を表示し再生音声を鳴らす表示手段である。
２１は音声信号中に多重された透かし情報を検出する、音声信号透かし検出手段である。
２２は映像信号に対する、電子透かし検出の初期パラメータを設定する検出パラメータ設定手段である。
２３は透かし比較手段である。
２４は判定結果出力手段である。
【０２６０】
上記の構成は実施の形態２と同様である。
【０２６１】
実施の形態２とちがう構成は以下の通り
３１は検出透かしハッシュ化手段である。
【０２６２】
以下図６を用いて実施の形態４の電子透かし検出装置の動作について説明する。
【０２６３】
記録媒体１７には、実施の形態５の電子透かし多重化装置で記録された、映像信号と音声信号が記録されている。
【０２６４】
表示手段２０、音声信号透かし検出手段２１、検出パラメータ設定手段２２、判定結果出力手段２４の動作は実施の形態３で説明したものと同様である。
【０２６５】
記録媒体１７には、像信号透かし検出手段１９はハッシュ透かし情報を検出する。
【０２６６】
電子透かし検出処理の具体的手順としては、例えば、前述の文献（１）、あるいは文献（２）の方法を適用することができる。この方法を用いるためには透かし検出のためには、埋め込み対象となる周波数係数の周波数空間上における位置決定のための乱数系列の初期値設定用の秘密鍵が必要であるが、この秘密鍵の値は検出パラメータ設定手段２２から入力される。
【０２６７】
なお埋め込み対象となる周波数係数の位置を固定にする方法においては秘密鍵は必要なく、よって検出パラメータ設定手段２２も必要でなくなる。
【０２６８】
映像電子透かし検出手段１９から検出された透かし情報は検出透かしハッシュ化手段３１に入力される。
【０２６９】
検出透かしハッシュ化手段３１においては、実施例５で述べた多重ハッシュ化手段と同様のハッシュ化処理を行い、ハッシュ化透かし情報の生成を行う。
【０２７０】
透かし比較手段はハッシュ化透かし情報の比較を行う。比較をおこなった結果が一致しているかどうかの結果は、判定結果出力手段２４に渡される。
【０２７１】
ハッシュ化手段３１においては、実施例５で述べた多重ハッシュ化手段と同じハッシュ化処理を行うため、データの改竄がおこなわれていない場合においては、比較結果は一致することになる。
【０２７２】
判定結果出力手段２４は、たとえば、判定結果専用の小型ＬＣＤや、再生される映像信号にオーバーレイという形式で表示される。
【０２７３】
オーバレイ表示の場合は、表示手段２０がもつディスプレイ等を用いて表示することもできる。
【０２７４】
上記のように本電子透かし検出手段は、電子透かし信号として、映像信号中と音声信号中に埋め込まれた、撮影時刻、機器ＩＤ、撮影した場所についての情報を検出する。そしてそれぞれの映像信号中の値と音声信号中の値を比較する。このことにより、映像信号および音声信号の情報の改竄がなされていないことを自動的に確認する機能を提供する。
【０２７５】
さらに多重化する透かし情報をハッシュ化することにより透かし情報の量を削減を行い、多重化を行う音声データの量が少ない場合でも、聴取者に違和感を与えず電子透かしデータの生成を行うことができる。
【０２７６】
なお本実施の形態においては、映像透かし検出手段１９で生成した透かし情報を検出透かしハッシュ化手段３１に於いてハッシュ化し、音声信号透かし検出手段で検出されたされたハッシュ化透かし情報を透かし比較手段で比較する構成について説明した。
【０２７７】
このような構成ではなく以下の構成でもよい。
【０２７８】
映像信号にハッシュ化された透かし情報が多重されており、音声信号に透かし情報が多重された信号が記録媒体に記録されている。
【０２７９】
そして音声透かし検出手段１で生成した透かし情報を検出ハッシュ化手段３１に於いてハッシュ化し、映像信号透かし検出手段で検出されたされたハッシュ化透かし情報と透かし比較手段で比較する。
【０２８０】
上記のような構成の場合、映像信号に多重化される電子透かしのデータ量が少なくなり、映像信号の画質劣化が低く抑えられるというまた別の効果が得られる。
【０２８１】
表示する内容は、位置情報、時刻情報、ＩＤ情報のぞれぞれの情報が映像信号に多重されていたものと音声信号に多重されていたものが一致しているかどうかの判定結果、あるいはそれぞれの情報すべてが一致しているかどうかの判定結果、またはそれぞれの情報とすべての情報が一致しているかどうかの両方の判定結果を表示する形式いずれでも構わない。また必要に応じて位置情報と時刻情報、ＩＤ情報そのものを表示させてもよい。
【０２８２】
なお本実施の形態において映像信号透かし検出手段と音声信号透かし検出手段において、位置情報、時刻情報、ＩＤ情報の少なくとも３種類の情報を検出し、透かし比較手段２３においてそれぞにおいて比較する機能を持ったが、
映像信号透かし検出手段と音声信号透かし検出手段において、位置情報と時刻情報報の少なくとも２種類の情報を検出し、透かし比較手段２３において比較する機能を持つ構成でも、十分透かし情報の唯一性が高く、証拠性の高い情報とすることができる。
【０２８３】
また映像信号透かし検出手段と音声信号透かし検出手段において、時刻情報とＩＤ情報の少なくとも２種類の情報を検出し、透かし比較手段２３において比較する機能を持つ構成でも、十分透かし情報の唯一性が高く、証拠性の高い素材とすることができる。
【０２８４】
なお図６の構成の各手段のうちそれぞれの手段は専用回路でも実現できるし、ＣＰＵ上のソフトウエア処理でも実現できる。
【０２８５】
このため、たとえば２０の表示手段と２４の表示結果出力手段をパーソナルコンピュータ用のモニタとスピーカで構成し、その他の部分をパーソナルコンピュータを用いて実現することも可能になる。
【０２８６】
この場合パーソナルコンピュータ内部において図２の各手段は例えば以下の通り実現される。
１７の記録媒体はＤＶＤ−ＲＡＭメディアもしくはＤＶＤ−ＲＷメディア。
１８の再生手段は記録媒体はＤＶＤ−ＲＡＭ／ＲＷドライブとパーソナルコンピュータ中のＣＰＵとメモリとハードディスクで実行されるソフトウエア処理。
１９の映像信号透かし検出手段はパーソナルコンピュータ中のＣＰＵとメモリとハードディスクで実行されるソフトウエア処理。
２１の音声信号透かし検出手段はパーソナルコンピュータ中のＣＰＵとメモリとハードディスクで実行されるソフトウエア処理。
２２の検出パラメータ設定手段はパーソナルコンピュータ中のＣＰＵとメモリとハードディスクで実行されるソフトウエア処理。
２３の透かし比較手段はパーソナルコンピュータ中のＣＰＵとメモリとハードディスクで実行されるソフトウエア処理。
３１の検出透かしハッシュ化手段はパーソナルコンピュータ中のＣＰＵとメモリとハードディスクで実行されるソフトウエア処理。
【０２８７】
（実施の形態７）
本実施の形態においては映像信号中と音声信号中に撮影時刻、機器ＩＤ、撮影した場所について記述した情報を透かし情報として多重化し、それを、ＬＡＮ、インターネット等の伝送路へ送出する機能をもつ、請求項１３記載の電子透かし多重化装置について説明するものである。本装置において生成し、出力される信号を本多重化装置に対応した、電子透かし装置をその双方を比較することにより、映像信号および音声信号の情報の改竄がなされていないことを判定できる機能を提供する。
【０２８８】
図７は本発明の第１の実施の形態である、電子透かし多重化装置の構成を示すブロック図である。
【０２８９】
以下図７を用いて、電子透かし多重化装置の動作について説明する。
【０２９０】
図７の電子透かし多重化装置において
１はビデオカメラ等の撮像手段である。
２は映像信号入力手段である。
３はマイクロホン等の集音手段である。
４は音声信号入力手段である。
５は電子透かし多重化装置の位置を測定する測位手段である。
６は時刻測定手段である。
７は装置のＩＤを格納するＩＤ格納手段である。
８は電子透かしとして多重化する透かし情報を生成する透かし情報生成手段である。
９は映像信号に透かし情報を多重化する映像信号透かし多重化手段である。
１０は映像信号に対する電子透かしの初期パラメータを設定する、埋め込みパラメータ設定手段である。
１１は透かし映像信号出力手段である。
１２は音声信号に透かし情報を多重化する音声信号透かし多重化手段である。
１３は透かし音声信号出力手段である。
３０は多重透かしハッシュ化手段である。
【０２９１】
以上の構成は、実施の形態５と同じものである。
【０２９２】
実施の形態５と異なるのは以下の点である。
２５は送出手段である。
２６が伝送路である。
【０２９３】
撮像手段１、映像信号入力手段２、集音手段３、音声信号入力手段４、測位手段５、時刻測定手段６、ＩＤ格納手段７、透かし情報生成手段８、映像信号透かし多重化手段９、埋め込みパラメータ設定手段１０、音声信号透かし多重化手段１２、多重透かしハッシュ化手段３０については、実施の形態５と同様の動作を行う。
【０２９４】
透かし映像信号出力手段１１においては、映像信号透かし多重化手段１１から入力されてくる、
電子透かしが多重化された映像信号を送出手段２５の入力形式に適した形式に変換を行う。
【０２９５】
例えば送出手段２５の入力形式が、アナログの映像信号である場合においては、映像信号のＤ／Ａ変換を行う。
【０２９６】
透かし音声信号出力手段１１においては、映像信号透かし多重化手段１１から入力されてくる、電子透かしが多重化された音声信号を記録手段１４の入力形式に適した形式に変換を行う。
【０２９７】
例えば送出手段２５の入力形式が、アナログの音声信号である場合においては、音声信号のＤ／Ａ変換を行う。
【０２９８】
送出手段２５は、透かし映像信号出力手段１１と透かし音声信号出力手段１３から入力されてくる映像信号と音声信号を伝送路２６へ送出できるフォーマットに変換して出力する。
【０２９９】
変換を行うフォーマットとして例えば、ＩＥＥＥ８０２．３（ＣＤＭＡ／ＣＡ）方式のＬＡＮのフォーマットに変換を行う．
具体的には、１００ＢＡＳＥ−Ｔ、１０００ＢＡＳＥ−Ｘ等の方式である。
【０３００】
変換を行われた信号はＬＡＮ、インターネット等の伝送路へ送出される。
【０３０１】
上記のように本実施の形態の電子透かし多重化装置は映像信号中と音声信号中に撮影時刻、機器ＩＤ、撮影した場所について記述した情報をすかし情報として、多重化する。さらに埋め込まれた信号を、ＬＡＮ、インターネット等のネットワークへ送出する機能をもつ。
【０３０２】
これにより証拠性の高い映像音声信号の生成を行なうことができる。
【０３０３】
本装置において生成し、出力される信号を本多重化装置に対応した、電子透かし装置をその双方を比較することにより、映像信号および音声信号の情報の改竄がなされていないことを判定できる機能が提供できる。さらにネットワークへ送出する機能を持つことにより、
例えば、監視カメラと遠隔地にあるセンター確認装置のように、電子透かし多重化装置と電子透かし検出装置がはなれた地点に置かれている場合でも情報の改竄がなされていを確認する機能が提供できる。
【０３０４】
さらに多重化する透かし情報をハッシュ化することにより透かし情報の量を削減を行い、多重化を行う音声データの量が少ない場合でも、聴取者に違和感を与えず電子透かしデータの生成を行うことができる。
【０３０５】
なお本実施の形態においては、透かし情報生成手段８で生成した透かし情報を映像信号透かし多重化手段に於いて映像信号に多重化し、多重透かしハッシュ化手段３０で生成されたハッシュ化透かし情報を音声信号透かし多重化手段において音声信号に多重化される構成について説明した。
【０３０６】
このような構成ではなく、透かし情報生成手段８で生成した透かし情報を音声信号に多重化を行い、多重透かしハッシュ化手段３０で生成されたハッシュ化透かし情報を映像信号に多重化する構成によっても、映像信号の画質劣化が低く抑えられるというまた別の効果が得られる。
【０３０７】
なお上記の実施例においては、透かし映像信号出力手段１１が出力する形式が、ＩＥＥＥ８０２．３（ＣＤＭＡ／ＣＡ）方式の伝送フォーマットであるとしたが、これに限らず、ＩＥＥＥ８０２．１方式のＨＩＬＩ方式、ＩＥＥＥ８０２．５方式のトークンリング方式でも同様の効果が得られる。
【０３０８】
また透かし映像信号出力手段１１が出力する形式がＩＥＥＥ８０２．１１ａおよびＩＥＥＥ８０２．１１ｂの無線ＬＡＮ方式では、電子透かし検出装置に物理的に結線を行わなくてよいというまた別の効果が期待される。
【０３０９】
透かし映像信号出力手段１１が出力する形式がＩＥＥ１３９４方式でも比較的低価格で送出手段が実現できるというまた別の効果が期待できる。
【０３１０】
なお本実施の形態において、透かし情報生成手段８は測位手段５で生成される位置情報と時刻測定手段６で生成される時刻情報と、ＩＤ格納手段７から出力されるＩＤ情報から電子透かし情報を生成している。
【０３１１】
この構成に限らず、電子透かし多重化装置内に測位手段５と時刻測定手段６をもつが、ＩＤ格納手段７を持たないという構成で、透かし情報生成手段８は測位手段５で生成される位置情報と、時刻測定手段６で生成される時刻情報から透かし情報を多重する構成でも、十分唯一性が高く、その映像の証拠性は非常に高くなる。
【０３１２】
また  電子透かし多重化装置内に時刻測定手段６をとＩＤ格納手段７はもつが、測位手段５を持たないという構成で、透かし情報生成手段は時刻測定手段６で生成される時刻情報と、ＩＤ格納手段７から出力されるＩＤ情報から透かし情報を多重する構成でも、監視カメラ等の固定カメラ等においては十分唯一性が高く、その映像の証拠性は非常に高くなる。
【０３１３】
なお本実施例においては、図７の破線で囲んだ映像信号および音声信号に電子透かしを多重する機能を提供するブロックと撮像手段１と集音手段３及び送出手段２５が一体化した筐体の装置について説明した。
【０３１４】
これらを一体化した装置にし、かつ装置の構成で各手段間の信号の受け渡しの信号が外部からアクセスできなくすることにより、よりデータ改竄行為に対する耐性の強い装置を提供することができる。
【０３１５】
またこれとは逆に、図７の破線で囲んだ映像信号および音声信号に電子透かしを多重する機能を提供するブロックを１つの筐体の装置として、撮像手段１、集音手段３と送出手段２５を別の筐体の装置とした構成にすることもできる。
【０３１６】
この場合、たとえば撮像手段１、集音手段３を市販の低価格の監視カメラを使用する。また送出手段を民生用のパーソナルコンピュータ等を使用するという構成にすることができ、比較的低価格な電子透かし情報多重化装置を実現するといったまた別の効果が生じる。
【０３１７】
同様に、撮像手段１と集音手段３と図３の破線で囲んだ映像信号および音声信号に電子透かしを多重する機能を提供するブロックを一体化した筐体のカメラ装置として実現し、送出手段２５を別の筐体の装置とした構成にすることもできる。
【０３１８】
これにより、例えば送出手段を市販の民生用ＶＴＲデッキ等を使用するという構成にすることができ、比較的低価格な電子透かし情報多重化装置を実現することができる。
【０３１９】
さらに図７の破線で囲んだ映像信号および音声信号に電子透かしを多重する機能を提供するブロックと送出手段を一体化した記録装置として提供し、たとえば撮像手段１、集音手段３を市販の低価格の監視カメラを使用する構成にすることにより比較的低価格な電子透かし情報多重化装置を実現することができる。
【０３２０】
なお図７の構成の各手段のうちそれぞれの手段は専用回路でも実現できるし、ＣＰＵ上のソフトウエア処理でも実現できる。
【０３２１】
このため、撮像手段と３の集音手段を市販の監視カメラで実現し、その他の部分をパーソナルコンピュータを用いて実現することも可能になる。
【０３２２】
この場合パーソナルコンピュータ内部において図７の各手段は例えば以下の通り実現される。
２の映像信号入力手段は、ＰＣＩバスに接続されるＰＣカードとそれを操作するパーソナルコンピュータ中のＣＰＵとメモリとハードディスクで実行されるソフトウエア処理。
４の音声信号入力手段はＰＣＩバスに接続されるＰＣカードとそれを操作するパーソナルコンピュータ中のＣＰＵとメモリとハードディスクで実行されるソフトウエア処理。
５の測位手段はＰＣＩバスに接続されるＰＣカード。
６の時刻測定手段はパーソナルコンピュータが持つタイマ。
７のＩＤ格納手段はパーソナルコンピュータのネットワークカードでＩＤ自身はＭＡＣアドレス。
８の透かし情報生成手段はパーソナルコンピュータ中のＣＰＵとメモリとハードディスクで実行されるソフトウエア処理。
９の映像信号透かし多重化手段はパーソナルコンピュータ中のＣＰＵとメモリとハードディスクで実行されるソフトウエア処理。
１０の埋め込みパラメータ設定手段はパーソナルコンピュータ中のＣＰＵとメモリとハードディスクで実行されるソフトウエア処理。
１１の透かし映像信号出力手段はＰＣＩバスに接続されたＰＣカードとパーソナルコンピュータ中のＣＰＵとメモリとハードディスクで実行されるソフトウエア処理。
１２の音声信号透かし多重化手段はＰＣＩバスに接続されたＰＣカードとパーソナルコンピュータ中のＣＰＵとメモリとハードディスクで実行されるソフトウエア処理。
１３の透かし音声信号出力手段はＰＣＩバスに接続されたＰＣカードとパーソナルコンピュータ中のＣＰＵとメモリとハードディスクで実行されるソフトウエア処理。
２５の送出手段はネットワークカードとそれを操作するパーソナルコンピュータ中のＣＰＵとメモリとハードディスクで実行されるソフトウエア処理。
３０の多重透かしハッシュ化手段はパーソナルコンピュータ中のＣＰＵとメモリとハードディスクで実行されるソフトウエア処理。
【０３２３】
（実施の形態８）
本実施の形態においては、実施の形態７の電子透かし多重化装置に対応した請求項７記載の電子透かし検出装置について説明するものである。
【０３２４】
電子透かし信号として、映像信号中と音声信号中に埋め込まれた、撮影時刻、機器ＩＤ、撮影した場所についての情報を検出する。そしてそれぞれの映像信号中の値と音声信号中の値を比較する。このことにより、映像信号および音声信号の情報の改竄がなされていないことを自動的に判定する機能を提供する。
【０３２５】
図８は本発明の実施の形態４の電子透かし検出装置の構成を示すブロック図である。
【０３２６】
図８の電子透かし検出装置において、
１９は映像信号中に多重された透かし情報を検出する、映像信号透かし検出手段である。
２０は再生映像信号を表示する、再生音声を響かせる表示手段である。
２１は音声信号中に多重された透かし情報を検出する、音声信号透かし検出手段である。
２２は映像信号に対する、電子透かし検出の初期パラメータを設定する検出パラメータ設定手段である。
２３は透かし比較手段である。
２４は判定結果出力手段である。
３１は検出透かしハッシュ化手段である。
【０３２７】
上記の構成は実施の形態６と同様である。
【０３２８】
実施の形態６とちがう構成は以下の通り
２７は伝送路である。
２８は受信再生手段である。
【０３２９】
以下図８を用いて実施の形態８の電子透かし検出装置の動作について説明する。
【０３３０】
受信再生手段２８は、実施の形態３の電子透かし多重化装置から送出された信号を、伝送路２７を経由して受信再生手段２８において受信する。
【０３３１】
ここで伝送路２７はＬＡＮ、インターネット等のネットワークである。
【０３３２】
このとき伝送されてくる信号は、ＩＥＥＥ８０２．３（ＣＤＭＡ／ＣＡ）方式の伝送フォーマットであり受信再生手段２８は前記フォーマットの信号から伝送路復合化を行う。
【０３３３】
さらに復合化を行った信号を映像信号電子透かし検出手段１９での処理に適した形式への映像信号への変換と読み出したデータの音声電子透かし検出手段２１での処理に適した形式への音声信号の変換を行なう。
【０３３４】
たとえば映像信号透かし検出手段１９がディジタル非圧縮方式の映像信号についての処理を行ない、伝送されてくる信号が、ＤＶ、ＭＰＥＧ１、ＭＰＥＧ２、ＭＰＥＧ４等の圧縮フォーマットである場合においては、受信再生手段２８において圧縮伸長が行なわれる。
【０３３５】
このような処理が行なわれた後、映像信号は映像信号透かし検出手段１９に渡される。
【０３３６】
音声信号もまた、映像信号透かし検出手段がディジタル非圧縮方式の信号について処理を行なう構成で、ＤＶ、ＭＰＥＧ１、ＭＰＥＧ２、ＭＰＥＧ４等の圧縮フォーマットで記録されている場合においては、受信再生手段２８において圧縮伸長が行なわれる。
【０３３７】
このような処理が行なわれた後、音声信号透かし検出手段２１に渡される。
【０３３８】
以降映像信号透かし検出手段１９、表示手段２０、音声信号透かし検出手段２１、検出パラメータ設定手段２２、透かし比較手段２３、判定結果出力手段２４、検出透かしハッシュ化手段３１の動作は実施の形態６で説明したものと同様である。
【０３３９】
前記のように本実施の形態の電子透かし検出装置は、伝送路から受信した映像信号中と音声信号中に電子透かし信号として埋め込まれた撮影時刻、機器ＩＤ、撮影した場所についての情報を検出する。そしてそれぞれの映像信号中の値と音声信号中の値を比較する。このことにより、映像信号および音声信号の情報の改竄がなされていないことを自動的にする機能を提供する。
【０３４０】
特に、ネットワークから信号を受信する機能を持つことにより、  例えば、監視カメラと遠隔地にあるセンター確認装置のように、電子透かし多重化装置と、電子透かし検出装置がはなれた地点に置かれている場合でも情報の改竄がなされていを確認する機能が提供できる。
【０３４１】
さらに多重化する透かし情報をハッシュ化することにより透かし情報の量を削減を行い、多重化を行う音声データの量が少ない場合でも、聴取者に違和感を与えず電子透かしデータの生成を行うことができる。
【０３４２】
なお本実施の形態においては、映像透かし検出手段１９で生成した透かし情報を検出透かしハッシュ化手段３１に於いてハッシュ化し、音声信号透かし検出手段で検出されたされたハッシュ化透かし情報を透かし比較手段で比較する構成について説明した。
【０３４３】
このような構成ではなく以下の構成でもよい。
【０３４４】
映像信号にハッシュ化された透かし情報が多重されており、音声信号に透かし情報が多重された信号が受信再生手段に入力されている。
【０３４５】
そして音声透かし検出手段２１で生成した透かし情報を検出ハッシュ化手段３１に於いてハッシュ化し、映像信号透かし検出手段で検出されたされたハッシュ化透かし情報と透かし比較手段で比較する。
【０３４６】
上記のような構成の場合、映像信号に多重化される電子透かしのデータ量が少なくなり、映像信号の画質劣化が低く抑えられるというまた別の効果が得られる。
【０３４７】
なお上記の実施例においては、受信再生手段１１が出力する形式が、ＩＥＥＥ８０２．３（ＣＤＭＡ／ＣＡ）方式の伝送フォーマットであるとしたが、これに限らず、ＩＥＥＥ８０２．１方式のＨＩＬＩ方式、ＩＥＥＥ８０２．５方式のトークンリング方式でも同様の効果が得られる。
【０３４８】
また受信再生手段２８が受信する形式がＩＥＥＥ８０２．１１ａおよびＩＥＥＥ８０２．１１ｂの無線ＬＡＮ方式では、電子透かし検出装置に物理的に結線を行わなくてよいというまた別の効果が期待される。
【０３４９】
また受信再生手段２８が出力する形式がＩＥＥ１３９４方式でも比較的低価格で送出機能が実現できるというまた別の効果が期待できる。
【０３５０】
なお本実施の形態において映像信号透かし検出手段と音声信号透かし検出手段において、位置情報、時刻情報、ＩＤ情報の少なくとも３種類の情報を検出し、透かし比較手段２３においてそれぞにおいて比較する機能を持ったが、
映像信号透かし検出手段と音声信号透かし検出手段において、位置情報と時刻情報報の少なくとも２種類の情報を検出し、透かし比較手段２３において比較する機能を持つ構成でも、十分透かし情報の唯一性が高く、証拠性の高い情報とすることができる。
【０３５１】
また映像信号透かし検出手段と音声信号透かし検出手段において、時刻情報報のＩＤ情報の少なくとも２種類の情報を検出し、透かし比較手段２３において比較する機能を持つ構成でも、十分透かし情報の唯一性が高く、証拠性の高い情報とすることができる。
【０３５２】
なお図８の構成の各手段のうち、それぞれの手段は専用回路でも実現できるし、ＣＰＵ上のソフトウエア処理でも実現できる。
【０３５３】
このため、たとえば２０の表示手段と２４の表示結果出力手段をパーソナルコンピュータ用のモニタとスピーカで構成し、その他の部分をパーソナルコンピュータを用いて実現することも可能になる。
【０３５４】
この場合パーソナルコンピュータ内部において図８の各手段は例えば以下の通り実現される。
２８の受信再生手段はネットワークカードと、ＣＰＵとメモリとハードディスクで実行されるソフトウエア処理。
１９の映像信号透かし検出手段はパーソナルコンピュータ中のＣＰＵとメモリとハードディスクで実行されるソフトウエア処理。
２１の音声信号透かし検出手段はパーソナルコンピュータ中のＣＰＵとメモリとハードディスクで実行されるソフトウエア処理。
２２の検出パラメータ設定手段はパーソナルコンピュータ中のＣＰＵとメモリとハードディスクで実行されるソフトウエア処理。
２３の透かし比較手段はパーソナルコンピュータ中のＣＰＵとメモリとハードディスクで実行されるソフトウエア。
３１の検出透かしハッシュ化手段はパーソナルコンピュータ中のＣＰＵとメモリとハードディスクで実行されるソフトウエア処理。
【０３５５】
【発明の効果】
上記説明したように、本発明の電子透かし多重化装置においては、映像信号中と音声信号中に撮影時刻、機器ＩＤ、撮影した場所についての情報を電子すかし情報として多重する。
【０３５６】
また本発明の電子透かし検出装置は、映像信号および音声信号に多重化された電子透かし信号を検出し双方の比較を行う。
【０３５７】
このことにより、証拠性の高い映像信号、音声信号を生成する機能を提供するとともに、映像信号および音声信号の情報の改竄がなされていないことを自動的に判定するする従来にない機能を提供することができる。
【図面の簡単な説明】
【図１】本発明の実施の形態１の電子透かし多重化装置の構成を示すブロック図
【図２】本発明の実施の形態２の電子透かし検出装置の構成を示すブロック図
【図３】本発明の実施の形態３の電子透かし多重化装置の構成を示すブロック図
【図４】本発明の実施の形態４の電子透かし検出装置の構成を示すブロック図
【図５】本発明の実施の形態５の電子透かし多重化装置の構成を示すブロック図
【図６】本発明の実施の形態６の電子透かし検出装置の構成を示すブロック図
【図７】本発明の実施の形態７の電子透かし多重化装置の構成を示すブロック図
【図８】本発明の実施の形態８の電子透かし検出装置の構成を示すブロック図
【図９】従来の電子透かし多重化装置、電子透かし検出装置の構成を示すブロック図
【符号の説明】
１  撮像手段
２  映像信号入力手段
３  集音手段
４  音声信号入力手段
５  測位手段
６  時刻測定手段
７  ＩＤ格納手段
８  透かし情報生成手段
９  映像信号透かし多重化手段
１０  埋め込みパラメータ設定手段
１１  透かし映像信号出力手段
１２  音声信号透かし多重化手段
１３  透かし音声信号出力手段
１４  記録手段
１５  記録媒体
１７  記録媒体
１８  再生手段
１９  映像信号透かし検出手段
２０  表示手段
２１  音声信号透かし検出手段
２２  検出パラメータ設定手段
２３  透かし比較手段
２４  判定結果出力手段
２５  送出手段
２６  伝送路
２７  伝送路
２８  受信再生手段
３０  多重透かしハッシュ化手段
３１  検出透かしハッシュ化手段
１００  撮像部
１０１  マイク部
１０２  ＧＰＳ信号入力部
１０３  タイマ
１０４  透かし情報生成部
１０５  映像透かし多重化部
１０６  埋め込みパラメータ設定部
１０７  多重化信号出力部
１０８  受信信号入力部
１０９  映像信号透かし検出処理部
１１０  透かし表示処理部
１１１  検出パラメータ設定部
１１２  映像再生処理部
１１３  音声再生処理部
【図１】
2004222129.tif 000003
【図２】
2004222129.tif 000004
【図３】
2004222129.tif 000005
【図４】
2004222129.tif 000006
【図５】
2004222129.tif 000007
【図６】
2004222129.tif 000008
【図７】
2004222129.tif 000009
【図８】
2004222129.tif 000010
【図９】
2004222129.tif 000011