(57)【特許請求の範囲】
【請求項１】
入力画像データをＡ／Ｄ変換処理したベースバンド画像信号又はその画像信号に所定の帯域圧縮処理を施した情報信号から所定の特性信号を検出する特性信号検出手段と、
上記特性信号検出手段からの所定区間の信号を第１のメモリー領域に記憶する第１メモリー手段と、
上記特性信号検出手段で検出した所定の特性信号を基準にして、上記第１メモリー手段に記憶されている特性信号と距離演算処理を行う演算手段と、
上記演算手段からの信号が所定しきい値範囲にある場合は演算結果に応じて第２のメモリー領域にすでに記憶されている識別情報信号を演算入力信号に対応させ、所定しきい値範囲にない場合は記憶されていない新たな所定の識別情報信号を対応させることにより識別情報信号を生成する識別情報信号生成手段と、
上記識別情報信号生成手段で生成された識別情報信号を第２のメモリー領域に記憶する第２メモリー手段と、
を備えたことを特徴とする情報信号処理装置。
【請求項２】
入力画像データをＡ／Ｄ変換処理したベースバンド画像信号又はその画像信号に所定の帯域圧縮処理を施した情報信号から所定の特性信号を検出し、
上記特性信号における所定区間の信号を第１のメモリー領域に記憶し、
上記特性信号を基準にして、上記第１のメモリー領域に記憶されている特性信号と距離演算処理を行い、
上記演算の結果に応じた信号が所定しきい値範囲にある場合は演算結果に応じて第２のメモリー領域にすでに記憶されている識別情報信号を演算入力信号に対応させ、所定しきい値範囲にない場合は記憶されていない新たな所定の識別情報信号を対応させることにより識別情報信号を生成し、
上記生成した識別情報信号を第２のメモリー領域に記録する
ことを特徴とする情報信号処理方法。
【請求項３】
入力画像データをＡ／Ｄ変換処理したベースバンド画像信号又はその画像信号に所定の帯域圧縮処理を施した情報信号から所定の特性信号を検出する特性信号検出手段と、
上記特性信号検出手段からの所定区間の信号を第１のメモリー領域に記憶する第１メモリー手段と、
上記特性信号検出手段で検出した所定の特性信号を基準にして、上記第１メモリー手段に記憶されている特性信号と距離演算処理を行う演算手段と、
上記演算手段からの信号が所定しきい値範囲にある場合は演算結果に応じて第２のメモリー領域にすでに記憶されている第１の識別情報信号を演算入力信号に対応させ、所定しきい値範囲にない場合は記憶されていない新たな第１の識別情報信号を対応させることにより第１の識別情報信号を生成する識別情報信号生成手段と、
上記識別情報信号生成手段で生成された第１の識別情報信号を第２のメモリー領域に記録する第２メモリー手段と、
上記第１の識別情報信号または上記第１の識別情報信号に応じた所定の第２の識別情報信号を所定の記録媒体に記録する記録手段と、
を備えたことを特徴とする情報信号記録装置。
【請求項４】
入力画像データをＡ／Ｄ変換処理したベースバンド画像信号又はその画像信号に所定の帯域圧縮処理を施した情報信号から検出された特性信号の所定区間における信号と、
上記特性信号を基準にして、上記所定区間における信号に対して所定の距離演算処理が行われて得た演算結果に応じて得られた信号が所定しきい値範囲にある場合は演算結果に応じて第２のメモリー領域にすでに記憶されている第１の識別情報信号を演算入力信号に対応させ、所定しきい値範囲にない場合は記憶されていない新たな第１の識別情報信号を対応させることにより第１の識別情報信号を生成し、
この生成された第１の識別情報信号又は上記第１の識別情報信号に関連して生成された第２の識別情報信号と
が記録されていることを特徴とする情報信号記録媒体。
【発明の詳細な説明】
【０００１】
【発明の属する技術分野】
本発明は、入力された情報信号に対して分類等の処理を行って識別情報信号(以下、識別情報データという)と共に記録し、再生時にはこれ等を使って記録したシーンをすぐに把握することができる情報信号処理装置、情報信号処理方法並びに情報信号記録装置および情報信号記録媒体に関する。
【０００２】
さらに詳しくは、本発明は映像信号、音声信号などの情報信号を光磁気ディスク、ハードディスク、半導体メモリーなどの記録媒体に記録する記録装置において、例えば放送番組を記録する際に記録する映像シーンを自動的に所定の分類またはインデキシング処理を行い、ハードディスク（ＨＤＤ）や光磁気ディスク、磁気テープなど所定の記録媒体にそれら分類またはインデキシング処理の結果の識別情報データを、記録を行う画像、音声信号と共に所定の記録領域に記録を行う。
【０００３】
再生時にその所定分類またはインデキシング処理の結果に応じて記録したシーンの内容をすぐに把握することができ、ユーザーが効果的および、効率的なダイジェスト再生やスキミング動作を行うことができる情報信号処理装置、情報信号処理方法、情報信号記録装置、および情報信号記録媒体に関するものである。
【０００４】
【従来の技術】
ＭＰＥＧ(moving  picture  experts  group)などの画像圧縮技術が広く民生用記録再生装置に利用され、また比較的長時間記録可能でアクセス性の良いＨＤＤ（ハードディスク）や光磁気ディスクが比較的低価格で普及し、放送番組などが手軽に長時間記録できるようになっている。
【０００５】
このように長時間記録した放送番組などを再生して楽しもうとすると、限られた時間の中では効率良く再生する必要があり、従来技術では例えば、２倍速再生などの通常再生速度よりも高速動作を行い短時間で再生することが考えられる。
【０００６】
より効果的な短時間再生を行なうことを目的として、映像の変化やカメラパン、または音声認識など技術を用いて、要約を行なっても映像シーンの内容が把握できる意味のあると思われる部分を検出して再生する技術が知られている。
【０００７】
また、記録時に自動的に分類し、識別情報を付加して記録し再生時に検索や頭出しを行なう技術も知られている。
【０００８】
例えば、公知技術文献としては以下に示すようなものがある。
（ａ）Michael A.Smith and T.Kanade,”Video Skimming and Characterization  through the Combination of Image and Language Understanding Techniques”,IEEE CVPR,（ p775-p781）
（ｂ）特表平10−507554「探索できるディジタルビデオライブラリを作成する方法および装置ならびにそのようなライブラリを利用するシステムおよび方法」
（ｃ）特開平７−45050「自動分類記録装置」
（ｄ）特開平７−29007「映像特徴処理方法」
（ｅ）特開平11−328422「画像識別装置」
（ｆ）特開2000−261754「ダイジェスト作成装置、ダイジェスト作成方法およびその方法の各工程をコンピュータに実行させるためのプログラムを記録したコンピュータ読み取り可能な記録媒体」
【０００９】
【発明が解決しようとする課題】
２倍速再生など高速再生を行なう場合は自分が見たいと思う映像シーン以外の区間も再生されることになり、ダイジェスト再生など短時間再生を行なう場合は効率があまり良いとは言えず、また、記録した映像の内容の概要を、効率良く、すぐに知りたいと思っても、ダイジェスト再生などの特殊再生動作を行う必要があり、記録媒体に記録した内容の映像シーンを効率良く、効果的にすぐ把握できるとは言い難い。
【００１０】
上記の文献（ａ）、（ｂ）などは特徴的な映像区間と音声区間を選択し、合成して得られた部分をつなぎ合わせて要約再生する技術が開示されているが、このような技術では、例えば、所定の記録媒体に記録した後に、特徴的な映像区間や音声区間を選択する特別な処理を行なうことが一般的で、そのため記録終了の後に、ダイジェスト再生や要約再生を行なうための信号処理時間を待たなければならない。
【００１１】
上記文献（ｃ）に開示の技術は、記録時にシーンチェンジなどの単位毎に分類コードと名前を付けて記録することが記載されているが、適切な分類が行なわれるか不明であり、また記録方法や記録時間によっては多くのコードと名前情報を持つ必要がある問題が考えられる。
【００１２】
上記文献（ｄ）にはカラー映像信号からヒストグラム処理によりショットを分類する技術が開示されているが、分類した後の分類情報データの設定方法や信号処理技術については詳しい技術的開示がなされていない。
【００１３】
上記文献（ｅ）には、あらかじめ複数の特徴抽出したデータを画像パターンデータとして保持した画像パターンデータベースと入力画像の類似度を算出し分類する技術が開示されているが、あらかじめデータを持つ必要があり、そのため構成がやや複雑になると考えられる。
【００１４】
また上記文献（ｆ）には、あらかじめ事象定義毎に設定された数値を数値情報として記憶した記憶手段を備え、入力映像の事象に基づいて数値映像情報を生成しダイジェスト映像を作成する技術が開示されているが、事象毎に設定された数値情報を記憶した記憶手段を設ける必要があり、そのため構成がやや複雑になることが考えられる。
【００１５】
以上のような観点から、本発明は記録終了後、ダイジェスト再生や要約再生などを行なうための複雑な処理をできるだけ行なわず、処理のための時間をできるだけ待つことなく、ダイジェスト再生や要約再生または記録した内容の映像シーンを効果的に、効率良く把握したいと思った場合に、できるだけ直ぐに、その動作が行なえるようなシステムを、比較的簡単な構成で安価に実現する技術を提案するものである。
【００１６】
以上の点を実現するための本発明の概要について述べれば、先ず、放送番組などの映像信号から、またはその信号を圧縮処理など、所定の加工処理を行った信号から所定の特性信号を逐次検出する。
【００１７】
ある映像シーン時点におけるその特性信号を所定のバッファーメモリー領域に記憶し、それより前の特性信号を記憶してある所定の特性信号メモリー系の信号と順次、所定の演算処理を行い、所定の類似画像検出の候補となる最小演算値を検出する。
【００１８】
その演算値を所定の設定しきい値と比較し、所定範囲内であれば、類似画像検出が行われたとし、特性信号メモリー系と一対一に対応し所定の識別情報データが記憶されている識別情報データメモリー系に記憶されている所定の類似画像分類であることを示す識別情報データを、演算処理を行った映像信号に割り当てる。
【００１９】
上記演算値が設定しきい値内にない場合は、識別情報データメモリー系に記憶されている識別情報データ値の最大値を検出し、それよりも大きなデータ値または、識別情報データメモリー系に記憶されていない新たな識別情報データ値を生成し、そのデータ値が所定の最大値を超えた場合はデータ値を０とし、映像信号に割り当てる。
【００２０】
映像信号を記録する際に、上記の割り当てられた識別情報データも記録できるように所定の信号処理を行う。
【００２１】
後の映像シーン時点で上記のような演算処理を行う前に、特性データメモリー系および識別情報データメモリー系に記憶されている記憶データを順次、所定の記憶領域に移動することで、順次新しいデータが記憶できるように動作を行い、上記のような所定の演算処理、および所定の識別情報データ処理を繰り返して行う。
【００２２】
再生時に、記録した識別情報データを再生検出することで、特別な分類信号処理を行うことなく、所定の類似画像分類を自動的に行うことができ、これにより、類似画像系列を再生することで長時間記録した放送番組なども短時間で内容の確認や把握を行うことができるダイジェスト再生やスキミング処理が実現できる。
【００２３】
【課題を解決するための手段】
本発明は、以上の内容を実現する情報信号処理装置の構成として、
（１）入力画像データをＡ／Ｄ変換処理したベースバンド画像信号又はその画像信号に所定の帯域圧縮処理を施した情報信号から所定の特性信号を検出する特性信号検出手段と、
（２）上記特性信号検出手段からの所定区間の信号を第１のメモリー領域に記憶する第１メモリー手段と、
（３）上記特性信号検出手段で検出した所定の特性信号を基準にして、上記第１メモリー手段に記憶されている特性信号と距離演算処理を行う演算手段と、
（４）上記演算手段の演算結果に応じて上記第１のメモリー領域の信号と一対一に対応する所定の識別情報信号を生成する識別情報信号生成手段と、
（５）上記識別情報信号生成手段で生成された識別情報信号を第２のメモリー領域に記憶する第２メモリー手段と、
を備えたことである。
【００２４】
また、本発明は、以上の内容を実現する情報信号処理方法の構成として、
（１）入力画像データをＡ／Ｄ変換処理したベースバンド画像信号又はその画像信号に所定の帯域圧縮処理を施した情報信号から所定の特性信号を検出し、
（２）上記特性信号における所定区間の信号を第１のメモリー領域に記憶し、
（３） 上記特性信号を基準にして、上記第１のメモリー領域に記憶されている特性信号と距離演算処理を行い、
（４）上記演算の結果に応じて上記第１のメモリー領域に一対一に対応する所定の識別情報信号を生成し、
（５）上記識別情報信号を第２のメモリー領域に記録するようにしたものである。
【００２５】
また、本発明は、以下の内容を実現する情報信号記録装置の構成として、
（１）入力画像データをＡ／Ｄ変換処理したベースバンド画像信号又はその画像信号に所定の帯域圧縮処理を施した情報信号から所定の特性信号を検出する特性信号検出手段と、
（２）上記特性信号検出手段からの所定区間の信号を第１のメモリー領域に記憶する第１メモリー手段と、
（３）上記特性信号検出手段で検出した所定の特性信号を基準にして、上記第１メモリー手段に記憶されている特性信号と距離演算処理を行う演算手段と、
（４）上記演算手段の演算結果に応じて上記第１のメモリー領域の信号と一対一に対応する所定の第１の識別情報信号を生成する識別情報信号生成手段と、
（５）上記識別情報信号生成手段で生成された識別情報信号を第２のメモリー領域に記録する第２メモリー手段と、
（６）上記第１の識別情報信号または上記第１の識別情報信号に応じた所定の第２の識別情報信号を所定の記録媒体に記録する記録手段と
を有するようにしたものである。
【００２６】
その上、本発明は、以上の内容を実現する情報信号記録媒体の構成として、
（１）入力画像データをＡ／Ｄ変換処理したベースバンド画像信号又はその画像信号に所定の帯域圧縮処理を施した情報信号から検出された特性信号の所定区間における信号と、
（２）上記特性信号を基準にして、上記所定区間における信号に対して所定の距離演算処理が行われて得た演算結果に応じて上記所定区間における信号と一対一に対応して生成された第１の識別情報信号又は上記第１の識別情報信号に関連して生成された第２の識別情報信号と
が記録されている。
【００２７】
本発明は、以上の構成により、ある所定時点における映像信号や映像信号を圧縮処理した信号から検出する所定の特性信号またはその特性信号から生成する特性ベクトルを特性信号とする。
【００２８】
上記の所定時点の特性信号を基準に考え、特性信号を検出した第１のメモリーに記憶されているデータとベクトル距離演算などの所定の演算処理を行ない、その演算最小値を検出するなどにより、上記所定時点の映像シーンと類似性があると思われる第１のメモリーに記憶されている特性信号に対応する映像シーンの部分を候補として検出する。
【００２９】
検出された部分とその演算値を所定の設定しきい値と比較し、所定範囲内であれば、類似画像検出が行われたとし、特性信号メモリー系と一対一に対応し所定の識別情報データが記憶されている識別情報データメモリー系に記憶されている所定の類似画像分類であることを示す識別情報データを、演算処理を行った映像信号に割り当てる。
【００３０】
上記演算値が設定しきい値内にない場合は、識別情報データメモリー系に記憶されている識別情報データ値の最大値を検出し、それよりも大きいデータ値または、識別情報データメモリー系に記憶されていない新たな識別情報データ値を生成し、そのデータ値が所定の最大値を超えた場合はデータ値を０とし、映像信号に割り当てる。
【００３１】
映像信号を記録する際に、上記の割り当てられた識別情報データも記録できるように所定の信号処理を行う。
【００３２】
後の映像シーン時点で上記のような演算処理を行う前に、特性データメモリー系および識別情報データメモリー系に記憶されている記憶データを順次、所定の記憶領域に移動することで、順次新しいデータが記憶できるように動作を行い、上記のような所定の演算処理、および所定の識別情報データ処理を繰り返し行う。
【００３３】
【発明の実施の形態】
以下、本発明に係る情報信号処理装置、情報信号処理方法、情報信号記録装置および情報信号記録媒体の実施の形態について図を用いて以下の順序で説明する。
（１）本発明の動作原理
（２）本発明の処理による放送番組における識別情報データ値の特性例
（３）本発明による画像分類処理系ブロック構成例
（４）本発明を適用した記録再生装置ブロック構成例
（５）本発明の動作フローチャートの一例
【００３４】
（１）本発明の動作原理
（類似画像の分類整理方法の概念）
図１は本発明の画像シーン分類処理法を説明するための概念図である。図１（１）は本発明における情報信号の１つである画像(映像)信号としての画像系列ａ１、ａ２、ａ３、ａ４、ａ５、………であり、例えば画像ａ１、ａ２、ａ７、ａ８、ａ１５、ａ１６は各々類似している画像と仮定する。
【００３５】
例えば、図１（１）の画像系列を簡単のため放送番組におけるニュース映像とすると、一般的にニュース番組ではアナウンサーやニュースキャスターの映像シーンの後にニュース映像が続く確率が高く、上記で述べた、類似画像ａ１、ａ２、ａ７、ａ８、ａ１５、ａ１６はアナウンサーやニュースキャスターの登場シーンと想定できる。
【００３６】
ここで、図１（１）の画像系列を入力画像として記録媒体に記録すると同時に記録する画像シーンを類似画像毎に分類することを考える。
【００３７】
図１（２）は、記録する画像シーンを類似画像毎に分類したことを示す概念図であり、各々シーンＡ、Ｂ、Ｃ、Ｄ毎に画像が類似画像として分類されていることを示している。
【００３８】
例えば、図１（２）のシーンＡの分類ではａ１、ａ２、ａ７、ａ８、ａ１５、ａ１６、……… などの画像が分類されており、これらの画像は上記で述べたアナウンサーやニュースキャスターの登場シーンである。
【００３９】
そして、このＡシーンとして捉えた画像の中で、このＡシーンに類似した画像が続く先頭画像ａ１、ａ７、ａ１５に対して本発明における識別情報信号として使用される識別情報データａを付与して再生の際の画像抽出の識別に用いる。
【００４０】
同様に、シーンＢの分類はニュース番組におけるニュース映像の類似シーンａ３、ａ４、ａ１１、……などが分類され、類似部分の先頭画像に識別情報データｂが付与されていることを示しており、シーンＣの画像分類は類似シーンａ５、ａ６、ａ１３、………などの画像が分類され、類似部分の先頭画像に識別情報データｃが付与されていることを示し、シーンＤの分類は類似画像シーンａ９、ａ１０、ａ１９、………などの画像が分類され、類似部分の先頭画像に識別情報データｄが付与されていることを示している。
【００４１】
分類の時間的な基準は、記録や再生動作開始時を基準にしたり、例えば放送番組のプログラム毎に、そのような時間の基点を設定しても良い。
【００４２】
（画像分類表示法の一例）
図２は、上記で説明した図１（２）の分類をモニターで表示した場合の概念図であり、類似画像のＡ〜Ｈの８画像系列が水平方向に整理されていることが分かる。
【００４３】
図２（１）の例では、表示する垂直方向の画像系列（Ａ〜Ｈ）の数および水平方向の類似検出画像（１〜８）の数は、共に８であるが、この数はこれよりも多くしても少なくしても良く、例えば、動作開始時に初期設定として８で表示するようにし、ユーザーの設定により可変できるようにしても良い。
【００４４】
この図２（１）に示す表示モードは、分類された類似画像の出現頻度の大きい画像シーンを、より上段に表示することができ、ユーザーはより効果的に効率良く画像シーンの内容を把握することができる。
【００４５】
なお、図２（１）の画像系列は右側に行くほど時間的に新しい画像にしても、左側にいくほど時間的に新しい画像にしても良く、どちらの方向が時間的に新しいかをユーザーに知らせるために、画面の最上部や最下部、または各画像に、検出順番を示す番号や、場合によっては、タイムコードや再生開始時間などを表示するようにしても良い。
【００４６】
タイムコードは、記録媒体に記録された信号を再生する場合は所定の信号から容易に検出することが可能で、また再生開始時間は、後の記録再生ブロック構成例で示すシステムコントローラーなど所定の信号処理ブロックにより容易に検出することができる。
【００４７】
図２（２）に示す画像系列の表示モードの例は、例えば、図２（１）の表示モードにおける画像系列Ａの１〜８の各画像シーンを含む所定区間を表示したものである。
【００４８】
図２（２）における１列の垂直方向の系列（Ａ〜Ｈ）は、例えば、図２（１）の最上段の最も分類出現頻度が多いと検出された画像系列で、水平方向１〜８は、この図２（１）の最上段における画像系列Ａの１〜８の各画像を含む所定区間の画像シーンを表示している。
【００４９】
以上のような分類整理を、放送番組などを記録媒体に記録する際に、ほぼ実時間で処理を行い、その分類処理に応じた識別情報データａ、ｂ、ｃ、ｄなどを記録媒体に記録し、再生時に放送番組の再生と共にその識別情報データａ、ｂ、ｃ、ｄなどを検出することで、すぐに画像分類の表示を行うことができ、これにより記録した内容が効果的に、また効率良く短時間に把握することができる。
【００５０】
これにより、ユーザーは分類整理された画像を見て、見たいと思う画像シーンの系列を選択し、その系列の画像シーンを含む所定の時間区間を再生することで記録した放送番組を、従来以上に効果的に、効率良く、短時間でダイジェスト再生することができる。
【００５１】
（画像分類信号処理および識別情報データ生成法の概念）
図３は、画像分類信号処理および識別情報データ信号生成の信号処理方法の概念図であり、ここには、画像データから検出されたシーンＡ、Ｂ、Ｃ、Ｄなどに対応した特性信号として用いる特性データを本発明における第１メモリ手段により第１メモリ領域に記憶する図３(１)に示すメモリー系と、それに対応した識別情報データａ、ｂ、ｃ、ｄなどを本発明における第２メモリ手段により第２メモリ領域に記憶する図３(２)に示すメモリー系の２つがある。
【００５２】
各々のメモリー系は物理的に別々のメモリー系でも良く、また一つのメモリー系の記憶領域を各々の所定データが記憶できるように分割して使用するようにしても良い。
【００５３】
また、これらメモリー系は所定の制御信号に応じて所定の記憶領域に記憶した所定のデータが逐次所定の記憶領域に移動動作を行う逐次メモリー系または、リングバッファーメモリー系と同様の動作を行うメモリー系とする。
【００５４】
ここで、上記特性データは、入力画像データを所定のＡ／Ｄ変換処理したベースバンド画像信号または、その画像信号をＭＰＥＧ２やウェーブレット変換など所定の帯域圧縮処理を施した情報信号から検出することができる。
【００５５】
この帯域圧縮処理は、例えば、図４に示すように１画面をＬＬＬＬ〜ＨＨまでの７分割から、Ａ０〜Ａ６３の６４分割して、それぞれの分割領域における輝度信号や色差信号の平均データ、または圧縮処理された画像データで例えば、ＭＰＥＧ２のデータである場合は各々の分割領域におけるＤＣＴ(Discrete Cosine Transform)係数の平均データを用いることができる。
【００５６】
ここで、図４におけるＬＬＬＬ〜ＨＨなどは、図５に示すウエーブレット変換の概念図のＬＬＬＬ〜ＨＨなどと対応する多重解像度解析を示すものである。例えば、図５におけるＨｈ１は、画像データを水平方向に１回目のウエーブレット変換を行った場合のサブバンドの広域成分を表しており、Ｌｖ１は垂直方向に１回目のウエーブレット変換を行った場合のサブバンドの低域成分を表しており、その他も同様に考える。
【００５７】
ここで、例えば、図５から分かるように、Ｈｈ１−＞Ｈｖ１と処理された部分はＨＨと記述し、Ｌｈ１−＞Ｈｖ１と処理された部分はＬＨと記述し、その他のＬＬＬＬ〜ＨＨの記述もこれに倣って記述してある。
【００５８】
また、ウェーブレット変換データである場合は、各々の分割領域におけるウェーブレット変換係数の平均データや、ウェーブレット変換係数から求めた各々の分割領域における画像の所定しきい値以上のエッジ数を特性データとして考えることもできる。
【００５９】
ここでは、簡単のため、図３に示すように、特性データメモリー系は所定記憶領域dinおよび d1〜d16、識別情報データメモリー系は、所定記憶領域einおよびe1〜e16を設定するものとして説明するが、各々のメモリー系のメモリー容量はさらに大きく設定して良く、例えば、１分から３０分間における画像シーンの特性データ、識別情報データが記憶できるように設定する。
【００６０】
ここで、記憶する特性データは記録する放送番組に応じた毎フレーム毎の特性データとする必要はなく、例えば、シーンチェンジ検出を行い、シーンチェンジ毎の特性データとしたり、また所定フレーム毎、例えば１０フレーム間隔毎の特性データとすることも考えられる。
【００６１】
画像信号がＭＰＥＧで圧縮処理されている場合は、Ｉピクチャーにおける画像データやＭＰＥＧデータストリームにおける所定データとするなど、所定ピクチャー毎に処理することも考えられる。
【００６２】
このようにＭＰＥＧデータストリームでＩピクチャーなど特定のピクチャー毎に処理を行なう場合は、ＭＰＥＧデータストリームの所定の識別情報データを検出することで、所定の処理を行なうことができる。
【００６３】
識別情報データは記憶する特性データに対応するものを記憶するので、上記の特性データの記憶容量に応じて、識別情報データの記憶容量も変化する。
【００６４】
このように、毎フレーム毎の画像データの特性データを連続して記憶することなく、シーンチェンジ毎や所定フレーム間隔毎に応じて記憶することで、メモリーの記憶容量を削減することができる。
【００６５】
入力した画像データの特性データは、逐次、メモリー系の所定記憶領域 din に記憶され、所定記憶領域dinの特性データはすでに記憶されている記憶領域d0〜d16のデータと所定の演算処理が行われる。
【００６６】
ここで、所定の演算処理として、上記で述べた画面における各々の分割領域におけるデータを成分とする特性ベクトルを考え、ユークリッド距離または、その他のベクトル距離演算を考えることができる。
【００６７】
例えば、所定記憶領域dinに記憶された上記で述べた図４のような分割画面に対応するベクトル成分を、aｉ(ｉ= 0〜63）、特性データメモリー系２１のｎ記憶領域におけるベクトル成分をｂni(i = 0〜63)、とすると、ベクトル距離 L は、
L = (i=0Σ63｜ai - bni｜2 )1/2                        (1.1)
または、
L = (i=0Σ63｜ai - bni｜ )                            (1.2)
などのように演算することができる。
【００６８】
ここで、図３の例では、記憶領域d7におけるベクトル距離が最小 Lminで、所定のしきい値 Lth 以内であると仮定する。
Lmin  ≦  Lth                                         (1.3)
【００６９】
記憶領域d7に対応する記憶領域は記憶領域e7で、この記憶領域e7に記憶されている識別情報信号をdinの識別情報データに割り当てるものとする。
【００７０】
上記のように特性データの所定演算が終了して、識別情報データの割り当てが決まったら、記憶領域dinの特性データは、特性データメモリー系の記憶領域 d0に記憶領域を移動する。
【００７１】
記憶領域d1 に記憶されていた特性データは、記憶領域d2 の領域に移動し、記憶領域di に記憶されていた特性データは、記憶領域di+1 の領域に順次移動する。
【００７２】
同様に、割り当てが決まった識別情報データは記憶領域einに記憶されていたが、記憶領域e0の記憶領域に移動し、記憶領域e1 の記憶領域の識別情報データは記憶領域e2に移動し、記憶領域eiの識別情報データは、記憶領域ei+1 に順次移動する。
【００７３】
ここで、上記で説明した特性データの所定演算において、演算値 Lmin が所定しきい値の範囲にない場合、すなわち、
Lmin  >  Lth                                         (1.4)
の場合は、記憶領域e0〜e16 に記憶されている以外の識別情報データを割り当てるものとする。
【００７４】
通常は、簡単のため、識別情報データメモリー系に記憶されている記憶領域e0〜e16のデータの中から最大値を検出し、その最大値を１インクリメントし、それが所定最大値を超えない場合は、そのデータ値を新しい識別情報データ値とし、１インクリメントすることで所定最大値を超える場合は、０を新しい識別情報データ値として割り当てる。
【００７５】
その後の処理で、同じように所定最大値を超える場合は、新しく０を設定した値から順次１インクリメントしたデータ値を新しい識別情報データ値として割り当てる。
【００７６】
このように所定最大値を超えた場合に、新しく０設定したデータ値から１ずつインクリメントすることは、時系列的に考えれば、ここで設けたメモリー系の記憶容量よりも前の、古いデータを上書き、または捨てて新しいデータを順位割り当てることを意味している。
【００７７】
これは、放送番組などを処理対象とする場合に、あまり時間的に前の類似画像を検出して分類しても、見ている人の画像に対する記憶や印象が薄れて、分類処理してダイジェスト再生やスキミング動作、あるいは記録した内容の把握を目的とした動作に対して、あまり優位性が認められないであろうという仮定と、メモリー容量を大きくするより、ある程度の所定メモリー容量でシステムのコストを抑え所定の動作が行える方がユーザーに対して優位性が認められるであろうという仮定に基づいている。
【００７８】
例えば、記憶領域e0〜e16の記憶領域にはすでに、0000H 〜000FH（16進）の識別情報データが記憶されていて、上記（1.3) の条件の場合は、記憶領域d7の特性データには、0010Hの識別情報データを割り当てるものとする。
【００７９】
次の演算処理を行なう映像シーンでの識別情報データの割り当てが、所定しきい値より大きく、(1.4)の条件の場合は、上記で述べたように、記憶領域e0〜e16における最大値は、000FHと仮定しているので、１インクリメントした、0010Hを割り当てるように処理を行う。
【００８０】
ここで、識別情報データの割り当てがFFFFHでいっぱいになった場合は、0000Hに戻るものとする。
【００８１】
そして、前記したように、この0000Hから順次、１インクリメントするように識別情報データ値を割り当てるように動作を行う。
【００８２】
このように割り当てられた 記憶領域einの識別情報データを、記録する画像シーンのデータと共に所定記録媒体に記録し、再生時に検出を行うことで、同じ識別情報データの映像シーンは、複雑な信号処理や長い処理時間を待つことなく、すぐに類似画像であると判定できる。
【００８３】
上記の例では識別情報データを 0000Hのように２バイトで説明したが、これに限ることなく、さらに多くの識別情報データを設定できるようにしても良い。
【００８４】
特性データ記憶領域および識別情報データ記憶領域の容量が少なく、設定する識別情報データのバイト数が小さいと、類似画像でないにもかかわらず、同じ識別情報データが割り当てられる確率が高くなるので、類似画像検出の頻度を考慮してメモリー容量および識別情報データのバイト数を設定する必要がある。
【００８５】
（識別情報データ折り返り処理の説明）
図６は、識別情報データが順次増加し、最大値を超える場合の処理法を説明するための概念図である。
【００８６】
上記で説明したように、上記(1.4)式に示すように所定しきい値の範囲にない場合は、識別情報データメモリー系に記憶されているデータの最大値を検出し、１インクリメントして割り当てることになるが、図６の区間Ａｎに示すｂ点のようにFFFFHと識別情報データがいっぱいになった場合は、区間Ａｎでない区間Ａｎ＋１における最大値のｄ点を検出して１インクリメントする必要がある。
【００８７】
そのため、例えば、図６に示すように区間Ａｎと区間Ａｎ＋１のように区間を識別する区間識別データＰを設定し、識別情報データ値がいっぱいになり、データ値をリセットする毎に区間識別データＰが変化することを考える。
【００８８】
図６の例では、簡単のため、区間識別データＰの設定値として、０、１が交互に変化するようにしてあり、識別情報データ値がいっぱいになりFFFFHを超えて、設定すべき識別情報データ値を折り返す必要がある場合は、その折り返す前の区間の識別情報データの最大値は、動作初期区間Ａ０の場合を除き、FFFFHになるので、前記した条件式（1.4）の場合で類似画像検出が行なえず、識別情報データを新たに設定する場合も問題なく所定の信号処理を行なうことができる。
【００８９】
（メモリー記憶容量の一例）
ここで、識別情報データのメモリー容量を考えてみる。放送番組などの映像シーンを記録することを考えた場合に、特別な場合を除き、頻繁にシーンチェンジが起きる確率はあまり高くないと想定できるので、例えば、３０フレーム毎秒の画像を１０フレーム毎に特性データを記憶し、所定の演算を行うと仮定する。
【００９０】
また、類似画像が出現する時間間隔は、長い時間がたった後に出現する確率はあまり大きくないと仮定し、３０分間位の間で類似画像検出を行うことを考える。
【００９１】
例えば、１０フレーム毎にシーンチェンジが起こり、新しい識別情報データを割り当てると仮定するし、３０分では、
30（分）× 60（秒）× 10（フレーム／秒）= 18000
なので、前記した２バイトの識別情報データでも十分対応できることが分かり、識別情報データ折り返りのための識別データ区間を２つ設定すると仮定すると、識別情報データメモリー系２４の記憶容量は、高々、
18000 × 2（バイト）× 2（区間） ＝ 70.3（KByte）
となる。
【００９２】
また、特性データの記憶容量は、例えば、前記したように６４次のベクトル成分を考え、１成分１バイトとすると、３０分では、
18000 × １（バイト）× 64（成分）=  1.1（MByte)
となる。
【００９３】
上記で計算したメモリー容量は、画像分類演算の間隔をさらに広げれば、もっと少ないメモリー容量で対応できることが分かる。
【００９４】
（２）本発明の処理による放送番組における識別情報データ値の特性例
図７は、ある放送番組を本発明の処理により画像分類した場合の時系列的なフレーム番号に対する割り当てられた識別情報データ値の特性である。
【００９５】
図７において（ａ）または（ｂ）のように同じ識別情報データが太線で水平方向に延びて各フレーム毎に継続する場合は、それに対応するフレーム番号の映像シーンは類似画像として分類される。
【００９６】
そして、類似画像が検出されない場合は、図６に示す右上がりの太線で示す通り時間が経過すると共に識別情報データ値が増加するようになる。
【００９７】
また、図８は図７の識別情報データに対する出現頻度の特性で、（ｂ）の700が一番出現頻度（割り当て頻度）が大きく、（ａ）の０が２番目に大きいことがわかる。
【００９８】
（３）本発明による画像分類処理系ブロック構成例
図９は、前記した画像分類処理法による本発明の画像分類処理系でのブロック構成例である。
【００９９】
本発明における特性信号検出手段として機能する特性データ検出系２０には、Ａ／Ｄ変換された情報信号としての所定の画像データ、または所定の帯域処理が施されたＭＰＥＧ２などの画像データが入力し、所定の特性信号として特性データが検出される。
【０１００】
特性データ検出系２０からの信号は図３(１)に示すような第１のメモリー領域を有する特性データメモリー系２１に入力され、第１メモリー手段により所定の記憶領域に記憶される。
【０１０１】
演算処理系２２は、この特性データメモリー系２１に記憶されているデータと、逐次、検出される特性データとを用いてベクトル距離演算など所定の演算処理を行って、その演算結果をシステムコントローラー１７に出力する。
【０１０２】
また、システムコントローラー１７は、特性データメモリー系２１に格納されている特性データと、識別情報データ生成系２３で生成され図３(２)に示すような本発明における第２のメモリー領域を有する識別情報データメモリー系２４に、第２メモリー手段により記憶された識別情報データとを、順次、前記で説明したように、所定の記憶領域に移動するように制御する。
【０１０３】
これにより、逐次検出される特性データは、新しく特性データメモリー系２１に記憶されることになる。
【０１０４】
システムコントローラー１７では演算処理系２２からの信号を受け取り、所定しきい値の範囲にあるか判定し、所定しきい値の範囲にある場合は、上記所定演算最小値が得られた特性データメモリー系２１のデータに対応した、特性情報データメモリー系２４に記憶された識別情報データを読み出し、演算処理を行った画像シーンの識別情報データとして割り当て出力する。
【０１０５】
また、演算処理系２２からの演算値が所定しきい値の範囲にない場合は、識別情報データメモリー系２４に記憶されている識別情報データ値の最大値を検出し、そのデータ値を１インクリメントし、それが所定最大値を超えない場合は、新しい識別情報データ値とし、１インクリメントすることで所定最大値を超える場合は、０を新しい識別情報データとし、以後の処理で同様にしきい値を超える場合は、この０から順次１ずつインクリメントしたデータを新しい識別情報データとして割り当て出力する。
【０１０６】
（４）本発明を適用した記録再生装置ブロック構成例
（記録処理系の説明）
図１０は本発明を適用し、映像(画像)／音声データに対してエンコード或いはデコードを施したときの情報信号記録再生装置のブロック構成例である。先ず始めに、記録処理系について説明する。
【０１０７】
入力した音声信号は音声信号Ａ／Ｄ変換処理系１において所定のＡ／Ｄ変換処理がなされ、音声エンコーダー処理系２でＭＰＥＧオーディオなど所定の帯域圧縮処理が行われ多重化処理系６に入力する。
【０１０８】
映像信号は、映像Ａ／Ｄ変換処理系３で所定のＡ／Ｄ変換処理が行われ、映像エンコーダ処理系４ではＭＰＥＧ２など所定の帯域圧縮処理が行われ多重化処理系６に出力される。
【０１０９】
画像／音声分類処理系５は、図９においてシステムコントローラ１７を除き音声データが入力される構成と同様なブロック構成であり、映像Ａ／Ｄ変換処理系３からの信号または映像エンコーダー処理系４からの信号と共に音声エンコーダ処理系２からの信号が入力され、記録する放送番組などの映像シーンに対して、記録時に自動的に所定の分類整理、識別処理を行い、本発明における第１の識別情報データを生成して次の多重化処理系６に出力する。
【０１１０】
この識別情報データは、点線で示すように、システムコントローラー１７を介して生成するようにしても良く、この場合はシステムコントローラー１７の制御によりまたはシステムコントローラー１７において生成された本発明における第２の識別情報データとして多重化処理系６に入力する。
【０１１１】
多重化処理系６では、入力した各々の信号に対して所定の多重化処理を行い、さらにこれ等に対して記録処理系７において誤り訂正符号付加やインターリーブ処理など所定の記録処理を施し、本発明における記録手段により識別情報データも含めて所定の記録媒体系８に各々の信号を記録する。
【０１１２】
（再生処理系の説明）
次に再生処理系について説明する。所定の記録媒体系８から再生された情報信号は、再生処理系１０でデインターリーブ処理など所定の処理が行われた後、再生データ分離処理系１１に出力されて、記録時に多重化処理された所定の信号を各々分離処理される。
【０１１３】
分離処理された音声信号は音声デコード処理系１２に出力され、記録時に所定の圧縮処理された音声データがデコード処理され、その後  デコード処理された音声データは、次の音声Ｄ／Ａ処理系１３に入力されて所定のＤ／Ａ変換処理が行われて音声信号で出力される。
【０１１４】
分離処理された映像信号は、映像デコード処理系１４に出力され、記録時に所定の圧縮処理が行われた映像データをデコード処理され、デコード処理された映像データは次の映像Ｄ／Ａ変換処理系１５に出力されて所定のＤ／Ａ変換が行われた後、映像(画像)信号で出力される。
【０１１５】
また、分離処理された所定の識別情報データは、識別信号検出系１６に入力され、ダイジェスト再生やスキミング再生処理に必要な識別情報データが検出されてシステムコントローラー１７に出力される。
【０１１６】
ダイジェスト再生やスキミング再生など所定の特殊な再生動作を行いたい場合には、ユーザーはユーザー入力インターフェース（Ｉ／Ｆ）系１８を介して、システムコントローラー系１７にコマンド入力を行う。
【０１１７】
システムコントローラー１７は、ユーザーからのコマンド情報を受け取り、再生制御系９を制御し、分類処理された画像系列の中からユーザーが所望する画像系列の再生が行われるように、記録媒体系８からの再生を制御する。
【０１１８】
（５）本発明の動作フローチャートの一例
図１１は本発明における画像データから記録媒体への記録までの全体の動作を説明する動作フローチャートの一例である。ステップＳ０ からスタートし、ステップＳ１において、前記したように、識別情報データ値がいっぱいのＦＦＦＦＨになって設定データを折り返した場合のメモリー区間識別のために、区間識別データＰを設けておき、その初期設定Ｐ＝０を行い、ステップＳ２で、画像情報データを入力して、ステップＳ３で特性データ検出系２０により特性データを検出する。
【０１１９】
ステップＳ４において、上記検出した特性データから特性ベクトルを生成して、後のベクトル距離演算のため、ステップＳ５において特性データ用の所定のバッファメモリー領域に一時的に記憶する。
【０１２０】
ステップＳ６は後で図１２で詳細に説明する特性データ演算処理ルーチンで、演算処理系２２により、上記ステップＳ５のバッファメモリーに記憶されている特性ベクトルのデータを読み出し、これを基準ベクトルとして特性データメモリー系２１に記憶されているデータと所定の演算を行う。
【０１２１】
ステップＳ６で演算処理系２２により所定の演算処理が行われ、所定の識別情報データが、ステップＳ７において演算を行った基準ベクトルに対応する画像シーンに割り当てられて、システムコントローラ１７の制御の基に、ステップＳ８でその識別情報データは、識別情報データメモリ系２４の識別情報データ用のバッファメモリー領域に、一時的に記憶される。
【０１２２】
その後、ステップＳ９では、所定の圧縮処理を施された音声データ、画像データに対して多重化処理系６により所定の多重化処理が行われ、記録処理系７により、ステップＳ１０において記録媒体系８における所定の記録媒体に記録されるように、所定の記録処理が施される。
【０１２３】
ステップＳ１１では、動作を停止するかどうかの判定がなされ、停止する場合はステップＳ１３において、動作を終了し、動作を継続する場合は、ステップＳ１２に移行し、特性データ用バッファーメモリー領域に記憶されているデータと特性データメモリー系２１に記憶されている各データは所定のメモリー記憶領域に順次移動する。
【０１２４】
同様に、識別情報データ用バッファーメモリー領域に記憶されていたデータと識別情報データメモリー系２４に記憶されているデータも各データが所定のメモリー記憶領域に移動する。
【０１２５】
ステップＳ１２で特性データおよび識別情報データが所定のメモリー記憶領域移動を行った後、ステップＳ２ に戻り上記で述べた動作を繰り返す。
【０１２６】
（特性データ演算処理のフローチャート）
次に、演算処理系２２によって実行されるステップＳ６における特性データ演算処理のフローチャートについて説明する。図１２は、その動作フローチャートの一例であり、ステップＴ１で特性データメモリー系２１のメモリー領域番号と対応した演算回数の初期設定ｉ＝０を行う。
【０１２７】
ステップＴ２は、識別情報データの識別値の初期設定 ｎ＝０ を行い、ステップＴ３ では特性データメモリー系２１の、すべての領域におけるデータと所定の演算処理が終了したかどうかの判定が行われる。
【０１２８】
ステップＴ３でＮＯの場合は、まだ特性データメモリー系２１すべてのデータと演算処理が終了していないので、これ以降の所定のベクトル距離演算ループに移行する。
【０１２９】
ステップＴ４では、特性データメモリー系２１から、メモリー領域ｉの所定の特性データベクトルを読み出し、ステップＴ５において所定の演算処理を行い、その演算値（ベクトル距離演算値）をＧｉとする。
【０１３０】
ステップＴ６において、演算値の最小値を求める処理を行うための初期値設定値を行うため、一番最初 ｉ＝０の演算値であるかどうかが判定され、ステップＴ７で最小値を求めるための初期設定Gmin= G0を行う。
【０１３１】
ステップＴ６で、一番最初の演算ではないと判定される場合は、ステップＴ９に移行し、演算値Giが、前の演算値Gminより小さいかの判定が行われ、ＹＥＳの場合はステップＴ１０においてGminを今の演算値Giで置き換えると共に、ステップＴ１１で識別情報データ値ｎを置き換えて ｎ＝ｉ として、ステップＴ８に移行する。
【０１３２】
ステップＴ６において、ＮＯの場合には、演算値は置き換えず、次のデータ演算を行うため、ステップＴ８に移行し特性データメモリー系のデータ読み出し領域を移動し、ｉを１インクリメントしてステップＴ３に戻り処理を繰り返す。
【０１３３】
ステップＴ３において、特性データメモリー系すべての所定領域との演算が終了したと判定された場合は、演算の結果の最小演算値が求まっているので、 ステップＴ１２でそれが所定の設定しきい値Ｇth以内かどうかの比較処理が行われる。
【０１３４】
ステップＴ１３において、所定しきい値以内と判定される場合は、上記で説明した演算処理ループで求まった識別情報データ値ｎが、演算処理を行った映像シーンに対応する識別情報データ値となり、前記したステップＳ７の処理に移行し、識別情報データ値として割り当てられる。
【０１３５】
ステップＴ１３ においてＮＯの場合は、所定しきい値以内でないので、後の図１３で詳細に説明するステップＴ１４ に移行し、識別情報データメモリー系２４に記憶されているデータ値の最大値nmaxを算出する。そしてステップＴ１５では、ステップ１４で算出された最大値 nmax を１インクリメントした値を新しい識別情報データ値ｎとする。
【０１３６】
ステップＴ１６では、新しく設定された識別情報データ値ｎが、所定値の範囲である、ＦＦＦＦＨに収まっているかの判定がなされ、ＹＥＳの場合は、前記したステップＳ７に移行して、演算処理を行った映像シーンに対応する識別情報データ値となり、識別情報データ値として割り当てられる。
【０１３７】
ステップＴ１６でＮＯの場合は、割り当てようとする識別情報データの値が、許容値を超えるので、ステップＴ１７において一度ゼロクリアして識別情報データ値として割り当てることになり、ステップＴ１８でこのゼロクリアして設定したメモリー区間の区間識別データＰを、識別情報データ値の最大値がＦＦＦＦＨとなったメモリー区間の区間識別データＰが１の場合は０を、０の場合は１となるように反転して設定する。
【０１３８】
（識別情報データメモリー系記憶データの最大値算出処理Ｔ１４）
次に、上記で述べた、ステップＴ１４の識別情報データメモリー系２４に記憶されているデータの最大値をシステムコントローラ１７により算出する処理フローチャートについて図１３に示すフローチャートにより説明する。
【０１３９】
図１３において、ステップＡ１で、区間識別データＰの処理回数の初期設定ｊｐ＝１ とし、最大値算出の初期値として、ステップＡ２においてｊ＝０における識別情報データ値ｎ０を設定する。
【０１４０】
ステップＡ３で、処理回数が、識別情報データメモリー系２４の記憶領域の個数を超えないかどうかの判定がなされ、ＹＥＳの場合はステップＡ４に移行して、今までの処理における最大値ｎｍａｘと比較し、大きか小さいかの判定処理を行う。
【０１４１】
ステップＡ４でＹＥＳと判定された場合は、ステップＡ５でｎｍａｘをｎｊｐに置き換え、ステップＡ６で処理回数を１インクリメントし、ステップＡ３に戻り、処理を繰り返す。
【０１４２】
ステップＡ３でＮＯと判定された場合は、区間識別データＰでの識別情報データメモリー系２４の記憶領域すべてを比較し最大値が算出されたので、ステップＡ７において検出された最大値ｎｍａｘが、許容されている最大のＦＦＦＦＨと等しいかの判定がなされ、ＮＯの場合は、算出最大値として処理を終了し、前記した、ステップＴ１５に移行する。
【０１４３】
ステップＡ７でＹＥＳの場合は、ステップＡ８に移行し、区間識別データＰを反転し、異なるメモリー区間における最大値検出するため、ステップＡ１に戻り、最大値検出の処理をもう一度行なう。
【０１４４】
【発明の効果】
以上、説明したように、本発明に係る情報信号処理装置、情報信号処理方法並びに情報信号記録装置により、放送番組などを記録する際に、自動的に画像シーンの分類、インデキシング処理が行われ、記録処理終了後、すぐに再生動作を行う場合でも、画像シーンの分類整理などの処理時間を待つことなく直ちに記録した画像シーンを所定の分類により表示することができる。
【０１４５】
これによりユーザーは、記録した放送番組などの内容を、効果的にまた効率的に画像シーンを見て確認することができ、容易に自分の見たいと思う画像シーンを選択して効果的に、効率的にダイジェスト再生を行うことができる。
【０１４６】
また、本発明に係る情報信号記録媒体によれば、所定の情報信号から検出された特性信号の所定区間における信号と識別情報信号とをソフト的に記録しておくだけのわずかなメモリーを用いる比較的簡単な記録構成なので、安価で効果的に画像などを格納し、再生させることができる。
【０１４７】
さらに、本発明に係る情報信号記録媒体には、所定画像シーンの出現頻度に応じた分類整理に対応する識別情報信号が既に記録されているので、情報信号記録媒体から再生し識別情報信号を検出することにより、新たな画像シーンの分類整理処理を行うことなく、容易に効果的なダイジエスと再生や所望の画像シーンの検などを、再生開始の後にすぐに行うことができる。
【図面の簡単な説明】
【図１】本発明の画像シーンの分類処理の動作原理を説明する説明図であり、（１）図は入力画像の画像系列を示す概念図、(２)図は類似画像毎に分類することを示す概念図である。
【図２】本発明による画像分類表示の概念を示す概念図であり、（１）図は第１の表示モードを示す概念図、(２)図は第２の表示モードを示す概念図である。
【図３】本発明の動作原理を説明する説明図であり、（１）図は特性データの演算処理を示す説明図、(２)図は識別データを割り当てる処理を示す説明図である。
【図４】画面分割による特性データ（特性ベクトル）生成の説明図である。
【図５】ウエーブレット変換の概念を示す概念図である。
【図６】識別情報データ値の折り返り処理方法を説明する説明図である。
【図７】本発明による識別情報データ値の時系列特性の一例を説明する説明図である。
【図８】本発明による識別情報データ値の頻度特性の一例を説明する説明図である。
【図９】本発明の画像分類処理系の実施態様を示すブロック構成の一例を説明する構成図である。
【図１０】本発明の記録再生装置の実施態様を示すブロック構成の一例を説明する構成図である。
【図１１】本発明における画像データの入力から記録までの全体の動作を示すフローチャートの一例を説明する構成図である。
【図１２】本発明の特性データの算出処理を示すフローチャートの一例を説明する構成図である。
【図１３】本発明の識別情報データの最大値を算出処理する動作フローチャートの一例を説明する構成図である。
【符号の説明】
１：音声Ａ／Ｄ変換処理系、  ２：音声エンコーダー処理系、
３：映像Ａ／Ｄ変換処理系、  ４：映像エンコーダー処理系、
５：映像分類処理系、  ６：多重化処理系、  ７：記録処理系、
８：記録媒体系、  ９：再生制御系、  １０：再生処理系、
１１：再生データ分離処理系、  １２：音声デコード処理系、
１３：音声Ｄ／Ａ処理系、  １４：映像デコード処理系、
１５：映像Ｄ／Ａ処理系、  １６：識別信号検出系、
１７：システムコントローラー、  １８：ユーザー入力Ｉ／Ｆ系、
２０：特性データ検出系、  ２１：特性データメモリー系、
２２：演算処理系、  ２３：識別情報データ生成系、
２４：識別情報データメモリー系
【図１】
0004453204.tif 000002
【図２】
0004453204.tif 000003
【図３】
0004453204.tif 000004
【図４】
0004453204.tif 000005
【図５】
0004453204.tif 000006
【図６】
0004453204.tif 000007
【図７】
0004453204.tif 000008
【図８】
0004453204.tif 000009
【図９】
0004453204.tif 000010
【図１０】
0004453204.tif 000011
【図１１】
0004453204.tif 000012
【図１２】
0004453204.tif 000013
【図１３】
0004453204.tif 000014