(57)【要約】　　　（修正有）【課題】ＤＶＤソフトなど画像音声信号が記録されている記録媒体を所定の装置に装着して再生を行なう場合に、その記録媒体の内容をできるだけ効率良くダイジェスト再生を行なうための信号処理技術を提供する。【解決手段】情報信号処理装置は、第１の記録媒体をその記録媒体であると判定する記録媒体判定手段と、第１の記録媒体を再生する第１の再生手段と、再生される信号から特性信号を検出する特性信号検出手段と、特性信号検出手段から識別信号を生成する識別信号生成手段と、その識別信号を第２の記録媒体に記録する識別信号記録手段と、第２の記録媒体から所定の識別信号を再生する第２の再生手段と、第２の再生手段からの信号に応じて第１の再生手段を再生制御する再生制御手段と、を備えたことである。【選択図】　図１
2004040629.tif 000002
【特許請求の範囲】
【請求項１】
所定の情報信号が予め記録されている第１の記録媒体を所定の状態に設置又は所定の動作状態にした場合にその記録媒体であると判定する記録媒体判定手段と、
上記第１の記録媒体からその情報信号を再生する第１の再生手段と、
上記第１の再生手段から再生される信号から上記情報信号の所定の特性信号を検出する特性信号検出手段と、
上記特性信号検出手段からの信号に応じて所定の識別信号を生成する識別信号生成手段と、
上記識別信号生成手段からの識別信号が、上記第１の記録媒体における識別信号であることが識別できるように、その識別信号を第２の記録媒体又は上記所定の情報信号が予め記録されている記録領域とは異なる第２の記録領域に記録する識別信号記録手段と、
上記第１の記録媒体が所定の状態又は所定の動作状態に置かれた場合に、上記識別信号記録手段によりその記録媒体であると認識し、上記第２の記録媒体又は上記第２の記録領域から上記所定の識別信号を再生する第２の再生手段と、
上記第１の記録媒体が所定の状態又は所定の動作状態に置かれた場合に、上記記録媒体判定手段によりその記録媒体であると判定し、上記第２の再生手段からの信号に応じて上記第１の再生手段を再生制御する再生制御手段と、
を備えたことを特徴とする情報信号処理装置。
【請求項２】
上記情報信号は、画像信号及び／又は音声信号である請求項１に記載の情報信号処理装置。
【請求項３】
上記特性信号は、上記情報信号が所定の圧縮処理を施されている信号の場合には、圧縮信号帯域における所定の特性信号である請求項１に記載の情報信号処理装置。
【請求項４】
上記再生制御手段は、上記第１の記録媒体をダイジェスト再生制御する請求項１に記載の情報信号処理装置。
【請求項５】
所定の情報信号が予め記録されている第１の記録媒体を所定の状態に設置又は所定の動作状態にした場合にその記録媒体であると判定し、
上記第１の記録媒体からその情報信号を再生し、
上記第１の記録媒体から再生される上記情報信号の所定の特性信号を検出し、
検出した上記特性信号に応じて所定の識別信号を生成し、
上記識別信号の生成が、上記第１の記録媒体における識別信号であることが識別できるように、その識別信号を所定の第２の記録媒体又は上記所定の情報信号が予め記録されている記録領域とは異なる第２の記録領域に記録し、
上記第１の記録媒体が所定の状態又は所定の動作状態に置かれた場合に、上記識別によりその記録媒体であると認識し、上記第２の記録媒体又は上記第２の記録領域から上記所定の識別信号を再生し、
上記第１の記録媒体が所定の状態又は所定の動作状態に置かれた場合に、上記記録媒体識別によりその記録媒体であると判定し、上記識別信号の再生に応じて上記第１の記録媒体からの情報信号の再生を制御する、
ことを特徴とする情報信号処理方法。
【請求項６】
上記情報信号は、画像信号及び／又は音声信号である請求項５に記載の情報信号処理方法。
【請求項７】
上記特性信号は、上記情報信号が所定の圧縮処理を施されている信号の場合には、圧縮信号帯域における所定の特性信号である請求項５に記載の情報信号処理方法。
【請求項８】
上記第１の記録媒体からの情報信号の再生を制御するのは、上記第１の記録媒体を所定のダイジェスト再生を制御することである請求項５に記載の情報信号処理方法。
【請求項９】
所定の情報信号が予め記録されている第１の記録媒体を所定の状態に設置又は所定の動作状態にした場合にその記録媒体又はその情報信号であると判定する記録媒体判定手段と、
その所定の情報信号又は上記第１の記録媒体又は所定の情報信号を再生処理した回数を計測する計測手段と、
上記第１の記録媒体から所定の特殊再生用情報信号が生成されているかを判定する判定手段と、
上記計測手段又は上記判定手段からの信号に応じて上記特殊再生用情報信号の処理状態、その記録媒体の再生状況などを表示する表示手段と、
を備えたことを特徴とする情報信号表示装置。
【請求項１０】
所定の情報信号が予め記録されている第１の記録媒体を所定の状態に設置又は所定の動作状態にした場合にその記録媒体であると判定し、
その所定の情報信号又は上記第１の記録媒体又は所定の情報信号を再生処理した回数を計測し、
上記第１の記録媒体から所定の特殊再生用情報信号が生成されているかを判定し、
上記計測又は上記判定に応じて上記特殊再生用情報信号の処理状態、その記録媒体の再生状況などを表示する
ことを特徴とする情報信号表示方法。
【請求項１１】
所定の情報信号から所定の時系列的に所定の特性信号を生成する特性信号生成手段と、
上記特性信号生成手段からの信号を逐次所定の記憶領域に記憶する第１のメモリー手段と、
上記情報信号における所定の動的情報信号を抽出する動的情報信号抽出手段と、
上記時系列毎に、その時系列時点における上記第１のメモリー手段に入力する特性データと上記第１のメモリー手段に既に記憶されているデータとの間で所定の演算を行う演算手段と、
上記動的情報信号抽出手段からの信号と上記演算手段の演算結果による信号に応じて、上記時系列の所定時点における上記情報信号に割り当てる所定の識別信号生成手段と、
上記識別信号生成手段からの信号を上記時系列に対応して所定の記憶領域に記憶する第２のメモリー手段と、
を備えたことを特徴とする情報信号処理装置。
【請求項１２】
上記情報信号は、所定の帯域圧縮処理が施された画像情報信号である請求項１１に記載の情報信号処理装置。
【請求項１３】
上記時系列は、上記情報信号がＭＰＥＧ信号の場合には、Ｉピクチャー毎の時系列である請求項１１に記載の情報信号処理装置。
【請求項１４】
上記動的情報信号は、上記情報信号がＭＰＥＧ信号の場合には所定画像における動きベクトルである請求項１１に記載の情報信号処理装置。
【請求項１５】
上記演算手段は、上記特性データを成分とする所定のベクトルを形成し、そのベクトルを用いた所定のベクトル距離演算、又はそのベクトルのスカラー、又はベクトルの成分を用いた所定の相関演算である請求項１１に記載の情報信号処理装置。
【請求項１６】
所定の情報信号から所定の時系列的に所定の特性信号を生成し、
上記特性信号を逐次所定の第１の記憶領域にメモリーし、
上記情報信号における所定の動的情報信号を抽出し、
上記時系列毎に、その時系列時点における上記第１のメモリーに入力する特性データと上記第１のメモリーに既に記憶されているデータとの間で所定の演算を行い、
上記動的情報信号抽出と上記演算の演算結果による信号に応じて、上記時系列の所定時点における上記情報信号に割り当てる所定の識別信号を生成し、
上記識別信号を上記時系列に対応して所定の第２のメモリーに記憶することを特徴とする情報信号処理方法。
【請求項１７】
上記情報信号は、所定の帯域圧縮処理が施された画像情報信号である請求項１６に記載の情報信号処理方法。
【請求項１８】
上記時系列は、上記情報信号がＭＰＥＧ信号の場合には、Ｉピクチャー毎の時系列である請求項１６に記載の情報信号処理方法。
【請求項１９】
上記動的情報信号は、上記情報信号がＭＰＥＧ信号の場合には所定画像における動きベクトルである請求項１６に記載の情報信号処理方法。
【請求項２０】
上記演算手段は、上記特性データを成分とする所定のベクトルを形成し、そのベクトルを用いた所定のベクトル距離演算、又はそのベクトルのスカラー、又はベクトルの成分を用いた所定の相関演算である請求項１６に記載の情報信号処理方法。
【発明の詳細な説明】
【０００１】
【発明の属する技術分野】
本発明はＤＶＤソフトなど画像音声信号が記録されている記録媒体を所定の装置に装着して再生を行なう場合に、その記録媒体の内容をできるだけ効率良くダイジェスト再生を行なうための信号処理技術、並びに映像信号、音声信号などの情報信号を光磁気ディスク、ハードディスク、半導体メモリーなどの記録媒体に記録する記録装置において、例えば、放送番組を記録して再生時にその番組内の指定した任意のシーンに類似したシーンを選択的に再生してスキミング動作を行い効率的に短時間で所望の内容を把握できる情報信号処理装置、情報信号処理方法、情報信号表示装置及び情報信号表示方法に関するものである。
【０００２】
【従来の技術】
従来技術において、初めてのソフトなどを再生する場合に、そのソフトの内容の概要を知りたいと思っても、数倍速再生でダイジェスト再生して、面白そうな又は所望の再生場面にきたならば通常再生するなどの手法しかなく、効果的な内容の効果的な確認手段が無い。
【０００３】
また、再生しようとする画像音声のダイジェスト再生用ＩＤが既に生成されていることを表示する信号処理装置及び信号処理方法も存在しない。
【０００４】
又、例えば、音声信号、映像信号からビデオ構造を解析し、ダイジェスト再生のような特殊再生を行う公知技術として、特表平１０−５０７５５５「デジタル・オーディオとビデオ・データを走り読みするための方法とそのシステム」、特開平１１−２３９３２２「ビデオブラウジング／ビューイングシステム」、特開２０００−５０２３３「放送型配信方法，その方法をコンピュータに実行させるためのプログラムを記録したコンピュータ読み取り可能な記録媒体およびビデオコンテンツを記録したコンピュータ読み取り可能な記録媒体」などがある。
【０００５】
【発明が解決しようとする課題】
しかしながら、上記説明した従来技術では、例えば、記録時に放送番組などをリアルタイムに画像シーンを分類処理し、所定のシーンＩＤを分類した画像に割り当てる、といった有効な技術がないという問題がある。
【０００６】
又、そのシーンＩＤを記録した記録媒体から特殊再生に利用し、ダイジェスト再生動作を行うこともできないという問題がある。
【０００７】
従って、上記のような観点からソフト再生を行なう場合に、効率良くダイジェスト再生を行なう信号処理技術に解決しなければならない課題を有する。
【０００８】
【課題を解決するための手段】
上記課題を解決するために、本願発明に係る情報信号処理装置、情報信号処理方法、情報信号表示装置及び情報信号表示方法は、次に示す構成にすることである。
【０００９】
（１）情報信号処理装置は、所定の情報信号が予め記録されている第１の記録媒体を所定の状態に設置又は所定の動作状態にした場合にその記録媒体であると判定する記録媒体判定手段と、上記第１の記録媒体からその情報信号を再生する第１の再生手段と、上記第１の再生手段から再生される信号から上記情報信号の所定の特性信号を検出する特性信号検出手段と、上記特性信号検出手段からの信号に応じて所定の識別信号を生成する識別信号生成手段と、上記識別信号生成手段からの識別信号が、上記第１の記録媒体における識別信号であることが識別できるように、その識別信号を第２の記録媒体又は上記所定の情報信号が予め記録されている記録領域とは異なる第２の記録領域に記録する識別信号記録手段と、上記第１の記録媒体が所定の状態又は所定の動作状態に置かれた場合に、上記識別信号記録手段によりその記録媒体であると認識し、上記第２の記録媒体又は上記第２の記録領域から上記所定の識別信号を再生する第２の再生手段と、上記第１の記録媒体が所定の状態又は所定の動作状態に置かれた場合に、上記記録媒体判定手段によりその記録媒体であると判定し、上記第２の再生手段からの信号に応じて上記第１の再生手段を再生制御する再生制御手段と、を備えたことである。
（２）又、上記情報信号は、画像信号及び／又は音声信号である（１）に記載の情報信号処理装置。
（３）上記特性信号は、上記情報信号が所定の圧縮処理を施されている信号の場合には、圧縮信号帯域における所定の特性信号である（１）に記載の情報信号処理装置。
（４）上記再生制御手段は、上記第１の記録媒体を所定のダイジェスト再生制御する（１）に記載の情報信号処理装置。
【００１０】
（５）情報信号処理方法は、所定の情報信号が予め記録されている第１の記録媒体を所定の状態又は所定の動作状態に設置した場合にその記録媒体であると判定し、上記第１の記録媒体からその情報信号を再生し、上記第１の記録媒体から再生される上記情報信号の所定の特性信号を検出し、検出した上記特性信号に応じて所定の識別信号を生成し、上記識別信号の生成が、上記第１の記録媒体における識別信号であることが識別できるように、その識別信号を所定の第２の記録媒体又は上記所定の情報信号が予め記録されている記録領域とは異なる第２の記録領域に記録し、上記第１の記録媒体が所定の状態又は所定の動作状態に置かれた場合に、上記識別によりその記録媒体であると認識し、上記第２の記録媒体又は第２の記録領域から上記所定の識別信号を再生し、上記第１の記録媒体が所定の状態又は所定の動作状態に置かれた場合に、上記記録媒体識別によりその記録媒体であると判定し、上記識別信号再生に応じて上記第１の記録媒体からの情報信号の再生を制御する、ことである。
（６）又、上記情報信号は、画像信号及び／又は音声信号である（５）に記載の情報信号処理方法。
（７）上記特性信号は、上記情報信号が所定の圧縮処理を施されている信号の場合には、圧縮信号帯域における所定の特性信号である（５）に記載の情報信号処理方法。
（８）上記第１の記録媒体からの情報信号の再生を制御するのは、上記第１の記録媒体を所定のダイジェスト再生を制御することである（５）に記載の情報信号処理方法。
【００１１】
（９）情報信号表示装置は、所定の情報信号が予め記録されている第１の記録媒体を所定の状態設置又は所定の動作状態にした場合にその記録媒体であると判定する記録媒体判定手段と、その所定の情報信号又は上記第１の記録媒体を再生処理した回数を計測する計測手段と、上記第１の記録媒体から所定の特殊再生用情報信号が生成されているかを判定する判定手段と、上記計測手段又は上記判定手段からの信号に応じて上記特殊再生用情報信号の処理状態、その記録媒体の再生状況などを表示する表示手段と、を備えたことである。
【００１２】
（１０）情報信号表示方法は、所定の情報信号が予め記録されている第１の記録媒体を所定の状態に設置又は所定の動作状態にした場合にその記録媒体であると判定し、その所定の情報信号又は上記第１の記録媒体を再生処理した回数を計測し、上記第１の記録媒体から所定の特殊再生用情報信号が生成されているかを判定し、上記計測又は上記判定に応じて上記特殊再生用情報信号の処理状態、その記録媒体の再生状況などを表示することである。
【００１３】
（１１）情報信号処理装置は、所定の情報信号から所定の時系列的に所定の特性信号を生成する特性信号生成手段と、上記特性信号生成手段からの信号を逐次所定の記憶領域に記憶する第１のメモリー手段と、上記情報信号における所定の動的情報信号を抽出する動的情報信号抽出手段と、上記時系列毎に、その時系列時点における上記第１のメモリー手段に入力する特性データと上記第１のメモリー手段に既に記憶されているデータとの間で所定の演算を行う演算手段と、上記動的情報信号抽出手段からの信号と上記演算手段の演算結果による信号に応じて、上記時系列の所定時点における上記情報信号に割り当てる所定の識別信号生成手段と、上記識別信号生成手段からの信号を上記時系列に対応して所定の記憶領域に記憶する第２のメモリー手段と、を備えたことである。
（１２）又、上記情報信号は、所定の帯域圧縮処理が施された画像情報信号である（１１）に記載の情報信号処理装置。
（１３）上記時系列は、上記情報信号がＭＰＥＧ信号の場合には、Ｉピクチャー毎の時系列である（１１）に記載の情報信号処理装置。
（１４）上記動的情報信号は、上記情報信号がＭＰＥＧ信号の場合には所定画像における動きベクトルである（１１）に記載の情報信号処理装置。
（１５）上記演算手段は、上記特性データを成分とする所定のベクトルを形成し、そのベクトルを用いた所定のベクトル距離演算、又はそのベクトルのスカラー、又はベクトルの成分を用いた所定の相関演算である（１１）に記載の情報信号処理装置。
【００１４】
（１６）情報信号処理方法は、所定の情報信号から所定の時系列的に所定の特性信号を生成し、上記特性信号を逐次所定の第１の記憶領域にメモリーし、上記情報信号における所定の動的情報信号を抽出し、上記時系列毎に、その時系列時点における上記第１のメモリーに入力する特性データと上記第１のメモリーに既に記憶されているデータとの間で所定の演算を行い、上記動的情報信号抽出と上記演算の演算結果による信号に応じて、上記時系列の所定時点における上記情報信号に割り当てる所定の識別信号を生成し、上記識別信号を上記時系列に対応して所定の第２のメモリーに記憶する、ことを特徴とする。
（１７）又、上記情報信号は、所定の帯域圧縮処理が施された画像情報信号である（１６）に記載の情報信号処理方法。
（１８）上記時系列は、上記情報信号がＭＰＥＧ信号の場合には、Ｉピクチャー毎の時系列である（１６）に記載の情報信号処理方法。
（１９）上記動的情報信号は、上記情報信号がＭＰＥＧ信号の場合には所定画像における動きベクトルである（１６）に記載の情報信号処理方法。
（２０）上記演算手段は、上記特性データを成分とする所定のベクトルを形成し、そのベクトルを用いた所定のベクトル距離演算、又はそのベクトルのスカラー、又はベクトルの成分を用いた所定の相関演算である（１６）に記載の情報信号処理方法。
【００１５】
【発明の実施の形態】
次に、本願発明に係る情報信号処理装置、情報信号処理方法、情報信号表示装置及び情報信号表示方法の実施形態について、図面を参照して説明する。
【００１６】
先ず、本願発明の第１の実施例の情報信号処理装置の概要について説明すると、レンタルソフト（ＤＶＤなど）など予め画像音声信号が記録されている記録媒体又は装置に設置されているハードディスクなどの記録媒体に記録された所定の画像音声情報データを、その装置で初めて再生する場合に、そのことを自動検出し、画像音声の特徴抽出を再生と同時に行いながら要約再生用ＩＤを生成しその装置における所定の記録媒体に記憶する。
即ち、再生区間全ての通常再生時間で特徴を抽出するのではなく、例えば、図１（Ａ）に示すように、通常の再生する区間Ｈに対して、それよりも少ないイントロの部分も含む区間ａの通常再生時間内で特徴を抽出するようにする。図１（Ｂ）は、再生区間Ｈ１、Ｈ２、Ｈ３が長いものであるときの特徴を抽出する手法を示したもので、再生区間Ｈ１に対しては、それよりも極めて短い再生区間ｂ１の通常再生時間内により特徴を抽出し、次の再生区間Ｈ２に対しては、それよりも極めて短い再生区間ｂ２の通常再生時間内で特徴を抽出し、次の再生区間Ｈ３に対しては、それよりも極めて短い再生区間ｂ３の通常再生時間内で特徴を抽出するというものである。このように、再生区間が長い場合には、再生区間を区切り、その区切ったなかの一部分の再生区間で特徴を抽出するようにする。
図２（Ａ）、（Ｂ）、（Ｃ）は、上記図１（Ａ）（実施例１）、または図１（Ｂ）（実施例２）におけるＨ１、Ｈ２、Ｈ３の処理過程を示すもので、処理の最初の状態は、図２（Ａ）に示すように、通常再生位置と特徴抽出位置は開始位置が同じで、図２（Ｂ）のように通常再生時間がｔ（ｓｅｃ）経過し再生が進むに従って特徴抽出処理の位置も所定の特徴抽出区間の終わりの方に進み、図２（Ｃ）のように、斜線部区間の所定の通常再生区間を通常再生した時点で、所定の特徴抽出区間の特徴抽出処理が終了する。
このように、特徴抽出データを用いたダイジェスト再生を行う場合に、所定区間の特徴抽出処理が終了するまでの間、通常再生を行う。
上記のような信号処理により、特徴抽出データを用いたダイジェスト再生モード開始時に、特徴抽出データが予め処理されていない場合でも、特徴抽出処理が終了するまで、所定のダイジェスト再生動作が行えずに画像音声が出力されることがないということを防ぐことができ、更に、本発明による特徴抽出処理の時間は短時間で終了するので、ユーザーは特徴抽出処理中における通常再生動作でもあたかも、すぐに所定の特徴抽出データを用いた所定のダイジェスト再生動作が始まっていると感じることが出来、効率的、効果的な動作を行うことができる。
【００１７】
また図２を用いて説明する別の方法で、再生区間が長い場合に時刻経過により特徴を抽出するようにしたものがあり、処理開始時点から数秒間の間で特徴を抽出するようにし（図２（Ａ））、処理開始後ｔ秒後に再度特徴を抽出するようにすることを繰返し（図２（Ｂ））、最後に所定区間終了間近かにおいて特徴を抽出する（図２（Ｃ））ようにする。このように再生時間の解らないものに対しては、所定の再生時間の経過毎に特徴を抽出するようにしても良い。
上記の図１および図２の説明では特徴抽出処理期間中に通常再生を同時に行った場合の処理であるが、これに限らず、所定区間の特徴抽出処理が終了した時点で、処理した特徴抽出データを用いた所定のダイジェスト再生動作を始めるようにしても良い。このような処理の場合には所定の特徴抽出処理が終了するまで所定のダイジェスト動作は開始しないので、ユーザーに対して特徴抽出中であることを示す表示を行うようにしても良い。
【００１８】
そして、再度当該ソフトを再生する場合には、そのソフトであることを判定し、要約再生モードにした場合には、そのＩＤを読み出すことで、効果的な要約再生など特殊再生を行う処理に素早く移行できる。
【００１９】
既に、ＩＤ処理がなされている場合は、処理を行わず、ＩＤがあることを所定の表示手段に表示する。
【００２０】
又、上記ＩＤを装置内の所定の記録媒体に記憶する代わりに、その記録媒体自体の所定の記憶部（ケース、記録媒体の所定記録領域など）に記憶し、再生時の特殊再生モード動作は、上記と同様の処理を行う。
【００２１】
ＩＤ処理が既になされている場合は上記の特徴抽出処理は行わず、すでにＩＤがあることを所定の表示手段に表示する。
【００２２】
所定の画像音声が記録されている記録媒体を、装置に装着した場合に、ダイジェスト用ＩＤ処理がなされていない場合は、高速再生により自動的にＩＤ処理を行なう。
【００２３】
以下、本発明の第１の実施例について図面を用いて以下の順序で説明する。
【００２４】
［１］動作原理
［２］全体ブロック構成例
［３］動作フローチャート
【００２５】
［１］動作原理
（１．１）特性信号の検出方法
ここでは、簡単のため特性信号は、画像音声信号がＭＰＥＧで圧縮処理されており、そのＭＰＥＧストリームから所定の特性信号を検出するものとする。
【００２６】
例えば、図３に示すように、画像系列からＩピクチャーを検出し、このＩピクチャー毎のＤＣＴ（Ｄｉｓｃｒｅｔｅ　Ｃｏｓｉｎｅ　Ｔｒａｎｓｆｏｒｍ；離散コサイン変換）のＤＣ係数から分割し特性ベクトルを生成し、その特性べクトルの距離を演算することで、又、Ｐピクチャーにおける動きベクトルを検出し類似画像検出とカット点検出を行なうことができる。
即ち、図３のようにフレームを例えば２５の領域に分割し、その領域毎に輝度信号ｙ、色差信号ｃｂ、ｃｒのＤＣ係数の平均値を算出し、その算出値を成分とする輝度信号ｙの特性ベクトルＶｙ、色差信号ｃｂ、ｃｒの特性ベクトルＶｃｂ、Ｖｃｒを演算し、所定時点の特性ベクトルを基準ベクトルとし、ベクトル距離を演算するものである。ここで、フレームの分割領域数は２５でなくとも、例えば、３６領域のようにやや多くしても、１６領域のようにやや少なくしても良く、極端に多い領域または極端に少ない領域数ではないようにし、処理時間、処理精度などに応じて分割数の設定をしても良い。
【００２７】
（１．２）所定記録媒体の検出方法
上記のように検出した特性信号（特性ベクトル）は所定の記録媒体のものであると判別できるように、ラベルのある場合はラベルと共に装置内の記録媒体に記憶する。
【００２８】
記録媒体にラベルがない場合、またはラベルが重複している場合も想定できるので、その記録媒体のイントロの部分のデータを装置内の記録媒体に記憶しておけば、その記録媒体が装置に装着された場合にそのイントロの部分のデータのマッチングを取ることで記録媒体の判定ができる。
【００２９】
場合によっては、すでにその装置で処理した記録媒体のリストをラベルやタイトルがある場合は、それと共に、後で示すブロック図の表示系１３で表示しても良い。
【００３０】
［２］全体ブロック構成例
情報信号処理装置は、図４に示すように、記録媒体系１と、この記録媒体系１に記録されている情報を再生する再生処理系２と、再生したデータを分離する再生データ分離処理系３と、分離したデータのうち映像データをデコードする映像デコード処理系４と、このデコードした映像信号をアナログ信号に変換して映像信号を出力する映像Ｄ／Ａ処理系５と、記録媒体系１に記録されたことを検出する記録媒体検出系６と、記録媒体系１の再生を制御する再生制御系７と、再生データ分離処理系３で分離されたデータのうち識別信号を検出する識別信号検出系８と、再生データ分離処理系３で分離されたデータのうち音声信号をデコードする音声デコード処理系９と、デコードされた音声信号をアナログ値に変換して音声信号として出力する音声Ｄ／Ａ処理系１０と、映像デコード処理系４並びに音声デコード処理系９から特徴を抽出する特徴抽出系１１と、記録媒体検出系６、再生制御系７，識別信号検出系８、特徴抽出系１１、表示系１３を制御するシステムコントローラー１２と、システムコントローラー１２の制御により表示する表示系１３と、ユーザーがコマンド等を入力するユーザー入力Ｉ／Ｆ系１４と、メモリー系１５とからなる。
【００３１】
このような構成において、記録媒体検出系６で所定の記録媒体が設置されたことを検出し、イントロの部分の再生を始め、その記録媒体の、所定プログラムがＩＤ処理されているか、メモリー系１５に記憶されているデータと比較処理して判定する。
又、記録媒体系１を装置に設置されたハードディスクなどの記録媒体の場合は、ユーザーが所望する記録されている所定のプログラムなどを再生動作状態とし、イントロの部分、または所定情報が記録されたＴＯＣ（Ｔａｂｌｅ　　ｏｆ　　ｃｏｎｔｅｎｔｓ）部分の再生を始め、所定プログラムがＩＤ処理されているか、メモリー系１５に記憶されているデータと比較処理して判定する。
【００３２】
ＩＤ処理されていない場合は、通常再生と同時に行うか、高速再生でＩＤ処理を行なうかする。
【００３３】
記録媒体から再生された画像音声データはデコードの後に特徴抽出系１１で抽出し、システムコントローラー１２を介して、メモリー系１５に記憶される。
又、記録媒体系１を例えば、ユーザーが記録可能なＤＶＤやＣＤ（ＣＤ−ＲＷ）（ＣＤ　Ｒｅｗｒｉｔａｂｌｅ）などのような記録媒体の場合、または装置に設置されたハードディスクなどの記録媒体の場合には、画像音声情報が記録されている所定の記録領域とは別の、データの記録が許可された所定の記録領域を設けて、メモリー系１５で記録する代わりに所定のデータを記録することもできる。
【００３４】
ユーザーのコマンド入力により、特殊再生モードでは、適宜、特性データはこのメモリー系１５から呼び出されて、システムコントローラー１２により再生制御系７が制御され所定のダイジェスト再生を行なう。
【００３５】
［３］動作フローチャート
以下、上記構成からなる情報信号処理装置の動作について、図５〜図７に示すフローチャートを参照して説明する。
【００３６】
先ず、記録媒体が検出されると、メモリー系１５からデータを読み出す（ステップＳＴ１１、ＳＴ１２）。
【００３７】
そして、イントロの部分の再生が開始し、比較処理再生回数の判定が行われる（ステップＳＴ１３、ＳＴ１４）。
【００３８】
もし、初めての場合には、初めてであることを表示し、モード０（Ｍｏｄｅ＝０）に設定して回数メモリーに書き込む（ステップＳＴ１５、ＳＴ１６、ＳＴ１７、ＳＴ１８）。
【００３９】
ステップＳＴ１５において、初めてでない場合には、２回目以上であることの回数の表示を行う（ステップＳＴ１９）。
【００４０】
そして、モード１（Ｍｏｄｅ＝１）に設定して回数メモリーに書き込む（ステップＳＴ２０、ＳＴ２１）。
【００４１】
そして、再生モード入力待ちの状態にしておき、入力がなく停止の場合には、停止する（ステップＳＴ２２、ＳＴ２３、ＳＴ２４、ＳＴ２５）。
【００４２】
ステップＳＴ２３において、入力有りの場合には、次にダイジェスト再生であるか否かを判別し、ダイジェスト再生の場合であって、モード１（Ｍｏｄｅ＝１）の場合にはメモリー系１５のＩＤ読み込みを行う（ステップＳＴ２６、ＳＴ２７、ＳＴ３３）。
【００４３】
ステップＳＴ２７において、モード０（Ｍｏｄｅ＝０）の場合には、次に高速再生処理を行い、特性検出処理を行い、ＩＤ処理を行い、メモリー系１５に書き込む（ステップＳＴ２８、ＳＴ２９、ＳＴ３０、ＳＴ３１）。
【００４４】
次に、上記ステップＳＴ２８〜ＳＴ３１の処理が終了していない場合にはステップＳＴ２８に行き、上記処理を行い、処理が終了した場合には、メモリー系にＩＤを読み込む（ステップＳＴ３２、ＳＴ３３）。
【００４５】
次に、図７に行き、フレームＮＯ．の検出処理を行い、メモリー系読み出し処理を行う（ステップＳＴ４１、ＳＴ４２）。
【００４６】
次に、ダイジェストＩＤフレームの比較処理を行う（ステップＳＴ４３）。そして、ダイジェストフレームでない場合には再生処理を行い、ダイジェストフレームである場合にはスキップ処理を行う（ステップＳＴ４４、ＳＴ４５、ＳＴ４６）。
【００４７】
次に、図６に示す、ステップＳＴ３７に行き、通常再生モード処理を行う
【００４８】
図５に示す、ステップＳＴ２６において、ダイジェスト再生でない場合には、図６に示すステップＳＴ３４に行き、メモリー系１５からＩＤを読み込んだ後に、ダイジェスト再生処理を行い、停止の場合には停止し、停止でない場合にはモードの変更があるかを判別する（ステップＳＴ３４、ＳＴ３５、ＳＴ３６）。
【００４９】
ステップＳＴ３６でモードの変更がない場合には、ステップＳＴ３４に行き再びダイジェスト再生の処理を行い、モードの変更がある場合には通常の再生モードを処理する（ステップＳＴ３７）。
【００５０】
通常の再生モードの処理をした後に、停止の場合には停止し、停止でない場合にはモード変更がない場合には、ステップＳＴ３７の通常再生モードの処理を行う（ステップＳＴ３８、ＳＴ３９）。
【００５１】
ステップＳＴ３９において、モードの変更がある場合には、モード０（Ｍｏｄｅ＝０）の場合には、図５に示すステップＳＴ２８に行き高速再生処理を行い、モード１（Ｍｏｄｅ＝１）の場合には、図５に示すステップＳＴ３３に行きメモリー系１５にＩＤの読み込みを行う（ステップＳＴ４０、ＳＴ３３）。
【００５２】
次に、図７に行き、フレームＮＯ．を検出する処理を行う（ステップＳＴ４１）。
メモリー系１５から読み出し処理を行い、ダイジェストＩＤフレームの比較処理を行う（ステップＳＴ４２、ＳＴ４３）。
【００５３】
そして、ダイジェストフレームがない場合には再生処理し、ダイジェストフレームがある場合にはスキップ処理をし、図６に示すステップＳＴ３７の通常再生モード処理をする（ステップＳＴ４４、ＳＴ４５、ＳＴ４６）。
【００５４】
［４］装置表示例
図８は装置の表示例であり、記録媒体の再生回数、ダイジェストＩＤ処理がなされたか、などの表示がなされる。
【００５５】
このような表示は、再生画像を表示するディスプレイなどでも良いし、装置本体に備えられた、液晶ディスプレイなどの表示系でも良い。
【００５６】
図８（１）はチェンジャーなどの複数のディスクが装置内に装着して再生できる場合であり、ディスク毎にＩＤ処理がなされているか表示できる。図において、ディスクＮｏ．１の再生回数は１、タイトルは「映画」で、ダイジェストＩＤ処理がなされている表示がなされている。ディスクＮｏ．２の再生回数は０、タイトルは「音楽」で、ダイジェストＩＤ処理がなされていない表示がなされている。ディスクＮｏ．３の再生回数は２、タイトルは「スポーツ」で、ダイジェストＩＤ処理がなされていない表示がなされている。
【００５７】
この場合には、ディスクを指定して、図８（２）に示す、単一ディスク再生装置のように、そのディスクのプログラム毎にＩＤ処理がなされているかを表示しても良い。
【００５８】
図８（２）は単一ディスク再生装置の場合で、プログラム毎にＩＤ処理がなされているかを表示する。例えば、ディスクＮｏ．１の再生回数は１、タイトルは「映画」で、ダイジェストＩＤ処理がなされている表示がなされている。ディスクＮｏ．２の再生回数は０、タイトルは「音楽」で、ダイジェストＩＤ処理がなされていない表示がなされている。ディスクＮｏ．３の再生回数は２、タイトルは「スポーツ」で、ダイジェストＩＤ処理がなされていない表示がなされている。
【００５９】
次に、第２の実施形態の情報信号処理装置及び情報信号処理方法について、図面を参照して説明する。
【００６０】
先ず、第２の実施形態の情報信号処理装置及び情報信号処理方法の概要について説明する。
時系列的に画像シーンにおける特性データを入力し、すでに記憶されている特性データとこの入力特性データとの間で、所定の演算処理を行い、その結果と、動きベクトル情報で所定のシーンＩＤをその画像シーンに割り当てる。一つの処理が終了毎に、入力データ領域を逐次シフトさせていくというものである。
【００６１】
以下、本発明の第２の実施例について、図面を用いて以下の順序で説明する。
［１］動作原理
［２］ブロック構成例
［３］動作フローチャート
【００６２】
［１］動作原理
図９（１）は特性データを記憶するデータメモリー系で、初期データとして、Ｄａがすべての記録領域にメモリーされている様子を示したものであり、この場合は、最初の入力データＤ０としても良い。
【００６３】
図９（２）は、ＩＤメモリー系で、初期データとして、Ａａが全ての記録領域にメモリーされている様子を示したものであり、この場合は、初期データとして０でも構わない。
上記、図９（１）のデータメモリー系のアドレスとこの図９（２）ＩＤメモリー系のアドレスとは、一対一に対応しており、下記で説明するように所定の演算処理により、データメモリー系のアドレスに対応するＩＤメモリー系のアドレスに記憶されているＩＤデータが読み出され、特性データを入力して演算処理を行った画像フレームにこのＩＤデータが割り当てられるようになっている。
【００６４】
ここでは、簡単のため、ＭＰＥＧの画像データから特性データを生成するとし、Ｉピクチャー毎にデータメモリー系に入力するものとする。
【００６５】
図９（１）（ａ１）のように、最初のＩピクチャーが検出されると、特性データＤ０が最初のメモリーエリアに記憶される。
【００６６】
Ｄ０を基準データとして、図に示すように、他のメモリーエリアのデータと逐次、所定のベクトル距離演算を行う。
【００６７】
所定の演算の後、演算結果が最小となる値Ｖｄと所定のしきい値、Ｔｈとを比較し、
Ｖｄ＜Ｔｈ　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　式（１．１）
の場合は、その最小となったエリアに対応する、ＩＤメモリーエリアのＩＤデータをＤ０に割り当て、Ｄ０のメモリーエリアに対応する、ＩＤメモリー系のメモリーエリアにそのＩＤデータを記憶する。
【００６８】
この図の場合は、まだ、Ｄ０が最初のエリアなので、初期ＩＤとし０を設定した場合は、０がＩＤデータとして割り当てられる。
【００６９】
Ｖｄ＞＝Ｔｈ　　　　　　　　　　　　　　　　　　　　　　　　　　　　　式（１．２）
の場合は、ＩＤメモリー系に記憶されているデータ値の最大値ＩＤｍａｘに、１を加えたデータをＩＤとする。
【００７０】
しかし、上記の場合はまだ、入力データはＩＤメモリー系の全ての領域になるまで、入力していないので、式（１．２）　になることはない。
【００７１】
次のＩピクチャーが検出された場合は、図９（１）（ａ２）、（ａ３）のようにメモリー領域を一つずらして、上記と同様な処理を行っていく。
【００７２】
そして、図９（１）（ａ４）のように、メモリー領域すべてに記憶された場合は、次のＩピクチャー検出では、図９（１）（ａ５）のように、最初のメモリーエリアに戻る。
【００７３】
ＩＤメモリー系も同様で、このようにして演算処理、およびＩＤを割り当てていく。
【００７４】
図１０は記録した画像系列で、区間ａ〜ｂ、区間ｂ〜ｃ、区間ｃ〜ｄ、及び区間ｄ〜、においてカメラパンがあるものとし、時点ａ、ｂ、ｃ、ｄはカット点で、シーンチェンジが生じたとする。
【００７５】
ある人物や物体を基準に、画像の分類を考えた場合に、例えば、人物や物体が動いていたり、カメラパンなどがあった場合に、その画像は類似画像と判定するか、或いは、別画像とするかの絶対的な判定基準はなく、ユーザー自身の好みによって相違する。
【００７６】
ここで、上記で説明したＩＤ処理をこのような画像系列で行うと、カメラパン区間ａ〜ｂでは、画像シーンが動くので異なったＩＤが割り当てられる場合がある。
【００７７】
見方を変えれば、画像が動いているだけで、分類上は同じＩＤを割り当てる方が良い場合も考えられる。
【００７８】
そこで、動きベクトルを用いて、ある時点においてＩＤが前の時点と相違しても、所定の動きベクトルの平均スカラー値Ｍｄが、所定しきい値Ｍｔｈよりも小さい場合は、前のＩピクチャーのＩＤと同一のＩＤを割り当てるようにする。
【００７９】
このように処理することで、カット点の区間を境に、画像シーンが多少動いても類似した画像フレームには同一の所定のＩＤが割り当てられ、ユーザーの好みに応じて、ＩＤを利用して類似画像の検索、画像の整理、類似画像のダイジェスト再生などに応用することも出来る。
【００８０】
図１１は分類処理系及びＩＤ生成系のブロック構成例であり、システムコントローラーにより演算処理を行う。
その構成は、画像データを入力して特性データを検出する特性データ検出系３０と、特性データを記憶する特性データメモリー系３１と、特性データメモリー系３１から読み出した特性データと特性データ検出系３０で検出した特性データとの比較演算する演算処理系３２と、識別情報データを生成する識別情報データ生成系３３と、識別情報データを記憶する識別情報データメモリー系３４と、これらの系を制御するシステムコントローラー３５とからなる。
【００８１】
特性データ検出系３０における特性データの検出は、図１２に示すように、分割してデータ生成を行う。
ここで、特性データは前記した本発明の第１の実施例［１］動作原理（１．１）で説明したようにフレームを複数の領域に分割し、その分割領域毎にＤＣＴのＤＣ係数の平均値を成分とするベクトルを考えて、ベクトルの成分を特性データとすることができるが、別の方法として、画像フレームをウェーブレット変換し、輝度信号、色差信号を多重解像度解析し、図１２に示すように多重解像度解析したＨＨ領域を例えば３６分割し、その領域毎にウェーブレット係数の平均値を算出し、その算出値を成分とするベクトルを想定することができ、上記、ＤＣＴのＤＣ係数の場合と同じように考えて、ベクトルの成分を特性データとすることができる。すなわち、分割領域毎のＤＣＴのＤＣ係数の平均値やウェーブレット係数の平均値を特性データとする。
ここで、図１２で示す領域分割数は３６に限ることはなく、前記した、本発明の第１の実施例［１］動作原理（１．１）で述べたように、場合に応じて、２５分割や１６分割としても良く、分割領域数と特性データの次数は同じなので、分割領域数に応じて特性データ次数も２５次、１６次としても良い。
【００８２】
識別情報データ生成系３３における識別情報データの生成は、図１３に示すように、ＩＤデータの折り返り処理でＩＤが所定値まで行った場合は、折り返し処理を行う。
すなわち、ＩＤデータの初期値をｍｉｎ（００００Ｈ）とし、上記で説明したような所定の演算処理により、類似画像が続いて検出されない場合は、ＩＤは所定の演算毎に１づつ増加して行き、設定した所定の最大値ｍａｘ（ＦＦＦＦＨ）になった場合は、初期値であるｍｉｎにリセットする。
ここで、上記のようにＩＤがリセットされ、ＩＤ処理を継続していくと、以前にＩＤ処理したあるフレーム画像と同一のＩＤが割り当てられることが考えられるが、図１３のように例えば最大値ｍａｘをＦＦＦＦＨのように設定しておけば、同じＩＤが割り当てられる時間間隔は長いので、以前の画像とは類似画像ではないのに、同一ＩＤが割り当てられてもあまり問題ではない。
画像のフレームレートを例えば、３０フレーム／秒、ＭＰＥＧの１ＧＯＰ（Ｇｒｏｕｐ　　ｏｆ　　Ｐｉｃｔｕｒｅ）を１５フレームと仮定すると、ＩＤ処理単位のＩピクチャーは１５フレーム毎の０．５秒毎に検出され、処理されるＩピクチャー毎に異なったＩＤが割り当てられたとしても、ＦＦＦＦＨ＝６５５３５であるので、
６５５３５×０．５（秒）＝　３２７６７．５（秒）、すなわち、約９時間となる。
このように類似画像ではないのに同一のＩＤが割り当てられる時間間隔は長いので、類似画像ではないのに同一ＩＤであるとユーザーが気づいたとしても、この実施例のような記録再生装置ではほとんど問題ではない。
【００８３】
［２］ブロック構成例
本発明を適用した情報信号処理装置の構成は、図１４に示すように、音声信号を入力してＡＤ変換して出力する音声Ａ／Ｄ変換処理系１０１と、デジタル値に変換された音声信号をエンコードする音声エンコーダー処理系１０２と、音声信号及び映像信号、音声信号からの特徴抽出信号及び画像信号からの特徴抽出信号を多重化する多重化処理系１０３と、多重化した信号を記録するための処理を行う記録処理系１０４と、多重化した信号を記録する記録媒体系１０５と、映像信号を入力してＡＤ変換して出力する映像Ａ／Ｄ変換処理系１０６と、デジタル値に変換された映像信号をエンコードする映像エンコーダー処理系１０７と、記録媒体系１０５に記録されているデータに対して再生処理を行う再生制御系１０８と、音声エンコーダー処理系１０２でエンコードされた音声信号から特徴となる信号を抽出する音声信号特徴抽出系１０９と、映像エンコーダー処理系７でエンコードされた映像信号から特徴となる信号を抽出する画像信号特徴抽出系１１０と、記録媒体系１０５に記録されているデータの再生処理をする再生処理系１１１と、再生された信号を音声信号、映像信号、識別信号に分離する再生データ分離処理系１１２と、再生データ分離処理系１１２で分離された音声信号をデコードする音声デコード処理系１１３と、音声デコード処理系１１３での信号をアナログ値にする音声Ｄ／Ａ処理系１１４と、再生データ分離処理系１１２で分離した映像信号をデコードする映像デコード処理系１１５と、映像デコード処理系１１５での信号をアナログ値に変換する映像Ｄ／Ａ処理系１１６と、音声信号特徴抽出系１０９、画像信号特徴抽出系１１０、多重化処理系１０３、再生制御系１０８を制御するシステムコントローラー１１８と、ユーザーからの信号を入力するユーザー入力Ｉ／Ｆ系１１９と、再生モード表示系１２０とからなる。
【００８４】
このような構成からなる情報信号処理装置において、先ず、音声信号は音声Ａ／Ｄ変換処理系１０１で所定のＡＤ変換された後、音声エンコーダー処理系１０２で所定のエンコーダー処理がなされ、このＡＤ変換処理された信号、または、エンコード処理された信号は、音声信号特徴抽出系１０９に入力し、所定の特徴抽出を行う。
【００８５】
映像信号も同様で、映像ＡＤ変換処理系１０６で所定のＡＤ変換された後、映像エンコーダー処理系１０７で所定のエンコーダー処理がなされ、このＡＤ変換処理された信号、又は、エンコード処理された信号は、画像信号特徴抽出系１１０に入力し、所定の特徴抽出を行う。
【００８６】
ユーザー入力Ｉ／Ｆ系１１９を介して、前記［１］動作原理で説明ように所定の区間で、予め音声信号特徴抽出系１０９、画像信号特徴抽出系１１０により、その特徴データを、システムコントローラー系１１８内における所定のメモリーに記憶する。
【００８７】
その後、逐次、特徴データは検出され、システムコントローラー１１８内において、所定の相関演算、或いは、上記で述べた各特徴抽出データを成分としたベクトルとした場合には、所定のベクトル距離演算が行われる。
【００８８】
所定の放送番組などの画像音声データは、所定の多重化処理系１０３、記録処理系１０４などを経て、記録媒体系１０５に記録される。
【００８９】
特殊再生モードでは、システムコントローラー１１８は、再生制御系１０８を介して、前記［１］動作原理で説明したような記録媒体系１０５からの再生データの制御を行う。
【００９０】
［３］動作フローチャート
上記システムコントローラー１１８において、動きベクトルを利用した演算手法について、図１５〜図１７に示すフローチャートを参照して以下説明する。
【００９１】
先ず、図１５（Ａ）に示すように、カウンタｎ＝０に設定して、初期設定処理をする（ステップＳＴ１０１、ＳＴ１０２）。
この初期設定処理は、図１５（Ｂ）に示すように、動きベクトルを処理するもので、フレーム数ｍ＝０、算出値Ｖ＝０に設定する（ステップＳＴ１１３）。
【００９２】
次に、図１５（Ａ）におけるステップＳＴ１０３において、ストリームの検出を行い、Ｉピクチャでない場合には、動きベクトルフレーム内検出処理がなされる（ステップＳＴ１０３、ＳＴ１０４、ＳＴ１０５）。
この動きベクトルフレーム内検出処理は、図１５（Ｃ）に示すように、先ずＰピクチャであるかを判別し、Ｐピクチャでない場合には停止でないことを確認して次のステップに行く（ステップＳＴ１１４、ＳＴ１１５）。
ステップＳＴ１１４において、Ｐピクチャである場合には、動きベクトルを検出し、フレーム内平均（Ｖｆ）を算出する（ステップＳＴ１１４、ＳＴ１１７、ＳＴ１１８）。
そして、算出値Ｖ＝Ｖ＋Ｖｆの計算をして平均値を算出する（ステップＳＴ１１９）。
次に、フレーム数ｍをインクリメントする（ｍ＝ｍ＋１）（ステップＳＴ１２０）。
そして、図１５（Ａ）におけるステップＳＴ１０３に行き、ストリームの検出を行う（ステップＳＴ１０３）。
【００９３】
上記ステップＳＴ１０４において、Ｉピクチャである場合には、動きベクトルの平均（Ｖａｖ）を、Ｖａｖ＝Ｖ／ｍにより算出する（ステップＳＴ１０６）。
【００９４】
次にＩＤ判定処理を行う（ステップＳＴ１０７）。
このＩＤ判定処理は、図１６に示すように、先ず、特性データ（Ｄｔ）を生成する（ステップＳＴ１２１）。
そして、カウンタｎ＝０のときは、初期値設定処理を行う（ステップＳＴ１２２、ＳＴ１２３）。
初期値設定処理は、データバッファ初期設定Ｄｔ（０）の入力、ＩＤバッファ初期設定ｉｄ＝０の入力、データ入力位置ｉｎｐｌａｃｅ＝０の入力を行う。
【００９５】
ステップＳＴ１２２において、カウンタｎ＝０でない場合には、ベクトル距離配列をリセットし、ベクトル距離演算の初期設定をする（ステップＳＴ１２４、ＳＴ１２５）。
【００９６】
そして、距離Ｖｐ、位置ｐにおけるベクトル距離最小値演算を行う（ステップＳＴ１２６）。
【００９７】
そして、閾値Ｖｐの判定を行い、閾値以外であればＩＤオーバーフロー判定の処理を行う（ステップＳＴ１２９）。
このＩＤオーバーフロー判定処理は、図１７（Ａ）に示すように、先ず、ＩＤバッフアｉｄにプラス１インクリメントした値がＩＤバッファ最大値ｉｄｍａｘより大きいかを判定する（ステップＳＴ１４０）。大きくない場合には、ＩＤバッファｉｄを１つインクリメントし、大きい倍にはＩＤバッファｉｄは０に設定し、ＩＤバッファｉｄ＝ＩＤｎにする（ステップＳＴ１４２、ＳＴ１４１、ＳＴ１４３）。
【００９８】
図１６に戻り、ステップＳＴ１２７において、閾値内であれば、ＩＤバッファデータＩＤ（ｐ）を読み出して、ＩＤｎに入力し、データ入力位置ｉｎｐｌａｃｅを１つインクリメントする（ステップＳＴ１２８、ＳＴ１３０）。
【００９９】
位置判定でオーバーしている場合には、データ入力位置ｉｎｐｌａｃｅを０にし、位置がメモリ位置内であればそのままにし、データ入力位置ｉｎｐｌａｃｅのデータバッファＤｔを記憶する（ステップＳＴ１３１、ＳＴ１３２、ＳＴ１３３）。
【０１００】
又、ＩＤバッファ内にデータ入力位置ｉｎｐｌａｃｅにＩＤ（ｐ）を記憶する（ステップＳＴ１３４）。
【０１０１】
そして、動きベクトル（Ｖａｖ）の判定、閾値Ｖｐの再判定を行う（ステップＳＴ１３５）。
【０１０２】
閾値Ｖｐ以外であれば、前処理ＩＤ割当て、ＩＤｎｖ＝ＩＤｐｒｅとし、閾値以内であればシーンＩＤ（動きベクトル対応）割り当て、ＩＤｎｖ＝ＩＤ（ｐ）とし、ＩＤｎメモリにＩＤｐｒｅ＝ＩＤｎとする（ステップＳＴ１３６、ＳＴ１３７、ＳＴ１３８、ＳＴ１３９）。
【０１０３】
このようにして、ＩＤ判定処理を行った後に、図１５に示すステップＳＴ１０８において、動きベクトルフレーム内検出後処理を行う（ステップＳＴ１０８）。
この動きベクトルフレーム内検出後処理は、図１７（Ｂ）に示すように、動きベクトルの処理であって、フレーム数ｍ＝０、算出値Ｖ＝０にする（ステップＳＴ１４４）。
【０１０４】
図１５におけるステップＳＴ１０８の動きベクトルフレーム内検出後処理をした後に、動きベクトルＩＤｎｖに対応したシーンＩＤ記録処理を行う（ステップＳＴ１０９）。
【０１０５】
そして、カウンタｎをインクリメントし、停止でないことを確認して。ステップＳＴ１０３の次のストリームの検出に行く（ステップＳＴ１１０、ＳＴ１１１、ＳＴ１１２）。
【０１０６】
【発明の効果】
以上説明したように、本発明においては、初めての再生用媒体を鑑賞する場合に、短時間でその概要を把握することができるので、通常の再生時間で見る場合の参考にすることができるという効果がある。
又、ダイジェスト再生用の特徴抽出処理を行っている間に、通常再生を行うので、特徴抽出処理期間中でもダイジェスト再生動作中の画像音声が途切れることがなく、効果的な動作が行える。
【０１０７】
更に、再生用媒体の内容の概要が別の記録媒体に自動的に記録されるので、色々な再生用媒体を捜して再び、当該再生用媒体を見ようとするときに、その概要が解るため、再度の操作を省略することができるという効果もある。
【０１０８】
また、記録媒体を挿入したら、自動的にダイジェスト再生用ＩＤ処理を高速に行なうので、操作の通常手間が省け、通常再生を行なう場合の参考になる。
【０１０９】
また、放送番組などを記録する際に、リアルタイムで、分類処理を行うことができると共に、タイマー記録などで、記録終了後にすぐ、その分類結果を知ることができ、処理の待ち時間が殆ど無くすことができるという効果がある。
【０１１０】
さらに、分類処理されたシーンＩＤを利用して、画像の分類整理、編集、ダイジェスト再生などを行うことができるという効果もある。
【図面の簡単な説明】
【図１】本願発明に係る第１の実施形態の動作原理を示す説明図である。
【図２】本願発明に係る第１の実施形態の動作原理を示す説明図である。
【図３】本願発明に係る第１の実施形態の動作原理を示す説明図である。
【図４】本願発明に係る第１の実施形態の情報信号処理装置の構成を示すブロック図である。
【図５】同動作を示すフローチャートである。
【図６】同動作を示すフローチャートである。
【図７】同動作を示すフローチャートである。
【図８】同装置の表示例を示す説明図である。
【図９】本願発明に係る第２の実施形態の動作原理を示す説明図である。
【図１０】本願発明に係る第２の実施形態の動作原理を示す説明図である。
【図１１】本願発明に係る第２の実施形態の画像分離処理系のブロック図である。
【図１２】同多重解像度解析面の分割領域を選択するときの説明図である。
【図１３】同識別情報データ折り返し処理の説明図である。
【図１４】本願発明に係る第２の実施形態の情報信号処理装置の構成を示すブロック図である。
【図１５】同動作を示すフローチャートである。
【図１６】同動作を示すフローチャートである。
【図１７】同動作を示すフローチャートである。装置表示例
【符号の説明】
１；記録媒体系、２；再生処理系、３；再生データ分離処理系、４；映像デコード処理系、５；映像Ｄ／Ａ処理系、６；記録媒体検出系、７；再生制御系、８；識別信号検出系、９；音声デコード処理系、１０；音声Ｄ／Ａ処理系　、１１；特徴抽出系、１２；システムコントローラー、１３；再生モード表示系、１４；ユーザー入力Ｉ／Ｆ系、１５；メモリー系、３０；特性データ検出系、３１；特性データメモリー系、３２；演算処理系、３３；識別情報データ生成系、３４；識別情報データメモリー系、３５；システムコントローラー、１０１；音声Ａ／Ｄ変換処理系　、１０２；音声エンコーダー処理系、１０３；多重化処理系、１０４；記録処理系、１０５；記録媒体系、１０６；映像Ａ／Ｄ変換処理系、１０７；映像エンコーダー処理系、１０８；再生制御系、１０９；音声信号特徴抽出系、１１０；画像信号特徴抽出系、１１１；再生処理系、１１２；再生データ分離処理系、１１３；音声デコード処理系、１１４；音声Ｄ／Ａ処理系、１１５；映像デコード処理系、１１６；映像Ｄ／Ａ処理系、１１７；識別信号検出系、１１８；システムコントローラー、１１９；ユーザー入力Ｉ／Ｆ系、１２０；再生モード表示系。
【図１】
2004040629.tif 000003
【図２】
2004040629.tif 000004
【図３】
2004040629.tif 000005
【図４】
2004040629.tif 000006
【図５】
2004040629.tif 000007
【図６】
2004040629.tif 000008
【図７】
2004040629.tif 000009
【図８】
2004040629.tif 000010
【図９】
2004040629.tif 000011
【図１０】
2004040629.tif 000012
【図１１】
2004040629.tif 000013
【図１２】
2004040629.tif 000014
【図１３】
2004040629.tif 000015
【図１４】
2004040629.tif 000016
【図１５】
2004040629.tif 000017
【図１６】
2004040629.tif 000018
【図１７】
2004040629.tif 000019