(57)【特許請求の範囲】
【請求項１】
撮影装置で撮影された映像を表示させるための映像データを処理するデータ処理装置であって、
前記映像データを取得する映像データ取得手段と、
この取得された映像データの映像の特性を分析する特性分析手段と、
この分析で得られた特性が予め設定された標準値の範囲から外れるシーンを不要シーンとして識別する識別手段と、
前記映像データから前記不要シーンを表示させるための不要シーンデータを選出する選出手段と、
この選出された不要シーンデータに基づいて前記不要シーンを表示手段で表示させる制御をする表示制御手段と、
入力手段の入力操作に基づいて、所定の前記不要シーンデータが必要か否かを判断する必要性判断手段と、
前記不要シーンとして識別する際の前記特性の標準値範囲に関する標準情報を記憶する標準情報記憶手段と、
所定の前記不要シーンデータに対する前記必要性判断手段での判断結果に基づいて、前記所定の不要シーンデータを不要シーンと識別する元になった特性について前記標準情報の前記標準値範囲を変更する標準情報更新手段と、
を具備したことを特徴としたデータ処理装置。
【請求項２】
請求項１に記載のデータ処理装置であって、
前記特性分析手段は、前記映像が持つ情報において、動きに関する特性を分析する動き特性分析手段、輝度と色度のうち一方あるいは両方の強度分布に関する特性を分析する色特性分析手段、および、空間周波数に関する分布特性を分析する空間周波数特性分析手段のうち、少なくともいずれか１つの分析手段を備え、
前記識別手段は、前記少なくともいずれか１つの分析手段が分析した結果として得られる特性のうち少なくとも１つの特性が、その特性に対応する予め設定された標準値の範囲から外れることを検出することにより、その特性を有するシーンを前記不要シーンとして識別する
ことを特徴としたデータ処理装置。
【請求項３】
請求項２に記載のデータ処理装置であって、
前記映像データは、所定の画像を表示させるための複数の画像データが表示順序で関連付けられた構成を有し、
前記表示制御手段は、前記不要シーンを表示させる場合、前記識別手段が不要シーンとして識別した際の特性に、前記動き特性分析手段が分析した特性が含まれる場合、前記不要シーンデータが有する前記表示順序が略連続する複数の前記画像データに基づいて、前記不要シーンの少なくとも一部を動画として表示させる制御をする
ことを特徴としたデータ処理装置。
【請求項４】
請求項３に記載のデータ処理装置であって、
前記表示制御手段は、前記不要シーンの動き特性が前記標準値の範囲から外れる度合いの大きいシーンを前記動画として表示させる制御をする
ことを特徴としたデータ処理装置。
【請求項５】
請求項２ないし請求項４のいずれかに記載のデータ処理装置であって、
前記表示制御手段は、前記色特性分析手段、および、前記空間周波数特性分析手段のうち、少なくともいずれか１つの分析手段による分析結果として得られた特性が、その特性に対応する予め設定された標準値の範囲から外れる前記不要シーンを表示させる場合、前記不要シーンデータが有する所定の前記画像データに基づいて、前記不要シーンの少なくとも一部を静止画として表示させる制御をする
ことを特徴としたデータ処理装置。
【請求項６】
請求項１ないし請求項５のいずれかに記載のデータ処理装置であって、
前記必要性判断手段で不要であると判断された前記不要シーンデータを有さない前記映像データを編集データとして生成する編集データ生成手段と、
を具備した
ことを特徴としたデータ処理装置。
【請求項７】
請求項１ないし請求項５のいずれかに記載のデータ処理装置であって、
前記不要シーンは、前記特性が前記標準値の範囲から外れる度合いが一定の度合いよりも大きい補正不可能シーンと、前記一定の度合いよりも小さい補正可能シーンと、を備え、
前記表示制御手段は、前記補正不可能シーンの不要シーンデータに基づいて、前記補正不可能シーンを表示させる制御をし、
入力手段の入力操作に基づいて、所定の前記補正不可能シーンの前記不要シーンデータが必要か否かを判断する必要性判断手段と、
前記補正可能シーンの前記不要シーンデータに基づいて、前記補正可能シーンの前記特性を補正した補正シーンデータを生成する補正手段と、
前記必要性判断手段で不要であると判断された前記不要シーンデータを有さないとともに、前記補正シーンデータを有する前記映像データを編集データとして生成する編集データ生成手段と、
を具備した
ことを特徴としたデータ処理装置。
【請求項８】
請求項１ないし請求項５のいずれかに記載のデータ処理装置であって、
前記不要シーンデータに基づいて、前記不要シーンの前記特性を補正した補正シーンを表示させるための補正シーンデータを生成する補正手段を具備し、
前記表示制御手段は、前記不要シーンデータに基づく不要シーン、および、この不要シーンデータに対応する前記補正シーンデータに基づく補正シーンを表示させる制御をする
ことを特徴としたデータ処理装置。
【請求項９】
請求項８に記載のデータ処理装置であって、
入力手段の入力操作に基づいて、前記不要シーンデータおよび前記対応する前記補正シーンデータのうちいずれか一方のデータが必要である旨、または、前記不要シーンデータおよび前記対応する補正シーンデータが不要である旨を判断する必要性判断手段と、
この必要性判断手段で必要であると判断された前記いずれか一方のデータを有するとともに、不要であると判断された前記データを有さない前記映像データを編集データとして生成する編集データ生成手段と、
を具備した
ことを特徴としたデータ処理装置。
【請求項１０】
請求項７ないし請求項９のいずれかに記載のデータ処理装置であって、
前記補正手段は、前記不要シーンにおける前記標準値の範囲から外れる特性の内容を認識し、この認識した内容に応じて補正した前記補正シーンを表示させるための前記補正シーンデータを生成する
ことを特徴としたデータ処理装置。
【請求項１１】
請求項１ないし請求項１０のいずれかに記載のデータ処理装置であって、
前記識別手段は、前記標準情報記憶手段から前記標準情報を取得して、この標準情報に基づいて前記不要シーンを識別する
ことを特徴としたデータ処理装置。
【請求項１２】
請求項１ないし請求項１１のいずれかに記載のデータ処理装置であって、
前記表示制御手段は、前記不要シーンにおける前記標準値の範囲から外れる特性の内容に関する特性内容情報を前記表示手段で表示させる制御をする
ことを特徴としたデータ処理装置。
【請求項１３】
演算手段にて、撮影装置で撮影された映像を表示させるための映像データを処理するデータ処理方法であって、
前記演算手段は、
前記映像データを取得し、
この取得された映像データの映像の特性を分析し、
この分析で得られた特性が予め設定された標準値の範囲から外れるシーンを不要シーンとして識別し、
前記映像データから前記不要シーンを表示させるための不要シーンデータを選出し、
この選出された不要シーンデータに基づいて前記不要シーンを表示手段で表示させる制御をし、
入力手段の入力操作に基づいて、所定の前記不要シーンデータが必要か否かを判断し、
前記不要シーンとして識別する際の前記特性の標準値範囲に関する標準情報を記憶し、
所定の前記不要シーンデータが必要か否かの判断結果に基づいて、前記所定の不要シーンデータを不要シーンと識別する元になった特性について前記標準情報の前記標準値範囲を変更する
ことを特徴とするデータ処理方法。
【請求項１４】
請求項１３に記載のデータ処理方法を演算手段に実行させる
ことを特徴としたデータ処理プログラム。
【請求項１５】
請求項１４に記載のデータ処理プログラムが演算手段にて読取可能に記録された
ことを特徴としたデータ処理プログラムを記録した記録媒体。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、撮影された映像の映像データを処理するデータ処理装置、その方法、そのプログラム、および、そのプログラムを記録した記録媒体に関する。
【背景技術】
【０００２】
従来、映像データを処理する構成が知られている（例えば、特許文献１および特許文献２参照）。
【０００３】
特許文献１に記載のものは、ビデオデータシーケンスからビデオ構造およびメタデータを抽出する。そして、このメタデータなどに基づいて、劣悪な色エントロピー、異常な動き解析結果などを有する低品質なフレームシーケンスを取り除くことにより、ビデオ要約を生成する構成が採られている。
【０００４】
特許文献２に記載のものは、放送番組におけるニュース番組を、類似画像ごとに分類する。例えば、アナウンサーの登場シーンと、ニュース映像のシーンと、などに分類する。そして、分類結果を表示系で表示させる際には、分類、時間、および、再生位置を表示するとともに、類似画像シーンで分類頻度が大きい部分を例えば赤色で表示して、それ以外の部分を例えば青色で表示する構成が採られている。
【０００５】
【特許文献１】特開２００４−１５９３３１号公報（第１８頁）
【特許文献２】特開２００２−３４４８５２号公報（第４頁左欄−第１１頁左欄）
【発明の開示】
【発明が解決しようとする課題】
【０００６】
ところで、近年、携帯可能な撮影装置の普及により、利用者が自ら風景などを撮影して、この撮影した映像の品質を高めるために編集することがある。そして、このような編集に、上述したような特許文献１および特許文献２に記載のような構成を適用することが考えられる。
しかしながら、特許文献１のような構成を用いた場合、低品質な画像を取り除いた要約が生成されてしまうため、低品質であっても利用者にとって必要な画像、例えば画像が揺れていても利用者にとって必要な画像が、利用者の意志に反して削除されてしまうおそれがあるという問題点が一例として挙げられる。
また、特許文献２のような構成を用いた場合、類似する画像の中に利用者が不必要と感じる画像、例えば揺れた画像が存在している場合であっても、揺れていない他の画像と類似していると分類されてしまい、この類似する画像の中から不必要な画像を選択する作業が煩わしいおそれがあるという問題点が一例として挙げられる。
【０００７】
本発明の目的は、このような実情などに鑑みて、適切な映像データの編集を容易にするデータ処理装置、その方法、そのプログラム、および、そのプログラムを記録した記録媒体を提供することである。
【課題を解決するための手段】
【０００８】
本発明のデータ処理装置は、撮影装置で撮影された映像を表示させるための映像データを処理するデータ処理装置であって、前記映像データを取得する映像データ取得手段と、この取得された映像データの映像の特性を分析する特性分析手段と、この分析で得られた特性が予め設定された標準値の範囲から外れるシーンを不要シーンとして識別する識別手段と、前記映像データから前記不要シーンを表示させるための不要シーンデータを選出する選出手段と、この選出された不要シーンデータに基づいて前記不要シーンを表示手段で表示させる制御をする表示制御手段と、入力手段の入力操作に基づいて、所定の前記不要シーンデータが必要か否かを判断する必要性判断手段と、前記不要シーンとして識別する際の前記特性の標準値範囲に関する標準情報を記憶する標準情報記憶手段と、所定の前記不要シーンデータに対する前記必要性判断手段での判断結果に基づいて、前記所定の不要シーンデータを不要シーンと識別する元になった特性について前記標準情報の前記標準値範囲を変更する標準情報更新手段と、を具備したことを特徴とする。
【０００９】
本発明のデータ処理方法は、演算手段にて、撮影装置で撮影された映像を表示させるための映像データを処理するデータ処理方法であって、前記演算手段は、前記映像データを取得し、この取得された映像データの映像の特性を分析し、この分析で得られた特性が予め設定された標準値の範囲から外れるシーンを不要シーンとして識別し、前記映像データから前記不要シーンを表示させるための不要シーンデータを選出し、この選出された不要シーンデータに基づいて前記不要シーンを表示手段で表示させる制御をし、入力手段の入力操作に基づいて、所定の前記不要シーンデータが必要か否かを判断し、前記不要シーンとして識別する際の前記特性の標準値範囲に関する標準情報を記憶し、所定の前記不要シーンデータが必要か否かの判断結果に基づいて、前記所定の不要シーンデータを不要シーンと識別する元になった特性について前記標準情報の前記標準値範囲を変更することを特徴とする。
【００１０】
本発明のデータ処理プログラムは、前述した本発明のデータ処理方法を演算手段に実行させることを特徴とする。
【００１１】
本発明のデータ処理プログラムを記録した記録媒体は、前述した本発明のデータ処理プログラムが演算手段にて読取可能に記録されたことを特徴とする。
【発明を実施するための最良の形態】
【００１２】
［第１実施形態］
以下に、本発明の第１実施形態を図面に基づいて説明する。この第１実施形態、および、後述する第２〜第４実施形態では、映像データから利用者により不要と判断されうる不要シーンデータを選出して不要シーンを表示させるとともに、利用者が不要と判断した不要シーンデータを削除した編集データを生成する構成を例示して説明する。
この不要シーンとしては、揺れが大きいシーン、いわゆるパンやズームが速いシーン、逆光で撮影されたシーン、フォーカスが合っていないシーン、意図しない物体などが撮影されたシーン、変化の少ない映像が一定以上続くシーンなどが例示できる。
なお、映像データの映像における不要シーン以外のシーン、すなわち利用者により必要と判断されうるシーンを必要シーンと称して説明する。
【００１３】
図１は、本発明の第１，第４実施形態における編集装置の概略構成を示すブロック図である。図２は、第１実施形態および後述する第１実施形態の変形形態におけるシーン分類手段の概略構成を示すブロック図である。図３は、第１〜第４実施形態における特性標準値情報テーブルにおけるデータのテーブル構造を模式的に示す概念図である。図４は、第１〜第４実施形態における不要シーンに対するシーン属性情報のテーブル構造を模式的に示す概念図である。図５は、第１，第２実施形態におけるシーン選別手段の概略構成を示すブロック図である。図６は、第１〜第４実施形態におけるアイコン関連情報テーブルにおけるデータのテーブル構造を模式的に示す概念図である。図７は、第１，第２，第４実施形態における不要シーンの通常再生処理時および要約再生処理時の動作を示すタイミングチャートであり、（Ａ）部分は通常再生処理時の動作、（Ｂ）部分は要約再生処理時の動作を示す。図８は、第１，第２，第４実施形態における削除選択画面の概略構成を示す模式図である。
【００１４】
〔編集装置の構成〕
図１において、１００Ａは、データ処理装置としての編集装置である。この編集装置１００Ａは、映像データから不要シーンデータを選出して不要シーンを表示させるとともに、利用者の判断に基づいて、映像データから不要シーンデータを削除した編集データを生成する。
そして、編集装置１００Ａは、表示手段１１０と、入力手段１２０と、編集処理部１３０と、などを備えている。
【００１５】
表示手段１１０は、編集処理部１３０にて制御され編集処理部１３０からの所定の画像を表示させるための画像信号Ａｓを画面表示させる。この表示手段１１０としては、例えば液晶パネルや有機ＥＬ（Electro Luminescence）パネル、ＰＤＰ（Plasma Display Panel）、ＣＲＴ（Cathode-Ray Tube）、ＦＥＤ（Field Emission Display）、電気泳動ディスプレイパネルなどが例示できる。
この表示手段１１０に表示させる画像としては、不要シーンや、この不要シーンを削除するか否かを利用者に選択させるための削除選択画面７００（図８参照）などが例示できる。
【００１６】
入力手段１２０は、例えばキーボードやマウスなどで、入力操作される図示しない各種操作ボタンや操作つまみなどを有している。これら操作ボタンや操作つまみなどの入力操作は、編集装置１００Ａの動作内容の設定入力や、不要シーンを削除するか否かの設定入力などである。
そして、入力手段１２０は、設定事項の入力操作により、設定事項に対応する入力信号Ａｔを編集処理部１３０へ適宜出力して設定入力させる。なお、入力操作としては、操作ボタンや操作つまみなどの操作に限らず、例えば表示手段１１０に設けられたタッチパネルによる入力操作や、音声による入力操作などにより、各種設定事項を設定入力する構成としてもできる。
【００１７】
編集処理部１３０は、映像データ出力手段１０と、ストレージ２０と、に接続されている。
編集処理部１３０は、映像データ出力手段１０から、映像信号Ｅｄとして出力される例えば図示しない撮影装置で撮影された映像データを取得する。さらに、この映像データから不要シーンデータを適宜削除した編集データを生成して、編集信号Ｓｚとしてストレージ２０へ出力し、編集データをストレージ２０に蓄積させる。なお、ストレージ２０としては、ＨＤ（Hard Disc）、ＤＶＤ（Digital Versatile Disc）、光ディスク、メモリカードなどの記録媒体に読み出し可能に記憶するドライブやドライバなどが例示できる。
そして、編集処理部１３０は、シーン分類手段１４０と、シーン選別手段１５０と、シーン整列手段１６０と、などを備えている。
【００１８】
シーン分類手段１４０は、映像データ出力手段１０と、シーン選別手段１５０と、編集データ生成手段としてのシーン整列手段１６０と、に接続されている。
シーン分類手段１４０は、映像信号Ｅｄの映像データを、不要シーンデータと、必要シーンデータと、に分類して出力する。
そして、シーン分類手段１４０は、図２に示すように、標準情報記憶手段としての特性標準値保持手段１４１と、映像データ取得手段１４２と、遅延手段１４３と、特性分析手段１４４と、特性統合化手段１４５と、識別手段としての特性比較手段１４６と、選出手段としての分類振分手段１４７と、などを備えている。
【００１９】
特性標準値保持手段１４１は、特性比較手段１４６に接続されている。
特性標準値保持手段１４１は、図３に示すような特性標準値情報テーブル３０を適宜読み出し可能に記憶している。
特性標準値情報テーブル３０は、少なくとも１つの特性標準値情報３１を備えている。この特性標準値情報３１は、所定のシーンを不要シーンとして識別する際の所定の特性の標準に関する情報である。
そして、特性標準値情報３１は、特性情報３２と、特性パラメータ標準情報３３と、などが関連付けられた１つのデータに構成されている。
【００２０】
特性情報３２は、特性分析手段１４４が出力する種々の映像特性から構成されている。具体的には、特性情報３２には、後述する色特性分析手段１４４Ａが出力する「輝度分布」、「色度分布」、動き特性分析手段１４４Ｂが出力する「カメラワーク」、「動き領域」、空間周波数特性分析手段１４４Ｃが出力する「低周波領域」、などが含まれる。
【００２１】
特性パラメータ標準情報３３には、不要シーンとして識別する際の標準となる各種パラメータが記録されている。すなわち、所定のシーンにおけるパラメータが、この特性パラメータ標準情報３３に記録された標準範囲内の場合に、必要シーンとして識別され、標準範囲外の場合に、不要シーンとして識別される。
【００２２】
映像データ取得手段１４２は、遅延手段１４３と、特性分析手段１４４と、に接続されている。
映像データ取得手段１４２は、映像データ出力手段１０から映像信号Ｅｄを取得して、この映像信号Ｅｄの映像データを遅延手段１４３および特性分析手段１４４へ出力する。
【００２３】
遅延手段１４３は、分類振分手段１４７に接続されている。
遅延手段１４３は、映像データ取得手段１４２から映像データを取得する。そして、この映像データを、特性分析手段１４４、特性統合化手段１４５、および、特性比較手段１４６における不要シーンの識別処理に要する時間と略等しい時間だけ遅延させて、分類振分手段１４７へ出力する。
【００２４】
特性分析手段１４４は、映像データの映像の特性を分析する。そして、この特性分析手段１４４は、それぞれ映像データ取得手段１４２および特性統合化手段１４５に接続された、色特性分析手段１４４Ａと、動き特性分析手段１４４Ｂと、空間周波数特性分析手段１４４Ｃと、を備えている。
【００２５】
色特性分析手段１４４Ａは、撮影時の環境などに起因する映像の色特性を分析する。
具体的には、色特性分析手段１４４Ａは、各シーンにおける色特性として、色の明度、色調、および、彩度のヒストグラムを分析する。
そして、色の各成分に関する分散値、最大値、最小値、などの色特性値を、フレームシーケンス情報に対応付けて、特性統合化手段１４５へ出力する。
【００２６】
動き特性分析手段１４４Ｂは、映像の動き特性を分析し、その結果から、撮影時のカメラワークや、カメラワークと独立して動いている領域などを認識する。
そして、カメラワークに関する認識結果（パン、ズーム、フィクスなどの種別情報や、速度情報など）、動き領域に関する認識結果（領域数、各領域の位置・大きさ・速度など）を、フレームシーケンス情報に対応付けて、特性統合化手段１４５へ出力する。
【００２７】
空間周波数特性分析手段１４４Ｃは、映像の空間周波数特性を分析する。
具体的には、空間周波数特性分析手段１４４Ｃは、各映像フレームにおける分割領域ごとのＦＦＴ（Fast Fourier Transform）係数やＤＣＴ（Discrete Cosine Transform）係数などを算出して、局所的な空間周波数特性を分析する。
そして、極端に特性が低周波に偏った領域に関する情報（領域数、各領域の位置、大きさなど）を、フレームシーケンス情報に対応付けて、特性統合化手段１４５へ出力する。
【００２８】
なお、以下において、色特性に関する色特性情報、カメラワークに関する動き特性情報、空間周波数特性に関する空間周波数特性情報のうち少なくとも２つをまとめて表現する際には、特性分析情報と称して説明する。
【００２９】
特性統合化手段１４５は、特性比較手段１４６に接続されている。
特性統合化手段１４５は、特性分析手段１４４からフレームシーケンス情報と、このフレームシーケンス情報に対応付けられた個々の特性分析情報を取得する。さらに、フレームシーケンス情報に基づいて、個別に取得した特性分析情報を、同一のフレームシーケンスに対応した特性分析情報に統合する。そして、適宜フレームシーケンス情報と、統合化された特性分析情報と、を特性比較手段１４６へ出力する。
【００３０】
特性比較手段１４６は、分類振分手段１４７と、シーン選別手段１５０と、に接続されている。
特性比較手段１４６は、特性統合化手段１４５からのフレームシーケンス情報および特性分析情報を取得する。また、特性標準値保持手段１４１から特性標準値情報テーブル３０を取得する。そして、所定のフレームシーケンス情報に対応付けられた特性分析情報で示される特性が、特性標準値情報テーブル３０の特性パラメータ標準情報３３の標準範囲内か否かを判断する。
【００３１】
例えば、所定のフレームシーケンス情報に対応する動き特性情報のカメラワーク種別情報がパンである場合、動き特性情報に記録されたカメラワーク速度が、カメラワークがパンである場合の特性パラメータ標準情報３３に記録されたカメラワーク速度の標準範囲内か否かを判断する。
【００３２】
そして、特性比較手段１４６は、特性パラメータ標準情報３３の標準範囲内であると判断した場合、このフレームシーケンスのシーンの属性は通常のパンであると判断する。さらに、１つのフレームシーケンス情報に複数の特性分析情報が対応付けられている場合、それぞれの特性分析情報で示される特性について、特性パラメータ標準情報３３の標準範囲内か否かを判断する。そして、全ての特性について、標準範囲内であると判断した場合、このフレームシーケンス情報に対応するシーンが必要シーンであると識別する。さらに、このフレームシーケンス情報に、必要シーンである旨が記録された識別情報を対応付けて、分類振分手段１４７へ出力する。
【００３３】
また、特性比較手段１４６は、フレームシーケンス情報に対応付けられた全ての特性分析情報のうち、少なくともいずれか１つの特性分析情報で示される特性が特性パラメータ標準情報３３の標準範囲外であると判断した場合、このフレームシーケンス情報のシーンが不要シーンであると識別する。そして、フレームシーケンス情報に、不要シーンである旨が記録された識別情報を対応付けて、分類振分手段１４７へ出力する。
さらに、特性比較手段１４６は、不要シーンであると識別したシーンに対応付けて、図４に示すような特性内容情報としてのシーン属性情報５０を生成する。例えば、カメラワークがパンであり、その速度が特性パラメータ標準情報３３の標準範囲を超えて大きい場合は、高速パンであることを示す属性情報５１と、その速度を表すパラメータ情報５２と、を有するシーン属性情報５０を生成する。そして、このシーン属性情報５０をフレームシーケンス情報に関連付けて、図１および図２に示すように、シーン属性信号Ｔｎに変換してシーン選別手段１５０へ出力する。
【００３４】
分類振分手段１４７は、図１および図２に示すように、シーン選別手段１５０と、シーン整列手段１６０と、に接続されている。
分類振分手段１４７は、特性比較手段１４６からフレームシーケンス情報および識別情報を取得する。さらに、遅延手段１４３から映像データを取得する。そして、所定の映像フレームデータのフレームシーケンス情報に対応する識別情報に、必要シーンである旨が記載されていると判断した場合、この映像フレームデータを必要シーンデータとして必要シーン信号Ｓｋに変換して、シーン整列手段１６０へ出力する。
一方、識別情報に、不要シーンである旨が記載されていると判断した場合、映像フレームデータを不要シーンデータとして不要シーン信号Ｓｔに変換して、シーン選別手段１５０へ出力する。
【００３５】
シーン選別手段１５０は、表示手段１１０と、入力手段１２０と、シーン整列手段１６０と、に接続されている。
シーン選別手段１５０は、不要シーンデータを表示手段１１０で表示させ、利用者により削除しないデータとして選択された不要シーンデータを選択シーンデータとしてシーン整列手段１６０へ出力する。
そして、シーン選別手段１５０は、図５に示すように、アイコン保持手段１５１と、蓄積手段１５２と、表示制御手段としての要約再生手段１５３と、表示制御手段および必要性判断手段としてのＧＵＩ（Graphical User Interface）１５４と、選別振分手段１５５と、を備えている。
【００３６】
アイコン保持手段１５１は、要約再生手段１５３に接続されている。
アイコン保持手段１５１は、図６に示すようなアイコン関連情報テーブル４０を適宜読み出し可能に記憶している。
アイコン関連情報テーブル４０は、シーン属性情報５０の属性情報５１と同数のアイコン関連情報４１を備えている。このアイコン関連情報４１は、削除選択画面７００に、不要シーンの属性を示すアイコンに関する情報である。
そして、アイコン関連情報４１は、シーン属性情報５０の属性情報５１と同様の内容が記録された属性情報４２と、アイコンを表示させる際に利用されるアイコンデータ４３と、などが関連付けられた１つのデータに構成されている。
【００３７】
蓄積手段１５２は、要約再生手段１５３と、選別振分手段１５５と、に接続されている。また、シーン分類手段１４０の特性比較手段１４６と、分類振分手段１４７と、に接続されている。
蓄積手段１５２は、特性比較手段１４６からのシーン属性信号Ｔｎを取得して、このシーン属性信号Ｔｎのシーン属性情報５０を蓄積する。そして、このシーン属性情報５０を、要約再生手段１５３へ適宜出力する。
また、蓄積手段１５２は、分類振分手段１４７からの不要シーン信号Ｓｔを取得して、この不要シーン信号Ｓｔの不要シーンデータを蓄積する。そして、この不要シーンデータを、要約再生手段１５３および選別振分手段１５５へ適宜出力する。
【００３８】
要約再生手段１５３は、ＧＵＩ１５４に接続されている。
要約再生手段１５３は、ＧＵＩ１５４から不要シーンを通常再生する旨、または、要約再生する旨の再生状態信号を取得して、この再生状態信号に基づく再生処理を実施する。
具体的には、要約再生手段１５３は、通常再生処理を実施する場合、全ての不要シーンデータを表示順序通りに表示させ、全ての不要シーンを動画として再生する制御をする。
例えば、図７（Ａ）に示すように、図示しない複数の不要シーンデータを有する不要シーンデータグループ７０で再生されるシーン１が逆光シーンであり、かつ、他の不要シーンデータグループ７０で再生されるシーン２が手ブレシーンの場合、これら全ての不要シーンデータグループ７０に基づき全ての不要シーンを動画として再生して、再生情報としてＧＵＩ１５４へ出力する。
さらに、蓄積手段１５２からシーン属性情報５０を取得するとともに、アイコン保持手段１５１から不要シーンの属性に対応するアイコンデータ４３を抽出する。そして、これらを、削除選択画面７００を表示させるための状態に変換、加工して、ＧＵＩ１５４へ出力する。
【００３９】
一方、要約再生手段１５３は、要約再生処理を実施する場合、不要シーンデータグループ７０から不要シーンデータを適宜選択的に抽出して、不要シーンの一部を動画または静止画として再生する制御をする。
具体的には、シーン属性情報５０の属性情報５１に基づいて、不要シーンの属性が逆光、色かぶり、障害物、デフォーカスのうちの少なくともいずれか１つであることを認識すると、不要シーンデータグループ７０から例えば所定時間ごとに表示される静止画の不要シーンデータ、すなわち表示順序が略連続しない不要シーンデータを、静止画要約シーンデータ７１として抽出する。
【００４０】
また、要約再生手段１５３は、不要シーンの属性が高速パン、手ブレのうち少なくともいずれか一方であることを認識すると、シーン属性情報５０に基づいて、複数の不要シーンデータから、その属性の特性が顕著な不要シーン、例えば手ブレの状態が激しい不要シーンを認識する。そして、その不要シーンを動画として表示させるための不要シーンデータ、すなわち表示順序が略連続する複数の不要シーンデータを、動画要約シーンデータ７２として抽出する。
例えば、図７（Ｂ）に示すように、逆光シーンの不要シーンデータグループ７０から静止画要約シーンデータ７１を抽出するとともに、手ブレシーンの不要シーンデータグループ７０から動画要約シーンデータ７２を抽出する。
そして、要約再生手段１５３は、これらに基づく逆光シーンを静止画として再生するとともに、手ブレシーンを動画として再生して、再生情報としてＧＵＩ１５４へ出力する。
さらに、要約再生される不要シーンデータに対応するシーン属性情報５０およびアイコンデータ４３を抽出、変換、加工して、ＧＵＩ１５４へ出力する。
【００４１】
ＧＵＩ１５４は、表示手段１１０と、入力手段１２０と、選別振分手段１５５と、に接続されている。
ＧＵＩ１５４は、入力手段１２０から入力信号Ａｔを取得すると、この入力信号Ａｔに基づいて、不要シーンを通常再生または要約再生する旨の設定入力を認識する。そして、この認識した内容に対応する再生状態信号を要約再生手段１５３へ出力する。
また、ＧＵＩ１５４は、要約再生手段１５３から再生情報、シーン属性情報５０、アイコンデータ４３を取得すると、これらに基づいて、図８に示すような削除選択画面７００を表示させるための画像信号Ａｓを、表示手段１１０へ出力する。
【００４２】
ここで、削除選択画面７００は、再生映像領域７１０と、シーン属性領域７２０と、選択操作領域７３０と、を備えている。
【００４３】
再生映像領域７１０は、削除選択画面７００における略中央から左上縁近傍にかけて設けられている。この再生映像領域７１０には、再生情報に基づいて、図７（Ａ）に示すような通常再生の動画、または、図７（Ｂ）に示すような要約再生された不要シーンの動画や静止画が表示される。
【００４４】
シーン属性領域７２０は、再生映像領域７１０の右側に設けられている。このシーン属性領域７２０には、再生中の不要シーンの番号に関するシーン番号情報７２１と、アイコンデータ４３に基づくアイコン７２２と、シーン属性情報５０で示される特性値をグラフで表す特性グラフ情報７２３と、シーン属性情報５０で示される属性および特性値を文字列で表す特性文字列情報７２４と、が表示される。
このシーン属性領域７２０に表示される内容は、再生映像領域７１０で表示される不要シーンに対応して適宜更新される。
【００４５】
選択操作領域７３０は、再生映像領域７１０およびシーン属性領域７２０の下側に設けられている。この選択操作領域７３０には、再生中の不要シーンを削除するか否かの設定入力を促す旨の選択メッセージ情報７３１と、削除する際に選択される削除情報７３２と、削除せずに選択シーンとする際に選択される非削除情報７３３と、利用者により選択された削除情報７３２または非削除情報７３３を囲むカーソル７３４と、が表示される。
ここで、再生映像領域７１０における１点鎖線Ｑ１から左隅部分にかけての領域Ｒ１は、逆光の影響を受けている領域を意味する。また、２点鎖線Ｑ２で囲まれた領域Ｒ２は、手ブレの影響により存在する像を意味する。
【００４６】
そして、ＧＵＩ１５４は、入力手段１２０からの入力信号Ａｔに基づいて、選択シーンとして選択された旨または削除する旨の設定入力を認識する。そして、この認識した内容に対応する選択判定結果情報を、選択対象の不要シーンと対応付けて選別振分手段１５５へ出力する。
例えば、ＧＵＩ１５４は、図７（Ａ）に示すような通常再生時において、逆光シーンの再生中に選択シーンとして選択された旨を認識すると、この逆光シーン全体を選択シーンとして選択する旨の選択判定結果情報を出力する。また、図７（Ｂ）に示すような要約再生時において、逆光シーンの静止画や手ブレシーンの動画の再生中に削除する旨を認識すると、逆光シーン全体や手ブレシーン全体を削除する旨の選択判定結果情報を出力する。
【００４７】
選別振分手段１５５は、図１および図５に示すように、シーン整列手段１６０に接続されている。
選別振分手段１５５は、蓄積手段１５２から不要シーンデータを取得するとともに、ＧＵＩ１５４から不要シーンと対応付けられた選択判定結果情報を取得する。そして、所定の不要シーンが選択シーンとして選択されたことを認識すると、この選択された不要シーンの不要シーンデータを選択シーンデータとして選択シーン信号Ｓｓに変換して、シーン整列手段１６０へ出力する。
また、不要シーンが削除するものとして選択されたことを認識すると、この不要シーンの不要シーンデータを廃棄する処理をする。
【００４８】
シーン整列手段１６０は、図１に示すように、ストレージ２０に接続されている。また、シーン分類手段１４０の分類振分手段１４７と、シーン選別手段１５０の選別振分手段１５５と、に接続されている。
シーン整列手段１６０は、分類振分手段１４７からの必要シーン信号Ｓｋと、選別振分手段１５５からの選択シーン信号Ｓｓと、を適宜取得する。そして、必要シーン信号Ｓｋの必要シーンデータと、選択シーン信号Ｓｓの選択シーンデータと、を表示順序に整列し、必要シーンおよび選択シーンを再生するための編集データを生成する。そして、この編集データを編集信号Ｓｚに変換して、ストレージ２０へ出力する。
【００４９】
〔編集装置の動作〕
次に、編集装置１００Ａの動作として、編集データの生成処理について、図面を参照して説明する。
図９は、第１実施形態における編集データの生成処理を示すフローチャートである。図１０は、第１のシーン分類処理を示すフローチャートである。図１１は、第１のシーン選別処理を示すフローチャートである。
【００５０】
まず、編集装置１００Ａは、図９に示すように、シーン分類手段１４０にて、映像データ出力手段１０から映像データを取得する（ステップＳ１）。そして、第１のシーン分類処理を実施して（ステップＳ２）、必要シーンデータをシーン整列手段１６０へ、不要シーンデータをシーン選別手段１５０へ、それぞれ出力する。
この後、シーン選別手段１５０にて、第１のシーン選別処理を実施して（ステップＳ３）、選択シーンデータをシーン整列手段１６０へ出力する。そして、シーン整列手段１６０にて、必要シーンデータおよび選択シーンデータを有する編集データを生成して（ステップＳ４）、ストレージ２０に蓄積させる。
【００５１】
ステップＳ２における第１のシーン分類処理では、シーン分類手段１４０は、図１０に示すように、映像データを遅延手段１４３および特性分析手段１４４へ出力する（ステップＳ１１）。そして、特性分析手段１４４は、映像データの映像における各シーンの特性を分析する（ステップＳ１２）。そして、各シーンのフレームシーケンスに、特性を対応付けて（ステップＳ１３）、特性統合化手段１４５へ出力する。
特性統合化手段１４５は、特性分析手段１４４における特性の対応付け結果を再統合して（ステップＳ１４）、その結果を特性比較手段１４６へ出力する。
特性比較手段１４６は、特性統合化手段１４５から再統合処理の結果を取得すると、特性標準値情報３１に基づいて、各シーンが不要シーンであるか否かを識別して（ステップＳ１５）、識別情報を生成する。さらに、この不要シーンと識別したシーンのシーン属性情報５０を生成して（ステップＳ１６）、識別情報とともに分類振分手段１４７へ出力する。
【００５２】
分類振分手段１４７は、識別情報に基づいて、遅延手段１４３から取得した映像フレームデータの映像フレームが不要シーンか否かを判断する（ステップＳ１７）。
このステップＳ１７において、シーン分類手段１４０は、不要シーンであると判断した場合、映像フレームデータを不要シーンデータとして、シーン属性情報５０とともにシーン選別手段１５０へ出力する（ステップＳ１８）。
一方、ステップＳ１７において、不要シーンでないと判断した場合、映像フレームデータを必要シーンデータとして、シーン整列手段１６０へ出力する（ステップＳ１９）。
【００５３】
ステップＳ３における第１のシーン選別処理では、シーン選別手段１５０は、図１１に示すように、蓄積手段１５２にて、不要シーンデータおよびシーン属性情報５０を蓄積する（ステップＳ３１）。そして、不要シーンデータを選別振分手段１５５および要約再生手段１５３へ出力するとともに（ステップＳ３２）、シーン属性情報５０を要約再生手段１５３へ出力する（ステップＳ３３）。
この後、要約再生手段１５３は、ＧＵＩ１５４からの再生状態信号に基づいて、要約再生を実施するか否かを判断する（ステップＳ３４）。
【００５４】
このステップＳ３４において、要約再生を実施すると判断した場合、静止画要約シーンデータ７１や動画要約シーンデータ７２を抽出する処理を、要約再生シーンデータの抽出処理として実施する（ステップＳ３５）。さらに、シーン属性情報５０を変換、加工する（ステップＳ３６）。そして、シーン選別手段１５０は、要約再生処理を実施して（ステップＳ３７）、削除選択画面７００を表示させる（ステップＳ３８）。
一方、ステップＳ３４において、要約再生ではなく通常再生を実施すると判断した場合、通常再生処理を実施して（ステップＳ３９）、ステップＳ３８の処理を実施する。
【００５５】
この後、ＧＵＩ１５４にて、設定入力を認識して（ステップＳ４０）、再生中の不要シーンが選択シーンとして選択されたか否かを判断する（ステップＳ４１）。
このステップＳ４１において、選択シーンとして選択されたと判断した場合、選別振分手段１５５にて、この不要シーンの不要シーンデータを選択シーンデータとして、シーン整列手段１６０へ出力する（ステップＳ４２）。
一方、ステップＳ４１において、削除すると判断した場合、不要シーンデータを廃棄する（ステップＳ４３）。
【００５６】
〔第１実施形態の作用効果〕
上述したように、上記第１実施形態では、編集装置１００Ａは、映像データの映像から、利用者により必要と判断されうる必要シーンと異なる特性のシーン、例えば逆光シーンや手ブレシーンを不要シーンとして選別する。そして、この不要シーンに対応する不要シーンデータを映像データから選出して、この不要シーンデータに基づく不要シーンを表示手段１１０で再生する。
このため、編集装置１００Ａは、利用者に、手ブレや逆光のシーンであっても必要なものと、不要なものと、を選別させることができる。また、例えば略等しい場所が撮影された類似する映像の中に、手ブレシーンが存在している場合、利用者に手ブレシーンを選択する作業を実施させることなく、それが存在していることを認識させることができる。
したがって、編集装置１００Ａは、利用者に適切な映像データの編集を容易に実施させることができる。
【００５７】
そして、各シーンの動き特性に基づいて、カメラワークに起因する高速パン、手ブレのシーンを不要シーンとして選出する。
このため、利用者に、一般的にカメラワークに起因して起きやすい高速パンや手ブレの不要シーンを認識させることができ、利便性を向上させることができる。
【００５８】
さらに、各シーンの色特性に基づいて、逆光、色かぶりのシーンを不要シーンとして選出する。
このため、利用者に、一般的に環境に起因して起きやすい逆光や色かぶりの不要シーンを認識させることができ、利便性をより向上させることができる。
【００５９】
そして、各シーンにおける動きや空間周波数の特性に基づいて、障害物がカメラの前を横切ったシーン、障害物が映像の周縁に存在するシーンを不要シーンとして選出する。
このため、利用者に、意図しない障害物が存在する不要シーンを認識させることができ、利便性をさらに向上させることができる。
【００６０】
さらに、各シーンにおける空間周波数特性に基づいて、デフォーカスなシーンを不要シーンとして選出する。
このため、利用者に、一般的に起きやすいデフォーカスな不要シーンを認識させることができ、利便性をさらに向上させることができる。
【００６１】
そして、不要シーンの属性が高速パン、手ブレのうち少なくともいずれか一方であることを認識すると、不要シーンの一部を動画として要約再生する。
このため、静止画でなく動画で再生しないと利用者にその属性を認識させることができない高速パン、手ブレの不要シーンの一部を、動画として要約再生するので、短時間で多くの不要シーンを利用者に認識させることができる。
【００６２】
また、不要シーンの属性が逆光、色かぶり、障害物、デフォーカスのうち少なくともいずれか１つであることを認識すると、不要シーンの一部を静止画として要約再生する。
このため、動画でなく静止画で再生しても利用者にその属性を認識させることができる逆光、色かぶり、障害物、デフォーカスなどの不要シーンの一部を、静止画として要約再生するので、短時間でさらに多くの不要シーンを利用者に認識させることができる。
【００６３】
そして、利用者の設定入力に基づいて、不要シーンの全てを再生する通常再生、または、上述した要約再生を実施する。
このため、利用者の嗜好に応じた状態で不要シーンを再生でき、利便性をより向上できる。
【００６４】
さらに、編集装置１００Ａのシーン分類手段１４０は、必要シーンデータをシーン整列手段１６０へ出力する。また、シーン選別手段１５０は、利用者により選択された不要シーンデータを選択シーンデータとして、シーン整列手段１６０へ出力する。そして、シーン整列手段１６０は、必要シーンデータおよび選択シーンデータを有する編集データを生成する。
このため、編集装置１００Ａは、映像データを利用者の嗜好に応じて編集した編集データを生成でき、利便性を更に向上できる。
【００６５】
また、特性標準値保持手段１４１の特性標準値情報３１に基づいて、所定のシーンが不要シーンか否かを識別する。
このため、特性分析情報および特性標準値情報３１を比較するだけの簡単な処理で、不要シーンを識別できる。したがって、不要シーン識別処理時の処理負荷を低減できる。
【００６６】
そして、不要シーンを再生する際に、その属性、特性値をあわせて表示させる。
このため、利用者に、不要シーンの手ブレや逆光などの属性や度合いを認識させることができ、適切に取捨選択させることができる。
【００６７】
さらに、不要シーンの属性をアイコンで表示させるとともに、特性値をグラフで表示させる。
このため、利用者に、不要シーンの属性や度合いをより容易に認識させることができ、編集時の作業負荷を低減させることができる。
【００６８】
［第２実施形態］
次に、本発明の第２実施形態を図面に基づいて説明する。
なお、この第２実施形態において、上記第１実施形態における不要シーンのうち、補正可能な不要シーンを補正可能シーンと称して説明する。また、上記第１実施形態と同様の構成については、同一符号、同一名称を適宜付し、その説明を省略または簡略化する。
図１２は、第２実施形態における編集装置の概略構成を示すブロック図である。図１３は、第２実施形態および第２実施形態の変形形態におけるシーン分類手段の概略構成を示すブロック図である。
【００６９】
〔編集装置の構成〕
図１２において、１００Ｂは、データ処理装置としての編集装置である。そして、編集装置１００Ｂは、表示手段１１０と、入力手段１２０と、編集処理部２００と、を備えている。また、編集処理部２００は、シーン分類手段２１０と、シーン補正手段２２０と、シーン選別手段１５０と、編集データ生成手段としてのシーン整列手段２３０と、などを備えている。
【００７０】
シーン分類手段２１０は、映像データ出力手段１０と、シーン選別手段１５０と、シーン補正手段２２０と、シーン整列手段２３０と、に接続されている。
シーン分類手段２１０は、映像データを、不要シーンデータと、必要シーンデータと、に分類する。さらに、不要シーンデータのうち、補正可能シーンに対応するものを補正可能シーンデータとして分類する。そして、不要シーンデータをシーン選別手段１５０へ、補正可能シーンデータをシーン補正手段２２０へ、必要シーンデータをシーン整列手段２３０へ、それぞれ出力する。
ここで、補正可能シーンデータが、本発明における補正可能シーンの不要シーンデータに対応し、不要シーンデータが、本発明における補正不可能シーンの不要シーンデータに対応する。
このシーン分類手段２１０は、図１３に示すように、上記第１実施形態のシーン分類手段１４０と同様の構成を有し、特性比較手段１４６と、分類振分手段１４７と、の代わりに、識別手段としての特性比較手段２１１と、選出手段としての分類振分手段２１２と、を備えている。
【００７１】
特性標準値保持手段１４１は、図３に示すような特性標準値情報テーブル３５を適宜読み出し可能に記憶している。
特性標準値情報テーブル３５は、少なくとも１つの特性標準値情報３６を備えている。この特性標準値情報３６は、所定のシーンを不要シーン、補正可能シーンとして識別する際の所定の属性の標準に関する情報である。
そして、特性標準値情報３６は、特性情報３７と、特性パラメータ標準情報３８と、などが関連付けられた１つのデータに構成されている。
【００７２】
特性パラメータ標準情報３８には、不要シーン、補正可能シーンとして識別する際の標準となる各種パラメータが記録されている。すなわち、所定のシーンにおけるパラメータが、この特性パラメータ標準情報３８に記録された第１の標準範囲内の場合に、必要シーンとして識別される。また、第１の標準範囲外であり、かつ、この第１の標準範囲よりも広い第２の標準範囲内の場合に、補正可能シーンとして識別される。さらに、第２の標準範囲外の場合に、不要シーンとして識別される。
【００７３】
特性比較手段２１１は、図１２および図１３に示すように、分類振分手段２１２と、シーン補正手段２２０と、シーン選別手段１５０と、に接続されている。
特性比較手段２１１は、特性統合化手段１４５からフレームシーケンス情報および特性分析情報を取得する。さらに、所定のフレームシーケンス情報に対応する全ての特性分析情報の特性が、特性パラメータ標準情報３８における第１の標準範囲内であると判断した場合、このシーンが必要シーンであると識別する。そして、その旨の識別情報をフレームシーケンス情報に対応付けて、分類振分手段２１２へ出力する。
【００７４】
また、特性比較手段２１１は、フレームシーケンス情報に対応する特性分析情報の特性のうち少なくともいずれか１つが第１の標準範囲外であり、かつ、全てが第２の標準範囲内であると判断した場合、このシーンが補正可能シーンであると識別する。そして、その旨の識別情報を分類振分手段２１２へ出力する。さらに、第１の標準範囲外であると判断した全ての特性分析情報に基づいて生成したシーン属性情報５０を、フレームシーケンス情報に関連付けて、シーン属性信号Ｔｎに変換してシーン補正手段２２０へ出力する。
【００７５】
さらに、特性比較手段２１１は、フレームシーケンス情報に対応する特性分析情報の特性のうち少なくともいずれか１つが第２の標準範囲外であると判断した場合、このシーンが不要シーンであると識別して、その旨の識別情報を分類振分手段２１２へ出力する。さらに、第２の標準範囲外であると判断した全ての特性分析情報に基づいて生成したシーン属性情報５０を、シーン属性信号Ｔｎに変換してシーン選別手段１５０へ出力する。
【００７６】
分類振分手段２１２は、シーン補正手段２２０と、シーン選別手段１５０と、に接続されている。
分類振分手段２１２は、特性比較手段２１１からフレームシーケンス情報および識別情報を取得して、所定のシーンが必要シーンであると判断した場合、この映像フレームデータを必要シーンデータとして必要シーン信号Ｓｋに変換して、シーン整列手段２３０へ出力する。
また、不要シーンであると判断した場合、映像フレームデータを不要シーンデータとして不要シーン信号Ｓｔに変換して、シーン選別手段１５０へ出力する。
さらに、補正可能シーンであると判断した場合、映像フレームデータを補正可能シーンデータとして補正可能シーン信号Ｓｃに変換して、シーン補正手段２２０へ出力する。
【００７７】
シーン補正手段２２０は、シーン整列手段２３０に接続されている。
シーン補正手段２２０は、特性比較手段２１１からのシーン属性信号Ｔｎを取得するとともに、分類振分手段２１２からの補正可能シーン信号Ｓｃを取得する。そして、シーン属性信号Ｔｎのシーン属性情報５０に基づいて、補正可能シーン信号Ｓｃの補正可能シーンデータを補正する。
具体的には、シーン補正手段２２０は、補正可能シーンにおける第１の標準範囲外と判断された特性について、補正処理を実施する。例えば、補正可能シーンが逆光のシーンである、すなわち色特性が第１の標準範囲外である場合、色特性を補正する。そして、この補正したシーンを補正シーンとして表示させるための補正シーンデータを生成して、補正シーン信号Ｓｈとして、シーン整列手段２３０へ出力する。
【００７８】
シーン整列手段２３０は、分類振分手段２１２からの必要シーン信号Ｓｋと、選別振分手段１５５からの選択シーン信号Ｓｓと、シーン補正手段２２０からの補正シーン信号Ｓｈと、を適宜取得する。そして、必要シーンデータと、選択シーンデータと、補正シーンデータと、を表示順序に整列し、必要シーン、選択シーン、補正シーンを再生するための編集データを生成する。そして、この編集データを編集信号Ｓｚに変換して、ストレージ２０へ出力する。
【００７９】
〔編集装置の動作〕
次に、編集装置１００Ｂの動作として、編集データの生成処理について、図面を参照して説明する。
図１４は、第２実施形態における編集データの生成処理を示すフローチャートである。図１５は、第２のシーン分類処理を示すフローチャートである。
なお、上記第１実施形態と同様の動作については、同一符号を付し、その説明を省略する。
【００８０】
まず、編集装置１００Ｂは、図１４に示すように、ステップＳ１の処理を実施すると、第２のシーン分類処理を実施して（ステップＳ５１）、必要シーンデータをシーン整列手段２３０へ、不要シーンデータをシーン選別手段１５０へ、補正可能シーンデータをシーン補正手段２２０へ、それぞれ出力する。
この後、編集装置１００Ｂは、ステップＳ３を実施して、シーン補正手段２２０にて、シーン分類手段２１０からの補正可能シーンデータを補正して（ステップＳ５２）、補正シーンデータをシーン整列手段２３０へ出力する。そして、シーン整列手段２３０にて、必要シーンデータ、選択シーンデータ、補正シーンを有する編集データを生成して（ステップＳ５３）、ストレージ２０に蓄積させる。
【００８１】
ステップＳ５１における第２のシーン分類処理では、シーン分類手段２１０は、図１５に示すように、ステップＳ１１〜Ｓ１４を実施すると、特性比較手段２１１にて、各シーンが不要シーンであるか否かを識別して（ステップＳ６１）、識別情報を生成する。さらに、不要シーンでないと識別したシーンが補正可能シーンであるか否かを識別して（ステップＳ６２）、識別情報を生成する。そして、不要シーンまたは補正可能シーンと識別したシーンのシーン属性情報５０を生成して（ステップＳ６３）、識別情報とともに分類振分手段２１２へ出力する。
【００８２】
分類振分手段２１２は、映像フレームが不要シーンか否かを判断する（ステップＳ６４）。このステップＳ６４において、シーン分類手段１４０は、不要シーンであると判断した場合、ステップＳ１８の処理、すなわち不要シーンデータなどをシーン選別手段１５０へ出力する処理を実施する。
一方、ステップＳ６４において、不要シーンでないと判断した場合、補正可能シーンか否かを判断する（ステップＳ６５）。そして、ステップＳ６５において、補正可能シーンであると判断した場合、補正可能シーンデータとして、シーン属性情報５０とともにシーン補正手段２２０へ出力する（ステップＳ６６）。
また、ステップＳ６５において、補正可能シーンでないと判断した場合、ステップＳ２０の処理を実施する。
【００８３】
〔第２実施形態の作用効果〕
上述したように、上記第２実施の形態では、第１実施形態と同様の作用効果に加え、以下のような作用効果を奏することができる。
【００８４】
編集装置１００Ｂは、映像データの映像から不要シーンデータと、補正可能シーンデータと、必要シーンデータと、を選出する。さらに、補正可能シーンデータを補正して、補正シーンデータを生成する。そして、必要シーンデータと、選択シーンデータと、補正シーンデータと、を有する編集データを生成する。
このため、例えば、逆光のシーンの状態が補正可能なレベルの場合、不要シーンとして再生せずに、逆光の状態を補正した補正シーンとして処理することができる。したがって、不要シーンとして表示されるシーン数を減らすことができ、利用者の作業負荷を減らすことができる。
【００８５】
そして、シーン補正手段２２０にて、補正可能シーンデータを補正する際に、この補正シーンデータに対応するシーン属性情報５０に基づいて、処理を実施する。
このため、シーン属性情報５０に記録されている内容、すなわち実際のシーンの逆光などの状態に対応させた適切な補正処理を実施できる。したがって、適切に補正した補正シーンを有する編集データを生成できる。
【００８６】
［第３実施形態］
次に、本発明の第３実施形態を図面に基づいて説明する。
なお、上記第１，第２実施形態と同様の構成については、同一符号、同一名称を適宜付し、その説明を省略または簡略化する。
図１６は、第３実施形態における編集装置の概略構成を示すブロック図である。図１７は、第３実施形態および第３実施形態の変形形態におけるシーン分類手段の概略構成を示すブロック図である。図１８は、第３実施形態におけるシーン選別手段の概略構成を示すブロック図である。図１９は、第３実施形態における不要シーンおよび補正シーンの通常再生処理時および要約再生処理時の動作を示すタイミングチャートであり、（Ａ）部分は不要シーンの通常再生処理時の動作、（Ｂ）部分は不要シーンの要約再生処理時の動作、（Ｃ）部分は補正シーンの要約再生処理時の動作、（Ｄ）部分は補正シーンの通常再生処理時の動作を示す。図２０は、第３実施形態における削除選択画面の概略構成を示す模式図である。
【００８７】
〔編集装置の構成〕
図１６において、１００Ｃは、データ処理装置としての編集装置である。そして、編集装置１００Ｃは、表示手段１１０と、入力手段１２０と、編集処理部２５０と、などを備えている。また、編集処理部２５０は、シーン分類手段２６０と、シーン補正手段２７０と、シーン選別手段２８０と、シーン整列手段１６０と、などを備えている。
【００８８】
シーン分類手段２６０は、映像データ出力手段１０と、シーン補正手段２７０と、シーン選別手段２８０と、シーン整列手段１６０と、に接続されている。
シーン分類手段２６０は、映像データを、不要シーンデータと、必要シーンデータと、に分類して出力する。
そして、シーン分類手段２６０は、図１７に示すように、第１実施形態のシーン分類手段１４０と同様の構成を有し、特性比較手段１４６と、分類振分手段１４７と、の代わりに、識別手段としての特性比較手段２６１と、選出手段としての分類振分手段２６２と、などを備えている。
【００８９】
特性標準値保持手段１４１は、図３に示すような特性標準値情報テーブル３０を適宜読み出し可能に記憶している。
【００９０】
特性比較手段２６１は、図１６および図１７に示すように、分類振分手段２６２と、シーン補正手段２７０と、シーン選別手段２８０と、に接続されている。
特性比較手段２６１は、特性統合化手段１４５からフレームシーケンス情報および特性分析情報を取得する。さらに、所定のフレームシーケンス情報に対応する全ての特性分析情報の特性が、特性パラメータ標準情報３３の標準範囲内であると判断した場合、このシーンが必要シーンであると識別する。そして、その旨の識別情報をフレームシーケンス情報に対応付けて、分類振分手段２６２へ出力する。
【００９１】
また、特性比較手段２６１は、フレームシーケンス情報に対応する特性分析情報の特性のうち少なくともいずれか１つが標準範囲外であると判断した場合、このシーンが不要シーンであると識別して、その旨の識別情報を分類振分手段２６２へ出力する。さらに、この不要シーンに対応するシーン属性情報５０を、シーン属性信号Ｔｎに変換してシーン補正手段２７０およびシーン選別手段２８０へ出力する。
【００９２】
分類振分手段２６２は、シーン整列手段１６０と、シーン補正手段２７０と、シーン選別手段２８０と、に接続されている。
分類振分手段２６２は、特性比較手段２６１からフレームシーケンス情報および識別情報を取得して、所定のシーンが必要シーンであると判断した場合、この映像フレームデータを必要シーンデータとして必要シーン信号Ｓｋに変換して、シーン整列手段１６０へ出力する。
また、不要シーンであると判断した場合、映像フレームデータを不要シーンデータとして不要シーン信号Ｓｔに変換して、シーン補正手段２７０およびシーン選別手段２８０へ出力する。
【００９３】
シーン補正手段２７０は、シーン選別手段２８０に接続されている。
シーン補正手段２７０は、特性比較手段２６１からのシーン属性信号Ｔｎを取得するとともに、分類振分手段２６２からの不要シーン信号Ｓｔを取得する。さらに、シーン属性信号Ｔｎのシーン属性情報５０に基づき、不要シーン信号Ｓｔの不要シーンデータを補正して、補正シーンデータを生成する。そして、この補正シーンデータを、補正シーン信号Ｓｈとして、シーン選別手段２８０へ出力する。
さらに、シーン補正手段２７０は、シーン属性情報５０の内容を補正後の状態に更新した補正シーン属性情報を生成して、補正シーン属性信号Ｔａとして、シーン選別手段２８０へ出力する。
【００９４】
シーン選別手段２８０は、不要シーンデータおよび補正シーンデータを表示手段１１０で表示させ、利用者により削除しないデータとして選択された不要シーンデータまたは補正シーンデータを選択シーンデータとしてシーン整列手段１６０へ出力する。
そして、シーン選別手段２８０は、図１８に示すように、アイコン保持手段１５１と、蓄積手段２８１と、表示制御手段としての要約再生手段２８２と、表示制御手段および必要性判断手段としてのＧＵＩ２８３と、選別振分手段２８４と、を備えている。
【００９５】
蓄積手段２８１は、要約再生手段２８２と、選別振分手段２８４と、シーン分類手段２６０の特性比較手段２６１と、分類振分手段２６２と、シーン補正手段２７０と、に接続されている。
蓄積手段２８１は、特性比較手段２６１からのシーン属性信号Ｔｎのシーン属性情報５０と、シーン補正手段２７０からの補正シーン属性信号Ｔａの補正シーン属性情報と、を蓄積して、要約再生手段２８２へ適宜出力する。
また、蓄積手段２８１は、分類振分手段２６２からの不要シーンデータと、シーン補正手段２７０からの補正シーン信号Ｓｈの補正シーンデータと、を蓄積して、要約再生手段２８２および選別振分手段２８４へ適宜出力する。
【００９６】
要約再生手段２８２は、再生状態信号を取得して、この再生状態信号に基づく再生処理を実施する。
具体的には、要約再生手段２８２は、通常再生処理を実施する場合、全ての不要シーンおよび補正シーンを動画として再生する制御をする。
例えば、図１９（Ａ）に示すように、図７（Ａ）に示すような第１実施形態と同様の処理をして、全ての不要シーンを動画として再生した再生情報をＧＵＩ２８３へ出力する。
また、図１９（Ｄ）に示すように、図１９（Ａ）のシーン１およびシーン２が補正された動画に対応する２つの補正シーンデータグループ７５に基づき、全ての補正シーンを動画として再生して、再生情報として出力する。
さらに、蓄積手段２８１からシーン属性情報５０および補正シーン属性情報を取得するとともに、アイコン保持手段１５１からアイコンデータ４３を抽出して、これらを、削除選択画面７５０を表示させるための状態に変換、加工して、ＧＵＩ２８３へ出力する。このとき、アイコンデータ４３の表示形態を、不要シーンおよび補正シーンで異なる形態、例えば色調や明るさが異なる形態に設定する。
【００９７】
一方、要約再生手段２８２は、要約再生処理を実施する場合、不要シーンおよび補正シーンの一部を動画または静止画として再生する制御をする。
具体的には、図１９（Ｂ）に示すように、シーン属性情報５０の属性情報５１に基づく不要シーンの属性に基づいて、図７（Ｂ）に示すような第１実施形態と同様の処理をして、例えば逆光シーンを静止画要約シーンデータ７１に基づく静止画として、手ブレシーンを動画要約シーンデータ７２に基づく動画として再生した再生情報を出力する。
また、図１９（Ｃ）に示すように、静止画要約シーンデータ７１を補正した補正シーンデータを補正静止画要約シーンデータ７６として、動画要約シーンデータ７２を補正した補正シーンデータを補正動画要約シーンデータ７７として、補正シーンデータグループ７５から抽出する。そして、逆光シーンおよび手ブレシーンを、これらに基づく静止画および動画として再生した再生情報を出力する。
さらに、要約再生される不要シーンデータおよび補正シーンデータに対応するシーン属性情報５０、補正シーン属性情報、アイコンデータ４３を抽出、変換、加工して出力する。
【００９８】
ＧＵＩ２８３は、不要シーンおよび補正シーンを通常再生または要約再生する旨の設定入力を認識して、再生状態信号を要約再生手段２８２へ出力する。
また、ＧＵＩ２８３は、要約再生手段２８２から再生情報、シーン属性情報５０、補正シーン属性情報、アイコンデータ４３を取得すると、これらに基づいて、図２０に示すような削除選択画面７５０を表示させるための画像信号Ａｓを、表示手段１１０へ出力する。
【００９９】
ここで、削除選択画面７５０は、不要シーン領域７６０と、補正シーン領域７７０と、選択操作領域７８０と、を備えている。
【０１００】
不要シーン領域７６０は、削除選択画面７５０における左側に設けられている。この不要シーン領域７６０には、不要シーンに関する各種映像および情報が表示される。
そして、不要シーン領域７６０は、上下方向略中央に設けられた再生表示領域７６１と、この再生表示領域７６１の上側に設けられたシーン識別領域７６２と、再生表示領域７６１の下側に設けられたシーン属性領域７６３と、を備えている。
再生表示領域７６１には、図１９（Ａ），（Ｂ）に示すような通常再生または要約再生の不要シーンが表示される。シーン識別領域７６２には、シーン番号情報７２１と、再生表示領域７６１の動画などが補正されているか否かに関する補正状態情報７６２Ａと、が表示される。シーン属性領域７６３には、アイコン７２２と、特性グラフ情報７２３と、特性文字列情報７２４と、が表示される。
【０１０１】
補正シーン領域７７０は、不要シーン領域７６０の右側に設けられている。この補正シーン領域７７０は、不要シーン領域７６０の再生表示領域７６１、シーン識別領域７６２、シーン属性領域７６３のそれぞれと同様に設けられ、かつ、同様の情報などが表示される、再生表示領域７７１と、シーン識別領域７７２と、シーン属性領域７７３と、を備えている。
【０１０２】
ここで、不要シーン領域７６０には、例えば逆光の影響を受けている領域Ｒ１が存在する画像が表示され、補正シーン領域７７０には、逆光の影響が補正されたことにより領域Ｒ１が存在しない画像が表示される。
【０１０３】
選択操作領域７８０は、不要シーン領域７６０および補正シーン領域７７０の下側に設けられている。この選択操作領域７８０には、再生中の不要シーンや補正シーンを選択シーンとして選択するなどの設定入力を促す旨の選択メッセージ情報７８１と、不要シーンを選択シーンとする際に選択されるオリジナル選択情報７８２と、補正シーンを選択シーンとする際に選択される自動補正選択情報７８３と、不要シーンおよび補正シーンを削除する際に選択される削除情報７８４と、不要シーンなどを手動で補正する際に選択される手動補正選択情報７８５と、これらのうち利用者により選択されたいずれか１つを囲むカーソル７８６と、が表示される。
【０１０４】
そして、ＧＵＩ２８３は、入力手段１２０からの入力信号Ａｔに基づき設定入力を認識して、この設定入力の内容に対応する選択判定結果情報を選択対象の不要シーン、補正シーンなどと対応付けて選別振分手段２８４へ出力する。
例えば、ＧＵＩ２８３は、不要シーンまたは補正シーンが選択シーンとして選択された旨、これらのシーンをいずれも削除する旨、手動で補正する旨の選択判定結果情報を出力する。
【０１０５】
選別振分手段２８４は、図１６および図１８に示すように、シーン整列手段１６０に接続されている。
選別振分手段２８４は、蓄積手段２８１から不要シーンデータおよび補正シーンデータを取得するとともに、ＧＵＩ２８３から不要シーンや補正シーンなどと対応付けられた選択判定結果情報を取得する。そして、所定の不要シーンや補正シーンが選択シーンとして選択されたことを認識すると、この選択されたシーンに対応する不要シーンデータや補正シーンデータを選択シーンデータとして選択シーン信号Ｓｓに変換して、シーン整列手段１６０へ出力する。
また、不要シーンおよび補正シーンが削除するものとして選択されたことを認識すると、これらに対応する不要シーンデータおよび補正シーンデータを廃棄する処理をする。
【０１０６】
〔編集装置の動作〕
次に、編集装置１００Ｃの動作として、編集データの生成処理について、図面を参照して説明する。
図２１は、第３実施形態における編集データの生成処理を示すフローチャートである。図２２は、第２のシーン選別処理を示すフローチャートである。
なお、上述した各実施形態と同様の動作については、同一符号を付し、その説明を省略する。
【０１０７】
まず、編集装置１００Ｃは、図２１に示すように、ステップＳ１で映像データを取得して、ステップＳ２で第１のシーン分類処理を実施する。
この後、編集装置１００Ｃは、シーン補正手段２７０にて、シーン分類手段２６０からの不要シーンデータを補正して（ステップＳ７１）、補正シーンデータなどをシーン選別手段２８０へ出力する。さらに、シーン選別手段２８０にて、第２のシーン選別処理を実施して（ステップＳ７２）、選択シーンデータをシーン整列手段１６０へ出力する。そして、シーン整列手段１６０にて、編集データを生成して（ステップＳ７３）、ストレージ２０に蓄積させる。
【０１０８】
ステップＳ７２における第２のシーン選別処理では、シーン選別手段２８０は、図２２に示すように、不要シーンデータ、シーン属性情報５０、補正シーンデータ、および、補正シーン属性情報を蓄積する（ステップＳ８１）。そして、不要シーンデータ、補正シーンデータを選別振分手段２８４および要約再生手段２８２へ出力するとともに（ステップＳ８２）、シーン属性情報５０、補正シーン属性情報を要約再生手段２８２へ出力する（ステップＳ８３）。
この後、要約再生手段２８２は、ＧＵＩ２８３からの再生状態信号に基づいて、要約再生を実施するか否かを判断する（ステップＳ８４）。
【０１０９】
このステップＳ８４において、要約再生を実施すると判断した場合、要約再生シーンデータの抽出処理を実施するとともに（ステップＳ８５）、シーン属性情報５０、補正シーン属性情報を変換、加工する（ステップＳ８６）。そして、シーン選別手段２８０は、要約再生処理を実施して（ステップＳ８７）、削除選択画面７５０を表示させる（ステップＳ８８）。
一方、ステップＳ８４において、要約再生ではなく通常再生を実施すると判断した場合、通常再生処理を実施して（ステップＳ８９）、ステップＳ８８の処理を実施する。
【０１１０】
この後、ＧＵＩ２８３にて、設定入力を認識して（ステップＳ９０）、不要シーンが選択シーンとして選択されたか否かを判断する（ステップＳ９１）。
このステップＳ９１において、選択されたと判断した場合、ステップＳ４２の処理、すなわち、不要シーンデータを選択シーンデータとして、シーン整列手段１６０へ出力する。
一方、ステップＳ９１において、選択されていないと判断した場合、補正シーンが選択シーンとして選択されたか否かを判断する（ステップＳ９２）。
【０１１１】
そして、ステップＳ９２において、選択されたと判断した場合、補正シーンデータを選択シーンデータとして出力する（ステップＳ９３）。
また、ステップＳ９２において、選択されていないと判断した場合、手動補正するか否かを判断する（ステップＳ９４）。
このステップＳ９４において、手動補正すると判断した場合、手動補正された不要シーンデータを選択シーンデータとして出力する（ステップＳ９５）。
一方、ステップＳ９４において、手動補正しないと判断した場合、不要シーンデータおよび補正シーンデータを廃棄する（ステップＳ９６）。
【０１１２】
〔第３実施形態の作用効果〕
上述したように、上記第３実施形態では、第１，第２実施形態と同様の作用効果に加え、以下のような作用効果を奏することができる。
【０１１３】
編集装置１００Ｃは、映像データの映像から不要シーンデータと、必要シーンデータと、を選出する。さらに、不要シーンデータを補正して、補正シーンデータを生成する。そして、不要シーン、および、この不要シーンを補正した補正シーンを要約再生、または、通常再生する。
このため、利用者に不要シーンおよび補正シーンを比較させて、いずれかを適切に取捨選択させることができる。
すなわち、補正効果が利用者の嗜好に合う場合に、補正シーンを選択させ、補正が逆効果で利用者の嗜好に合わない場合に、不要シーンを適宜選択させることができる。
したがって、不要シーンのみを要約再生する第１，第２実施形態の構成と比べて、より適切に取捨選択させることができる。
また、不要シーンおよび補正シーンの比較により、手ブレや逆光などの属性や、それらの度合いを直感的に把握させることができる。
さらに、削除選択画面７５０に表示されるアイコン７２２の意味などを、把握させることができる。
【０１１４】
また、シーン分類手段２６０にて、映像データから不要シーンデータと、必要シーンデータと、を選出する。そして、必要シーンデータと、不要シーンデータまたは補正シーンデータである選択シーンデータと、を有する編集データを生成する。
このため、補正シーンデータを有する編集データを生成可能な第２実施形態と同様の作用効果を奏することができる。また、不要シーン、補正可能シーン、および、必要シーンに分類する第２実施形態と比べて、シーン分類手段２６０における処理負荷を低減できるとともに、シーン分類手段２６０の構成の簡略化を図ることができる。
【０１１５】
［第４実施形態］
次に、本発明の第４実施形態を図面に基づいて説明する。
なお、上記第１〜第３実施形態と同様の構成については、同一符号、同一名称を適宜付し、その説明を省略または簡略化する。
図２３は、第４実施形態におけるシーン分類手段の概略構成を示すブロック図である。図２４は、第４実施形態におけるシーン選別手段の概略構成を示すブロック図である。
【０１１６】
〔編集装置の構成〕
図１において、１００Ｄは、データ処理装置としての編集装置である。そして、編集装置１００Ｄは、表示手段１１０と、入力手段１２０と、編集処理部３００と、などを備えている。また、編集処理部３００は、シーン分類手段３１０と、シーン選別手段３２０と、シーン整列手段１６０と、などを備えている。
【０１１７】
シーン分類手段３１０は、映像データを、不要シーンデータと、必要シーンデータと、に分類して出力する。さらに、利用者による不要シーンデータの選択結果により、不要シーンの識別標準を適宜変更する。
そして、シーン分類手段３１０は、図２３に示すように、第１実施形態のシーン分類手段１４０と同様の構成に加え、標準情報更新手段としての特性標準値更新手段３１１を備えている。
【０１１８】
特性標準値更新手段３１１は、図１および図２３に示すように、シーン選別手段３２０と、特性標準値保持手段１４１と、に接続されている。
この特性標準値更新手段３１１は、図示しない、非選択カウンタと、選択カウンタと、を備えている。これら非選択カウンタおよび選択カウンタは、図３に示す特性情報３２の特性にそれぞれ対応して設けられている。
特性標準値更新手段３１１は、特性標準値保持手段１４１の特性標準値情報３１の更新処理を実施する。
【０１１９】
具体的には、特性標準値更新手段３１１は、シーン選別手段３２０からシーン属性信号Ｔｎとして出力されるシーン属性情報５０と、選択判定結果信号Ｈｋとして出力される選択判定結果情報と、を取得する。
そして、選択判定結果情報に、不要シーンデータが選択シーンとして選択されていない、すなわち廃棄された旨が記録されている場合、シーン属性情報５０に基づいて、この不要シーンデータに対応する特性を認識する。さらに、この認識した特性に対応する非選択カウンタを１だけカウントアップする。
例えば、属性が逆光、かつ、手ブレの不要シーンデータが廃棄された場合、逆光属性および手ブレ属性に結びつく輝度分散などの色特性やカメラワーク振幅情報などの動き特性の非選択カウンタをカウントアップする。
さらに、非選択カウンタのカウント値（以下、非選択カウント値と称す）が所定値以上、例えば５以上であることを認識すると、この非選択カウント値に対応する特性（この場合、輝度分散とカメラワーク振幅情報）の特性パラメータ標準情報３３を、標準範囲を狭くする状態に更新する。
【０１２０】
また、特性標準値更新手段３１１は、選択判定結果情報に、不要シーンデータが選択シーンとして選択された旨が記録されている場合、この不要シーンデータの特性に対応する選択カウンタを１だけカウントアップする。さらに、選択カウンタのカウント値（以下、選択カウント値と称す）が所定値以上、例えば５以上であることを認識すると、この選択カウント値に対応する特性の特性パラメータ標準情報３３を、標準範囲を広くする状態に更新する。
【０１２１】
シーン選別手段３２０は、不要シーンデータを表示させ、不要シーンデータを選択シーンデータとしてシーン整列手段１６０へ適宜出力するとともに、不要シーンデータに対応する選択判定結果情報をシーン分類手段３１０へ出力する。
そして、シーン選別手段３２０は、図２４に示すように、アイコン保持手段１５１と、蓄積手段３２１と、要約再生手段１５３と、表示制御手段および必要性判断手段としてのＧＵＩ３２２と、選別振分手段１５５と、多重手段３２３と、を備えている。
【０１２２】
蓄積手段３２１は、要約再生手段１５３と、選別振分手段１５５と、多重手段３２３と、に接続され、第１実施形態の蓄積手段１５２と同様の処理に加え、シーン属性情報５０を多重手段３２３へ出力する処理をする。
ＧＵＩ３２２は、表示手段１１０と、入力手段１２０と、選別振分手段１５５と、多重手段３２３と、に接続され、第１実施形態のＧＵＩ１５４と同様の処理に加え、選択判定結果情報を多重手段３２３へ出力する処理をする。
【０１２３】
多重手段３２３は、シーン分類手段３１０の特性標準値更新手段３１１に接続されている。
この多重手段３２３は、蓄積手段３２１からシーン属性情報５０と、ＧＵＩ３２２から選択判定結果情報と、を取得する。そして、このシーン属性情報５０のシーン属性信号Ｔｎと、選択判定結果情報の選択判定結果信号Ｈｋと、を多重化して、特性標準値更新手段３１１へ出力する。
【０１２４】
〔編集装置の動作〕
次に、編集装置１００Ｄの動作として、編集データの生成処理について、図面を参照して説明する。
図２５は、第４実施形態における編集データの生成処理を示すフローチャートである。図２６は、第３のシーン選別処理を示すフローチャートである。図２７は、特性標準値情報の更新処理を示すフローチャートである。
なお、上述した各実施形態と同様の動作については、同一符号を付し、その説明を省略する。
【０１２５】
まず、編集装置１００Ｄは、図２５に示すように、ステップＳ１，Ｓ２の処理を実施すると、第３のシーン選別処理を実施する（ステップＳ１０１）。
この後、編集装置１００Ｄは、第３のシーン選別手段で選別された選択シーンデータなどを有する編集データを生成して（ステップＳ１０２）、特性標準値情報３１の更新処理を実施する（ステップＳ１０３）。
【０１２６】
ステップＳ１０１における第３のシーン選別処理では、図２６に示すように、ステップＳ３１，Ｓ３２の処理を実施すると、シーン属性情報５０を要約再生手段１５３および多重手段３２３へ出力して（ステップＳ１１１）、ステップＳ３４〜Ｓ４３の処理を適宜実施する。そして、ステップＳ４２またはステップＳ４３の処理を実施すると、この実施結果に対応したシーン属性情報５０、選択判定結果情報を出力する（ステップＳ１１２）。
【０１２７】
また、ステップＳ１０３における特性標準値情報３１の更新処理では、図２７に示すように、特性標準値更新手段３１１は、シーン属性情報５０、選択判定結果情報を取得して（ステップＳ１２１）、不要シーンデータが廃棄されたか否かを判断する（ステップＳ１２２）。
このステップＳ１２２において、廃棄されたと判断した場合、不要シーンデータに該当する全特性の非選択カウンタをカウントアップして（ステップＳ１２３）、非選択カウント値が所定値以上の特性が存在するか否かを判断する（ステップＳ１２４）。
そして、このステップＳ１２４において、存在すると判断した場合、該当する特性のパラメータについて標準範囲を狭くする状態に特性パラメータ標準情報３３を更新して（ステップＳ１２５）、処理を終了する。一方、ステップＳ１２４において、存在しないと判断した場合、処理を終了する。
【０１２８】
また、ステップＳ１２２において、廃棄されていないと判断した場合、該当する全特性の選択カウンタをカウントアップして（ステップＳ１２６）、選択カウント値が所定値以上の特性が存在するか否かを判断する（ステップＳ１２７）。
そして、このステップＳ１２７において、存在すると判断した場合、該当する特性のパラメータについて標準範囲を広くする状態に特性パラメータ標準情報３３を更新して（ステップＳ１２８）、処理を終了する。一方、ステップＳ１２７において、存在しないと判断した場合、処理を終了する。
【０１２９】
〔第４実施形態の作用効果〕
上述したように、上記第４実施形態では、第１〜第３実施形態と同様の作用効果に加え、以下のような作用効果を奏することができる。
【０１３０】
編集装置１００Ｄは、利用者による不要シーンデータの選択結果により、特性標準値情報３１を適宜更新する。
具体的には、廃棄された不要シーンに対応する特性の標準範囲を狭くする状態に、すなわち不要シーンとして識別する標準を甘くする状態に更新する。また、選択シーンとして選択された不要シーンに対応する特性の標準範囲を広くする状態に、すなわち不要シーンとして識別する標準を辛くする状態に更新する。そして、この更新された特性標準値情報３１に基づいて、映像データを、不要シーンデータと、必要シーンデータと、に識別する。
このため、利用者の嗜好を不要シーンの識別標準に反映させることにより、利用者の嗜好により合う状態に不要シーンを識別できる。したがって、利用者の取捨選択作業に、効率性と安心感とをもたらすことができる。
【０１３１】
［実施形態の変形］
なお、本発明は、上述した実施形態に限定されるものではなく、本発明の目的を達成できる範囲で以下に示される変形をも含むものである。
【０１３２】
例えば、第１，第２，第３実施形態の編集装置１００Ａ，１００Ｂ，１００Ｃと同様の構成を用いて、図２８および図２９に示すような第１実施形態の変形形態、図３０に示すような第２実施形態の変形形態、図３１および図３２に示すような第３実施形態の変形形態としてもよい。なお、第１〜第３実施形態と同様の構成については、同一符号、同一名称を適宜付し、その説明を省略または簡略化する。
【０１３３】
図２８に示すように、第１実施形態の変形形態におけるデータ処理装置としての編集装置１００Ｅは、表示手段１１０と、入力手段１２０と、編集処理部３５０と、などを備えている。また、編集処理部３５０は、図２に示すようなシーン分類手段１４０と、ストレージ２０と、シーン選別手段３６０と、などを備えている。
シーン分類手段１４０の特性比較手段１４６および分類振分手段１４７は、ストレージ２０に接続され、シーン属性情報５０、不要シーンデータ、必要シーンデータをストレージ２０に蓄積させる。
シーン選別手段３６０は、ここでは図示しないが、図５に示すようなシーン選別手段１５０の構成において、蓄積手段１５２を備えていない構成を有している。そして、要約再生手段１５３および選別振分手段１５５は、ストレージ２０に接続されている。シーン選別手段３６０は、ストレージ２０からシーン属性情報５０および不要シーンデータを適宜取得し、シーン選別処理で選別された選択シーンデータをストレージ２０に蓄積させる。
また、シーン選別手段３６０のＧＵＩ１５４は、シーン識別処理の際に、図２９に示すような削除選択画面８００を表示させる。
【０１３４】
この削除選択画面８００は、略中央から左上縁近傍にかけて設けられた再生映像領域７１０と、この再生映像領域７１０の下側に設けられたシーン属性領域８１０と、再生映像領域７１０の右側に設けられた蓄積不要シーン領域８２０と、再生映像領域７１０の下側に設けられた選択操作領域７３０と、を備えている。
シーン属性領域８１０には、アイコン７２２と、特性グラフ情報７２３と、特性文字列情報７２４と、が表示される。
蓄積不要シーン領域８２０は、上下方向に３個並んで設けられ、１つの不要シーンに関する個別不要シーン領域８２１を備えている。この個別不要シーン領域８２１には、不要シーンのサムネイル８２１Ａと、シーン番号情報７２１と、不要シーンの再生時間情報８２１Ｂと、が表示される。さらに、蓄積不要シーン領域８２０の上側、および、下側には、個別不要シーン領域８２１の内容をスクロールする際に利用されるスクロールボタン８２２が表示されている。
また、利用者により選択された個別不要シーン領域８２１の周縁には、カーソル８２３が表示される。そして、このカーソル８２３で囲まれた個別不要シーン領域８２１に対応する内容が、再生映像領域７１０およびシーン属性領域８１０に表示される。
【０１３５】
図３０に示すように、第２実施形態の変形形態におけるデータ処理装置としての編集装置１００Ｆは、表示手段１１０と、入力手段１２０と、編集処理部４００と、などを備えている。また、編集処理部４００は、図１３に示すようなシーン分類手段２１０と、シーン補正手段２２０と、ストレージ２０と、シーン選別手段３６０と、などを備えている。
シーン分類手段２１０の特性比較手段２１１および分類振分手段２１２は、ストレージ２０に接続され、シーン属性情報５０、不要シーンデータ、必要シーンデータをストレージ２０に蓄積させるとともに、シーン属性情報５０および補正可能シーンデータをシーン補正手段２２０へ出力する。
【０１３６】
図３１に示すように、第３実施形態の変形形態におけるデータ処理装置としての編集装置１００Ｇは、表示手段１１０と、入力手段１２０と、編集処理部４５０と、などを備えている。また、編集処理部４５０は、図１７に示すようなシーン分類手段２６０と、シーン補正手段２７０と、ストレージ２０と、シーン選別手段４６０と、などを備えている。
シーン分類手段２６０の特性比較手段２６１および分類振分手段２６２は、ストレージ２０に接続され、シーン属性情報５０、不要シーンデータ、必要シーンデータをストレージ２０に蓄積させる。
シーン補正手段２７０は、ストレージ２０と、シーン選別手段４６０と、に接続され、ストレージ２０からシーン属性情報５０および不要シーンデータを適宜取得して、不要シーンデータを補正する。そして、補正シーンデータおよび補正シーン属性情報を、シーン選別手段４６０へ出力する。
シーン選別手段４６０は、ここでは図示しないが、図１８に示すようなシーン選別手段２８０の構成において、蓄積手段２８１を備えていない構成を有している。そして、要約再生手段２８２および選別振分手段２８４は、ストレージ２０に接続されている。シーン選別手段４６０は、ストレージ２０からシーン属性情報５０、不要シーンデータ、補正シーン属性情報、補正シーンデータを適宜取得し、シーン選別処理で選別された選択シーンデータをストレージ２０に蓄積させる。
また、シーン選別手段４６０のＧＵＩ２８３は、シーン識別処理の際に、図３２に示すような削除選択画面８５０を表示させる。
【０１３７】
この削除選択画面８５０は、左側に設けられた不要シーン領域８６０と、この不要シーン領域８６０の右側に設けられた補正シーン領域８７０と、これらの下側に設けられた蓄積不要補正シーン領域８８０と、この蓄積不要補正シーン領域８８０の下側に設けられた選択操作領域７８０と、を備えている。
不要シーン領域８６０は、再生表示領域７６１と、この再生表示領域７６１の上側に設けられたシーン識別領域７６２と、を備えている。再生表示領域７６１には、不要シーンの映像に加え、アイコン８６１が表示される。
補正シーン領域８７０は、不要シーン領域８６０の再生表示領域７６１、シーン識別領域７６２それぞれと同様に設けられ、かつ、同様の情報などが表示される、再生表示領域７７１と、シーン識別領域７７２と、を備えている。
【０１３８】
蓄積不要補正シーン領域８８０は、左右方向に５個並んで設けられ、１つの不要シーンのサムネイル８８１Ａが表示されるサムネイル領域８８１を備えている。この蓄積不要補正シーン領域８８０の右側、および、左側には、サムネイル領域８８１の内容をスクロールする際に利用されるスクロールボタン８８２が表示されている。
また、利用者により選択されたサムネイル領域８８１の周縁には、カーソル８８３が表示される。そして、このカーソル８８３で囲まれたサムネイル領域８８１に対応する内容が、不要シーン領域８６０および補正シーン領域８７０に表示される。
【０１３９】
これら第１〜第３実施形態の変形形態では、編集装置１００Ｅ，１００Ｆ，１００Ｇにストレージ２０を設け、シーン分類処理およびシーン選別処理を独立的に実施可能な構成としている。
このため、シーン選別手段３６０，４６０に蓄積手段１５２，２８１を設ける必要がなくなり、シーン選別手段３６０，４６０の構成を簡略にできる。また、利用者に、適宜好みのタイミングで不要シーンの取捨選択作業を実施させることができ、利便性を更に向上できる。また、取捨選択作業に要する時間を短縮できる。
【０１４０】
そして、第３実施形態における不要シーンおよび補正シーンの通常再生処理および要約再生処理において、図３３に示すような処理を実施する構成としてもよい。
すなわち、図３３（Ａ），（Ｄ）に示すように、通常再生処理時には、第３実施形態と同様に再生する。一方、図３３（Ｂ），（Ｃ）に示すように、要約再生処理時には、不要シーンと、補正シーンと、を交互に再生する。ここで、交互に再生する場合、一方の再生中に他方を静止させるなどすればよい。
このような構成にすれば、不要シーンおよび補正シーンを同時に視認することによる注視点の分散を防止でき、より適切に取捨選択させることができる。
【０１４１】
また、特性分析手段１４４に、色特性分析手段１４４Ａ、動き特性分析手段１４４Ｂ、空間周波数特性分析手段１４４Ｃの３つを設けたが、このうち、少なくともいずれか１つを設ける構成としてもよい。あるいは、新たに別の分析手段を設ける構成としてもよい。
そして、色特性分析手段１４４Ａは、色の明度、色調、および、彩度のヒストグラムなど、複数の特性を分析するとしたが、少なくともいずれか1つの特性を分析するとしても
よい。
さらに、動き特性分析手段１４４Ｂは、動きの分析結果から、撮影時のカメラワーク、カメラワークとは独立した動き領域など、複数の特性を認識するとしたが、少なくともいずれか１つの特性を認識するとしてもよい。
また、空間周波数特性分析手段１４４Ｃは、局所的な周波数特性分析結果から、低周波領域を認識するとしたが、高周波領域を認識するとしてもよい。
【０１４２】
また、要約再生手段１５３，２８２に、不要シーンの通常再生機能および要約再生機能のうちいずれか一方のみを設ける構成としてもよい。
さらに、要約再生機能として、静止画での要約再生機能および動画での要約再生機能のうちいずれか一方のみを設ける構成としてもよい。
そして、動画での要約再生時に、例えば高速パンが顕著な不要シーンを抽出せずに、例えば不要シーンの先頭から所定時間経過後のシーンなど、あらかじめ設定されたシーンを抽出する構成としてもよい。
これらのような構成にすれば、要約再生手段１５３，２８２の構成を簡略にできるとともに、不要シーンの再生処理時の処理負荷を低減できる。
【０１４３】
さらに、シーン補正手段２２０，２７０にて、シーン属性情報５０に基づいて、補正可能シーンデータや不要シーンデータを補正する構成について例示したが、以下のような構成としてもよい。
すなわち、シーン補正手段２２０，２７０に、補正可能シーンデータや不要シーンデータの特性を解析する機能を設けるとともに、シーン属性情報５０を取得する機能を設けない構成としてもよい。
【０１４４】
また、不要シーンを再生する際に、その属性、特性値をあわせて表示させる構成について例示したが、これらを表示させない構成、あるいは、いずれか一方のみを表示させる構成としてもよい。
このような構成にすれば、削除選択画面７００，７５０，８００，８５０に表示させる情報量を少なくでき、不要シーンの視認性を向上できる。
【０１４５】
上述した各機能をプログラムとして構築したが、例えば回路基板などのハードウェアあるいは１つのＩＣ（Integrated Circuit）などの素子にて構成するなどしてもよく、いずれの形態としても利用できる。なお、プログラムや別途記録媒体から演算手段としてのコンピュータで読み取らせる構成とすることにより、取扱が容易で、利用の拡大が容易に図れる。
【０１４６】
その他、本発明の実施の際の具体的な構造および手順は、本発明の目的を達成できる範囲で他の構造などに適宜変更できる。
【０１４７】
［実施形態の作用効果］
上述したように、上記実施形態では、編集装置１００Ａは、映像データの映像から必要シーンと異なる特性のシーン、例えば逆光シーンや手ブレシーンを不要シーンとして選別する。そして、この不要シーンを表示手段１１０で再生する。
このため、編集装置１００Ａは、利用者に、手ブレや逆光のシーンであっても必要なものと、不要なものと、を選別させることができる。また、例えば略等しい場所が撮影された類似する映像の中に、手ブレシーンが存在している場合、利用者に手ブレシーンを選択する作業を実施させることなく、それが存在していることを認識させることができる。
【産業上の利用可能性】
【０１４８】
本発明は、撮影された映像の映像データを処理するデータ処理装置、その方法、そのプログラム、および、そのプログラムを記録した記録媒体に利用できる。
【図面の簡単な説明】
【０１４９】
【図１】本発明の第１，第４実施形態における編集装置の概略構成を示すブロック図である。
【図２】前記第１実施形態および第１実施形態の変形形態におけるシーン分類手段の概略構成を示すブロック図である。
【図３】前記第１，第４実施形態、第２，第３実施形態における特性標準値情報テーブルにおけるデータのテーブル構造を模式的に示す概念図である。
【図４】第１〜第４実施形態における不要シーンに対するシーン属性情報のテーブル構造を模式的に示す概念図である。
【図５】前記第１，第２実施形態におけるシーン選別手段の概略構成を示すブロック図である。
【図６】前記第１〜第４実施形態におけるアイコン関連情報テーブルにおけるデータのテーブル構造を模式的に示す概念図である。
【図７】前記第１，第２，第４実施形態における不要シーンの通常再生処理時および要約再生処理時の動作を示すタイミングチャートであり、（Ａ）部分は通常再生処理時の動作、（Ｂ）部分は要約再生処理時の動作を示す。
【図８】前記第１，第２，第４実施形態における削除選択画面の概略構成を示す模式図である。
【図９】前記第１実施形態における編集データの生成処理を示すフローチャートである。
【図１０】前記編集データの生成処理における第１のシーン分類処理を示すフローチャートである。
【図１１】前記編集データの生成処理における第１のシーン選別処理を示すフローチャートである。
【図１２】前記第２実施形態における編集装置の概略構成を示すブロック図である。
【図１３】前記第２実施形態および第２実施形態の変形形態におけるシーン分類手段の概略構成を示すブロック図である。
【図１４】前記第２実施形態における編集データの生成処理を示すフローチャートである。
【図１５】前記編集データの生成処理における第２のシーン分類処理を示すフローチャートである。
【図１６】前記第３実施形態における編集装置の概略構成を示すブロック図である。
【図１７】前記第３実施形態および第３実施形態の変形形態におけるシーン分類手段の概略構成を示すブロック図である。
【図１８】前記第３実施形態におけるシーン選別手段の概略構成を示すブロック図である。
【図１９】前記第３実施形態における不要シーンおよび補正シーンの通常再生処理時および要約再生処理時の動作を示すタイミングチャートであり、（Ａ）部分は不要シーンの通常再生処理時の動作、（Ｂ）部分は不要シーンの要約再生処理時の動作、（Ｃ）部分は補正シーンの要約再生処理時の動作、（Ｄ）部分は補正シーンの通常再生処理時の動作を示す。
【図２０】前記第３実施形態における削除選択画面の概略構成を示す模式図である。
【図２１】前記第３実施形態における編集データの生成処理を示すフローチャートである。
【図２２】前記編集データの生成処理における第２のシーン選別処理を示すフローチャートである。
【図２３】前記第４実施形態におけるシーン分類手段の概略構成を示すブロック図である。
【図２４】前記第４実施形態におけるシーン選別手段の概略構成を示すブロック図である。
【図２５】前記第４実施形態における編集データの生成処理を示すフローチャートである。
【図２６】前記編集データの生成処理における第３のシーン選別処理を示すフローチャートである。
【図２７】前記編集データの生成処理における特性標準値情報の更新処理を示すフローチャートである。
【図２８】前記第１実施形態の変形形態における編集装置の概略構成を示すブロック図である。
【図２９】前記第１，第２実施形態の変形形態における削除選択画面の概略構成を示す模式図である。
【図３０】前記第２実施形態の変形形態における編集装置の概略構成を示すブロック図である。
【図３１】前記第３実施敬愛の変形形態における編集装置の概略構成を示すブロック図である。
【図３２】前記第３実施形態の変形形態における削除選択画面の概略構成を示す模式図である。
【図３３】本発明の他の変形形態における不要シーンおよび補正シーンの通常再生処理時および要約再生処理時の動作を示すタイミングチャートであり、（Ａ）部分は不要シーンの通常再生処理時の動作、（Ｂ）部分は不要シーンの要約再生処理時の動作、（Ｃ）部分は補正シーンの要約再生処理時の動作、（Ｄ）部分は補正シーンの通常再生処理時の動作を示す。
【符号の説明】
【０１５０】
３３，３８…特性パラメータ標準情報
５０…特性内容情報としてのシーン属性情報
１００Ａ，１００Ｂ，１００Ｃ，１００Ｄ，１００Ｅ，１００Ｆ，１００Ｇ…データ処理装置としての編集装置
１１０…表示手段
１２０…入力手段
１４１…標準情報記憶手段としての特性標準値保持手段
１４２…映像データ取得手段
１４４…特性分析手段
１４４Ａ…色特性分析手段
１４４Ｂ…動き特性分析手段
１４４Ｃ…空間周波数特性分析手段
１４６，２１１，２６１…識別手段としての特性比較手段
１４７，２１２，２６２…選出手段としての分類振分手段
１５３，２８２…表示制御手段としての要約再生手段
１５４，２８３，３２２…表示制御手段および必要性判断手段としてのＧＵＩ（Graphical User Interface）
１６０，２３０…編集データ生成手段としてのシーン整列手段
２２０，２７０…シーン補正手段
３１１…標準情報更新手段としての特性標準値更新手段
【図１】
0004764924.tif 000002
【図２】
0004764924.tif 000003
【図３】
0004764924.tif 000004
【図４】
0004764924.tif 000005
【図５】
0004764924.tif 000006
【図６】
0004764924.tif 000007
【図７】
0004764924.tif 000008
【図８】
0004764924.tif 000009
【図９】
0004764924.tif 000010
【図１０】
0004764924.tif 000011
【図１１】
0004764924.tif 000012
【図１２】
0004764924.tif 000013
【図１３】
0004764924.tif 000014
【図１４】
0004764924.tif 000015
【図１５】
0004764924.tif 000016
【図１６】
0004764924.tif 000017
【図１７】
0004764924.tif 000018
【図１８】
0004764924.tif 000019
【図１９】
0004764924.tif 000020
【図２０】
0004764924.tif 000021
【図２１】
0004764924.tif 000022
【図２２】
0004764924.tif 000023
【図２３】
0004764924.tif 000024
【図２４】
0004764924.tif 000025
【図２５】
0004764924.tif 000026
【図２６】
0004764924.tif 000027
【図２７】
0004764924.tif 000028
【図２８】
0004764924.tif 000029
【図２９】
0004764924.tif 000030
【図３０】
0004764924.tif 000031
【図３１】
0004764924.tif 000032
【図３２】
0004764924.tif 000033
【図３３】
0004764924.tif 000034