【手続補正書】
【提出日】平成20年1月24日(2008.1.24)
【手続補正１】
【補正対象書類名】明細書
【補正対象項目名】発明の名称
【補正方法】変更
【補正の内容】
【発明の名称】画像処理装置、画像処理方法、記憶媒体、及びコンピュータプログラム
【手続補正２】
【補正対象書類名】明細書
【補正対象項目名】特許請求の範囲
【補正方法】変更
【補正の内容】
【特許請求の範囲】
【請求項１】  動画を処理する画像処理装置であって、
対象動画を時間的に部分動画に分割する分割手段と、
上記分割手段で得られた部分動画から代表画像を抽出する抽出手段と、
上記分割手段で得られた部分動画を上記代表画像の類似性に基づいて統合する統合手段と、
上記抽出手段で得られた代表画像に基づいて、上記統合手段で得られた統合部分動画の代表画像を生成する生成手段とを備えることを特徴とする画像処理装置。
【請求項２】  上記統合部分動画を構成する複数の部分動画に対応する代表画像から所定数の代表画像を選択する選択手段を備え、
上記生成手段は、上記選択手段で選択された代表画像に基づいて、上記統合部分動画の代表画像の生成を行うことを特徴とする請求項１記載の画像処理装置。
【請求項３】  上記選択手段は、上記複数の部分動画の再生時間に基づいて、上記代表画像の選択を行うことを特徴とする請求項２記載の画像処理装置。
【請求項４】  上記選択手段は、上記再生時間の長い順に代表画像を選択することを特徴とする請求項３記載の画像処理装置。
【請求項５】  上記選択手段は、類似する代表画像の組に対応した部分画像の再生時間の合計に基づいて、上記代表画像の選択を行うことを特徴とする請求項２記載の画像処理装置。
【請求項６】  上記選択手段は、上記代表画像の中に所定画像の領域が存在するか否かの判定に基づいて、上記代表画像の選択を行い、
上記生成手段は、上記選択手段で選択された代表画像に基づいて、上記統合部分動画の代表画像の生成を行うことを特徴とする請求項２記載の画像処理装置。
【請求項７】  上記所定画像の領域は、顔領域を含むことを特徴とする請求項６記載の画像処理装置。
【請求項８】  上記選択手段は、異なる上記所定画像の領域が存在するか否かの判定に基づいて、上記代表画像の選択を行うことを特徴とする請求項６記載の画像処理装置。
【請求項９】  上記生成手段は、上記選択手段で選択された代表画像に存在する所定画像の向きに基づいて、上記統合部分動画の代表画像の生成を行うことを特徴とする請求項６記載の画像処理装置。
【請求項１０】  上記生成手段は、上記選択手段で選択された代表画像に存在する所定画像の拡大画像に基づいて、上記統合部分動画の代表画像の生成を行うことを特徴とする請求項６記載の画像処理装置。
【請求項１１】  動画を処理するための画像処理方法であって、
対象動画を時間的に部分動画に分割する分割ステップと、
上記分割ステップにより得られた部分動画を代表する代表画像を抽出する抽出ステップと、
上記分割ステップにより得られた部分動画を上記代表画像の類似性に基づいて統合する統合ステップと、
上記抽出ステップにより得られた代表画像に基づいて、上記統合ステップにより得られた統合部分動画の代表画像を生成する生成ステップとを含むことを特徴とする画像処理方法。
【請求項１２】  上記統合部分動画を構成する複数の部分動画に対応する代表画像から所定数の代表画像を選択する選択ステップを含み、
上記生成ステップは、上記選択ステップで選択された代表画像に基づいて、上記統合部分動画の代表画像の生成を行うステップを含むことを特徴とする請求項１１記載の画像処理方法。
【請求項１３】  動画を処理するための画像処理方法であって、
動画を時間的に部分動画に分割する分割ステップと、
上記部分動画を代表する代表画像を抽出する抽出ステップと、
上記部分動画を上記代表画像の類似性に基づいて統合する統合ステップと、
上記代表画像から特定のオブジェクト領域を検出する検出ステップと、
上記検出ステップでの検出結果により、上記特定のオブジェクト領域が存在すると判定された代表画像を優先的に、上記統合ステップにより統合される前の各部分動画に対する代表画像の中から所定数の代表画像を選択する選択ステップと、
上記選択ステップにより選択された代表画像に基づいて、上記統合ステップにより統合された後の統合部分動画を代表する画像を生成する生成ステップとを含むことを特徴とする画像処理方法。
【請求項１４】  上記特定のオブジェクト領域は、顔領域を含み、
上記検出ステップは、上記顔領域の人物をも特定するステップを含み、
上記選択ステップは、異なる人物が存在する代表画像を優先的に選択するステップを含むことを特徴とする請求項１３記載の画像処理方法。
【請求項１５】  上記検出ステップは、上記特定のオブジェクト領域のオブジェクトの向きをも特定するステップを含み、
上記生成ステップは、上記特定のオブジェクトが存在する各代表画像の特定のオブジェクトの向きが中心を向いた状態の画像を、上記統合部分動画の代表画像として生成するステップを含むことを特徴とする請求項１３記載の画像処理方法。
【請求項１６】  動画を処理するための画像処理方法であって、
動画を時間的に部分動画に分割する分割ステップと、
上記部分動画を代表する代表画像を抽出する抽出ステップと、
上記代表画像の中の特定のオブジェクト領域を検出する検出ステップと、
上記部分動画を上記代表画像の類似性に基づいて統合する統合ステップと、
上記統合ステップにより統合される前の各部分動画に対する代表画像の中から、上記統合ステップによる統合部分動画に対する代表画像を選択する選択ステップと、
上記選択ステップにより選択された代表画像に基づいて、上記統合部分動画を代表する画像を生成する生成ステップとを含み、
上記生成ステップは、上記検出ステップにより、上記代表画像に特定のオブジェクト領域が存在する場合、上記特定のオブジェクト領域を拡大した部分画像から上記統合部分動画に対する代表画像を生成するステップを含むことを特徴とする画像処理方法。
【請求項１７】  請求項１１〜１６の何れか１項に記載の画像処理方法の処理ステップをコンピュータに実行させるためのコンピュータプログラムを記録したコンピュータ読取可能な記憶媒体。
【請求項１８】  請求項１１〜１６の何れか１項に記載の画像処理方法の処理ステップをコンピュータに実行させるためのコンピュータプログラム。
【手続補正３】
【補正対象書類名】明細書
【補正対象項目名】０００１
【補正方法】変更
【補正の内容】
【０００１】
【発明の属する技術分野】
本発明は、例えば、動画を処理するコンピュータやビデオ録画装置等に用いられる、画像処理装置、画像処理方法、コンピュータ読取可能な記憶媒体、及びコンピュータプログラムに関するものである。
【手続補正４】
【補正対象書類名】明細書
【補正対象項目名】００１１
【補正方法】変更
【補正の内容】
【００１１】
そこで、本発明は、上記の欠点を除去するために成されたもので、動画が階層構造として表示された画面から、各階層の動画（部分動画）の内容を容易に且つ正確に認識することが可能な、画像処理装置、画像処理方法、コンピュータ読取可能な記憶媒体、及びコンピュータプログラムを提供することを目的とする。
【手続補正５】
【補正対象書類名】明細書
【補正対象項目名】００１２
【補正方法】変更
【補正の内容】
【００１２】
【課題を解決するための手段】
斯かる目的下において、第１の発明は、動画を処理する画像処理装置であって、対象動画を時間的に部分動画に分割する分割手段と、上記分割手段で得られた部分動画から代表画像を抽出する抽出手段と、上記分割手段で得られた部分動画を上記代表画像の類似性に基づいて統合する統合手段と、上記抽出手段で得られた代表画像に基づいて、上記統合手段で得られた統合部分動画の代表画像を生成する生成手段とを備えることを特徴とする。
【手続補正６】
【補正対象書類名】明細書
【補正対象項目名】００１３
【補正方法】変更
【補正の内容】
【００１３】
第２の発明は、上記第１の発明において、上記統合部分動画を構成する複数の部分動画に対応する代表画像から所定数の代表画像を選択する選択手段を備え、上記生成手段は、上記選択手段で選択された代表画像に基づいて、上記統合部分動画の代表画像の生成を行うことを特徴とする。
【手続補正７】
【補正対象書類名】明細書
【補正対象項目名】００１５
【補正方法】変更
【補正の内容】
【００１５】
第４の発明は、上記第３の発明において、上記選択手段は、上記再生時間の長い順に代表画像を選択することを特徴とする。
【手続補正８】
【補正対象書類名】明細書
【補正対象項目名】００１６
【補正方法】変更
【補正の内容】
【００１６】
第５の発明は、上記第２の発明において、上記選択手段は、類似する代表画像の組に対応した部分画像の再生時間の合計に基づいて、上記代表画像の選択を行うことを特徴とする。
【手続補正９】
【補正対象書類名】明細書
【補正対象項目名】００２２
【補正方法】削除
【補正の内容】
【手続補正１０】
【補正対象書類名】明細書
【補正対象項目名】００２３
【補正方法】変更
【補正の内容】
【００２３】
第１１の発明は、動画を処理するための画像処理方法であって、対象動画を時間的に部分動画に分割する分割ステップと、上記分割ステップにより得られた部分動画を代表する代表画像を抽出する抽出ステップと、上記分割ステップにより得られた部分動画を上記代表画像の類似性に基づいて統合する統合ステップと、上記抽出ステップにより得られた代表画像に基づいて、上記統合ステップにより得られた統合部分動画の代表画像を生成する生成ステップとを含むことを特徴とする。
【手続補正１１】
【補正対象書類名】明細書
【補正対象項目名】００２４
【補正方法】変更
【補正の内容】
【００２４】
第１２の発明は、上記第１１の発明において、上記統合部分動画を構成する複数の部分動画に対応する代表画像から所定数の代表画像を選択する選択ステップを含み、上記生成ステップは、上記選択ステップで選択された代表画像に基づいて、上記統合部分動画の代表画像の生成を行うステップを含むことを特徴とする。
【手続補正１２】
【補正対象書類名】明細書
【補正対象項目名】００２５
【補正方法】削除
【補正の内容】
【手続補正１３】
【補正対象書類名】明細書
【補正対象項目名】００２６
【補正方法】削除
【補正の内容】
【手続補正１４】
【補正対象書類名】明細書
【補正対象項目名】００２７
【補正方法】削除
【補正の内容】
【手続補正１５】
【補正対象書類名】明細書
【補正対象項目名】００２８
【補正方法】削除
【補正の内容】
【手続補正１６】
【補正対象書類名】明細書
【補正対象項目名】００２９
【補正方法】削除
【補正の内容】
【手続補正１７】
【補正対象書類名】明細書
【補正対象項目名】００３０
【補正方法】変更
【補正の内容】
【００３０】
第１３の発明は、動画を処理するための画像処理方法であって、動画を時間的に部分動画に分割する分割ステップと、上記部分動画を代表する代表画像を抽出する抽出ステップと、上記部分動画を上記代表画像の類似性に基づいて統合する統合ステップと、上記代表画像から特定のオブジェクト領域を検出する検出ステップと、上記検出ステップでの検出結果により、上記特定のオブジェクト領域が存在すると判定された代表画像を優先的に、上記統合ステップにより統合される前の各部分動画に対する代表画像の中から所定数の代表画像を選択する選択ステップと、上記選択ステップにより選択された代表画像に基づいて、上記統合ステップにより統合された後の統合部分動画を代表する画像を生成する生成ステップとを含むことを特徴とする。
【手続補正１８】
【補正対象書類名】明細書
【補正対象項目名】００３１
【補正方法】変更
【補正の内容】
【００３１】
第１４の発明は、上記第１３の発明において、上記特定のオブジェクト領域は、顔領域を含み、上記検出ステップは、上記顔領域の人物をも特定するステップを含み、上記選択ステップは、異なる人物が存在する代表画像を優先的に選択するステップを含むことを特徴とする。
【手続補正１９】
【補正対象書類名】明細書
【補正対象項目名】００３２
【補正方法】変更
【補正の内容】
【００３２】
第１５の発明は、上記第１３の発明において、上記検出ステップは、上記特定のオブジェクト領域のオブジェクトの向きをも特定するステップを含み、上記生成ステップは、上記特定のオブジェクトが存在する各代表画像の特定のオブジェクトの向きが中心を向いた状態の画像を、上記統合部分動画の代表画像として生成するステップを含むことを特徴とする。
【手続補正２０】
【補正対象書類名】明細書
【補正対象項目名】００３３
【補正方法】変更
【補正の内容】
【００３３】
第１６の発明は、動画を処理するための画像処理方法であって、動画を時間的に部分動画に分割する分割ステップと、上記部分動画を代表する代表画像を抽出する抽出ステップと、上記代表画像の中の特定のオブジェクト領域を検出する検出ステップと、上記部分動画を上記代表画像の類似性に基づいて統合する統合ステップと、上記統合ステップにより統合される前の各部分動画に対する代表画像の中から、上記統合ステップによる統合部分動画に対する代表画像を選択する選択ステップと、上記選択ステップにより選択された代表画像に基づいて、上記統合部分動画を代表する画像を生成する生成ステップとを含み、上記生成ステップは、上記検出ステップにより、上記代表画像に特定のオブジェクト領域が存在する場合、上記特定のオブジェクト領域を拡大した部分画像から上記統合部分動画に対する代表画像を生成するステップを含むことを特徴とする。
【手続補正２１】
【補正対象書類名】明細書
【補正対象項目名】００３４
【補正方法】削除
【補正の内容】
【手続補正２２】
【補正対象書類名】明細書
【補正対象項目名】００３５
【補正方法】変更
【補正の内容】
【００３５】
第１７の発明は、上記第１１〜第１６の発明の何れかの画像処理方法の処理ステップをコンピュータに実行させるためのコンピュータプログラムをコンピュータ読取可能な記憶媒体に記録したことを特徴とする。
【手続補正２３】
【補正対象書類名】明細書
【補正対象項目名】００３６
【補正方法】削除
【補正の内容】
【手続補正２４】
【補正対象書類名】明細書
【補正対象項目名】００３７
【補正方法】変更
【補正の内容】
【００３７】
第１８の発明は、上記第１１〜第１６の発明の何れかの画像処理方法の処理ステップをコンピュータに実行させるためのコンピュータプログラムを特徴とする。