(57)【要約】【課題】ＣＤやＤＶＤのレーベルに印刷された結果を見れば、ＣＤやＤＶＤに記録されている動画を構成する各シーンにおける再生時間やファイルサイズの概要を、容易に把握することができる画像処理装置を提供することを目的とする。【解決手段】任意の動画を形成する複数のシーンから、一定のシーンを検出し、上記検出されたシーンの時間に起因するシーン特徴量を検出し、上記動画の時間に起因する動画特徴量を検出し、上記検出された動画特徴量に占める、上記検出された各特徴量の割合を算出し、上記検出した各シーンに関する代表画像を決定し、上記決定した代表画像を、上記算出した割合に応じた面積であって、印刷媒体に印刷する面積を決定し、上記決定した代表画像を、上記決定した面積に基づいて、上記印刷媒体にレイアウトする。【選択図】図５
2009271997.tif 000002
【特許請求の範囲】
【請求項１】
任意の動画を形成する複数のシーンから、一定のシーンを検出するシーン検出手段と；
上記検出されたシーンの時間に起因するシーン特徴量を検出するシーン特徴量検出手段と；
上記動画の時間に起因する動画特徴量を検出する動画特徴量検出手段と；
上記検出された動画特徴量に占める、上記検出された各特徴量の割合を算出する割合算出手段と；
上記シーン検出手段が検出した各シーンに関する代表画像を決定する代表画像決定手段と；
上記代表画像決定手段が決定した代表画像を、上記割合算出手段が算出した割合に応じた面積であって、印刷媒体に印刷する面積を決定する印刷面積決定手段と；
上記代表画像決定手段が決定した代表画像を、上記印刷面積決定手段が決定した面積に基づいて、上記印刷媒体にレイアウトするレイアウト手段と；
を有することを特徴とする画像処理装置。
【請求項２】
請求項１において、
上記検出された動画特徴量は、動画の再生時間、又は動画の記憶容量であることを特徴とする画像処理装置。
【請求項３】
請求項１において、
上記印刷面積決定手段は、円形印刷領域に応じて印刷すべき面積を決定する手段であることを特徴とする画像処理装置。
【請求項４】
任意の動画を形成する複数のシーンから、一定のシーンを検出するシーン検出手段と；
上記検出されたシーンの時間に起因するシーン特徴量を検出するシーン特徴量検出手段と；
上記動画の時間に起因する動画特徴量を検出する動画特徴量検出手段と；
上記検出された動画特徴量に占める、上記検出された各特徴量の割合を算出する割合算出手段と；
上記割合算出手段が算出した割合のうちで、割合の高い順にシーンを絞り込むシーン絞込み手段と；
上記シーン絞込み手段が絞り込んだ各シーンについて、代表画像を決定する代表画像決定手段と；
上記代表画像決定手段が決定した代表画像を、上記割合算出手段が算出した割合に応じた面積であって、印刷媒体に印刷する面積を決定する印刷面積決定手段と；
上記代表画像決定手段が決定した代表画像を、上記印刷面積決定手段が決定した面積に基づいて、上記印刷媒体にレイアウトするレイアウト手段と；
を有することを特徴とする画像処理装置。
【請求項５】
請求項４において、
上記検出された動画特徴量は、動画の再生時間、又は動画の記憶容量であることを特徴とする画像処理装置。
【請求項６】
請求項４において、
上記印刷面積決定手段は、円形印刷領域に応じて印刷すべき面積を決定する手段であることを特徴とする画像処理装置。
【請求項７】
任意の動画を形成する複数のシーンから、一定のシーンを検出するシーン検出手段と；
上記検出されたシーンの時間に起因するシーン特徴量を検出するシーン特徴量検出手段と；
上記動画の時間に起因する動画特徴量を検出する動画特徴量検出手段と；
上記検出された動画特徴量に占める、上記検出された各特徴量の割合を算出する割合算出手段と；
上記シーンを絞り込む場合に使用する最大レイアウト数を設定する最大レイアウト数設定手段と；
上記シーン検出手段が検出したシーンの数が、上記設定された最大レイアウト数になるまで、上記シーンを絞り込むシーン絞込み手段と；
上記シーン検出手段が検出した各シーンに関する代表画像を決定する代表画像決定手段と；
上記代表画像決定手段が決定した代表画像を、上記割合算出手段が算出した割合に応じた面積であって、印刷媒体に印刷する面積を決定する印刷面積決定手段と；
上記代表画像決定手段が決定した代表画像を、上記印刷面積決定手段が決定した面積に基づいて、上記印刷媒体にレイアウトするレイアウト手段と；
を有することを特徴とする画像処理装置。
【請求項８】
請求項７において、
上記検出された動画特徴量は、動画の再生時間、又は動画の記憶容量であることを特徴とする画像処理装置。
【請求項９】
請求項７において、
上記印刷面積決定手段は、円形印刷領域に応じて印刷すべき面積を決定する手段であることを特徴とする画像処理装置。
【請求項１０】
請求項７において、
上記最大レイアウト数は、利用者が指定したシーン数、又は予め規定されたシーン数であることを特徴とする画像処理装置。
【請求項１１】
任意の動画を形成する複数のシーンから、一定のシーンを検出するシーン検出工程と；
上記検出されたシーンの時間に起因するシーン特徴量を検出するシーン特徴量検出工程と；
上記動画の時間に起因する動画特徴量を検出する動画特徴量検出工程と；
上記検出された動画特徴量に占める、上記検出された各特徴量の割合を算出する割合算出工程と；
上記シーン検出工程で検出された各シーンに関する代表画像を決定する代表画像決定工程と；
上記代表画像決定工程で決定された代表画像を、上記割合算出工程で算出された割合に応じた面積であって、印刷媒体に印刷する面積を決定する印刷面積決定工程と；
上記代表画像決定工程で決定された代表画像を、上記印刷面積決定工程で決定された面積に基づいて、上記印刷媒体にレイアウトするレイアウト工程と；
を有することを特徴とする画像処理装置の制御方法。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、記録媒体に記録されている動画ファイルからシーンを検出し、この検出されたシーンから代表画像を決定し、これら決定された代表画像を印刷するためのレイアウト決定方法に関する。
【背景技術】
【０００２】
近年、デジタルスチルカメラやデジタルビデオカメラの普及によって、動画像が身近なメディアになった。また、デジタルスチルカメラやデジタルビデオカメラで撮影された動画像をＰＣ等によって、メモリカードやＤＶＤ等の記録媒体に記録することができる。さらに、記録媒体に記録されている動画像の内容を把握するために、記録媒体に記録されている動画像の内容を印刷することが普及している。その中で、ＣＤやＤＶＤの表面（以下「レーベル」という）上に、動画像の内容を印刷する手法が提案されている（たとえば、特許文献１参照）。
【０００３】
特許文献１に記載の発明によれば、ＣＤやＤＶＤに記録されているデータから、データの内容を表す情報を含むラベルを生成し、ＣＤやＤＶＤのレーベルに、上記ラベルを印刷する。このようにすることによって、ユーザは、どのようなデータが格納されているのかを容易に把握することができる。
【０００４】
動画像の内容を把握する別の手法として、動画像データの中からシーンを検出し、シーンの代表画像を、表示・印刷する手法が提案されている（たとえば、特許文献２参照）。
【０００５】
特許文献２記載の発明によれば、動画像からシーンを検出した後に、シーンに優先順位をつけ、優先順位の高いシーンから代表シーンとして抽出し、抽出した代表シーンの代表画像を表示・印刷する。このようにすることによって、動画像から多数のシーンが検出されたときでも、不要な画像を削除するので、表示・印刷の時間を短縮し、ユーザが、動画像の内容を簡単に把握することができる。
【０００６】
また、レーベル等、非矩形の領域にデータを印刷する際、データの優先順位に応じてレイアウトする手法が提案されている（たとえば、特許文献３参照）。
【０００７】
特許文献３記載の発明によれば、データの種類や形状を解析し、これによって、データを、様々な領域に対して、自動的にレイアウトすることができる。
【特許文献１】特開２００７−１５２７０８号公報
【特許文献２】特開２００１−０５４０５５号公報
【特許文献３】特開２００５−２３４７１２号公報
【発明の開示】
【発明が解決しようとする課題】
【０００８】
ところで、上記従来例では、動画像が記録されているＣＤやＤＶＤにおいて、各シーンの再生時間やファイルサイズに関する情報が可視化されていない。
【０００９】
特許文献１記載の発明では、動画像を構成するシーンを検出せず、動画全体について、１つの代表画像しか印刷されないので、印刷結果を見ても、動画像を構成する複数のシーンを把握することが難しい。
【００１０】
また、特許文献２記載の発明では、印刷結果を見ると、動画像を構成する複数のシーンを把握できるが、各シーンの記録時間の割合を、直感的に理解することが難しい。
【００１１】
また、特許文献３記載の発明では、非矩形領域にレイアウトする際に、印刷結果を見ただけでは、各シーンの記録時間の割合を、直感的に理解することが難しい。
【００１２】
本発明は、ＣＤやＤＶＤのレーベルに印刷された結果を見れば、ＣＤやＤＶＤに記録されている動画を構成する各シーンにおける再生時間やファイルサイズの概要を、容易に把握することができる画像処理装置を提供することを目的とする。
【課題を解決するための手段】
【００１３】
本発明は、任意の動画を形成する複数のシーンから、一定のシーンを検出するシーン検出手段と、上記検出されたシーンの時間に起因するシーン特徴量を検出するシーン特徴量検出手段と、上記動画の時間に起因する動画特徴量を検出する動画特徴量検出手段と、上記検出された動画特徴量に占める、上記検出された各特徴量の割合を算出する割合算出手段と、上記シーン検出手段が検出した各シーンに関する代表画像を決定する代表画像決定手段と、上記代表画像決定手段が決定した代表画像を、上記割合算出手段が算出した割合に応じた面積であって、印刷媒体に印刷する面積を決定する印刷面積決定手段と、上記代表画像決定手段が決定した代表画像を、上記印刷面積決定手段が決定した面積に基づいて、上記印刷媒体にレイアウトするレイアウト手段とを有する画像処理装置である。
【発明の効果】
【００１４】
本発明によれば、ＣＤやＤＶＤのレーベルに印刷された結果を見れば、ＣＤやＤＶＤに記録されている動画を構成する各シーンにおける再生時間やファイルサイズの概要を、容易に把握することができるという効果を奏する。
【発明を実施するための最良の形態】
【００１５】
発明を実施するための最良の形態は、次の実施例である。
【実施例１】
【００１６】
以下の実施例では、メモリカードに記録されている動画から、その動画を構成するシーンを検出し、検出された各シーンに対応する代表画像を決定する。その後に、各シーンの再生時間の長さに応じて、代表画像を印刷する場合におけるレイアウト面積を決定し、ＤＶＤのレーベルに印刷する。
【００１７】
また、印刷対象のＤＶＤには、メモリカードに記録されている動画を記録する。
【００１８】
図１は、本発明の実施例１であるＭＦＰ１００の外観を示す図である。
【００１９】
ＭＦＰ１００は、画像処理装置の例であり、操作部１と、カードインタフェース２と、読取部３と、記録部４と、表示部５と、ＤＶＤ挿入部６とを有する。
【００２０】
ＤＶＤ７は、レーベル印刷の対象となるＤＶＤである。なお、レーベルは、ＣＤやＤＶＤの表面である。
【００２１】
図２は、ＭＦＰ１００の構成を示すブロック図である。
【００２２】
なお、図１に示す構成と同じ構成には、同一の符号を付してある。
【００２３】
ＭＦＰ１００は、操作部１と、カードインタフェース２と、読取部３と、記録部４と、表示部５と、ＤＶＤ挿入部６と、ＣＰＵ１０と、ＲＯＭ１１と、ＲＡＭ１２と、不揮発性ＲＡＭ１３と、画像処理部１４とを有する。
【００２４】
読取部３は、ＣＣＤを備え、このＣＣＤは、原稿画像を読み取り、赤（Ｒ）、緑（Ｇ）及び青（Ｂ）色のアナログ輝度データを出力する。なお、読取部３は、ＣＣＤの代わりに、密着型イメージセンサ（ＣＩＳ）を使用するようにしてもよい。
【００２５】
カードインタフェース２は、たとえばデジタルビデオカメラで撮影され、メモリカード等に記録されている動画像や静止画像の画像データを、操作部１の所定の操作に応じて読み込む。
【００２６】
画像処理部１４は、動画像のシーンを検出し、代表画像を決定し、画像を解析し、画像データを圧縮し、画像データを伸張し、画像を補正し、色変換を行う等、画像処理を必要に応じて行う。これらの画像処理によって得られた印刷データは、ＲＡＭ１２に格納される。ＲＡＭ１２に格納された印刷データが、記録部４で記録する場合に必要な所定量に達すると、記録部４が記録動作を開始する。
【００２７】
また、不揮発性ＲＡＭ１３は、バッテリバックアップされたＳＲＡＭ等であり、ＭＦＰ１００に固有のデータ等を記憶している。
【００２８】
操作部１は、記憶媒体に記憶されている画像データを選択し、記録をスタートするために、ダイレクト写真印刷スタートキー、モノクロコピー時におけるモノクロコピースタートキー、カラーコピー時におけるカラーコピースタートキーを有する。
【００２９】
また、コピー解像度や画質等のモードを指定するモードキー、コピー動作等を停止するためのストップキー、シーンの絞込み数やコピー数を入力するテンキーや登録キー、印刷する画像ファイル選択手段を指定するカーソルキー等を有する。ＣＰＵ１０は、これらのキーの押下状態を検出し、この押下状態に応じて、各部を制御する。
【００３０】
記録部４は、インクジェット方式のインクジェットヘッド、汎用ＩＣ等によって構成され、ＣＰＵ１０の制御によって、ＲＡＭ１２に格納されている記録データを読み出し、ハードコピーとして印刷出力する。
【００３１】
表示部５は、ＬＥＤ（発光ダイオード）とＬＣＤ（液晶ディスプレイ）等によって構成されている。そして、オペレータによる各種入力操作や、ＭＦＰ１００の動作状況、ステータス状況、カードインタフェース２で読み込んだ画像データ、画像処理部１４によって決定された代表画像等の画像を画面に表示する。
【００３２】
ＤＶＤ挿入部６は、印刷対象となるＤＶＤ７を、ＭＦＰ１００に挿入する。また、ＤＶＤだけでなく、ＣＤ−Ｒ／ＲＷやＤＶＤ±Ｒ／ＲＷ等の円形メディアを挿入することも可能である。
【００３３】
つまり、ＣＰＵ１０は、任意の動画を形成する複数のシーンから、一定のシーンを検出するシーン検出手段の例である。また、ＣＰＵ１０は、上記検出されたシーンの時間に起因するシーン特徴量を検出するシーン特徴量検出手段の例であり、上記動画の時間に起因する動画特徴量を検出する動画特徴量検出手段の例である。
【００３４】
ＣＰＵ１０は、上記検出された動画特徴量に占める、上記検出された各特徴量の割合を算出する割合算出手段の例であり、上記シーン検出手段が検出した各シーンに関する代表画像を決定する代表画像決定手段の例である。
【００３５】
さらに、ＣＰＵ１０は、上記代表画像決定手段が決定した代表画像を、上記割合算出手段が算出した割合に応じた面積であって、印刷媒体に印刷する面積を決定する印刷面積決定手段の例である。
【００３６】
画像処理部１４は、上記代表画像決定手段が決定した代表画像を、上記印刷面積決定手段が決定した面積に基づいて、上記印刷媒体にレイアウトするレイアウト手段の例である。
【００３７】
この場合、上記検出された動画特徴量は、動画の再生時間、又は動画の記憶容量であり、上記印刷面積決定手段は、円形印刷領域に応じて印刷すべき面積を決定する手段である。
【００３８】
また、ＣＰＵ１０は、上記割合算出手段が算出した割合のうちで、割合の高い順にシーンを絞り込むシーン絞込み手段の例であり、上記シーン絞込み手段が絞り込んだ各シーンについて、代表画像を決定する代表画像決定手段の例である。
【００３９】
さらに、ＣＰＵ１０は、上記シーンを絞り込む場合に使用する最大レイアウト数を設定する最大レイアウト数設定手段の例である。しかも、ＣＰＵ１０は、上記シーン検出手段が検出したシーンの数が、上記設定された最大レイアウト数になるまで、上記シーンを絞り込むシーン絞込み手段の例である。
【００４０】
次に、実施例１において、メモリカードに記録されている動画像を、ＤＶＤ７のレーベルに印刷する動作について説明する。
【００４１】
図３は、実施例１において、メモリカードに記録されている動画像を、ＤＶＤ７のレーベルに印刷する動作を示すフローチャートである。
【００４２】
まず、Ｓ１で、メモリカードをカードインタフェース２に挿入し、メモリカードに記録されている動画像からシーンを検出する。なお、シーンの検出方法については、ここでは記述しないが、特許第２６９５４１５号に記載されているような方法を用いることができる。
【００４３】
また、Ｓ２で、検出した各シーンについての再生時間を算出する。なお、シーンの再生時間の代わりに、シーンの記録容量を算出するようにしてもよい。
【００４４】
Ｓ３で、シーンを絞込む。つまり、検出された各シーンの再生時間が長い順に、規定のシーン数分だけ、シーンを選択する。Ｓ４で、絞り込まれたシーンについて、各シーンに関する代表画像を決定する。なお、決定する代表画像はここでは任意とする。
【００４５】
Ｓ５で、シーンの再生時間とＤＶＤのレーベルの面積とに応じて、シーンに対応する代表画像をレイアウトする面積を計算する。Ｓ６で、ＭＦＰ１００のＤＶＤ挿入部６に、印刷対象のＤＶＤ７を挿入する。Ｓ７で、ＤＶＤ７のレーベルに、各代表画像を印刷する。
【００４６】
次に、実施例１において、シーンを絞込む動作について説明する。
【００４７】
図４は、実施例１において、シーンを絞込む動作を示すフローチャートである。
【００４８】
まず、Ｓ１１で、選択されたシーン数が、予め規定された最大レイアウト数以下であるかどうかを判断する。最大レイアウト数以下であると判断すれば、全てのシーンをレイアウト対象とするので、シーンを選択する（絞り込む）必要がなく、シーンを絞込むための動作を終了する。Ｓ１１でシーンの数が最大レイアウト数（規定のシーン数）よりも多いと判断すれば、Ｓ１２で、再生時間の長い順にシーンを選択する。つまり、再生時間の長い順に、最大レイアウト数分だけ、シーンを絞り込む。なお、実施例１において、予め規定された最大レイアウト数を判断基準としているが、利用者が、操作部１を介して、レイアウトしたいシーン数を指定するようにしてもよい。また、検出したシーンを、表示部５で再生し、レイアウトしたいシーンを、操作部１を介して、ユーザが手動で選択するようにしてもよい。
【００４９】
図５は、実施例１において、ＤＶＤ７のレーベルに、シーンの代表画像をレイアウトした例を説明する図である。
【００５０】
シーンＩＤ  ＳＮ１〜ＳＮ４は、絞り込んだシーンのそれぞれに付与されているＩＤであり、図５に示す例では、全部で４つのシーンが検出されたことを示す。また、シーン再生時間Ｔ１〜Ｔ４は、各シーンの再生時間を示す。シーンＩＤ  ＳＮ１のシーンの再生時間Ｔ１は、４０秒間であり、シーンＩＤ  ＳＮ２のシーンの再生時間Ｔ２は、３０秒間である。シーンＩＤ  ＳＮ３のシーンの再生時間Ｔ３は、２０秒間であり、シーンＩＤ  ＳＮ４のシーンの再生時間Ｔ４は、１０秒であるとする。
【００５１】
ここで、検出した各シーンの再生時間に基づいて、ＤＶＤ７のレーベルに、代表画像Ｉ１、Ｉ２、Ｉ３、Ｉ４をレイアウトする角度を算出する。
【００５２】
上記例において、各シーンの再生時間の比率は、次のとおりである。
【００５３】
Ｔ１：Ｔ２：Ｔ３：Ｔ４＝４０：３０：２０：１０＝４：３：２：１。
【００５４】
シーンＩＤ  ＳＮ１の代表画像Ｉ１を印刷する角度をθ１とし、シーンＩＤ  ＳＮ２の代表画像Ｉ２を印刷する角度をθ２とし、シーンＩＤ  ＳＮ３の代表画像Ｉ３を印刷する角度をθ３とし、シーンＩＤ  ＳＮ４の代表画像Ｉ４を印刷する角度をθ４とする。
【００５５】
また、上記割り付ける角度は、次のようになる。
θ１＝３６０×（４÷（４＋３＋２＋１））＝１４４
θ２＝３６０×（３÷（４＋３＋２＋１））＝１０８
θ３＝３６０×（２÷（４＋３＋２＋１））＝７２
θ４＝３６０×（１÷（４＋３＋２＋１））＝３６
【００５６】
算出した角度に基づいて、各シーンの代表画像Ｉ１〜Ｉ４を、扇状に変形し、再生時間が長い順に、時計回りにレイアウトする。
【００５７】
なお、実施例１において、シーンの再生時間に基づいて、代表画像Ｉ１〜Ｉ４をレイアウトする角度を算出しているが、再生時間の代わりに、シーンの記録容量に基づいて、代表画像をレイアウトする角度を算出するようにしてもよい。
【００５８】
また、実施例１では、再生時間の長い順に、時計回りにレイアウトをしているが、配置の順番を、上記順番に限定する必要はなく、ランダムにレイアウトするようにしてもよく、また、別の基準に基づいてレイアウトするようにしてもよい。たとえば、撮影日の古い順にレイアウトするようにしてもよい。
【００５９】
図６は、実施例１において、シーンの記録容量に応じて、代表画像をレイアウトする面積を算出し、ＤＶＤ７のレーベルに、その代表画像Ｉ１１、Ｉ１２をレイアウトした例を示す図である。
【００６０】
シーンＩＤ  ＳＮ１１、ＳＮ１２は、シーンを絞り込んだ結果のシーンＩＤであり、全部で２つのシーンが検出されたことを示す。また、シーン記録容量Ｖ１、Ｖ２は、絞り込まれたシーンの記録容量であり、シーンＩＤ  ＳＮ１１のシーンの記録容量は、３００ＭＢであり、シーンＩＤ  ＳＮ１２のシーンの記録容量は、２００ＭＢである。
【００６１】
以上の処理によって、ユーザは、レーベルに印刷されている代表画像の大きさから、各代表画像に対応するシーンの再生時間の長さを、直感的に理解することが可能となる。
【００６２】
なお、実施例１においては、円形印刷領域として、ＤＶＤのレーベルを想定しているが、円形であるメディアに対する印刷であれば、ＤＶＤのレーベル以外のものに上記実施例を適用することができる。つまり、ＣＤ−Ｒ／ＲＷやＤＶＤ±Ｒ／ＲＷ等、円形メディアを、印刷対象として印刷するようにしてもよい。
【００６３】
また、上記手段を工程に置き換えれば、上記実施例を画像処理装置の制御方法として把握することができる。
【図面の簡単な説明】
【００６４】
【図１】本発明の実施例１であるＭＦＰ１００の外観を示す図である。
【図２】ＭＦＰ１００の構成を示すブロック図である。
【図３】実施例１において、メモリカードに記録されている動画像を、ＤＶＤ７のレーベルに印刷する動作を示すフローチャートである。
【図４】実施例１において、シーンを絞込む動作を示すフローチャートである。
【図５】実施例１において、ＤＶＤ７のレーベルに、シーンの代表画像をレイアウトした例を説明する図である。
【図６】実施例１において、シーンの記録容量に応じて、代表画像をレイアウトする面積を算出し、ＤＶＤ７のレーベルにその代表画像をレイアウトした例を示す図である。
【符号の説明】
【００６５】
１００…ＭＦＰ、
１…操作部、
２…カードインタフェース、
３…読取部、
４…記録部、
５…表示部、
６…ＤＶＤ挿入部、
７…ＤＶＤ、
１１…ＲＯＭ、
１２…ＲＡＭ、
１３…不揮発性ＲＡＭ、
１４…画像処理部
ＳＮ１〜ＳＮ４、ＳＮ１１、ＳＮ１２…シーンＩＤ、
Ｔ１〜Ｔ４…シーン再生時間。
【図１】
2009271997.tif 000003
【図２】
2009271997.tif 000004
【図３】
2009271997.tif 000005
【図４】
2009271997.tif 000006
【図５】
2009271997.tif 000007
【図６】
2009271997.tif 000008