(57)【要約】【目的】ユーザが記録媒体に記録されているファイルの内容とそれらファイルの一覧を従来の手法に比べてより容易に理解することができる画像処理装置を提供すること。【構成】オブジェクト符号化された画像データをサムネイル表示することができる画像処理装置において、入力された画像データからオブジェクトを分離する分離手段と、前記入力された画像データをサムネイル表示するときには、分離された前記オブジェクトに関連する付加情報を検出して、前記付加情報に応じて前記オブジェクト毎に縮小倍率を制御する制御手段とを設ける。ここで、前記制御手段は、前記画像データに含まれるオブジェクトの種類に関する情報を検出する検出手段を有する。【選択図】      図１
2004221631.tif 000002
【特許請求の範囲】
【請求項１】
オブジェクト符号化された画像データをサムネイル表示することができる画像処理装置において、
入力された画像データからオブジェクトを分離する分離手段と、前記入力された画像データをサムネイル表示するときには、分離された前記オブジェクトに関連する付加情報を検出して、前記付加情報に応じて前記オブジェクト毎に縮小倍率を制御する制御手段とを有することを特徴とする画像処理装置。
【請求項２】
前記制御手段は、前記画像データに含まれるオブジェクトの種類に関する情報を検出する検出手段を有することを特徴とする請求項１記載の画像処理装置。
【請求項３】
前記制御手段は、前記画像データに含まれるオブジェクトの位置に関する情報を検出する検出手段を有することを特徴とする請求項１記載の画像処理装置。
【請求項４】
前記制御手段は、前記画像データに含まれるオブジェクトの種類に関する情報並びに位置に関する情報を検出する検出手段を有することを特徴とする請求項１記載の画像処理装置。
【請求項５】
前記制御手段は、前記検出手段が前記画像データに含まれるオブジェクトの種類として人物を含むと検出すると、縮小倍率を制御することを特徴とする請求項２又は４記載の画像処理装置。
【請求項６】
前記制御手段は、前記検出手段によって検出されたオブジェクトの種類に関する情報を元にして人物のオブジェクトは、人物以外のオブジェクトよりも相対的に大きく表示することを特徴とする請求項５記載の画像処理装置。
【請求項７】
前記制御手段は、前記検出手段によって検出されたオブジェクトの種類に関する情報と位置に関する情報を元にして、特定のオブジェクトが存在する位置に応じて縮小率を制御することを特徴とする請求項４記載の画像処理装置。
【発明の詳細な説明】
【０００１】
【発明の属する技術分野】
本発明は、サムネイルのように１つの表示画面を任意の数の分割表示領域に分割し、その分割表示領域に対して縮小画像を表示することができる画像処理装置に用いて好適なものである。
【０００２】
【従来の技術】
或る記録媒体に記録されている動画像や静止画のデータファイルをユーザ側に分かり易く表示させる手法としてサムネイル表示というものがある。サムネイルとは、記録媒体に記録されている複数のファイルに対してそれら各ファイルの代表フレーム、例えば静止画であればそれ自身のフレーム、動画像であれば先頭フレームを実際のサイズよりも縮小したサイズで表示した画像のことを言う。
【０００３】
このサムネイル表示を利用することで、ユーザ側は、或る記録媒体に記録されたファイルの内容を視覚的に把握することができたり、記録媒体に記録されているファイルを手軽に検索し再生できたりできるところに利点がある。
【０００４】
従来のサムネイル表示手法として現行のデジタルビデオテープやＤＶＤ等の記録メディアに記録されているデータに対して、画像データを一様に縮小してマルチ表示させるものがある。
【０００５】
しかしながら、このようなマルチ表示手法では記録メディアに記録されている元となる画像に対して一様な倍率で縮小表示をしているものが多い。
【０００６】
【発明が解決しようとする課題】
サムネイル表示画面がテレビジョンやパーソナルコンピュータのディスプレイ等に比べて小さいデジタルビデオにおいては、１つの表示画面に多くの縮小画像を表示すると、縮小倍率が大きくなってしまい、ユーザがどのような画像であるかを判別することが難しくなってしまうという問題がある。
【０００７】
又、サムネイル表示を大きくしたとしても、１つの表示画面に表示されるサムネイルの数が少なくなってしまい、この手法でも又ユーザが記録媒体に記録されているファイルの一覧を理解することが難しくなってしまうという問題がある。
【０００８】
本発明は上記問題に鑑みてなされたもので、その目的とする処は、ユーザが記録媒体に記録されているファイルの内容とそれらファイルの一覧を従来の手法に比べてより容易に理解することができる画像処理装置を提供することにある。
【０００９】
【課題を解決するための手段】
上記目的を達成するため、本発明は、オブジェクト符号化された画像データをサムネイル表示することができる画像処理装置において、入力された画像データからオブジェクトを分離する分離手段と、前記入力された画像データをサムネイル表示するときには、分離された前記オブジェクトに関連する付加情報を検出して、前記付加情報に応じて前記オブジェクト毎に縮小倍率を制御する制御手段とを有することを特徴とする。
【００１０】
【発明の実施の形態】
以下に本発明の実施の形態を添付図面に基づいて説明する。
【００１１】
図１において、１０１はデータ分離回路、１０２はデータ分離回路１０１で分離されたオブジェクト符号化信号を復号するオブジェクト復号回路、１０３は同じくデータ分離回路１０１で分離されたシステムデータ符号化信号を復号するシステムデータ復号回路、１０４はシステムデータ復号回路１０３で復号された信号の中からオブジェクトの種類情報並びに位置情報を取り出すシーン記述データ分離回路である。
【００１２】
又、１０５はシーン記述データ分離回路１０４で取り出されたオブジェクト情報を基にサムネイル作成のための縮小率を決定する縮小率決定回路、１０６はシーン記述データ分離回路１０４から渡されたオブジェクトに関する種類情報並びに位置情報からサムネイル作成に最適な縮小率を制御するシステムコントローラ、１０７はデジタルビデオに付加されているファインダ等のディスプレイ１０８に表示するための表示コントローラである。
【００１３】
次に、サムネイル表示のためのオブジェクト符号化信号の流れを説明する。
【００１４】
ＤＶＤ等の記録メディアにＭＰＥＧ４を始めとしたオブジェクト符号化方式で圧縮記録された符号化画像信号が図１に示すシステムに入力される。符号化画像信号は、先ず、データ分離回路１０１により画像中に含まれる各オブジェクトの符号化画像信号とＭＰＥＧ４に含まれるシーン記述情報等のシステムデータ符号化信号へと分離される。
【００１５】
データ分離回路１０１により分離された信号のうち、オブジェクト毎の符号化信号は、オブジェクト復号回路１０２にある復号回路に入力され各々の信号が復号される。尚、この場合デコーダに関しては符号化の際に使用したエンコーダと逆の操作を行えば良いので、特定のデコーダを用いるようなことはここでは指定しない。
【００１６】
又、システムデータ符号化信号はシステムデータ復号信号回路１０３に入力されＭＰＥＧ４におけるシーン記述情報であるオブジェクトの種類情報や位置情報並びにその他ＭＰＥＧ４に含まれる様々な情報を復号する。尚、この場合もオブジェクト復号回路１０２と同様にデコーダに関しては特に指定せず、符号化の際に行った作業と逆の操作を行う。
【００１７】
システムデータ復号回路１０３で復号されたシステムデータは、シーン記述データ分離回路１０４に入力される。オブジェクト符号化の一種であるＭＰＥＧ４では多種多様なＡＶオブジェクトを扱えるためのシーン記述情報が付加されている。これらの情報にはオブジェクトの時間的・空間的な相互関係や形状・座標等の属性が記述されており、それらのシーン記述情報の中からサムネイル作成に必要な情報であるオブジェクトの種類情報並びに位置情報を分離することを行う。
【００１８】
シーン記述データ分離回路１０４から得られたオブジェクトの種類情報並びに位置情報は、縮小率設定回路１０５へ入力され、本発明におけるサムネイル作成時の縮小率の設定に利用される。
【００１９】
サムネイルを作成する際に記録されたデータの内容をユーザ側が理解し易くするためには、画像中に含まれるデータの中から特徴のある人物を表示すれば良い。つまり、サムネイルを作成する際に、画像に含まれる人物を他のオブジェクトよりも相対的に大きく表示する。又、人物以外のオブジェクトはサムネイル作成のための縮小率を用いてそのまま縮小表示する。
【００２０】
図２の標準画像２０１が実際に記録メディアに記録されている画像であり、この画像からサムネイルを作成する際に、デジタルビデオのファインダに１０前後のサムネイル一覧を表示すると、各々の画像が小さくなり過ぎてしまう。そこで、標準画像２０１の中から人物というオブジェクトがあれば、その人物のオブジェクトは、人物以外のオブジェクトよりも相対的に大きく表示し、人物以外のオブジェクトは、そのままの縮小率、つまりは作成しようとするサムネイルのサイズに合わせた縮小率を用いて縮小表示する。これから出来上がったサムネイル画像がサムネイル画像２０２である。
【００２１】
システムコントローラ１０６は、オブジェクトの種類情報並びに位置情報に基づいてサムネイル作成のための縮小率を決定し、それらの情報を表示コントローラ１０７へ渡すコントローラである。
【００２２】
オブジェクト復号回路１０２で復号された各オブジェクトに対して、システムコントローラ１０６で決定された縮小率を用いて実際に縮小化を行い、表示コントローラ１０７は、表示ディスプレイ１０８に表示を行う。
【００２３】
次に、画像に含まれる人物が２人以上存在する、並びに人物が存在しない場合の縮小率決定について述べる。
【００２４】
先ず、人物が２人以上存在する場合である。人物が１人の場合には画像の中から人物というオブジェクトの表示を人物以外のオブジェクトよりも相対的に大きく表示することを行ったが、２人以上存在する場合は、どちらの人物を大きく表示するかの判断はオブジェクトの位置情報を用いて行う。図３に示すように画像中に人物が２人以上存在した場合、ＭＰＥＧ４のシーン記述情報の中からオブジェクトの種類に関する情報と同時に、オブジェクトの位置に関する情報を検出する。
【００２５】
次に、これらの情報を用いて、画像の中心位置に近い人物をその他のオブジェクトよりも相対的に大きく表示する。標準画像３０１において、ＭＰＥＧ４のシーン記述情報から２人の人物が存在することを検出する。その場合、ＭＰＥＧ４のシーン記述情報の中に含まれる位置に関する情報を検出し、画像の中心に近い人物、つまり標準画像３０１において丸顔の人物に対する表示を三角顔の人物等のオブジェクトよりも相対的に大きく表示することにより、サムネイル画像３０２を作成する。
【００２６】
次に、人物が存在しない場合である。画像中に人物が存在しない場合も人物が２人以上存在する場合と同様、オブジェクトの位置情報を用いて縮小率を制御する。ＭＰＥＧ４のシーン記述情報の中から位置に関する情報を検出する。次に、これらの情報を用いて、画像に含まれる複数のオブジェクトの中から画像の中心に一番近いオブジェクトをその他のオブジェクトよりも相対的に大きく表示する。標準画像４０１において、ＭＰＥＧ４のシーン記述情報から人物が存在しないことを検出する。その場合、ＭＰＥＧ４のシーン記述情報の中に含まれる位置に関する情報を検出し、画像の中心に近いオブジェクト、つまり標準画像４０１において車に対する表示をその他のオブジェクトよりも大きく表示することにより、サムネイル画像４０２を作成する。
【００２７】
【発明の効果】
以上の説明で明らかなように、本発明によれば、デジタルビデオカメラのファインダ等の領域が比較的小さいディスプレイ上にサムネイルを表示する際に、オブジェクト符号化された画像データに含まれるオブジェクトに関連する付加情報を検出して前記付加情報に応じて当該オブジェクトの縮小倍率を制御する表示方法を行うことで、記録メディアに記録されている画像の内容並びに一覧を詳細に理解可能な画像処理装置を提供することができる。
【図面の簡単な説明】
【図１】本発明に係る画像処理装置の構成を示すブロック図である。
【図２】本発明の実施の形態におけるサムネイル表示例を示す図である。
【図３】本発明の実施の形態において人物が複数存在する場合の処理手法を示す図である。
【図４】本発明の実施の形態において人物が存在しない場合の処理手法を示す図である。
【符号の説明】
１０１      データ分離回路
１０２      オブジェクト復号回路
１０３      システムデータ復号回路
１０４      シーン記述データ変換回路
１０５      縮小率設定回路
１０６      システムコントローラ
１０７      表示コントローラ
１０８      表示ディスプレイ
２０１      標準画像
２０２      サムネイル画像
３０１      標準画像
３０２      サムネイル画像
４０１      標準画像
４０２      サムネイル画像
【図１】
2004221631.tif 000003
【図２】
2004221631.tif 000004
【図３】
2004221631.tif 000005
【図４】
2004221631.tif 000006