(57)【要約】  【課題】  多くの枚数の画像を表示するために、画像データの表示範囲の一部を互いに重ねて表示する際、撮影者の意図が一覧表示において維持された状態で複数の画像データを表示可能とし、所望の画像の選択時に目的の画像を容易に索出する。  【解決手段】  画像データに設定された注目領域と日付時刻との情報を含むデータを記憶部に格納する。注目領域を日時情報に応じて評価して、画像データの中で他の画像データと重ならない部分として保護領域を確定し、保護領域情報を生成する。保護領域情報に基づいて表示を制御する表示制御部によって、複数の画像を同一の画面上に一覧表示する際に、設定した保護領域が隠れないようにしつつ、画像相互の重なり部分の面積が最大になるように、画像データの配置を特定して、表示部に画像の一覧を表示する。【選択図】        図７
2005202588.tif 000002
【特許請求の範囲】
【請求項１】
画像表示手段に表示する複数の画像におけるそれぞれの画像データに含まれる注目領域情報および日付時刻情報を記憶可能に構成された記憶手段と、
上記注目領域情報を、基準の日付時刻情報と上記日付時刻情報とに基づいて評価し、上記注目領域情報における注目領域内の保護領域の設定に関する保護領域情報を生成する評価手段と、
上記保護領域情報に基づいて、上記複数の画像の重ね方を制御して一覧表示する調整手段とを有し、
上記複数の画像を一覧表示するように構成されている
ことを特徴とする画像表示装置。
【請求項２】
上記基準の日付時刻情報が、上記一覧表示されている時点における日付および時刻の情報である
ことを特徴とする請求項１記載の画像表示装置。
【請求項３】
上記基準の日付時刻情報が、上記複数の画像データにそれぞれ含まれている日付時刻情報から選択された日付時刻情報である
ことを特徴とする請求項１記載の画像表示装置。
【請求項４】
上記評価手段が、上記基準の日付時刻情報と上記日付時刻情報とを比較して、日付時刻の経過時間が大きい画像ほど保護領域の面積を小さく設定するように構成されている
ことを特徴とする請求項１乃至請求項３のいずれか１項記載の画像表示装置。
【請求項５】
上記注目領域情報が、注目の程度に分布を有する情報であり、
上記評価手段が、上記日付時刻情報と上記基準の日付時刻情報とを比較し、上記基準の日付時刻情報に比して日付時刻の経過時間が長い画像データであるほど注目度の高い領域に保護領域を設定するように構成されている
ことを特徴とする請求項１乃至請求項３のいずれか１項記載の画像表示装置。
【請求項６】
上記調整手段が、上記日付時刻情報に含まれる日付時刻が前の時点の画像データを、上記前の時点の日付時刻より後の時点の日付時刻の画像データに対して、背面側に配置するように表示位置を調整するように構成されている
ことを特徴とする請求項１乃至請求項５のいずれか１項記載の画像表示装置。
【請求項７】
上記調整手段が、上記画像データに含まれる日付時刻情報における日付時刻が上記基準の日付時刻情報における日付時刻以前の画像データに限定して表示するように調整可能に構成されている
ことを特徴とする請求項１乃至請求項６のいずれか１項記載の画像表示装置。
【請求項８】
複数の画像データのそれぞれの画像データに含まれる注目領域情報と日付時刻情報とを記憶するステップと、
上記注目領域情報を、基準の日付時刻情報と上記日付時刻情報とに基づいて評価するステップと、
上記注目領域内の保護領域の設定に関する情報が含まれた保護領域情報を生成するステップと、
上記保護領域情報に基づいて、上記複数の画像データの表示の重ね方を制御して、上記複数の画像データを一覧表示するステップとを有する
ことを特徴とする画像表示方法。
【請求項９】
複数の画像データのそれぞれの画像データに含まれる注目領域情報と日付時刻情報とを記憶手段に格納するステップと、
上記注目領域情報を、基準の日付時刻情報と上記日付時刻情報とに基づいて評価するステップと、
上記注目領域内の保護領域の設定に関する情報が含まれた保護領域情報を生成するステップと、
上記保護領域情報に基づいて、上記複数の画像データの表示の重ね方を制御して、上記複数の画像データを画像表示手段に一覧表示するステップとを、
上記画像表示手段を制御する表示制御手段に実行させる
ことを特徴とする画像表示プログラム。
【発明の詳細な説明】
【技術分野】
【０００１】
この発明は、画像表示装置、画像表示方法および画像表示プログラムに関し、特に、デジタル画像データを表示し、視聴するための装置において、複数の画像データを視聴者に見やすく表示する技術に適用して好適なものである。
【背景技術】
【０００２】
デジタルハイビジョン放送が開始され、ハイビジョン対応のテレビ受信機の普及により、従来よりも高画質で迫力のある映像を家庭で楽しめるようになってきている。一方、電子スチルカメラの普及により、電子化した静止画および動画をパソコンだけでなく、テレビのモニタ画面に表示して楽しむユーザも増えてきている。
【０００３】
そして、ユーザがテレビ受信機により静止画や動画を見る場合には、ユーザは、モニタ画面に表示されたサムネイルの一覧を見て、そのサムネイルを選択することによって、再生データを選択するのが一般的である。
【０００４】
一方、近年記憶容量が飛躍的に増大されたメモリの利用が可能になっており、これに伴い記憶できる画像の数も飛躍的に増大している。例えば、メモリカードは、５００枚を超えるデジタル写真の記憶をすることができるようになってきている。そのため、このような大量の画像データの中から、ユーザが所望の画像データを探し出すことは、容易なことではなくなってきている。
【０００５】
このような大量の画像データを効率よく画面に配置し、ユーザ自身の目で容易に選択できるようにする技術としては、例えば、特許文献１および特許文献２に記載された技術を挙げることができる。これらのうちの特許文献１には、サムネイル画像を重ねるようにして、表示させつつ移動させて、所望のデータを容易に見つけることができるようにする技術が開示されている。また、特許文献２には、画像を３次元空間（３Ｄ空間）の中にデータを表示させ、仮想的な視点を移動することで所望のデータを見つけられるようにする技術が開示されている。
【特許文献１】特開２００１−３０６３７５号公報
【特許文献２】特開平９−２５９１３０号公報
【発明の開示】
【発明が解決しようとする課題】
【０００６】
しかしながら、上述した従来技術においては、サムネイル画像どうしが重なり合って表示されてしまい、写真を判別するための重要な部分が隠れてしまう場合があった。
【０００７】
具体的には、図１８Ａに示すように、例えばサムネイル画像として、写真（ａ）と写真（ｂ）とが存在した場合、写真（ａ）においては、画像の左部分の、いわゆる「かけっこ」をしている子供達の画像が重要部分であり、他方、写真（ｂ）においては、画像の右側にある人物が重要である。
【０００８】
ところが、これらの写真を他の写真とともに重ねるように表示すると、図１８Ａに示すように、重要な部分が隠れたまま表示されてしまうことがある。そのため、上述した特許文献１および特許文献２に開示された発明においては、ユーザが表示画像をスクロールしたり、仮想的な視点の位置を動かしたりするなどの操作を行って、その写真の重要な部分を見ることができるようにした後に写真を判別する方法を採用せざるを得なかった。
【０００９】
したがって、この発明の目的は、上述した問題を鑑みて、撮影時に撮影者が意図した内容で一覧できる状態を保ったまま、より多くの画像データを表示させることができ、表示された画像を判別して所望の画像を選択する場合に、目的の画像を容易に探し出すことができ、大量のデジタル画像が画面上に効率よく配置された状態であっても、ユーザが容易に希望の画像を探し出して見つけることができる画像表示装置、画像表示方法および画像表示プログラムを提供することにある。
【課題を解決するための手段】
【００１０】
上記目的を達成するために、この発明は、
複数の画像を表示する場合において、
少なくとも、画像ごとに設定された注目領域情報と日付時刻情報とを記憶し、
注目領域情報を、基準の日付時刻情報と、画像の日付時刻情報とに基づいて評価して、注目領域内の保護領域を設定することにより保護領域情報を生成し、
生成された保護領域情報に基づいて複数の画像の重ね方を制御して一覧表示する
ことを特徴とするものである。
【００１１】
すなわち、この発明の第１の発明は、
画像表示手段に表示する複数の画像におけるそれぞれの画像データに含まれる注目領域情報および日付時刻情報を記憶可能に構成された記憶手段と、
注目領域情報を、基準の日付時刻情報と日付時刻情報とに基づいて評価し、注目領域情報における注目領域内の保護領域の設定に関する保護領域情報を生成する評価手段と、
保護領域情報に基づいて、複数の画像の重ね方を制御して一覧表示する調整手段とを有し、
複数の画像を一覧表示するように構成されている
ことを特徴とする画像表示装置である。
【００１２】
この発明の第２の発明は、
複数の画像データのそれぞれの画像データに含まれる注目領域情報と日付時刻情報とを記憶するステップと、
注目領域情報を、基準の日付時刻情報と日付時刻情報とに基づいて評価するステップと、
注目領域内の保護領域の設定に関する情報が含まれた保護領域情報を生成するステップと、
保護領域情報に基づいて、複数の画像データの表示の重ね方を制御して、複数の画像データを一覧表示するステップとを有する
ことを特徴とする画像表示方法である。
【００１３】
この発明の第３の発明は、
複数の画像データのそれぞれの画像データに含まれる注目領域情報と日付時刻情報とを記憶手段に格納するステップと、
注目領域情報を、基準の日付時刻情報と日付時刻情報とに基づいて評価するステップと、
注目領域内の保護領域の設定に関する情報が含まれた保護領域情報を生成するステップと、
保護領域情報に基づいて、複数の画像データの表示の重ね方を制御して、複数の画像データを画像表示手段に一覧表示するステップとを、
画像表示手段を制御する表示制御手段に実行させる
ことを特徴とする画像表示プログラムである。
【００１４】
この発明において、典型的には、基準の日付時刻情報が、一覧表示されている時点にお
ける日付および時刻の情報である。また、この発明において、典型的には、基準の日付時刻情報が、複数の画像データにそれぞれ含まれている日付時刻情報から選択された日付時刻情報である。
【００１５】
この発明において、典型的には、評価手段は、基準の日付時刻情報と日付時刻情報とを比較して、日付時刻の経過時間が大きい画像ほど保護領域の面積を小さく設定するように構成されている。
【００１６】
この発明において、典型的には、注目領域情報は、注目の程度に分布を有する情報であり、評価手段が、日付時刻情報と基準の日付時刻情報とを比較し、基準の日付時刻情報に比して日付時刻の経過時間が長い画像データであるほど注目度の高い領域に保護領域を設定するように構成されている。
【００１７】
この発明において、典型的には、調整手段は、日付時刻情報に含まれる日付時刻が前の時点の画像データを、前の時点の日付時刻より後の時点の日付時刻の画像データに対して、背面側に配置するように表示位置を調整するように構成されている。
【００１８】
この発明において、典型的には、調整手段は、画像データに含まれる日付時刻情報における日付時刻が基準の日付時刻以前の画像データに限定して表示するように調整可能に構成されている。
【００１９】
また、この発明は、上述の組合せに限定されるものではなく、以上の技術的思想を含んだ、あらゆる技術的思想の組み合わせを包含するものである。
【発明の効果】
【００２０】
以上説明したように、この発明によれば、多くの枚数の画像データを表示するために、画像データの表示範囲の一部を互いに重ねて表示する際、画像データに設定された注目領域情報を画像データの日付時刻情報と基準となる日付時刻情報とに応じて評価して得られる保護領域を、他の画像との重ね方によって表示されるように制御していることにより、撮影時に撮影者が意図した内容で一覧可能な状態を維持したまま、より多くの画像データの表示が可能となり、表示された画像を判別して所望の画像を選択する際、目的の画像を容易に探し出すことが可能となる。
【発明を実施するための最良の形態】
【００２１】
以下、この発明の実施形態について図面を参照しながら説明する。なお、以下の実施形態の全図において、同一または対応する部分には同一の符号を付す。
【００２２】
（デジタルテレビ受信装置）
まず、この発明の第１の実施形態による画像表示装置について説明する。図１に、この第１の実施形態による画像表示装置の一例としてのデジタルテレビ受信装置１００の構成を示す。
【００２３】
まず、アンテナ（図示せず）により受信された信号は、図１に示すチューナ部１０１に入力される。このチューナ部１０１により、入力された信号に対して、復調や誤り訂正などの処理が実行されて、トランスポートストリームと呼ばれる形式のデジタルデータが生成される。さらに、チューナ部１０１により、生成されたトランスポートストリーム（ＴＳ）データに対してスクランブル解除処理が行われ、デマルチプレクサ部１０２に供給される。
【００２４】
このデマルチプレクサ部１０２により、チューナ部１０１から供給された、複数チャン
ネル分の映像、音声データ並びに電子番組ガイド（ＥＰＧ）データ、およびデータ放送データなどが時分割多重化されて構成されたＴＳデータの中から、映像データおよび音声データが取り出され、映像・音声デコーダ１０３に供給される。映像・音声デコーダ１０３により処理された映像データは、ビデオメモリ１０７に書き込まれる。ビデオメモリ１０７に書き込まれた映像データは、表示合成部１０８を介して、画像表示手段としての表示器１１２に供給される。他方、映像・音声デコーダ１０３により処理された音声データは、音声出力部１０４から出力される。
【００２５】
カードスロット１０９は、リムーバブルメモリカードなどと接続するためのインターフェースである。この第１の実施形態においては、デジタルカメラにより撮影された画像データの入力に用いられる。画像データ入力部１０５は、カードスロット１０９に接続されたメモリカード（図示せず）からデジタル画像データを入力するための入力回路である。画像処理部１０６は、画像データ入力部１０５から入力されたデジタル画像データに対して画像処理を施すためのものである。この画像処理が施されたデジタル画像データは、記憶手段の１つとしてのビデオメモリ１０７に記憶される。
【００２６】
表示制御部１１０は、例えばＣＰＵ（中央演算処理装置）から構成される演算処理装置である。この表示制御部により、画像データ入力部１０５に対する画像読込の指示、画像処理部１０６に対する処理実行の指示、ビデオメモリ１０７に対する表示データの書き込み、表示合成部１０８に対する合成処理の指示、記憶手段としての記憶部１１３に対する情報の記憶指示を実行するための制御回路である。また、調整手段および評価手段として機能する表示制御部１１０は、ユーザ入力部１１１を介してリモコン１１４からの入力データを取得可能に構成されている。また、表示制御部１１０は、画像データ入力部１０５を介して、デジタル画像データに付与された撮影データの取得を実行する、関連情報取得部としても機能する。また、この発明による画像表示方法がソフトウエアプログラムとして実現される場合には、このプログラムに従って表示制御部１１０により種々の処理ステップが実行される。また、表示制御部１１０は、画像処理部１０６とともに動作して、画像データから取得された関連情報に基づいて、この画像データの表示位置を制御する、いわゆるレイアウト決定部としても機能する。
【００２７】
（リモコン装置）
次に、ユーザによりデジタルテレビ受信装置に操作信号を供給するリモコン装置について説明する。図２に、この第１の実施形態によるリモコン１１４を示す。
【００２８】
図２に示すように、発光部２０１は、リモコン１１４と、図１に示すユーザ入力部１１１に備えられた受信部との間において、赤外線通信を実行するための発光素子回路である。電源キー２０２は、電源をＯＮ／ＯＦＦするためのキーである。カーソル決定キー２０３は、上下左右ボタンの中央に決定キーを配したカーソルキーおよび決定キーから構成される。アップダウンキー２０４，２０５は、アップ／ダウン（ＵＰ／Ｄｏｗｎ）の２つのキーから主に構成される。数字キー２０６は、１〜９、０の数字キーがマトリクス状に配列されて構成されている。カラーキー２０７は、例えば青、赤、緑、黄の４色のボタンから構成されている。また、モニターモードキー２０８は、テレビ受信機に表示される表示モードを切替えるためのキーである。また、ビューアキー２０９は、画像ビューア機能を呼び出すためのキーである。なお、図２に示すリモコン１１４は、この第１の実施形態を説明するために必要な機能を実現するための操作を行うボタンのみを示し、実際の受信装置に必要なボタンは、必ずしも図２に示されるもののみに限らない。
【００２９】
この第１の実施形態において例として用いる画像データは、デジタルカメラにより撮影された静止画および動画データである。このうちの静止画データとしては、デジタルカメラによりＪＰＥＧ圧縮処理が施された後、静止画像データファイルとしてメモリカードに
記録されたものが用いられる。また、動画データとしては、静止画データと同様に、デジタルカメラによりフレーム単位でＪＰＥＧ圧縮処理された画像群を動画像データファイルとしてメモリカードに記録されたものが用いられる。なお、以後の説明において、「画像データ」とは、静止画像データおよび動画像データの少なくともいずれか一方のデータを示す。
【００３０】
そして、それぞれの画像データには、デジタルカメラによって撮影時の情報が付与されている。この撮影時の情報としては、撮影日時やカメラ機種名以外に、撮影シーンモード、撮影時におけるファインダー内の焦点位置を示す焦点位置情報、ストロボ発光状態情報、被写体との距離を示す情報、ズーム状態情報などがある。この第１の実施形態において使用されるデジタルカメラとしては、撮影時の撮影時におけるファインダー内の焦点位置情報として、「左」「中」「右」のうちのいずれかが記録されるものを用いる。
【００３１】
図３に、この第１の実施形態において使用されたデジタルカメラの液晶画面に表示される画面例を示す。図３Ａに、シャッターボタンに手を触れる前の液晶画面の画面状態を示し、図３Ｂに、シャッターボタンを軽く押した後、いわゆる、シャッターボタンを「半押し」した後、左側の矩形領域に焦点が合った状態を示す。
【００３２】
（デジタルテレビ受信装置の動作）
次に、この第１の実施形態によるデジタルテレビ受信装置１００の動作について説明する。なお、この第１の実施形態によるデジタルテレビ受信装置１００におけるデジタル画像の一覧表示は、ユーザがカードスロット１０９にメモリカードを装填したり装着したりした後、リモコン操作によって画像ビューア機能を呼び出す操作により開始される。
【００３３】
図４に、デジタルテレビ受信装置１００における画像ビューア機能の一部の動作について表示制御部１１０の動作を示す。図５に、図４の処理において使用される注目領域の種類を示す。ここで、この注目領域としては、焦点位置や撮影シーンモードに応じて異なるものが設定されている。また、図５Ａに示す注目領域は、焦点位置情報に基づいて、撮影者の注目領域を撮影時の合焦ポイントを中心とした領域とする。
【００３４】
この第１の実施形態において、注目領域は、焦点位置情報が定める画像データ上の焦点位置を中心とした半径ｒ1の円領域であり、焦点位置情報の「左」、「中央」、「右」に
応じて３つの領域が定められている。また、図５Ｂに示す注目領域は、撮影モード情報に基づいて変更可能になっている。すなわち、図５Ｂに示す人物モードにおける撮影者の注目領域は、画面の中央の半径ｒ2の円領域であり、風景モードにおける撮影者の注目領域
は、画面の中央の短径ｒ2、長径ｒ2×２の楕円領域とするものである。また、図５Ｃに示す注目領域は、焦点位置情報、撮影モード情報が存在しない場合に適応する注目領域であり、画像データにおけるほぼ中央で半径ｒ3の円領域として定められる。
【００３５】
そして、ユーザにより、図２に示すリモコンの「ビューア」キー２０９が押下されると、表示制御部１１０により、図４に示す処理が開始される。
【００３６】
すなわち、まず、ステップＳ３０１において、表示制御部１１０により、画像データ入力部１０５を介して、カードスロット１０９に挿入されたメモリカードに存在する画像ファイルの総数が読み出されて記憶される。
【００３７】
次に、ステップＳ３０２に移行して、何枚目の画像データであるかを示すカウンタＮに１が設定され、初期化される。その後、ステップＳ３０３において、Ｎ枚目の画像ファイルのExifヘッダ情報の読み出し、この段階では１枚目の画像ファイルのExifヘッダ情報の読み出しが行われる。
【００３８】
そして、ステップＳ３０４において、所定の画像のExifヘッダ情報に焦点位置情報が含まれているか否かの判断が行われる。この判断の結果、Exifヘッダ情報に焦点位置情報が含まれている場合、ステップＳ３０５に移行して、表示制御部１１０により、図５Ａに示す左焦点用注目領域、中央焦点用注目領域、右焦点用注目領域の３つの注目領域のうちの、焦点位置情報に対応した焦点位置の注目領域が決定される。反対に、画像データに焦点位置情報が含まれていない場合、ステップＳ３０６に移行して、表示制御部１１０により、撮影シーンモード情報が含まれているか否かの判断が行われる。
【００３９】
ステップＳ３０６において、画像データに撮影シーンモード情報が含まれている場合には、ステップＳ３０７に移行して、図５Ｂに示す注目領域のうちの撮影シーンモード情報に対応した注目領域が決定される。他方、Exifヘッダ情報に、焦点位置情報および撮影シーンモード情報のいずれの情報も含まれていない場合には、ステップＳ３０８に移行して、表示制御部１１０により、図５Ｃに示す標準の注目領域が決定される。
【００４０】
その後、ステップＳ３０９に移行して、カウンタＮに１が加算された後、ステップＳ３１０に移行して、カウンタＮが画像総数以下であるか否かの判断が行われる。この判定の結果、カウンタＮが画像総数以下でない場合、すなわち、カウンタＮの値が画像総数を超えた場合、この一覧表示処理が終了する。他方、カウンタＮが画像総数以下の場合、ステップＳ３０３に復帰して、表示制御部１１０により、画像データに対して順次同様の処理が行われる。これにより、画像総数分の画像データごとに、順次注目領域が決定される（ステップＳ３０９，Ｓ３１０）。
【００４１】
全ての画像データに対する注目領域の設定が行われた段階で、動作処理が終了する。そして、以上のようにして設定された注目領域は、画像データに付与された撮影情報とともに記憶部１１３に格納される。
【００４２】
（保護領域の決定処理）
次に、画像データごとに、その含まれている、日付時刻情報としての撮影日時情報（以下、日時情報）に従って、それぞれの画像データにおける保護領域が決定される。この画像データごとの保護領域の決定方法について以下に具体的に説明する。
【００４３】
図６に、画像データに付与された注目領域を、撮影日時情報に基づいて評価することにより保護領域を決定する処理を示す。ここで、保護領域とは、該当する画像データが画面上に並べて表示される際に、他の画像データが重ねて表示されることがないように、表示制御において保護される領域である。
【００４４】
すなわち、図６に示すように、まず、ステップＳ４０１において、表示制御の基準となる日時が設定される。ここでは、表示しようとする画像データが有する日時情報の中で、最も新しい日時情報が選ばれる。換言すると、最も近い時点で撮影された画像データを中心とした表示制御が実行される。
【００４５】
次に、ステップＳ４０２に移行して、基準日時からの経過時間を算出する際の時間単位が選択される。具体的には、例えば、表示しようとする画像データが有する日時情報のうちの基準日時から最も離れた日時との差に基づいて選択される。そして、この差が１日もしくは数日（具体的には、例えば３日）を超える場合には、単位として日が選択され、数ヶ月（具体的には、例えば３ヶ月）を超える場合には、単位として月が選択される。反対に、この差が１日以下の場合には、時間、あるいは、分が選択される。
【００４６】
次に、ステップＳ４０３に移行して、後述する総仮保護面積の積算用変数Ｓｕｍ、画像
データのカウンタＮおよびカウンタｃを初期化する。具体的には、総仮保護面積の積算用変数Ｓｕｍを０とし、カウンタＮを１とし、ｃを０とする。
【００４７】
その後、ステップＳ４０４に移行して、日時データに基づいて、画像データの注目領域の評価が行われる。具体的には、Ｎ番目の画像データに関し、選択した経過時間単位に基づいて、撮影日時情報から基準日時までの経過時間の差ΔNが算出される。その後、ステ
ップＳ４０５に移行して、このΔNが０以上か否かの判定が行われる。判定の結果、ΔNが０未満である場合、すなわち、基準日時が撮影日時より前である場合には、後述するステップＳ４１０に移行する。他方、ΔNが０以上である場合には、ステップＳ４０６に移行
して、画像データを表示対象とする。
【００４８】
その後、ステップＳ４０７に移行して、経過時間に基づき注目領域の仮の評価係数αＮを、係数ｋを含む形で算出する。ここで、仮評価係数αNは、画像データＮの撮影日時か
ら基準日時までの経過時間ΔNに応じて、注目領域を評価し、保護領域を算出するための
係数である。この第１の実施形態においては、経過時間に応じて保護領域が順に小さくなるように、式１で定義される。
αN＝exp（−ｋΔN）・・・（式１）
【００４９】
そして、ステップＳ４０８に移行する。ここで、保護領域は、注目領域の面積ｓ0Nを式１の係数に比例するように評価して得られる領域である。すなわち、画像データＮの保護領域の仮面積ｓNは、以下の式２で求められる。
ｓN＝αN×ｓ0N・・・（式２）
【００５０】
上述したように、この第１の実施形態における注目領域は、半径ｒ1、ｒ3の円、または２ｒ2およびｒ2で表される長径短径を有する楕円で定められる。そのため、注目領域の仮面積ｓ0Nは、以下のそれぞれの（式３）〜（式６）により算出される。
（焦点位置情報による注目領域）
ｓ0N＝π（ｒ1）2・・・（式３）
（撮影モード情報：人物モードによる注目領域）
ｓ0N＝π（ｒ2）2・・・（式４）
（撮影モード情報：風景モードによる注目領域）
ｓ0N＝２π（ｒ2）2・・・（式５）
（撮影情報なしの場合の注目領域）
ｓ0N＝π（ｒ3）2・・・（式６）
【００５１】
すなわち、ステップＳ４０９においては、（式１）を適切な級数に展開することによって、Ｎ枚の画像データについて積算された保護領域の仮総面積Ｓｕｍが、ｋの多項式として算出される。なお、以下の（式７）は、多項式展開をｋの２次の項までとした場合である。
Ｓｕｍ＝ａｋ2＋ｂｋ+ｃ・・・（式７）
【００５２】
これらの算出が実行された後、ステップＳ４１０において、処理枚数の計算のためのカウンタＮに１が加算される。
【００５３】
以上のステップＳ４０４からステップＳ４０９による算出は、処理される画像データの数が画像総数を超えるまで繰り返し実行される。
【００５４】
算出処理が処理すべき全ての画像データに対して実行されると、その後、ステップＳ４１２に移行して、これらの画像データを表示領域に表示するための係数ｋが算出される。すなわち、後述するように、画像データは、保護領域が重ならないようにしつつ、それ以
外の部分を互いに重ねて表示されるよう位置制御が行われる。また、他方で、保護領域の外側に重ねられない領域も存在する。そこで、保護領域の面積Ｓｕｍは、表示が可能な領域に、すなわち表示面積Ｓallの領域に収める必要がある。これにより、表示面積に対す
る有効な保護領域面積の割合を重ね効率βとして表すと、（式８）の条件が必要となる。
Ｓall≧（１／β）×Ｓｕｍ・・・（式８）
【００５５】
そして、ステップＳ４１２においては、（式７）から、注目領域を基準日時までに経過時間に応じて評価して保護領域を設定するための係数ｋが算出される。
【００５６】
その後、ステップＳ４１３において、カウンタＮを初期化（Ｎ＝１）した後、ステップＳ４１４からステップＳ４１７を順次実行する。これにより、ステップＳ４０４において既に算出されているΔNと、ステップＳ４１２において、算出されているｋとから、式２
を満たすｓ0Nと注目領域の種類によるｒN1，ｒN2またはｒN3が、画像データＮごとに求められて、保護領域が設定される。ここでｒN1，ｒN2またはｒN3は次の式で与えられる。
（焦点位置情報による注目領域）
ｓN＝π（ｒN1）2・・・（式９）
（撮影モード情報：人物モードによる注目領域）
ｓN＝π（ｒN2）2・・・（式１０）
（撮影モード情報：風景モードによる注目領域）
ｓN＝２π（ｒN2）2・・・（式１１）
（撮影情報なしの場合の注目領域）
ｓN＝π（ｒN3）2・・・（式１２）
【００５７】
（表示処理の制御）
次に、以上のようにして評価され、設定された保護領域に基づく表示処理の制御について説明する。この第１の実施形態による表示処理においては、画像データの保護領域が重なることなく、複数枚の画像データの表示位置と重ねの上下関係を調整することにより、効率よく配置して表示することが目的である。
【００５８】
そこで、まず、既に配置された画像データの表示領域の外縁に新たに配置する画像データを、その保護領域の外縁が接する位置に配置する。また、画像データの表示領域が重なる領域においては、新たに配置する画像データの表示が既に配置された画像データの表示の下側に重なるように配置する。同時に、新しい配置による表示面積の増分が最小となる位置を選択して配置する。すなわち、表示される保護領域を含む領域の面積が極小になるパターンを少なくとも１パターン探索し、その極小となるパターンのうちで最小となるパターンを決定する。逆に言うと、画像データの表示領域のうちの保護領域以外の領域の重ね面積が最も大きくなるような組合せを探索して配置する。この表示処理の制御を、図７に示す。
【００５９】
ここで、この探索処理の簡略化のために、まず、表示領域の中心から既に配置された画像データの表示領域の外縁までの距離が極小値を示す位置を配置候補位置とする。そして、この位置を中心として保護領域が重なることなく表示が確保できる位置を探索し、その探索された位置に画像データを配置した場合の総表示面積を算出する。この総表示面積の算出を複数行った後、これらの複数の配置候補位置のうち表示面積が最も小さい位置を配置位置として決定する。この詳細な手順を図７に示す。
【００６０】
図７に示すように、まず、ステップＳ５０１において、表示対象となる画像データの最初の１枚目を表示領域の中心に配置する。続いて、ステップＳ５０２に移行して、表示面積の総面積Ｓｕｍを１枚目の画像データの表示面積として、その総面積Ｓｕｍの初期化を行う。また、処理枚数のカウンタＮの初期化（Ｎ＝１）を行う。続いて、ステップＳ５０
４に移行して、パターンの探索回数をカウントするカウントｉの初期化（ｉ＝０）を行う。その後、ステップＳ５０５において、表示領域の中心から、すでに配置されている画像データの表示領域の外縁までの距離が極小となる位置Ｐｉを求める。
【００６１】
そして、ステップＳ５０６に移行して、新たに極小となる位置が存在するか否かの判定が行われる。この極小となる位置が存在する場合には、ステップＳ５０７に移行して、その極小となる位置に画像データの表示を配置してみる。その後、ステップＳ５０８に移行して、この新たに配置された画像データの表示領域と、すでに配置されている画像データの表示領域とにおいて、新たに配置された画像データにおける保護領域が重ならない限界の位置まで画像データの位置を移動させる。
【００６２】
その後、ステップＳ５０９に移行して、新たに配置された画像データにおける保護領域が重ならない限界の位置を位置Ｐｉとして設定する。また、このときの表示総面積、すなわち、すでに配置された画像データの表示面積と新たに配置された画像データの表示面積との合計から、重なった部分の面積を減算した面積をＳｉとする。さらに、処理回数のカウンタｉに１を加算する。
【００６３】
そして、これらのステップＳ５０５〜ステップＳ５０９を、同一の画像データに関して、上述した極小となる位置が存在しなくなるまで実行する。そして、この位置が存在しなくなった段階で、ステップＳ５０６からステップＳ５１０に移行する。
【００６４】
ステップＳ５１０においては、複数の位置Ｐｉにおいて、ステップＳ５０９において示す表示総面積Ｓｉが最小値となる位置を算出する。そして、この最小値となる位置Ｐｉに該当の画像データを配置した場合の表示総面積Ｓｉを、総面積Ｓｕｍとする。
【００６５】
次に、ステップＳ５１１に移行して、位置Ｐｉに位置が確定した新たな画像データを、すでに配置されている画像データに対して最も背面側（下側）に表示する。その後、ステップＳ５１２に移行して、処理枚数のカウンタＮに１を加算した後、ステップＳ５１３に移行して、Ｎ枚目の表示対象となる画像データが存在しているか否かの判定が実行される。
【００６６】
この画像データが存在していた場合には、ステップＳ５０４に移行して、ステップＳ５０４からステップＳ５１３をそれぞれ処理に従って繰り返し実行する。そして、この表示対象画像データが存在しなくなった段階で、この表示処理の制御が終了する。
【００６７】
また、図８に、上述した処理手順に従って配置される画像データの表示画面上の様子を模式的に示す。図８Ａに、配置される画像データに設定された保護領域を模式的に示す。図８Ｂから図８Ｇに、画像データ(１〜６）が処理手順に従って順に表示される様子を模
式的に示す。なお、以下の説明において、位置、面積に関わる計算は、表示制御の単位長さである画素を単位に行われる。なお、図８においては、数字が書かれた白抜きの部分が保護領域である。
【００６８】
図９Ａに、上述した制御手順によって２７枚の画像データが表示された例を示す。これらの画像データは、この第１の実施形態における全ての画像データであり、２００２年４月から２００３年１０月の期間に撮影され、保存されたデータである。上述したように、表示は、これらの画像データが関連情報としてもつ撮影日時情報のうち、最も新しい撮影日時が基準日時として選ばれ、「日」を単位に表示制御を行ったものである。図９においては、日時情報の新しい画像データから順に表示制御を行ったため、中央に最新の撮影の画像データが、周辺により古い撮影の画像データが配置されている。
【００６９】
また、この第１の実施形態においては、ユーザの操作により基準日時を選択可能に構成
されている。すなわち、図９Ａに示すように、基準日時を選択するために画面表示されるグラフィックとして、画像データの撮影日時の範囲を表す時間軸３０１が表示される。また、軸上に基準日時を調整するスライドバー３０２を表すグラフィックが表示される。これらの表示により、ユーザは、リモコンの左右ボタンの操作によってこのスライドバー３０２を動かすことが可能となる。
【００７０】
また、スライドバー３０２の位置に応じた基準日時を設定することができる。撮影日時の範囲を表す時間軸は、表示制御の対象となる画像データが有する撮影日時情報に応じて調節される。また、軸上の目盛りは、表示制御中において選択された経過時間単位に応じて調節される。図９Ａに示すスライドバー３０２の位置は、表示制御の対象となる画像データが有する撮影日時情報の最新のものが、基準日時に設定されていることを示す。そして、図９Ａには、結果表示制御の対象となる画像データの全てが表示されている状態が示される。
【００７１】
図９Ｂには、ユーザの操作により基準日時が調整され、対象となる画像データの撮影日時の範囲の途中の２００２年１２月に設定された状態を示す。この第１の実施形態において、撮影日時情報が基準日時以前の画像データは、１６枚である。そのため、１６枚の画像データに対して、上述した表示制御の処理手順が実行され改めて表示されている。
【００７２】
基準日時以前の画像データを表示し、それ以降の画像データが表示されないという制御は、上述した表示制御部１１０の動作に含まれている。すなわち、画像データごとに保護領域を設定する処理（図６）においては、基準日時から画像データの撮影日時情報までの経過時間ΔＮが正である画像データだけを表示対象とし（Ｓ４０６）、表示対象となった画像データに対して保護領域を算出している（Ｓ４１４、Ｓ４１５）。また、図７に示す、設定された保護領域に基づく表示処理においても、ステップＳ５０１およびステップＳ５１３において、表示対象となる画像のみを扱うよう判断する処理手順を有する。
【００７３】
以上説明したように、この第１の実施形態においては、多くの枚数の画像データを表示可能とするために、画像データの表示範囲の一部をお互いに重ねて表示する際、このような注目領域を保護領域として、重ねによって隠されないように制御されている。これにより、画像データの表示領域の一部が他の画像データの表示によって隠されたとしても、ユーザが撮影しようとした意図を維持した表示を行うことが可能となる。これにより、ユーザが目的の写真を容易に探し出すことが可能な表示を行うことができる。
【００７４】
すなわち、一般に、ユーザが、複数の焦点位置を有するデジタルカメラを用いて撮影する場合において、ユーザ自身は、重要と考えている部分に焦点が合っていることを確認しながら撮影を行う。そのため、このような撮影された画像データを複数表示してユーザがその表示を理解したり、目的の画像データを探し出したりする場合には、撮影時に重要であると意図した領域、すなわち注目領域が重要な手掛かりとなる。
【００７５】
さらに、このような注目領域を画像データが有する日時情報に応じて、より古い画像データの注目領域をより狭く評価して保護領域として設定することにより、より多くの枚数の画像データを表示することが可能となる。
【００７６】
また、より撮影日時の新しい画像データであるほど手前側になるように表示されるように制御していることにより、より古い画像データは、特徴となる注目領域の表示を認識可能に維持しつつ、次第により新しい画像データの陰に隠されるようになる。こうした表示上の変化は、現実にプリントした多くの写真そのものを古いプリントの上に新しいプリントを次々配置していく状態に近いため、ユーザの操作感としても受容しやすい。この場合においても、注目領域が可能な限り表示されるよう重ねられているため、撮影の意図を維
持し、目的の写真を探しやすいという性質を保持させることができる。
【００７７】
さらに、基準日時を変更し、基準日時より以前の画像データを同様の表示制御によって再表示することによって、基準日時より新しい画像データによって隠されていた部分を、再びより大きく表示することが可能となり、その日時の範囲内の画像データの判別が容易になる。この表示状態は、実際のプリントを積み重ねた状態において、基準日時より新しいプリントを取り除いて、過去の状態を再現する様子に近く、親しみやすい操作感を有する機能としてユーザに提供することができる。
【００７８】
以上説明した、この第１の実施形態においては、基準の日時より以前の画像データを表示する場合について説明したが、基準の日時より新しい画像データのみを表示したり、また、２つの基準日時を設け、これによって定められる期間に含まれる画像データを表示したりするようにしてもよい。これらの場合においても、さらに基準となる日時を用いて注目領域を評価し、表示の目的に即した保護領域を設定して、上述した処理手順に従って表示位置を調整することによって、より多くの画像データを表示しながらも画像データの撮影意図を保存して目的の写真を探しやすい表示が可能となる。
【００７９】
一方、「風景」「人物」といった撮影シーンモードを用いて撮影した場合においても、ユーザにとって実質的に可能性が高い注目領域を定めることが可能である。例えば、風景写真の場合には、風景全体がユーザにとっての「印象」として残っている場合が多く、画像を判別し選択するためには、この部分を見つけられればよい。また、人物写真の場合には、顔部分が撮影の意図である場合が多く、撮影画像の中央領域に顔が配置される場合が多いという傾向がある。
【００８０】
このような注目領域を「重ね」によって隠されないように保護しながら表示することにより、評点位置による注目領域の場合と同様に、ユーザが撮影した際の意図を保ちつつ、表示を行うことが可能になるとともに、目的の写真を容易に索出可能な表示を行うことが可能となる。
【００８１】
また、このような注目領域を画像データが有する日時情報に応じて、より古い画像データの注目領域をより狭く評価して保護領域を設定することにより、撮影の意図を保存し、目的の写真を探し易くなるという性質を保持しつつ、より大量の画像データを表示させることが可能となり、さらに基準日時の変更による親しみやすい操作感を提供することができる。
【００８２】
また、上述した第１の実施形態においては、撮影シーンモードとして、「風景」および「人物」の２種類を例として挙げたが、かならずしもこれらに限定されるものではなく、「夜景」や「マクロ」などの撮影シーンモードを用いる場合においても、撮影シーンの意図を反映した注目領域を設定して、表示を制御することが可能である。
【００８３】
（第２の実施形態）
次に、この発明の第２の実施形態による画像表示装置について説明する。この第２の実施形態においては、注目の程度に分布を有する注目領域情報による画像データの表示制御を行う場合について説明する。なお、以下の第２の実施形態においては、第１の実施形態との相違部分について説明し、第１の実施形態におけると同様の構成については、その説明を省略する。図１０に、この第２の実施形態による画像表示装置の一例としてのデジタルテレビ受信装置４００の構成を示す。
【００８４】
表示制御部４０１は、第１の実施形態による表示制御部１１０と同様に、画像データ入力部１０５に対する画像読込の指示、画像処理部１０６に対する処理実行の指示、ビデオ
メモリ１０７に対する表示データの書き込み、表示合成部１０８に対する合成処理の指示、記憶手段としての記憶部１１３に対する情報の記憶指示を行う。また、評価手段および調整手段としての表示制御部４０１は、ユーザ入力部１１１を介してリモコン１１４からの入力データを取得し、画像データ入力部１０５を介して、デジタル画像データに付与された撮影データの取得を行い、関連情報取得部としても機能する。さらに、この第２の実施形態において、表示制御部４０１は、顔認識部４０２を制御して記憶部１１３に格納された画像データにおける注目領域分布を得て、画像処理部１０６と協働した表示制御部として機能する。
【００８５】
顔認識部４０２は、表示制御部の指示により記憶部１１３に格納された画像データが入力されると、画像データ中に存在する人物の顔領域を検出し、確率分布を有する注目領域情報を出力する。注目領域情報は、画像データの関連情報の一部として記憶部１１３に格納される。
【００８６】
図１１に、顔認識部４０２の機能を示す。図１１Ａに、顔認識部４０２の入力となる画像データの例を示す。顔認識部４０２は、はじめに人物の目、口元といった部分が示す特徴的なパターンを画像データの中から抽出する。次に、目、口元を中心として人の肌色の領域、髪の毛の領域を抽出し、この範囲を顔領域として認識する。そして、この認識によって、認識の確度分布を有する領域情報を出力する。この出力例を図１１Ｂに模式的に示す。なお、図１１Ａに示す画像データは、窓際に位置する人物を撮影したものであり、適度な露出が与えられた顔の中心部から、両目、口元および、これに続く肌部分が高い確率で抽出されている。
【００８７】
しかしながら、画像中の人物の右手が顔の一部にかかる位置にあるため、肌色領域は、本来の顔範囲を超えて広がり、肌色領域の形状は、そのまま顔領域として判定するには、不自然であり、かつ本来の顔領域の境界を判別することが困難である。そのため、人物の右頬部分の顔領域は、次第に確度が低下する分布として認識される。また、人物の髪領域の広がりも、左頭部（図９Ａ中、右側）は、背景の樹木の暗部に溶け込み、また、右頭部（図９Ａ中、左側）は、外光の反射によるハイライトが背景の明部につながっており、確度の分布として認識されている。
【００８８】
この第２の実施形態においては、表示制御部４０１により、顔認識部４０２によって画像データごとに抽出が行われ、関連情報として記憶部１１３に格納される「顔認識の確度分布」を注目領域として、画像ビューア機能における画像表示処理が実行される。
【００８９】
図１２に、表示制御部４０１によって、ビューア機能起動時に実行される注目領域情報付与制御を示す。まず、画像データの枚数のカウンタＮが初期化されて１に設定された後、ステップＳ６０２に移行して、表示制御部４０１により、Ｎ枚目の画像データが顔認識部４０２に転送される。その後、ステップＳ６０３に移行して、顔認識部４０２が制御されて注目領域分析が実行され、いわゆる顔認識処理が実行される。その後、ステップＳ６０４において、顔領域が存在するか否かの判定が行われる。
【００９０】
画像データ中に認識可能な顔領域を抽出された場合には、ステップＳ６０５に移行して、顔認識処理による確度分布を画像データの注目領域情報に設定する。その後、ステップＳ６０７において、累積面積テーブルが作成される。なお、累積面積テーブルとは、画像データの確度分布においてある確度以上の領域の面積を画素数で表現したデータであり、図１３に、この累積面積テーブルの一例を模式的に示す。
【００９１】
他方、画像データ中に認識できる顔領域が存在しない場合には、ステップＳ６０６に移行して、図１４に示すような画像の中央を注目点とした分布を有する標準注目領域情報が設定される。その後、ステップＳ６０７に移行して、確度分布の累積面積テーブルが作成される。その後、ステップＳ６０８に移行して、カウンタＮに１を加算する。そして、ステップＳ６０９において、カウンタＮが画像総数に達するまでステップＳ６０２からステップＳ６０７の処理が繰り返し実行される。
【００９２】
（パラメータ決定制御処理）
次に、表示制御部４０１により、表示対象となる画像データの注目領域を基準日時に応じて評価しつつ、保護領域とした部分が他の画像データの表示領域の下に隠れないように制御するためのパラメータを決定する制御処理について説明する。図１５に、このパラメータ決定制御処理を示す。
【００９３】
すなわち、図１５に示すように、まず、ステップＳ７０１において、表示制御と基準となる日時が設定される。ここでは、第１の実施形態における場合と同様に、表示しようとする画像データが有する日時情報のうちの、最新の日時情報を選択できるとともに、ユーザ操作などにより適切な基準日時を設定することが可能な日時を例とする。
【００９４】
次に、ステップＳ７０２において、基準日時からの経過時間を算出する際の時間単位が選択される。そして、ステップＳ７０３に移行して、表示制御に必要な変数が初期化される。なお、Ｓｕｍは、仮保護領域面積の総和を求める変数、Ｎは、画像データを順に扱うためのカウンタ、ｃは、表示対象となる画像データの枚数のカウンタ、Ｐminは、表示制
御のためのパラメータ、Ｐiは、あらかじめ決定されたパラメータ候補の値である。
【００９５】
そして、ステップＳ７０４において、表示制御部４０１により、Ｎ枚目の画像データに関する関連情報の撮影日時情報と基準日時情報とが比較される。撮影日時が基準日時より以前である場合には、その画像データが表示対象とされる。そして、ステップＳ７０７に移行し、画像データの仮保護領域面積ＳNが算出される。
【００９６】
すなわち、Ｎ枚目の画像データの撮影日時から基準日時からの経過時間ΔNに応じて注
目領域を評価する関数を図１６Ａに示すように定める。この図１６Ａの状態を数式により表すと、式１３のように定められる。
αN＝１−（１―Ｐmin）exp（−ｋΔN）・・・（式１３）
【００９７】
このαＮは、顔領域の確度分布において保護領域として採用する下限となる確度を与えるものであり、Ｐminに与えられるパラメータＰi（＝Ｐ1、Ｐ2・・・）によって、評価程度を調整することができる。ここで、図１５に示す処理手順において、Ｐminは、最初に
比較的小さい値Ｐ1が与えられ、注目領域である顔領域は、広く保護領域として評価され
る。仮保護領域面積ＳNは、画像データに付与された確度分布から確率がαN以上である面積として算出される。また、簡易的には、既に用意されている累積面積テーブル（図１３）によって求めることができる。
【００９８】
次に、ステップＳ７０８において、算出された仮保護領域面積ＳNは仮保護領域面積の
総和Ｓｕｍに加えられる。ステップＳ７０９およびステップＳ７１０を通じて、ひとつのパラメータＰiについての仮保護領域面積の総和Ｓｕｍが算出される。
【００９９】
その後、ステップＳ７１１に移行して、仮保護領域面積の総和Ｓｕｍが重ね効率βを用いて表示総面積Ｓallと比較される。この比較の結果、仮保護領域面積の総和Ｓｕｍが重
ね効率を考慮して表示総面積Ｓallに収まらないと判断された場合、ステップＳ７１２に
移行して、仮保護面積の総和Ｓｕｍ、カウンタＮがそれぞれ初期化され、ｉに１が加算されＰminの値が新たなＰiに変更されて、再度保護領域の評価が実行される。
【０１００】
他方、ステップＳ７１１において、仮保護領域面積の総和Ｓｕｍが重ね効率βを考慮して表示総面積Ｓallに収まると判断された場合、このときのＰiがパラメータＰminの値と
して採用される。その後、ステップＳ７１３において、カウンタＮが初期化された後、第１の実施形態におけるステップＳ４１４からステップＳ４１６と同様の、ステップＳ７１４からステップＳ７１７において、表示対象となる画像データに保護領域が設定される。
【０１０１】
（式１４）は、経過時間ΔＮ時間に対して保護領域として採用する確度の下限を与える（式１３）の他の例であり、図１５Ｂに表す変化を示す。
αN＝１−Ｐmin×exp（−ｋiΔN）・・・（式１４）
【０１０２】
（式１４）を用いた場合、図１５の手順では、ｋiを順に変化させ、基準日時に近い画
像データの保護領域の面積を変化させることなく、保護領域の面積の調整を行うことが可能となる。なお、そのほかの処理手順については、第１の実施形態および上述した手順に従って、同様に動作させることが可能である。
【０１０３】
次に、表示制御部４０１により、注目領域の確度分布から経過時間ΔNに応じて評価さ
れ、設定された保護領域に基づいて、画像データの表示処理が行われる。この表示処理制御は、画像データの保護領域を重ねることなく、複数枚の画像データを効率よく配置して表示することが目的である。
【０１０４】
そのため、既に配置された画像データの表示領域の外縁に新たに配置する画像データの保護領域の外縁を接する位置において、画像データの表示領域が重なる領域においては、新たに配置する画像データの表示が、すでに配置された画像データの表示の下側（より背面側）に重なるように配置されるとともに、新しい配置による表示面積の増分が最小となるように位置が選択されて配置される。換言すると、画像データの表示領域のうち保護領域以外の領域の重ね面積が最も大きくなるような位置を探索して配置する。
【０１０５】
すなわち、第１の実施形態による表示制御処理と同様にして、表示領域の中心から既に配置された画像データの表示領域の外縁までの距離が極小値を示す位置を配置候補位置とし、この位置を中心に保護領域の表示が確保できる位置を探索し、その位置に画像データを配置した場合の総表示面積を算出する。複数の配置候補位置のうちで、表示面積が最も小さい位置が配置位置として決定される。このときの表示処理制御の手順は、図７に示す手順と同様である。この表示処理制御に従って配置された画像データの表示画面上の状態は、図１７に示すように、第１の実施形態におけると同様に、中央部にもっとも前面に配置される画像データが表示され、表示領域の外側になるに従って、下側（より背面側）に配置されつつ、保護領域が表示される状態である。
【０１０６】
また、一般に、人物が撮影された画像データにおいて、一般的に撮影された人物の特徴を捉えることのできる画像領域が見えている状態であれば、その画像データの内容を概ね理解することができる。また、理解に至るまで進まなくとも検索動作における大きな手掛かりとなる。このことは、人物が撮影された画像データの注目領域として顔領域を選択することが、非常に有効であることを示す。
【０１０７】
そこで、この第２の実施形態においては、画像処理によって抽出される画像データ中の顔領域を特徴領域として、抽出の確度分布に基づいて保護領域を定め、一定の表示領域に大量の画像データを表示するために画像データの表示範囲の一部を互いに重ねて表示する際に、このような注目領域を保護領域として、複数の画像データが重ねられることによって、その保護領域が隠されないように制御を実行していることにより、大量に表示された画像データの中から目的の画像を容易に探し出すことができる表示が実行可能となる。
【０１０８】
また、このような注目領域を、画像データの有する日時情報に応じて、より古い画像データの注目領域をより狭く評価する際に、顔認識の抽出確度に応じて評価するようにしていることにより、より特徴を表す確率の高い部分を中心に表示することができるので、表示枚数が増加した場合であっても、探しやすさが低減しにくいと言う利点も有する。
【０１０９】
また、第２の実施形態においては、第１の実施形態と同様に、画面上の操作要素、あるいは、その他の手段によって基準日時を任意に変更し、大量に積み重ねた実際の写真の中から目的のものを探し出すといった、現実の動作に近く親しみやすい操作感をユーザに提供することができる。
【０１１０】
また、この第２の実施形態においては、注目領域を評価する基準として、日時情報を採用する場合を例として説明したが、注目領域を評価して保護領域を定め、この領域に重ならないように表示を制御する、この発明の構成に基づけば、評価の基準を必ずしも日時情報に限定する必要はない。具体的には、例えば、画像の類似度を基準に評価を行うことも可能である。また、この場合においても、より目的に適った、類似度の高い画像を、際だたせて目立つように表示することができるとともに、目的達成のための候補の中で順位の低い画像についても、その必要度に応じて、その応分の面積で、かつ特徴となる部分を保存するように表示することができる。そのため、より多くの枚数の画像データによる実質的に見やすく、探しやすい一覧表示を実現することが可能となる。
【０１１１】
以上、この発明の実施形態について具体的に説明したが、この発明は、上述の実施形態に限定されるものではなく、この発明の技術的思想に基づく各種の変形が可能である。例えば、上述の実施形態において挙げた数値は、あくまでも例に過ぎず、必要に応じてこれと異なる数値を用いてもよい。
【図面の簡単な説明】
【０１１２】
【図１】この発明の第１の実施形態によるデジタルテレビの構成を示すブロック図である。
【図２】この発明の第１の実施形態によるデジタルテレビの操作を行うためのリモコンを示す斜視略線図である。
【図３】この発明の第１の実施形態によるデジタルカメラの撮影時の液晶表示を示す略線図である。
【図４】この発明の第１の実施形態による表示制御を説明するためのフローチャートである。
【図５】この発明の第１の実施形態によるデジタルテレビの注目領域の種類を説明するための略線図である。
【図６】この発明の第１の実施形態による保護領域を決定する処理を説明するためのフローチャートである。
【図７】この発明の第１の実施形態による表示制御を説明するためのフローチャートである。
【図８】この発明の第１の実施形態による画像データの表示画面上の表示状態を示す略線図である。
【図９】この発明の第１の実施形態による画像データの表示状態を示す略線図である。
【図１０】この発明の第２の実施形態によるデジタルテレビの構成を示すブロック図である。
【図１１】この発明の第２の実施形態による顔認識機能を説明するための略線図である。
【図１２】この発明の第２の実施形態による表示制御を説明するためのフローチャートである。
【図１３】この発明の第２の実施形態による累積面積テーブルを模式的に示す表である。
【図１４】この発明の第２の実施形態による標準注目領域情報を示す略線図である。
【図１５】この発明の第２の実施形態による表示制御を説明するためのフローチャートである。
【図１６】この発明の第２の実施形態による表示制御処理における注目領域を評価する関数を示すグラフである。
【図１７】この発明の第２の実施形態による画像データの表示状態を示す略線図である。
【図１８】従来技術による画像の表示状態を示す略線図である。
【符号の説明】
【０１１３】
１００，４００  デジタルテレビ受信装置
１０１  チューナ部
１０２  デマルチプレクサ部
１０３  映像・音声デコーダ
１０４  音声出力部
１０５  画像データ入力部
１０６  画像処理部
１０７  ビデオメモリ
１０８  表示合成部
１０９  カードスロット
１１０  表示制御部
１１１  ユーザ入力部
１１２  表示器
１１３  記憶部
１１４  リモコン
２０１  発光部
２０２  電源キー
２０３  カーソル決定キー
２０４，２０５  アップダウンキー
２０６  数字キー
２０７  カラーキー
２０８  モニターモードキー
２０９  ビューワキー
３０１  時間軸
３０２  スライドバー
４０１  表示制御部
４０２  顔認識部
【図１】
2005202588.tif 000003
【図２】
2005202588.tif 000004
【図３】
2005202588.tif 000005
【図４】
2005202588.tif 000006
【図５】
2005202588.tif 000007
【図６】
2005202588.tif 000008
【図７】
2005202588.tif 000009
【図８】
2005202588.tif 000010
【図９】
2005202588.tif 000011
【図１０】
2005202588.tif 000012
【図１１】
2005202588.tif 000013
【図１２】
2005202588.tif 000014
【図１３】
2005202588.tif 000015
【図１４】
2005202588.tif 000016
【図１５】
2005202588.tif 000017
【図１６】
2005202588.tif 000018
【図１７】
2005202588.tif 000019
【図１８】
2005202588.tif 000020