(57)【要約】【課題】情報処理によって対象物が特定できる場合に、画像から対象物の操作段階を可及的に減らす技術を提供する。【解決手段】所望の選択画像から所望の対象物を自動検出し、それが１つであれば、直ちにその対象物についての詳細情報の入力を受け付けるため、詳細情報を入力したい対象物をユーザが選択画像から自分で選択する必要はなく、画像の選択だけで操作が済み、楽である。なお、選択画像から対象物が複数検出された場合であっても、対象物が検出された画像中から所望の領域を選択すれば対象物が確定し、自分の所望する対象物に関連する詳細情報を入力・登録することができる。【選択図】  図２
2007102543.tif 000002
【特許請求の範囲】
【請求項１】
所望の画像から所望の対象物を選択させるための対象物選択支援方法であって、
複数の画像の中から所望の画像を選択させるステップと、
選択された画像から、所望の対象物を検出するステップと、
検出された対象物が１つの場合、検出された対象物を所望の対象物として自動的に選択するステップと、
検出された対象物が複数の場合、検出された複数の対象物から所望の１つの対象物を選択させるステップと、
を含む対象物選択支援方法。
【請求項２】
所望の画像から所望の対象物を選択させるための対象物選択支援方法であって、
複数の画像の中から所望の画像を選択させるステップと、
選択された画像から、所望の対象物を検出するステップと、
対象物の検出の確からしさを算出するステップと、
検出された対象物が１つの場合、検出された対象物を所望の対象物として自動的に選択するステップと、
検出された対象物が複数の場合、前記複数の対象物の検出の確からしさを前記複数の対象物の各々と対応させて表示し、所望の１つの対象物を選択させるステップと、
を含む対象物選択支援方法。
【請求項３】
所望の画像から所望の対象物を選択させるための対象物選択支援方法であって、
所望の画像群から所望の対象物を検出するステップと、
検出された各対象物の合計の検出回数を算出するステップと、
複数の画像の中から所望の画像を選択させるステップと、
選択された画像から、所望の対象物を検出するステップと、
検出された対象物が１つの場合、検出された対象物を所望の対象物として自動的に選択するステップと、
検出された対象物が複数の場合、前記複数の対象物の各々の検出回数を前記複数の対象物の各々と対応させて表示し、所望の１つの対象物を選択させるステップと、
を含む対象物選択支援方法。
【請求項４】
所望の画像から所望の対象物を選択させるための対象物選択支援方法であって、
複数の画像の中から所望の画像を選択させるステップと、
選択された画像から、所望の対象物を検出するステップと、
検出された対象物が１つの場合、検出された対象物を所望の対象物として自動的に選択するステップと、
検出された対象物が複数の場合、検出された複数の対象物から所望の１つの対象物を選択させるステップと、
をコンピュータに実行させる対象物選択支援プログラム。
【請求項５】
所望の画像から所望の対象物を選択させるための画像処理装置であって、
複数の画像の中から所望の画像を選択させる画像選択部と、
選択された画像から、所望の対象物を検出する対象物検出部と、
検出された対象物が１つの場合、検出された対象物を所望の対象物として自動的に選択し、検出された対象物が複数の場合、検出された複数の対象物から所望の１つの対象物を選択させる対象物選択部と、
を備える画像処理装置。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明はプリント処理などの各種画像処理における対象物選択操作を簡略にする技術に関する。
【背景技術】
【０００２】
従来、画像からユーザ所望の対象物を自動的に選択する技術が様々開発されている。例えば特許文献１によると、磁気記録層を有する現像済みの写真フイルムを画像読取部に給送してフイルム画像を読み取り、この読み取ったフイルム画像を自動再生情報に基づいて順次モニタＴＶに表示させるようにしている。ここで、自動再生情報は、１本のフイルム内の複数のフイルム画像を順次自動的に再生するための情報として予め入力されるが、この自動再生情報の一部として撮影時にカメラによってフイルムの磁気記録層に記録した磁気情報を使用し、これにより自動再生情報の入力の手間を簡略化している。
【０００３】
また、特許文献２によると、画像データに基づいてプリント用紙に画像を形成するプリンタを備えてなる画像プリント作成装置において、画像データに基づいて画像を表示する画像表示手段と、そこに表示された画像からプリント作成すべき画像を選択する画像選択手段（入力装置）を設ける。そして、所与の画像データを画像表示手段に入力させるとともに選択画像に関する画像データのみをプリンタに入力する第１モードと、画像データを画像表示手段に入力させずに全てプリンタに入力する第２モードとを取り得る入力切替手段（制御部）を設け、これら第１モードおよび第２モードのうちの一方を、モード選択手段（入力装置）により択一的に設定させる。
【特許文献１】特開平８−２２８３１１号公報
【特許文献２】特開平１０−２１４００３号公報
【発明の開示】
【発明が解決しようとする課題】
【０００４】
ところで、アルバム作成、ポストカード作成などにおいて、画像中の特定の領域を選択させる場合がある。特にアルバム作成においては、特定の人物を主役にするような画像をプリントするため、画像群から画像を選択し、さらに選択された画像から特定の領域を選択する必要がある。このような処理手順では、画像の選択と、特定領域の選択という２段階の操作を強いるため、ユーザの負担が大きい。
【０００５】
本発明は、人の顔、犬猫などの家畜、車、建造物といった、情報処理によって対象物が特定できる場合に、上記の操作段階を可及的に減らす技術を提供することを目的とする。
【課題を解決するための手段】
【０００６】
上述の課題を解決するため、本発明は、所望の画像から所望の対象物を選択させるための対象物選択支援方法を提供する。この方法は、複数の画像の中から所望の画像を選択させるステップと、選択された画像から、所望の対象物を検出するステップと、検出された対象物が１つの場合、検出された対象物を所望の対象物として自動的に選択するステップと、検出された対象物が複数の場合、検出された複数の対象物から所望の１つの対象物を選択させるステップと、を含む。
【０００７】
この発明によると、対象物が１つだけ検出されれば、その対象物が、プリントやアドレス帳に登録する所望の対象物として自動的に選択される。このため、ユーザがわざわざ対象物を手動選択する必要がない。なお、対象物が複数検出されれば、ユーザが自分で対象物を選択することができる。
【０００８】
また、本発明の対象物選択支援方法は、複数の画像の中から所望の画像を選択させるステップと、選択された画像から、所望の対象物を検出するステップと、対象物の検出の確からしさを算出するステップと、検出された対象物が１つの場合、検出された対象物を所望の対象物として自動的に選択するステップと、検出された対象物が複数の場合、複数の対象物の検出の確からしさを複数の対象物の各々と対応させて表示し、所望の１つの対象物を選択させるステップと、を含む。
【０００９】
この発明によると、対象物が１つだけ検出されれば、その対象物が、プリントやアドレス帳に登録する所望の対象物として自動的に選択される。このため、ユーザがわざわざ対象物を手動選択する必要がない。一方、対象物が複数検出されれば、その検出の確からしさが合わせて表示される。ユーザは、各対象物の検出の確からしさを参照しながら自分が選びたい対象物を楽に選択することができる。
【００１０】
また、本発明の対象物選択支援方法は、所望の画像群から所望の対象物を検出するステップと、検出された各対象物の合計の検出回数を算出するステップと、複数の画像の中から所望の画像を選択させるステップと、選択された画像から、所望の対象物を検出するステップと、検出された対象物が１つの場合、検出された対象物を所望の対象物として自動的に選択するステップと、検出された対象物が複数の場合、複数の対象物の各々の検出回数を複数の対象物の各々と対応させて表示し、所望の１つの対象物を選択させるステップと、を含む。
【００１１】
この発明によると、予め所望の画像群から、対象物の検出を行い、各対象物の検出回数をカウントしておく。その後、所望の画像から対象物が１つだけ検出されれば、その対象物が、プリントやアドレス帳に登録する所望の対象物として自動的に選択される。一方、対象物が複数検出されれば、その対象物の検出回数が合わせて表示される。ユーザは、各対象物の検出回数を参照しながら主役にすべき対象物を楽に選択することができる。
【００１２】
本発明に係る対象物選択支援プログラムは、上述の対象物支援方法をコンピュータに実行させる。
【００１３】
本発明に係る画像処理装置は、所望の画像から所望の対象物を選択させるための画像処理装置であって、複数の画像の中から所望の画像を選択させる画像選択部と、選択された画像から、所望の対象物を検出する対象物検出部と、検出された対象物が１つの場合、検出された対象物を所望の対象物として自動的に選択し、検出された対象物が複数の場合、検出された複数の対象物から所望の１つの対象物を選択させる対象物選択部と、を備える。
【００１４】
なお、画像処理装置は、パソコン、デジタルカメラ、携帯電話機、店頭プリント端末などの各種電子機器で構成できる。上述の対象物支援方法は、これらの各種電子機器で実施できる。また、上述の対象物選択支援プログラムは、これらの各種電子機器で実行できる。
【発明の効果】
【００１５】
この発明によると、対象物が１つだけ検出されれば、プリントやアドレス帳に登録する所望の対象物として自動的に選択される。このため、ユーザがわざわざ対象物を手動選択する必要がない。なお、対象物が複数検出されれば、ユーザが自分で対象物を選択することができる。
【発明を実施するための最良の形態】
【００１６】
以下、添付した図面を参照し本発明の好ましい実施の形態を説明する。
【００１７】
図１は本発明の好ましい実施形態に係る画像処理装置１のブロック構成図である。画像処理装置１は、中央演算処理装置（ＣＰＵ）１０と、各種操作を受け付けるキーボードやマウスなどの操作部１２と、液晶ディスプレイなどの表示部１３と、画像データやＣＰＵ１０の実行するプログラムなどを一時的に記憶するＲＡＭなどのメモリ１４と、ハードディスクユニットやＲＯＭなどの不揮発性記憶媒体１５とを備えている。
【００１８】
また、画像処理装置１には、ＳＤカード、メモリスティック、ＣＤ−Ｒ、ＤＶＤなどの各種の可搬性記録媒体４のデータ読み取り及び記録を行うメディアリーダ／ライタ（ＲＷ）１６が接続されている。
【００１９】
メモリ１４の画像データは、図示しないデジタルカメラからＵＳＢポートなどを介して入力してもよい。あるいは、銀塩プリント写真やネガ・ポジフィルムをスキャナでスキャンして画像データへ変換し、メモリ１４にこの画像データを入力する態様も可能である。
【００２０】
画像処理装置１は各ユーザが個人的に使用するデジタルカメラ、携帯電話、ＰＤＡ、パソコンや、不特定多数のユーザが使用する店頭プリント端末などの各種電子機器で構成可能である。無論、図１の構成はあくまで例示であり、電子機器の種類に応じて、その具体構成は様々変化しうるが、本発明は情報機器のハードウェア構成とは無関係である。
【００２１】
以下、図２のフローチャートに基づき、ＣＰＵ１０の実行する対象物選択支援処理の流れを説明する。この処理は、記憶部１４に保存された画像の中から所望の画像の所望の領域を選択させるアプリケーション（例えば、プリント注文ソフトや、携帯電話のアドレス帳登録機能）で実行される。
【００２２】
Ｓ１では、図３に示すような主人公情報作成画面を表示部１３に表示する。そして、この画面を介して、所望の対象物（被写体）である主人公に関するデータ（主人公情報）の新規作成を開始する指示を、有限回数の主人公情報に対応する「作成ボタン」Ｂ１の押下により受け付ける。
【００２３】
Ｓ２では、図４に示すような画像選択画面を表示部１３に表示する。この画面を介して、ユーザ所望の対象物が含まれている画像の選択を、画像選択枠Ｆ１を任意の画像に移動して設定することにより受け付ける。この図では一例として下部真中の画像が選択されている。このステップで選択された画像を選択画像と表す。
【００２４】
Ｓ３では、選択画像から対象物の検出処理を行う。対象物は人物の顔、あるいは犬猫などの家畜、建造物、構造物、動産など、情報処理によって検出可能なものであれば特に限定されない。
【００２５】
例えば、選択画像から人物の顔を検出する場合は、以下のようにする。すなわち、ＣＰＵ１０は、選択画像上に目、鼻および口などの顔器官の特徴点を配置し、各特徴点において解像度と方位とを変化させたＧａｂｏｒフィルタを畳み込むことにより、その特徴点周辺における濃淡特徴の周期性と方向性とを特徴量として取り出し、その特徴点間の空間的位置情報と、各特徴点の特徴量とを統合して弾性的な位置関係を持つ顔グラフを生成し、顔グラフを用いて顔の位置を検出し、さらに顔器官の特徴点を検出し、その類似度を、予めＨＤＤ１５に登録してある参照用画像の特徴量と比較することにより、選択画像から、人物の顔が検出された否かの判断を行う。
【００２６】
Ｓ４では、選択画像から検出された対象物が複数存在するかあるいは１つだけ存在するかを判断する。複数存在すると判断した場合はＳ５に移行し、１つだけ存在する場合はＳ６に移行する。
【００２７】
Ｓ５では、図５に示す領域選択画面を表示部１３に表示する。この画面では、対象物を囲む範囲選択枠Ｆ２が表示されており、操作部１２の操作に従い、この画面上で、範囲選択枠Ｆ２を選択画像中の任意の位置に移動することで、所望の１つの対象物を選択させる。枠Ｆ２で対象物が確定されれば、後は、枠Ｆ２で囲まれる部分をトリミングしてプリントしたり、あるいはアドレス帳に登録するなど、様々な用い方が可能である。
【００２８】
Ｓ６では、図６に示すように、Ｓ３で検出された１つの対象物、あるいはＳ５の範囲選択枠Ｆ２で囲まれた対象物Ｉを表示し、かつ対象物Ｉに関する詳細情報をリストボックスＢ２に入力させる画面を表示する。この画面で入力される情報は、対象物Ｉの名称や説明、生年月日、電話番号、電子メールアドレス、住所など、対象物Ｉに関する情報であれば何でもよい。入力が完了して確認ボタンＢ３が押下されると、Ｓ７に移行する。
【００２９】
Ｓ７では、図７に示すように、入力された詳細情報を確認表示する主人公情報確認画面を表示する。この画面に表示された詳細情報が間違いなければ、新規保存ボタンＢ６が押下されることで詳細情報と選択画像とが対応づけられて不揮発性記憶媒体１５に記憶される。すでに存在している詳細情報を上書きしたい場合は、「上書き保存ボタン」Ｂ７を押下すると、詳細情報と選択画像とが対応づけられて不揮発性記憶媒体１５に上書き記憶される。なお、引き続き主人公情報を作成したい場合、「作成ボタン」Ｂ８を押下することで、Ｓ１以下の処理が続行する。
【００３０】
以上説明した通り、本実施形態に係る画像処理装置では、所望の選択画像から所望の対象物を自動検出し、それが１つであれば、直ちにその対象物についての詳細情報の入力を受け付けるため、詳細情報を入力したい対象物をユーザが選択画像から自分で選択する必要はなく、画像の選択だけで操作が済み、楽である。なお、選択画像から対象物が複数検出された場合であっても、対象物が検出された画像中から所望の領域を選択すれば対象物が確定し、自分の所望する対象物に関連する詳細情報を入力・登録することができる。
【００３１】
＜第２実施形態＞
予め登録しておいた対象物の検出の精度は、画像の状態によってばらつく可能性が高い。このため、対象物の検出精度をリストアップすると、所望の対象物を選択する際に便利である。
【００３２】
図８は第２実施形態に係る対象物選択支援処理の流れを示すフローチャートである。
【００３３】
この処理は、Ｓ１１〜Ｓ１７のステップからなるが、Ｓ１５を除いては、第１実施形態のＳ１〜Ｓ７と同様であるため詳細は省略する。
【００３４】
Ｓ１５では、図９に示すように、予め登録された対象物の検出の確からしさを示す指標（ここでは確からしさをパーセンテージ化し「検出率」として表示）を算出した上、この指標を検出された対象物と対応づけて表示する。確からしさの算出の仕方は様々なものがあるが、例えば特許公開２００５−１９６２５２の段落００３０および図７に記載の計算式で算出することができる。
【００３５】
ユーザは、この指標を参照すれば、どの辺りにどれだけの確からしさの対象物が存在しているかを把握できるため、対象物の選択に要する労力が軽減される。
【００３６】
＜第３実施形態＞
複数の画像に渡ってある対象物が写っているような場合は、その対象物がユーザ所望の対象物である蓋然性が高い（例えば、複数カットに渡って撮影された特定のモデルなど）。このため、予めユーザが任意に選択した画像群から各対象物の検出回数をカウントしておき、その後、ユーザが任意に選んだ選択画像から複数の対象物が検出された場合は、対象物ごとに個別にカウントされた検出回数を各対象物と対応づけて表示してもよい。
【００３７】
図１０は第３実施形態に係る対象物選択支援処理の流れを示すフローチャートである。
【００３８】
Ｓ２１〜Ｓ２３では、ユーザに、対象物が写っているような画像群（対象画像群）を予め選択させ（Ｓ２１）、選ばれた対象画像群の各々から対象物を検出し（Ｓ２２）、それぞれの参照用画像から検出された同一の対象物の検出回数の総計をカウントしてメモリ１４に記憶する。なお、対象画像群はＳ３２の選択画像と異なっていても重複していてもよい。
【００３９】
図１１は、メモリ１４に記憶された対象物ごとの検出回数の総数の一例を概念的に示している。
【００４０】
以下、この処理はＳ３１〜Ｓ３７のステップを実行するが、Ｓ３５を除いては、第１実施形態のＳ１〜Ｓ７と同様であるため詳細は省略する。
【００４１】
Ｓ３５では、図１２に示すように、カウントされた各対象物の検出回数を、対象物と対応づけて表示する。
【００４２】
ユーザは、この検出回数を参照すれば、事前情報がなくても、だいたいどの対象物が主人公であるかを把握できるため、対象物の選択に要する労力が軽減される。
【図面の簡単な説明】
【００４３】
【図１】本発明の好ましい実施形態に係る画像処理装置の概略構成図
【図２】第１実施形態に係る対象物選択支援処理の流れを示すフローチャート
【図３】主人公情報作成画面の一例を示す図
【図４】画像選択画面の一例を示す図
【図５】領域選択画面の一例を示す図
【図６】主人公詳細情報入力画面の一例を示す図
【図７】主人公情報確認画面の一例を示す図
【図８】第２実施形態に係る対象物選択支援処理の流れを示すフローチャート
【図９】対象物とその検出率を表示した選択画面の図
【図１０】第３実施形態に係る対象物選択支援処理の流れを示すフローチャート
【図１１】対象物ごとの検出回数の一例を示す図
【図１２】対象物とその検出回数を表示した選択画面の図
【符号の説明】
【００４４】
４：可搬性記憶媒体、１０：ＣＰＵ、１２：操作部、１３：表示部、１４：メモリ、１５：不揮発性記憶媒体、１６：メディアリーダ
【図１】
2007102543.tif 000003
【図２】
2007102543.tif 000004
【図３】
2007102543.tif 000005
【図４】
2007102543.tif 000006
【図５】
2007102543.tif 000007
【図６】
2007102543.tif 000008
【図７】
2007102543.tif 000009
【図８】
2007102543.tif 000010
【図９】
2007102543.tif 000011
【図１０】
2007102543.tif 000012
【図１１】
2007102543.tif 000013
【図１２】
2007102543.tif 000014