(57)【要約】画像において少なくとも１つの関心のある領域がステップ２０１で決定される。画像のサイズは、ステップ２０７で目標とする画像のサイズに変更される。少なくとも１つの関心のある領域が決定された場合、画像は、ステップ２０５で少なくとも１つの関心のある領域のそれぞれに切り取られ、切り取られた少なくとも１つの関心のある領域のサイズは、目標とする画像のサイズに変更される。サイズが変更された画像と、サイズが変更された切り取られた少なくとも１つの関心のある領域は、ステップ２０９で表示のために記憶される。
2013501993.tif 000002
【特許請求の範囲】
【請求項１】
表示用の画像を供給する方法であって、
当該方法は、
画像において少なくとも１つの関心のある領域を決定するステップと、
前記画像のサイズを目標とする画像のサイズに変更するステップと、
前記少なくとも１つの関心のある領域が決定された場合、前記画像を前記少なくとも１つの関心のある領域のそれぞれに切り取るステップと、
切り取られた少なくとも１つの関心のある領域を前記目標とする画像のサイズに変更するステップと、
サイズが変更された画像と、サイズが変更された前記切り取られた少なくとも１つの関心のある領域を表示のために記憶するステップと、
を含むことを特徴とする方法。
【請求項２】
前記画像のサイズを目標とする画像のサイズに変更する前記ステップは、
前記目標とする画像のサイズ及びアスペクト比を決定するステップと、
前記画像のサイズ及びアスペクト比を決定するステップと、
前記目標とする画像の決定されたサイズと前記画像の決定されたサイズとから、スケーリングファクタを決定するステップと、
決定されたスケーリングファクタに従って前記画像のサイズを変更するステップと、
を含む請求項１記載の方法。
【請求項３】
前記切り取られた少なくとも１つの関心のある領域のサイズを前記目標とする画像のサイズに変更するステップは、
前記切り取られた少なくとも１つの関心のある領域のサイズ及びアスペクト比を決定するステップと、
前記目標とする画像の決定されたサイズと前記切り取られた少なくとも１つの関心のある領域の決定されたサイズとから、スケーリングファクタを決定するステップと、
前記切り取られた少なくとも１つの関心のある領域の決定されたアスペクト比を維持すると共に、前記決定されたスケーリングファクタに従って前記切り取られた少なくとも１つの関心のある領域のサイズを変更するステップと、
を含む請求項２記載の方法。
【請求項４】
前記決定されたアスペクト比を維持すると共に、前記決定されたスケーリングファクタに従って前記切り取られた少なくとも１つの関心のある領域のサイズを変更する前記ステップは、
前記切り取られた少なくとも１つの関心のある領域の外側にある前記画像の少なくとも１部を含むように、前記切り取られた少なくとも１つの関心のある領域を拡大するステップと、拡大された少なくとも１つの関心のある領域は、前記画像の前記決定されたアスペクト比に対応するアスペクト比を有し、
前記画像を拡大された少なくとも１つの関心のある領域に切り取るステップと、
切り取られた拡大された少なくとも１つの関心のある領域のサイズを前記目標とする画像のサイズに変更するステップと、
を含む請求項３記載の方法。
【請求項５】
記憶されたサイズが変更された画像、又は、記憶されたサイズが変更された切り取られた少なくとも１つの関心のある領域を選択するステップを更に含む、
請求項１記載の方法。
【請求項６】
選択された、記憶された画像を表示するステップを更に含む、
請求項５記載の方法。
【請求項７】
画像において少なくとも１つの関心のある領域を決定する前記ステップは、画像において少なくとも１つの関心のある領域を自動的に検出するステップを含む、
請求項１記載の方法。
【請求項８】
前記画像を前記少なくとも１つの関心のある領域のそれぞれに切り取るステップは、
前記検出された少なくとも１つの関心のある領域の外側にある前記画像の一部を含むように、前記検出された少なくとも１つの関心のある領域を拡大するステップと、
拡大された少なくとも１つの関心のある領域に前記画像を切り取るステップと、
を含む請求項７記載の方法。
【請求項９】
画像において少なくとも１つの関心のある領域を決定するステップは、
画像における少なくとも１つの関心のある領域を手動で定義するステップを含む、
請求項１記載の方法。
【請求項１０】
請求項１乃至９の何れか記載の方法を実行する複数のプログラムコードを含むコンピュータプログラム。
【請求項１１】
表示用の画像を供給する装置であって、
当該装置は、
画像において少なくとも１つの関心のある領域を決定する決定手段と、
前記画像のサイズを目標とする画像のサイズに変更し、少なくとも１つの関心のある領域が決定された場合、前記画像を前記少なくとも１つの関心のある領域に切り取り、切り取られた少なくとも１つの関心のある画像のサイズを前記目標とする画像のサイズに変更するプロセッサと、
サイズが変更された画像と、サイズが変更された切り取られた少なくとも１つの関心のある領域とを表示のために記憶する記憶手段と、
を備えることを特徴とする装置。
【請求項１２】
記憶された画像を表示するディスプレイを更に備える、
請求項１１記載の装置。
【請求項１３】
前記決定手段は、画像において少なくとも１つの関心のある領域を自動的に検出する検出器を含む、
請求項１１記載の装置。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、表示用の画像を供給する方法及び装置に関する。より詳細には、本発明は、ある画像のサイズを表示用の目標とする画像のサイズに変更することに関する。
【背景技術】
【０００２】
近年、毎日のデジタル画像のユーザの捕捉の量における急増を見ている。  
従来、ユーザは、特定のイベントの間にのみ画像を捕捉し、これらの画像を現像することは費用がかかるために画像の合成に関して慎重であったが、デジタルフォトカメラ及び増加する記憶容量は、行動における劇的な変化を導いている。ユーザは同じ被写体の複数の画像を捕捉することは一般的であり、数百又は更に数千の画像を捕捉して休日から家に戻ることはまれである。
【０００３】
これらの画像の解像度、及び従って記憶装置に占める物理的なサイズは、十分に増加しているが、これらの画像（例えばデジタルフォトフレーム）を表示するために使用される優先度の高い装置の記憶空間は制限される。さらに、ユーザは特定の写真をユーザの家族及び友人と共有するために帯域幅が制限された手段を使用するか、又はシンプルにインターネットのブログ又はソーシャルウェブサイトにそれらを掲示することがある。従って、記憶装置を占めているこれらの画像の物理的なサイズを低減することが望まれる。
【０００４】
これは、それらの内部メモリにアップロードされる画像のサイズを自動的に変更することで部分的に克服される。このサイズの変更処理は、例えばフォトフレームの表示サイズといった、目標とする画像のサイズに従う画像のサイズを最適化することと、装置で少ない記憶容量を利用することで、より多くの画像が記憶されるのを可能にする利点を有する。このサイズの変更ステップは、それぞれの画像を表示する直前に行われ、すなわち画像はその完全な解像度で記憶され、レンダリングされる直前に目標とする画像のサイズに適合するようにサイズ変更されるが、これは、より少ない画像が装置に記憶され、表示されるそれぞれの画像について同じプロセスを繰り返す更なる計算上のリソースを利用する結果となる。
【０００５】
この自動的なサイズ変更ステップは、これら２つの側面について有利であるが、ユーザが例えば顔といった画像の関心のあるエレメントで「ズームイン」するのを望む場合、それらの領域の品質は、画像が前にダウンサイズされているために非常に低い。代わりに「ズームイン」が原画像に行われる場合、品質は一般に非常に優れている。顔はユーザにより捕捉された写真において最も重要なエレメントであることがあるので、それらの品質は、表示されたときに最大可能なまでに保持されることが基本である。
【０００６】
さらに、表示サイズは比較的小さく、これらのフレームはテーブル又はクローゼットの上に典型的に位置されるか、又は壁にシンプルに掛かっているので、ユーザの視界からかなり離れている。さらに、例えば家族、友人又は最愛の人の顔といった、大部分の画像の所定の部分のみが表示するために関心がある。離れて表示されたとき、これらの関心のある領域は、余りに小さく、これらの装置に表示されたときに評価することができない。顔検出は、顔を含む画像における領域を決定するための公知の技術である。従って、顔検出は、係る画像の最も関心のある部分のサイズを変更して、できるだけ多くの表示サイズを占めることができるように、顔を含んでいる画像における領域を自動的に判定するために使用される。
【０００７】
顔検出は、ある顔の主要な特徴を含む画像における領域について良好な結果を与える。これは、目、鼻及び口により決定された領域である。髪のような部分は、人間の間に余りに異なるので特徴のあるものではない。
【０００８】
１つの公知の技術は、顔検出器の結果を使用して、検出器によりリターンされる領域に画像をシンプルにトリミングすることである。これにより、顔の主要な特徴を含む画像の部分を正確に供給することになる。しかし、これは、心地よい見た体験を与えるために必要とされる、顔を取り巻く環境の必要な要素と同様に全体の顔を表示することができないので、殆ど魅力的なものではない。
【０００９】
WO  2008/025969は、画像の関心のある領域がトリミングされ、顔のような関心のある領域のサイズが変更されるように、例えば画像をトリミングしてサイズ変更する様々な技術を開示している。しかし、この技術は、原画像のアスペクト比を維持するものではなく、従って顔の歪が生じ、これは顔にとって特に望まれない。さらに、ユーザには、原画像を表示するか又は関心のあるエレメントを表示するオプションが与えられない。
【発明の概要】
【発明が解決しようとする課題】
【００１０】
本発明の目的は、記憶の要件を最小化しつつ、最大の品質が保証される表示用の画像（又は画像の一部）を供給することにある。
【課題を解決するための手段】
【００１１】
上記課題は、本発明の１態様によれば、表示用の画像を供給する方法により解決されるものであり、本方法は、ある画像における少なくとも１つの関心のある画像を決定するステップ、前記画像のサイズを目標とするサイズに変更するステップ、関心のある領域が決定された場合、画像を少なくとも１つの関心のある領域のそれぞれにトリミングするステップ、トリミングされた少なくとも１つの関心のある領域のサイズを目標とする画像のサイズに変更するステップ、サイズが変更された画像及びサイズが変更されたトリミングされた少なくとも１つの関心のある領域を表示のために記憶するステップを含む。
【００１２】
また、上記課題は、本発明の第二の態様によれば、表示用の画像を供給する装置により達成されるものであり、本装置は、ある画像における少なくとも１つの関心のある領域を決定する決定手段、前記画像のサイズを目標とする画像のサイズに変更し、少なくとも１つの関心のある領域が決定された場合、前記画像を少なくとも１つの関心のある領域のそれぞれにトリミングし、トリミングされた少なくとも１つの領域のサイズを目標とする画像のサイズに変更するプロセッサ、サイズが変更された画像及びサイズが変更されたトリミングされた少なくとも１つの関心のある領域を表示のために記憶する記憶手段を備える。
【００１３】
このように、サイズが変更された画像及びサイズが変更された関心のある領域の両者が表示のために記憶される。関心のある領域のサイズは原画像のサイズから変更されるので、記憶の要件を低減すると共に、サイズが変更された画像又はサイズが変更された関心のある領域のいずれかが表示されるのを可能にしつつ、画像の品質は維持される。これら２つの画像を互いにリンクすることで、ユーザは、２つの記憶された画像のうちの１つを容易に選択することができる。
【００１４】
実施の形態では、画像のサイズを目標とする画像のサイズに変更するステップは、目標とする画像のサイズ及びアスペクト比を決定するステップ、画像のサイズ及びアスペクト比を決定するステップ、目標とする画像の決定されたサイズ及び画像の決定されたサイズからスケーリングファクタを決定するステップ、及び決定されたスケーリングファクタに従って画像のサイズを変更するステップを含む。さらに、トリミングされた少なくとも１つの関心のある領域のサイズを目標とする画像のサイズに変更するステップは、トリミングされた少なくとも１つの関心のある画像のサイズ及びアスペクト比を決定するステップと、目標とする画像の決定されたサイズ及びトリミングされた少なくとも１つの関心のある領域の決定されたサイズとからスケーリングファクタを決定するステップ、トリミングされた少なくとも１つの関心のある領域の決定されたアスペクト比を維持しつつ、決定されたスケーリングファクタに従ってトリミングされた少なくとも１つの関心のある領域のサイズを変更するステップを含む。さらに、決定されたアスペクト比を維持しつつ、決定されたスケーリングファクタに従ってトリミングされた少なくとも１つの関心のある領域のサイズを変更するステップは、拡大された少なくとも１つの関心のある領域が画像の決定されたアスペクト比に対応するアスペクト比を有するように、トリミングされた少なくとも１つの関心のある領域を拡大して、トリミングされた少なくとも１つの関心のある領域の外側に少なくとも画像の一部を含ませるステップ、画像を拡大された少なくとも１つの関心のある領域にトリミングするステップ、トリミングされた拡大された少なくとも１つの関心のある領域のサイズを目標とする画像のサイズに変更するステップを含む。
【００１５】
このように、画像及び少なくとも１つの関心のある領域の両方のアスペクト比は、サイズ変更するときに保持され、画像の歪が除かれる。
【００１６】
実施の形態では、ある画像における少なくとも１つの関心のある画像を決定するステップは、ある画像における少なくとも１つの関心のある領域を自動的に検出するステップ、画像を少なくとも１つの関心のある領域のそれぞれにトリミングするステップは、検出された少なくとも１つの関心のある領域を拡大して、検出された少なくとも１つの関心のある領域の外側に画像の一部を含ませるステップ、画像を拡大された少なくとも１つの関心のある領域にトリミングするステップを含む。代替的に、ある画像における少なくとも１つの関心のある領域は、ある画像における少なくとも１つの関心のある領域を手動的に定義することで決定される。
【００１７】
少なくとも１つの関心のある領域が例えば顔検出器により自動的に検出される場合、少なくとも１つの関心のある領域は、顔を取り囲んでいる環境のエレメントと同様に全体の顔を含むように拡大することができ、見る体験を改善する。
【００１８】
これは、画像を（例えばフォトフレームといった）装置にアップロードする間、それらの画像においてどれが関心のあるエレメントであるか、従ってユーザが「クローズアップ」して見ることを望む可能性が高いエレメントであるかを検出することで達成される。これらのエレメントが検出された場合、写真の２つのコピーが記憶され、ａ）ディスプレイのサイズに適合するようにサイズが変更され、ｂ）原画像が関心のある領域の位置にトリミングされた場合、ディスプレイのサイズに適合するようにダウンサイジングされる。代替的な実施の形態として、原画像の関心のある領域の選択は、ユーザにより手動的に選択することができる。
【００１９】
画像を表示する間、ユーザが全体の画像を見ることを望む場合、第一の画像（ａ）が表示のために選択され、代わりにユーザが関心のあるエレメントのみを見ることを好む場合、第二の画像（ｂ）が表示のために選択される。
【図面の簡単な説明】
【００２０】
本発明の更に完全な理解のため、添付図面と共に行われる以下の説明が参照される。
【図１】本発明の実施の形態に係る表示用の画像を供給する装置の簡略化された概念図である。
【図２】本発明の実施の形態に係る表示用の画像を供給する方法のフローチャートである。
【図３】図１の装置の記憶手段の簡略化された概念図である。
【発明を実施するための形態】
【００２１】
図１を参照して、実施の形態の装置１００は、決定手段１０３の入力に接続される入力端子１０１を有する。決定手段１０３の出力は、プロセッサ１０５の入力に接続される。また、入力端子１０１は、プロセッサ１０５の入力に接続される。プロセッサ１０５の出力は、記憶手段１０７に接続される。記憶手段１０７は、装置１００の出力端子１０９に接続される。
【００２２】
記憶手段１０７は装置１００の内部にあるものとして本実施の形態では例示されているが、代替的な実施の形態では、記憶手段１０７は、装置の外部にある場合がある。記憶手段１０７は、ROM/RAMドライブ、CD、カメラのメモリ装置、デジタルフォトフレーム、又は装置１００又はリモートサーバに接続される装置のような、コンピュータシステムのメモリ装置である。この記憶手段は、有線又は無線接続を介してアクセスされ、及び／又はインターネットのような広域ネットワークを介してアクセスされる場合がある。記憶手段１０７は、複数の画像を表示のために記憶する。例えばリモートサーバに記憶される画像は、装置１００の記憶手段１０７にアップロードされ、一時的に記憶される。
【００２３】
出力端子は、記憶手段１０７の画像をレンダリングするディスプレイに接続される。ディスプレイは、装置１００の統合された部分（ここでは図示せず）である場合がある。
【００２４】
図１の装置の動作は、図２を参照して記載される。  
外部の記憶手段（ここでは図示せず）から画像が検索され、入力端子１０１を介して決定手段１０３に入力される。ステップ２０７で、画像のサイズは目標とする画像のサイズに変更され、例えば画像のサイズは、プロセッサ１０５によりディスプレイに適合するように変更される。常に画像はダウンサイジングされる。これは、画像の解像度は、フォトフレームのディスプレイの解像度よりも一般的に非常に高いためである。サイズが変更された画像は、従来のフォトフレーム装置で現在行われているように、ステップ２０９で記憶手段に記憶される。
【００２５】
並行して、ステップ２０１で、決定手段１０３により、画像の少なくとも１つの関心のある領域が決定される。決定手段１０３は、例えば既存の最新の顔検出アルゴリズムを使用して１以上の顔の位置を自動的に検出する検出器を含むか、代替的に、ユーザは、関心のある画像の領域を手動で指定することができる。ステップ２０３で、原画像は、その領域にトリミングされ、結果として得られる画像のサイズは、ステップ２０５で、（例えば）プロセッサ１０５によりフォトフレームのディスプレイに適合するように、目標とする画像のサイズに変更される。
【００２６】
このサイズ変更ステップ２０５は、任意であり、ステップ２０３のトリミングの結果に依存する場合があり、結果として得られるトリミングされた画像がフォトフレームの寸法に正確に適合する場合、サイズ変更は必要されない。さもなければ、トリミングされた画像がフォトフレームのディスプレイの解像度よりも小さい場合、画像はアップサイジングされ、トリミングされた画像がフォトフレームディスプレイの解像度よりもなお大きい場合、画像はダウンサイジングされる。
【００２７】
このステップの後、ステップ２０９で、トリミング／サイズ変更された画像の関心のある領域は記憶手段１０７に記憶される。
【００２８】
画像を表示するとき、どの画像を採用すべきかに関する選択は、ディスプレイのオプションに依存する。図３を参照して、ユーザが全体の画像を見るのを望む場合、ダウンサイジングされた画像が使用される。これは、記憶手段３０１（図１の記憶手段１０７）の第一の出力端子３０３に接続し、全体の画像を選択して（ステップ２１１）ディスプレイ３０９に全体の画像を表示する（ステップ２１３）セレクタ３０７により達成される。代替的に、ユーザが関心のある領域のみを見ることを望む場合、トリミング／サイズ変更された画像が代わりに使用される。これは、記憶手段３０１の第二の出力端子３０５に接続し、画像の関心のある領域のトリミング／サイズ変更された領域を選択して（ステップ２１１）ディスプレイ３０９に関心のある領域を表示する（ステップ２１３）セレクタ３０７により達成される。
【００２９】
上述される方法はデジタルフォトフレームで適用されるが、同じ方法はインターネットフォトシェアリングサービス、写真が添付される電子メールサービス等で適用することができることを理解することができる。関心のある領域の自動的に検出すること、従って適切なトリミング領域を決定することにおいて、幾つかの項目が重要となる。
【００３０】
考慮される第一の項目は、最小のサイズである。目標とする応用の解像度に基づいて顔をトリミングした後、顔は、寸法に実際に適合するようにダウンスケールすることができる。従って、顔の最小のサイズが課され、その顔がフォトフレームで表示されたときにクリアであるように十分に大きいことが保証されるか、又は顔がフォトフレームで表示されたときにクリアとなるようにダウンスケーリングすることが保証される。例えば、フレームの小さい辺の少なくとも４分の１である顔を考える。顔が800×600の解像度を有する場合、顔の幅／高さは少なくとも150となる。
【００３１】
考慮される第二の項目は、領域の拡大である。顔の特徴が目、鼻及び口を含む場合、全体の顔に少しのその周囲の環境を加えたものが含まれることを保証するために、領域が有意に拡大される。例えば顔を囲んでいる４つの全ての辺を延ばすことができる。例えば顔の特徴が300×300の領域をカバーする場合、関心のある領域は900×900となり、４つの辺のそれぞれを300画素だけ延ばすことで作成される。しかし、例えば顔が画像のエッジに位置される場合、拡大が画像の外側で行われないように、顔の他の側で拡大が行われる。
【００３２】
考慮される第三の項目は、目標となるディスプレイの解像度である。例えば目標とするディスプレイがデジタルフォトフレームである場合、フォトフレームの解像度が決定される。関心のある領域は、フォトフレームの解像度の比率に整合するように拡大されるべきである。関心のある領域が900×900であり、フォトフレームが800×600である前の例を続ける。フォトフレームの割合は800/600＝4/3である。従って、関心のある領域は、割合が同じであるように1200×900に拡大される。原画像をこの1200×900画素の領域にトリミングした後、この領域は、フォトフレームの解像度に整合するようにダウンスケーリングすることができる。
【００３３】
考慮される第四の項目は、目標とするディスプレイの向きである。フォトフレームは、ランドスケープ又はポートレートスタイルの何れかで表示することができるので、この両者を考慮し、応用により使用することができる２つの領域を用意することが進められる。
【００３４】
また、顔の位置も考慮される。しましば、顔は画像の中央に置かれるが、ユーザが中央から外れて顔を有するように選択する多くの場合がある。顔の領域の最終的な拡大の決定において、これを考慮することができ、これのことは、顔が中央から僅かに外れて、左/右又は上/下の方向で位置されることを意味する。簡単な選択は、左及び右の方向に１５０画素だけ延ばすことである。しかし、顔がセンタリングされない場合、一方の辺は300画素だけ延ばされ、他方の辺はそのままにされる。
【００３５】
画像が複数の顔を含み、領域がそれぞれの顔について計算される場合、関心のある領域は、別の顔とのオーバラップを回避するために移動される。可能であれば、関心のある領域のエッジにある別の顔の一部が回避される。しかし、これは常に可能なことではない。先の例におけるように、900×900の領域は1200×900に拡大される必要がある。関心のある領域は、この種のオーバラップを回避するために、僅かに左及び右にシフトすることができる。しかし、別の顔がオリジナルの900×900領域に部分的に位置される場合、これは、例えば髪の領域の一部を切り取る危険を冒すことなしに回避することができない。
【００３６】
画像が複数の顔を含む場合、画像はトリミングされ、それぞれの顔を個別にトリミングするのではなく、全ての顔を互いに含む領域にサイズが変更される。ここで、顔を含む領域は、全ての顔を含む領域を包み込んでいる矩形となる。これは、それぞれの顔の拡大を個別に決定し、次いでそれらの拡大の最大を採用することで拡大される。これは、それぞれの顔が十分に大きな拡大を有することを保証する。フォトフレームの解像度及び向きを使用して、関心のある領域が決定され、顔について個別に行われたのと同様のやり方でトリミング／サイズの変更が行われる。
【００３７】
ステップ２０７で、画像のサイズは、目標とする画像のサイズ及びアスペクト比を決定し、画像のサイズ及びアスペクト比を決定することで、目標とする画像のサイズに変更される。次いで、スケーリングファクタは、以下のように決定される。
【００３８】
【数１】
2013501993.tif 000003
ここでＳはスケーリングファクタである、Ｉは画像の決定されたサイズであり、Ｔは目標とする画像の決定されたサイズである。次いで、画像のサイズは、Ｓに従って変更される。
【００３９】
実施の形態では、目標とする画像のサイズに適合するために関心のある領域の変更の詳細は、以下に記載される。
【００４０】
目標とする画像のサイズ及びアスペクト比、並びにトリミングされる関心のある領域が決定される。これらは、以下のスケーリングファクタを決定するために比較される。
【００４１】
【数２】
2013501993.tif 000004
ここでＳはスケーリングファクタであり、Ｒは関心のある領域の決定されたサイズであり、Ｔは目標とする画像の決定されたサイズである。
【００４２】
決定されたアスペクト比について、幅のスケーリングファクタＳw及び高さのスケーリングファクタＳhは、以下のように決定される。
【００４３】
【数３】
2013501993.tif 000005
ここでＲw及びＲhはそれぞれ関心のある領域の幅及び高さであり、Ｔw及びＴhはそれぞれ目標とする画像の幅及び高さである。
【００４４】
関心のある領域のアスペクト比及び目標とする画像のサイズが異なる場合、Ｓw及びＳhは異なる。そうなった場合、Ｓw又はＳhの使用により、サイズが変更された関心のある領域の歪みとなる。これは、Ｓw及びＳhを同じにするためにＲw又はＲhの何れかを延ばし、スケーリングファクタを使用して関心のある領域のサイズを変更することで克服される。
【００４５】
これは、関心のある領域を所望のＲw及びＲhに延ばすことで達成される場合がある。
【００４６】
本発明の実施の形態は添付図面で示され、上述の詳細な説明で記載されたが、本発明は開示された実施の形態に制限されるものではなく、以下の特許請求の範囲で述べられる本発明の範囲から逸脱することなしに様々な変更が可能であることを理解されたい。
【００４７】
当業者にとって明らかであるように「手段」は、（個別の回路又は集積回路、或いは電子的なエレメントのような）ハードウェア、単独で又は他の機能と共に、単独で又は他のエレメントと協働して、特定の機能を動作的に再生するか又は特定の機能を再生するように設計される（プログラム又はプログラムの一部のような）ソフトウェアを含むことが意図される。本発明は、幾つかの個別のエレメントを有するハードウェアにより実現され、適切にプログラムされたコンピュータにより実現される。幾つかの手段を列挙する装置の請求項では、これらの手段の幾つかは、同一アイテムのハードウェアにより実施することができる。「コンピュータプログラムプロダクト」は、フロプティカルディスクのようなコンピュータ読み取り可能な媒体い記憶されるか、インターネットのようなネットワークを介してダウンロード可能であるか、又は他の方式で取得されるソフトウェアプロダクトを意味することが理解される。
【図１】
2013501993.tif 000006
【図２】
2013501993.tif 000007
【図３】
2013501993.tif 000008
【手続補正書】
【提出日】平成24年2月14日(2012.2.14)
【手続補正１】
【補正対象書類名】特許請求の範囲
【補正対象項目名】全文
【補正方法】変更
【補正の内容】
【特許請求の範囲】
【請求項１】
画像から導出され、目標とする画像のサイズで表示するために変換される、記憶された画像情報を供給する方法であって、
当該方法は、
画像のサイズを前記目標とする画像のサイズに変更するステップと、
前記画像において関心のある領域を決定するステップと、
前記画像を前記関心のある領域に切り取るステップと、
切り取りの結果が前記目標とする画像のサイズに適合しないとき、切り取られた関心のある領域を前記目標とする画像のサイズに変更するステップと、
ユーザによる選択に応じて表示するために、サイズが変更された画像と、切り取られ、必要に応じてサイズが変更された関心のある領域とを記憶するステップと、
を含むことを特徴とする方法。
【請求項２】
前記記憶された画像と、前記切り取られ、必要に応じてサイズが変更された関心のある領域のうちの１つをユーザが選択するのを可能にするため、前記記憶されたサイズが変更された画像と、前記切り取られ、必要に応じてサイズが変更された関心のある領域とを互いに関連付けするステップを更に含む、
請求項１記載の方法。
【請求項３】
記憶された、サイズが変更された画像、又は、記憶された、切り取られ、必要に応じてサイズが変更された関心のある領域の選択を受信するステップと、前記記憶された、サイズが変更された画像、又は、前記記憶された、切り取られ、必要に応じてサイズが変更された関心のある領域のうちの選択された１つを出力するステップを更に含む、
請求項１記載の方法。
【請求項４】
前記記憶された、サイズが変更された画像、又は、前記記憶された、切り取られ、必要に応じてサイズが変更された関心のある領域のうちの選択された１つを前記選択に依存して表示するステップを更に含む、
請求項３記載の方法。
【請求項５】
前記画像において複数の関心のある領域が決定されるとき、前記複数の関心のある領域のそれぞれについてそれぞれ切り取られた画像を計算するステップを更に含む、
請求項１記載の方法。
【請求項６】
前記画像において複数の関心のある領域が決定されるとき、全ての関心のある領域を含む領域を決定するステップを更に含み、前記切り取るステップは、前記画像を前記全ての関心のある領域に切り取るステップを含む、
請求項１記載の方法。
【請求項７】
前記画像のサイズを目標とする画像のサイズに変更する前記ステップは、
前記目標とする画像のサイズ及びアスペクト比を決定するステップと、
前記画像のサイズ及びアスペクト比を決定するステップと、
前記目標とする画像の決定されたサイズと前記画像の決定されたサイズとから、スケーリングファクタを決定するステップと、
決定されたスケーリングファクタに従って前記画像のサイズを変更するステップと、
を含む請求項１記載の方法。
【請求項８】
前記切り取られた関心のある領域のサイズを前記目標とする画像のサイズに変更するステップは、
前記切り取られた関心のある領域のサイズ及びアスペクト比を決定するステップと、
前記目標とする画像の決定されたサイズと前記切り取られた関心のある領域の決定されたサイズとから、スケーリングファクタを決定するステップと、
前記切り取られた関心のある領域の決定されたアスペクト比を維持すると共に、前記決定されたスケーリングファクタに従って前記切り取られた関心のある領域のサイズを変更するステップと、
を含む請求項７記載の方法。
【請求項９】
前記決定されたアスペクト比を維持すると共に、前記決定されたスケーリングファクタに従って前記切り取られた関心のある領域のサイズを変更する前記ステップは、
前記切り取られた関心のある領域の外側にある前記画像の少なくとも１部を含むように、前記切り取られた関心のある領域を拡大するステップと、拡大された関心のある領域は、前記画像の前記決定されたアスペクト比に対応するアスペクト比を有し、
前記画像を拡大された関心のある領域に切り取るステップと、
切り取られた拡大された関心のある領域のサイズを前記目標とする画像のサイズに変更するステップと、
を含む請求項３記載の方法。
【請求項１０】
前記画像において関心のある領域を決定する前記ステップは、画像において関心のある領域を自動的に検出するステップを含む、
請求項１記載の方法。
【請求項１１】
前記画像を前記関心のある領域に切り取るステップは、
前記検出された関心のある領域の外側にある前記画像の一部を含むように、前記検出された関心のある領域を拡大するステップと、
拡大された関心のある領域に前記画像を切り取るステップと、
を含む請求項１０記載の方法。
【請求項１２】
画像において関心のある領域を決定するステップは、
画像において関心のある領域を手動で定義するステップを含む、
請求項１記載の方法。
【請求項１３】
請求項１乃至９の何れか記載の方法を実行する複数のプログラムコードを含むコンピュータプログラム。
【請求項１４】
目標とする画像のサイズで表示するために記憶手段に記憶される画像情報を供給する装置であって、前記記憶される画像情報は画像から導出され、
当該装置は、
前記記憶手段へのコネクションと、
画像において関心のある領域を決定する決定手段と、
前記画像のサイズを目標とする画像のサイズに変更し、前記画像を前記関心のある領域に切り取り、切り取りの結果が前記目標とする画像のサイズに適合しないとき、切り取られた関心のある画像のサイズを前記目標とする画像のサイズに変更し、サイズが変更された画像と、切り取られ、必要に応じてサイズが変更された関心のある領域とを、ユーザによる選択に応じて表示するために前記記憶手段に記憶するプロセッサと、
を備えることを特徴とする装置。
【請求項１５】
ユーザによる選択に応じて、前記記憶手段からの前記サイズが変更された画像、又は、前記切り取られ、必要に応じてサイズが変更された関心のある領域を記選択に依存して表示するディスプレイを更に含む、
請求項１４記載の装置。
【請求項１６】
前記決定手段は、前記画像において関心のある領域を自動的に検出する関心のある領域の検出器を含む、
請求項１５記載の装置。
【手続補正２】
【補正対象書類名】明細書
【補正対象項目名】０００２
【補正方法】変更
【補正の内容】
【０００２】
近年、毎日のデジタル画像のユーザの捕捉の量における急増を見ている。  
従来、ユーザは、特定のイベントの間にのみ画像を捕捉し、これらの画像を現像することは費用がかかるために画像の合成に関して慎重であったが、デジタルフォトカメラ及び増加する記憶容量は、行動における劇的な変化を導いている。ユーザは同じ被写体の複数の画像を捕捉することは一般的であり、数百又は更に数千の画像を捕捉して休日から家に戻ることはまれである。  
US20060139371号は、可変サイズの表示装置での表示のための画像のトリミングを記載している。この文献では、トリミングは、画像を表示するために利用可能な領域を超えて延びる画像の一部を切断することを含む。この文献は、例えば原画像とディスプレイスクリーンとのサイズ及びアスペクト比の差が大きいときといった、重要な領域が切断される場合に、トリミングの処理は望まれない結果を生成する可能性があることを述べている。この文献は、画像における関心のある領域を定義し、関心のある領域を含むようなやり方でトリミングにより保持される領域の選択を制約することで、この問題を解決している。
【手続補正３】
【補正対象書類名】明細書
【補正対象項目名】０００９
【補正方法】変更
【補正の内容】
【０００９】
WO  2008/025969は、画像の関心のある領域がトリミングされ、顔のような関心のある領域のサイズが変更されるように、例えば画像をトリミングしてサイズ変更する様々な技術を開示している。しかし、この技術は、原画像のアスペクト比を維持するものではなく、従って顔の歪が生じ、これは顔にとって特に望まれない。さらに、ユーザには、原画像を表示するか又は関心のあるエレメントを表示するオプションが与えられない。
EP1215626及びGB2422739号は、自動トリミング方法を記載している。
【手続補正４】
【補正対象書類名】明細書
【補正対象項目名】００１１
【補正方法】変更
【補正の内容】
【００１１】
上記課題は、画像から導出され、目標とする画像のサイズで表示するために変換される記憶された画像情報を供給する方法により達成されるものであり、画像のサイズを目標とする画像のサイズに変更するステップ、画像において関心のある領域を決定するステップ、前記画像を関心のある領域にトリミングするステップ、トリミングの結果が目標とする画像のサイズに適合しないときに、トリミングされた関心のある画像のサイズを目標とする画像のサイズに変更するステップ、サイズが変更された画像と、トリミングされ、必要に応じてサイズが変更された関心のある領域の両者をユーザによる選択に応じて表示するために記憶するステップを含む。
【手続補正５】
【補正対象書類名】明細書
【補正対象項目名】００１２
【補正方法】変更
【補正の内容】
【００１２】
また、上記課題は、目標とする画像のサイズで表示するために記憶手段に記憶される画像情報を供給する装置により達成されるものであり、記憶される画像情報は画像から導出され、当該装置は、記憶手段へのコネクションと、画像において関心のある領域を決定する決定手段と、画像のサイズを目標とする画像のサイズに変更し、画像を関心のある領域にトリミングし、トリミングの結果が目標とする画像のサイズに適合しないときに、トリミングされた少なくとも１つの関心のある領域のサイズを目標とする画像のサイズに変更し、サイズが変更された画像と、トリミングされ、必要に応じてサイズが変更された関心のある領域の両者をユーザによる選択に応じて表示するために記憶手段に記憶するプロセッサを備える。
【国際調査報告】
2013501993.tif 000009
2013501993.tif 000010
2013501993.tif 000011