(57)【要約】本発明は、携帯型電子機器（１０）の第１の画像撮影ユニット（２０）を遠隔制御するための方法及びコンピュータプログラムプロダクトやそのような携帯型電子機器を対象としている。前記携帯型電子機器は、第１及び第２の画像撮影ユニット（１６，２０）を含む。前記機器（１０）は、前記第２の画像撮影ユニット（１６）を介して被写体（２２）を光学的に検出し追跡し、前記被写体（２２）の領域における変化を検出する。その結果、これらの変化が前記第１の画像撮影ユニット（２０）を遠隔的な制御に使用される。前記制御が画像の撮影に関連する場合、画質を改善できる。また、画像の撮影に要する時間が低減される。【選択図】図２
2010530144.tif 000002
【特許請求の範囲】
【請求項１】
携帯型電子機器（１０）の第１の画像撮影ユニット（２０）を遠隔制御する方法であって、
第２の画像撮影ユニット（１６）を介して被写体（２２）を光学的に検出し追跡する工程（２３）と、
前記第２の画像撮影ユニット（１６）を介して前記被写体（２２）の少なくとも１つの領域（２４）における少なくとも１つの変化を検出する工程（４４，４８，５２）と、
前記領域（２４）の前記変化に基づいて前記第１の画像撮影ユニット（２０）を制御する工程（４６，５０，５４）とを備える方法。
【請求項２】
前記携帯型電子機器（１０）のユーザにより行われた入力を介して遠隔制御を起動する指示を受信する工程（３６）を更に備える請求項１に記載の方法。
【請求項３】
前記指示に対する応答として、前記第１の画像撮影ユニット（２０）により観察されたシーン（２６）内の要素に、当該第１の画像撮影ユニット（２０）の焦点を合わせる工程（４２）を更に備える請求項２に記載の方法。
【請求項４】
前記被写体（２２）が検出され追跡されたときに前記ユーザに明示する工程（３４）を更に備える請求項１乃至３のいずれか１項に記載の方法。
【請求項５】
前記制御工程は、前記被写体（２２）内の少なくとも１つの変化に基づいて画像を撮影する工程（５４）を備える請求項１乃至３のいずれか１項に記載の方法。
【請求項６】
前記被写体に１を超えた変化がある場合、前記制御工程は、前記被写体（２２）内の他の変化に基づいて前記第１の画像撮影ユニット（２０）により観察されたシーン（２６）をズームする工程（４６，５０）を備える請求項５に記載の方法。
【請求項７】
前記第１の画像撮影ユニット（２０）により観察されたシーン（２６）をユーザに提示する工程（４６，５０）を更に備える請求項１乃至６のいずれか１項に記載の方法。
【請求項８】
前記被写体（２２）は、前記携帯型電子機器（１０）のユーザの体の一部である請求項１乃至７のいずれか１項に記載の方法。
【請求項９】
前記体の一部は頭（２２）である請求項８に記載の方法。
【請求項１０】
前記領域は少なくとも１つの目（２４）を含む請求項９に記載の方法。
【請求項１１】
前記被写体の変化は、前記少なくとも１つの目（２４）の瞬きである請求項１０に記載の方法。
【請求項１２】
携帯型電子機器（１０）であって、
第１の画像撮影ユニット（２０）と、
第２の画像撮影ユニット（１６）と、
前記第２の画像撮影ユニット（１６）を介して前記被写体（２２）を光学的に検出し追跡し、
前記第２の画像撮影ユニット（１６）を介して前記被写体（２２）の少なくとも１つの領域（２４）における少なくとも１つの変化を検出し、
前記領域（２４）の前記変化に基づいて前記第１の画像撮影ユニット（２０）を制御する画像撮影制御ユニット（２８）とを備える携帯型電子機器。
【請求項１３】
少なくとも１つのユーザ入力ユニット（１４，１５）を更に備え、
前記画像撮影制御ユニット（２８）は更に、前記ユーザ入力ユニット（１４）を介してユーザによりなされた入力を通して遠隔制御を起動する指示を受信する請求項１２に記載の携帯型電子機器。
【請求項１４】
前記画像撮影制御ユニット（２８）は更に、前記指示に対する応答として、前記第１の画像撮影ユニット（２０）により観察されたシーン（２６）内の要素に、当該第１の画像撮影ユニット（２０）の焦点を合わせる請求項１３に記載の携帯型電子機器。
【請求項１５】
少なくとも１つのユーザ出力ユニット（１２，１８）を更に備え、
前記ユーザ出力ユニット（１８）を介して前記被写体（２２）が検出され追跡されたときに前記ユーザに明示する請求項１２乃至１４のいずれか１項に記載の携帯型電子機器。
【請求項１６】
前記画像撮影制御ユニット（２８）は前記第１の画像撮影ユニット（２０）を制御するように構成されている場合、前記被写体（２２）内の少なくとも１つの変化に基づいて画像を撮影するように前記第１の画像撮影ユニットを制御する請求項１２乃至１５のいずれか１項に記載の携帯型電子機器。
【請求項１７】
前記被写体に１を超えた変化がある場合、前記画像撮影ユニット（２８）は前記第１の画像撮影ユニット（２０）を制御するように構成されている場合、前記被写体内の他の変化に基づいて前記第１の画像撮影ユニット（２０）により観察されたシーン（２６）をズームするように前記第１の画像撮影ユニット（２０）を制御する請求項１６に記載の携帯型電子機器。
【請求項１８】
少なくとも１つのユーザ出力ユニット（１２，１８）を更に備え、
前記画像撮影制御ユニット（２８）は更に、前記ユーザ出力ユニット（１２）を介して前記第１の画像撮影ユニット（２０）により観察されたシーン（２６）をユーザに提示する請求項１２乃至１７のいずれか１項に記載の携帯型電子機器。
【請求項１９】
前記被写体は、前記携帯型電子機器（１０）のユーザの体の一部である請求項１２至１８のいずれか１項に記載の携帯型電子機器。
【請求項２０】
前記体の一部は頭（２２）である請求項１９に記載の携帯型電子機器。
【請求項２１】
前記領域は少なくとも１つの目（２４）を含む請求項２０に記載の携帯型電子機器。
【請求項２２】
前記被写体の変化は、前記少なくとも１つの目（２４）の瞬きである請求項２１に記載の携帯型電子機器。
【請求項２３】
前記携帯型電子機器は、携帯型通信機器である請求項１２乃至２２のいずれか１項に記載の携帯型電子機器。
【請求項２４】
前記携帯型電子機器は、携帯電話機である請求項２３に記載の携帯型電子機器。
【請求項２５】
携帯型電子機器（１０）の第１の画像撮影ユニット（２０）を遠隔制御する携帯型電子機器であって、
第２の画像撮影ユニット（１６）を介して被写体（２２）を光学的に検出し追跡する手段（２８）と、
前記第２の画像撮影ユニット（１６）を介して前記被写体（２２）の少なくとも１つの領域（２４）における少なくとも１つの変化を検出する手段（２８）と、
前記領域の前記変化に基づいて前記第１の画像撮影ユニット（２０）を制御する手段（２８）とを備える携帯型電子機器。
【請求項２６】
携帯型電子機器（１０）の第１の画像撮影ユニット（２０）を遠隔制御するコンピュータプログラムであって、
前記携帯型電子機器にコンピュータプログラムコードがロードされた場合に、前記携帯型電子機器に、
第２の画像撮影ユニット（１６）を介して被写体（２２）を光学的に検出し追跡する工程と、
前記第２の画像撮影ユニット（１６）を介して前記被写体（２２）の少なくとも１つの領域（２４）における少なくとも１つの変化を検出する工程と、
前記領域の前記変化に基づいて前記第１の画像撮影ユニット（２０）を制御する工程とを実行させるためのプログラムプロダクト。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、携帯型電子機器における画像撮影ユニットの分野に関する。本発明は、より詳しくは、携帯型電子機器の第１の画像撮影ユニットを遠隔制御するための方法及びコンピュータプログラムプロダクトやそのような携帯型電子機器を対象としている。
【背景技術】
【０００２】
カメラや他の画像撮影ユニットは小型化してきており、現在では携帯電話のような携帯型電子機器にもよくある。
【０００３】
しかしながら、そのような機器でそのような画像撮影ユニットを遠隔制御することは重要である。この１つの理由は、例えばボタンを押して画像を撮影する場合、ボタンが押されたときに機器がわずかに揺れることにより画像にブレが発生してしまうことである。
【０００４】
カメラ用の遠隔制御機器が存在する。例えば、米国特許第６，４００，９０３号明細書には、コンピュータからカメラを遠隔制御することの記載がある。ここでコンピュータはカメラへコマンドを送出し、カメラから画像を受信する。また、ズームや三脚の位置等のようなカメラに関連する異なった機能を制御することが可能である。しかしながら、このような機器は複雑で、コストが伴い、多くの場合カメラへ接続することが必要であり、ユーザによる一定の作業が必要とされる。それらは浪費をもたらすこともある。
【０００５】
更に、ユーザが撮影したいシーンを選択する際に自由度を高めるために、そのようなカメラを手の中で保持することは望ましい場合が多い。良好な画質を得るためには、更に両手を使う必要がある。これでは、追加の遠隔制御機器と組み合わせることが難しくなる。
【０００６】
そのため、任意の追加機器がなくても、機器の機能を使用するだけで実行可能な携帯型電子機器におけるカメラの遠隔制御を提供することが重要である。
そこで、携帯型電子機器において画像撮影ユニットの遠隔制御を改良する必要がある。
【発明の概要】
【０００７】
そのため、本発明は、携帯型電子機器における第１の画像撮影ユニットの改良された遠隔制御を提供するという課題の解決に向けられたものである。
【０００８】
これは、概ね、携帯型電子機器の第２の画像撮影ユニットを介して被写体を光学的に検出し追跡し、前記被写体の領域における変化を検出することにより解決される。その結果、これらの変化は第１の画像撮影ユニットの制御に使用される。
【０００９】
本発明の１つの目的は、それ故、携帯型電子機器の第１の画像撮影ユニットを遠隔制御するための改良された方法を提供することである。
【００１０】
本発明の第１の観点によれば、この目的は、携帯型電子機器の第１の画像撮影ユニットを遠隔制御する方法であって、第２の画像撮影ユニットを介して被写体を光学的に検出し追跡する工程と、前記第２の画像撮影ユニットを介して前記被写体の少なくとも１つの領域における少なくとも１つの変化を検出する工程と、前記領域の前記変化に基づいて前記第１の画像撮影ユニットを制御する工程とを備える方法により達成される。
【００１１】
本発明の第２の観点は上記第１の観点の特徴を含み、前記携帯型電子機器のユーザにより行われた入力を介して遠隔制御を起動する指示を受信する工程を更に備える。
【００１２】
本発明の第３の観点は上記第２の観点の特徴を含み、前記指示に対する応答として、前記第１の画像撮影ユニットにより観察されたシーン内の要素に、当該第１の画像撮影ユニットの焦点を合わせる工程を更に備える。
【００１３】
本発明の第４の観点は上記第１の観点の特徴を含み、前記被写体が検出され追跡されたときに前記ユーザに明示する工程を更に備える。
【００１４】
本発明の第５の観点は上記第１の観点の特徴を含み、前記制御工程は、前記被写体内の少なくとも１つの変化に基づいて画像を撮影する工程を備える。
【００１５】
本発明の第６の観点は上記第５の観点の特徴を含み、前記被写体に１を超えた変化がある場合、前記制御工程は、前記被写体内の他の変化に基づいて前記第１の画像撮影ユニットにより観察されたシーンをズームする工程を備える。
【００１６】
本発明の第７の観点は上記第１の観点の特徴を含み、前記第１の画像撮影ユニットにより観察されたシーンをユーザに提示する工程を更に備える。
【００１７】
本発明の第８の観点は上記第１の観点の特徴を含み、前記被写体は、前記携帯型電子機器のユーザの体の一部である。
【００１８】
本発明の第９の観点は上記第８の観点の特徴を含み、前記体の一部は頭である。
【００１９】
本発明の第１０の観点は上記第９の観点の特徴を含み、前記領域は少なくとも１つの目を含む。
【００２０】
本発明の第１１の観点は上記第１０の観点の特徴を含み、前記被写体の変化は、前記少なくとも１つの目の瞬きである。
【００２１】
本発明の他の目的は、携帯型電子機器の第１の画像撮影ユニットの改良された遠隔制御をサポートする携帯型電子機器を提供することである。
【００２２】
本発明の第１２の観点によれば、この目的は、携帯型電子機器であって、第１の画像撮影ユニットと、第２の画像撮影ユニットと、前記第２の画像撮影ユニットを介して前記被写体を光学的に検出し追跡し、前記第２の画像撮影ユニットを介して前記被写体の少なくとも１つの領域における少なくとも１つの変化を検出し、前記領域の前記変化に基づいて前記第１の画像撮影ユニットを制御する画像撮影制御ユニットとを備える携帯型電子機器により達成される。
【００２３】
本発明の第１３の観点は上記第１２の観点の特徴を含み、少なくとも１つのユーザ入力ユニットを更に備え、前記画像撮影制御ユニットは更に、前記ユーザ入力ユニットを介してユーザによりなされた入力を通して遠隔制御を起動する指示を受信する。
【００２４】
本発明の第１４の観点は上記第１３の観点の特徴を含み、前記画像撮影制御ユニットは更に、前記指示に対する応答として、前記第１の画像撮影ユニットにより観察されたシーン内の要素に、当該第１の画像撮影ユニットの焦点を合わせる。
【００２５】
本発明の第１５の観点は上記第１２の観点の特徴を含み、少なくとも１つのユーザ出力ユニットを更に備え、前記ユーザ出力ユニットを介して前記被写体が検出され追跡されたときに前記ユーザに明示する。
【００２６】
本発明の第１６の観点は上記第１２の観点の特徴を含み、前記画像撮影制御ユニットは前記第１の画像撮影ユニットを制御するように構成されている場合、前記被写体内の少なくとも１つの変化に基づいて画像を撮影するように前記第１の画像撮影ユニットを制御する。
【００２７】
本発明の第１７の観点は上記第１６の観点の特徴を含み、前記被写体に１を超えた変化がある場合、前記画像撮影ユニットは前記第１の画像撮影ユニットを制御するように構成されている場合、前記被写体内の他の変化に基づいて前記第１の画像撮影ユニットにより観察されたシーンをズームするように前記第１の画像撮影ユニットを制御する。
【００２８】
本発明の第１８の観点は上記第１２の観点の特徴を含み、少なくとも１つのユーザ出力ユニットを更に備え、前記画像撮影制御ユニットは更に、前記ユーザ出力ユニットを介して前記第１の画像撮影ユニットにより観察されたシーンをユーザに提示する。
【００２９】
本発明の第１９の観点は上記第１２の観点の特徴を含み、前記被写体は、前記携帯型電子機器のユーザの体の一部である。
【００３０】
本発明の第２０の観点は上記第１９の観点の特徴を含み、前記体の一部は頭である。
【００３１】
本発明の第２１の観点は上記第２０の観点の特徴を含み、前記領域は少なくとも１つの目を含む。
【００３２】
本発明の第２２の観点は上記第２１の観点の特徴を含み、前記被写体の変化は、前記少なくとも１つの目の瞬きである。
【００３３】
本発明の第２３の観点は上記第１２の観点の特徴を含み、前記携帯型電子機器は、携帯型通信機器である。
【００３４】
本発明の第２４の観点は上記第２３の観点の特徴を含み、前記携帯型電子機器は、携帯電話機である。
【００３５】
本発明の第２５の観点は、携帯型電子機器の第１の画像撮影ユニットを遠隔制御する携帯型電子機器であって、第２の画像撮影ユニットを介して被写体を光学的に検出し追跡する手段と、前記第２の画像撮影ユニットを介して前記被写体の少なくとも１つの領域における少なくとも１つの変化を検出する手段と、前記領域の前記変化に基づいて前記第１の画像撮影ユニットを制御する手段とを備える携帯型電子機器を対象としている。
【００３６】
本発明の他の目的は、携帯型電子機器の第１の画像撮影ユニットの改良された遠隔制御を達成するコンピュータプログラムプロダクトを提供することである。
【００３７】
本発明の第２６の観点によれば、この目的は、携帯型電子機器の第１の画像撮影ユニットを遠隔制御するコンピュータプログラムプロダクトであって、前記携帯型電子機器にコンピュータプログラムコードがロードされた場合に、前記携帯型電子機器に、第２の画像撮影ユニットを介して被写体を光学的に検出し追跡する工程と、前記第２の画像撮影ユニットを介して前記被写体の少なくとも１つの領域における少なくとも１つの変化を検出する工程と、前記領域の前記変化に基づいて前記第１の画像撮影ユニットを制御する工程とを実行させるためのプログラムプロダクトにより達成される。
【００３８】
本発明は、多くの利点を有する。被写体を変化させるだけで、例えば、瞬きすることにより、第１の画像撮影ユニットを遠隔制御可能となる。任意の追加の遠隔制御機器を必要としない。携帯型電子機器の軽量化に伴い、画像を撮影するための撮影ボタンを押すことが機器をわずかに動かし、画像のぶれを引き起こす虞がある。ボタンを押さずに画像の撮影を行えることによって、より一層画質が改善された画像を得ることができる。更に、遠隔制御は、ユーザが両手で携帯型電子機器を保持することができるので、シーンを選択する際の多大な自由度や相応の機械的安定性が提供できる。また、本発明によれば、画像の撮影に要する時間が低減される。これは、ボタンを押して行うよりも素早くユーザが事象に反応できるようにする。その結果、ユーザが欲する的確な瞬間の撮影チャンスをより多く持つことになる。画像撮影ユニットを制御するために必要なユニットが既に多くの携帯型電子機器に存在しているので、必要とされる追加の機能だけがソフトウェアとして提供される。これは、本発明が低い追加コストで製造され得ることを意味している。
【００３９】
強調すべき点は、用語「備える／備えた（ｃｏｍｐｒｉｓｅ／ｃｏｍｐｒｉｓｉｎｇ）」は、この明細書中で使用された場合、記載された特徴、整数、ステップ、または構成要素の存在を明示するものと解釈され、他の１つ以上の特徴、整数、ステップ、構成要素、またはこれらのグループの存在または追加を排除するものではないことである。
【図面の簡単な説明】
【００４０】
本発明は、添付された図面との関連でより詳細に以下に記述される。
【図１】本発明に係る携帯電話を概略的に示す正面から見た図である。
【図２】あるシーンを撮影する際のユーザによる使用における図１に示した携帯電話を側面から見た図である。
【図３】本発明を実施するために電話機に付与される異なったユニットの概略ブロック図である。
【図４】電話機にて実現される本発明に係る方法に取り込まれた複数の処理手順のフローチャートである。
【図５】本発明を実現するコンピュータプログラムコードを備えるＣＤ−ＲＯＭディスクの形式でのコンピュ-タプログラムプロダクトを概略的に示す図である。
【発明を実施するための形態】
【００４１】
本発明は、第１の画像撮影ユニットと第２の画像撮影ユニットが設けられた携帯型電子機器に関する。
【００４２】
図１では携帯電話機の形式での携帯型電子機器１０を正面から見た図を示し、図２ではユーザにより使用される際の電話機１０を側面から見た図を示している。図２ではユーザの顔２２だけが示され、ここで本発明の実施形態の記述ではユーザの目２４が使用される。電話機１０は、ディスプレイ１２の形式で前側にユーザ出力ユニットを含み、ディスプレイ１２内にインジケータ１８が示されている。このインジケータの目的は、より詳細に後述する。ここでインジケータが一般的に特定の色の照明として設けられることは言うまでもない。このため、インジケータを使用するユーザ出力ユニットは、別の方法として、ディスプレイ１２、例えばＬＥＤ（発光ダイオード）の形式で、ディスプレイ１２から分離して設けられる。また、スピーカを使用して音のインジケータを設けることも可能である。上記電話機１０は、キーパッド１４における複数のキーの形式で、前側に一組のユーザ入力ユニットを含む。また、上記電話機１０の側部に設けられた専用ボタン１５の形式で、追加のユーザ入力ユニットがある。このボタン１５は、第１の延在部と、第２の半押し部と、第３の全押し部とを有し、ボタン１５の操作面は、ボタンが設けられている上記電話機１０の側部に配置されている。本発明では、タッチパネルやマイクと同じような他のユーザ入力ユニットが使用できる。また、電話機１０の前側には、ビデオカメラの形式でビデオ画像撮影ユニット１６が設けられている。これは、通常他人とのビデオ電話会議でユーザにより使用される。また、それは、ビデオ撮影にも使用できることはもちろんである。更に、電話機１０の後側には、デジタルカメラの形式で静止画像撮影ユニット２０が設けられている。このカメラは、異なったシーンの静止画像撮影に使用することができる。そういう１つのシーン２６が図２に示され、そのシーンは木２７を含んでいる。ここで、静止画像撮影ユニットは第１の画像撮影ユニットの一例であり、ビデオ画像撮影ユニットは、第１の画像撮影ユニットの制御にかかわる第２の画像撮影ユニットの一例である。
【００４３】
携帯電話機は、通信機能を有する携帯型電子機器の１つの実例である。本発明は、携帯電話機に限定されることは決してないが、例えばスマートフォンや通信機或いはラップトップコンピュータ、パームトップコンピュータ、電子手帳に類似した他の携帯型電子機器等の、携帯型通信機器に類似した他の形式の機器にも適用可能である。
【００４４】
図３は、本発明に関連して使用される電話機１０の異なったユニットの概略ブロックを示している。電話機１０は、ユーザ入力ユニット１４及び１５、即ちキーパッド１４やボタン１５、ユーザ出力ユニット、即ちディスプレイ１２、ビデオ画像撮影ユニット１６及び静止画像撮影ユニット２０を含む。画像撮影ユニット１６及び２０は両方とも通常は、投影された画像をデジタル画像に変換する、デジタル画像受信ユニットに接続されたレンズを含む。そのようなデジタル画像受信ユニットはＣＣＤ（電荷結合素子）ユニットを含む。また、ビデオ画像撮影ユニットは、例えばＭＰＥＧ（Moving Picture Experts Group）フォーマットに従い、そのような画像をビデオデータに符号化するビデオ符号化ユニットを含む。上述した全てのユニットは、本発明にかかる電話機１０の機能を制御する、画像撮影制御ユニット２８に接続されている。また、２つの画像撮影ユニット１６及び２０はディスプレイ１２に接続されている。ここで、電話機は通常いくつかの追加のユニットや機能を含むことを理解すべきである。しかしながら、ここでは本発明により多く焦点を当てるために、これらは割愛されている。
【００４５】
本発明の機能は、上述した図１〜３と図４が示す上記電話機１０にて実現される本発明にかかる方法に取り込まれる複数の処理手順のフローチャートを参照してここに記述される。
【００４６】
本発明は、ビデオ撮影ユニット１６を介して被写体を光学的に検出し追跡し、被写体の領域での変化を検出することを対象としている。その結果、これらの変化が静止画像撮影ユニット２０を制御することに使用される。以下の記述では、この被写体はユーザの頭とその領域であり、その領域２７は目の位置とされる。しかしながら、本発明は目やユーザの頭に適用されることに限定されることは決してないが、ユーザが変化した任意の被写体に適用してもよく、この場合、これらの変化はビデオカメラ撮影ユニットにより検出されることを理解すべきである。
【００４７】
静止画像撮影ユニット２０には遠隔制御モードが設けられている。このモードは、ユーザが電話機のメニュー体系から適宜の選択をすることにより、或いは遠隔制御モードに関連付けされた専用ボタンを押すことにより移行される。しかしながら、このモードは静止画像撮影ユニット２０の動作モードだけにすることも可能である。そのため、当該モードはまた、例えば静止画像撮影ユニット２０からレンズ保護体を退避することにより、カメラの機能性が選択されるとすぐに移行される。その結果、ステップ３０で移行された遠隔制御モードによって、本処理がスタートし、このモードの選択を検出したユーザ入力ユニット、ここではキーバッド１４により例示される、から画像撮影制御ユニット２８へ情報が転送される。その後、画像撮影制御ユニット２８は、ビデオ画像撮影ユニット１６によりカバーされる視野の画像データを提供するために、ビデオ画像撮影ユニット１６を起動させる。ここでユーザは、その顔２２や、鼻、唇、目２４のような顔の詳細が登録可能なように、ビデオ画像撮影ユニットを見る必要がある。画像撮影制御ユニット２８は、ステップ３２で、ビデオ画像撮影ユニット１６により登録された画像データから、光学的に顔を検出し追跡する、顔認識機能を含む。これは、例えば、様々な領域の色やそのような異なった色の領域間の連結に従い、登録された画像を区分し、１つ以上の顔を作り上げるそのような区分を検出し、顔を追跡すること、即ち顔の動きに追従することにより実行される。ステップ３２で、顔が識別され追跡された場合、ステップ３４で、それがユーザに明示される。これは、画像撮影制御ユニット２８がディスプレイ１２に、例えば特定の色を使用して、インジケータ１８を起動するよう指令することにより実行される。この方法では、ユーザは、今から静止画像撮影ユニット２０の遠隔制御を実行できることが報知される。しかる後に、画像撮影制御ユニット２８は、静止画像撮影ユニット２０に、ビューファインダモードの動作にてシーン２６をディスプレイ１２に提示するように指令し、ユーザから遠隔制御を起動するための指示を待つ。ステップ３６で、万が一そのような指示がない場合、画像撮影制御ユニット２８は、ステップ３８で、ユーザが特定の制限時間内に何らの操作もしていないか、ユーザが電話機のボタンやキーを操作して遠隔カメラモードを終了することを決定した場合の可能性があり、遠隔制御モードが終了すべきであるか調べる。当該モードが終了すべきであるならば、画像撮影制御ユニット２８は、ステップ４０で、当該モードを終了し、他にリターンし指示を待つ。
【００４８】
ユーザが電話機１０のボタン１５を第１の位置から第２の半押し位置へ動かすことによって指示が受信される。ここでボタン１５の第３の位置への移動は、通常の処理では静止画像撮影ユニット２０による画像撮影につながる。ステップ３６で指示が受信されると、画像撮影制御ユニット２８は、ステップ４２で、シーン２６に焦点を合わせるように静止画像撮影ユニット２０に指令する。これは、オートフォーカスにより実行される。その結果、これは、静止画像撮影ユニット２０がシーン２６内の要素、例えば木２７に焦点を合わせることにより実行される。しかる後に、画像撮影制御ユニット２８の顔認識機能が、追跡し検出されたユーザの顔２２の少なくとも１つの領域の変化を観察し、これらの変化に基づいて静止画像撮影ユニット２０を制御する。ここで記述した実施形態では、この領域２４は、ユーザの目の領域である。ここで、顔認識機能はユーザが瞬きしたことを検出するように構成される。ステップ４４で、ユーザがちょうど左目だけを瞬きした場合、画像撮影制御ユニット２８は、ステップ４６でシーン２６をズームインし、ステップ４２でオートフォーカスを再度実行し、顔２２の領域２４内の変化の観察を続行するように、静止画像撮影ユニット２０に指令する。ステップ４４で、左目が単独で瞬きされなかった場合、画像撮影制御ユニット２８は、ステップ４８で右目だけが瞬きされたか調べる。このケースの場合、画像撮影制御ユニット２８は、ステップ５０でシーン２６をズームインし、ステップ４２でオートフォーカスを再度実行し、顔２２の領域２４内の変化の観察を続行するように、静止画像撮影ユニット２０に指令する。ステップ４８で、右目が単独で瞬きされなかった場合、画像撮影制御ユニット２８は、ステップ５２で両目が同時に瞬きされたか調べる。もしそうならば、画像撮影制御ユニット２８は、ステップ５４で静止画像を撮影し、その後顔２２の領域２４内の変化の観察を続行するように、静止画像撮影ユニット２０に指令する。ステップ５２で、どちらの目も瞬きされなかった場合、画像撮影制御ユニット２８は、ステップ５６で、ユーザが特定の時間内に全く瞬きしなかったか、ユーザがボタン１５を操作して遠隔カメラモードを終了することを決定した場合の可能性があり、遠隔制御モードを終了すべきか調べる。これは、ボタン１５が遠隔制御をオフし、ユーザが普通通り瞬きしても良い第１の位置に戻るように、ボタン１５を完全に解除することによって達成される。このモードを終了すべきである場合、ステップ５８で、画像撮影制御ユニット２８はこのモードを終了する。
【００４９】
この方法では、目を瞬きするだけで静止画像撮影ユニットの遠隔制御が可能になる。カメラ付き携帯電話機の軽量化に伴い、画像を撮影するための撮影ボタンを押すことが電話機をわずかに動かし、画像のぶれを引き起こす虞がある。ボタンを押さずに画像の撮影を行えることによって、より一層画質が改善された画像を得ることができる。更に、遠隔制御は、特別な遠隔制御機器を使用しないでユーザが両手で携帯型電子機器を保持することができるので、シーンを選択する際の多大な自由度や相応の機械的安定性が提供できる。また、本発明によれば、画像の撮影に要する時間が低減される。これは、ボタンを押して行うよりも素早くユーザが事象に反応できるようにする。その結果、ユーザが欲する的確な瞬間の撮影チャンスをより多く持つことになる。
【００５０】
異なった撮影ユニット、ディスプレイ、キー及びボタンは既に多くの携帯型電子機器に存在しているので、必要とされる追加の機能だけがソフトウェアとして提供される。これは、本発明が低い追加コストで製造され得ることを意味している。
【００５１】
上述したもの以外に、本発明に施すことができる変形は複数ある。１つの目だけを静止画像撮影ユニットの制御に使用し、その目の瞬きだけで静止画像を撮影することも可能である。当然ながら、左目だけの瞬きがズームアウトに使用され、右目がズームインに使用され得る。また、静止画像撮影機器の他の機能を瞬きで制御することも可能である。また、顔の他の領域、目に代えて或いは目に加えて例えば鼻が、静止画像撮影ユニットの制御に使用可能である。更にまた、ユーザの頭よりも他の部位、例えばユーザの腕や手であっても良い。そのため、本発明は、ビデオ撮影ユニットを介して被写体を検出し追跡し、静止画像撮影ユニットの制御に使用される、その被写体の領域の変化を検出することを対象としている。更にまた、本発明は、上述した使用されるボタンの位置や遠隔制御を起動させたり、遠隔制御モードを脱する指示を与えるために専用ボタンを使用することに限定されない。他の方法として、例えばキーパッドの使用や音声認識の使用を、この目的のために提供され得る。そのため、何らかの触覚或いは音声入力ユニットが、指示を与え、遠隔制御モードを脱するために使用され得る。
【００５２】
電話機の撮影制御ユニットは、通常は１つ以上のプロセッサと共に、この撮影制御ユニットの機能を実行するためのプログラムコードを含むプログラムメモリ装置の形式で提供される。また、このプログラムコードは、ＣＤ−ＲＯＭディスク、メモリースティック、或いは他の適切なデータ担持体のような、機器にロードされて本発明を実行するコンピュ-タプログラムプロダクトにて提供され得る。そのような媒体の１つが図５に概略的に示され、機器のプログラムコードが提供され得るＣＤ−ＲＯＭディスク６０を示している。更にまた、プログラムコードは外部のサーバから提供されたり、サーバから電話機へダウンロードされ得る。
【００５３】
更にまた、ビデオ画像撮影ユニットが静止画像撮影能力を有し、静止画像撮影ユニットがビデオ画像撮影能力を有することを了知すべきである。よって、上述した遠隔制御は、静止画像に限定されず、ビデオ撮影時にも適用され得る。更にまた、ユーザにシーンを提示することは必ずしも必要ない。
【００５４】
よって、本発明は、以下の特許請求の範囲によって限定されるだけである。
【図１】
2010530144.tif 000003
【図２】
2010530144.tif 000004
【図３】
2010530144.tif 000005
【図４】
2010530144.tif 000006
【図５】
2010530144.tif 000007
【手続補正書】
【提出日】平成20年12月27日(2008.12.27)
【手続補正１】
【補正対象書類名】特許請求の範囲
【補正対象項目名】全文
【補正方法】変更
【補正の内容】
【特許請求の範囲】
【請求項１】
携帯型電子機器（１０）の第１の画像撮影ユニット（２０）を遠隔制御する方法であって、
第２の画像撮影ユニット（１６）を介して、前記携帯型電子機器のユーザの頭である、被写体（２２）を光学的に検出し追跡する工程（２３）と、
前記第２の画像撮影ユニット（１６）を介して前記被写体（２２）の少なくとも１つの領域（２４）における少なくとも１つの変化を検出する工程（４４，４８，５２）と、
前記領域（２４）の前記変化に基づいて前記第１の画像撮影ユニット（２０）を制御する工程（４６，５０，５４）とを備える方法。
【請求項２】
前記携帯型電子機器（１０）のユーザにより行われた入力を介して遠隔制御を起動する指示を受信する工程（３６）を更に備える請求項１に記載の方法。
【請求項３】
前記指示に対する応答として、前記第１の画像撮影ユニット（２０）により観察されたシーン（２６）内の要素に、当該第１の画像撮影ユニット（２０）の焦点を合わせる工程（４２）を更に備える請求項２に記載の方法。
【請求項４】
前記被写体（２２）が検出され追跡されたときに前記ユーザに明示する工程（３４）を更に備える請求項１乃至３のいずれか１項に記載の方法。
【請求項５】
前記制御工程は、前記被写体（２２）内の少なくとも１つの変化に基づいて画像を撮影する工程（５４）を備える請求項１乃至３のいずれか１項に記載の方法。
【請求項６】
前記被写体に１を超えた変化がある場合、前記制御工程は、前記被写体（２２）内の他の変化に基づいて前記第１の画像撮影ユニット（２０）により観察されたシーン（２６）をズームする工程（４６，５０）を備える請求項５に記載の方法。
【請求項７】
前記第１の画像撮影ユニット（２０）により観察されたシーン（２６）をユーザに提示する工程（４６，５０）を更に備える請求項１乃至６のいずれか１項に記載の方法。
【請求項８】
前記領域は少なくとも１つの目（２４）を含む請求項１乃至７のいずれか１項に記載の方法。
【請求項９】
前記被写体の変化は、前記少なくとも１つの目（２４）の瞬きである請求項８に記載の方法。
【請求項１０】
携帯型電子機器（１０）であって、
第１の画像撮影ユニット（２０）と、
第２の画像撮影ユニット（１６）と、
前記第２の画像撮影ユニット（１６）を介して、前記携帯型電子機器のユーザの頭である、被写体（２２）を光学的に検出し追跡し、
前記第２の画像撮影ユニット（１６）を介して前記被写体（２２）の少なくとも１つの領域（２４）における少なくとも１つの変化を検出し、
前記領域（２４）の前記変化に基づいて前記第１の画像撮影ユニット（２０）を制御する画像撮影制御ユニット（２８）とを備える携帯型電子機器。
【請求項１１】
少なくとも１つのユーザ入力ユニット（１４，１５）を更に備え、
前記画像撮影制御ユニット（２８）は更に、前記ユーザ入力ユニット（１４）を介してユーザによりなされた入力を通して遠隔制御を起動する指示を受信する請求項１０に記載の携帯型電子機器（１０）。
【請求項１２】
前記画像撮影制御ユニット（２８）は更に、前記指示に対する応答として、前記第１の画像撮影ユニット（２０）により観察されたシーン（２６）内の要素に、当該第１の画像撮影ユニット（２０）の焦点を合わせる請求項１１に記載の携帯型電子機器（１０）。
【請求項１３】
少なくとも１つのユーザ出力ユニット（１２，１８）を更に備え、
前記ユーザ出力ユニット（１８）を介して前記被写体（２２）が検出され追跡されたときに前記ユーザに明示する請求項１０乃至１２のいずれか１項に記載の携帯型電子機器（１０）。
【請求項１４】
前記画像撮影制御ユニット（２８）は前記第１の画像撮影ユニット（２０）を制御するように構成されている場合、前記被写体（２２）内の少なくとも１つの変化に基づいて画像を撮影するように前記第１の画像撮影ユニットを制御する請求項１０乃至１３のいずれか１項に記載の携帯型電子機器（１０）。
【請求項１５】
前記被写体に１を超えた変化がある場合、前記画像撮影ユニット（２８）は前記第１の画像撮影ユニット（２０）を制御するように構成されている場合、前記被写体内の他の変化に基づいて前記第１の画像撮影ユニット（２０）により観察されたシーン（２６）をズームするように前記第１の画像撮影ユニット（２０）を制御する請求項１４に記載の携帯型電子機器（１０）。
【請求項１６】
少なくとも１つのユーザ出力ユニット（１２，１８）を更に備え、
前記画像撮影制御ユニット（２８）は更に、前記ユーザ出力ユニット（１２）を介して前記第１の画像撮影ユニット（２０）により観察されたシーン（２６）をユーザに提示する請求項１０乃至１５のいずれか１項に記載の携帯型電子機器（１０）。
【請求項１７】
前記領域は少なくとも１つの目（２４）を含む請求項１２乃至１６のいずれか１項に記載の携帯型電子機器（１０）。
【請求項１８】
前記被写体の変化は、前記少なくとも１つの目（２４）の瞬きである請求項１７に記載の携帯型電子機器（１０）。
【請求項１９】
前記携帯型電子機器は、携帯型通信機器である請求項１０乃至１８のいずれか１項に記載の携帯型電子機器（１０）。
【請求項２０】
前記携帯型電子機器は、携帯電話機である請求項１９に記載の携帯型電子機器（１０）。
【請求項２１】
携帯型電子機器（１０）の第１の画像撮影ユニット（２０）を遠隔制御する携帯型電子機器であって、
第２の画像撮影ユニット（１６）を介して、前記携帯型電子機器のユーザの頭である、被写体（２２）を光学的に検出し追跡する手段（２８）と、
前記第２の画像撮影ユニット（１６）を介して前記被写体（２２）の少なくとも１つの領域（２４）における少なくとも１つの変化を検出する手段（２８）と、
前記領域の前記変化に基づいて前記第１の画像撮影ユニット（２０）を制御する手段（２８）とを備える携帯型電子機器。
【請求項２２】
携帯型電子機器（１０）の第１の画像撮影ユニット（２０）を遠隔制御するコンピュータプログラムプロダクト（６０）であって、
前記携帯型電子機器にコンピュータプログラムコードがロードされた場合に、前記携帯型電子機器に、
第２の画像撮影ユニット（１６）を介して被写体（２２）を光学的に検出し追跡する工程と、
前記第２の画像撮影ユニット（１６）を介して前記被写体（２２）の少なくとも１つの領域（２４）における少なくとも１つの変化を検出する工程と、
前記領域の前記変化に基づいて前記第１の画像撮影ユニット（２０）を制御する工程とを実行させるためのプログラムプロダクト。
【手続補正書】
【提出日】平成21年10月6日(2009.10.6)
【手続補正１】
【補正対象書類名】特許請求の範囲
【補正対象項目名】全文
【補正方法】変更
【補正の内容】
【特許請求の範囲】
【請求項１】
携帯型電子機器（１０）の第１の画像撮影ユニット（２０）を遠隔制御する方法であって、
第２の画像撮影ユニット（１６）を介して、前記携帯型電子機器のユーザの頭である、被写体（２２）を光学的に検出し追跡する工程（２３）と、
前記第２の画像撮影ユニット（１６）を介して前記被写体（２２）の少なくとも１つの領域（２４）における少なくとも１つの変化を検出する工程（４４，４８，５２）と、
前記領域（２４）の前記変化に基づいて前記第１の画像撮影ユニット（２０）を制御する工程（４６，５０，５４）とを備える方法。
【請求項２】
前記携帯型電子機器（１０）のユーザにより行われた入力を介して遠隔制御を起動する指示を受信する工程（３６）を更に備える請求項１に記載の方法。
【請求項３】
前記指示に対する応答として、前記第１の画像撮影ユニット（２０）により観察されたシーン（２６）内の要素に、当該第１の画像撮影ユニット（２０）の焦点を合わせる工程（４２）を更に備える請求項２に記載の方法。
【請求項４】
前記被写体（２２）が検出され追跡されたときに前記ユーザに明示する工程（３４）を更に備える請求項１乃至３のいずれか１項に記載の方法。
【請求項５】
前記制御工程は、前記被写体（２２）内の少なくとも１つの変化に基づいて画像を撮影する工程（５４）を備える請求項１乃至３のいずれか１項に記載の方法。
【請求項６】
前記被写体に１を超えた変化がある場合、前記制御工程は、前記被写体（２２）内の他の変化に基づいて前記第１の画像撮影ユニット（２０）により観察されたシーン（２６）をズームする工程（４６，５０）を備える請求項５に記載の方法。
【請求項７】
前記第１の画像撮影ユニット（２０）により観察されたシーン（２６）をユーザに提示する工程（４６，５０）を更に備える請求項１乃至６のいずれか１項に記載の方法。
【請求項８】
前記領域は少なくとも１つの目（２４）を含む請求項１乃至７のいずれか１項に記載の方法。
【請求項９】
前記被写体の変化は、前記少なくとも１つの目（２４）の瞬きである請求項８に記載の方法。
【請求項１０】
携帯型電子機器（１０）であって、
第１の画像撮影ユニット（２０）と、
第２の画像撮影ユニット（１６）と、
前記第２の画像撮影ユニット（１６）を介して、前記携帯型電子機器のユーザの頭である、被写体（２２）を光学的に検出し追跡し、
前記第２の画像撮影ユニット（１６）を介して前記被写体（２２）の少なくとも１つの領域（２４）における少なくとも１つの変化を検出し、
前記領域（２４）の前記変化に基づいて前記第１の画像撮影ユニット（２０）を制御する画像撮影制御ユニット（２８）とを備える携帯型電子機器。
【請求項１１】
携帯型電子機器（１０）の第１の画像撮影ユニット（２０）を遠隔制御する携帯型電子機器であって、
第２の画像撮影ユニット（１６）を介して、前記携帯型電子機器のユーザの頭である、被写体（２２）を光学的に検出し追跡する手段（２８）と、
前記第２の画像撮影ユニット（１６）を介して前記被写体（２２）の少なくとも１つの領域（２４）における少なくとも１つの変化を検出する手段（２８）と、
前記領域の前記変化に基づいて前記第１の画像撮影ユニット（２０）を制御する手段（２８）とを備える携帯型電子機器。
【国際調査報告】
2010530144.tif 000008
2010530144.tif 000009
2010530144.tif 000010