(57)【要約】【課題】  手入力によらずに操作可能なカメラ付携帯電話端末、カメラ付携帯電話端末操作方法、及びカメラ付携帯電話端末操作プログラムを提供する。【解決手段】  画像データ入力部３へ入力された画像データから顔領域抽出部５によって顔領域を抽出し、抽出された顔領域から目、口端といった特徴点を抽出し、それらの特徴点を予め設定された特徴点の初期位置を比較し、その傾きからユーザがカメラ付携帯電話端末に対して要求している操作を検出することにより、ユーザは手入力によらずにカメラ付携帯電話端末を操作することができる。したがって、手に障害のある人にとって操作を支援することができる。【選択図】  図１
2006301906.tif 000002
【特許請求の範囲】
【請求項１】
使用者の身体の少なくとも一部を撮影する撮影手段を有するカメラ付携帯電話端末において、
前記撮影手段によって撮影された画像データから特徴点を抽出し、
抽出された特徴点の位置情報に応じて動作することを特徴とするカメラ付携帯電話端末。
【請求項２】
前記撮影手段によって撮影された前記画像データに含まれる所定領域から特徴点を抽出する特徴点抽出手段と、
前記特徴点抽出手段によって抽出された特徴点と予め設定された特徴点とが一致する否かを判断する判断手段と、
前記判断手段において前記特徴点抽出手段によって抽出された特徴点と予め設定された特徴点とが一致しないと判断されたとき、前記特徴点抽出手段によって抽出された特徴点の位置情報に基づいて前記カメラ付携帯電話端末を動作させる制御手段とを有することを特徴とする請求項１記載のカメラ付携帯電話端末。
【請求項３】
前記撮影手段によって撮影された前記画像データから前記所定領域を抽出する領域抽出手段と、
前記特徴点抽出手段は、前記領域抽出手段によって抽出された前記所定領域から特徴点を抽出することを特徴とする請求項２記載のカメラ付携帯電話端末。
【請求項４】
前記制御手段は、予め設定された特徴点に対する前記特徴点抽出手段によって抽出された特徴点の傾きによりユーザが期待する動作を検出することを特徴とする請求項２又は３記載のカメラ付携帯電話端末。
【請求項５】
前記制御手段は、前記特徴点抽出手段による特徴点の有無によりユーザが期待する動作を検出することを特徴とする請求項２から４のいずれか１項記載のカメラ付携帯電話端末。
【請求項６】
使用者の身体の少なくとも一部を撮影する撮影手段を有するカメラ付携帯電話端末のカメラ付携帯電話端末操作方法であって、
前記撮影手段によって撮影された画像データから特徴点を抽出する工程と、
抽出された特徴点の位置情報に応じて動作する工程を有することを特徴とするカメラ付携帯電話端末操作方法。
【請求項７】
前記撮影手段によって撮影された前記画像データに含まれる所定領域から特徴点を抽出する特徴点抽出工程と、
前記特徴点抽出工程によって抽出された特徴点と予め設定された特徴点とが一致する否かを判断する判断工程と、
前記判断工程において前記特徴点抽出工程によって抽出された特徴点と予め設定された特徴点とが一致しないと判断されたとき、前記特徴点抽出工程によって抽出された特徴点の位置情報に基づいて前記カメラ付携帯電話端末を動作させる制御工程とを有することを特徴とする請求項６記載のカメラ付携帯電話端末操作方法。
【請求項８】
前記撮影手段によって撮影された前記画像データから前記所定領域を抽出する領域抽出工程と、
前記特徴点抽出工程は、前記領域抽出工程によって抽出された前記所定領域から特徴点を抽出することを特徴とする請求項７記載のカメラ付携帯電話端末操作方法。
【請求項９】
使用者の身体の少なくとも一部を撮影する撮影手段を有するカメラ付携帯電話端末のカメラ付携帯電話端末操作プログラムであって、
前記撮影手段によって撮影された画像データから特徴点を抽出する処理と、
抽出された特徴点の位置情報に応じて動作する処理を有することを特徴とするカメラ付携帯電話端末操作プログラム。
【請求項１０】
前記撮影手段によって撮影された前記画像データに含まれる所定領域から特徴点を抽出する特徴点抽出処理と、
前記特徴点抽出処理によって抽出された特徴点と予め設定された特徴点とが一致する否かを判断する判断処理と、
前記判断処理において前記特徴点抽出処理によって抽出された特徴点と予め設定された特徴点とが一致しないと判断されたとき、前記特徴点抽出処理によって抽出された特徴点の位置情報に基づいて前記カメラ付携帯電話端末を動作させる制御処理とを有することを特徴とする請求項９記載のカメラ付携帯電話端末操作プログラム。
【請求項１１】
前記撮影手段によって撮影された前記画像データから前記所定領域を抽出する領域抽出処理と、
前記特徴点抽出処理は、前記領域抽出処理によって抽出された前記所定領域から特徴点を抽出することを特徴とする請求項１０記載のカメラ付携帯電話端末操作プログラム。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、カメラ付携帯電話端末、カメラ付携帯電話端末操作方法、及びカメラ付携帯電話端末操作プログラムに関し、特に、手入力によらずに操作可能なカメラ付携帯電話端末、カメラ付携帯電話端末操作方法、及びカメラ付携帯電話端末操作プログラムに関する。
【背景技術】
【０００２】
携帯情報処理端末としては、電子手帳、あるいはＰＤＡ（Personal digital Assistants）と称されているスケジュール管理等が可能な携帯型情報機器、携帯電話装置、携帯ゲーム機、さらにはノートパソコン等が考えられる。
【０００３】
しかし、カメラ付きの携帯電話端末、ＰＨＳ（Personal Handyphone System）、ＰＤＡ（個人向け携帯型情報通信機器）等の携帯端末装置の多くは、操作する手段として手入力を用いており、その操作は手に障害をもつ人にとって困難性を伴う場合が多い。
【０００４】
特許文献１では、従来の２次元ユーザインターフェース制御手段を備えた携帯情報処理装置に比べて操作キーを増加させずに、３次元ユーザインターフェース制御手段を備えた形態情報処理装置が提案されている。
【０００５】
特許文献２では、画像データ入力手段から入力された画像データから自動的に顔パーツを抽出し、抽出した顔パーツに対してフィルタ処理を施すことにより顔の表情を変更した画像を作成することができる顔画像処理装置及びシステムが提案されている。
【特許文献１】特開２００２−３５１６０３号公報
【特許文献２】特開２００４−２４６６７３号公報
【発明の開示】
【発明が解決しようとする課題】
【０００６】
しかし、上記の発明は以下の問題を有している。
【０００７】
特許文献１記載の発明は、顔画像を撮影し、顔画像データより顔の特定点間の距離を判定し、顔の構成要素間の距離に応じて３次元画像の奥行き方向のフォーカシング位置を制御することにより操作キーの増加を回避しているが、撮影した画像データに基づいて携帯電話端末自体を操作することはできない。
【０００８】
また、特許文献２記載の発明は、撮影した顔画像データから目、鼻、唇、眉などの特徴点を抽出し、顔画像を美しく加工する技術が開示されているが、それらの特徴点を利用して携帯電話端末を操作する技術については説明されていない。
【０００９】
そこで、本発明は、従来携帯電話を操作する手段として手入力のみが用いられていたが、カメラ付携帯電話端末によって撮影した画像データから顔の眼、口端といった特徴点を検出し、その特徴点の情報を用いてカメラ付き携帯電話端末を操作することにより、手入力によらずにカメラ付携帯電話端末を操作することができ、かつ、手に障害のある人にとって操作を支援するカメラ付携帯電話端末、カメラ付携帯電話端末操作方法、及びカメラ付携帯電話端末操作プログラムを提案することを目的としている。
【課題を解決するための手段】
【００１０】
請求項１記載の発明は、使用者の身体の少なくとも一部を撮影する撮影手段を有するカメラ付携帯電話端末において、前記撮影手段によって撮影された画像データから特徴点を抽出し、抽出された特徴点の位置情報に応じて動作することを特徴とする。
【００１１】
請求項２記載の発明は、請求項１記載のカメラ付携帯電話端末において、前記撮影手段によって撮影された前記画像データに含まれる所定領域から特徴点を抽出する特徴点抽出手段と、前記特徴点抽出手段によって抽出された特徴点と予め設定された特徴点とが一致する否かを判断する判断手段と、前記判断手段において前記特徴点抽出手段によって抽出された特徴点と予め設定された特徴点とが一致しないと判断されたとき、前記特徴点抽出手段によって抽出された特徴点の位置情報に基づいて前記カメラ付携帯電話端末を動作させる制御手段とを有することを特徴とする。
【００１２】
請求項３記載の発明は、請求項２記載のカメラ付携帯電話端末において、前記撮影手段によって撮影された前記画像データから前記所定領域を抽出する領域抽出手段と、前記特徴点抽出手段は、前記領域抽出手段によって抽出された前記所定領域から特徴点を抽出することを特徴とする。
【００１３】
請求項４記載の発明は、請求項２又は３記載のカメラ付携帯電話端末において、前記制御手段は、予め設定された特徴点に対する前記特徴点抽出手段によって抽出された特徴点の傾きによりユーザが期待する動作を検出することを特徴とする。
【００１４】
請求項５記載の発明は、請求項２から４のいずれか１項記載のカメラ付携帯電話端末において、前記制御手段は、前記特徴点抽出手段による特徴点の有無によりユーザが期待する動作を検出することを特徴とする。
【００１５】
請求項６記載の発明は、使用者の身体の少なくとも一部を撮影する撮影手段を有するカメラ付携帯電話端末のカメラ付携帯電話端末操作方法であって、前記撮影手段によって撮影された画像データから特徴点を抽出する工程と、抽出された特徴点の位置情報に応じて動作する工程を有することを特徴とする。
【００１６】
請求項７記載の発明は、請求項６記載のカメラ付携帯電話端末操作方法において、前記撮影手段によって撮影された前記画像データに含まれる所定領域から特徴点を抽出する特徴点抽出工程と、前記特徴点抽出工程によって抽出された特徴点と予め設定された特徴点とが一致する否かを判断する判断工程と、前記判断工程において前記特徴点抽出工程によって抽出された特徴点と予め設定された特徴点とが一致しないと判断されたとき、前記特徴点抽出工程によって抽出された特徴点の位置情報に基づいて前記カメラ付携帯電話端末を動作させる制御工程とを有することを特徴とする。
【００１７】
請求項８記載の発明は、請求項７記載のカメラ付携帯電話端末操作方法において、前記撮影手段によって撮影された前記画像データから前記所定領域を抽出する領域抽出工程と、前記特徴点抽出工程は、前記領域抽出工程によって抽出された前記所定領域から特徴点を抽出することを特徴とする。
【００１８】
請求項９記載の発明は、使用者の身体の少なくとも一部を撮影する撮影手段を有するカメラ付携帯電話端末のカメラ付携帯電話端末操作プログラムであって、前記撮影手段によって撮影された画像データから特徴点を抽出する処理と、抽出された特徴点の位置情報に応じて動作する処理を有することを特徴とする。
【００１９】
請求項１０記載の発明は、請求項９記載のカメラ付携帯電話端末操作プログラムにおいて、前記撮影手段によって撮影された前記画像データに含まれる所定領域から特徴点を抽出する特徴点抽出処理と、前記特徴点抽出処理によって抽出された特徴点と予め設定された特徴点とが一致する否かを判断する判断処理と、前記判断処理において前記特徴点抽出処理によって抽出された特徴点と予め設定された特徴点とが一致しないと判断されたとき、前記特徴点抽出処理によって抽出された特徴点の位置情報に基づいて前記カメラ付携帯電話端末を動作させる制御処理とを有することを特徴とする。
【００２０】
請求項１１記載の発明は、請求項１０記載のカメラ付携帯電話端末操作プログラムにおいて、前記撮影手段によって撮影された前記画像データから前記所定領域を抽出する領域抽出処理と、前記特徴点抽出処理は、前記領域抽出処理によって抽出された前記所定領域から特徴点を抽出することを特徴とする。
【発明の効果】
【００２１】
本発明は、従来携帯電話端末を操作する手段として手入力のみが用いられていたが、カメラ付携帯電話端末によって撮影した画像データから顔の眼、口端といった特徴点を検出し、その特徴点の情報を用いてカメラ付き携帯電話端末を操作することにより、手入力によらずにカメラ付携帯電話端末を操作することができる。
【発明を実施するための最良の形態】
【００２２】
以下に、本発明の一実施形態に係るカメラ付携帯電話端末の構成及び動作について説明する。
【００２３】
図１は、本実施形態に係るカメラ付携帯電話端末の回路構成を表すブロック図である。
【００２４】
本実施形態に係るカメラ付携帯電話端末１は、カメラ部２、画像データ入力部３、画像データ記憶部４、顔領域抽出部５、顔特徴点抽出部６、操作部７、及び制御部８を有して構成される。
【００２５】
カメラ部２は、被写体を撮影し、カメラ付携帯電話端末１内に取り込む。
【００２６】
画像データ入力部３は、携帯電話端末１に搭載されたカメラにより撮影された対象人物画像データの入力を受け付け、画像データ記憶部４に該画像データを格納する。
【００２７】
画像データ記憶部４は、画像データ入力部３から入力された画像データを記憶する。
【００２８】
顔領域抽出部５は、画像データ記憶部４に格納された画像データから顔領域を検出し、顔の特徴点を検出するための前処理を行なう。
【００２９】
顔特徴点抽出部６は、顔領域抽出部５で画像データのうち顔領域と判断された領域に対して、予め設定されている眼、口端といった顔の特徴点の画像データを用いてパターンマッチングを行い、画像データに含まれる顔の特徴点を検出する。
【００３０】
操作部７は、顔特徴点抽出部６で検出した顔の特徴点の位置情報からユーザが期待する動作を読み取り、カメラ付携帯電話端末１を操作する。
【００３１】
制御部８は、カメラ付携帯電話端末１が有する各部の動作を制御する。
【００３２】
次に、本実施形態に係るカメラ付携帯電話端末１の具体的な動作について説明する。
【００３３】
以下、図２を用いて携帯電話端末のカメラにより画像データを取得し、被写体の顔領域を抽出するまでの具体的な動作について説明する。
【００３４】
まず、ユーザはカメラ付携帯電話端末１により被写体の顔の画像データを取得しなければならない。そして、カメラ付携帯電話端末１のユーザは、カメラ付携帯電話端末１に搭載されるカメラ部２のレンズを被写体の顔の前に配置し、撮影された画像データの中に眼、口端といった顔の特徴点が存在するよう準備し、被写体を撮影する（ステップＳ２００）。そして、画像データ入力部３において画像データの入力を受け付け、制御部８は入力された画像データを画像データ記憶部４に格納する（ステップＳ２０１）。
【００３５】
次に、制御部８は画像データを読み出し、顔領域抽出部５によって画像データから所定の色領域（例えば、肌色領域）を抽出し、該領域を被写体の顔領域とする（ステップＳ２０２）。ここで、制御部８は、画像データから顔領域が適切に抽出されたか否かを判断する（ステップＳ２０３）。
【００３６】
ここで、顔領域が検出されなかった場合は（ステップＳ２０３／ＮＯ）、制御部８は操作部７に対して画像データの再取得を要求する（ステップＳ２０８）。制御部８から画像データの再取得を要求された場合（ステップＳ２０８）、操作部７は音声又は表示部を有する場合は視覚により被写体の撮り直しをユーザに対して要求する。
【００３７】
一方、顔領域が抽出された場合は（ステップＳ２０３／ＹＥＳ）、制御部８は画像データにおける顔領域の占有率を算出する（ステップＳ２０４）。そして、算出結果が予めユーザが操作部７を通じて設定した占有率に適合するか否かを判断する（ステップＳ２０５）。
【００３８】
算出された占有率が予め設定された占有率に適合しなかった場合は（ステップＳ２０５／ＮＯ）、占有率が適合するようズームイン/ズームアウト処理が行われ（ステップＳ２０７）、制御部８は操作部７に対して画像データの再取得を要求する（ステップＳ２０８）。制御部８から画像データの再取得を要求された場合（ステップＳ２０８）、操作部７は音声又は表示部を有する場合は視覚により被写体の撮り直しをユーザに対して要求する。
【００３９】
算出された占有率が予め設定された占有率に適合した場合は（ステップＳ２０５／ＹＥＳ）、制御部８は画像データが適切に入力されたと判断し、画像データからの顔領域の抽出を終了する（ステップＳ２０６）。
【００４０】
以上の処理により、携帯電話端末のカメラにより画像データを取得し、被写体の顔領域を抽出するまでの処理を終了する。
【００４１】
次に、上述の画像データから顔領域を抽出する処理が完了すると、顔特徴点抽出部６により顔領域から眼、口端などの特徴点を抽出し、抽出した特徴点を抽出する処理（図３に示す）が実行される。
【００４２】
まず、眼の検出を行なう準備として、右眼、左眼の探索範囲を算出・決定する（ステップＳ３０１）。ここで、前回の特徴点の抽出処理において使用した右眼、左眼の位置情報を使用する場合は、その位置を中心とした一定の範囲を探索範囲とする。一方、新たに探索範囲を算出する場合は、右眼の探索範囲を顔領域の左半分、左眼の探索範囲を顔領域の右半分とする。
【００４３】
探索範囲が決定すると（ステップＳ３０１）、まず、右眼の探索範囲に対し予め保持されている右眼の画像データを用いて、パターンマッチングにより右眼の検出を行なう（ステップＳ３０２）。その際、マッチングの度合いがある閾値以下である場合、右眼は検出できなかったと判断する（つまり右眼を閉じていると判断する）（ステップＳ３０３）。右目のパターンマッチングが終了すると、同様に左眼の探索範囲に対し予め保持しておいた左眼の画像データを用いて、パターンマッチングにより左眼の検出を行なう（ステップＳ３０２）。その際、マッチングの度合いがある閾値以下である場合左眼は検出できなかったと判断する（つまり左眼を閉じていると判断する）（ステップＳ３０３）。
【００４４】
眼検出処理（ステップＳ３０２）により右眼、左眼のどちらも検出できなかった場合（ステップＳ３０３／ＮＯ）、制御部８は操作部７に対して画像データの再取得を要求する（ステップＳ３０８）。制御部８から画像データの再取得を要求された場合（ステップＳ３０８）、操作部７は音声又は表示部を有する場合は視覚により被写体の撮り直しをユーザに対して要求する。
【００４５】
一方、右眼、左眼のどちらか一方でも検出できた場合（ステップＳ３０３／ＹＥＳ）、口端の検出を行なう準備として、右口端、左口端の探索範囲を算出・決定する（ステップＳ３０４）。なお、前回の右口端、左口端の検出処理に使用された口端の位置情報を使用する場合は、その位置を中心とした一定の範囲を検索範囲として決定する。一方、前回の右口端、左口端の検出処理に使用された口端の位置情報を使用しない場合は、右口端の検索範囲を顔領域の左半分、左口端の検索範囲を顔領域の右半分とする。
【００４６】
探索範囲が決定すると（ステップＳ３０４）、右口端の探索範囲に対し予め設定されている右口端の画像データを用いて、パターンマッチングにより右口端の検出を行なう（ステップＳ３０５）。その際、マッチングの度合いがある閾値以下である場合、右口端は検出できなかったと判断する（ステップＳ３０６／ＮＯ）。同様に左口端の探索範囲に対しあらかじめ保持しておいた左口端の部分画像データを用いて、パターンマッチングにより左口端の検出を行なう（ステップＳ３０５）。その際、マッチングの度合いがある閾値以下である場合、左口端は検出できなかったと判断する（ステップＳ３０６／ＮＯ）。口端検出処理により両口端を検出できなかった場合（ステップＳ３０６／ＮＯ）、制御部８は操作部７に対して画像データの再取得を要求する（ステップＳ３０８）。制御部８から画像データの再取得を要求された場合（ステップＳ３０８）、操作部７は音声又は表示部を有する場合は視覚により被写体の撮り直しをユーザに対して要求する。
【００４７】
一方、両口端を検出できた場合（ステップＳ３０６／ＹＥＳ）、制御部８は顔領域から抽出した眼、口端などの特徴点を抽出する処理を終了する（ステップＳ３０７）。なお、予め設定されている特徴点の初期位置を変更する場合、または未だ特徴点の初期位置が設定されていない場合も、上述と同様の処理により特徴点の抽出が行われ、抽出された特徴点が初期位置として設定される。
【００４８】
以上の処理により、顔特徴点抽出部６によって顔領域から眼、口端等の特徴点が抽出される。
【００４９】
次に、上述の顔特徴点抽出部６によって抽出された特徴点を用いて実際にカメラ付携帯電話端末１を操作する処理の流れについて説明する。
【００５０】
まず、既に設定されている初期位置により特徴点の検出を行なうか否かを決定する（ステップＳ４０１）。今回の撮影が最初の撮影であった場合又は初期位置を変更したい場合は（ステップＳ４０１／ＹＥＳ）、図２及び３を用いて説明した顔特徴点抽出部６において抽出した特徴点の位置を顔の特徴点の初期位置として設定する（ステップＳ４０２）。既に設定されている初期位置を用いて特徴点の抽出を行なう場合は（ステップＳ４０１／ＮＯ）、まず、該初期設定に基づいて操作対象の画像データから右目を検出する（ステップＳ４０３）。
【００５１】
右目の検出の結果、右目が検出できなかった場合（つまり右眼を閉じている場合）（ステップＳ４０３／ＮＯ）、“決定”操作を予約する（ステップＳ４０４）。一方、右目が検出できた場合は（ステップＳ４０３／ＹＥＳ）、左眼の検出を実行する（ステップＳ４０５）。左目が検出できなかった場合（つまり左眼を閉じている場合）（ステップＳ４０５／ＮＯ）、“キャンセル”操作を予約する（ステップＳ４０６）。一方、左目が検出できた場合（ステップＳ４０５／ＹＥＳ）、顔の傾きを求める（ステップＳ４０７）。具体的には、今回検出された全ての特徴点の位置が初期位置の特徴点位置付近に存在するか否かにより顔の傾きを判断する。そして、今回検出された全ての特徴点の位置が初期位置の特徴点位置付近に存在する場合は、顔の傾きは“なし”（図５に示す）に設定する。また、今回検出された全ての特徴点の位置が初期位置の特徴点位置付近に存在しない場合は、それぞれ顔の傾きを“上”、“下”、“右”、又は“左”（図５に示す）に設定する（ステップＳ４０７）。
【００５２】
顔の傾きが設定されると（ステップＳ４０７）、特徴点の初期位置として設定されている顔の傾きと比較し、異なるか否かを判断する（ステップＳ４０８）。その結果、両者が一致した場合は（ステップＳ４０８／ＮＯ）、顔特徴点抽出部６は操作部７に対して画像データの再取得を要求する（ステップＳ５０５）。顔特徴点抽出部６から画像データの再取得を要求された場合（ステップＳ５０５）、操作部７は音声又は表示部を有する場合は視覚により被写体の撮り直しをユーザに対して要求する。
【００５３】
一方、両者が一致しなかった場合（ステップＳ４０８／ＹＥＳ）、かつステップＳ４０７において設定された顔の傾きが“なし”であるか否かを判断する（ステップＳ４０９）。ここで、顔の傾きが“なし”に設定されている場合（ステップＳ４０９／ＮＯ）、顔特徴点抽出部６は操作部７に対して画像データの再取得を要求する（ステップＳ５０５）。一方、顔の傾きに“なし”以外に設定されている場合（ステップＳ４０９／ＹＥＳ）、設定されている顔の傾きにあわせて“カーソル移動”操作を予約する（ステップＳ５００）。例えば、顔の傾きに“上”、“下”、“右”、“左”が設定されている場合、それぞれ“上へカーソル移動”、“下へカーソル移動”、“右へカーソル移動”、“左へカーソル移動”操作を予約する（ステップＳ５００）。
【００５４】
ステップＳ５００における操作の予約が完了すると、前回の操作において実行された操作と今回予約された操作とが異なるか否かを判断する（ステップＳ５０１）。そして、前回の操作において実行された操作と今回予約された操作とが異なる場合は（ステップＳ５０１／ＹＥＳ）、予約された操作を実行し（ステップＳ５０１）、顔特徴点抽出部６は操作部７に対して画像データの再取得を要求する（ステップＳ５０５）。一方、今回予約された操作と前回の操作において実行された操作とが等しい場合（ステップＳ５０１／ＹＥＳ）、前回の操作が“キャンセル”操作でないかが確認される（ステップＳ５０３）。
【００５５】
前回の操作が“キャンセル”操作でない場合は（ステップＳ５０３／ＹＥＳ）、顔特徴点抽出部６は操作部７に対して画像データの再取得を要求する（ステップＳ５０５）。一方、前回の操作が“キャンセル”操作である場合（ステップＳ５０３／ＮＯ）、操作支援システムを終了する（ステップＳ５０４）。
【００５６】
なお、本実施形態に係るカメラ付携帯電話端末１においては、画像データを通じて操作できる機能は、“カーソルの移動”、“キャンセル”、“決定”、及び“システムの終了”について説明したが、他の動作についても同様に実行可能である。
【００５７】
以上の構成によれば、従来携帯電話を操作する手段として手入力のみが用いられていたが、カメラ付携帯電話端末によって撮影した画像データから顔の眼、口端といった特徴点を検出し、その特徴点の情報を用いてカメラ付き携帯電話端末を操作することにより、手入力によらずにカメラ付携帯電話端末を操作することができる。したがって、手に障害のある人にとって操作を支援することができる。また、眼、口端といった顔の中で検出しやすく個人差の少ない特徴点を検出することで安定した特徴点の検出を実現することができる。
【図面の簡単な説明】
【００５８】
【図１】本実施形態に係るカメラ付携帯電話端末の構成を示すブロック図である。
【図２】画像データから顔領域を抽出する処理のフローチャートである。
【図３】顔領域から特徴点を抽出する処理のフローチャートである。
【図４】特徴点を利用してカメラ付携帯電話端末を操作する処理のフローチャートである。
【図５】特徴点によるカメラ付携帯電話端末への操作を要求する動作例である。
【符号の説明】
【００５９】
１    カメラ付携帯電話端末
２    カメラ部
３    画像データ入力部
４    画像データ記憶部
５    顔領域抽出部
６    顔特徴点抽出部
７    操作部
８    制御部
【図１】
2006301906.tif 000003
【図２】
2006301906.tif 000004
【図３】
2006301906.tif 000005
【図４】
2006301906.tif 000006
【図５】
2006301906.tif 000007