(57)【要約】【目的】  使用態様に即して使用電力を節約可能な省電力機能を備えた携帯端末装置を提供する。【解決手段】  情報データを受信する通信部と、上記通信部により受信した情報データを表示する表示器と、操作者の顔を画像データとして取り込む撮像器と、上記画像データから表示器の表示面に対する当該操作者の顔面の角度を検出して所定角度以上であるか否かを判別する角度検出器と、当該操作者の顔面の角度が所定角度以上であると判別されたときに、表示器の表示輝度を低減させる輝度調整器と、を有する。【選択図】  図３
2005236597.tif 000002
【特許請求の範囲】
【請求項１】
携帯端末装置であって、
情報データを受信する通信部と、
前記通信部により受信した情報データを表示する表示器と、
操作者の顔を撮像して得られる画像データを取り込む撮像器と、
前記画像データから前記表示器の表示面に対する前記操作者の顔面の角度を検出して所定角度以上であるか否かを判別する角度検出器と、
前記操作者の顔面の角度が所定角度以上であると判別されたときに、前記表示器の表示輝度を低減させる輝度調整器と、を有することを特徴とする携帯端末装置。
【請求項２】
前記輝度調整器は、前記表示面に対する前記操作者の顔面の角度が第１所定角度以上であると判別されたときに前記表示器の表示輝度を低減させるとともに、前記表示器の表示輝度を低減させた後、前記顔面の角度が第２所定角度未満であると判別されたとき、前記表示器の表示輝度を低減前の輝度に復帰させることを特徴とする請求項１に記載の携帯端末装置。
【請求項３】
前記第２所定角度は前記第１所定角度とは異なることを特徴とする請求項１に記載の携帯端末装置。
【請求項４】
前記角度検出器は、操作者の顔面を含む面を確定するための顔面上の複数の特徴点を検出し、当該検出された特徴点に基づいて前記表示面に対する前記操作者の顔面の角度を検出することを特徴とする請求項１に記載の携帯端末装置。
【請求項５】
前記角度検出器は、検出された特徴点に基づいて前記操作者の顔面を含む面を確定できるか否かを判別する判別器を有し、前記操作者の顔面を含む面を確定できないと判別された場合には、前記輝度調整器は、前記表示器の表示輝度を低減させることを特徴とする請求項４に記載の携帯端末装置。
【請求項６】
前記角度検出器は、前記画像データのフレームごとに前記操作者の顔面の角度を検出して所定角度以上であるか否かを判別することを特徴とする請求項１に記載の携帯端末装置。
【請求項７】
前記通信部は携帯電話をなす電話通信回路を有することを特徴とする請求項１に記載の携帯端末装置。
【請求項８】
前記通信部はＴＶ電話をなす無線通信回路を有し、前記角度検出器はＴＶ電話実行中の前記操作者の顔面の角度を検出することを特徴とする請求項１に記載の携帯端末装置。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、携帯端末装置に関し、特に省電力機能を備えた携帯端末装置に関する。
【背景技術】
【０００２】
近年、携帯電話などの携帯端末装置の普及と共に、表示エリアの大型化が進んでいる。これにより携帯端末装置に搭載される液晶ディスプレイ等のディスプレイ装置も大型化し、さらに多くの電力を消費するようになっている。また、携帯端末装置に搭載されるカメラ、ＧＰＳ（Global Positioning System）等のハードウエアも増加している。一方、携帯電話などは、充電池を電源として用いており、搭載されるハードウエアの増加によって電池の消耗も早くなっている。さらに、最近では、テレビチューナや、ＴＶ電話機能の搭載によって音声通信処理の他にも動画像の圧縮・伸長処理などに多くの電力を消費する。
【０００３】
通常、携帯電話では、ディスプレイ装置による消費電力がもともと大きい上に、上記したような新たな機能の付加、増強によってプロセッサへも高い処理性能が要求されるようになっている。処理性能の向上のため、プロセッサ（ＣＰＵ）のクロックを上げて処理速度を速めたり、実装方式によっては複数のプロセッサによる並行処理を行うなど、より一層消費電力が大きくなるという結果を招いている。
【０００４】
従来、ディスプレイ装置の消費電力を少なくするための省電力制御について検討されている（特許文献１、２参照）。携帯電話の省電力制御については、例えば、携帯電話の消費電力の最も大きなハードウエアであるディスプレイの輝度を、前回キー入力が有った時点から一定時間経過後に自動的に低下させる方法などが採られていた（例えば、特許文献１参照）。しかしながら、最近の携帯電話は、音声通話のみならず、電子メールやウェブサイトへのアクセスにも用いられるため、通信中にディスプレイを見ながらの操作も多い。このような場合であっても、消費電力を抑えるために一定時間が経過すると自動的にディスプレイの輝度を低下させる機能が働くが、電子メールやウェブサイトへのアクセス時には、輝度低下機能が働く前に次のキー入力操作が行われることが多く、輝度低下（省電力）機能が動作する頻度も低い。また、ＴＶ電話をする場合には、キー入力操作を行うことが少ないため、会話をしている最中にディスプレイの輝度低下動作が頻発し、画面が暗くなってしまう。かかる省電力動作を避けるため、定期的に何れかのキーを押す必要があり、不便であった。逆に、ＴＶ電話をしながらディスプレイから目を離して映像以外の物を見ている際には、ディスプレイの輝度を高くしておく必要がないにもかかわらず、無駄な電力を消費している場合があった。
【特許文献１】特開２０００−２５３１４１号公報（第４頁、図２）
【特許文献２】特開２００１−３５０５４９号公報（第３頁、図１）
【発明の開示】
【発明が解決しようとする課題】
【０００５】
上記したように、従来技術においては、携帯電話の使用態様に即した省電力機能は提供されておらず、不必要に省電力動作が働いたり、必要なときに省電力動作が機能しないなどの問題があった。
【０００６】
本発明はかかる点に鑑みてなされたものであり、使用態様に即した省電力機能を備えた携帯端末装置を提供することを目的とする。
【課題を解決するための手段】
【０００７】
本発明による携帯端末装置は、情報データを受信する通信部と、上記通信部により受信した情報データを表示する表示器と、操作者の顔を撮像して得られる画像データを取り込む撮像器と、上記画像データから表示器の表示面に対する当該操作者の顔面の角度を検出して所定角度以上であるか否かを判別する角度検出器と、当該操作者の顔面の角度が所定角度以上であると判別されたときに、表示器の表示輝度を低減させる輝度調整器と、を有することを特徴としている。
【発明を実施するための最良の形態】
【０００８】
以下、本発明の実施例について図面を参照しつつ詳細に説明する。なお、以下に示す実施例において、等価な構成要素には同一の参照符を付している。
【実施例１】
【０００９】
図１は、本発明の実施例１である携帯端末装置１０の構成を模式的に示すブロック図であり、図２は当該携帯端末装置１０の外観を模式的に示す図である。以下においては、携帯端末装置１０がカメラ付き携帯電話である場合について説明するが、携帯ＴＶ電話、携帯型の情報端末装置（ＰＤＡ）など同様な機能を有する装置であってもよい。
【００１０】
携帯端末装置１０は、カメラ１１、入力装置１２、ディスプレイ装置１３、通信装置（又は通信部）１４及びプロセッサ（ＣＰＵ）１５を有する。ＣＰＵ１５の制御の下、カメラ１１は時系列的に連続した静止画、あるいは動画を取得する機能を備えている。入力装置１２は、携帯端末装置１０のユーザがキー入力操作を行うための装置である。図２に示すように、携帯端末装置１０の操作パネル１２Ａ上に、種々の操作キー１２Ｂが設けられている。すなわち、これらの操作キー１２Ｂが全体として入力装置１２の機能を有する。
【００１１】
ディスプレイ装置１３は、ＣＰＵ１５の処理結果や、通信装置１４からのデータを表示する。なお、通信装置１４は無線通信をなす無線通信回路を有し、また、ＴＶ電話を行うためのＴＶ電話機能を有していても良い。ディスプレイ装置１３は、例えば液晶ディスプレイとして構成されている。また、ディスプレイ装置１３には、ディスプレイコントローラ１７が設けられていてもよい。ディスプレイコントローラ１７は、ＣＰＵ１５から供給されたデータをディスプレイ装置１３に表示するため、あるいは、ＣＰＵ１５の制御に従い、ディスプレイ装置１３への表示又は非表示、あるいは、画面全体の輝度を制御する機能を有している。なお、かかるディスプレイコントローラ１７は、単独ではなく、ＣＰＵ１５内部に設けられていてもよい。
【００１２】
携帯端末装置１０には、メモリ１８が設けられている。メモリ１８は、カメラ１１から取得した画像を格納する動的変更保存可能なメモリ領域として設けられている。
【００１３】
また、携帯端末装置１０には、プログラム格納部２０が設けられており、携帯端末装置１０の動作に用いられるソフトウエアがプログラム格納部２０からＣＰＵ１５にロードされる。なお、メモリ１８、プログラム格納部２０はＣＰＵ１５内部に設けられていてもよい。
【００１４】
また、携帯端末装置１０には、ユーザが通話を行うためのマイク２１が設けられている。
【００１５】
尚、上記した装置はデータバス１９を介して接続されており、またＣＰＵ１５によって制御される。
【００１６】
以下に、携帯端末装置１０の動作について説明する。図３は、携帯端末装置１０のディスプレイ装置１３の輝度を制御する動作の手順を示すフローチャートである。ユーザがＴＶ電話の通話を行う場合を例に説明するが、ＴＶ電話に限らず、電話インターネット等にアクセスする場合であってもよい。
【００１７】
まず、ＣＰＵ１５によって、ＴＶ電話の通話中であるか否かが判別される（ステップＳ１１）。ステップＳ１１において通話中であると判別された場合には、ＣＰＵ１５の制御の下、カメラ１１によって携帯端末装置１０の外部の画像が取り込まれる（ステップＳ１２）。
【００１８】
ＣＰＵ１５は、カメラ１１によって取り込まれた画像データから、図４（ａ）及び図４（ｂ）にそれぞれ示すように、通話を行っているユーザ（操作者）が携帯端末装置１０のディスプレイ装置１３を見ているか（ａ）、あるいはディスプレイ装置１３を見ていないか（ｂ）を判別する。
【００１９】
より詳細には、ＣＰＵ１５は、プログラム格納部２０からロードされたプログラムによって解析を行う。まず、通話を行っているユーザ（操作者）の顔の面を表す特徴点を検出する（ステップＳ１３）。
【００２０】
図５は、ユーザ（操作者）の顔の特徴点が基準位置にある場合を示している。すなわち、図５は、例えば、基準位置における特徴点Ｐ１，Ｐ２，Ｐ３を示している。なお、以下においては説明の便宜のため、特徴点Ｐ１，Ｐ２，Ｐ３の位置についても同一の参照符を用いて示す。すなわち、特徴点の基準位置もまたＰ１，Ｐ２，Ｐ３であるとして説明する。
【００２１】
より具体的には、特徴点Ｐ１は、ユーザの口に関する特徴点であり、この図においては口に関する特徴点が４つ設定されている場合を示している。また、特徴点Ｐ２は、ユーザの目に関する特徴点であり、この図においては目に関する特徴点が２つ設定されている場合を示している。また、特徴点Ｐ３は、ユーザの眉に関する特徴点であり、この図においては眉に関する特徴点が４つ設定されている場合を示している。要するに、かかるユーザの顔の特徴点は、ユーザの顔の面（顔面を含む面）を確定できるように顔全体を表す特徴点が選ばれる。ＣＰＵ１５は、かかる特徴点に基づいてユーザの顔面が表示面に対してなす角度を算出する角度検出器１５Ａを有している。ＣＰＵ１５は、かかる検出結果に応じてディスプレイコントローラ１７を制御してディスプレイ装置１３の表示輝度を調整する。また、後に詳述するように、ＣＰＵ１５は、ユーザの顔面を含む面を確定できるか否かを判別する判別部１５Ｂ又は判別機能を有していてもよい。なお、設定される特徴点の基準（眉毛、目、鼻、口など）や、その数などは、ユーザの顔の特徴点位置の算出精度、算出に要する処理時間、特徴点の検出及び位置の算出に必要とされるメモリ容量などを考慮して適宜定めることができる。
【００２２】
ユーザの顔のディスプレイ装置１３に対する角度を含む特徴点の基準位置があらかじめ定められ、携帯端末装置１０内に格納されている。ＣＰＵ１５内の角度検出器１５Ａは、ユーザの顔の特徴点を検出し、格納されている特徴点の基準位置と比較してディスプレイ装置１３に対するユーザの顔の角度（向き）を算出する（ステップＳ１４）。例えば、図６に示すように、特徴点の位置がＰ１’，Ｐ２’，Ｐ３’であることが検出された場合、検出位置（Ｐ１’，Ｐ２’，Ｐ３’）を基準位置（Ｐ１，Ｐ２，Ｐ３）と比較し、ディスプレイ装置１３の表示面に対するユーザの顔面の角度を算出する。例えば、ユーザの顔面がディスプレイ装置１３の表示面に完全に正対している場合には、ユーザの顔面と表示面は平行であり、そのなす角は０度である。
【００２３】
つまり、ユーザ（操作者）の顔面が含まれる面を確定できるように顔面の特徴点が定められている。そして、操作者の顔面とディスプレイ装置１３の表示面とのなす角度（面と面とのなす角度）が算出されるのである。
【００２４】
次に、ＣＰＵ１５及び角度検出器１５Ａにより、当該算出された角度が所定の角度以上であるか否かが判別される（ステップＳ１５）。算出された角度が、所定角度（例えば、２０度）以上であれば、ＣＰＵ１５は、ユーザはディスプレイを見ていないと判断し、ディスプレイコントローラ１７に指示信号を送出してディスプレイ装置１３の輝度が低レベルであるように制御する（ステップＳ１６）。すなわち、ディスプレイ装置１３の輝度が高レベルであった場合には輝度を所定レベルまで低下させ、低レベルであった場合には輝度を維持するよう制御する。かかる制御によって、ＴＶ電話中に、カメラ１１から得られた映像から、ユーザの顔面の角度又は向きを検出し、例えば、ユーザの顔が正面（ディスプレイの表示面）から一定角度以上傾いている場合にはディスプレイを見ていないと判断し、自動的にディスプレイ装置１３の輝度を落として暗くする（すなわち、省電力モードにする）機能が実現される。
【００２５】
一方、ステップＳ１５において、算出された角度が所定角度未満であれば、ＣＰＵ１５は、ユーザはディスプレイを見ていると判断し、ディスプレイコントローラ１７に指示信号を送出してディスプレイ装置１３の輝度が高レベルであるように制御する（ステップＳ１７）。すなわち、ディスプレイ装置１３の輝度が低レベルであった場合には輝度を所定レベルまで増加させ、高レベルであった場合には輝度を維持するよう制御する。かかる制御によって、ディスプレイ装置１３の輝度を落として暗くなっている状態においてもカメラ１１から得られる映像から常にユーザの顔の向きを検出し、一定の角度以内の範囲で正面を向いていると判断した場合には、自動的にディスプレイ装置１３の輝度を上げて見やすい画面に復帰させる（すなわち、復帰モードにする）機能が実現される。
【００２６】
なお、上記復帰モードに移行するユーザの顔面の角度は、省電力モードにする移行する場合の角度とは異なっていても良い。例えば、省電力モードにする移行する場合のユーザの顔面の角度（第１所定角度）を２０度としたとき、復帰モードに移行するユーザの顔面の角度（第２所定角度）を２０度を超える値に設定しても良い。このように設定すると、ユーザが再度ディスプレイ装置１３を見る場合に、ユーザの顔の動きに先行して素早く元の輝度に復帰させることができる。また、この反対に、復帰モードに移行するユーザの顔面の角度（第２所定角度）を省電力モードに移行する場合のユーザの顔面の角度（第１所定角度）よりも小さい値に設定しても良い。このように設定すると、より省電力効果を高めることができる。
【００２７】
ステップＳ１１において通話中であると判別された場合には、上記した手順を繰り返し、輝度制御が継続して実行される。なお、ステップＳ１２における画像の取り込みは、画像のフレームごとに行われる。一方、ステップＳ１１において通話中ではない、すなわち、通話が終了したと判別された場合には、上記した輝度制御動作を終了する。
【００２８】
尚、ステップＳ１２における画像の取り込み及び角度の検出が、フレームごとに行われる場合について説明したが、適当な間隔で画像の取り込みが行われるようにしてもよい。例えば、消費電力、ユーザの見やすさなどを考慮した間隔で画像の取り込みを行うようにしてもよい。あるいは、例えば、数フレームごと、所定間隔（例えば、０．１秒）ごとに輝度を変更（高レベルから低レベルへ、又はその逆）するように制御を行うことにしてもよい。
【実施例２】
【００２９】
図７は、本発明の実施例２である携帯端末装置１０の動作手順を示すフローチャートである。
【００３０】
電話の通話中であるか否かを判別（ステップＳ１１）し、操作者の顔の撮像を行い（ステップＳ１２）、通話を行っている操作者の顔面を表す特徴点を検出する（ステップＳ１３）という手順は、上記した実施例の場合と同様である。
【００３１】
次に、ユーザの顔面を確定できるか否かが判別される（ステップＳ２１）。例えば、予め設定された特徴点のうち所定の特徴点が検出されないときは、ユーザの顔面を確定できないと判別する。あるいは、予め設定された特徴点のうち検出された特徴点の数が基準数よりも少ないときは、ユーザの顔面を確定できないと判別する。あるいは、かかる判別は、ユーザの顔面を確定できるように適宜定めることができる。
【００３２】
ステップＳ２１において、ユーザの顔面を確定できると判別された場合には、ステップＳ１４に移行し、実施例１の場合と同様にして、ステップＳ１４乃至ステップＳ１７を実行する。
【００３３】
ステップＳ２１において、ユーザの顔面を確定できないと判別された場合には、ステップＳ１６に移行し、ディスプレイ装置１３の輝度が低レベルであるように制御する（ステップＳ１６）。すなわち、ディスプレイ装置１３の輝度が高レベルであった場合には輝度を所定レベルまで低下させ、低レベルであった場合には輝度を維持するよう制御する。かかる制御によって、通話中に、カメラ１１から得られた映像から、ユーザの顔面を検知できない場合には自動的にディスプレイ装置１３の輝度を落として暗くする（すなわち、省電力モードにする）機能が実現される。
【００３４】
以上説明したように、携帯端末装置の使用態様に即した省電力機能を備えた携帯端末装置を提供することができる。
【図面の簡単な説明】
【００３５】
【図１】本発明の実施例１である携帯端末装置の構成を模式的に示すブロック図である。
【図２】図１の携帯端末装置の外観を模式的に示す図である。
【図３】携帯端末装置のディスプレイ装置の輝度を制御する動作の手順を示すフローチャートである。
【図４】通話を行っているユーザ（操作者）が携帯端末装置のディスプレイを見ている場合（ａ）、及びディスプレイを見ていない場合（ｂ）を示す図である。
【図５】ユーザ（操作者）の顔の特徴点が基準位置にある場合を示す図である。
【図６】ユーザの顔面の角度がディスプレイの表示面から傾いている場合を示す図である。
【図７】本発明の実施例２である携帯端末装置の動作手順を示すフローチャートである。
【符号の説明】
【００３６】
１０  携帯端末装置
１１  カメラ
１２  入力装置
１３  ディスプレイ装置
１４  通信装置
１５  プロセッサ（ＣＰＵ）
１５Ａ  角度検出器
１５Ｂ  判別部
１７  ディスプレイコントローラ
１８、２０  メモリ
【図１】
2005236597.tif 000003
【図２】
2005236597.tif 000004
【図３】
2005236597.tif 000005
【図４】
2005236597.tif 000006
【図５】
2005236597.tif 000007
【図６】
2005236597.tif 000008
【図７】
2005236597.tif 000009