(57)【要約】【課題】  ユーザの姿勢や使い方、携帯端末装置の持ち方に依存せずに、ユーザの顔画像の上下方向を検出し、ユーザの顔画像の上下方向に応じたディスプレイの表示を実現できる携帯端末装置を提供することを目的とする。【解決手段】  携帯端末装置１０１は、インカメラ１で撮影した顔画像から画像処理部部４により顔要素の位置情報を検出し、顔要素の位置情報に基づいて、ＣＰＵ部５が自端末に対するユーザの顔画像の上下方向を判断し、顔画像の上下方向に応じて画像の上下方向を表示画面における表示方向に制御し、画像を表示部６へ表示する。【選択図】        図１
2008177819.tif 000002
【特許請求の範囲】
【請求項１】
画像情報を表示する表示部と、
この表示部と同じ側に設けられた第一のカメラと、
この第一のカメラで撮影した顔画像情報から顔要素の位置情報を検出する顔要素検出手段と、
この顔要素検出手段で検出した前記顔要素の位置情報に基づいて前記顔画像の上下方向を判断する判断手段と
この判断手段により判断した前記顔画像の上下方向情報に応じて前記表示部における前記画像情報の表示方向を制御する制御手段とを備えた携帯端末装置。
【請求項２】
テレビ放送受信手段をさらに備え、表示部に表示する画像情報が、前記テレビ放送受信手段で受信したテレビ放送画像情報であることを特徴とする請求項１に記載の携帯端末装置。
【請求項３】
インターネット接続手段をさらに備え、表示部に表示する画像情報が、前記インターネット接続手段で取得した画像情報であることを特徴とする請求項１に記載の携帯端末装置。
【請求項４】
第一のカメラと反対側に設けられた第二のカメラをさらに備え、表示部に表示する画像情報が、前記第二のカメラで撮影された画像情報であることを特徴とする請求項１に記載の携帯端末装置。
【請求項５】
画像情報を表示する表示部と、
この表示部と同じ側に設けられた第一のカメラと、
この第一のカメラと反対側に設けられた第二のカメラと、
この第一のカメラで撮影した顔画像情報から顔要素の位置情報を検出する顔要素検出手段と、
この顔要素検出手段で検出した前記顔要素の位置情報に基づいて前記顔画像の上下方向を判断する判断手段と
前記第二のカメラで撮影された前記画像情報の表示の際に、前記第二のカメラで撮影された前記画像情報の表示方向が前記判断手段により判断した前記顔画像の上下方向を保持するように、前記第二のカメラで撮影された前記画像情報を記憶する画像情報記憶部とを備えた携帯端末装置。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、カメラ機能付き携帯端末装置に関し、ユーザの視認方向に応じて表示方向の変更を行う携帯端末装置に関する。
【背景技術】
【０００２】
従来のカメラ機能付き携帯端末装置においては、カメラ撮影を行う場合、縦撮影、横撮影は自動的に切り替わらず、メニュー操作にて、縦撮影モードと横撮影モードを手動で切り替えなければならない。また、テレビ放送の視聴やインターネット閲覧画面の表示を行う場合にも、縦表示、横表示は自動的に切り替わらず、手動で切替えなければならない。
【０００３】
特許文献１には、ジャイロセンサ等のセンサを利用し、カメラの傾き角度を電気的に検出して、カメラの傾き補正を迅速に行うとともに、安定な傾き検出動作を行うことができるカメラ機能付き携帯端末装置の構成が開示されている。
【０００４】
【特許文献１】特開２００４−２２８６８８号公報（００１９〜００３４段、図１）
【発明の開示】
【発明が解決しようとする課題】
【０００５】
しかしながら、上記従来の携帯端末装置では、実装面積やコストなどの制約により、搭載することが出来ない場合があるだけでなく、カメラで真下を撮影する場合、寝ながらテレビ放送の視聴する場合、寝ながらインターネット画面を閲覧する場合等、ジャイロセンサ等のセンサでは、ユーザの携帯端末装置の使い方、持ち方により、携帯端末装置の上下方向等を正しく判定ができないことがあるという問題があった。
【０００６】
本発明は、上記のような問題点を解決するためになされたものであり、ユーザの姿勢や使い方、携帯端末装置の持ち方に依存せずに、ユーザの顔画像の上下方向を検出し、ユーザの顔画像の上下方向に応じたディスプレイの表示を実現できる携帯端末装置を提供することを目的とする。
【課題を解決するための手段】
【０００７】
本発明に係る携帯端末装置は、画像情報を表示する表示部と、表示部と同じ側に設けられた第一のカメラと、第一のカメラで撮影した顔画像情報から顔要素の位置情報を検出する顔要素検出手段と、顔要素検出手段で検出した顔要素の位置情報に基づいて顔画像の上下方向を判断する判断手段と判断手段により判断した顔画像の上下方向情報に応じて、表示部における画像情報の表示方向を制御する制御手段とを備えたものである。
【発明の効果】
【０００８】
本発明によれば、カメラで撮影した顔画像に基づいて、自端末に対するユーザの顔画像の上下方向を判断し、顔画像の上下方向に応じて表示画面における画像の上下方向の表示方向を制御することにより、ユーザの姿勢や使い方、携帯端末装置の持ち方に依存せずに表示方向を顔画像の上下方向に合わせることができる。
【発明を実施するための最良の形態】
【０００９】
以下、本発明に係る携帯端末装置の各種実施の形態について、図面に基づいて説明する。
実施の形態１．
図１は、本実施の形態１における携帯端末装置１０１の構成を示すブロック図である。図１において、携帯端末装置１０１は、第一のカメラとしてのインカメラ１、第二のカメラとしてのアウトカメラ２、画像情報記憶部としてのメモリ部３、顔要素検出手段としての画像処理部４、判断手段及び制御手段としてのＣＰＵ（Ｃｅｎｔｒａｌ  Ｐｒｏｃｅｓｓｉｎｇ  Ｕｎｉｔ）部５、表示部６、テレビ放送受信手段としてのテレビ放送信号受信部７、テレビ用アンテナ８、通信データの送受信及びインターネット接続手段としての通信制御部９、通信用アンテナ１０、カメラ制御部１１、操作部１２、音声処理部１３、スピーカ１４、マイクロフォン１５から構成されている。図２は、携帯端末装置１０１の外観図であり、図２（ａ）は正面図、図２（ｂ）は背面図を示す。
【００１０】
インカメラ１は、表示部６と同じ側に設けられ（図２（ａ））、ＣＰＵ部５の指示、又は操作部１２からの指示により起動されると、カメラ制御部１１を介して制御され、静止画又は動画の撮影を行う。
【００１１】
アウトカメラ２は、表示部６及びインカメラ１と反対側に設けられ（図２（ｂ））、操作部１２からの入力操作により、静止画又は動画撮影モードが指示されると、ＣＰＵ部５により起動される。アウトカメラ２は、カメラ制御部１１を介して制御され、表示部６にプレビュー画像を表示し、操作部１２からの入力操作により、外部被写体等の静止画又は動画の撮影を行う。
【００１２】
メモリ部３は、通常の携帯端末装置で必要とされるプログラム、画像情報や映像情報等のデータ、及び設定情報等を記憶する。メモリ部３は、操作部１２からの入力操作により、通信制御部９により電子メールやインターネット等で取得した文字情報、静止画情報、又は動画情報や、インカメラ１により撮影された顔画像等の静止画情報又は動画情報、アウトカメラ２により撮影された外部被写体等の静止画情報又は動画情報、テレビ放送信号受信部７により取得した映像データ及びデータ放送用データ等の画像情報等を記憶する。
【００１３】
なお、メモリ部３は、データの読み書きを自由に行なえるが電源を切ると内容が消え、ＣＰＵ部５や画像処理部４のワークエリアとしても使用できる揮発性メモリと、データの消去・書き込みを自由に行うことができ、電源を切っても内容が消えない不揮発性メモリからなる。不揮発性メモリは、携帯端末装置１０１のすべてのプログラムやデータが保管されている内蔵のメモリと外部機器とデータ交換を行うための可搬性のメモリからなる。
【００１４】
画像処理部４は、インカメラ１及びアウトカメラ２によりメモリ部３に記憶された顔画像や、外部被写体等の静止画情報又は動画情報を、最適な形式に変換する。画像処理部４は、顔画像情報については、顔要素として目、鼻、口等の特徴を抽出した後、それぞれの位置情報を検出する。他の静止画情報及び動画情報については、ＪＰＥＧやＭＰＥＧ等の所望の形式に変換する。
【００１５】
ＣＰＵ部５は、メモリ部３に記憶されているプログラム及び操作部１２からの入力操作に従って各種処理を行う。ＣＰＵ部５は、インカメラ１で撮影された顔画像情報がメモリ部３に一時的に格納すると、画像処理部４に、顔要素の位置情報の検出を指示する。
【００１６】
また、ＣＰＵ部５は、顔要素の位置情報に基づいて、ユーザの顔画像の上下方向を判断し、自端末の傾きに係りなく、通信制御部９、アウトカメラ２、インカメラ１、及びテレビ放送信号受信部７により取得した画像等の上下方向が顔画像の上下方向に一致するように表示方向を制御して、画像情報等を表示部６に表示させる。
【００１７】
また、ＣＰＵ部５は、通信制御部９により電子メールで受信した文字情報、静止画情報及び動画情報、アウトカメラ２により撮影された静止画情報及び動画情報、及びテレビ放送信号受信部７により受信し録画したテレビ画像情報等を、ＪＰＥＧやＭＰＥＧ等の所望の形式へ変換してメモリ部３に記憶する。
【００１８】
表示部６は、入力操作に用いる操作画面や、メモリ部３に記憶されている文字情報、静止画情報、又は動画情報等を、ＣＰＵ部５の制御により表示する。
【００１９】
テレビ放送信号受信部７は、操作部１２からの入力操作により、テレビ用アンテナ部８を通してテレビ放送信号を受信し、受信した放送波をフロントエンド部１６にて復調した後、バックエンド部１７にて、映像データとデータ放送用データに分離する。テレビ放送信号受信部７で分離された映像データは、画像処理部４にてデコードされ、メモリ部３に一時的に格納される。データ放送用データは、ＣＰＵ部５にてデコードされ、映像データと組み合わせて、表示部６にて表示される。
【００２０】
通信制御部９は、操作部１２からの入力操作により、通信用アンテナ１０を通して、電話や電子メール等の通信データとしての音声情報、文字情報、静止画情報、又は動画情報等を送受信する。また、通信制御部９は、操作部１２からの入力操作によりブラウザが起動されると、インターネットを介して、音声情報、文字情報、静止画情報、又は動画情報等を送受信する。
【００２１】
受信された音声情報は、音声処理部１３にて復号化処理、Ｄ／Ａ（Ｄｉｇｉｔａｌ／Ａｎａｌｏｇ）変換後、スピーカ１４から再生される。また、マイクロフォン１５から入力された音声は、音声処理部１３でＡ／Ｄ（Ａｎａｌｏｇ／Ｄｉｇｉｔａｌ）変換され、符号化後、送信される
【００２２】
受信された文字情報、静止画情報、又は動画情報は、メモリ部３に一時的に格納され、ＣＰＵ部５にて処理された後、表示部６に表示されたり、音声処理部１３を介し、スピーカ１４にて再生されたり、メモリ部３に保存されたりする。
【００２３】
操作部１２は、「０」キー〜「９」キーのテンキーや、「上」キー、「下」キー、「左」キー、「右」キー等一般的な携帯電話等の携帯端末装置が備えている各種キーからなり、表示部６に表示される操作画面と連動して、入力操作に応じたキー入力信号を出力し、ＣＰＵ部５等に指示を送る。
【００２４】
次に、本実施の形態１における携帯端末装置１０１の動作について説明する。まず、図３のフローチャートに従い、通信制御部９により電子メールで受信された通信データとしての文字情報、静止画情報、又は動画情報等を表示部６に表示する場合について示す。携帯端末装置１０１は、操作部１２の一つの電源ボタンからの入力操作により、電源をＯＮにして待ち受け状態にある。
【００２５】
通信制御部９が電子メールを着信し（Ｓ３０１）、操作部１２からの入力操作により、通信データとしての文字情報、静止画情報、又は動画情報等の取得が指示されると（Ｓ３０２）、ＣＰＵ部５は、通信制御部９により、受信した文字情報、静止画情報、又は動画情報等をメモリ部３に保存させると共に、カメラ制御部１１によりインカメラ１を静止画撮影モードとして起動させる（Ｓ３０３）。
【００２６】
続いて、ＣＰＵ部５は、インカメラ１によりユーザの顔画像を撮影し、カメラ制御部１１を介し、メモリ部３に顔画像データを一時格納する（Ｓ３０４）。一時格納した顔画像データから、ＣＰＵ部５は、画像処理部４により、目、鼻、口等の特徴を抽出させ、顔要素の位置情報を検出し、顔要素の位置情報に基づいて、ユーザの顔画像の上下方向を判断する（Ｓ３０５）。次いで、ＣＰＵ部５は、顔画像の上下方向に、文字、静止画、又は動画等の上下方向が一致するように表示方向を制御して（Ｓ３０６）、文字情報、静止画情報、又は動画情報等を表示部６に表示させる（Ｓ３０７）。
【００２７】
ユーザの携帯端末装置１０１の保持状態による表示方向の制御例を、図４に示す。図４（ａ）は、通常の縦方向の保持状態における表示方向の制御例であり、図４（ｂ）は、上下が反転した縦方向の保持状態における表示方向の制御例である。また、図４（ｃ）は、横方向の保持状態における表示方向の制御例である。
【００２８】
ＣＰＵ部５は、通信データの表示を終了するか否かを操作部１２からの入力操作により判断し（Ｓ３０８）、通信データの表示を終了する指示があるまで、所定時間毎に、インカメラ１による顔画像撮影（Ｓ３０４）、ユーザの顔画像の上下方向の判断（Ｓ３０５）、顔画像の上下方向への表示方向の制御（Ｓ３０６）、表示部６への通信データの表示（Ｓ３０７）、の一連の動作を繰り返す。通信データの表示を終了する指示があると、通信データの表示動作を終了する。
【００２９】
次に、図５のフローチャートに従い、通信制御部９によりブラウザを用いて受信したインターネット上のホームページの情報を閲覧する画面情報を、表示部６に表示する場合について示す。携帯端末装置１０１は、操作部１２の一つの電源ボタンからの入力操作により、電源をＯＮにして待ち受け状態にある。
【００３０】
インターネットの利用が、操作部１２からの入力操作により指示されると、ＣＰＵ部５は、ブラウザを起動する（Ｓ５０１）と共に、カメラ制御部１１によりインカメラ１を静止画撮影モードとして起動させる（Ｓ５０２）。
【００３１】
続いて、ＣＰＵ部５は、インカメラ１によりユーザの顔画像を撮影し、カメラ制御部１１を介し、メモリ部３に顔画像データを一時格納する（Ｓ５０３）。一時格納した顔画像データから、ＣＰＵ部５は、画像処理部４により、目、鼻、口等の特徴を抽出させ、顔要素の位置情報を検出し、顔要素の位置情報に基づいて、ユーザの顔画像の上下方向を判断する（Ｓ５０４）。次いで、ＣＰＵ部５は、顔画像の上下方向に、インターネットの閲覧画面等の上下方向が一致するように表示方向を制御して（Ｓ５０５）、インターネットの閲覧画面情報等を表示部６に表示させる（Ｓ５０６）。
【００３２】
ＣＰＵ部５は、インターネットの閲覧画面情報の表示を終了するか否かを操作部１２からの入力操作により判断し（Ｓ５０７）、インターネットの閲覧画面情報の表示を終了する指示があるまで、所定時間毎に、インカメラ１による顔画像撮影（Ｓ５０３）、ユーザの顔画像の上下方向の判断（Ｓ５０４）、顔画像の上下方向への表示方向の制御（Ｓ５０５）、表示部６へのインターネットの閲覧画面情報等の表示（Ｓ５０６）、の一連の動作を繰り返す。
【００３３】
インターネットの閲覧画面情報の表示を終了する指示があると、ＣＰＵ部５は、ブラウザを終了して（Ｓ５０８）、インターネットの閲覧画面情報の表示を終了する。
【００３４】
次に、図６のフローチャートに従い、アウトカメラ２により撮影された静止画情報を表示部６に表示する場合について示す。携帯端末装置１０１は、操作部１２の一つの電源ボタンからの入力操作により、電源をＯＮにして待ち受け状態にある。
【００３５】
アウトカメラ２による静止画撮影モードが、操作部１２からの入力操作により指示されると、ＣＰＵ部５は、カメラ制御部１１、アウトカメラ２、及びインカメラ１について設定の初期化を行い起動する（Ｓ６０１）。起動後、ＣＰＵ部５は、カメラ制御部１１により、アウトカメラ２をプレビュー状態とし、プレビュー画像情報を表示可能なデータ形式に変換して、表示部６に表示する（Ｓ６０２）。
【００３６】
操作部１２の一つのボタンが撮影ボタンとして押下されると、ＣＰＵ部５は、カメラ制御部１１を介してアウトカメラ２により、外部被写体等の静止画を撮影し（Ｓ６０３）、静止画情報をメモリ部３に一時的に格納させる。
【００３７】
続いて、ＣＰＵ部５は、インカメラ１によりユーザの顔画像を撮影し、カメラ制御部１１を介し、メモリ部３に顔画像データを一時格納する（Ｓ６０４）。一時格納した顔画像データから、ＣＰＵ部５は、画像処理部４により、目、鼻、口等の特徴を抽出させ、顔要素の位置情報を検出し、顔要素の位置情報に基づいて、ユーザの顔画像の上下方向を判断する（Ｓ６０５）。次いで、ＣＰＵ部５は、顔画像の上下方向に、静止画の上下方向が一致するように表示方向を制御して（Ｓ６０６）、静止画情報を表示部６に表示させる（Ｓ６０７）。
【００３８】
ＣＰＵ部５は、静止画の表示を終了するか否かを操作部１２からの入力操作により判断し（Ｓ６０８）、静止画の表示を終了する指示があるまで、所定時間毎に、インカメラ１による顔画像撮影（Ｓ６０４）、ユーザの顔画像の上下方向の判断（Ｓ６０５）、顔画像の上下方向への表示方向の制御（Ｓ６０６）、表示部６への静止画像情報の表示（Ｓ６０７）、の一連の動作を繰り返す。
【００３９】
静止画の表示を終了する指示があると、ＣＰＵ部５は、静止画情報を保存するか否かを問い合わせる画面を表示部６に表示し（Ｓ６０９）、操作部１２からの入力操作の指示により保存しない場合、撮影した静止画情報を、一時的に格納しているメモリ部３から消去して、静止画情報の表示を終了する。
【００４０】
保存する場合、ＣＰＵ部５は、撮影した静止画情報を、一時的に格納しているメモリ部３の揮発性メモリ部から不揮発性メモリ部に移動して保存し（Ｓ６１０）、静止画情報の表示を終了する。
【００４１】
さらに、ＣＰＵ部５は、静止画撮影モードを終了するか否かを操作部１２からの入力操作により判断し（Ｓ６１１）、静止画撮影モードを終了する指示があるまで、撮影ボタンの押下による静止画撮影から静止画の保存まで（Ｓ６０３〜Ｓ６１０）の動作を繰り返す。静止画撮影モードを終了する指示があると、ＣＰＵ部５は、カメラ制御部１１、アウトカメラ２、及びインカメラ１の動作を停止し（Ｓ６１２）、静止画撮影モードを終了する。
【００４２】
次に、図７のフローチャートに従い、テレビ放送信号受信部７により受信した映像データとデータ放送用データをテレビ画像情報として表示部６に表示する場合について示す。携帯端末装置１０１は、操作部１２の一つの電源ボタンからの入力操作により、電源をＯＮにして待ち受け状態にある。
【００４３】
テレビ放送の視聴が、操作部１２からの入力操作により指示されると、ＣＰＵ部５は、テレビ放送視聴用アプリケーションを起動する（Ｓ７０１）と共に、カメラ制御部１１によりインカメラ１を静止画撮影モードとして起動させる（Ｓ７０２）。
【００４４】
続いて、ＣＰＵ部５は、インカメラ１によりユーザの顔画像を撮影し、カメラ制御部１１を介し、メモリ部３に顔画像データを一時格納する（Ｓ７０３）。一時格納した顔画像データから、ＣＰＵ部５は、画像処理部４により、目、鼻、口等の特徴を抽出させ、顔要素の位置情報を検出し、顔要素の位置情報に基づいて、ユーザの顔画像の上下方向を判断する（Ｓ７０４）。次いで、ＣＰＵ部５は、顔画像の上下方向に、テレビ画像の上下方向が一致するように表示方向を制御して（Ｓ７０５）、テレビ画像情報を表示部６に表示させる（Ｓ７０６）。
【００４５】
ＣＰＵ部５は、テレビ画像情報の表示を終了するか否かを操作部１２からの入力操作により判断し（Ｓ７０７）、テレビ画像情報の表示を終了する指示があるまで、所定時間毎に、インカメラ１による顔画像撮影（Ｓ７０３）、ユーザの顔画像の上下方向の判断（Ｓ７０４）、顔画像の上下方向への表示方向の制御（Ｓ７０５）、表示部６へのテレビ画像情報の表示（Ｓ７０６）、の一連の動作を繰り返す。
【００４６】
テレビ画像情報の表示を終了する指示があると、ＣＰＵ部５は、テレビ放送視聴用アプリケーションを停止して（Ｓ７０８）、テレビ画像情報の表示を終了する。
【００４７】
次に、図８のフローチャートに従い、メモリ部３に保存しているデータ、例えば、通信制御部９により電子メール及びインターネット取得した文字情報、静止画情報及び動画情報、アウトカメラ２及びインカメラ１により撮影された静止画情報や動画情報、又はテレビ放送信号受信部７により受信し録画したテレビ画像情報等を、表示部６に表示する場合について示す。携帯端末装置１０１は、操作部１２の一つの電源ボタンからの入力操作により、電源をＯＮにして待ち受け状態にある。
【００４８】
メモリ部３に保存したデータの閲覧が、操作部１２からの入力操作により指示されると、ＣＰＵ部５は、閲覧するためのビュワーアプリケーションを起動する（Ｓ８０１）と共に、カメラ制御部１１によりインカメラ１を静止画撮影モードとして起動させる（Ｓ８０２）。
【００４９】
続いて、ＣＰＵ部５は、インカメラ１によりユーザの顔画像を撮影し、カメラ制御部１１を介し、メモリ部３に顔画像データを一時格納する（Ｓ８０３）。一時格納した顔画像データから、ＣＰＵ部５は、画像処理部４により、目、鼻、口等の特徴を抽出させ、顔要素の位置情報を検出し、顔要素の位置情報に基づいて、ユーザの顔画像の上下方向を判断する（Ｓ８０４）。次いで、ＣＰＵ部５は、顔画像の上下方向に、保存データとしての画像等の上下方向が一致するように表示方向を制御して（Ｓ８０５）、画像情報等を表示部６に表示させる（Ｓ８０６）。
【００５０】
ＣＰＵ部５は、保存データの閲覧画面情報の表示を終了するか否かを操作部１２からの入力操作により判断し（Ｓ８０７）、保存データの閲覧画面情報の表示を終了する指示があるまで、所定時間毎に、インカメラ１による顔画像撮影（Ｓ８０３）、ユーザの顔画像の上下方向の判断（Ｓ８０４）、顔画像の上下方向への表示方向の制御（Ｓ８０５）、表示部６への保存データとしての画像情報等の表示（Ｓ８０６）、の一連の動作を繰り返す。
【００５１】
保存データの閲覧画面情報の表示を終了する指示があると、ＣＰＵ部５は、ビュワーアプリケーションを終了して（Ｓ８０８）、保存データの閲覧画面情報の表示を終了する。
【００５２】
以上のように、本実施の形態１では、携帯端末装置１０１は、インカメラ１で撮影した顔画像から画像処理部部４により顔要素の位置情報を検出し、顔要素の位置情報に基づいて、ＣＰＵ部５が自端末に対するユーザの顔画像の上下方向を判断し、顔画像の上下方向に応じて表示画面における画像の上下方向の表示方向を制御するようにしたので、ユーザの姿勢や使い方、携帯端末装置の持ち方に依存せずに表示方向を顔画像の上下方向に合わせることができる。
【００５３】
なお、本実施の形態１では、電子メール等の通信データ、インターネット閲覧画面情報、カメラ画像情報、及びテレビ画像情報を表示する場合について説明したが、これらに限るものではない。携帯端末装置１０１に搭載されるすべてのソフトウェア等による表示に用いることもでき、同様の効果を得ることができる。例えば、オペレーションシステム（Ｏｐｅｒａｔｉｏｎ  Ｓｙｓｔｅｍ：ＯＳ）のような基本ソフトの操作画面情報にも用いることができる。
【００５４】
実施の形態２．
実施の形態１の携帯端末装置１０１においては、通信制御部９等で取得したデータを画像情報として表示する際に表示方向を制御する場合について示した。実施の形態２では、アウトカメラ２で取得したデータを、表示方向を制御して保存する場合について示す。
【００５５】
図９は、本実施の形態２における携帯端末装置２０１の構成を示すブロック図である。図９において、携帯端末装置２０１は、実施の形態１の構成において、ＣＰＵ部５の替わりにＣＰＵ部１８を備えたものである。
【００５６】
判断手段及び制御手段としてのＣＰＵ部１８は、実施の形態１の機能に加えて、アウトカメラ２やインカメラ１で撮影された静止画情報及び動画情報等をメモリ部３に記憶させる場合に、顔要素の位置情報に基づいて判断したユーザの顔画像の上下方向情報に応じて、静止画情報及び動画情報等の上下方向の表示方向を制御し、メモリ部３に記憶させる。
【００５７】
その他の構成に関しては、実施の形態１と同様であり、相当部分には図１と同一符号を付して説明を省略する。
【００５８】
次に、図１０のフローチャートに従い、本実施の形態２における携帯端末装置２０１の動作について説明する。携帯端末装置２０１は、操作部１２の一つの電源ボタンからの入力操作により、電源をＯＮにして待ち受け状態にある。
【００５９】
アウトカメラ２による動画撮影モードが、操作部１２からの入力操作により指示されると、ＣＰＵ部１８は、カメラ制御部１１、アウトカメラ２、及びインカメラ１について設定の初期化を行い起動する（Ｓ１００１）。起動後、ＣＰＵ部１８は、カメラ制御部１１により、アウトカメラ２をプレビュー状態とし、プレビュー画像情報を表示可能なデータ形式に変換して、表示部６に表示する（Ｓ１００２）。
【００６０】
操作部１２の一つのボタンが撮影開始ボタンとして押下されると、まず、ＣＰＵ部１８は、インカメラ１によりユーザの顔画像を撮影し、カメラ制御部１１を介し、メモリ部３に顔画像データを一時格納する（Ｓ１００３）。一時格納した顔画像データから、ＣＰＵ部１８は、画像処理部４により、目、鼻、口等の特徴を抽出させ、顔要素の位置情報を検出し、顔要素の位置情報に基づきユーザの顔画像の上下方向を判断する（Ｓ１００４）。
【００６１】
続いて、ＣＰＵ部１８は、カメラ制御部１１を介してアウトカメラ２により、動画の撮影を開始する（Ｓ１００５）。ＣＰＵ部１８は、顔要素の位置情報により判断した顔画像の上下方向を動画情報再生時の表示方向として認識し、顔画像の上下方向に再生時の所定の表示方向、例えば通常の縦方向の保持状態における表示方向に一致するように制御して（Ｓ１００６）、動画情報をメモリ部３に保存する（Ｓ１００７）。操作部１２の一つのボタンが撮影停止ボタンとして押下されると、ＣＰＵ部１８は、動画の撮影を停止する（Ｓ１００８）。
【００６２】
ＣＰＵ部１８は、動画撮影モードを終了するか否かを操作部１２からの入力操作により判断し（Ｓ１００９）、動画撮影モードを終了する指示があるまで、操作部１２の一つのボタンが撮影開始ボタンとして押下される毎に、インカメラ１による顔画像撮影（Ｓ１００３）、ユーザの顔画像の上下方向の判断（Ｓ１００４）、アウトカメラでの動画撮影開始（Ｓ１００５）、顔画像の上下方向を動画情報再生時の表示方向として所定方向へ制御（Ｓ１００６）、メモリ３への動画情報の保存（Ｓ１００７）、アウトカメラ２での動画撮影停止（Ｓ１００８）、の一連の動作を繰り返す。動画撮影モードを終了する指示があると、ＣＰＵ部５は、カメラ制御部１１、アウトカメラ２、及びインカメラ１の動作を停止し（Ｓ１０１０）、動画撮影モードを終了する。
【００６３】
動画情報の表示方向を顔画像の上下方向に合わせて保存しておくと、動画情報を再生する場合に、携帯端末装置１０１では通常の縦方向の保持状態における表示方向で動画情報を表示部６に表示することができ、通常の使用においては表示方向を制御する必要がなくなる。また、例えば、携帯端末装置２０１で撮影した動画情報をパーソナルコンピュータ（Ｐｅｒｓｏｎａｌ  Ｃｏｍｐｕｔｅｒ：ＰＣ）やテレビ（Ｔｅｌｅｖｉｓｉｏｎ  ｒｅｃｅｉｖｅｒ：ＴＶ）の画面等を通して見る際にも、画面の上下方向に合った表示方向で表示することができる。
【００６４】
以上のように、本実施の形態２では、携帯端末装置２０１は、顔要素の位置情報に基づいて、ＣＰＵ部１８が判断したユーザの顔画像の上下方向を画像再生時の表示方向として認識し、再生時の画像の上下方向が所定方向に一致するように制御して保存するようにしたので、ユーザの姿勢や使い方、携帯端末装置の持ち方に依存せずに撮影時の顔画像の上下方向を表示方向として保存でき、画像再生時には表示画面の上下方向に合った表示方向で表示することができる。
【００６５】
なお、本実施の形態２では、動画撮影モードでの撮影の場合について説明したが、静止画撮影モードの撮影の場合においても同様である。静止画の撮影時の顔画像の上下方向を表示方向として保存しておけば、ＰＣやＴＶの画面等を通して見る際にも表示画面の上下方向に合った表示方向で表示できる。
【００６６】
また、本実施の形態２では、動画撮影時の顔画像の上下方向を表示方向として、動画像の上下方向を所定方向に制御して保存したが、制御せずに動画情報を制御情報とともに保存するようにしてもよい。この場合、動画情報を再生する際に、動画撮影時の顔画像の上下方向を表示方向として動画像の上下方向を所定方向に制御して表示することができる。
【００６７】
また、本実施の形態では、インカメラ１による顔画像の撮影時に、メモリ部３に顔画像データを一時格納した後、画像処理部４により顔要素の位置情報を検出する場合について説明したが、保存せずにプレビュー画像から直接、顔要素の位置情報を検出するようにしてもよい。この場合、画像処理までの時間が短縮され、表示速度の向上を図ることができる。
【図面の簡単な説明】
【００６８】
【図１】本発明に係る携帯端末装置の実施の形態１の構成を示すブロック図である。
【図２】本発明に係る携帯端末装置の実施の形態１の構成を示す外観図である。
【図３】本発明に係る携帯端末装置の実施の形態１の動作を示すフローチャート図である。
【図４】本発明に係る携帯端末装置の実施の形態１の画面表示の一例を示す図である。
【図５】本発明に係る携帯端末装置の実施の形態１の他の動作を示すフローチャート図である。
【図６】本発明に係る携帯端末装置の実施の形態１の他の動作を示すフローチャート図である。
【図７】本発明に係る携帯端末装置の実施の形態１の他の動作を示すフローチャート図である。
【図８】本発明に係る携帯端末装置の実施の形態１の他の動作を示すフローチャート図である。
【図９】本発明に係る携帯端末装置の実施の形態２の構成を示すブロック図である。
【図１０】本発明に係る携帯端末装置の実施の形態２の動作を示すフローチャート図である。
【符号の説明】
【００６９】
１  インカメラ
２  アウトカメラ
３  メモリ部
４  画像処理部
５  ＣＰＵ部
６  表示部
７  テレビ放送信号受信部
９  通信制御部
【図１】
2008177819.tif 000003
【図２】
2008177819.tif 000004
【図３】
2008177819.tif 000005
【図４】
2008177819.tif 000006
【図５】
2008177819.tif 000007
【図６】
2008177819.tif 000008
【図７】
2008177819.tif 000009
【図８】
2008177819.tif 000010
【図９】
2008177819.tif 000011
【図１０】
2008177819.tif 000012