(57)【要約】【課題】簡易な構成を用いて、相手先に応じて着信に対する応答をより好適に行うことができる携帯電子機器を提供すること。【解決手段】携帯電話機１は、通信部４２により着信を受け付けると、メインカメラ３３又はサブカメラ２３を起動させて、被写体を撮像させる撮像制御部４６２と、撮像された被写体の画像データから人物の顔を認識する顔認識部４６４と、認識された顔の表情を認識する表情認識部４６５と、認識された顔の表情に基づいて通信部４２により受け付けた着信に対して異なる態様で応答する通話制御部４６６とを備える。【選択図】図３
2011205475.tif 000002
【特許請求の範囲】
【請求項１】
撮像部と、
着信に係る信号を受け付ける通信部と、
前記通信部により着信を受け付けた相手先に関する情報を報知する報知部と、
前記通信部により着信を受け付けると、前記撮像部により被写体を撮像させる撮像制御部と、
前記撮像制御部の制御に従って撮像された前記被写体の画像データにおける人物の顔から当該顔の表情を認識する表情認識部と、
前記表情認識部により認識された前記顔の表情に基づいて前記通信部により受け付けた前記着信に対して異なる態様で応答する通話制御部とを備える携帯電子機器。
【請求項２】
前記表情認識部により認識された前記顔の表情が第１表情であるか否かを判定する表情判定部を更に備え、
前記通話制御部は、前記表情判定部により前記顔の表情が前記第１表情であると判定された場合には、前記通信部により受け付けた前記着信に対して予め設定された第１音声で応答し、前記表情判定部により前記顔の表情が前記第１表情ではないと判定された場合には、前記通信部により受け付けた前記着信に対して通話を行う請求項１に記載の携帯電子機器。
【請求項３】
前記通話は、ハンズフリー通話である請求項２に記載の携帯電子機器。
【請求項４】
前記表情判定部は、前記表情認識部により認識された前記顔の表情が第２表情であるか否かを判定し、
前記通話制御部は、前記表情判定部により前記顔の表情が前記第２表情であると判定された場合には、前記通信部により受け付けた前記着信に対して予め設定された第２音声で応答する請求項２に記載の携帯電子機器。
【請求項５】
前記通信部により着信を受け付けると、前記相手先に関する情報を前記報知部により第１態様で報知させ、前記表情認識部により前記顔の表情を認識すると、前記相手先に関する情報を前記報知部により第２態様で報知させる報知制御部を更に備える請求項１から４に記載の携帯電子機器。
【請求項６】
前記表情認識部は、前記撮像部により撮像された前記画像データから前記顔の表情と共に、人物の動作を認識し、
前記表情判定部は、前記表情認識部により認識された前記顔の表情が第３表情であり、かつ、前記人物の動作が所定動作であるか否かを判定し、
前記通話制御部は、前記顔の表情が第３表情であり、かつ、前記人物の動作が前記所定動作であると前記表情判定部により判定された場合には、前記通信部により受け付けた前記着信に対して前記第２音声で応答し、前記顔の表情が第３表情ではない、又は前記人物の動作が所定の動作ではないと前記表情判定部により判定された場合には、前記通信部により受け付けた前記着信に対して通話を行う請求項４に記載の携帯電子機器。
【請求項７】
前記通話は、ハンズフリー通話である請求項６に記載の携帯電子機器。
【請求項８】
前記表情認識部により前記顔の表情が認識された回数をカウントするカウント部と、
前記カウント部によりカウントされた前記回数を、前記顔の表情ごとに記憶する記憶部と、
第１表情が認識された回数が第１閾値を超えるか否かを判定する第１閾値判定部と、
第２表情が認識された回数が第２閾値を超えるか否かを判定する第２閾値判定部とを更に備え、
前記通話制御部は、前記第１表情が認識された回数が前記第１閾値を超える場合には、前記通信部により受け付けた前記着信に対して予め設定された第２音声で応答する請求項１に記載の携帯電子機器。
【請求項９】
前記通話制御部は、前記第２表情が認識された回数が前記第２閾値を超える場合には、前記通信部により受け付けた前記着信に対してハンズフリー通話を行う請求項８に記載の携帯電子機器。
【請求項１０】
前記通話制御部は、前記第２表情が認識された回数が前記第２閾値を超えず、前記第１表情が認識された回数が前記第１閾値を超えない場合には、前記通信部により受け付けた前記着信に対して予め設定された第１音声で応答する請求項８又は９に記載の携帯電子機器。
【請求項１１】
撮像部と、
着信を受け付ける通信部と、
前記通信部により着信を受け付けた相手先に関する情報を報知する報知部と、
着信を受け付けると、被写体を撮像させ、撮像した前記被写体の画像データから人物の顔を認識し、認識した前記顔の表情を認識し、認識した前記顔の表情に基づいて、受け付けた前記着信に対して異なる態様で応答する制御部とを備える携帯電子機器。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、撮像部を有する携帯電子機器に関する。
【背景技術】
【０００２】
近年、携帯電話機等の携帯電子機器は、広く普及しており、多様な状況において通話が可能となっている。一方で、携帯電子機器は、ユーザが通話を望まない状況においても着信を受け付けてしまう場合もある。そこで、ユーザが着信に対して通話するか否かを判断することができる携帯電子機器が提案されている（例えば、特許文献１参照）。
【０００３】
特許文献１には、着信を報知する情報と共に、相手先の重要度を示す情報を表示部に表示し、表示された情報をユーザが視認することにより、着信に対して通話するか否かをユーザが判断することができる携帯電子機器が開示されている。
【先行技術文献】
【特許文献】
【０００４】
【特許文献１】特開２００３−２１８９９５号公報
【発明の概要】
【発明が解決しようとする課題】
【０００５】
しかし、特許文献１に記載の携帯電子機器では、相手先の重要度を示す情報を作成し、着信を報知する情報と共に、相手先の重要度を示す情報を送信するための構成を新たに追加する必要があった。
【０００６】
そこで、本発明は、簡易な構成を用いて、相手先に応じて着信に対する応答をより好適に行うことができる携帯電子機器を提供することを目的とする。
【課題を解決するための手段】
【０００７】
本発明に係る携帯電子機器は、上記課題を解決するために、撮像部と、着信に係る信号を受け付ける通信部と、前記通信部により着信を受け付けた相手先に関する情報を報知する報知部と、前記通信部により着信を受け付けると、前記撮像部により被写体を撮像させる撮像制御部と、前記撮像制御部の制御に従って撮像された前記被写体の画像データにおける人物の顔から当該顔の表情を認識する表情認識部と、前記表情認識部により認識された前記顔の表情に基づいて前記通信部により受け付けた前記着信に対して異なる態様で応答する通話制御部とを備える。
【０００８】
また、前記携帯電子機器は、前記表情認識部により認識された前記顔の表情が第１表情であるか否かを判定する表情判定部を更に備え、前記通話制御部は、前記表情判定部により前記顔の表情が前記第１表情であると判定された場合には、前記通信部により受け付けた前記着信に対して予め設定された第１音声で応答し、前記表情判定部により前記顔の表情が前記第１表情ではないと判定された場合には、前記通信部により受け付けた前記着信に対して通話を行うことが好ましい。
【０００９】
また、前記通話は、ハンズフリー通話であることが好ましい。
【００１０】
また、前記表情判定部は、前記表情認識部により認識された前記顔の表情が第２表情であるか否かを判定し、前記通話制御部は、前記表情判定部により前記顔の表情が前記第２表情であると判定された場合には、前記通信部により受け付けた前記着信に対して予め設定された第２音声で応答することが好ましい。
【００１１】
また、前記携帯電子機器は、前記通信部により着信を受け付けると、前記相手先に関する情報を前記報知部により第１態様で報知させ、前記表情認識部により前記顔の表情を認識すると、前記相手先に関する情報を前記報知部により第２態様で報知させる報知制御部を備えることが好ましい。
【００１２】
また、前記表情認識部は、前記撮像部により撮像された前記画像データから前記顔の表情と共に、人物の動作を認識し、前記表情判定部は、前記表情認識部により認識された前記顔の表情が第３表情であり、かつ、前記人物の動作が所定動作であるか否かを判定し、前記通話制御部は、前記顔の表情が第３表情であり、かつ、前記人物の動作が前記所定動作であると前記表情判定部により判定された場合には、前記通信部により受け付けた前記着信に対して前記第２音声で応答し、前記顔の表情が第３表情ではない、又は前記人物の動作が所定の動作ではないと前記表情判定部により判定された場合には、前記通信部により受け付けた前記着信に対して通話を行うことが好ましい。
【００１３】
また、前記通話は、ハンズフリー通話であることが好ましい。
【００１４】
また、前記携帯電子機器は、前記表情認識部により前記顔の表情が認識された回数をカウントするカウント部と、前記カウント部によりカウントされた前記回数を、前記顔の表情ごとに記憶する記憶部と、第１表情が認識された回数が第１閾値を超えるか否かを判定する第１閾値判定部と、第２表情が認識された回数が第２閾値を超えるか否かを判定する第２閾値判定部とを備え、前記通話制御部は、前記第１表情が認識された回数が前記第１閾値を超える場合には、前記通信部により受け付けた前記着信に対して予め設定された第２音声で応答することが好ましい。
【００１５】
また、前記通話制御部は、前記第２表情が認識された回数が前記第２閾値を超える場合には、前記通信部により受け付けた前記着信に対してハンズフリー通話を行うことが好ましい。
【００１６】
また、前記通話制御部は、前記第２表情が認識された回数が前記第２閾値を超えず、前記第１表情が認識された回数が前記第１閾値を超えない場合には、前記通信部により受け付けた前記着信に対して予め設定された第１音声で応答することが好ましい。
【００１７】
本発明に係る携帯電子機器は、上記課題を解決するために、撮像部と、着信を受け付ける通信部と、前記通信部により着信を受け付けた相手先に関する情報を報知する報知部と、着信を受け付けると、被写体を撮像させ、撮像した前記被写体の画像データから人物の顔を認識し、認識した前記顔の表情を認識し、認識した前記顔の表情に基づいて、受け付けた前記着信に対して異なる態様で応答する制御部とを備える。
【発明の効果】
【００１８】
本発明によれば、簡易な構成を用いて、相手先に応じて着信に対する応答をより好適に行うことができる携帯電子機器を提供することができる。
【図面の簡単な説明】
【００１９】
【図１】携帯電話機を開いた状態における外観斜視図である。
【図２】携帯電話機を折畳んだ状態の斜視図である。
【図３】第１実施形態に係る携帯電話機の機能構成を示すブロック図である。
【図４】第１実施形態に係る制御部によって実行される処理について示すフローチャートである。
【図５】第２実施形態に係る制御部によって実行される処理について示すフローチャートである。
【図６】第３実施形態に係る制御部によって実行される処理について示すフローチャートである。
【図７】表情認識部により認識される人物の動作について示す図である。
【図８】第４実施形態に係る制御部によって実行される処理について示すフローチャートである。
【図９】第５実施形態に係る携帯電話機の機能構成を示すブロック図である。
【図１０】第５実施形態に係るアドレス帳の構成について示す図である。
【図１１】第５実施形態に係る制御部によって実行される処理について示すフローチャートである。
【図１２】表情カウント処理について示すフローチャートである。
【図１３】表情カウント処理の他の形態について示すフローチャートである。
【発明を実施するための形態】
【００２０】
＜第１実施形態＞
以下、図面を参照して本発明を実施するための最良の形態を説明する。
図１により、携帯電子機器としての携帯電話機１における基本構造を説明する。図１は、携帯電話機１を開いた状態における外観斜視図を示す。
【００２１】
図１に示すように、携帯電話機１は、筐体としての操作部側筐体２と、表示部側筐体３と、を備える。操作部側筐体２と表示部側筐体３とは、ヒンジ機構を備える連結部４を介して開閉可能に連結される。具体的には、操作部側筐体２の上端部と表示部側筐体３の下端部とは、連結部４を介して連結される。これにより、携帯電話機１は、ヒンジ機構を介して連結された操作部側筐体２と表示部側筐体３とを相対的に動かすことが可能に構成される。つまり、携帯電話機１は、操作部側筐体２と表示部側筐体３とが開いた状態（開状態）と、操作部側筐体２と表示部側筐体３とが折り畳まれた状態（閉状態）とにすることができる。ここで、閉状態とは、両筐体が互いに重なるように配置された状態であり、開状態とは、両筐体が互いに重ならないように配置された状態をいう。
【００２２】
操作部側筐体２は、外面がフロントケース２ａとリアケース２ｂとにより構成される。操作部側筐体２は、フロントケース２ａ側に、操作キー群１１と、携帯電話機１の使用者が通話時に発した音声が入力されるマイクとしてのマイク１２とがそれぞれ露出するように構成される。
【００２３】
操作キー群１１は、各種設定や電話帳機能やメール機能等の各種機能を作動させるための機能設定操作キー１３と、電話番号の数字やメール等の文字等を入力するための入力操作キー１４と、各種操作における決定や上下左右方向のスクロール等を行う操作部材としての決定操作キー１５とにより構成される。操作キー群１１を構成する各キーそれぞれには、操作部側筐体２と表示部側筐体３との開閉状態や各種モード、或いは起動されているアプリケーション等の種類に応じて所定の機能が割り当てられる（キー・アサイン）。そして、使用者が各キーを押圧することにより、各キーに割り当てられている機能に応じた動作が実行される。
【００２４】
マイク１２は、操作部側筐体２の長手方向における連結部４側と反対の外端部側に配置される。つまり、マイク１２は、携帯電話機１が開状態において一方の外端部側に配置される。
【００２５】
操作部側筐体２における一方側の側面には、外部機器（例えば、ホスト装置）と通信を行うためのインターフェース（図示せず）が配置される。操作部側筐体２の他方側の側面には、所定の機能が割り当てられているサイドキーと、外部メモリの挿入及び取り出しが行われるインターフェース（図示せず）とが配置される。インターフェースは、キャップにより覆われている。各インターフェースは、不使用時にはキャップにより覆われる。
【００２６】
表示部側筐体３は、外面がフロントパネル３ａと、フロントケース３ｂと、リアケース３ｃと、リアパネル３ｄとにより構成される。表示部側筐体３には、各種情報を表示するためのメインディスプレイ２１と、通話の相手側の音声を出力するレシーバとしてのスピーカ２２と、被写体を撮像するサブカメラ２３とが外部に露出するように配置される。
メインディスプレイ２１は、液晶パネルと、この液晶パネルを駆動する駆動回路と、この液晶パネルの背面側から光を照射するバックライト等の光源部とから構成される。
【００２７】
また、図２は、携帯電話機１を折畳んだ状態の斜視図を示す図である。操作部側筐体２は、一方の側面に、所定の機能が割り当てられているサイドキー３０と、外部メモリの挿入及び取り出しが行われるインターフェース用のキャップ３１と、を備えている。また、表示部側筐体３は、また、表示部側筐体３のリアパネル３ｄ表面には、被写体を撮像するメインカメラ３３と、被写体に光を照射するライト３４と、各種情報を表示するサブディスプレイ３５と、通話や電子メールの着信等を報知するＬＥＤ３６と、が露出して形成されている。
【００２８】
図３は、第１実施形態に係る携帯電話機１の機能構成を示すブロック図である。
図３に示すように、携帯電話機１は、操作キー群１１と、マイク１２と、メインディスプレイ２１と、スピーカ２２と、サブカメラ２３と、メインカメラ３３と、サブディスプレイ３５と、ＬＥＤ３６と、通信部４２と、バイブレータ４３と、記憶部４４と、タイマ４５と、制御部４６とを備える。
【００２９】
マイク１２及びスピーカ２２は、制御部４６の制御に従って動作する。例えば、ハンズフリー通話を行う際には、制御部４６は、通常の通話時よりもマイク１２の感度が高くなるように制御し、通常の通話時よりもスピーカ２２の音量を大きくするように制御する。
【００３０】
メインカメラ３３及びサブカメラ２３は、レンズ、ＣＣＤ（Ｃｈａｒｇｅ  Ｃｏｕｐｌｅｄ  Ｄｅｖｉｃｅ）、駆動機構、ＤＳＰ（Ｄｉｇｉｔａｌ  Ｓｉｇｎａｌ  Ｐｒｏｃｅｓｓｏｒ）等を含むカメラモジュールを備える。メインカメラ３３及びサブカメラ２３は、被写体の画像を撮像して、画像データを生成する。そして、メインカメラ３３及びサブカメラ２３は、生成した画像データを制御部４６に出力する。
【００３１】
通信部４２は、メインアンテナ４０と、ＲＦ回路部４１とを備え、所定の通信先と通信を行う。通信部４２が通信を行う通信先としては、携帯電話機１と電話やメールの送受信を行う外部の端末装置や、携帯電話機１がインターネットの接続を行う外部のＷｅｂサーバ等の外部装置が挙げられる。
【００３２】
ＲＦ回路部４１は、メインアンテナ４０によって受信した信号を復調処理し、処理後の信号を制御部４６に供給する。また、ＲＦ回路部４１は、制御部４６から供給された信号を変調処理し、メインアンテナ４０を介して外部装置（基地局）に送信する。
【００３３】
メインディスプレイ２１及びサブディスプレイ３５は、ＬＣＤ（Ｌｉｑｕｉｄ  Ｃｒｙｓｔａｌ  Ｄｉｓｐｌａｙ）や有機ＥＬ（Ｅｌｅｃｔｏｒｏ  Ｌｕｍｉｎｅｓｃｅｎｃｅ）によって構成され、制御部４６の制御に従って、各種情報に基づく画像や動画等を表示する。
【００３４】
バイブレータ４３は、操作部側筐体２の内部に取り付けられ、制御部４６の制御に従って振動を発生させる。このバイブレータ４３が発生させる振動が操作部側筐体２に伝達されることにより、携帯電話機１は振動する。
【００３５】
記憶部４４は、例えば、不揮発性メモリで構成される。記憶部４４は、ワーキングメモリを含み、制御部４６による演算処理に利用される。また、記憶部４４には、オペレーティングシステム（ＯＳ）、電話番号、メールアドレス等が記憶されるアドレス帳４４１、複数のアプリケーションプログラム、各種データファイル等が記憶されている。また、記憶部４４は、着脱可能な外部メモリを兼ねていてもよい。
【００３６】
タイマ４５は、制御部４６からの指示に基づいて時間を計測し、計測した時間を制御部４６に通知する。
制御部４６は、携帯電話機１の全体を制御しており、中央処理装置（ＣＰＵ）等により構成される。
また、制御部４６は、報知制御部４６１と、撮像制御部４６２と、時間計測部４６３と、顔認識部４６４と、表情認識部４６５と、通話制御部４６６と、表情判定部４６７とを備える。
【００３７】
次に、着信時における制御部４６による処理について説明する。
報知制御部４６１は、通信部４２により着信に係る信号を受け付けると、記憶部４４のアドレス帳４４１を参照して、着信の相手先に関する情報をメインディスプレイ２１又はサブディスプレイ３５に表示（報知）する。更に、報知制御部４６１は、ＬＥＤ３６を点灯させたり、バイブレータ４３を振動させたり、スピーカ２２から音を出力したりして着信を報知する。
ここで、着信の相手先に関する情報としては、例えば、アドレス帳４４１において、着信された電話番号と関連付けられた名称や、画像等である。
【００３８】
撮像制御部４６２は、通信部４２により着信を受け付けると、メインカメラ３３又はサブカメラ２３を起動させる。そして、撮像制御部４６２は、メインカメラ３３又はサブカメラ２３により被写体（例えば、ユーザの顔）を撮像させる。
ここで、撮像制御部４６２は、携帯電話機１が閉状態である場合には、メインカメラ３３により被写体を撮像させる。一方、撮像制御部４６２は、携帯電話機１が開状態である場合には、サブカメラ２３により被写体を撮像させる。
【００３９】
時間計測部４６３は、所定のタイミングでタイマ４５による時間の計測を開始させる。また、時間計測部４６３は、時間の計測を開始した後に、所定時間が経過した後に時間の計測を終了する。時間計測部４６３の動作については、図４において詳述する。
【００４０】
顔認識部４６４は、撮像制御部４６２の制御に従って、メインカメラ３３又はサブカメラ２３により撮像された被写体の画像データから人物の顔を認識する。顔認識部４６４は、例えば、画像データにおける眉、目、口等の特徴点を検出することで画像データから顔領域を認識する。なお、顔認識部４６４による顔の認識方法は、上述した方法に限らず、既知の他の方法を用いることができる。
【００４１】
表情認識部４６５は、顔認識部４６４により認識された人物の顔の表情を認識する。表情認識部４６５は、例えば、画像データの顔領域における眉、目、口等の特徴点を検出する。そして、表情認識部４６５は、検出したこれらの特徴点の相対位置の変化を求めることにより、表情を認識する。なお、表情認識部４６５による顔の表情の認識方法は、上述した方法に限らず、既知の他の方法を用いることができる。
【００４２】
通話制御部４６６は、表情認識部４６５により認識された顔の表情に基づいて、通信部４２により受け付けた着信に対して、顔の表情ごとに異なる態様で応答する。
【００４３】
このように第１実施形態によれば、携帯電話機１は、メインカメラ３３又はサブカメラ２３により撮像された顔の表情に基づいて、相手先に対する着信の応答を異ならせることができる。また、携帯電話機１は、メインカメラ３３、サブカメラ２３、制御部４６等の既存の構成を用いて上述した制御を行う。つまり、携帯電話機１は、簡易な構成を用いて、相手先に応じた応答をより好適に行うことができる。
【００４４】
ここで、通話制御部４６６による応答の具体例について説明する。
表情判定部４６７は、上述した表情認識部４６５により認識された顔の表情が第１表情（例えば、怒った表情）であるか否かを判定する。
【００４５】
通話制御部４６６は、表情判定部４６７により顔の表情が第１表情であると判定された場合には、通信部４２により外部サーバ（図示せず）に接続し、通信部４２により受け付けた着信に対して、外部サーバに予め設定された第１音声で応答する。ここで、第１音声としては、例えば、留守番電話機能となっている旨を相手先に連絡するための音声（メッセージ）を用いることができる。
【００４６】
一方、通話制御部４６６は、表情判定部４６７により顔の表情が第１表情ではないと判定された場合には、通信部４２により受け付けた着信に対してハンズフリー通話を行う。
【００４７】
このように第１実施形態によれば、携帯電話機１は、認識した顔の表情が第１表情である場合には、第１音声で応答する。このため、ユーザは、例えば、メインディスプレイ２１又はサブディスプレイ３５に表示された相手先が通話したくない相手先である場合には、第１表情をメインカメラ３３又はサブカメラ２３で撮像することにより、通話したくない相手先との通話を行わないことができる。つまり、携帯電話機１は、相手先に応じた応答をより好適に行うことができる。
【００４８】
また、携帯電話機１は、顔の表情が第１表情ではないと判定された場合には、通信部４２により受け付けた着信に対してハンズフリー通話を行うため、ユーザが携帯電話機１と離れた場所にいる場合であっても、通話を好適に行うことができる。
【００４９】
次に、第１実施形態に係る制御部４６によって実行される処理について図４を参照しながら説明する。図４は、第１実施形態に係る制御部４６によって実行される処理について示すフローチャートである。
【００５０】
ステップＳ１において、報知制御部４６１は、通信部４２により着信に係る信号を受け付けると、記憶部４４のアドレス帳４４１を参照して、着信の相手先に関する情報をメインディスプレイ２１又はサブディスプレイ３５に表示（報知）する。更に、報知制御部４６１は、ＬＥＤ３６を点灯させたり、バイブレータ４３を振動させたり、スピーカ２２から音を出力したりして着信を報知する。
【００５１】
ステップＳ２において、撮像制御部４６２は、通信部４２により着信を受け付けると、メインカメラ３３又はサブカメラ２３を起動させる。そして、撮像制御部４６２は、メインカメラ３３又はサブカメラ２３により被写体（例えば、ユーザの顔）を撮像させる。
【００５２】
ステップＳ３において、時間計測部４６３は、操作キー群１１が操作されたか否かを判定する。操作キー群１１が操作された場合（ＹＥＳ）には、ステップＳ１２へ移る。操作キー群１１が操作されない場合（ＮＯ）には、ステップＳ４へ移る。
ステップＳ４において、時間計測部４６３は、タイマ４５により時間の計測を開始させる。
【００５３】
ステップＳ５において、顔認識部４６４は、メインカメラ３３又はサブカメラ２３により撮像された被写体の画像データにおいて、人物の顔を認識したか否かを判定する。人物の顔を認識した場合（ＹＥＳ）には、ステップＳ７へ移る。人物の顔を認識しなかった場合（ＮＯ）には、ステップＳ６へ移る。
ステップＳ６において、時間計測部４６３は、時間の計測を開始してから設定時間Ｔが経過したか否かを判定する。設定時間Ｔが経過した場合（ＹＥＳ）には、ステップＳ８へ移る。設定時間Ｔが経過していない場合（ＮＯ）には、ステップＳ３へ戻る。
【００５４】
ステップＳ７において、表情判定部４６７は、表情認識部４６５により認識された顔の表情が第１表情（例えば、怒った表情）であるか否かを判定する。第１表情である場合（ＹＥＳ）には、ステップＳ８へ移る。第１表情でない場合（ＮＯ）には、ステップＳ１０へ移る。
【００５５】
ステップＳ８において、報知制御部４６１は、着信を報知する動作を解除する。また、撮像制御部４６２は、ステップＳ２において起動したメインカメラ３３又はサブカメラ２３を停止させる。
ステップＳ９において、通話制御部４６６は、通信部４２により受け付けた着信に対して予め設定された第１音声で応答する。
【００５６】
ステップＳ１０において、報知制御部４６１は、着信を報知する動作を解除する。また、撮像制御部４６２は、ステップＳ２において起動したメインカメラ３３又はサブカメラ２３を停止させる。
ステップＳ１１において、通話制御部４６６は、通信部４２により受け付けた着信に対してハンズフリー通話を行う。
【００５７】
ステップＳ１２において、報知制御部４６１は、着信を報知する動作を解除する。また、撮像制御部４６２は、ステップＳ２において起動したメインカメラ３３又はサブカメラ２３を停止させる。
ステップＳ１３において、通話制御部４６６は、通信部４２により受け付けた着信に対して通常の通話を行う。
このように携帯電話機１は、メインカメラ３３又はサブカメラ２３により撮像された顔の表情に基づいて、相手先に対する着信の応答を異ならせることができる。
【００５８】
以下に、本発明の携帯電子機器の他の実施形態について説明する。他の実施形態については、主として、第１実施形態とは異なる点を説明し、第１実施形態と同様の構成について同一符号を付し、説明を省略する。他の実施形態について特に説明しない点については、第１実施形態についての説明が適宜適用される。
【００５９】
＜第２実施形態＞
次に、本発明の携帯電子機器に係る第２実施形態について説明する。
第２実施形態に係る携帯電話機１は、表情判定部４６７において、第１表情だけでなく、第２表情であるか否かについて判定を行う点が第１実施形態とは異なる。
すなわち、表情判定部４６７は、表情認識部４６５により認識された顔の表情が第２表情（例えば、笑った表情）であるか否かを判定する。
【００６０】
そして、通話制御部４６６は、表情判定部４６７により顔の表情が第２表情であると判定された場合には、通信部４２により外部サーバ（図示せず）に接続し、通信部４２により受け付けた着信に対して、外部サーバに予め設定された第２音声で応答する。ここで、第２音声としては、例えば、第１音声とは異なる音声であり、携帯電話機１のユーザが電話に出られない状態である旨を相手先に連絡するための音声（メッセージ）を用いることができる。また、第２音声としては、相手先と通話したくない旨を伝える音声（メッセージ）を用いてもよい。
【００６１】
このように第２実施形態によれば、携帯電話機１は、認識した顔の表情が第２表情である場合には、第１音声とは異なる第２音声で応答する。このため、ユーザは、例えば、メインディスプレイ２１又はサブディスプレイ３５に表示された相手先が通話したくない相手先である場合には、第２表情をメインカメラ３３又はサブカメラ２３で撮像することにより、第１音声とは異なる第２音声で相手先に応答することができる。そして、携帯電話機１は、例えば、第２音声を相手先と通話したくない旨を伝える音声（メッセージ）とすることで、相手先に対する応答を差別化することができる。
【００６２】
次に、第２実施形態に係る制御部４６によって実行される処理について図５を参照しながら説明する。図５は、第２実施形態に係る制御部４６によって実行される処理について示すフローチャートである。なお、ステップＳ２１〜ステップＳ２６の処理は、第１実施形態におけるステップＳ１〜ステップＳ６の処理と同様であり、ステップＳ３５及びステップＳ３６の処理は、第１実施形態におけるステップＳ１２及びステップＳ１３の処理と同様である。
【００６３】
ステップＳ２１において、報知制御部４６１は、通信部４２により着信に係る信号を受け付けると、記憶部４４のアドレス帳４４１を参照して、着信の相手先に関する情報をメインディスプレイ２１又はサブディスプレイ３５に表示（報知）する。更に、報知制御部４６１は、ＬＥＤ３６を点灯させたり、バイブレータ４３を振動させたり、スピーカ２２から音を出力したりして着信を報知する。
【００６４】
ステップＳ２２において、撮像制御部４６２は、通信部４２により着信を受け付けると、メインカメラ３３又はサブカメラ２３を起動させる。そして、撮像制御部４６２は、メインカメラ３３又はサブカメラ２３により被写体（例えば、ユーザの顔）を撮像させる。
【００６５】
ステップＳ２３において、時間計測部４６３は、操作キー群１１が操作されたか否かを判定する。操作キー群１１が操作された場合（ＹＥＳ）には、ステップＳ３５へ移る。操作キー群１１が操作されない場合（ＮＯ）には、ステップＳ２４へ移る。
ステップＳ２４において、時間計測部４６３は、タイマ４５により時間の計測を開始させる。
【００６６】
ステップＳ２５において、顔認識部４６４は、メインカメラ３３又はサブカメラ２３により撮像された被写体の画像データにおいて、人物の顔を認識したか否かを判定する。人物の顔を認識した場合（ＹＥＳ）には、ステップＳ２７へ移る。人物の顔を認識しなかった場合（ＮＯ）には、ステップＳ２６へ移る。
ステップＳ２６において、時間計測部４６３は、時間の計測を開始してから設定時間Ｔが経過したか否かを判定する。設定時間Ｔが経過した場合（ＹＥＳ）には、ステップＳ２９へ移る。設定時間Ｔが経過していない場合（ＮＯ）には、ステップＳ２３へ戻る。
【００６７】
ステップＳ２７において、表情判定部４６７は、表情認識部４６５により認識された顔の表情が第２表情（例えば、笑った表情）であるか否かを判定する。第２表情である場合（ＹＥＳ）には、ステップＳ３３へ移る。第２表情でない場合（ＮＯ）には、ステップＳ２８へ移る。
【００６８】
ステップＳ２８において、表情判定部４６７は、表情認識部４６５により認識された顔の表情が第１表情（例えば、怒った顔）であるか否かを判定する。第１表情である場合（ＹＥＳ）には、ステップＳ３１へ移る。第１表情でない場合（ＮＯ）には、ステップＳ２９へ移る。
【００６９】
ステップＳ２９において、報知制御部４６１は、着信を報知する動作を解除する。また、撮像制御部４６２は、ステップＳ２２において起動したメインカメラ３３又はサブカメラ２３を停止させる。
ステップＳ３０において、通話制御部４６６は、通信部４２により受け付けた着信に対して予め設定された第１音声で応答する。
【００７０】
ステップＳ３１において、報知制御部４６１は、着信を報知する動作を解除する。また、撮像制御部４６２は、ステップＳ２２において起動したメインカメラ３３又はサブカメラ２３を停止させる。
ステップＳ３２において、通話制御部４６６は、通信部４２により受け付けた着信に対して予め設定された第２音声で応答する。
【００７１】
ステップＳ３３において、報知制御部４６１は、着信を報知する動作を解除する。また、撮像制御部４６２は、ステップＳ２２において起動したメインカメラ３３又はサブカメラ２３を停止させる。
ステップＳ３４において、通話制御部４６６は、通信部４２により受け付けた着信に対してハンズフリー通話を行う。
このように携帯電話機１は、第２音声を第１音声よりも相手先と通話したくない旨を伝えるメッセージとすることで、相手先に対する応答を差別化することができる。
【００７２】
＜第３実施形態＞
次に、本発明の携帯電子機器の第３実施形態について説明する。
第３実施形態に係る携帯電話機１は、報知制御部４６１において、着信の報知を異なる態様で２回行う点が第２実施形態とは異なる。
【００７３】
すなわち、報知制御部４６１は、通信部４２により着信を受け付けると、相手先に関する情報を報知部としてのメインディスプレイ２１及びＬＥＤ３６により第１態様で報知させる。ここで、報知制御部４６１は、第１態様として、例えば、メインディスプレイ２１に相手先に関する情報を表示し、ＬＥＤ３６を点灯させる。
【００７４】
また、報知制御部４６１は、表情認識部４６５により顔の表情を認識すると、相手先に関する情報を報知部としてのメインディスプレイ２１、スピーカ２２、ＬＥＤ３６及びバイブレータ４３により第１態様とは異なる第２態様で報知させる。ここで、報知制御部４６１は、第２態様として、例えば、メインディスプレイ２１に相手先に関する情報を表示し、ＬＥＤ３６を点灯させ、更に、スピーカ２２から音を出力し、バイブレータ４３を振動させる。
【００７５】
このように第３実施形態によれば、携帯電話機１は、着信の報知を異なる態様及びタイミングで２回行うため、着信に対するユーザの注意を好適に喚起することができる。
【００７６】
次に、第３実施形態に係る制御部４６によって実行される処理について図６を参照しながら説明する。図６は、第３実施形態に係る制御部４６によって実行される処理について示すフローチャートである。
【００７７】
ステップＳ４１において、撮像制御部４６２は、通信部４２により着信を受け付けると、メインカメラ３３又はサブカメラ２３を起動させる。そして、撮像制御部４６２は、メインカメラ３３又はサブカメラ２３により被写体（例えば、ユーザの顔）を撮像させる。
ステップＳ４２において、報知制御部４６１は、着信を受け付けた相手先に関する情報をメインディスプレイ２１及びＬＥＤ３６により第１態様で報知させる。
【００７８】
ステップＳ４３において、時間計測部４６３は、操作キー群１１が操作されたか否かを判定する。操作キー群１１が操作された場合（ＹＥＳ）には、ステップＳ５９へ移る。操作キー群１１が操作されない場合（ＮＯ）には、ステップＳ４４へ移る。
ステップＳ４４において、時間計測部４６３は、タイマ４５により時間の計測を開始させる。
【００７９】
ステップＳ４５において、顔認識部４６４は、メインカメラ３３又はサブカメラ２３により撮像された被写体の画像データにおいて、人物の顔を認識したか否かを判定する。人物の顔を認識した場合（ＹＥＳ）には、ステップＳ５４へ移る。人物の顔を認識しなかった場合（ＮＯ）には、ステップＳ４６へ移る。
【００８０】
ステップＳ４６において、時間計測部４６３は、時間の計測を開始してから設定時間Ｔが経過したか否かを判定する。設定時間Ｔが経過した場合（ＹＥＳ）には、タイマ４５による時間の計測を停止させて、ステップＳ４７へ移る。設定時間Ｔが経過していない場合（ＮＯ）には、ステップＳ４３へ戻る。
【００８１】
ステップＳ４７において、報知制御部４６１は、着信を受け付けた相手先に関する情報をメインディスプレイ２１、スピーカ２２、ＬＥＤ３６及びバイブレータ４３により第２態様で報知させる。
【００８２】
ステップＳ４８において、時間計測部４６３は、操作キー群１１が操作されたか否かを判定する。操作キー群１１が操作された場合（ＹＥＳ）には、ステップＳ６０へ移る。操作キー群１１が操作されない場合（ＮＯ）には、ステップＳ４９へ移る。
ステップＳ４９において、時間計測部４６３は、タイマ４５をリセットして、タイマ４５による時間の計測を再度開始させる。
【００８３】
ステップＳ５０において、顔認識部４６４は、メインカメラ３３又はサブカメラ２３により撮像された被写体の画像データにおいて、人物の顔を認識したか否かを判定する。人物の顔を認識した場合（ＹＥＳ）には、ステップＳ５４へ移る。人物の顔を認識しなかった場合（ＮＯ）には、ステップＳ５１へ移る。
【００８４】
ステップＳ５１において、時間計測部４６３は、ステップＳ４９において時間の計測を開始してから設定時間Ｔが経過したか否かを判定する。設定時間Ｔが経過した場合（ＹＥＳ）には、タイマ４５による時間の計測を停止させて、ステップＳ５２へ移る。設定時間Ｔが経過していない場合（ＮＯ）には、ステップＳ４８へ戻る。
【００８５】
ステップＳ５２において、報知制御部４６１は、着信を報知する動作を解除する。また、撮像制御部４６２は、ステップＳ４１において起動したメインカメラ３３又はサブカメラ２３を停止させる。
ステップＳ５３において、通話制御部４６６は、通信部４２により受け付けた着信に対して予め設定された第１音声で応答する。
【００８６】
ステップＳ５４において、表情判定部４６７は、表情認識部４６５により認識された顔の表情が第２表情（例えば、笑った表情）であるか否かを判定する。第２表情である場合（ＹＥＳ）には、ステップＳ５７へ移る。第２表情でない場合（ＮＯ）には、ステップＳ５５へ移る。
【００８７】
ステップＳ５５において、報知制御部４６１は、着信を報知する動作を解除する。また、撮像制御部４６２は、ステップＳ４１において起動したメインカメラ３３又はサブカメラ２３を停止させる。
ステップＳ５６において、通話制御部４６６は、通信部４２により受け付けた着信に対して予め設定された第２音声で応答する。
【００８８】
ステップＳ５７において、報知制御部４６１は、着信を報知する動作を解除する。また、撮像制御部４６２は、ステップＳ４１において起動したメインカメラ３３又はサブカメラ２３を停止させる。
ステップＳ５８において、通話制御部４６６は、通信部４２により受け付けた着信に対してハンズフリー通話を行う。
【００８９】
ステップＳ５９において、報知制御部４６１は、着信を報知する動作を解除する。また、撮像制御部４６２は、ステップＳ４１において起動したメインカメラ３３又はサブカメラ２３を停止させる。
ステップＳ６０において、通話制御部４６６は、通信部４２により受け付けた着信に対して通常の通話を行う。
このように携帯電話機１は、着信の報知を異なる態様及びタイミングで２回行うため、着信に対するユーザの注意を好適に喚起することができる。
【００９０】
＜第４実施形態＞
次に、本発明の携帯電子機器に係る第４実施形態について説明する。
第４実施形態に係る携帯電話機１は、表情判定部４６７における表情の判定方法が異なる点が第３実施形態とは異なる。
【００９１】
すなわち、表情認識部４６５は、メインカメラ３３又はサブカメラ２３により撮像された画像データから顔の表情と共に、人物の動作を認識する。
図７は、表情認識部４６５により認識される人物の動作について示す図である。なお、表情認識部４６５は、人物の動作についても顔の認識と同様に、画像データから特徴点を検出してもよく、既知の他の方法を用いてもよい。
【００９２】
表情判定部４６７は、表情認識部４６５により認識された顔の表情が第３表情（例えば、普通の表情（図７（ａ）参照））であり、かつ、人物の動作が所定動作（例えば、指を１本立てる動作（図７（ｂ）参照））であるか否かを判定する。なお、所定動作としては、例えば、図７（ｃ）に示すような、手のひらを開いた動作であってもよく、他の動作であってもよい。
【００９３】
通話制御部４６６は、顔の表情が第３表情であり、かつ、人物の動作が所定動作であると表情判定部４６７により判定された場合には、通信部４２により外部サーバ（図示せず）に接続し、通信部４２により受け付けた着信に対して、外部サーバに予め設定された第２音声で応答する。
【００９４】
一方、通話制御部４６６は、顔の表情が第３表情ではない、及び／又は人物の動作が所定の動作ではないと表情判定部４６７により判定された場合には、通信部４２により受け付けた着信に対してハンズフリー通話を行う。
【００９５】
このように第４実施形態によれば、携帯電話機１は、顔の表情だけでなく、顔の表情と共に、人物の動作（ジェスチャー）を用いて表情（動作）をするため、表情（動作）の認識を適切に行うことができる。
【００９６】
次に、第４実施形態に係る制御部４６によって実行される処理について図８を参照しながら説明する。図８は、第４実施形態に係る制御部４６によって実行される処理について示すフローチャートである。なお、ステップＳ７１〜ステップＳ８３、ステップＳ８９及びステップＳ９０の処理は、第３実施形態におけるステップＳ４１〜ステップＳ５３、ステップＳ５９及びステップＳ６０の処理と同様であるため、説明を省略する。
【００９７】
ステップＳ８４において、表情判定部４６７は、表情認識部４６５により認識された顔の表情が第３表情であり、かつ、人物の動作が所定動作であるか否かを判定する。第３表情であり、かつ、所定動作である場合（ＹＥＳ）には、ステップＳ８５へ移る。第３表情でない、及び／又は所定動作でない場合（ＮＯ）には、ステップＳ８７へ移る。
【００９８】
ステップＳ８５において、報知制御部４６１は、着信を報知する動作を解除する。また、撮像制御部４６２は、ステップＳ７１において起動したメインカメラ３３又はサブカメラ２３を停止させる。
ステップＳ８６において、通話制御部４６６は、通信部４２により受け付けた着信に対して予め設定された第２音声で応答する。
【００９９】
ステップＳ８７において、報知制御部４６１は、着信を報知する動作を解除する。また、撮像制御部４６２は、ステップＳ７１において起動したメインカメラ３３又はサブカメラ２３を停止させる。
ステップＳ８８において、通話制御部４６６は、通信部４２により受け付けた着信に対してハンズフリー通話を行う。
このように携帯電話機１は、顔の表情だけでなく、顔の表情と共に、人物の動作（ジェスチャー）を用いて表情（動作）をするため、表情（動作）の認識を適切に行うことができる。
【０１００】
＜第５実施形態＞
次に、本発明の携帯電子機器の第５実施形態について説明する。
第５実施形態に係る携帯電話機１は、顔の表情をカウントする点及びカウントした顔の表情ごとに閾値が設定されている点が第３及び第４実施形態とは主として異なる。
【０１０１】
図９は、第５実施形態に係る携帯電話機１の機能構成を示すブロック図である。図９に示すように、第５実施形態に係る携帯電話機１は、表情カウント部４６８及び閾値判定部４６９を備えている。また、携帯電話機１において、アドレス帳４４１の構成が異なっている。なお、他の構成は、第１実施形態と同様であるため、説明を省略する。
【０１０２】
表情カウント部４６８は、表情認識部４６５により顔の表情が認識された回数をカウントする。そして、表情カウント部４６８は、カウントした回数を顔の表情ごとに記憶部４４のアドレス帳４４１に記憶する。
【０１０３】
図１０は、第５実施形態に係るアドレス帳４４１の構成について示す図である。図１０に示すように、アドレス帳４４１は、名称、電話番号、メールアドレス等と共に、第１表情のカウント回数と、第２表情のカウント回数とを関連付けて記憶している。また、第１表情及び第２表情のカウント回数は、表情カウント部４６８により、電話番号（名称）ごとにカウントされて、記憶される。更に、アドレス帳４４１は、第１表情のカウント回数及び第２表情のカウント回数の閾値Ｔ１（第１閾値）及び閾値Ｔ２（第２閾値）を、第１表情及び第２表情それぞれについて記憶している。なお、閾値Ｔ１及びＴ２は、同一の値であってもよく、異なる値であってもよい。また、閾値Ｔ１及びＴ２は、電話番号ごとに異なる値であってもよい。
【０１０４】
閾値判定部４６９は、第１表情（例えば、怒った表情）が認識された回数が閾値Ｔ１を超えるか否かを判定する。また、閾値判定部４６９は、第２表情（例えば、笑った表情）が認識された回数が閾値Ｔ２を超えるか否かを判定する。
【０１０５】
通話制御部４６６は、第１表情が認識された回数が閾値Ｔ１を超える場合には、通信部４２により外部サーバに接続し、通信部４２により受け付けた着信に対して、外部サーバに予め設定された第２音声で応答する。
【０１０６】
このように第５実施形態によれば、携帯電話機１は、第１表情が認識された回数が閾値Ｔ１を超える場合には、第２音声で応答するため、第２音声で応答すべき相手先を適切に判定することができる。
【０１０７】
また、通話制御部４６６は、第２表情が認識された回数が閾値Ｔ２を超える場合には、通信部４２により受け付けた着信に対してハンズフリー通話を行う。
【０１０８】
このように第５実施形態によれば、携帯電話機１は、第２表情が認識された回数が閾値Ｔ２を超える場合には、ハンズフリー通話を行うため、ハンズフリー通話で応答すべき相手先を適切に判定することができる。
【０１０９】
また、通話制御部４６６は、第２表情が認識された回数が閾値Ｔ２を超えず、第１表情が認識された回数が閾値Ｔ１を超えない場合には、通信部４２により外部サーバに接続し、通信部４２により受け付けた着信に対して、外部サーバに予め設定された第１音声で応答する。
【０１１０】
このように第５実施形態によれば、携帯電話機１は、第２表情が認識された回数が閾値Ｔ２を超えず、第１表情が認識された回数が閾値Ｔ１を超えない場合には、第１音声で応答するため、第１音声で応答すべき相手先を適切に判定することができる。
【０１１１】
次に、第５実施形態の制御部４６によって実行される処理について図１１及び図１２を参照しながら説明する。図１１は、第５実施形態に係る制御部４６によって実行される処理について示すフローチャートである。
【０１１２】
ステップＳ１０１において、通信部４２により着信に係る信号を受け付けると、閾値判定部４６９は、アドレス帳４４１を参照して、第１表情のカウント回数が閾値Ｔ１を超えているか否かを判定する。第１表情のカウント回数が閾値Ｔ１を超えている場合（ＹＥＳ）には、ステップＳ１１９へ移る。第１表情のカウント回数が閾値Ｔ１を超えている場合（ＹＥＳ）には、ステップＳ１０２へ移る。
【０１１３】
ステップＳ１０２において、撮像制御部４６２は、通信部４２により着信を受け付けると、メインカメラ３３又はサブカメラ２３を起動させる。そして、撮像制御部４６２は、メインカメラ３３又はサブカメラ２３により被写体（例えば、ユーザの顔）を撮像させる。
ステップＳ１０３において、報知制御部４６１は、着信を受け付けた相手先に関する情報をメインディスプレイ２１及びＬＥＤ３６により第１態様で報知させる。
【０１１４】
ステップＳ１０４において、時間計測部４６３は、操作キー群１１が操作されたか否かを判定する。操作キー群１１が操作された場合（ＹＥＳ）には、ステップＳ１２２へ移る。操作キー群１１が操作されない場合（ＮＯ）には、ステップＳ１０５へ移る。
ステップＳ１０５において、時間計測部４６３は、タイマ４５により時間の計測を開始させる。
【０１１５】
ステップＳ１０６において、顔認識部４６４は、メインカメラ３３又はサブカメラ２３により撮像された被写体の画像データにおいて、人物の顔を認識したか否かを判定する。人物の顔を認識した場合（ＹＥＳ）には、ステップＳ１１５へ移る。人物の顔を認識しなかった場合（ＮＯ）には、ステップＳ１０７へ移る。
【０１１６】
ステップＳ１０７において、時間計測部４６３は、時間の計測を開始してから設定時間Ｔが経過したか否かを判定する。設定時間Ｔが経過した場合（ＹＥＳ）には、タイマ４５による時間の計測を停止させて、ステップＳ１０８へ移る。設定時間Ｔが経過していない場合（ＮＯ）には、ステップＳ１０４へ戻る。
【０１１７】
ステップＳ１０８において、報知制御部４６１は、着信を受け付けた相手先に関する情報をメインディスプレイ２１、スピーカ２２、ＬＥＤ３６及びバイブレータ４３により第２態様で報知させる。
【０１１８】
ステップＳ１０９において、時間計測部４６３は、操作キー群１１が操作されたか否かを判定する。操作キー群１１が操作された場合（ＹＥＳ）には、ステップＳ１２４へ移る。操作キー群１１が操作されない場合（ＮＯ）には、ステップＳ１１０へ移る。
ステップＳ１１０において、時間計測部４６３は、タイマ４５をリセットして、タイマ４５による時間の計測を再度開始させる。
【０１１９】
ステップＳ１１１において、顔認識部４６４は、メインカメラ３３又はサブカメラ２３により撮像された被写体の画像データにおいて、人物の顔を認識したか否かを判定する。人物の顔を認識した場合（ＹＥＳ）には、ステップＳ１１５へ移る。人物の顔を認識しなかった場合（ＮＯ）には、ステップＳ１１２へ移る。
【０１２０】
ステップＳ１１２において、時間計測部４６３は、ステップＳ１１０において時間の計測を開始してから設定時間Ｔが経過したか否かを判定する。設定時間Ｔが経過した場合（ＹＥＳ）には、タイマ４５による時間の計測を停止させて、ステップＳ１１３へ移る。設定時間Ｔが経過していない場合（ＮＯ）には、ステップＳ１０９へ戻る。
【０１２１】
ステップＳ１１３において、報知制御部４６１は、着信を報知する動作を解除する。また、撮像制御部４６２は、ステップＳ４１において起動したメインカメラ３３又はサブカメラ２３を停止させる。
ステップＳ１１４において、通話制御部４６６は、通信部４２により受け付けた着信に対して予め設定された第１音声で応答する。
【０１２２】
ステップＳ１１５において、表情カウント部４６８は、表情認識部４６５により顔の表情が認識された回数をカウントする。顔の表情が認識された回数をカウントする表情カウント処理については、図１２において詳述する。
【０１２３】
ステップＳ１１６において、閾値判定部４６９は、第１表情が認識された回数が閾値Ｔ１以上であるか否かを判定する。閾値Ｔ１以上である場合（ＹＥＳ）には、ステップＳ１２０へ移る。閾値Ｔ１未満である場合（ＮＯ）には、ステップＳ１１７へ移る。
ステップＳ１１７において、閾値判定部４６９は、第２表情が認識された回数が閾値Ｔ２以上であるか否かを判定する。閾値Ｔ２以上である場合（ＹＥＳ）には、ステップＳ１１８へ移る。閾値Ｔ２未満である場合（ＮＯ）には、ステップＳ１１３へ移る。
【０１２４】
ステップＳ１１８において、報知制御部４６１は、着信を報知する動作を解除する。また、撮像制御部４６２は、ステップＳ１０２において起動したメインカメラ３３又はサブカメラ２３を停止させる。
ステップＳ１１９において、通話制御部４６６は、通信部４２により受け付けた着信に対して予め設定された第２音声で応答する。
【０１２５】
ステップＳ１２０において、報知制御部４６１は、着信を報知する動作を解除する。また、撮像制御部４６２は、ステップＳ１０２において起動したメインカメラ３３又はサブカメラ２３を停止させる。
ステップＳ１２１において、通話制御部４６６は、通信部４２により受け付けた着信に対してハンズフリー通話を行う。
【０１２６】
ステップＳ１２２において、表情カウント部４６８は、表情認識部４６５により顔の表情が認識された回数をカウントする。顔の表情が認識された回数をカウントする表情カウント処理については、図１２において詳述する。
【０１２７】
ステップＳ１２３において、報知制御部４６１は、着信を報知する動作を解除する。また、撮像制御部４６２は、ステップＳ１０２において起動したメインカメラ３３又はサブカメラ２３を停止させる。
ステップＳ１２４において、通話制御部４６６は、通信部４２により受け付けた着信に対して通常の通話を行う。
【０１２８】
図１２は、図１１のステップＳ１１５及びステップＳ１２２における表情カウント処理について示すフローチャートである。
ステップＳ１３１において、表情カウント部４６８は、表情認識部４６５により認識された顔の表情が第１表情であるか否かを判定する。第１表情である場合（ＹＥＳ）には、ステップＳ１３５へ移る。第１表情でない場合（ＮＯ）には、ステップＳ１３２へ移る。
【０１２９】
ステップＳ１３２において、表情カウント部４６８は、表情認識部４６５により認識された顔の表情が第２表情であるか否かを判定する。第２表情である場合（ＹＥＳ）には、ステップＳ１３３へ移る。第２表情でない場合（ＮＯ）には、処理を終了する。
【０１３０】
ステップＳ１３３において、表情カウント部４６８は、着信を受け付けた相手先の電話番号に関連付けられている第２表情がカウントされた回数を、アドレス帳４４１から読み出す。
ステップＳ１３４において、表情カウント部４６８は、読み出された第２表情がカウントされた回数を１インクリメント（＋１）して、アドレス帳４４１に上書き（記憶）する。
【０１３１】
ステップＳ１３５において、表情カウント部４６８は、着信を受け付けた相手先の電話番号に関連付けられている第１表情がカウントされた回数を、アドレス帳４４１から読み出す。
ステップＳ１３６において、表情カウント部４６８は、読み出された第１表情がカウントされた回数を１インクリメント（＋１）して、アドレス帳４４１に上書き（記憶）する。
【０１３２】
なお、上述した表情をカウントする表情カウント処理は、図１１のステップＳ１１５及びステップＳ１２２において実行される処理に限らず、例えば、通話が終了した後に実行されてもよい。図１３は、表情カウント処理の他の形態について示すフローチャートである。
【０１３３】
ステップＳ１４１において、通話制御部４６６は、相手先との通話を終了させる処理を実行する。
ステップＳ１４２において、撮像制御部４６２は、メインカメラ３３又はサブカメラ２３を起動させる。そして、撮像制御部４６２は、メインカメラ３３又はサブカメラ２３により被写体（例えば、ユーザの顔）を撮像させる。
【０１３４】
ステップＳ１４３において、表情カウント部４６８は、図１２において説明したように、表情認識部４６５により顔の表情が認識された回数をカウントする。
【０１３５】
以上、本発明の実施形態について説明したが、本発明は上述した実施形態に制限されるものではなく、適宜変更が可能である。
【０１３６】
また、上述した実施形態において、携帯電子機器としての携帯電話機１について説明したが、これに限定されず、デジタルカメラ、ＰＨＳ（登録商標；Ｐｅｒｓｏｎａｌ  Ｈａｎｄｙ  ｐｈｏｎｅ  Ｓｙｓｔｅｍ）、ＰＤＡ（Ｐｅｒｓｏｎａｌ  Ｄｉｇｉｔａｌ  Ａｓｓｉｓｔａｎｔ）、ポータブルナビゲーション装置、パソコン、ノートパソコン、携帯ゲーム装置等であってもよい。
【符号の説明】
【０１３７】
１  携帯電話機（携帯電子機器）
２１  メインディスプレイ（報知部）
２３  サブカメラ（撮像部）
３３  メインカメラ（撮像部）
３４  ＬＥＤ（報知部）
３５  サブディスプレイ（報知部）
４３  バイブレータ（報知部）
４６２  撮像制御部
４６５  表情認識部
【図１】
2011205475.tif 000003
【図２】
2011205475.tif 000004
【図３】
2011205475.tif 000005
【図４】
2011205475.tif 000006
【図５】
2011205475.tif 000007
【図６】
2011205475.tif 000008
【図７】
2011205475.tif 000009
【図８】
2011205475.tif 000010
【図９】
2011205475.tif 000011
【図１０】
2011205475.tif 000012
【図１１】
2011205475.tif 000013
【図１２】
2011205475.tif 000014
【図１３】
2011205475.tif 000015