(57)【要約】【課題】ユーザが過去に話したことがある相手であるか否かを、ユーザに適切に提示すること。【解決手段】電子機器は、声紋に関する声紋データを記憶する記憶装置と、機器を使用しているユーザを判別する判別装置と、前記機器により前記ユーザと通話をしている相手の音声を当該ユーザが聞いたことがあるかどうかを、前記記憶装置に記憶されている声紋データと、前記判別装置の判別結果とに基づいて判定する判定装置と、判定装置の判定結果を表示する表示装置と、を備える。【選択図】図８
2013164554.tif 000002
【特許請求の範囲】
【請求項１】
声紋に関する声紋データを記憶する記憶装置と、
機器を使用しているユーザを判別する判別装置と、
前記機器により前記ユーザと通話をしている相手の音声を当該ユーザが聞いたことがあるかどうかを、前記記憶装置に記憶されている声紋データと、前記判別装置の判別結果とに基づいて判定する判定装置と、
前記判定装置の判定結果を表示する表示装置と、
を備える電子機器。
【請求項２】
前記相手の声紋が前記記憶装置に記憶されていない場合に、前記相手の声紋を記憶する記録装置を備える請求項１記載の電子機器。
【請求項３】
前記記憶装置は、前記相手の特定のワードを記憶可能であり、
前記記憶装置に前記特定のワードが記憶されていた場合に、前記ユーザに警告を行なう警告部を備える請求項１または２記載の電子機器。
【請求項４】
前記通話の後に前記表示装置に通話に関する表示を行なう制御装置を備える請求項１から３のいずれか一項に記載の電子機器。
【請求項５】
前記表示装置は、前記相手の音声をユーザが聞いたことがある場合に、当該音声をユーザが聞いた時期に関する表示を行う
請求項１から４のいずれか一項に記載の電子機器。
【請求項６】
前記表示装置は、前記ユーザと通話をしている相手の声紋の声紋データが前記記憶装置に記憶されている場合に、当該音声を聞いたことがある人に関する表示を行う
請求項１から５のいずれか一項に記載の電子機器。
【請求項７】
前記相手の音声に特定のワードが含まれているかどうかを検出する検出装置
をさらに備える
請求項１から６のいずれか一項に記載の電子機器。
【請求項８】
前記検出装置が前記特定のワードを検出した場合に、前記相手に対して警告を行う警告部
を備える請求項７に記載の電子機器。
【請求項９】
前記ユーザを撮像する撮像機器
を備える請求項１から８のいずれか一項に記載の電子機器。
【請求項１０】
前記機器の保持部に生体情報を検出する生体センサが設けられる請求項１から９のいずれか一項に記載の電子機器。
【請求項１１】
前記表示装置は、前記生体センサの検出結果に応じて表示を行なう請求項１０に記載の電子機器。
【請求項１２】
前記通話を録音する録音部を備え、
前記通話の内容に応じて前記録音部が録音した音声の消去のタイミングを決定する決定部を備える請求項１から１１のいずれか一項に記載の電子機器。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、電子機器に関する。
【背景技術】
【０００２】
通話中の会話の中に予め登録されている危険キーワードが含まれていた場合に、発信者の声紋および暗証番号により発信者の認証を行い、認証ができなかった場合に、現在の通話が詐欺等の恐れのある危険なものであることの注意を喚起する音声を応答者に聴取させる詐欺電話検出・通報システムが知られている（例えば、特許文献１）。
［先行技術文献］
［特許文献］
［特許文献１］特開２０１１−１３５３２８号公報
【発明の概要】
【発明が解決しようとする課題】
【０００３】
従来、ユーザが過去に話したことがある相手であるか否かを、ユーザに適切に提示することができないという課題があった。
【課題を解決するための手段】
【０００４】
本発明の一態様においては、電子機器は、声紋に関する声紋データを記憶する記憶装置と、機器を使用しているユーザを判別する判別装置と、前記機器により前記ユーザと通話をしている相手の音声を当該ユーザが聞いたことがあるかどうかを、前記記憶装置に記憶されている声紋データと、前記判別装置の判別結果とに基づいて判定する判定装置と、判定装置の判定結果を表示する表示装置と、を備える。
【０００５】
なお、上記の発明の概要は、本発明の必要な特徴の全てを列挙したものではない。また、これらの特徴群のサブコンビネーションもまた、発明となりうる。
【図面の簡単な説明】
【０００６】
【図１】一実施形態にかかる固定電話機１の概略構成を示す。
【図２】固定電話機１のブロック図を示す。
【図３】ＲＯＭ１０に記憶されるユーザ情報の一例を示す。
【図４】ＲＯＭ１０に記憶される話相手情報の一例を示す。
【図５】ＲＯＭ１０に記憶される通話履歴情報の一例を示す。
【図６】表示部９に表示される画面６０の一例を示す。
【図７】表示部９に表示される画面７０の一例を示す。
【図８】固定電話機１における通話中のＣＰＵ８による制御の一例を示すフローである。
【発明を実施するための形態】
【０００７】
以下、発明の実施の形態を通じて本発明を説明するが、以下の実施形態は特許請求の範囲にかかる発明を限定するものではない。また、実施形態の中で説明されている特徴の組み合わせの全てが発明の解決手段に必須であるとは限らない。
【０００８】
図１は、一実施形態にかかる固定電話機１の概略構成を示す。本例において、固定電話機１は置き型設置式の電話機である。固定電話機１は、固定電話網の電話回線に接続される。固定電話機１は、本体部２および受話器３を備える。受話器３は、本体部２とコードで接続される。受話器３は、生体センサ６、接触センサ４、マイク部７、および、スピーカ部５を有する。
【０００９】
本体部２に設けられた表示部９には、例えば液晶表示素子を適用することができる。表示部９は、画像や各種情報を表示する。各種情報としては、着信時においては発信元の電話番号等を例示できる。発信時においては発信先の電話番号等を例示することができる。また、表示部９にタッチパネル機能を設けて、このタッチパネルを用いて固定電話機１を使用するユーザの登録を行なうようにすればよい。なお、タッチパネルとしては、抵抗膜方式、表面弾性波方式、赤外線方式、電磁誘導方式、静電容量方式を適宜選択して用いればよい。
【００１０】
本体部２に設けられた内蔵カメラ１３は、本体部２の上側に設けられる。内蔵カメラ１３は、撮影レンズおよび撮像素子を含む。内蔵カメラ１３は、通話しているユーザの表情を撮像することができる。撮像レンズとして広角レンズを用いた場合には、ユーザに加えて、ユーザの近傍に位置する人の表情を撮像することができる。例えば、内蔵カメラ１３は、ユーザの隣にいる人の表情を撮像することができる。撮像素子としては、ＣＣＤやＣＭＯＳ等の個体撮像素子を用いることができる。撮像素子は、ＲＧＢ３原色がベイヤー配列で配置されたカラーフィルタを有してよい。これにより、撮像素子から、各色それぞれに対応した色信号を得ることができる。内蔵カメラ１３は、ユーザを撮像する撮像機器の一例である。
【００１１】
生体センサ６は、受話器３に設けられる。生体センサ６は、ユーザが受話器３を保持するときに、ユーザの手に触れる位置に設けられる。例えば、生体センサ６は、受話器３の長辺側の側面に設けられる。生体センサ６は、ユーザの生体情報を検出するものである。このように、ユーザが保持するマイクに、ユーザの生体情報を検出する生体センサ６が設けられる。生体センサ６による検出結果は、本体部２における制御に利用される。
【００１２】
生体センサ６としては、例えば、脈拍センサを例示することができる。脈拍センサとしては、ＬＥＤにより生体に向けて照射光を照射し、当該照射光に対して生体から反射した光を受光することにより、脈拍を検出するセンサを適用できる。脈拍センサとしては、例えば、特開２００１−２７６０１２号公報（米国特許第６,５２６,３１５号明細書）に開示された構成を適用できる。生体センサ６は、脈拍センサの他にも、発汗量を検出する発汗量センサを有してよい。発汗量センサとしては、複数の電極を配した発汗センサを設けることによりユーザの発汗量を検出する構成を適用できる。生体センサ６として更に、体温を測る温度センサ、血圧を測る血圧センサ等を設けることもできる。また、特開２００７−２１５７４９号公報（米国特許出願公開第２００７／０１９１７１８号明細書）に開示されているような腕時計型の生体センサと連携することも可能である。すなわち、本体部２または受話器３とは別個に設けられ、ユーザの生体に接触して設けられた生体センサを、本体部２における制御に適用できる。例えば、本体部２が、当該生体センサの検出結果を通信により取得して、取得した検出結果を制御に利用してよい。
【００１３】
また、生体センサ６は、受話器３の長辺側の側面等に設けた圧力センサを含んでもよい。圧力センサによりユーザが受話器３を保持したことを検出して、上述した生体情報の検出を開始するようにしてもよい。すなわち、本体部２の電源がオンになっている場合には、圧力センサはオンにしておき、他の生体センサや各種センサ、本体部２内の各種解析を行う解析部はオフの状態にしてもよい。また、当該圧力センサの出力に基づいて、ユーザが受話器３を通常よりも強く握っているかどうかを判別することもできる。
【００１４】
接触センサ４は、ユーザが受話器３を保持するときに、スピーカ部５がユーザの耳に近接するように受話器３のスピーカ部５の周辺に設けられている。ユーザが受話器３を耳に当てているか否かを検出するものである。接触センサ４は、例えば、ＬＥＤにより物体に向けて照射光を照射し、照射光に対して物体で反射した光を受光することにより、物体との距離に対応する情報検出してよい。また、接触センサ４は、照度センサ等による光の検出結果に基づいて物体との距離に対応する情報を検出してもよい。例えば、接触センサ４は、照度センサで外部の光が受光されたか否かに基づき物体との距離に対応する情報を検出してよい。また、接触センサ４として、超音波の検出結果に基づいて物体との距離に対応する情報を検出してよい。例えば、接触センサ４は、超音波を出力し、物体で反射して戻ってくるまでの時間を超音波センサで検出することにより、物体との距離を算出してよい。
【００１５】
図２は、固定電話機１のブロック図を示す。本ブロック図を用いて固定電話機１の構成要素を説明する。固定電話機１は、図１に関連して説明した構成要素に加えて、カレンダー部１４、ＲＯＭ１０、音声解析部１１、画像分析部１２およびＣＰＵ８に有する。カレンダー部１４、ＲＯＭ１０、音声解析部１１、画像分析部１２およびＣＰＵ８は、本体部２に設けられる。
【００１６】
カレンダー部１４は、年、月、日、時間といった時間情報をＣＰＵ８に出力する。また、カレンダー部１４は、計時機能を有する。
【００１７】
ＲＯＭ１０は、例えばフラッシュメモリなどの不揮発性メモリである。ＲＯＭ１０は、固定電話機１を制御するプログラム、各種パラメータなどを記憶する。また、ＲＯＭ１０は、各種センサが検出した各種データ、ユーザが登録した顔データや、顔表情データに関するデータ等を記憶する。このうち、顔表情データには、笑顔、泣き顔、怒り顔、驚き顔、不安顔、不思議そうな表情、眉間に皺を寄せている表情、緊張している表情、リラックスしている表情等の画像データを含む。眉間に皺を寄せている表情は、嫌そうな表情の一例である。これらの顔や表情の組み合わせから、ユーザがイライラしているか否かを判断するとしてよい。なお、顔データなどの画像データの登録は、固定電話の不図示の通信部を用いて他の機器（例えばパソコン）から画像データを送信してもよく、受話器３に内蔵カメラを設けて、この内蔵カメラによりユーザの顔を撮像するようにしてもよい。
【００１８】
また、ＲＯＭ１０は、あらかじめ登録されているフレーズやキーワードのほか、ユーザがタッチパネルを用いて登録した特定のフレーズやキーワードを記憶する。本実施形態においては、振り込み、ＡＴＭというような振り込み詐欺に関連するワードや、購入、販売というような勧誘に関連するワードがキーワードとしてＲＯＭ１０に登録されているものとする。また、「１０分後にかけなおして下さい」というフレーズがＲＯＭ１０に登録されているものとする。本実施形態においては、ＲＯＭ１０は、話し相手或いはユーザが登録している特定のフレーズやキーワードを発したときに、通話内容を記録保存する。このとき、通話内容を記録保存することが、話し相手に通知される。特定のフレームやキーワード等の特定のワードが検出した場合に、話し相手に対して警告を行うことができる。本機能は、例えば振り込め詐欺等の場面に適用できる。詳細については後述する。
【００１９】
また、ＲＯＭ１０は、ユーザの話し相手の声紋に関する声紋データを記憶する記憶装置として機能する。ＲＯＭ１０は、固定電話機１で取り込まれた音声を解析することにより得られた声紋データを記憶する。固定電話機１においては、話し相手とは通話相手であってよい。
【００２０】
音声解析部１１は、受話器３に設けられたスピーカ部５から取り込まれる音声を解析する。音声解析部１１は声紋分析機能を有する。音声解析部１１は、取り込まれた音声をユーザが登録した声紋と比較識別することにより、話し相手が初めて電話をかけてきた人物なのか、過去にも通話したことがある人物なのか等を判定する。例えば、音声解析部１１は、取り込まれた音声の声紋に基づいて使用しているユーザを判別し、判別したユーザが話し相手と初めて話をしているか否かを判定する。
【００２１】
また、音声解析部１１は、話し相手の音声を解析する。固定電話機１で取り込まれた話し相手の音声を解析する。ＣＰＵ８は、取り込まれた話し相手の音声の声紋を、ＲＯＭ１０に記憶されている声紋と比較識別して話し相手を判別し、判別したユーザが話し相手と初めて話をしているか否かを判定する。
【００２２】
このように、音声解析部１１は、ユーザを判別する判別装置として機能する。また、ＣＰＵ８は、ユーザと話をしている話し相手の音声を当該ユーザが聞いたことがあるかどうかを、話し相手の声紋およびＲＯＭ１０に記憶されているデータに基づいて判定する判定装置として機能する。
【００２３】
なお、音声解析部１１は音声認識辞書を有している。音声解析部１１は、音声認識辞書を参照して通話相手の音声を解析する。なお、固定電話機１には、音声認識ソフトウェアがインストールされ、インストール済みのソフトウェアを用いて音声を認識してよい。更には別途市販のソフトをインストールして音声の認識に用いてもよい。具体的には、ＣＰＵ８が、ソフトウェアに従って動作することにより、音声の認識処理を実行してよい。
【００２４】
音声解析部１１は、ＲＯＭ１０に予め登録されているフレーズやキーワードのほか、ユーザが登録した特定のフレーズやキーワードが、話し相手の音声に含まれているか否かを検出する。このように、音声解析部１１は、話し相手の音声に特定のワードが含まれているかどうかを検出する検出装置として機能する。ＣＰＵ８は、音声解析部１１で特定のワードが検出された場合に、話し相手に対して警告を行う。表示部９は、音声解析部１１による判定結果を表示する表示装置として機能する。
【００２５】
画像分析部１２は内蔵カメラ１３が撮像した画像を分析する。画像分析部１２は、顔認識部１６および表情検出部１７を有する。
【００２６】
顔認識部１６は、内蔵カメラ１３が撮像した画像から顔を検出するとともに、検出した顔と、ＲＯＭ１０に記憶されている顔とを比較して、内蔵カメラ１３が撮像した人を認識する。顔認識部１６は、例えばパターンマッチングにより顔の比較を行う。内蔵カメラ１３は前述したように表示部９と同じ側に設けられているので、ユーザの顔を主に撮像することができる。このため、顔認識部１６も、ユーザの顔を認識することができる。
【００２７】
表情検出部１７は、顔認識部１６により検出された顔領域の画像の顔表情を、ＲＯＭ１０に記憶されている顔表情データと比較することにより、内蔵カメラ１３が撮像した人の表情を検出する。なお、表情検出部１７は、笑顔、泣き顔、怒り顔、驚き顔、不安顔、不思議そうな表情、眉間に皺を寄せている表情、緊張している表情、リラックスしている表情等の様々な種類の表情を検出する。ＲＯＭ１０は、これらの複数の種類の表情データを記憶する。なお、笑顔検出には、米国特許出願公開第２００８−００３７８４１号明細書に記載された方法を適用できる。また、眉間の皺の検出には、米国特許出願公開第２００８−０２９２１４８号明細書に記載された方法を適用できる。
【００２８】
ＣＰＵ８は、固定電話機１全体を制御する。本実施形態においては、ユーザの表情、ユーザ或いは話し相手の発したフレーズやキーワード、ユーザの言葉遣いなどに応じて、通話内容を録音するような制御を行う。電源部１５は、本体部２および受話器３の各部に電源を供給する。
【００２９】
図３は、ＲＯＭ１０に記憶されるユーザ情報の一例を示す。ユーザ情報は、例えば、ユーザＩＤ、名前、声紋データおよび画像データを互いに対応づけたデータである。ユーザＩＤは、固定電話機１を使用するユーザを識別する情報である。ユーザＩＤは、ユーザ登録時にＣＰＵ８が付与する数値等の情報であってよい。
【００３０】
名前は、表示部９への表示に使用されるユーザ名であり、ユーザによって登録されてよい。家庭においては、「父」「母」など、血縁関係等を示す情報を名前として使用してもよく、名（ｆｉｒｓｔ  ｎａｍｅ）を使用してもよい。会社等の組織においては、氏名、役職等を名前として使用できる。
【００３１】
声紋データは、ユーザＩＤに対応するユーザの声紋のデータを特定する情報である。画像データは、ユーザＩＤに対応するユーザを撮像した画像のデータを特定する情報である。内蔵カメラ１３で撮像したユーザの顔等のデータを、画像データとして記憶してよい。
【００３２】
ここでは分かり易く説明することを目的として、声紋データや画像データの一例として、データを格納するファイルのファイル名を示した。しかし、ＲＯＭ１０においてデータを記憶しているメモリ位置の情報等、ＲＯＭ１０におけるデータの記憶場所を特定する情報を音声データや画像データとして適用できる。
【００３３】
音声解析部１１は、マイク部７で取り込まれた音声の声紋と本ユーザ情報とに基づいて、固定電話機１を使用しているユーザを判別する。具体的には、音声解析部１１は、マイク部７で取り込まれた音声の声紋に類似する声紋データに対応づけて記憶されたユーザＩＤを特定する。また、顔認識部１６は、内蔵カメラ１３で撮像されたユーザの画像と本ユーザ情報とに基づいて、固定電話機１を使用しているユーザを判別する。具体的には、顔認識部１６は、内蔵カメラ１３で撮像されたユーザの画像に類似する画像データに対応づけて記憶されたユーザＩＤを特定する。
【００３４】
図４は、ＲＯＭ１０に記憶される話相手情報の一例を示す。話相手情報は、例えば、話相手ＩＤおよび声紋データを互いに対応づけたデータである。話相手ＩＤは、話相手を識別する情報である。話相手ＩＤは、ＣＰＵ８が付与する数値等の情報であってよい。ＣＰＵ８は、ユーザの誰もが過去に通話したことのない相手から電話がかかってきた場合に、当該相手に付与した話相手ＩＤおよび声紋データを、話相手情報として追加する。なお、話相手を親戚や友人などのグループ化してＲＯＭ１０に記憶させてもよく、このようなグループ化は前述のタッチパネルを用いて行なうことができる。
【００３５】
音声解析部１１は、固定電話機１で取り込まれた話し相手の音声の声紋と本話相手情報とに基づいて、ユーザの話し相手を判別する。具体的には、音声解析部１１は、話し相手の音声の声紋に類似する声紋データに対応づけて記憶された話相手ＩＤを特定する。
【００３６】
図５は、ＲＯＭ１０に記憶される通話履歴情報の一例を示す。通話履歴情報は、例えば、話相手ＩＤ、ユーザＩＤおよび通話時刻を互いに対応づけたデータである。
【００３７】
話相手ＩＤは、上述した話相手情報に含まれる話相手ＩＤに対応する。ユーザＩＤは、上述したユーザ情報に含まれるユーザＩＤに対応する。通話時刻は、話相手ＩＤで識別される話し相手とユーザＩＤで識別されるユーザとが話しをした日時を示す日時情報である。日時情報として、年月日、時刻等の情報を含んでよい。日時情報は、カレンダー部１４から供給された時間情報に基づいて決定される。なお、通話時刻としては、通話を開始した通話開始時刻および通話時刻を終了した通話終了時刻の少なくとも一方を含んでよい。
【００３８】
ＣＰＵ８は、電話をしてきた相手が過去にいずれのユーザと話しをしているかを、本通話履歴情報に基づいて判断する。また、ＣＰＵ８は、電話をしてきた相手とユーザとの間の通話履歴情報を、本通話履歴情報および上述したユーザ情報に基づいて、表示部９に表示させる。
【００３９】
図６は、表示部９に表示される画面６０の一例を示す。本画面６０は、ユーザが初めての相手と通話する場合の画面の一例である。本画面６０に示すように、ＣＰＵ８は、「この人とは初めての人です。」等、初めての相手である旨を、表示部９に表示することによりユーザに通知する。
【００４０】
また、ＣＰＵ８は、電話をしてきた相手が過去に他のユーザと通話していることが通話履歴情報に基づいて判断された場合には、この相手との通話履歴を表示部９にさらに表示させる。通話履歴は、日時および受け手の情報を含む。日時情報は通話履歴情報およびユーザ情報に基づいて特定される。受け手情報は、通話履歴情報およびユーザ情報に基づいて特定される。このように、表示部９は、ユーザと話をしている話し相手の声紋のデータがＲＯＭ１０に記憶されている場合に、当該音声を聞いたことがある人に関する表示を行う。
【００４１】
図７は、表示部９に表示される画面７０の一例を示す。本画面７０は、ユーザが初めてではない相手と通話する場合の画面の一例である。本画面７０に示すように、ＣＰＵ８は、「この人とは２回通話したことがあります。」等、初めての相手ではない旨を、表示部９に表示することによりユーザに通知する。
【００４２】
また、ＣＰＵ８は、電話をしてきた相手と受け手としてのユーザとの間の通話履歴を、表示部９にさらに表示させる。通話履歴は、日時情報の一覧を含む。日時情報は通話履歴情報およびユーザ情報に基づいて特定される。このように、表示部９は、話し相手の音声をユーザが聞いたことがある場合に、当該音声をユーザが聞いた時期に関する表示を行う。
【００４３】
図８は、固定電話機１における通話中のＣＰＵ８による制御の一例を示すフローである。本フローは相手からの電話を受けたときに開始され、この際にＣＰＵ８は、カレンダー部１４により通話開始日時を取得するとともに、カレンダー部１４により通話時間の計時を行なわせる。
【００４４】
ＣＰＵ８は、ステップ８０で、受け手の声紋および内蔵カメラ１３の画像から、受け手としてのユーザが誰かであるかを判別する。例えば、ユーザ情報に基づき、母親が受け手であったと判別する。
【００４５】
ＣＰＵ８は、ステップ８２で、固定電話機１で取り込まれた相手の声紋を音声解析部１１に分析させる。ＣＰＵ８は、ステップ８４で、分析された声紋から相手を判別する。具体的には、ＣＰＵ８は、分析された声紋と、ＲＯＭ１０に話相手情報として記憶されている声紋データとを比較する。分析された声紋に類似した声紋データが話相手情報として記憶されていない場合に、初めての声紋と判断する。ＣＰＵ８は、相手の声紋に類似する声紋データが話相手情報として記憶されている場合には、当該声紋データに対応づけられた話相手ＩＤを特定する。
【００４６】
初めての声紋と判断された場合、ＣＰＵ８は、ステップ８６で、相手の声紋のデータおよび付与した話相手ＩＤを声紋情報に追加する。また、ＣＰＵ８は、通話してきた相手が初めてであることを表示部９に表示する。更に、ＣＰＵ８は、当該話相手ＩＤ、ユーザＩＤおよび通話開始時刻の情報を、通話履歴に追加してよい。一方、ステップ８４で初めての声紋と判断されなかった場合（すなわち、通話履歴がある場合）、ＣＰＵ８は、ステップ８８に進む。
【００４７】
ＣＰＵ８は、ステップ８８で、ＲＯＭ１０に記憶されている通話履歴から、話相手が危険用語の使用履歴があるかどうかを判定する。ＣＰＵ８は、危険用語を用いた履歴があればステップＳ９０で表示部９に危険用語とともに通話履歴を表示してステップ９４に進む。ここで、ＣＰＵ８は、登録している危険用語およびその用いた回数を表示部９に表示してもよく、使用されている危険用語から詐欺系、勧誘系などと上位概念（階層的な表現）で表示するようにしてもよい。また、危険用語の使用履歴がある場合や、初めての相手からの通話である場合に、ＣＰＵは、表示部９を点滅させたり、表示の色を通常とは異なる色（例えば、赤）にしたり、表示の大きさを大きくしたりして視認性を高めるようにしてもよい。一方、ＣＰＵ８は、危険用語を用いた履歴がなければステップ９２で表示部９に表示履歴を表示する。この場合、ＣＰＵ８は、受け手と話し相手が初めてであるか否かを判断する。例えば、ＣＰＵ８は、相手の声紋が、母親が初めて聞く音声の声紋であるか否かを判別する。具体的には、ＣＰＵ８は、通話履歴情報に基づいて、受け手と話相手が初めてであるかを判断する。
【００４８】
母親の通話履歴がある場合、受け手と話し相手が初めてではないと判断され、ＣＰＵ８は、表示部９に図７に例示した画面を通話履歴として表示させる。これにより、本実施形態の固定電話機１は、前回通話した日時等をユーザに通知することができる。この際に、ＣＰＵ８は、カレンダー部１４で計時した通話時間や、平均通話時間などを表示部９に表示してもよい。また、母親の通話履歴がない場合、受け手にとって相手が初めての通話相手であると判断され、ＣＰＵ８は、通話履歴情報に基づいて図６に例示したような他のユーザとの間の通話履歴を表示させる。
【００４９】
ＣＰＵ８は、ステップ９４で、通話の録音を開始し、録音されたデータをＲＯＭ１０に記憶する。録音されるデータとしては、ユーザの音声および話相手の音声を含む。また、ＣＰＵ８は、音声解析部１１により、登録された危険用語の有無の検出を行なう。
【００５０】
ＣＰＵ８は、ステップ９６で、生体センサ６で検出された生体情報を取得してユーザである母親の状況を分析する。例えば、ＣＰＵ８は、生体センサ６で検出された母親の脈拍、母親の発汗量、血圧等を分析する。ＣＰＵ８は、一定期間内の脈拍数が予め定められた基準値を超えたか否か、母親の発汗量が予め定められた基準値を超えたか否か、血圧が予め定められた基準値を超えたか否かを判断してよい。
【００５１】
ＣＰＵ８は、ステップ９８で、内蔵カメラ１３が撮像した画像からユーザの表情を分析する。例えば、ＣＰＵ８は、予め定められた表情をしているか否かを表情検出部１７に検出させる。予め定められた表情としては、不安そうな表情、不思議そうな表情、嫌そうな表情、怒っている表情、イライラした表情等を例示することができる。
【００５２】
ＣＰＵ８は、ステップ１００で、会話の中に予め定められた危険用語が検出されたか否かを認識する。ＣＰＵ８は、危険用語があればステップ１０２に進み、危険用語が無ければステップ１０６に進む。
【００５３】
ＣＰＵ８は、ステップ１０２で、本フローチャートにおいてステップＳ１０２に進むのが初めてかどうかの判断を行なう。これは、次のステップ１０４の処理を重複して行なわないようにするためである。ＣＰＵ８は、ステップ１０４で、相手に通話の録音を告げる。この場合、ＣＰＵ８は、ＲＯＭ１０に記憶されている音声データ（フレーズ）を出力する。具体的には、「この通話は録音されています」等、相手に警告する音声を、マイク部７から入力された音声に重畳して電話回線に出力する。警告する音声は、マイク部７から入力された音声に代えて出力されてもよい。なお、本フローではステップ９４にて録音を開始したが、ステップ１０４の通知のタイミングで録音を開始するようにしてもよい。
【００５４】
ＣＰＵ８は、ステップ１０６で、通話が終了したかどうかを判断する。具体的には、ＣＰＵ８は、受話器３に設けられた接触センサ４が本体部２に置かれたかどうかを検出することにより、通話が終了したかどうかを判断し、通話が終了していればステップ１０８に進み、通話が終了していなければステップ１１０に進む。
【００５５】
ＣＰＵ８は、ステップ１０８に進んだ場合に、表示部９に通話の要約を表示させる。本実施形態において、ＣＰＵ８は、音声解析部１１を用いて日時、場所に関するキーワードを抽出し、話相手（例えば友人）との待ち合わせ場所や、待ち合わせ日時を表示部９に表示させている。また、ＣＰＵ８は、カレンダー部１４による計時も終了させ、通話時間などを含む通話履歴をＲＯＭ１０に記憶させるとともに、録音した音声の消去を行なう。なお、ＣＰＵ８は、録音した音声の消去を通話終了後直ちに行なってもよく、所定時間経過後（例えば、２４時間）に行なうようにしてもよい。
【００５６】
一方、通話が終了していない場合に、ＣＰＵ８は、ステップ１１０で、固定電話機１の動作モードを留守番電話モードにするかどうかを判断する。例えば、ＣＰＵ８は、ステップ９６の生体情報の分析結果と、ステップ９８の表情の分析結果とに基づいて、留守番電話モードにするか否かを判断する。本実施形態において、ＣＰＵ８は、予め定められた表情が、予め定められた長さを超えて検出され続けていると判断された場合に、留守番電話モードにすると判断する。また、ＣＰＵ８は、基準値を超える脈拍数が検出されたり、基準値を超える発汗量が検出されたり、基準値を超える血圧が検出された場合に、留守番電話モードにすると判断する。なお、これらの基準値は、ユーザＩＤ毎に設定してもよく、話相手ＩＤから友人や身内との通話の際に生体センサ６により平時の生体情報を取得して、ＲＯＭ１０に記憶しておくようにすればよい。また、ＣＰＵ８は、音声解析部１１を用いて母親の言葉遣いを分析して、この分析結果に応じて留守番電話モードにするか否かを判断するようにしてもよい。具体的には、ＣＰＵ８は、母親が「お断りします」、「結構です」、「間に合っています」というワードを発したり、語尾が荒くなった場合に、留守番電話モードにすると判断すればいい。
【００５７】
なお、ＣＰＵ８は、生体情報分析や表情分析に基づいて留守番電話モードにすべき旨が判断された場合に、留守番電話モードにするべき状況である旨をユーザに提示してもよい。例えば、ＣＰＵ８は、詐欺の可能性がある旨を表示部９に表示させてよい。また、ＣＰＵ８は、母親の状態が通常ではなく、緊張している場合などに相手に尋ねてみるべきフレーズを、表示部９に表示させてもよい。本実施形態では、ＣＰＵ８は、フレーズとして、"１０分後にかけなおして下さい"と表示部９に表示するものとする。このようなフレーズも危険用語に応じてＲＯＭ１０に記憶させておけばよく、また、タッチパネルにより登録するようにしてもよい。また、ＣＰＵ８は、留守番電話モードにするか否かの問い合わせを表示部９に表示させてもよい。ＣＰＵ８は、留守番電話モードにする旨がユーザによって選択された場合に、留守番電話モードにすると判断してもよい。
【００５８】
ＣＰＵ８は、動作モードを留守番電話モードにすると判断した場合、ステップ１１２に進み、動作モードを留守番電話モードに設定して、危険用語を含む通話記録をＲＯＭ１０に記憶して、本フローを終了する。この場合、ＣＰＵ８は、録音した音声をＲＯＭ１０に記憶させたままにするか、消去するかをユーザに問い合わせるようにしてもよく、消去するタイミングを通常の２倍（例えば４８時間）に設定するようにしてもよい。一方、留守番電話モードにしない場合は、ステップ９６に処理を戻す。
【００５９】
いわゆるオレオレ詐欺をしようとする者が、親族等と偽って電話番号が変わったことを事前に電話で知らせる等した上で、次回以降の電話で詐欺を実行しようとする場合がある。しかし、本実施形態の固定電話機１によれば、例えば最初の電話で父親がその電話に対応した場合でも、次回の電話で母親が対応した場合には、母親がその話相手とは始めてであることを表示部９に表示して注意を喚起しているので、母親が騙される可能性を低減することができる。なお、受け手と話し相手とが初めてではなくても、受け手が話し相手と通話した回数が予め定められた値より少ない場合や、初めての通話から所定期間内（例えば４８時間）通話をしてきた場合に、表示部９に注意を促すフレーズを表示してもよい。このように、詐欺をしようとする者が事前に電話番号を偽る電話をしたとしても、その者との通話頻度が少ない場合には表示部９に注意を喚起する表示を行なうことで受け手が騙される可能性を低減することができる。
【００６０】
上記の説明において、ＣＰＵ８の動作として説明した処理は、ＣＰＵ８がプログラムに従って固定電話機１が有する各ハードウェアを制御することにより実現される。すなわち、本実施形態の固定電話機１に関連して説明した処理は、プロセッサがプログラムに従って動作して各ハードウェアを制御することにより、プロセッサ、メモリ等を含む各ハードウェアとプログラムとが協働して動作することにより実現することができる。すなわち、当該処理を、いわゆるコンピュータ装置によって実現することができる。コンピュータ装置は、上述した処理の実行を制御するプログラムをロードして、読み込んだプログラムに従って動作して、当該処理を実行してよい。コンピュータ装置は、当該プログラムを記憶しているコンピュータ読取可能な記録媒体から当該プログラムをロードすることができる。
【００６１】
なお、本実施形態では、通話装置の一例としての固定電話機１を取り上げて説明した。しかし、固定電話機１として、受話器３と本体部２とが無線で接続される、いわゆるコードレス式の固定電話機を適用できる。この場合、ユーザが、内蔵カメラ１３でユーザを撮像できないような位置にいる場合でも、マイク部７に入力された音声の声紋から、ユーザを特定することができる。また、通話装置として携帯電話機を適用できる。なお、本実施形態における電話回線は通話回線の一例である。通話回線としては、固定電話回線の他に、携帯電話回線等を適用できる。また、インターネット、衛星通信等の種々の通信回線を通話回線として適用できる。
【００６２】
また、本実施形態では、家庭において固定電話機１を使用する場面を主として説明した。しかし、固定電話機１等の通話装置を、企業等の組織で使用する場面にも適用できる。例えば、電話オペレータ等をユーザとする通話装置に適用できる。一例として、お客様係や苦情受付係等で使用される場面において使用され得る。例えば、通話相手の音声をユーザが聞いたことがあるかどうかや通話履歴等を表示する機能を、通話装置の機能として適用できる。
【００６３】
固定電話機１の機能は、いわゆる電話機単体としてではなく、種々の電子機器に組み込むことができる。例えば、パーソナルコンピュータ等の汎用のコンピュータ装置、テレビ等、電話機能以外の他の機能を有する電子機器に、固定電話機１の機能を組み込むことができる。また、カメラ機能については、内蔵カメラとして電子機器に内蔵される形態の他に、電子機器に外付けされる形態を採用することができる。
【００６４】
以上、本発明を実施の形態を用いて説明したが、本発明の技術的範囲は上記実施の形態に記載の範囲には限定されない。上記実施の形態に、多様な変更または改良を加えることが可能であることが当業者に明らかである。その様な変更または改良を加えた形態も本発明の技術的範囲に含まれ得ることが、特許請求の範囲の記載から明らかである。
【００６５】
特許請求の範囲、明細書、および図面中において示した装置、システム、プログラム、および方法における動作、手順、ステップ、および段階等の各処理の実行順序は、特段「より前に」、「先立って」等と明示しておらず、また、前の処理の出力を後の処理で用いるのでない限り、任意の順序で実現しうることに留意すべきである。特許請求の範囲、明細書、および図面中の動作フローに関して、便宜上「まず、」、「次に、」等を用いて説明したとしても、この順で実施することが必須であることを意味するものではない。
【符号の説明】
【００６６】
１  固定電話機、２  本体部、３  受話器、４  接触センサ、５  スピーカ部、６  生体センサ、７  マイク部、８  ＣＰＵ 、９  表示部、１０  ＲＯＭ、１１  音声解析部、１２  画像分析部、１３  内蔵カメラ、１４  カレンダー部、１５  電源部、１６  顔認識部、１７  表情検出部
【図１】
2013164554.tif 000003
【図２】
2013164554.tif 000004
【図３】
2013164554.tif 000005
【図４】
2013164554.tif 000006
【図５】
2013164554.tif 000007
【図６】
2013164554.tif 000008
【図７】
2013164554.tif 000009
【図８】
2013164554.tif 000010