(57)【要約】【課題】娯楽性と安全性の下で、ユーザどうしのコミュニケーションを促進させることにある。【解決手段】２つの通信端末の間でテレビ電話が開始されたときからの音声メッセージを逐一取得し、予め登録されている複数の語の中に、取得したメッセージに含まれる語に一致又は類似する語があるか否かに応じて、撮影画像又はその撮影画像の代替となるアバタ画像のいずれかをそれぞれの通信端末に表示させる。例えば、自分の趣味指向に合った自分にとって好ましい言葉を予め複数登録しておき、まずは代替画像を用いてテレビ電話を開始し、それ以降に、いずれか一方の相手から予め登録された好ましい言葉が発せられた場合には、代替画像から撮影画像に切り替える。ユーザには、自分と趣味が合う相手の顔を見てみたいというニーズがあると考えられるため、そのようなユーザの気持ちを推し量って、代替画像から撮影画像に切り替えるというものである。【選択図】図１
2008270914.tif 000002
【特許請求の範囲】
【請求項１】
複数の語を記憶する記憶手段と、
画像及びメッセージを送受信して画像を表示する第１の通信端末及び第２の通信端末の間で送受信される、前記メッセージを取得する取得手段と、
前記記憶手段によって記憶されている複数の語のうち、前記取得手段によって取得されたメッセージに含まれる語に一致又は類似する語があるか否かを判断する判断手段と、
前記第１の通信端末又は前記第２の通信端末のうちの少なくともいずれか一方の通信端末に、他方の通信端末から送信されてくる撮影画像又は当該撮影画像に代わる代替画像のうちのいずれか一方を、前記判断手段の判断結果に応じて表示させる制御手段と
を備えることを特徴とする制御装置。
【請求項２】
前記制御手段は、
第１の通信端末及び第２の通信端末の間で前記画像及び前記メッセージの送受信が開始されたときは、前記第１の通信端末又は前記第２の通信端末のうちの少なくともいずれか一方の通信端末に前記代替画像を表示させ、
前記一方の通信端末に前記代替画像を表示させた後に、前記記憶手段によって記憶されている複数の語のうち、前記取得手段によって取得されたメッセージに含まれる語に一致又は類似する語があると判断された場合は、当該一方の通信端末に、前記撮影画像を表示させる
ことを特徴とする請求項１記載の制御装置。
【請求項３】
前記第１の通信端末及び前記第２の通信端末によってなされた前記画像又は前記メッセージの送受信の履歴を記憶する履歴記憶手段を備え、
前記制御手段は、
前記履歴記憶手段に送受信の履歴が記憶されていない前記第１の通信端末及び前記第２の通信端末の間で、前記画像及び前記メッセージの送受信が開始されたときには、前記第１の通信端末又は前記第２の通信端末のうちの少なくともいずれか一方の通信端末に前記代替画像を表示させ、前記履歴記憶手段に送受信の履歴が記憶されている前記第１の通信端末及び前記第２の通信端末の間で、前記画像及び前記メッセージの送受信が開始されたときには、前記第１の通信端末又は前記第２の通信端末のうちの少なくともいずれか一方の通信端末に前記撮影画像を表示させる
ことを特徴とする請求項２記載の制御装置。
【請求項４】
前記制御手段は、
第１の通信端末及び第２の通信端末の間で前記画像及び前記メッセージの送受信が開始されたときは、前記第１の通信端末又は前記第２の通信端末のうちの少なくともいずれか一方の通信端末に前記撮影画像を表示させ、
前記一方の通信端末に前記撮影画像を表示させた後に、前記記憶手段によって記憶されている複数の語のうち、前記取得手段によって取得されたメッセージに含まれる語に一致又は類似する語があると判断された場合は、当該一方の通信端末に前記代替画像を表示させる
ことを特徴とする請求項１記載の制御装置。
【請求項５】
前記第１の通信端末及び前記第２の通信端末がそれぞれ、自端末からの画像又はメッセージの送信先である相手方の通信端末によって表示される前記代替画像を記憶しており、
前記制御手段は、
前記第１の通信端末又は前記第２の通信端末のうちの少なくともいずれか一方の通信端末に前記撮影画像を表示させる場合には、他方の通信端末が撮影によって得た前記撮影画像と前記メッセージとを送信するように、当該他方の通信端末に指示し、
前記第１の通信端末又は前記第２の通信端末のうちの少なくとも一方の通信端末に前記代替画像を表示させる場合には、他方の通信端末が記憶している前記代替画像と前記メッセージとを送信するように、当該他方の通信端末に指示する
ことを特徴とする請求項１に記載の制御装置。
【請求項６】
前記第１の通信端末及び前記第２の通信端末がそれぞれ、自端末の記憶手段に、相手方の撮影画像の代替として表示し得る複数の代替画像を記憶しており、
前記制御手段は、
前記第１の通信端末又は前記第２の通信端末のうちの少なくとも一方の通信端末に前記撮影画像を表示させる場合には、他方の通信端末が撮影によって得た前記撮影画像と前記メッセージとを送信するように、当該他方の通信端末に指示し、
前記第１の通信端末又は前記第２の通信端末のうちの少なくとも一方の通信端末に前記代替画像を表示させる場合には、他方の通信端末によって指定された代替画像を前記一方の通信端末に通知し、当該一方の通信端末の前記記憶手段に記憶されている複数の代替画像のうち、通知した代替画像を表示するように当該一方の通信端末に指示する
ことを特徴とする請求項１に記載の制御装置。
【請求項７】
前記代替画像を記憶する代替画像記憶手段を備え、
前記制御手段は、
前記第１の通信端末又は前記第２の通信端末のうちの少なくとも一方の通信端末に前記撮影画像を表示させる場合には、他方の通信端末が撮影によって得た前記撮影画像と前記メッセージとを送信するように、当該他方の通信端末に指示し、
前記第１の通信端末又は前記第２の通信端末のうちの少なくとも一方の通信端末に前記代替画像を表示させる場合には、前記代替画像を前記代替画像記憶手段から読み出して前記一方の通信端末に送信する
ことを特徴とする請求項１に記載の制御装置。
【請求項８】
前記代替画像記憶手段は、前記第１の通信端末又は前記第２の通信端末に割り当てられた識別子と、前記代替画像とを対応付けて記憶しており、
前記制御手段は、前記第１の通信端末又は前記第２の通信端末のうちの少なくとも一方の通信端末に前記代替画像を表示させる場合には、他方の通信端末に割り当てられた識別子に対応付けられて記憶されている代替画像を、前記代替画像記憶手段から読み出し、前記一方の通信端末に送信する
ことを特徴とする請求項７に記載の制御装置。
【請求項９】
複数の語を記憶する記憶装置と、
画像及びメッセージを送受信して画像を表示する第１の通信端末及び第２の通信端末の間で送受信される、前記メッセージを取得する取得装置と、
前記記憶装置によって記憶されている複数の語のうち、前記取得装置によって取得されたメッセージに含まれる語に一致又は類似する語があるか否かを判断する判断装置と、
前記第１の通信端末又は前記第２の通信端末のうちの少なくともいずれか一方の通信端末に、他方の通信端末から送信されてくる撮影画像又は当該撮影画像に代わる代替画像のうちのいずれか一方を、前記判断装置の判断結果に応じて表示させる制御装置と
を備えることを特徴とする移動通信システム。
【請求項１０】
撮影手段により撮影された撮影画像を取得する取得手段と、
前記撮影画像に代わる代替画像を記憶する記憶手段と、
通信先の通信端末との間で画像及びメッセージを送受信する送受信手段と、
前記送受信手段によって受信された画像を表示する表示手段と、
複数の語を記憶する記憶手段と、
前記記憶手段によって記憶されている複数の語のうち、前記送受信手段によって受信されたメッセージに含まれる語に一致又は類似する語があるか否かを判断する判断手段と、
前記判断手段の判断結果に応じて、前記取得手段により取得された撮影画像又は前記記憶手段に記憶された代替画像のうちのいずれかを、前記送受信手段により送信される画像として選択する選択手段と
を備えることを特徴とする通信端末。
【請求項１１】
撮影手段により撮影された撮影画像を取得する取得手段と、
通信先の通信端末との間で、画像又はデータと、メッセージとを送受信する送受信手段と、
前記送受信手段によって受信された画像を表示する表示手段と、
複数の語を記憶する記憶手段と、
前記記憶手段によって記憶されている複数の語のうち、前記送受信手段によって受信されたメッセージに含まれる語に一致又は類似する語があるか否かを判断する判断手段と、
前記判断手段の判断結果に応じて、前記取得手段により取得された撮影画像又は当該撮影画像の代替となる代替画像を指定する指定データのうちのいずれかを、前記送受信手段により送信される画像又はデータとして選択する選択手段と
を備えることを特徴とする通信端末。
【請求項１２】
複数の前記代替画像を記憶する記憶手段を備え、
前記表示手段は、前記送受信手段によって受信された画像に代えて、前記記憶手段に記憶されている代替画像のうち、前記送受信手段によって受信した指定データによって指定される代替画像を表示する
ことを特徴とする請求項１１記載の通信端末。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、文字または音声によるメッセージと画像を用いてユーザ間でコミュニケーションを行うための技術に関する。
【背景技術】
【０００２】
携帯電話機は、近年の高機能化に伴い、音声のみによらないコミュニケーションが可能となっている。例えば、付属のカメラで撮影した顔などの画像を音声とともに送受信する、いわゆるテレビ電話機能を有する携帯電話機が普及している。また、音声通話中に所定のキャラクタなどの画像を表示させる携帯電話機も知られている（例えば特許文献１及び２参照）。このような技術を用いることにより、音声のみを用いた場合よりも、より親密で娯楽性の高いコミュニケーションを行うことが可能となる。
【特許文献１】特表２００４−５３７２３１号公報
【特許文献２】特開２００４−２９７３５０号公報
【発明の開示】
【発明が解決しようとする課題】
【０００３】
ところで、素性があまり明らかでない相手とテレビ電話機能を用いてコミュニケーションを行う場合には、自身の顔などが何の制限もなく知られる可能性があるので、従来のテレビ電話機能だけではプライバシーを十分に保護できないおそれがある。一方、特許文献１，２のように、通話中にキャラクタなどの画像を表示し続けるだけでは、話者同士の親密感が高まらないから、コミュニケーションがあまり促進されないという点が懸念される。
【０００４】
本発明はかかる事情に鑑みてなされたものであり、その目的は、話者を撮影した画像の利用を制限しつつも、話者どうしのコミュニケーションを促進させることにある。
【課題を解決するための手段】
【０００５】
上述した目的を達成するために、本発明は、複数の語を記憶する記憶手段と、画像及びメッセージを送受信して画像を表示する第１の通信端末及び第２の通信端末の間で送受信される、前記メッセージを取得する取得手段と、前記記憶手段によって記憶されている複数の語のうち、前記取得手段によって取得されたメッセージに含まれる語に一致又は類似する語があるか否かを判断する判断手段と、前記第１の通信端末又は前記第２の通信端末のうちの少なくともいずれか一方の通信端末に、他方の通信端末から送信されてくる撮影画像又は当該撮影画像に代わる代替画像のうちのいずれか一方を、前記判断手段の判断結果に応じて表示させる制御手段とを備えることを特徴とする制御装置を提供する。
【０００６】
本発明の好ましい態様において、前記制御手段は、第１の通信端末及び第２の通信端末の間で前記画像及び前記メッセージの送受信が開始されたときは、前記第１の通信端末又は前記第２の通信端末のうちの少なくともいずれか一方の通信端末に前記代替画像を表示させ、前記一方の通信端末に前記代替画像を表示させた後に、前記記憶手段によって記憶されている複数の語のうち、前記取得手段によって取得されたメッセージに含まれる語に一致又は類似する語があると判断された場合は、当該一方の通信端末に、前記撮影画像を表示させる。
この態様において、前記第１の通信端末及び前記第２の通信端末によってなされた前記画像又は前記メッセージの送受信の履歴を記憶する履歴記憶手段を備え、前記制御手段は、前記履歴記憶手段に送受信の履歴が記憶されていない前記第１の通信端末及び前記第２の通信端末の間で、前記画像及び前記メッセージの送受信が開始されたときには、前記第１の通信端末又は前記第２の通信端末のうちの少なくともいずれか一方の通信端末に前記代替画像を表示させ、前記履歴記憶手段に送受信の履歴が記憶されている前記第１の通信端末及び前記第２の通信端末の間で、前記画像及び前記メッセージの送受信が開始されたときには、前記第１の通信端末又は前記第２の通信端末のうちの少なくともいずれか一方の通信端末に前記撮影画像を表示させるようにしてもよい。
【０００７】
また、本発明の別の好ましい態様において、前記制御手段は、第１の通信端末及び第２の通信端末の間で前記画像及び前記メッセージの送受信が開始されたときは、前記第１の通信端末又は前記第２の通信端末のうちの少なくともいずれか一方の通信端末に前記撮影画像を表示させ、前記一方の通信端末に前記撮影画像を表示させた後に、前記記憶手段によって記憶されている複数の語のうち、前記取得手段によって取得されたメッセージに含まれる語に一致又は類似する語があると判断された場合は、当該一方の通信端末に前記代替画像を表示させる。
【０００８】
また、本発明の別の好ましい態様において、前記第１の通信端末及び前記第２の通信端末がそれぞれ、自端末からの画像又はメッセージの送信先である相手方の通信端末によって表示される前記代替画像を記憶しており、前記制御手段は、前記第１の通信端末又は前記第２の通信端末のうちの少なくともいずれか一方の通信端末に前記撮影画像を表示させる場合には、他方の通信端末が撮影によって得た前記撮影画像と前記メッセージとを送信するように、当該他方の通信端末に指示し、前記第１の通信端末又は前記第２の通信端末のうちの少なくとも一方の通信端末に前記代替画像を表示させる場合には、他方の通信端末が記憶している前記代替画像と前記メッセージとを送信するように、当該他方の通信端末に指示する。
【０００９】
また、本発明の別の好ましい態様において、前記第１の通信端末及び前記第２の通信端末がそれぞれ、自端末の記憶手段に、相手方の撮影画像の代替として表示し得る複数の代替画像を記憶しており、前記制御手段は、前記第１の通信端末又は前記第２の通信端末のうちの少なくとも一方の通信端末に前記撮影画像を表示させる場合には、他方の通信端末が撮影によって得た前記撮影画像と前記メッセージとを送信するように、当該他方の通信端末に指示し、前記第１の通信端末又は前記第２の通信端末のうちの少なくとも一方の通信端末に前記代替画像を表示させる場合には、他方の通信端末によって指定された代替画像を前記一方の通信端末に通知し、当該一方の通信端末の前記記憶手段に記憶されている複数の代替画像のうち、通知した代替画像を表示するように当該一方の通信端末に指示する。
【００１０】
また、本発明の別の好ましい態様において、前記代替画像を記憶する代替画像記憶手段を備え、前記制御手段は、前記第１の通信端末又は前記第２の通信端末のうちの少なくとも一方の通信端末に前記撮影画像を表示させる場合には、他方の通信端末が撮影によって得た前記撮影画像と前記メッセージとを送信するように、当該他方の通信端末に指示し、前記第１の通信端末又は前記第２の通信端末のうちの少なくとも一方の通信端末に前記代替画像を表示させる場合には、前記代替画像を前記代替画像記憶手段から読み出して前記一方の通信端末に送信する。
【００１１】
また、本発明の別の好ましい態様において、前記代替画像記憶手段は、前記第１の通信端末又は前記第２の通信端末に割り当てられた識別子と、前記代替画像とを対応付けて記憶しており、前記制御手段は、前記第１の通信端末又は前記第２の通信端末のうちの少なくとも一方の通信端末に前記代替画像を表示させる場合には、他方の通信端末に割り当てられた識別子に対応付けられて記憶されている代替画像を、前記代替画像記憶手段から読み出し、前記一方の通信端末に送信する。
【００１２】
また、本発明は、複数の語を記憶する記憶装置と、画像及びメッセージを送受信して画像を表示する第１の通信端末及び第２の通信端末の間で送受信される、前記メッセージを取得する取得装置と、前記記憶装置によって記憶されている複数の語のうち、前記取得装置によって取得されたメッセージに含まれる語に一致又は類似する語があるか否かを判断する判断装置と、前記第１の通信端末又は前記第２の通信端末のうちの少なくともいずれか一方の通信端末に、他方の通信端末から送信されてくる撮影画像又は当該撮影画像に代わる代替画像のうちのいずれか一方を、前記判断装置の判断結果に応じて表示させる制御装置とを備えることを特徴とする移動通信システムを提供する。
【００１３】
また、本発明の別の好ましい態様において、撮影手段により撮影された撮影画像を取得する取得手段と、前記撮影画像に代わる代替画像を記憶する記憶手段と、通信先の通信端末との間で画像及びメッセージを送受信する送受信手段と、前記送受信手段によって受信された画像を表示する表示手段と、複数の語を記憶する記憶手段と、前記記憶手段によって記憶されている複数の語のうち、前記送受信手段によって受信されたメッセージに含まれる語に一致又は類似する語があるか否かを判断する判断手段と、前記判断手段の判断結果に応じて、前記取得手段により取得された撮影画像又は前記記憶手段に記憶された代替画像のうちのいずれかを、前記送受信手段により送信される画像として選択する選択手段とを備えることを特徴とする通信端末を提供する。
【００１４】
また、本発明は、撮影手段により撮影された撮影画像を取得する取得手段と、通信先の通信端末との間で、画像又はデータと、メッセージとを送受信する送受信手段と、前記送受信手段によって受信された画像を表示する表示手段と、複数の語を記憶する記憶手段と、前記記憶手段によって記憶されている複数の語のうち、前記送受信手段によって受信されたメッセージに含まれる語に一致又は類似する語があるか否かを判断する判断手段と、前記判断手段の判断結果に応じて、前記取得手段により取得された撮影画像又は当該撮影画像の代替となる代替画像を指定する指定データのうちのいずれかを、前記送受信手段により送信される画像又はデータとして選択する選択手段とを備えることを特徴とする通信端末を提供する。
【００１５】
本発明の好ましい態様において、複数の前記代替画像を記憶する記憶手段を備え、前記表示手段は、前記送受信手段によって受信された画像に代えて、前記記憶手段に記憶されている代替画像のうち、前記送受信手段によって受信した指定データによって指定される代替画像を表示する。
【発明の効果】
【００１６】
本発明によれば、一方の通信端末に、他方の通信端末から送信されてくる撮影画像又は当該撮影画像の代替となる代替画像を切り替えて表示させることで、通信端末の話者を撮影した画像の利用を制限しつつも、話者どうしのコミュニケーションを促進させることができる。
【発明を実施するための最良の形態】
【００１７】
次に、本発明の実施の形態について、図面を参照しながら説明する。
以下の説明においては、画像を伴う音声通話のことを「テレビ電話」という。
「画像」という用語には、静止画像と動画像の双方の意味が含まれる。
「撮影画像」とは、撮影により得られた画像のことであり、例えば通信端末に付属のカメラで撮影したユーザの顔の画像などが典型的である。
「アバタ」とは、通信端末のユーザを象徴的に表現したものである。このアバタは、例えばインターネット上のチャットや掲示板などの双方向のコミュニケーションサービスにおいて比較的よく用いられているものである。「アバタ画像」とは、アバタを表す画像であり、例えば人間の顔や姿を模した画像のほか、動物やロボット或いは仮想的な生命体の画像などを含む。
【００１８】
本実施形態では、２つの通信端末の間でテレビ電話が開始されたときからの音声メッセージを逐一取得し、予め登録されている複数の語の中に、取得したメッセージに含まれる語に一致又は類似する語があるか否かに応じて、撮影画像又はその撮影画像の代替となるアバタ画像のいずれかをそれぞれの通信端末に表示させる。
例えば、自分の趣味指向に合った自分にとって好ましい言葉を予め複数登録しておき、まずは代替画像を用いてテレビ電話を開始し、それ以降に、いずれか一方の相手から予め登録された好ましい言葉が発せられた場合には、代替画像から撮影画像に切り替える。ユーザにとっては、自分と趣味が合う相手とは、その相手の顔を見てみたいというニーズがあると考えられるため、そのようなユーザの気持ちを推し量って、代替画像から撮影画像に切り替えるというものである。
また、例えば、相手が不快に感じる言葉や差別用語など、一般常識に照らし合わせて不適切或いは不謹慎な言葉を予め複数登録しておく。そして、まずはお互いの撮影画像を用いてテレビ電話を開始し、それ以降に、いずれか一方の相手から予め登録された不適切な言葉が発せられた場合には、撮影画像から代替画像に切り替える。ユーザにとっては、不快に感じる相手の顔を見ながら話をしたくないので、そのようなユーザの気持ちを推し量って、撮影画像から代替画像に切り替えるというものである。
【００１９】
［構成］
図１は、本発明の一実施形態であるシステムの全体構成を概略的に示す図である。同図に示すように、このシステムは、移動通信端末１０Ａ、１０Ｂと、移動通信網２０と、制御装置３０とを備えている。なお、このシステムにおいて移動通信端末は多数存在し得るが、図１では、通信元と通信先の移動通信端末のみ示す。以下では、移動通信端末１０Ａを通信元の移動通信端末とし、移動通信端末１０Ｂを通信先の移動通信端末とするが、両者を特に区別する必要がない場合には、これらを総称して「移動通信端末１０」という。
【００２０】
移動通信網２０は、移動通信端末１０に移動通信サービスを提供するためのネットワークシステムであり、キャリアと呼ばれる通信事業者によって管理される。移動通信網２０は、図示せぬ基地局、交換局及びサービス制御局などのノードと、これらノード間を接続する通信線とを備えており、所定のプロトコルに準拠して音声データ、画像データ、制御データなどを多重化して伝送する。移動通信網２０が準拠するプロトコルとしては、例えば、３ＧＰＰ（3rd Generation Partnership Project）により規格化された３Ｇ−３２４Ｍなどが好適である。サービス制御局は、移動通信端末１０の位置登録情報や、移動通信端末１０のユーザの契約や課金に関する情報や、各移動通信端末１０の電話番号などを記憶している。移動通信網２０のサービス制御局には制御装置３０が接続されている。
【００２１】
図２は、制御装置３０の構成を示すブロック図である。同図に示すように、制御装置３０は、制御部３１と、記憶部３３と、通信部３２とを備える。制御部３１は、ＣＰＵ（Central Processing Unit）、ＲＯＭ（Read Only Memory）、ＲＡＭ（Random Access Memory）などを備え、ＣＰＵがＲＡＭをワークエリアとして用いてＲＯＭや記憶部３３に記憶されたプログラムを実行することによって、制御装置３０の各部の動作を制御する。記憶部３３は、ＨＤＤ（Hard Disk Drive）等の記憶装置を備える。記憶部３３は、制御部３１が実行するプログラムに加えて、移動通信端末１０間の通信を実現するための各種データを記憶する。通信部３２は、移動通信網２０を介して通信を行うためのインタフェース装置である。
【００２２】
ここで、記憶部３３が記憶するデータを説明する。
記憶部３３は、地図ファイルと、複数のアバタの位置データと、アバタＩＤ変換テーブルタと、通話履歴と、用語データベースのほか、アバタ画像データなどの、後述する処理を行うための各種のデータを記憶している。地図ファイルは、仮想的な３次元空間（以下「仮想空間」という。）を表すデータの集合であり、オブジェクトデータと、位置情報と、パス情報とを含む。オブジェクトデータは、仮想空間を構成する建造物や道路などのオブジェクトを表すデータである。オブジェクトデータは、それぞれのオブジェクトの形状や色彩、すなわち外観を定義するデータであり、いわゆるポリゴンデータである。このオブジェクトは、静的なオブジェクト、すなわち仮想空間における位置が固定されたオブジェクトのみであって、アバタのような動的なオブジェクトは含まれない。位置情報は、２次元または３次元の座標系に基づいて仮想空間内の位置を表すものである。オブジェクトデータにより表されるオブジェクトのそれぞれは、位置情報と関連付けられている。パス情報は、仮想空間内においてアバタの通路（path）となり得る場所を定義するデータである。パス情報が定義された場所に該当するのは、例えば道路などである。
【００２３】
アバタの位置データとは、複数の移動通信端末１０から制御装置３０に送信されてくるアバタの位置データがそれぞれ記憶されたものである。アバタＩＤ変換テーブルとは、図３に示すように、それぞれのアバタに割り当てられたアバタＩＤと、そのアバタが象徴するユーザの移動通信端末の電話番号とが対応付けられて記述されたものである。通話履歴とは、移動通信端末１０どうしの通話の履歴であり、通信元の移動通信端末の電話番号と、通信先の移動通信端末、その通話がなされた時刻などが含まれている。用語データベースは、移動通信端末１０のユーザにとって好ましい用語が含まれている。この用語は、移動通信端末１０のユーザよって予め届け出られたものであり、図４に示すようにして、それぞれの移動通信端末１０の電話番号に対応付けられて記憶されている。
【００２４】
次に、移動通信端末１０について説明する。
移動通信端末１０は、移動通信網２０を介して他の移動通信端末１０と通話及び通信を行うことが可能な通信端末であり、いわゆる携帯電話機である。また、移動通信端末１０は、テレビ電話機能を有しており、音声通話を行いながら画像を送受信し、受信した画像を表示し得るようにする構成されている。さらに、移動通信端末１０は、制御装置３０により実現される仮想空間を表示し、ユーザを表すアバタを移動させることによってこの仮想空間内の他のアバタを介したコミュニケーションを行い得るように構成されている。
【００２５】
図５は、移動通信端末１０の構成を示すブロック図である。
同図に示すように、移動通信端末１０は、制御部１１と、無線通信部１２と、操作部１３と、表示部１４と、音声入出力部１５と、撮影部１６と、マルチメディア処理部１７とを備える。制御部１１は、ＣＰＵ１１ａ、ＲＯＭ１１ｂ、ＲＡＭ１１ｃ及びＥＥＰＲＯＭ（Electronically Erasable and Programmable ROM）１１ｄを備え、ＣＰＵ１１ａがＲＡＭ１１ｃをワークエリアとして用いてＲＯＭ１１ｂやＥＥＰＲＯＭ１１ｄに記憶されたプログラムを実行し、これにより移動通信端末１０の各部の動作を制御する。無線通信部１２は、アンテナ１２ａを備え、移動通信網２０とのデータの送受信を無線で行う。操作部１３は、ボタン等の操作子を備え、ユーザの操作に応じた操作信号を制御部１１に供給する。表示部１４は、液晶パネルや液晶駆動回路を備えた表示装置であり、制御部１１からの指示に応じて各種の情報を表示する。音声入出力部１５は、マイク１５ａ及びスピーカ１５ｂを備え、音声信号の入力及び出力を行う。撮影部１６は、いわゆるカメラの機能を有する。撮影部１６は、ＣＭＯＳ（Complementary Metal Oxide Semiconductor）イメージセンサ及び信号処理回路を備え、撮影した被写体を表す画像データを生成する。
【００２６】
マルチメディア処理部１７は、無線通信部１２を介して送受信されるデータを処理するためのＬＳＩ（Large Scale Integration）を備え、音声及び画像の符号化・復号化処理や多重化処理、分離処理などを実行する。マルチメディア処理部１７は、撮影部１６により生成された画像データに基づいて動画像データを生成する。この動画像データのことを、以下では「撮影画像データ」という。音声信号の符号化・復号化にはＡＭＲ（Adaptive Multi-Rate）を用いればよいし、画像データの符号化・復号化にはＭＰＥＧ（Moving Picture Experts Group）−４を用いればよい。
【００２７】
ここで、操作部１３が備える操作子について、図６を参照して説明する。操作部１３は、同図に示すように、機能ボタンＢｓと、移動ボタンＢｕ、Ｂｄ、Ｂｌ、Ｂｒと、確定ボタンＢｆと、ダイヤルボタンＢ１〜Ｂ０とを備える。機能ボタンＢｓは、表示部１４の画面表示に応じた所定の機能が割り当てられるボタンである。機能ボタンＢｓに割り当てられる機能は、通信先を選択するための機能であるが、その詳細については後述する。移動ボタンＢｕ、Ｂｄ、Ｂｌ、Ｂｒは、移動対象のオブジェクト（アバタまたはポインタ）を前後左右（または上下左右）に移動させるためのボタンである。確定ボタンＢｆは、表示部１４に表示されたオブジェクトを選択したり、その後の処理の内容を確定させるためのボタンである。ダイヤルボタンＢ１〜Ｂ０は、文字や数字を入力させるためのボタンである。
【００２８】
続いて、移動通信端末１０が記憶するデータの内容を説明する。ＲＯＭ１１ｂは、予めいくつかのプログラムを記憶している。以下ではこれを「プリインストールプログラム」という。具体的には、プリインストールプログラムは、マルチタスクオペレーティングシステム（以下「マルチタスクＯＳ」という。）、Ｊａｖａ（登録商標）プラットフォーム及びネイティブアプリケーションの各プログラムである。これらのプログラムについて概説すると、まず、マルチタスクＯＳは、ＴＳＳ（Time-Sharing System）による複数タスクの擬似的な並列実行を実現するために必要な仮想メモリ空間の割り当てなどの各種機能をサポートしたオペレーティングシステムである。Ｊａｖａプラットフォームは、マルチタスクＯＳを搭載した携帯機器において後述するＪａｖａ実行環境１１４を実現するためのコンフィギュレーションであるＣＤＣ（Connected  Device Configuration）にしたがって記述されたプログラム群である。ネイティブアプリケーションは、通話や通信、カメラ撮影などといった移動通信端末１０の基本的なサービスを実現するプログラムである。
【００２９】
ＥＥＰＲＯＭ１１ｄは、Ｊａｖａアプリケーションが記憶されるＪａｖａアプリケーション格納領域を有する。Ｊａｖａアプリケーションは、Ｊａｖａ実行環境１１４の下における処理の手順自体を記述した実体プログラムとその実体プログラムの実行に伴って利用される画像ファイルや音声ファイルとを結合したＪＡＲ(Ｊａｖａ Archive)ファイルと、そのＪＡＲファイルのインストールや起動、各種の属性を記述したＡＤＦ（Application Descriptor File）とを有している。このＪａｖａアプリケーションは、コンテンツプロバイダまたは通信事業者により作成されて、インターネットや移動通信網２０に接続されたサーバ装置などに格納され、移動通信端末１０からの要求に応じてそれらの制御装置から適宜ダウンロードされるようになっている。
【００３０】
図７は、ＲＯＭ１１ｂ及びＥＥＰＲＯＭ１１ｄの各種プログラムの実行により移動通信端末１０の制御部１１に実現される各部の論理的構成を示す図である。同図に示すように、各種プログラムを実行する移動通信端末１０には、通信アプリケーション１１２、カメラ撮影アプリケーション１１３及びＪａｖａ実行環境１１４がＯＳ１１１上に実現され、また、ＥＥＰＲＯＭ１１ｄには第１ストレージ１１５と第２ストレージ１１６とが確保される。通信アプリケーション１１２及びカメラ撮影アプリケーション１１３は、ＲＯＭ１１ｂのネイティブアプリケーションにより実現されるものであり、移動通信網２０との通信の確立や撮影部１６による画像の撮影などの機能をそれぞれ実現する。
【００３１】
Ｊａｖａ実行環境１１４は、ＲＯＭ１１ｂのＪａｖａプラットフォームにより実現される。Ｊａｖａ実行環境１１４は、クラスライブラリ１１７、ＪＶＭ（Java Virtual Machine）１１８及びＪＡＭ（Java Application Manager）１１９からなる。クラスライブラリ１１７は、特定の機能を有するプログラムモジュール（クラス）群を１つのファイルに結合したものである。ＪＶＭ１１８は、上述のＣＤＣのために最適化されたＪａｖａ実行環境であり、Ｊａｖａアプリケーションとして提供されるバイトコードを解釈して実行する機能を有する。ＪＡＭ１１９は、Ｊａｖａアプリケーションのダウンロードやインストール、起動・終了などを管理する機能を有する。第１ストレージ１１５は、ＪＡＭ１１９の管理の下にダウンロードされるＪａｖａアプリケーション（ＪａｒファイルとＡＤＦ）を格納する領域である。第２ストレージ１１６は、Ｊａｖａアプリケーションの実行の際に生成されたデータをその終了後に格納しておくための領域であり、インストールされたＪａｖａアプリケーション毎に個別の格納領域が割り当てられるようになっている。そして、あるＪａｖａアプリケーションに割り当てられた格納領域のデータは、そのＪａｖａアプリケーションが実行されている間のみ書き換え可能となっており、別のＪａｖａアプリケーションが書き換えを行い得ないようになっている。
【００３２】
Ｊａｖａアプリケーションには、アバタの移動に応じて仮想空間を表示するとともに、ユーザの指示に応じて他の移動通信端末１０と通話及び通信を行うためのアプリケーションが含まれる。このアプリケーションのことを、以下では「テレビ電話アプリ」という。
このテレビ電話アプリは、移動通信端末５０にあらかじめ記憶されている。また、ＥＥＰＲＯＭ１１ｄには、テレビ電話アプリの実行の際に必要となるアバタを表す「アバタ画像データ」が含まれている。
【００３３】
アバタ画像データを用いてテレビ電話を行う際には、制御部１１は、ＥＥＰＲＯＭ１１ｄからアバタ画像データを読み出し、音声入出力部１５に入力された音声メッセージと共に移動通信網２０へと送信する。移動通信網２０は、このアバタ画像データと音声メッセージとを通信先の移動通信端末１０へと送信する。通信先の移動通信端末１０においては、制御部１１が、無線通信部１２によって受信したアバタ画像データに基づいて、アバタ画像を表示部１４に表示すると共に、受信した音声メッセージを音声入出力部１５から出力する。図８（ａ）は、アバタ画像データが表すアバタ画像が通信先の移動通信端末１０の表示部１４に表示されている例を示す図である。
【００３４】
一方、撮影画像データを用いてテレビ電話を行う際には、制御部１１は、撮影部１６による撮影によって得られた撮影画像データを、音声入出力部１５に入力された音声メッセージと共に移動通信網２０へと送信する。移動通信網２０は、この撮影画像データと音声メッセージとを通信先の移動通信端末１０へと送信する。通信先の移動通信端末１０においては、制御部１１が、無線通信部１２によって受信した撮影画像データに基づいて、撮影画像を表示部１４に表示すると共に、受信した音声メッセージを音声入出力部１５から出力する。図８（ｂ）は、撮影部１６によって撮影された移動通信端末１０のユーザの顔が、通信先の移動通信端末１０の表示部１４に表示されている例を示す図である。
【００３５】
［動作］
続いて、上記構成の移動通信システムにおける移動通信端末１０と制御装置３０の動作を説明する。ここでは、まず、移動通信端末１０が上述したテレビ電話アプリを起動したときに実行する処理について説明し、その後、移動通信端末１０Ａと移動通信端末１０Ｂの間で音声通話を行うときに移動通信端末１０Ａ、１０Ｂ及び制御装置３０のそれぞれが実行する処理について説明する。
【００３６】
図９は、移動通信端末１０Ａがテレビ電話アプリを起動したときに実行する処理を示すフローチャートである。ユーザによる所定の操作を契機としてテレビ電話アプリが起動されると、移動通信端末１０Ａの制御部１１は、仮想空間内の所定の位置を示すデータと、自端末の電話番号を表すデータとを制御装置３０に送信する（ステップＳａ１）。この位置データが示す位置は任意であるが、例えば、あらかじめ決められた位置であってもよいし、以前にテレビ電話アプリの実行が終了したときのアバタの位置であってもよい。
【００３７】
位置データを受信した制御装置３０においては、制御部３１がこれを取得するとともに、記憶部３３に記憶された地図ファイルを参照し、取得した位置データに応じたオブジェクトデータを特定する。具体的には、制御部３１は、取得した位置データが示す位置から所定の範囲内にあるオブジェクトデータを特定する。このようにしてオブジェクトデータを特定したら、制御部３１は、このオブジェクトデータと、それぞれのオブジェクトデータの位置データを移動通信端末１０Ａに送信する。なお、このとき、上述した所定の範囲内に他のユーザのアバタが存在する場合には、制御部３１は、このアバタを表すアバタ画像データと、そのアバタに割り当てられたアバタＩＤと、そのアバタの位置を示す位置データとを併せてアバタ関連情報として送信する。移動通信端末１０Ａの制御部１１は、制御装置３０からオブジェクトデータとアバタ関連情報とを取得し（ステップＳａ２）、これに基づいて表示部１４に仮想空間を表す画像を表示させる（ステップＳａ３）。
【００３８】
図１０は、このとき表示部１４が表示する画像を例示した図である。同図において、画像Ｄ０は、移動通信端末１０Ａのユーザを表すアバタ画像であり、移動通信端末１０Ａのユーザの操作に応じて仮想空間内を移動する。また、画像Ｄ１、Ｄ２及びＤ３は建造物を表しており、この画像Ｄ１、Ｄ２及びＤ３に挟まれた領域Ｐ１が道路を表している。画像Ｄ４は、移動通信端末１０Ａ以外の移動通信端末１０Ｂのユーザを表すアバタ画像であり、移動通信端末１０Ｂのユーザの操作に応じて仮想空間内を移動する。画像Ｄ５は機能ボタンＢｓに割り当てられた機能を表す画像である。
【００３９】
この状態でユーザが移動ボタンＢｕ、Ｂｄ、Ｂｌ、Ｂｒを押下すると、制御部１１は、仮想空間におけるアバタの位置が変化するように、表示部１４の表示を変化させる。例えば、図１０に示した状態でユーザが移動ボタンＢｕを押下すると、制御部１１は、オブジェクトデータに基づいて表示している画像Ｄ１，Ｄ２，Ｄ３，Ｄ４の表示位置を変化させた画面に表示部１４の表示内容を更新することで、画像Ｄ０のアバタがあたかも前方に移動しているかのように見せる。また、この状態でユーザが機能ボタンＢｓを押下すると、制御部１１はポインタを表示部１４に表示させ、通信先に対応するアバタを選択させる。なお、ポインタが表示された状態でユーザが機能ボタンＢｓを押下すると、制御部１１はポインタを非表示にし、再びアバタを移動できるようにする。
【００４０】
図１１は、表示部１４がポインタを表示したときの画像を例示した図である。同図において、矢印状の画像Ｄ６がポインタを表している。このように、ポインタが表示された状態でユーザが移動ボタンＢｕ、Ｂｄ、Ｂｌ、Ｂｒを押下すると、制御部１１は、ポインタの位置が変化するように表示部１４の表示を変化させる。つまり、移動ボタンＢｕ、Ｂｄ、Ｂｌ、Ｂｒは、ポインタが表示されていないときにはアバタを移動させるための操作子として機能し、ポインタが表示されているときにはポインタを移動させるための操作子として機能する。そして、所望の通信先に対応するアバタ画像とポインタとが重なった状態で確定ボタンＢｆが押下されると、制御部１１は、このアバタに対応する通信先とテレビ電話による通話を行う旨の要求を制御装置３０に送信する。
【００４１】
ここで、上述した動作を図９のフローチャートに沿って説明する。ステップＳａ３の画像表示を行ったら、制御部１１は、ユーザによりアバタの移動が指示されているか否かを判断する（ステップＳａ４）。具体的には、制御部１１は、移動ボタンＢｕ、Ｂｄ、ＢｌまたはＢｒのいずれかに相当する操作信号が供給されたか否かの判断を繰り返す。そして、ユーザによりアバタの移動が指示されたら（ステップＳａ４：ＹＥＳ）、制御部１１は、アバタの位置を示す位置データを制御装置３０に送信し（ステップＳａ５）、既に取得しているオブジェクトデータ以外に新たなオブジェクトデータが必要か否かを判断する（ステップＳａ６）。新たなオブジェクトデータが不要であれば（ステップＳａ６：Ｎｏ）、制御部１１は、オブジェクトデータに基づいて表示している画像の表示位置をアバタが移動したように見せるために更新して（ステップＳａ７）、再びステップＳａ４の処理に戻る。また、新たなオブジェクトデータが必要であれば（ステップＳａ６：Ｙｅｓ）、制御部１１は、位置データに対応するオブジェクトデータ等を再び制御装置３０から取得する（ステップＳａ２）。
制御部１１は、ユーザがアバタを移動させている間は以上の処理を繰り返す。
【００４２】
一方、ユーザによりアバタの移動が指示されない場合（ステップＳａ４：ＮＯ）、制御部１１は、ユーザにより通信先が選択されたか否かを判断する（ステップＳａ８）。具体的には、制御部１１は、アバタ画像とポインタとが重なった状態で確定ボタンＢｆに相当する操作信号が供給されたか否かを判断する。制御部１１は、ユーザにより通信先が選択されなければ（ステップＳａ８：ＮＯ）、再びステップＳａ４の処理に戻る。一方、通信先が選択されると（ステップＳａ８：ＹＥＳ）、制御部１１は、テレビ電話を行うための処理を実行する（ステップＳａ９）。この処理（以下「テレビ電話処理」という。）については、後に詳説する。その後、制御部１１は、ユーザによりテレビ電話アプリが終了されたか否かを判断し（ステップＳａ１０）、ユーザにより終了の旨が指示されれば（ステップＳａ１０：ＹＥＳ）、テレビ電話アプリを終了させる一方、終了の旨が指示されなければ（ステップＳａ１０：ＮＯ）、再び仮想空間を表す画像を表示部１４に表示させ、ステップＳａ３以降の処理を繰り返す。
【００４３】
続いて、ステップＳａ９のテレビ電話処理について説明する。この処理は、制御装置３０及び通信先の移動通信端末１０Ｂにおける処理とともに説明する。図１２は、このときに移動通信端末１０Ａ、１０Ｂ及び制御装置３０が実行する一連の処理を示すシーケンスチャートである。以下、同図に沿って移動通信端末１０Ａ、１０Ｂ及び制御装置３０の動作を説明する。
【００４４】
まず、移動通信端末１０Ａの制御部１１は、制御装置３０にテレビ電話を行うための要求を送信する（ステップＳｂ１）。この要求には、移動通信端末１０Ａの電話番号と、ポインタＤ６によって通信先として指定されたアバタのアバタＩＤが含まれている。制御装置３０の制御部３１は、通信部３２を介してこの要求を取得すると、この要求に含まれるアバタＩＤを、記憶部３３に記憶されたアバタＩＤ変換テーブルによって電話番号に変換する（ステップＳｂ２）。そして、制御部３１は、移動通信端末１０Ａの電話番号と通信先の電話番号の組をキーにして記憶部３３内の通話履歴を検索し、通話履歴内にその組と一致するものがあるか否かを調べる（ステップＳｂ３）。
【００４５】
続いて、制御部３１は、ステップＳｂ３における検索結果に基づいて、テレビ電話を行う際に移動通信端末１０Ａ及び１０Ｂに表示させる画像データを決定する（ステップＳｂ４）。具体的には、移動通信端末１０Ａの電話番号と通信先の電話番号の組が通話履歴に含まれていた場合、制御部３１は、テレビ電話を行う際に移動通信端末１０Ａ及び移動通信端末１０Ｂに表示させる画像データを、互いの撮影画像データとする決定を行う。一方、移動通信端末１０Ａの電話番号と通信先の電話番号の組が通話履歴に含まれていない場合、制御部３１は、テレビ電話を行う際に移動通信端末１０Ａ及び移動通信端末１０Ｂに表示させる画像データを、互いのアバタ画像データとする決定を行う。
【００４６】
次に、制御部３１は、ステップＳｂ４における決定に基づき、送信すべき画像データを指示するデータを移動通信端末１０Ａに送信する（ステップＳｂ５）。つまり、制御部３１は、移動通信端末１０Ａの電話番号と通信先の電話番号の組が通話履歴に含まれていない場合には、移動通信端末１０Ａに対してアバタ画像データを送信する旨の指示を行う。これと並行して、制御部３１は、移動通信網２０のサービス制御局などの各ノードに指示することで、移動通信端末１０Ｂに対する呼出を行わせる（ステップＳｂ６）。この呼出には、アバタ画像データを用いたテレビ電話の呼びだしである旨と、移動通信端末１０Ａのユーザを表すアバタ画像データが含まれている。
【００４７】
制御装置３０から上記の指示を受信した移動通信端末１０Ａにおいては、制御部１１が、図１３に示すような画面を表示部１４に表示する（ステップＳｂ７）。この画面には、アバタ画像を用いてテレビ電話を行うために通話相手を呼びだし中である旨が記されている。一方、呼び出された移動通信端末１０Ｂにおいては、制御部１１が、図１４に示すような画面を表示部１４に表示する（ステップＳｂ８）。この画面には、発呼元のユーザのアバタ画像と、アバタ画像を用いてテレビ電話を行ってよいか否かを問い合わせるメッセージが記されている。このときユーザが「ＹＥＳ」を選択すると、移動通信端末１０Ｂの制御部１１は移動通信網２０に対して応答を返し、これにより、移動通信端末１０Ａ及び移動通信端末１０Ｂの間で通話回線が確立される（ステップＳｂ９）。
【００４８】
通話回線が確立された後は、移動通信端末１０Ａ，１０Ｂの制御部１１は、図８（ａ）に示すような画像を表示部１４に表示し、この状態でテレビ電話がなされることになる。つまり、移動通信端末１０Ａ，１０Ｂの制御部１１はそれぞれ、ＥＥＰＲＯＭ１１ｄからアバタ画像データを読み出し、音声入出力部１５に入力された音声メッセージと共に移動通信網２０へと送信する。移動通信網２０は、このアバタ画像データと音声メッセージとを相手方の移動通信端末へと送信する。相手方の移動通信端末１０においては、制御部１１が、無線通信部１２によって受信したアバタ画像データに基づいて、アバタ画像を表示部１４に表示すると共に、受信した音声メッセージを音声入出力部１５から出力する。
【００４９】
この通話回線の確立と同時に、制御装置３０の制御部３１は、移動通信端末１０Ａと移動通信端末１０Ｂとの間で送受信される音声メッセージについて音声認識処理を開始する。そして、その音声認識処理によって認識された語と、用語データベースに含まれる語とを比較し、用語データベースに含まれる語のうち、音声認識処理によって認識された語と一致又は類似する語があるか否かを判断する（ステップＳｂ１０）。ここでいう「類似」の範囲とは、音声認識処理の精度や、用語の変形などを考慮して予め定義された範囲であり、用語データベースに含まれる語の同義語であると考えられる範囲である。
【００５０】
このとき、移動通信端末１０Ａから送信されてくる音声メッセージに含まれている語と、移動通信端末１０Ｂの電話番号に対応付けられて用語データベースに記憶されている語とが比較される。また、移動通信端末１０Ｂから送信されてくる音声メッセージに含まれている語と、移動通信端末１０Ａの電話番号に対応付けられて用語データベースに記憶されている語とが比較される。つまり、相手から発せられた語が、自らの好みにマッチするかどうかが判断されるのである。
なお、ステップＳｂ８で表示された画面において、ユーザが「ＮＯ」を選択すると、移動通信端末１０Ｂの制御部１１は移動通信網２０に対して着呼拒否の応答を返す。このときは移動通信端末１０Ａ及び移動通信端末１０Ｂの間の通話回線は確立されない。
【００５１】
さて、用語データベースに含まれる語のうち、音声認識処理によって認識された語と一致又は類似する語が一定数以上検出された場合には（ステップＳｂ１１）、制御部３１は、撮影画像を用いたテレビ電話から、撮影画像を用いたテレビ電話に切り替える旨を移動通信端末１０Ａ及び移動通信端末１０Ｂに送信する（ステップＳｂ１２、Ｓｂ１３）。
このときの「一定数以上」とは、移動通信端末１０Ｂの電話番号に対応付けられて記憶されている語のうち、移動通信端末１０Ａから送信されてくる音声メッセージに含まれている語と一致又は類似する語の数が一定数以上で、且つ、移動通信端末１０Ａの電話番号に対応付けられて記憶されている語のうち、移動通信端末１０Ｂから送信されてくる音声メッセージに含まれている語と一致又は類似する語の数が一定数以上であることを意味する。
【００５２】
制御装置３０から上記の指示を受信した移動通信端末１０Ａにおいては、制御部１１が、図１５に示すような画面を表示部１４に表示する（ステップＳｂ１４）。この画面には、撮影画像を用いてテレビ電話を行うか否かを問い合わせるメッセージが記されている。このときユーザが「ＹＥＳ」を選択すると、移動通信端末１０Ａの制御部１１は移動通信網２０に対してその旨の応答を返す（ステップＳｂ１５）。
【００５３】
一方、移動通信端末１０Ｂの制御部１１も上記と同様の画面を表示し（ステップＳｂ１６）、ユーザが「ＯＫ」を選択すると、制御部１１は移動通信網２０に対してその旨の応答を返す（ステップＳｂ１７）。制御部３１は、双方の移動通信端末１０Ａ，１０ＢからＯＫの旨の応答を受け取ると、アバタ画像を用いたテレビ電話から撮影画像を用いたテレビ電話に切り替えるよう移動通信端末１０Ａ及び移動通信端末１０Ｂに指示する（ステップＳｂ１８，Ｓｂ１９）。この指示に応じて、移動通信端末１０Ａ及び移動通信端末１０Ｂはそれぞれ上述したような処理を経て、図８（ｂ）に示すような撮影画像を用いたテレビ電話を行う（ステップＳｂ２０）。つまり、移動通信端末１０Ａ及び移動通信端末１０Ｂの制御部１１はそれぞれ、撮影部１６による撮影によって得られた撮影画像データを、音声入出力部１５に入力された音声メッセージと共に移動通信網２０へと送信する。移動通信網２０は、この撮影画像データと音声メッセージとを相手方の移動通信端末１０へと送信する。相手方の移動通信端末１０においては、制御部１１が、無線通信部１２によって受信した撮影画像データに基づいて、撮影画像を表示部１４に表示すると共に、受信した音声メッセージを音声入出力部１５から出力する。
【００５４】
なお、ステップＳｂ１４，１６で表示された画面において、ユーザが「ＮＯ」を選択すると、移動通信端末１０の制御部１１は移動通信網２０に対して着呼拒否の応答を返す。移動通信網２０は、この旨を相手方の移動通信端末１０に通知し、その通知に応じて、その移動通信端末１０の制御部１１は図１６に示すような画面を表示部１４に表示する。このときは移動通信端末１０Ａ及び移動通信端末１０Ｂの間の通話回線は確立されない。
【００５５】
また、ステップＳｂ３において、移動通信端末１０Ａの電話番号と通信先の電話番号の組が通話履歴に含まれていた場合には、制御部３１は、移動通信端末１０Ａに対して撮影画像データを送信する旨の指示を行う。これと並行して、制御部３１は、移動通信網２０のサービス制御局などの各ノードに指示することで移動通信端末１０Ｂに対する呼出を行わせる。この呼出には、撮影画像データを用いたテレビ電話である旨が含まれている。制御装置３０から上記の指示を受信した移動通信端末１０Ａにおいては、制御部１１が、撮影画像を用いてテレビ電話を行うため通話相手を呼びだし中である旨が記された画面（図１７参照）を表示する（ステップＳｂ７）。
【００５６】
一方、呼び出された移動通信端末１０Ｂにおいては、制御部１１が、発呼元の移動通信端末の電話番号と、撮影画像を用いてテレビ電話を行ってよいか否かを問い合わせるメッセージが記されている画面（図１８参照）を表示部１４に表示する（ステップＳｂ８）。このときユーザが「ＯＫ」を選択すると、移動通信端末１０Ｂの制御部１１は移動通信網２０に対して応答を返し、これにより、移動通信端末１０Ａ及び移動通信端末１０Ｂの間で通話回線が確立される。
以降、移動通信端末１０Ａ及び移動通信端末１０Ｂの間では、撮影画像が表示された状態で通話がなされる。
【００５７】
本実施形態における移動通信端末１０Ａ、１０Ｂ及び制御装置３０の動作は以上の通りである。このように動作することで、移動通信端末１０のユーザは、アバタを介して仮想空間を自由に移動し、他のアバタを操作する移動通信端末１０のユーザとテレビ電話を行うことが可能となる。つまり、本実施形態によれば、通信先の電話番号等を知らなくてもテレビ電話を行うことが可能である。また、移動通信端末１０に対しては、通話相手となるユーザに対応するアバタＩＤのみが提供され、その通話相手の電話番号は提供されないから、電話番号が漏洩するような事態を未然に防止することも可能である。加えて、この実施形態によれば、“アバタを用いて仮想空間を擬似的に歩き回りながら話し相手を探す”という、従来のテレビ電話とはまったく異なる手法で発呼を行うため、テレビ電話に高い娯楽性を付与し、利用の促進を図ることが期待できる。
【００５８】
また、上記実施形態では、通話の開始時点では相手方のアバタ画像が表示され、通話を続けていく過程で、通話相手が自分の好みに合う語を発することが多いと、アバタ画像が撮影画像に切り替えられて表示される。このように、はじめはアバタ画像を表示させてテレビ電話を行い、ある程度気が合うということが予測できた時点で撮影画像を表示させてテレビ電話を行わせることで、コミュニケーションの態様を段階的に変化させることが可能である。また、このようにすることで、素性があまり明らかでない相手とのコミュニケーションに対するユーザの心理的な障壁を和らげることも期待できる。また、アバタ画像から撮影画像に切り替えるかどうかをユーザに確認するので、移動通信端末１０のユーザは、意図しない相手に対しては撮影画像を表示させないようにすることもできる。これによりユーザのプライバシを適切に保護することができる。
【００５９】
［変形例］
以上の実施形態を次のように変形してもよい。なお、以下の変形例は適宜組み合わせてもよい。
（１）変形例１
上述した実施形態では、自分の趣味指向に合った自分にとって好ましい言葉を予め複数登録しておき、まずは代替画像を用いてテレビ電話を開始し、それ以降に、いずれか一方の相手から予め登録された好ましい言葉が発せられた場合には、代替画像から撮影画像に切り替えていた。
そうではなくて、例えば相手が不快に感じる言葉や差別用語など、一般常識に照らし合わせて不適切或いは不謹慎な言葉を予め複数登録しておき、まずはお互いの撮影画像を用いてテレビ電話を開始し、それ以降に、いずれか一方の相手から予め登録された不適切な言葉が発せられた場合には、撮影画像から代替画像に切り替えるようにしてもよい。この場合の用語データベースには、ユーザが不快に感じる言葉や差別用語など、一般常識に照らし合わせて不適切或いは不謹慎な言葉を予め複数登録しておけばよく、例えば放送業界で決められている放送禁止用語を用いてもよい。
実施形態では、移動通信端末１０の電話番号と用語とを対応付けて記憶していたが、ユーザが不快に感じる言葉や差別用語はそれぞれのユーザに共通であることが多いため、移動通信端末１０の電話番号と用語とを対応付けて記憶しなくてもよい。
さらに、実施形態においても、ユーザの趣味嗜好と正確にマッチするように、移動通信端末１０の電話番号と用語とを対応付けて記憶していたが、必ずしもそうである必要はなく、多くのユーザにとって好ましい語だけを用語データベースに記憶させてもよい。
【００６０】
（２）変形例２
上述した実施形態では、通信元の移動通信端末１０の電話番号と通信先の移動通信端末１０の電話番号の組が、制御装置３０が記憶する通話履歴に含まれていた場合には、テレビ電話を開始するときに移動通信端末１０に表示させる画像を撮影画像としていた。ただし、テレビ電話を開始するときに表示する画像を決定する際に、この通話履歴の有無を考慮することは必須ではない。
【００６１】
（３）変形例３
上述した実施形態は、テレビ電話を行うときに表示させる画像を送信元（通信元）の移動通信端末１０側で切り替える構成であったが、必ずしも、そのような構成とは限らない。
例えば送信元の移動通信端末１０にアバタ画像データと撮影画像データの双方を送信させ、制御装置３０側で、経過時間に応じて、これらのうちの一方を選択して送信先（通信先）の移動通信端末１０に送信するような構成としてもよい。
また、制御装置３０が送信先の移動通信端末１０にアバタ画像データと撮影画像データの双方を送信するとともに、表示すべき画像データを送信先の移動通信端末１０に指示する構成としてもよい。この場合、送信先の移動通信端末１０においては、受信したアバタ画像データ及び撮影画像データのうち、制御装置３０により指示された方の画像データを用いて表示を行うようにすればよい。
【００６２】
（４）変形例４
上述した実施形態は、アバタ画像データを移動通信端末１０が記憶する構成であったが、これに限らない。
例えば制御装置３０が、記憶部３３にアバタ画像データを予め記憶しておいてもよい。この場合、制御装置３０は、送信元の移動通信端末１０に対して常に撮影画像データ及びメッセージを送信するよう指示する。そして、制御装置３０は、送信先の移動通信端末１０に送信すべき画像データとして、送信元の移動通信端末１０から受け取った撮影画像データ又は自身が記憶しているアバタ画像データを選択して送信する。これを実現するためには、制御装置３０は、テレビ電話に係るデータ（音声データ、画像データ等）を中継するとともに、移動通信端末１０のマルチメディア処理部に相当する構成を備える必要がある。そして、制御装置３０の制御部３１は、アバタ画像データを送信先の移動通信端末１０に送信する場合には、通信部３２を介して多重化された音声データや撮影画像データを取得し、これを個々の音声データや撮影画像データに分離する。そして、制御装置３０の制御部３１は、取得した撮影画像データを記憶部３３から読み出したアバタ画像データに置換し、多重化処理を行った後に通信部３２に供給して、送信先の移動通信端末１０に宛てて送信する。
【００６３】
また、複数のアバタ画像データを制御装置３０が記憶しておき、移動通信端末１０からはアバタ画像データを識別するアバタＩＤを含む指定データのみが送信されるような構成であってもよい。このようにすれば、送信元の移動通信端末１０におけるデータの送信量を削減することが可能である。これを実現するためには、制御装置３０がテレビ電話に係るデータを中継するとともに、記憶部３３に複数のアバタ画像データをアバタＩＤと対応付けて記憶する。送信先の移動通信端末１０にアバタ画像を表示させる場合、送信元の移動通信端末１０は、アバタＩＤを含む指定データを音声メッセージともに送信する。制御装置３０の制御部３１は、送信元の移動通信端末１０から指定データを受け取ると、その指定データに含まれるアバタＩＤに対応するアバタ画像データに多重化処理を行った後に通信部３２に供給して、送信先の移動通信端末１０に宛てて送信する。一方、送信先の移動通信端末１０に撮影画像を表示させる場合には、制御装置３０は、送信元の移動通信端末１０に対して撮影画像データ及びメッセージを送信するよう指示すればよい。
さらに、制御装置３０が、複数のアバタ画像データを、各々の移動通信端末１０の電話番号と対応付けて記憶しておいてもよい。送信先の移動通信端末１０にアバタ画像を表示させる場合、送信元の移動通信端末１０は、自身の電話番号と音声メッセージとを送信する。制御装置３０の制御部３１は、送信元の移動通信端末１０の電話番号に対応するアバタ画像データに多重化処理を行った後に通信部３２に供給して、送信先の移動通信端末１０に宛てて送信する。一方、送信先の移動通信端末１０に撮影画像を表示させる場合には、制御装置３０は、送信元の移動通信端末１０に対して撮影画像データ及びメッセージを送信するよう指示すればよい。このようにしても、送信元の移動通信端末１０におけるデータの送信量を削減することが可能である。
【００６４】
また、送信先の移動通信端末１０が、送信元のユーザを象徴するアバタ画像として表示し得る複数のアバタ画像データを記憶しておいてもよい。このアバタ画像データは各々のアバタＩＤと対応付けて記憶されている。送信先の移動通信端末１０にアバタ画像を表示させる場合、送信元の移動通信端末１０は、アバタＩＤを含む指定データを音声メッセージともに送信する。制御装置３０はその指定データと音声メッセージを送信先の移動通信端末１０に送信する。送信先の移動通信端末１０は、記憶しているアバタ画像のうち、受信した指定データに含まれるアバタＩＤに対応するアバタ画像データを読み出してアバタ画像を表示する。一方、送信先の移動通信端末１０に撮影画像を表示させる場合には、制御装置３０は、送信元の移動通信端末１０に対して撮影画像データ及びメッセージを送信するよう指示すればよい。
【００６５】
（５）変形例５
実施形態では、用語データベースとの比較を制御装置３０が行う構成であったが、これを移動通信端末１０が行ってもよい。
つまり、移動通信端末１０のＥＥＰＲＯＭ１１ｄに複数の語を記憶させておき、制御部１１が、ＥＥＰＲＯＭ１１ｄに記憶されている複数の語のうち、相手方の移動通信端末１０から受信した音声メッセージに含まれる語に一致又は類似する語があるか否かを判断する。そして、その判断結果に応じて、相手方の移動通信端末１０から受信した撮影画像又はアバタ画像のうちのいずれかを、無線通信部１２から送信される画像として選択する。このときのアバタ画像は、移動通信端末１０によって記憶されていてもよいし、制御装置３０によって記憶されていてもよい。
アバタ画像が移動通信端末１０によって記憶されている場合、移動通信端末１０は、撮影手段により撮影された撮影画像を取得する取得手段と、前記撮影画像に代わる代替画像を記憶する記憶手段と、通信先の通信端末との間で画像及びメッセージを送受信する送受信手段と、前記送受信手段によって受信された画像を表示する表示手段と、複数の語を記憶する記憶手段と、前記記憶手段によって記憶されている複数の語のうち、前記送受信手段によって受信されたメッセージに含まれる語に一致又は類似する語があるか否かを判断する判断手段と、前記判断手段の判断結果に応じて、前記取得手段により取得された撮影画像又は前記記憶手段に記憶された代替画像のうちのいずれかを、前記送受信手段により送信される画像として選択する選択手段とを備えることを特徴とする通信端末となる。
また、アバタ画像が制御装置３０に記憶されている場合には、移動通信端末１０の制御部１１は、アバタ画像を指定する指定データを無線通信部１２から送信し、制御装置３０がこの指定データによって指定されるアバタ画像を送信先の移動通信端末１０に送信する。この場合、移動通信端末１０は、撮影手段により撮影された撮影画像を取得する取得手段と、通信先の通信端末との間で、画像又はデータと、メッセージとを送受信する送受信手段と、前記送受信手段によって受信された画像を表示する表示手段と、複数の語を記憶する記憶手段と、前記記憶手段によって記憶されている複数の語のうち、前記送受信手段によって受信されたメッセージに含まれる語に一致又は類似する語があるか否かを判断する判断手段と、前記判断手段の判断結果に応じて、前記取得手段により取得された撮影画像又は当該撮影画像の代替となる代替画像を指定する指定データのうちのいずれかを、前記送受信手段により送信される画像又はデータとして選択する選択手段とを備えることを特徴とする通信端末となる。
【００６６】
（６）変形例６
上述した実施形態は、テレビ電話、すなわち画像と音声メッセージによるコミュニケーションを行うものであったが、例えば、いわゆるチャットなどのように、音声メッセージの代わりに文字（テキストメッセージ）を用いてもよい。また、このような場合には、仮想空間内に表示されるアバタが上述した特定領域に移動したときに、仮想空間内に表示されるアバタ画像を撮影画像に切り替えるようにしてもよい。なお、画像及びメッセージを送受信する移動通信端末１０の数は、２つに限らず、３つ以上であってもよい。
【００６７】
（７）変形例７
移動通信端末１０の双方に対してアバタ画像と撮影画像の切替を指示する必要はなく、いずれか一方のみでもよい。例えば、送信先となる相手方に常に自分の撮影画像を表示させるとか、送信先となる相手方に撮影画像を見せたくないので、常に代替画像を表示させるなどといった設定がなされている場合には、制御装置３０はその相手方の移動通信端末１０に対してのみ、経過時間に応じてアバタ画像と撮影画像を切り替えて表示させることになる。
【００６８】
（８）その他の変形例
代替画像は、撮影画像の代替となる画像であればよく、実施形態で例示したアバタ画像に限らない。
実施形態では、撮影画像からアバタ画像へ切り替える際とか、アバタ画像から撮影画像へ切り替える際には、移動通信端末１０のユーザに対して、画像を切り替えてよいかどうかを確認してから切り替えるようにしていた。この確認は必ずしも必須ではなく、画像を切り替える条件が満たされたときには、直ちに画像を切り替えるようにしてもよい。
また、実施形態では、制御装置３０が提供する仮想空間において通話相手を探してテレビ電話を開始するという形態を採っていたが、必ずしもそうである必要はない。通話相手となるユーザの電話番号又はそれに代わるユーザＩＤ等をなんらかの手段によってユーザに提供し、ユーザがその電話番号やユーザＩＤ等を用いた発呼を行うことで、通話相手との間でテレビ電話を開始するようにしてもよい。
上述した実施形態においては、移動通信端末１０は携帯電話機であるとしたが、その他の通信端末であってもよい。例えば、ＰＤＡ（Personal Digital Assistance）等の携帯可能な通信端末であってもよいし、パーソナルコンピュータ等のコンピュータ装置であってもよい。なお、通信端末が移動通信網を利用するものでない場合には、移動通信網に代えてインターネット等の他のネットワークを用いればよい。また、通信端末は、撮影部を内蔵する必要はなく、外付けのビデオカメラから撮影画像データが供給されるような構成であってもよい。なお、これは、マイクやスピーカについても同様である。
【００６９】
また、移動通信端末１０ＡがステップＳａ１において送信するデータには、電話番号を表すデータが含まれているとしたが、このデータは電話番号である必要はなく、通信元の移動通信端末１０を一意的に特定可能な情報であればよい。この場合、制御装置３０は、このような情報に基づいてサービス制御局に問い合わせを行い、電話番号を取得するようにしてもよい。
【００７０】
制御装置３０の機能を分散化して複数の装置に持たせてもよい。要するに、複数の語を記憶する記憶装置と、画像及びメッセージを送受信して画像を表示する第１の通信端末及び第２の通信端末の間で送受信される、前記メッセージを取得する取得装置と、前記記憶装置によって記憶されている複数の語のうち、前記取得装置によって取得されたメッセージに含まれる語に一致又は類似する語があるか否かを判断する判断装置と、前記第１の通信端末又は前記第２の通信端末のうちの少なくともいずれか一方の通信端末に、他方の通信端末から送信されてくる撮影画像又は当該撮影画像に代わる代替画像のうちのいずれか一方を、前記判断装置の判断結果に応じて表示させる制御装置とを移動通信システムに設ければよい。
また、制御装置３０は、移動通信網のノード装置（サービス制御局や交換局など）と別体の装置であったが、この制御装置３０を移動通信網のいずれかのノード装置に内蔵してもよい。
【００７１】
また、制御装置３０が実現する諸機能は、単一のプログラムとして提供することも可能である。ゆえに、かかるプログラムを記録媒体に記録した形態で提供したり、他の制御装置３０からインターネット等のネットワークを介してダウンロードすることにより提供したりすることも可能である。
【図面の簡単な説明】
【００７２】
【図１】本発明の一実施形態であるシステムの全体構成を示す図である。
【図２】制御装置の構成を示すブロック図である。
【図３】制御装置が記憶しているアバタＩＤ変換テーブルの構成を示す図である。
【図４】制御装置が記憶している距離管理テーブルの構成を示す図である。
【図５】移動通信端末の構成を示すブロック図である。
【図６】移動通信端末が備える操作子を示す図である。
【図７】移動通信端末に実現される各部の論理的構成を示す図である。
【図８】（ａ）はアバタ画像の一例を示す図であり、（ｂ）は撮影画像の一例を示す図である。
【図９】移動通信端末が実行する処理を示すフローチャートである。
【図１０】移動通信端末が表示する画像を例示した図である。
【図１１】移動通信端末が表示する画像を例示した図である。
【図１２】移動通信端末及び制御装置が実行する処理を示すシーケンスチャートである。
【図１３】移動通信端末が表示する画像を例示した図である。
【図１４】移動通信端末が表示する画像を例示した図である。
【図１５】移動通信端末が表示する画像を例示した図である。
【図１６】移動通信端末が表示する画像を例示した図である。
【図１７】移動通信端末が表示する画像を例示した図である。
【図１８】移動通信端末が表示する画像を例示した図である。
【符号の説明】
【００７３】
１０、１０Ａ、１０Ｂ…移動通信端末、１１…制御部、１２…無線通信部、１３…操作部、１４…表示部、１５…音声入出力部、１６…撮影部、１７…マルチメディア処理部、２０…移動通信網、３０…制御装置、３１…制御部、３３…記憶部。
【図１】
2008270914.tif 000003
【図２】
2008270914.tif 000004
【図３】
2008270914.tif 000005
【図４】
2008270914.tif 000006
【図５】
2008270914.tif 000007
【図６】
2008270914.tif 000008
【図７】
2008270914.tif 000009
【図８】
2008270914.tif 000010
【図９】
2008270914.tif 000011
【図１０】
2008270914.tif 000012
【図１１】
2008270914.tif 000013
【図１２】
2008270914.tif 000014
【図１３】
2008270914.tif 000015
【図１４】
2008270914.tif 000016
【図１５】
2008270914.tif 000017
【図１６】
2008270914.tif 000018
【図１７】
2008270914.tif 000019
【図１８】
2008270914.tif 000020