(57)【特許請求の範囲】
【請求項１】
画像及びメッセージを送受信して画像を表示する第１の通信端末および画像及びメッセージを送受信して画像を表示する第２の通信端末から、仮想空間内の位置を示す位置データを受信する受信手段と、
前記受信手段が受信した位置データにより、前記第１の通信端末の仮想空間内の位置と、前記第２の通信端末の仮想空間内の位置とが所定の範囲内にあることが示された場合、一方の通信端末の位置データを他方の通信端末に送信する送信手段と、
前記第１の通信端末又は前記第２の通信端末から、画像及びメッセージの送受信を開始する要求を取得する取得手段と、
前記第１の通信端末及び前記第２の通信端末の間の前記画像又は前記メッセージの送受信の履歴を記憶する履歴記憶手段と、
前記第１の通信端末と、前記第２の通信端末とが通信接続されたとき又はそのとき以降の決められた時期からの経過時間を計測する計測手段と、
前記計測手段によって計測された経過時間が閾値に至るまでは、前記第１の通信端末又は前記第２の通信端末のうちの少なくともいずれか一方の通信端末に、他方の通信端末から送信されてくる撮影画像の代替となる代替画像を表示させ、前記計測手段によって計測された経過時間が前記閾値を超えると、前記一方の通信端末に前記撮影画像を表示させる制御手段と
を備え、
前記制御手段は、前記計測手段によって計測された経過時間が前記閾値に至るまでの期間であっても、前記取得手段によって取得された要求が、前記履歴記憶手段に記憶されている前記第１の通信端末及び前記第２の通信端末の間の画像及びメッセージの送受信を開始する要求である場合には、前記一方の通信端末に前記撮影画像を表示させる
ことを特徴とする制御装置。
【請求項２】
前記第１の通信端末及び前記第２の通信端末がそれぞれ、自端末からの画像又はメッセージの送信先である相手方の通信端末によって表示される前記代替画像を記憶しており、
前記制御手段は、
前記一方の通信端末に前記撮影画像を表示させる場合には、他方の通信端末が撮影によって得た前記撮影画像と前記メッセージとを送信するように、当該他方の通信端末に指示し、
前記一方の通信端末に前記代替画像を表示させる場合には、他方の通信端末が記憶している前記代替画像と前記メッセージとを送信するように、当該他方の通信端末に指示する
ことを特徴とする請求項１に記載の制御装置。
【請求項３】
前記第１の通信端末及び前記第２の通信端末がそれぞれ、自端末の記憶手段に、自端末からの画像又はメッセージの送信先である相手方の撮影画像の代替として表示し得る複数の代替画像を記憶しており、
前記制御手段は、
前記一方の通信端末に前記撮影画像を表示させる場合には、他方の通信端末が撮影によって得た前記撮影画像と前記メッセージとを送信するように、当該他方の通信端末に指示し、
前記一方の通信端末に前記代替画像を表示させる場合には、他方の通信端末によって指定された代替画像を前記一方の通信端末に通知して、当該一方の通信端末の前記記憶手段に記憶されている複数の代替画像のうち、通知した代替画像を表示するように当該一方の通信端末に指示する
ことを特徴とする請求項１に記載の制御装置。
【請求項４】
前記代替画像を記憶する代替画像記憶手段を備え、
前記制御手段は、
前記一方の通信端末に前記撮影画像を表示させる場合には、他方の通信端末が撮影によって得た前記撮影画像と前記メッセージとを送信するように、当該他方の通信端末に指示し、
前記一方の通信端末に前記代替画像を表示させる場合には、前記代替画像記憶手段から前記代替画像を読み出して前記一方の通信端末に送信する
ことを特徴とする請求項１に記載の制御装置。
【請求項５】
前記代替画像記憶手段は、各々の前記第１の通信端末又は前記第２の通信端末に割り当てられた識別子と、それぞれ異なる前記代替画像とを対応付けて記憶しており、
前記制御手段は、前記一方の通信端末に前記代替画像を表示させる場合には、他方の通信端末に割り当てられた識別子に対応付けられて記憶されている代替画像を、前記代替画像記憶手段から読み出し、前記一方の通信端末に送信する
ことを特徴とする請求項４に記載の制御装置。
【請求項６】
画像及びメッセージを送受信して画像を表示する第１の通信端末および画像及びメッセージを送受信して画像を表示する第２の通信端末から、仮想空間内の位置を示す位置データを受信する受信手段と、
前記受信手段が受信した位置データにより、前記第１の通信端末の仮想空間内の位置と、前記第２の通信端末の仮想空間内の位置とが所定の範囲内にあることが示された場合、一方の通信端末の位置データを他方の通信端末に送信する送信手段と、
前記第１の通信端末又は前記第２の通信端末から、画像及びメッセージの送受信を開始する要求を取得する取得手段と、
前記第１の通信端末及び前記第２の通信端末の間の前記画像又は前記メッセージの送受信の履歴を記憶する履歴記憶手段と、
前記第１の通信端末と、前記第２の通信端末とが通信接続されたとき又はそのとき以降の決められた時期からの経過時間を計測する計測装置と、
前記計測手段によって計測された経過時間が閾値に至るまでは、前記第１の通信端末又は前記第２の通信端末のうちの少なくともいずれか一方の通信端末に、他方の通信端末から送信されてくる撮影画像の代替となる代替画像を表示させ、前記計測手段によって計測された経過時間が前記閾値を超えると、前記一方の通信端末に前記撮影画像を表示させる制御装置と
を備え、
前記制御手段は、前記計測手段によって計測された経過時間が前記閾値に至るまでの期間であっても、前記取得手段によって取得された要求が、前記履歴記憶手段に記憶されている前記第１の通信端末及び前記第２の通信端末の間の画像及びメッセージの送受信を開始する要求である場合には、前記一方の通信端末に前記撮影画像を表示させる
ことを特徴とする移動通信システム。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、文字または音声によるメッセージを画像とともに送受信することにより、ユーザ間でコミュニケーションを行うための技術に関する。
【背景技術】
【０００２】
携帯電話機は、近年の高機能化に伴い、音声のみによらないコミュニケーションが可能となっている。例えば、付属のカメラで撮影した話者の顔などの画像を音声とともに送受信する、いわゆるテレビ電話機能を有する携帯電話機が普及している。また、音声通話中に所定のキャラクタなどの画像を表示させる携帯電話機も知られている（例えば特許文献１及び２参照）。このような技術を用いることにより、音声のみを用いた場合よりも、より親密で娯楽性の高いコミュニケーションを行うことが可能となる。
【特許文献１】特表２００４−５３７２３１号公報
【特許文献２】特開２００４−２９７３５０号公報
【発明の開示】
【発明が解決しようとする課題】
【０００３】
ところで、素性があまり明らかでない相手とテレビ電話機能を用いてコミュニケーションを行う場合には、自身の顔などが何の制限もなく知られる可能性があるので、従来のテレビ電話機能だけではプライバシーを十分に保護できないおそれがある。一方、特許文献１，２のように、通話中にキャラクタなどの画像を表示し続けるだけでは、話者同士の親密感が高まらないから、コミュニケーションがあまり促進されないという点が懸念される。
【０００４】
本発明はかかる事情に鑑みてなされたものであり、その目的は、話者を撮影した画像の利用を制限しつつも、話者どうしのコミュニケーションを促進させることにある。
【課題を解決するための手段】
【０００５】
上述した目的を達成するために、本発明は、画像及びメッセージを送受信して画像を表示する第１の通信端末と、画像及びメッセージを送受信して画像を表示する第２の通信端末とが通信接続されたとき又はそのとき以降の決められた時期からの経過時間を計測する計測手段と、前記第１の通信端末又は前記第２の通信端末のうちの少なくともいずれか一方の通信端末に、他方の通信端末から送信されてくる撮影画像又は当該撮影画像の代替となる代替画像を、前記計測手段によって計測された経過時間に応じて表示させる制御手段とを備えることを特徴とする制御装置を提供する。
【０００６】
本発明の好ましい態様において、前記制御手段は、前記計測手段によって計測された経過時間が閾値に至るまでは、前記一方の通信端末に前記代替画像を表示させ、前記計測手段によって計測された経過時間が前記閾値を超えると、前記一方の通信端末に前記撮影画像を表示させる。
この態様において、前記第１の通信端末又は前記第２の通信端末から、画像及びメッセージの送受信を開始する要求を取得する取得手段と、前記第１の通信端末及び前記第２の通信端末の間の前記画像又は前記メッセージの送受信の履歴を記憶する履歴記憶手段とを備え、前記制御手段は、前記計測手段によって計測された経過時間が前記閾値に至るまでの期間であっても、前記取得手段によって取得された要求が、前記履歴記憶手段に記憶されている前記第１の通信端末及び前記第２の通信端末の間の画像及びメッセージの送受信を開始する要求である場合には、前記一方の通信端末に前記撮影画像を表示させるようにしてもよい。
【０００７】
また、本発明の別の好ましい態様において、前記制御手段は、前記計測手段によって計測された経過時間が閾値に至るまでは、前記一方の通信端末に前記撮影画像を表示させ、前記計測手段によって計測された経過時間が閾値を超えると、前記一方の通信端末に前記代替画像を表示させる。
この場合、前記第１の通信端末又は前記第２の通信端末から、画像及びメッセージの送受信を開始する要求を取得する取得手段と、前記第１の通信端末及び前記第２の通信端末の間の前記画像又は前記メッセージの送受信の履歴を記憶する履歴記憶手段とを備え、前記制御手段は、前記計測手段によって計測された経過時間が閾値を超えたとしても、前記取得手段によって取得された要求が、前記履歴記憶手段に記憶されている前記第１の通信端末及び前記第２の通信端末の間の画像及びメッセージの送受信を開始する要求である場合には、前記一方の通信端末に前記撮影画像を表示させるようにしてもよい。
【０００８】
また、本発明の別の好ましい態様において、前記第１の通信端末及び前記第２の通信端末がそれぞれ、自端末からの画像又はメッセージの送信先である相手方の通信端末によって表示される前記代替画像を記憶しており、前記制御手段は、前記一方の通信端末に前記撮影画像を表示させる場合には、他方の通信端末が撮影によって得た前記撮影画像と前記メッセージとを送信するように、当該他方の通信端末に指示し、前記一方の通信端末に前記代替画像を表示させる場合には、他方の通信端末が記憶している前記代替画像と前記メッセージとを送信するように、当該他方の通信端末に指示する。
【０００９】
また、本発明の別の好ましい態様において、前記第１の通信端末及び前記第２の通信端末がそれぞれ、自端末の記憶手段に、自端末からの画像又はメッセージの送信先である相手方の撮影画像の代替として表示し得る複数の代替画像を記憶しており、前記制御手段は、前記一方の通信端末に前記撮影画像を表示させる場合には、他方の通信端末が撮影によって得た前記撮影画像と前記メッセージとを送信するように、当該他方の通信端末に指示し、前記の通信端末に前記代替画像を表示させる場合には、他方の通信端末によって指定された代替画像を前記一方の通信端末に通知して、当該一方の通信端末の前記記憶手段に記憶されている複数の代替画像のうち、通知した代替画像を表示するように当該一方の通信端末に指示する。
【００１０】
また、本発明の別の好ましい態様において、前記代替画像を記憶する代替画像記憶手段を備え、前記制御手段は、前記一方の通信端末に前記撮影画像を表示させる場合には、他方の通信端末が撮影によって得た前記撮影画像と前記メッセージとを送信するように、当該他方の通信端末に指示し、前記一方の通信端末に前記代替画像を表示させる場合には、前記代替画像記憶手段から前記代替画像を読み出して前記一方の通信端末に送信する。
この態様において、前記代替画像記憶手段は、各々の前記第１の通信端末又は前記第２の通信端末に割り当てられた識別子と、それぞれ異なる前記代替画像とを対応付けて記憶しており、前記制御手段は、前記の通信端末に前記代替画像を表示させる場合には、他方の通信端末に割り当てられた識別子に対応付けられて記憶されている代替画像を、前記代替画像記憶手段から読み出し、前記一方の通信端末に送信するようにしてもよい。
【００１１】
また、本発明は、画像及びメッセージを送受信して画像を表示する第１の通信端末と、画像及びメッセージを送受信して画像を表示する第２の通信端末とが通信接続されたとき又はそのとき以降の決められた時期からの経過時間を計測する計測装置と、前記第１の通信端末又は前記第２の通信端末のうちの少なくともいずれか一方の通信端末に、他方の通信端末から送信されてくる撮影画像又は当該撮影画像の代替となる代替画像を、前記計測装置によって計測された経過時間に応じて表示させる制御装置とを備えることを特徴とする移動通信システムを提供する。
【００１２】
また、本発明は、撮影手段により撮影された撮影画像を取得する取得手段と、前記撮影画像の代替となる代替画像を記憶する記憶手段と、通信先の通信端末との間で画像及びメッセージを送受信する送受信手段と、前記送受信手段によって受信された画像を表示する表示手段と、他の通信端末と通信接続されたとき又はそのとき以降の決められた時期からの経過時間を計測する計測手段と、前記計測手段によって計測された経過時間に応じて、前記取得手段により取得された撮影画像又は前記記憶手段に記憶された代替画像のうちのいずれかを、前記送受信手段により送信される画像として選択する選択手段とを備えることを特徴とする通信端末を提供する。
【００１３】
また、本発明は、撮影手段により撮影された撮影画像を取得する取得手段と、通信先の通信端末との間で、画像又はデータと、メッセージとを送受信する送受信手段と、前記送受信手段によって受信された画像を表示する表示手段と、他の通信端末と通信接続されたとき又はそのとき以降の決められた時期からの経過時間を計測する計測手段と、前記計測手段によって計測された経過時間に応じて、前記取得手段により取得された撮影画像又は当該撮影画像の代替となる代替画像を指定する指定データのうちのいずれかを、前記送受信手段により送信される画像又はデータとして選択する選択手段とを備えることを特徴とする通信端末を提供する。
本発明の好ましい態様において、複数の前記代替画像を記憶する記憶手段を備え、前記表示手段は、前記送受信手段によって受信された画像に代えて、前記記憶手段に記憶されている代替画像のうち、前記送受信手段によって受信した指定データによって指定される代替画像を表示するようにしてもよい。
【発明の効果】
【００１４】
本発明によれば、一方の通信端末に、他方の通信端末から送信されてくる撮影画像、又は当該撮影画像の代替となる代替画像を、計測された経過時間に応じて表示させることで、通信端末の話者を撮影した画像の利用を制限しつつも、話者どうしのコミュニケーションを促進させることができる。
【発明を実施するための最良の形態】
【００１５】
次に、本発明の実施の形態について、図面を参照しながら説明する。
以下の説明においては、画像を伴う音声通話のことを「テレビ電話」という。
「画像」という用語には、静止画像と動画像の双方の意味が含まれる。
「撮影画像」とは、撮影により得られた画像のことであり、例えば通信端末に付属のカメラで撮影したユーザの顔の画像などが典型的である。
「アバタ」とは、通信端末のユーザを象徴的に表現したものである。このアバタは、例えばインターネット上のチャットや掲示板などの双方向のコミュニケーションサービスにおいて比較的よく用いられているものである。「アバタ画像」とは、アバタを表す画像であり、例えば人間の顔や姿を模した画像のほか、動物やロボット或いは仮想的な生命体の画像などを含む。
【００１６】
本実施形態では、２つの通信端末が互いに通信接続されてテレビ電話が開始されたときからの経過時間を計測し、その経過時間に応じて、撮影画像又はその撮影画像の代替となるアバタ画像のいずれかをそれぞれの通信端末に表示させる。例えばお互いよく知らない相手と通話を行う場合、最初はお互いのプライバシーを保護するためにアバタ画像を用いるが、お互いの会話が弾んで一定期間以上の通話がなされると、アバタ画像から撮影画像に切り替える。つまり、経過時間が予め決められた一定時間に至るまでは、アバタ画像を表示させ、経過時間がその一定時間を超えると、撮影画像を表示させるのである。ユーザは、会話を長く続けることで相手の顔を見ることができるようになるので、会話そのものを長引かせようと、話題や話術を工夫したりする。この点でゲーム性や娯楽性が増して、コミュニケーションそのものが促進されることになる。
【００１７】
また、例えば有名人とテレビ電話を行うことができるサービスをユーザに提供する場合、ある一定期間まではその有名人の撮影画像をユーザの通信端末に提供するが、一定期間が経過すると、通信端末に表示される画像を撮影画像からアバタ画像へと切り替えるようにしてもよい。つまり、経過時間が予め決められた一定時間に至るまでは、撮影画像を表示させ、経過時間が一定時間を超えると、アバタ画像を表示させるのである。ユーザは、撮影画像が表示されている間に、話題を盛り上げようと、話題や話術を工夫したりする。この点でゲーム性や娯楽性が増して、コミュニケーションそのものが促進されることになる。
【００１８】
［構成］
図１は、本発明の一実施形態であるシステムの全体構成を概略的に示す図である。同図に示すように、このシステムは、移動通信端末１０Ａ、１０Ｂと、移動通信網２０と、制御装置３０とを備えている。なお、このシステムにおいて移動通信端末は多数存在し得るが、図１では、通信元と通信先の移動通信端末のみ示す。以下では、移動通信端末１０Ａを通信元（すなわち発呼する側）の移動通信端末とし、移動通信端末１０Ｂを通信先（すなわち着呼する側）の移動通信端末とするが、両者を特に区別する必要がない場合には、これらを総称して「移動通信端末１０」という。
【００１９】
移動通信網２０は、移動通信端末１０に移動通信サービスを提供するためのネットワークシステムであり、キャリアと呼ばれる通信事業者によって管理される。移動通信網２０は、図示せぬ基地局、交換局及びサービス制御局などのノードと、これらノード間を接続する通信線とを備えており、所定のプロトコルに準拠して音声データ、映像データ、制御データなどを多重化して伝送する。移動通信網２０が準拠するプロトコルとしては、例えば、３ＧＰＰ（3rd Generation Partnership Project）により規格化された３Ｇ−３２４Ｍなどが好適である。サービス制御局は、移動通信端末１０の位置登録情報や、移動通信端末１０のユーザの契約や課金に関する情報や、各移動通信端末１０の電話番号などを記憶している。制御装置３０は、移動通信網２０のサービス制御局や交換局などのノードに接続されている。
【００２０】
図２は、制御装置３０の構成を示すブロック図である。同図に示すように、制御装置３０は、制御部３１と、記憶部３３と、通信部３２とを備える。制御部３１は、ＣＰＵ（Central Processing Unit）、ＲＯＭ（Read Only Memory）、ＲＡＭ（Random Access Memory）などを備え、ＣＰＵがＲＡＭをワークエリアとして用いてＲＯＭや記憶部３３に記憶されたプログラムを実行することによって、制御装置３０の各部の動作を制御する。記憶部３３は、ＨＤＤ（Hard Disk Drive）等の記憶装置を備える。記憶部３３は、制御部３１が実行するプログラムに加えて、移動通信端末１０間の通信を実現するための各種データを記憶する。通信部３２は、移動通信網２０を介して通信を行うためのインタフェース装置である。
【００２１】
ここで、記憶部３３が記憶するデータを説明する。
記憶部３３は、地図ファイルと、複数のアバタの位置データと、アバタＩＤ変換テーブルと、通話履歴のほか、アバタ画像データなどの後述する処理を行うための各種のデータを記憶している。地図ファイルは、仮想的な３次元空間（以下「仮想空間」という。）を表すデータの集合であり、オブジェクトデータと、位置情報と、パス情報とを含む。オブジェクトデータは、仮想空間を構成する建造物や道路などのオブジェクトを表すデータである。オブジェクトデータは、それぞれのオブジェクトの形状や色彩、すなわち外観を定義するデータであり、いわゆるポリゴンデータである。このオブジェクトは、静的なオブジェクト、すなわち仮想空間における位置が固定されたオブジェクトのみであって、アバタのような動的なオブジェクトは含まれない。位置情報は、２次元または３次元の座標系に基づいて仮想空間内の位置を表すものである。オブジェクトデータにより表されるオブジェクトのそれぞれは、位置情報と関連付けられている。パス情報は、仮想空間内においてアバタの通路（path）となり得る場所を定義するデータである。パス情報が定義された場所に該当するのは、例えば道路などである。
【００２２】
アバタの位置データとは、複数の移動通信端末１０から制御装置３０に送信されてくるアバタの位置データがそれぞれ記憶されたものである。アバタＩＤ変換テーブルとは、図３に示すように、それぞれのアバタに割り当てられたアバタＩＤと、そのアバタに対応する移動通信端末１０の電話番号とが対応付けられて記述されたものである。通話履歴とは、移動通信端末１０どうしの通話（画像又は音声メッセージの送受信）の履歴であり、通信元の移動通信端末の電話番号と、通信先の移動通信端末、その通話がなされた時刻などが含まれている。
【００２３】
次に、移動通信端末１０について説明する。
移動通信端末１０は、移動通信網２０を介して他の移動通信端末１０と通信を行うことが可能な通信端末であり、いわゆる携帯電話機である。この移動通信端末１０は、テレビ電話機能を有しており、相手方の移動通信端末と画像及び音声メッセージを送受信しつつ、受信した画像を表示し得るように構成されている。さらに、移動通信端末１０は、制御装置３０により提供される仮想空間を表示し、ユーザを表すアバタをこの仮想空間内で移動させることによって、仮想空間内の他のアバタを介して他のユーザとコミュニケーションを行い得るように構成されている。
【００２４】
図４は、移動通信端末１０の構成を示すブロック図である。
同図に示すように、移動通信端末１０は、制御部１１と、無線通信部１２と、操作部１３と、表示部１４と、音声入出力部１５と、撮影部１６と、マルチメディア処理部１７とを備える。制御部１１は、ＣＰＵ１１ａ、ＲＯＭ１１ｂ、ＲＡＭ１１ｃ及びＥＥＰＲＯＭ（Electronically Erasable and Programmable ROM）１１ｄを備え、ＣＰＵ１１ａがＲＡＭ１１ｃをワークエリアとして用いてＲＯＭ１１ｂやＥＥＰＲＯＭ１１ｄに記憶されたプログラムを実行し、これにより移動通信端末１０の各部の動作を制御する。無線通信部１２は、アンテナ１２ａを備え、移動通信網２０とのデータの送受信を無線で行う。操作部１３は、ボタン等の操作子を備え、ユーザの操作に応じた操作信号を制御部１１に供給する。表示部１４は、液晶パネルや液晶駆動回路を備えた表示装置であり、制御部１１からの指示に応じて各種の情報を表示する。音声入出力部１５は、マイク１５ａ及びスピーカ１５ｂを備え、音声信号の入力及び出力を行う。撮影部１６は、いわゆるカメラの機能を有する。撮影部１６は、ＣＭＯＳ（Complementary Metal Oxide Semiconductor）イメージセンサ及び信号処理回路を備え、撮影した被写体を表す画像データを生成する。
【００２５】
マルチメディア処理部１７は、無線通信部１２を介して送受信されるデータを処理するためのＬＳＩ（Large Scale Integration）を備え、音声及び画像の符号化・復号化処理や多重化処理、分離処理などを実行する。マルチメディア処理部１７は、撮影部１６により生成された画像データに基づいて動画像データを生成する。この動画像データのことを、以下では「撮影画像データ」という。音声信号の符号化・復号化にはＡＭＲ（Adaptive Multi-Rate）を用いればよいし、画像データの符号化・復号化にはＭＰＥＧ（Moving Picture Experts Group）−４を用いればよい。
【００２６】
ここで、操作部１３が備える操作子について、図５を参照して説明する。操作部１３は、同図に示すように、機能ボタンＢｓと、移動ボタンＢｕ、Ｂｄ、Ｂｌ、Ｂｒと、確定ボタンＢｆと、ダイヤルボタンＢ１〜Ｂ０とを備える。機能ボタンＢｓは、表示部１４の画面表示に応じた所定の機能が割り当てられるボタンである。機能ボタンＢｓに割り当てられる機能は、通信先を選択するための機能であるが、その詳細については後述する。移動ボタンＢｕ、Ｂｄ、Ｂｌ、Ｂｒは、移動対象のオブジェクト（アバタまたはポインタ）を前後左右（または上下左右）に移動させるためのボタンである。確定ボタンＢｆは、表示部１４に表示されたオブジェクトを選択したり、その後の処理の内容を確定させるためのボタンである。ダイヤルボタンＢ１〜Ｂ０は、文字や数字を入力させるためのボタンである。
【００２７】
続いて、移動通信端末１０が記憶するデータの内容を説明する。ＲＯＭ１１ｂは、予めいくつかのプログラムを記憶している。以下ではこれを「プリインストールプログラム」という。具体的には、プリインストールプログラムは、マルチタスクオペレーティングシステム（以下「マルチタスクＯＳ」という。）、Ｊａｖａ（登録商標）プラットフォーム及びネイティブアプリケーションの各プログラムである。これらのプログラムについて概説すると、まず、マルチタスクＯＳは、ＴＳＳ（Time-Sharing System）による複数タスクの擬似的な並列実行を実現するために必要な仮想メモリ空間の割り当てなどの各種機能をサポートしたオペレーティングシステムである。Ｊａｖａプラットフォームは、マルチタスクＯＳを搭載した携帯機器において後述するＪａｖａ実行環境１１４を実現するためのコンフィギュレーションであるＣＤＣ（Connected  Device Configuration）にしたがって記述されたプログラム群である。ネイティブアプリケーションは、通話や通信、カメラ撮影などといった移動通信端末１０の基本的なサービスを実現するプログラムである。
【００２８】
ＥＥＰＲＯＭ１１ｄは、Ｊａｖａアプリケーションが記憶されるＪａｖａアプリケーション格納領域を有する。Ｊａｖａアプリケーションは、Ｊａｖａ実行環境１１４の下における処理の手順自体を記述した実体プログラムとその実体プログラムの実行に伴って利用される画像ファイルや音声ファイルとを結合したＪＡＲ(Ｊａｖａ Archive)ファイルと、そのＪＡＲファイルのインストールや起動、各種の属性を記述したＡＤＦ（Application Descriptor File）とを有している。このＪａｖａアプリケーションは、コンテンツプロバイダまたは通信事業者により作成されて、インターネットや移動通信網２０に接続されたサーバ装置などに格納され、移動通信端末１０からの要求に応じてそれらの制御装置から適宜ダウンロードされるようになっている。
【００２９】
図６は、ＲＯＭ１１ｂ及びＥＥＰＲＯＭ１１ｄの各種プログラムの実行により移動通信端末１０の制御部１１に実現される各部の論理的構成を示す図である。同図に示すように、各種プログラムを実行する移動通信端末１０には、通信アプリケーション１１２、カメラ撮影アプリケーション１１３及びＪａｖａ実行環境１１４がＯＳ１１１上に実現され、また、ＥＥＰＲＯＭ１１ｄには第１ストレージ１１５と第２ストレージ１１６とが確保される。通信アプリケーション１１２及びカメラ撮影アプリケーション１１３は、ＲＯＭ１１ｂのネイティブアプリケーションにより実現されるものであり、移動通信網２０との通信の確立や撮影部１６による画像の撮影などの機能をそれぞれ実現する。
【００３０】
Ｊａｖａ実行環境１１４は、ＲＯＭ１１ｂのＪａｖａプラットフォームにより実現される。Ｊａｖａ実行環境１１４は、クラスライブラリ１１７、ＪＶＭ（Java Virtual Machine）１１８及びＪＡＭ（Java Application Manager）１１９からなる。クラスライブラリ１１７は、特定の機能を有するプログラムモジュール（クラス）群を１つのファイルに結合したものである。ＪＶＭ１１８は、上述のＣＤＣのために最適化されたＪａｖａ実行環境であり、Ｊａｖａアプリケーションとして提供されるバイトコードを解釈して実行する機能を有する。ＪＡＭ１１９は、Ｊａｖａアプリケーションのダウンロードやインストール、起動・終了などを管理する機能を有する。第１ストレージ１１５は、ＪＡＭ１１９の管理の下にダウンロードされるＪａｖａアプリケーション（ＪａｒファイルとＡＤＦ）を格納する領域である。第２ストレージ１１６は、Ｊａｖａアプリケーションの実行の際に生成されたデータをその終了後に格納しておくための領域であり、インストールされたＪａｖａアプリケーション毎に個別の格納領域が割り当てられるようになっている。そして、あるＪａｖａアプリケーションに割り当てられた格納領域のデータは、そのＪａｖａアプリケーションが実行されている間のみ書き換え可能となっており、別のＪａｖａアプリケーションが書き換えを行い得ないようになっている。
【００３１】
Ｊａｖａアプリケーションには、アバタの移動に応じて仮想空間を表示するとともに、ユーザの指示に応じて他の移動通信端末１０と通話及び通信を行うためのアプリケーションが含まれる。このアプリケーションのことを、以下では「テレビ電話アプリ」という。
このテレビ電話アプリは、移動通信端末１０にあらかじめ記憶されている。また、ＥＥＰＲＯＭ１１ｄには、テレビ電話アプリの実行の際に必要となるアバタを表す「アバタ画像データ」が含まれている。
【００３２】
アバタ画像データを用いてテレビ電話を行う際には、制御部１１は、ＥＥＰＲＯＭ１１ｄからアバタ画像データを読み出し、音声入出力部１５に入力された音声メッセージと共に移動通信網２０へと送信する。移動通信網２０は、このアバタ画像データと音声メッセージとを通信先の移動通信端末１０へと送信する。通信先の移動通信端末１０においては、制御部１１が、無線通信部１２によって受信したアバタ画像データに基づいて、アバタ画像を表示部１４に表示すると共に、受信した音声メッセージを音声入出力部１５から出力する。図７（ａ）は、アバタ画像データが表すアバタ画像が通信先の移動通信端末１０の表示部１４に表示されている例を示す図である。
【００３３】
一方、撮影画像データを用いてテレビ電話を行う際には、制御部１１は、撮影部１６による撮影によって得られた撮影画像データを、音声入出力部１５に入力された音声メッセージと共に移動通信網２０へと送信する。移動通信網２０は、この撮影画像データと音声メッセージとを通信先の移動通信端末１０へと送信する。通信先の移動通信端末１０においては、制御部１１が、無線通信部１２によって受信した撮影画像データに基づいて、撮影画像を表示部１４に表示すると共に、受信した音声メッセージを音声入出力部１５から出力する。図７（ｂ）は、撮影部１６によって撮影された移動通信端末１０のユーザの顔が、通信先の移動通信端末１０の表示部１４に表示されている例を示す図である。
【００３４】
［動作］
続いて、上記構成の移動通信システムにおける移動通信端末１０と制御装置３０の動作を説明する。ここでは、まず、移動通信端末１０が上述したテレビ電話アプリを起動したときに実行する処理について説明し、その後、移動通信端末１０Ａと移動通信端末１０Ｂの間で音声通話を行うときに移動通信端末１０Ａ、１０Ｂ及び制御装置３０のそれぞれが実行する処理について説明する。
【００３５】
図８は、移動通信端末１０Ａがテレビ電話アプリを起動したときに実行する処理を示すフローチャートである。ユーザによる所定の操作を契機としてテレビ電話アプリが起動されると、移動通信端末１０Ａの制御部１１は、仮想空間内の所定の位置を示す位置データと、自端末の電話番号を表すデータとを制御装置３０に送信する（ステップＳａ１）。この位置データが示す位置は任意であるが、例えば、あらかじめ決められた位置であってもよいし、以前にテレビ電話アプリの実行が終了したときのアバタの位置であってもよい。
【００３６】
位置データを受信した制御装置３０においては、制御部３１がこれを取得するとともに、記憶部３３に記憶された地図ファイルを参照し、取得した位置データに応じたオブジェクトデータを特定する。具体的には、制御部３１は、取得した位置データが示す位置から所定の範囲内にあるオブジェクトデータを特定する。このようにしてオブジェクトデータを特定したら、制御部３１は、このオブジェクトデータと、それぞれのオブジェクトデータの位置データを移動通信端末１０Ａに送信する。なお、このとき、上述した所定の範囲内に他のユーザのアバタが存在する場合には、制御部３１は、そのアバタに割り当てられたアバタＩＤと、そのアバタの位置を示す位置データと、このアバタを表すアバタ画像データとを併せてアバタ関連情報として送信する。移動通信端末１０Ａの制御部１１は、制御装置３０からオブジェクトデータとアバタ関連情報とを取得し（ステップＳａ２）、これに基づいて表示部１４に仮想空間を表す画像を表示させる（ステップＳａ３）。
【００３７】
図９は、このとき表示部１４が表示する画像を例示した図である。同図において、画像Ｄ０は、移動通信端末１０Ａのユーザを表すアバタ画像であり、移動通信端末１０Ａのユーザの操作に応じて仮想空間内を移動する。また、画像Ｄ１、Ｄ２及びＤ３は建造物を表しており、この画像Ｄ１、Ｄ２及びＤ３に挟まれた領域Ｐ１が道路を表している。画像Ｄ４は、移動通信端末１０Ａ以外の移動通信端末１０Ｂのユーザを表すアバタ画像であり、移動通信端末１０Ｂのユーザの操作に応じて仮想空間内を移動する。画像Ｄ５は機能ボタンＢｓに割り当てられた機能を表す画像である。
【００３８】
この状態でユーザが移動ボタンＢｕ、Ｂｄ、Ｂｌ、Ｂｒを押下すると、制御部１１は、仮想空間におけるアバタの位置が変化するように、表示部１４の表示を変化させる。例えば、図９に示した状態でユーザが移動ボタンＢｕを押下すると、制御部１１は、オブジェクトデータに基づいて表示している画像Ｄ１，Ｄ２，Ｄ３，Ｄ４の表示位置を変化させた画面に表示部１４の表示内容を更新することで、画像Ｄ０のアバタがあたかも前方に移動しているかのように見せる。
【００３９】
また、この状態でユーザが機能ボタンＢｓを押下すると、制御部１１はポインタを表示部１４に表示させる。このポインタにより、ユーザは通信先に対応するアバタ画像を選択することができる。なお、ポインタが表示された状態でユーザが機能ボタンＢｓを押下すると、制御部１１はポインタを非表示にし、再びアバタを仮想空間内で移動できるようにする。図１０は、表示部１４がポインタを表示したときの画像を例示した図である。同図において、矢印状の画像Ｄ６がポインタを表している。このように、ポインタが表示された状態でユーザが移動ボタンＢｕ、Ｂｄ、Ｂｌ、Ｂｒを押下すると、制御部１１は、ポインタの位置が変化するように表示部１４の表示を変化させる。つまり、移動ボタンＢｕ、Ｂｄ、Ｂｌ、Ｂｒは、ポインタが表示されていないときにはアバタを移動させるための操作子として機能し、ポインタが表示されているときにはポインタを移動させるための操作子として機能する。そして、所望の通信先に対応するアバタ画像とポインタとが重なった状態で確定ボタンＢｆが押下されると、制御部５１は、このアバタに対応する通信先とテレビ電話による通話を行う旨の要求を制御装置３０に送信する。
【００４０】
上述した動作を、図８のフローチャートに沿って説明する。ステップＳａ３の画像表示を行ったら、制御部１１は、ユーザによりアバタの移動が指示されているか否かを判断する（ステップＳａ４）。具体的には、制御部１１は、移動ボタンＢｕ、Ｂｄ、ＢｌまたはＢｒのいずれかに相当する操作信号が供給されたか否かの判断を繰り返す。そして、ユーザによりアバタの移動が指示されたら（ステップＳａ４：ＹＥＳ）、制御部１１は、アバタの位置を示す位置データを制御装置３０に送信し（ステップＳａ５）、既に取得しているオブジェクトデータ以外に新たなオブジェクトデータが必要か否かを判断する（ステップＳａ６）。新たなオブジェクトデータが不要であれば（ステップＳａ６；Ｎｏ）、制御部１１は、オブジェクトデータに基づいて表示している画像の表示位置をアバタが移動したように見せるために更新して（ステップＳａ７）、再びステップＳａ４の処理に戻る。また、新たなオブジェクトデータが必要であれば（ステップＳａ６；Ｙｅｓ）、制御部１１は、位置データに対応するオブジェクトデータ等を再び制御装置３０から取得する（ステップＳａ２）。
制御部１１は、ユーザがアバタを移動させている間は以上の処理を繰り返す。
【００４１】
一方、ユーザによりアバタの移動が指示されない場合（ステップＳａ４：ＮＯ）、制御部１１は、ユーザにより通信先が選択されたか否かを判断する（ステップＳａ８）。具体的には、制御部１１は、アバタ画像とポインタとが重なった状態で確定ボタンＢｆに相当する操作信号が供給されたか否かを判断する。制御部１１は、ユーザにより通信先が選択されなければ（ステップＳａ８：ＮＯ）、再びステップＳａ４の処理に戻る。一方、通信先が選択されると（ステップＳａ８：ＹＥＳ）、制御部１１は、テレビ電話を行うための処理を実行する（ステップＳａ９）。この処理（以下「テレビ電話処理」という。）については、後に詳説する。その後、制御部１１は、ユーザによりテレビ電話アプリが終了されたか否かを判断し（ステップＳａ１０）、ユーザにより終了の旨が指示されれば（ステップＳａ１０：ＹＥＳ）、テレビ電話アプリを終了させる一方、終了の旨が指示されなければ（ステップＳａ１０：ＮＯ）、再び仮想空間を表す画像を表示部１４に表示させ、ステップＳａ３以降の処理を繰り返す。
【００４２】
続いて、ステップＳａ９のテレビ電話処理について説明する。この処理は、制御装置３０及び通信先の移動通信端末１０Ｂにおける処理とともに説明する。図１１は、このときに移動通信端末１０Ａ、１０Ｂ及び制御装置３０が実行する一連の処理を示すシーケンスチャートである。以下、同図に沿って移動通信端末１０Ａ、１０Ｂ及び制御装置３０の動作を説明する。
【００４３】
まず、移動通信端末１０Ａの制御部１１は、制御装置３０にテレビ電話を行うための要求を送信する（ステップＳｂ１）。この要求には、移動通信端末１０Ａの電話番号と、ポインタＤ６によって通信先として指定されたアバタのアバタＩＤが含まれている。制御装置３０の制御部３１は、通信部３２を介してこの要求を取得すると、この要求に含まれるアバタＩＤを、記憶部３３に記憶されたアバタＩＤ変換テーブルによって電話番号に変換する（ステップＳｂ２）。そして、制御部３１は、移動通信端末１０Ａの電話番号と通信先の電話番号の組をキーにして記憶部３３内の通話履歴を検索し、通話履歴内にその組と一致するものがあるか否かを調べる（ステップＳｂ３）。
【００４４】
続いて、制御部３１は、ステップＳｂ３における検索結果に基づいて、テレビ電話を行う際に移動通信端末１０Ａ及び１０Ｂに表示させる画像データを決定する（ステップＳｂ４）。具体的には、移動通信端末１０Ａの電話番号と通信先の電話番号の組が通話履歴に含まれていた場合、制御部３１は、テレビ電話を行う際に移動通信端末１０Ａ及び移動通信端末１０Ｂに表示させる画像データを、互いの撮影画像データとする決定を行う。過去に通話したことがある相手同士なら、互いの撮影画像を表示し合っても、プライバシー保護の観点において大きな問題にはならないからである。一方、移動通信端末１０Ａの電話番号と通信先の電話番号の組が通話履歴に含まれていない場合、制御部３１は、テレビ電話を行う際に移動通信端末１０Ａ及び移動通信端末１０Ｂに表示させる画像データを、互いのアバタ画像データとする決定を行う。ここでは、移動通信端末１０Ａの電話番号と通信先の電話番号の組が通話履歴に含まれていない場合を想定する。
【００４５】
この場合、制御部３１は、ステップＳｂ４における決定に基づき、送信すべき画像データを指示するデータを移動通信端末１０Ａに送信する（ステップＳｂ５）。つまり、移動通信端末１０Ａの電話番号と通信先の電話番号の組が通話履歴に含まれていないから、制御部３１は、移動通信端末１０Ａに対してアバタ画像データを送信する旨の指示を行う。これと並行して、制御部３１は、移動通信網２０のサービス制御局などの各ノードに指示することで、移動通信端末１０Ｂに対する呼出を行わせる（ステップＳｂ６）。この呼出には、アバタ画像データを用いたテレビ電話の呼びだしである旨と、移動通信端末１０Ａのユーザを表すアバタ画像データが含まれている。
【００４６】
制御装置３０から上記の指示を受信した移動通信端末１０Ａにおいては、制御部１１が、図１２に示すような画面を表示部１４に表示する（ステップＳｂ７）。この画面には、アバタ画像を用いてテレビ電話を行うために通話相手を呼びだし中である旨が記されている。一方、呼び出された移動通信端末１０Ｂにおいては、制御部１１が、図１３に示すような画面を表示部１４に表示する（ステップＳｂ８）。この画面には、通信元のユーザのアバタ画像と、アバタ画像を用いてテレビ電話を行ってよいか否かを問い合わせるメッセージが記されている。このときユーザが「ＹＥＳ」を選択すると、移動通信端末１０Ｂの制御部１１は移動通信網２０に対して応答を返し、これにより、移動通信端末１０Ａ及び移動通信端末１０Ｂの間で通話回線が確立される（ステップＳｂ９）。
【００４７】
通話回線が確立された後は、移動通信端末１０Ａ，１０Ｂの制御部１１は、図７（ａ）に示すような画像を表示部１４に表示した状態に遷移する。そして、この状態でテレビ電話がなされることになる。つまり、移動通信端末１０Ａ，１０Ｂの制御部１１はそれぞれ、ＥＥＰＲＯＭ１１ｄからアバタ画像データを読み出し、音声入出力部１５に入力された音声メッセージと共に移動通信網２０へと送信する。移動通信網２０は、このアバタ画像データと音声メッセージとを相手方の移動通信端末へと送信する。相手方の移動通信端末１０においては、制御部１１が、無線通信部１２によって受信したアバタ画像データに基づいて、アバタ画像を表示部１４に表示すると共に、受信した音声メッセージを音声入出力部１５から出力する。
【００４８】
そして、通話回線の確立と同時に、制御装置３０の制御部３１は、時間の計測を開始する（ステップＳｂ１０）。なお、ステップＳｂ８で表示された画面において、ユーザが「ＮＯ」を選択すると、移動通信端末１０Ｂの制御部１１は移動通信網２０に対して着呼拒否の応答を返す。このときは移動通信端末１０Ａ及び移動通信端末１０Ｂの間の通話回線は確立されない。
【００４９】
さて、計測されている経過時間が予め決められた一定期間を超えると（ステップＳｂ１１）、制御部３１は、アバタ画像を用いたテレビ電話から、撮影画像を用いたテレビ電話に切り替える旨を移動通信端末１０Ａ及び移動通信端末１０Ｂに送信する（ステップＳｂ１２、Ｓｂ１３）。制御装置３０から上記の指示を受信した移動通信端末１０Ａにおいては、制御部１１が、図１４に示すような画面を表示部１４に表示する（ステップＳｂ１４）。この画面には、撮影画像を用いてテレビ電話を行うか否かを問い合わせるメッセージが記されている。このときユーザが「ＹＥＳ」を選択すると、移動通信端末１０Ａの制御部１１は移動通信網２０に対してその旨の応答を返す（ステップＳｂ１５）。
【００５０】
一方、移動通信端末１０Ｂの制御部１１も上記と同様の画面を表示し（ステップＳｂ１６）、ユーザが「ＯＫ」を選択すると、制御部１１は移動通信網２０に対してその旨の応答を返す（ステップＳｂ１７）。制御部３１は、双方の移動通信端末１０Ａ，１０ＢからＯＫの旨の応答を受け取ると、アバタ画像を用いたテレビ電話から撮影画像を用いたテレビ電話に切り替えるよう、移動通信端末１０Ａ及び移動通信端末１０Ｂに指示する（ステップＳｂ１８，Ｓｂ１９）。この指示に応じて、移動通信端末１０Ａ及び移動通信端末１０Ｂはそれぞれ、図７（ｂ）に示すような撮影画像を用いたテレビ電話を行う（ステップＳｂ２０）。つまり、移動通信端末１０Ａ及び移動通信端末１０Ｂの制御部１１はそれぞれ、撮影部１６による撮影によって得られた撮影画像データを、音声入出力部１５に入力された音声メッセージと共に移動通信網２０へと送信する。移動通信網２０は、この撮影画像データと音声メッセージとを相手方の移動通信端末１０へと送信する。相手方の移動通信端末１０においては、制御部１１が、無線通信部１２によって受信した撮影画像データに基づいて、撮影画像を表示部１４に表示すると共に、受信した音声メッセージを音声入出力部１５から出力する。
【００５１】
なお、ステップＳｂ１４，１６で表示された画面において、ユーザが「ＮＯ」を選択すると、移動通信端末１０の制御部１１は移動通信網２０に対して着呼拒否の応答を返す。移動通信網２０は、この旨を相手方の移動通信端末１０に通知する。この通知に応じて、その移動通信端末１０の制御部１１は、図１５に示すような画面を表示部１４に表示する。このときは移動通信端末１０Ａ及び移動通信端末１０Ｂの間で、撮影画像を用いたテレビ電話は開始されない。
【００５２】
また、ステップＳｂ３において、移動通信端末１０Ａの電話番号と通信先の電話番号の組が通話履歴に含まれていた場合には、制御部３１は、移動通信端末１０Ａに対して撮影画像データを送信する旨の指示を行う。これと並行して、制御部３１は、移動通信網２０のサービス制御局などの各ノードに指示することで移動通信端末１０Ｂに対する呼出を行わせる。この呼出には、撮影画像データを用いたテレビ電話である旨が含まれている。制御装置３０から上記の指示を受信した移動通信端末１０Ａにおいては、制御部１１が、撮影画像を用いてテレビ電話を行うため通話相手を呼びだし中である旨が記された画面（図１６参照）を表示する（ステップＳｂ７）。
【００５３】
一方、呼び出された移動通信端末１０Ｂにおいては、制御部１１が、発呼元の移動通信端末の電話番号と、撮影画像を用いてテレビ電話を行ってよいか否かを問い合わせるメッセージが記されている画面（図１７参照）を表示部１４に表示する（ステップＳｂ８）。このときユーザが「ＯＫ」を選択すると、移動通信端末１０Ｂの制御部１１は移動通信網２０に対して応答を返し、これにより、移動通信端末１０Ａ及び移動通信端末１０Ｂの間で通話回線が確立される。
以降、移動通信端末１０Ａ及び移動通信端末１０Ｂの間では、撮影画像が表示された状態で通話がなされる。
【００５４】
本実施形態における移動通信端末１０Ａ、１０Ｂ及び制御装置３０の動作は以上の通りである。このように動作することで、移動通信端末１０のユーザは、アバタを介して仮想空間を自由に移動し、他のアバタを操作する移動通信端末１０のユーザとテレビ電話を行うことが可能となる。つまり、本実施形態によれば、通信先の電話番号等を知らなくてもテレビ電話を行うことが可能である。また、移動通信端末１０に対しては、通話相手となるユーザに対応するアバタＩＤのみが提供され、その通話相手の電話番号は提供されないから、電話番号が漏洩するような事態を未然に防止することも可能である。加えて、この実施形態によれば、“アバタを用いて仮想空間を擬似的に歩き回りながら話し相手を探す”という、従来のテレビ電話とはまったく異なる手法で発呼を行うため、テレビ電話に高い娯楽性を付与し、利用の促進を図ることが期待できる。
【００５５】
また、上記実施形態では、ある一定時間が経過するまでは相手方のアバタ画像が表示され、その一定時間の経過後には撮影画像が表示される。このように、はじめはアバタ画像を表示させてテレビ電話を行い、ある程度親密になってきたら撮影画像を表示させてテレビ電話を行わせることで、コミュニケーションの態様を段階的に変化させることが可能である。また、このようにすることで、素性があまり明らかでない相手とのコミュニケーションに対するユーザの心理的な障壁を和らげることも期待できる。また、一定期間経過時にアバタ画像から撮影画像に切り替えるかどうかをユーザに確認するので、移動通信端末１０のユーザは、意図しない相手に対しては撮影画像を表示させないようにすることもできる。これによりユーザのプライバシを適切に保護することができる。
【００５６】
［変形例］
以上の実施形態を次のように変形してもよい。また、以下の各変形例は適宜組み合わせてもよい。
（１）変形例１
上述した実施形態では、経過時間が予め決められた一定時間に至るまでは、アバタ画像を表示させ、経過時間がその一定時間を超えると、撮影画像を表示させていたが、これを逆にしてもよい。つまり、経過時間が予め決められた一定時間に至るまでは、撮影画像を表示させ、経過時間が一定時間を超えると、アバタ画像を表示させてもよい。このような形態は、前述したように、例えば有名人とテレビ電話を行うことができるサービスに用いるのが好適である。また、この例において、通信元の移動通信端末１０の電話番号と通信先の移動通信端末１０の電話番号の組が、制御装置３０が記憶する通話履歴に含まれていた場合には、経過時間が一定時間を超えると、撮影画像からアバタ画像に切り替えて表示するのではなくて、そのまま撮影画像を表示し続けるようにしてもよい。
【００５７】
（２）変形例２
上述した実施形態では、テレビ電話の開始時期、つまり２つの移動通信端末１０の通信回線が確立されて画像又は音声メッセージの送受信が開始された時期を、時間計測の始期としていたが、時間計測の始期は、実施形態の内容に限らず、通信端末どうしが通信接続されたとき又はそのとき以降の決められた時期であればよい。
この「通信端末どうしが通信接続されたとき」という用語に意味には、実施形態で説明したような２つの移動通信端末１０が通信接続されてテレビ電話が開始されたときが含まれるが、さらに以下のような内容も含まれる。
ＩＰ（Internet Protocol）電話やテレビ会議或いはチャットを実現するためのプロトコルとして、ＳＩＰ（Session Initiation Protocol）が知られている。このＳＩＰは、画像やメッセージなどの実データの通信を始める前に、お互いの通信端末が解釈可能なデータ形式や実装しているプロトコルをネゴシエーションすることによって論理的な通信コネクションを確立して相互を通信接続するというプロトコルである。例えば通信端末がＰ２Ｐ（ピアツーピア）で通信を行う際には、その通信端末どうしがＳＩＰを用いたネゴシエーションを経ることで、通信端末間の論理的な通信コネクションが確立されてお互いに通信接続される。また、ＳＩＰサーバと呼ばれる中継装置を介して通信端末が通信を行う際には、そのＳＩＰサーバを経由してＳＩＰによるネゴシエーションが行われ、これによって通信端末間の論理的な通信コネクションが確立されてお互いに通信接続される。
例えば、実施形態の制御装置３０が提供する仮想世界において、このＳＩＰがどのように利用されるかについて、その一例を説明する。
図１０に示したように、自身のアバタの視野に他人のアバタが表示されているときには、それぞれのアバタに対応する移動通信端末１０どうしをＳＩＰによって通信接続する。なぜなら、これらのアバタに対応するユーザが所望するときに、直ちにその相手とコミュニケーションを取れるような状態にしておくことが望ましいからである。このとき、移動通信端末１０のユーザが他人のアバタを指定して、そのアバタに対応する移動通信端末１０とＳＩＰによる通信接続を行うことを指示する操作を行うと、その操作に応じて、移動通信端末１０がＳＩＰサーバに相当する制御装置３０を介してＳＩＰによるネゴシエーションを行う。また、制御装置３０が、上記のようなユーザからの要求を待たずに、それぞれの移動通信端末１０に対してＳＩＰによる通信接続を促すようにしてもよい。いずれにしろ、移動通信端末１０どうしがＳＩＰを用いたネゴシエーションを経ることで、その端末間の論理的な通信コネクションが確立されてお互いに通信接続された状態となる。このような状態になれば、いずれか一方の移動通信端末１０から送信された画像やメッセージが直ちに他方の移動通信末１０に転送される。
そして、アバタがお互いに見えない位置に移動したときには、制御装置３０が能動的にそのＳＩＰによる通信接続を切断するか又は制御装置３０が移動通信端末１０に指示してそのＳＩＰによる通信接続を切断させる。
仮想世界においてアバタがお互いに見える位置に長時間滞在するという行為は、お互いの相手のアバタの容姿や行動を観察しただけでもなんとなく親近感を持っていることを意味する。そこで、お互いのアバタが見える位置にいる時間を計測して、その計測時間が短ければアバタ画像を用いたテレビ電話とし、その計測時間が長ければ撮影画像を用いたテレビ電話とする。これが、移動通信端末１０どうしをＳＩＰによって通信接続した時点から時間計測を開始する理由である。
なお、上記はＳＩＰを用いた場合の説明であったが、これは単なる例示に過ぎず、他の通信プロトコル、つまり、実データを遣り取りする前にネゴシーションを行ってから通信接続するという通信プロトコルであれば、上記と同様のことが言える。そして、この種のプロトコルを用いて通信端末どうしが通信接続されたときは、それが「画像及びメッセージを遣り取りする通信端末どうしが通信接続されたとき」に相当する。
次に、「通信端末どうしが通信接続されたとき以降の決められた時期」という用語が意味するところについて説明する。
上述したように、テレビ電話を開始する前に、ＳＩＰなどの通信プロトコルによって通信端末間の通信接続が完了しているような場合には、その後にテレビ電話が開始されたときが、上記の「通信端末どうしが通信接続されたとき以降の決められた時期」に相当する。つまり、ここでいう「決められたとき」とは、制御装置３０が、いずれか一方の通信端末から画像及びメッセージの送受信を開始する要求を取得し、その要求に応じて画像又は前記メッセージの送受信を開始した時期のことである。
また、ＳＩＰなどの通信プロトコルを用いない場合には、次のような例が、「通信端末どうしが通信接続されたとき以降の決められた時期」という用語の意味に含まれる。
例えば、お互いのユーザが、テレビ電話が開始されてから少し相手と会話をした段階で、もう少し話をしてみれば相手と気が合うことが確実になるかもしれないので、画像を切り替えるための経過時間の計測を開始してもよいと考えたような場合を想定する。このようなときには、お互いが操作部１３を用いて指定したタイミングを、時間計測の始期とすればよい。この場合、移動通信端末１０Ａ，１０Ｂの双方又はいずれか一方から、ユーザによって経過時間の計測を開始が指定されたときにその旨の通知が制御装置３０に送信され、制御装置３０は、その通知を受け取ると、経過時間の計時を開始する。
なお、経過時間には、１回のテレビ電話における経過時間だけでなく、過去に同一の相手と行われた複数回のテレビ電話の経過時間の累計を含むようにしてもよい。この場合、制御装置３０の記憶部３３に、通信先と通信元が同一の移動通信端末１０どうしの通話期間の累積を通話履歴として書き込むようにすればよい。制御部３１は、この累積の通話期間を参照して、画像を切り替えるべきか否かを判断する。
【００５８】
（３）変形例３
上述した実施形態では、通信元の移動通信端末１０の電話番号と通信先の移動通信端末１０の電話番号の組が、制御装置３０が記憶する通話履歴に含まれていた場合には、テレビ電話を開始するときに移動通信端末１０に表示させる画像を撮影画像としていたが、必ずしも通話履歴の有無を考慮する必要はない。
【００５９】
（４）変形例４
上述した実施形態は、画像データの送信元の移動通信端末１０に指示することで、その相手方の移動通信端末１０によって表示される画像を切り替えるという構成であったが、必ずしもそのような構成とは限らない。
例えば通信元の移動通信端末１０にアバタ画像データと撮影画像データの双方を送信させておき、制御装置３０が、経過時間に応じて、これらのうちの一方を選択して通信先の移動通信端末１０に送信するような構成としてもよい。
また、制御装置３０が送信先の移動通信端末１０にアバタ画像データと撮影画像データの双方を送信するとともに、表示すべき画像データを通信先の移動通信端末１０に指示する構成としてもよい。この場合、通信先の移動通信端末１０においては、受信したアバタ画像データ及び撮影画像データのうち、制御装置３０により指示された方の画像データを用いて表示を行う。
【００６０】
（５）変形例５
上述した実施形態は、アバタ画像データを移動通信端末１０が記憶する構成であったが、これに限らない。
例えば制御装置３０が、記憶部３３にアバタ画像データを予め記憶しておいてもよい。この場合、制御装置３０は、通信元の移動通信端末１０に対して常に撮影画像データ及びメッセージを送信するよう指示する。そして、制御装置３０は、通信先の移動通信端末１０に送信すべき画像データとして、通信元の移動通信端末１０から受け取った撮影画像データ又は自身が記憶しているアバタ画像データを選択して送信する。これを実現するためには、制御装置３０は、テレビ電話に係るデータ（音声データ、画像データ等）を中継するとともに、移動通信端末１０のマルチメディア処理部に相当する構成を備える必要がある。そして、制御装置３０の制御部３１は、アバタ画像データを通信先の移動通信端末１０に送信する場合には、通信部３２を介して多重化された音声データや撮影画像データを取得し、これを個々の音声データや撮影画像データに分離する。そして、制御装置３０の制御部３１は、取得した撮影画像データを記憶部３３から読み出したアバタ画像データに置換し、多重化処理を行った後に通信部３２に供給して、通信先の移動通信端末１０に宛てて送信する。
【００６１】
また、制御装置３０が複数のアバタ画像データを記憶しておき、移動通信端末１０からはアバタ画像データを識別するアバタＩＤを含む指定データのみが送信されるような構成であってもよい。このようにすれば、通信元の移動通信端末１０におけるデータの送信量を削減することが可能である。これを実現するためには、制御装置３０がテレビ電話に係るデータを中継するとともに、記憶部３３に複数のアバタ画像データをアバタＩＤと対応付けて記憶する。通信先の移動通信端末１０にアバタ画像を表示させる場合、通信元の移動通信端末１０は、アバタＩＤを含む指定データを音声メッセージともに送信する。制御装置３０の制御部３１は、通信元の移動通信端末１０から指定データを受け取ると、その指定データに含まれるアバタＩＤに対応するアバタ画像データに多重化処理を行った後に通信部３２に供給して、通信先の移動通信端末１０に宛てて送信する。一方、通信先の移動通信端末１０に撮影画像を表示させる場合には、制御装置３０は、通信元の移動通信端末１０に対して撮影画像データ及びメッセージを送信するよう指示すればよい。
さらに、制御装置３０が、複数のアバタ画像データを、各々の移動通信端末１０の電話番号と対応付けて記憶しておいてもよい。通信先の移動通信端末１０にアバタ画像を表示させる場合、通信元の移動通信端末１０は、自身の電話番号と音声メッセージとを送信する。制御装置３０の制御部３１は、通信元の移動通信端末１０の電話番号に対応するアバタ画像データに多重化処理を行った後に通信部３２に供給して、通信先の移動通信端末１０に宛てて送信する。一方、通信先の移動通信端末１０に撮影画像を表示させる場合には、制御装置３０は、通信元の移動通信端末１０に対して撮影画像データ及びメッセージを送信するよう指示すればよい。このようにしても、通信元の移動通信端末１０におけるデータの送信量を削減することが可能である。
【００６２】
また、通信先の移動通信端末１０が、通信元のユーザを象徴するアバタ画像として表示し得る複数のアバタ画像データを記憶しておいてもよい。このアバタ画像データは各々のアバタＩＤと対応付けて記憶されている。通信先の移動通信端末１０にアバタ画像を表示させる場合、通信元の移動通信端末１０は、アバタＩＤを含む指定データを音声メッセージともに送信する。制御装置３０はその指定データと音声メッセージを通信先の移動通信端末１０に送信する。通信先の移動通信端末１０は、記憶しているアバタ画像のうち、受信した指定データに含まれるアバタＩＤに対応するアバタ画像データを読み出してアバタ画像を表示する。一方、通信先の移動通信端末１０に撮影画像を表示させる場合には、制御装置３０は、通信元の移動通信端末１０に対して撮影画像データ及びメッセージを送信するよう指示すればよい。このようにしても、通信元の移動通信端末１０におけるデータの送信量を削減することが可能である。
【００６３】
（６）変形例６
実施形態では、時間の計測を制御装置３０が行う構成であったが、これを移動通信端末１０が行ってもよい。
つまり、移動通信端末１０が、画像又は音声メッセージの送受信が開始されたとき又はそれ以降の所定の時期からの経過時間を計測する計測手段を備え、制御部１１が、計測された経過時間に応じて、撮影画像又はアバタ画像のうちのいずれかを無線通信部１２から送信される画像として選択する。このときのアバタ画像は、移動通信端末１０によって記憶されていてもよいし、制御装置３０によって記憶されていてもよい。制御装置３０に記憶されている場合には、移動通信端末１０の制御部１１は、アバタ画像を指定する指定データを無線通信部１２から送信し、制御装置３０がこの指定データによって指定されるアバタ画像を通信先の移動通信端末１０に送信する。
【００６４】
（７）変形例７
上述した実施形態は、テレビ電話、すなわち画像と音声メッセージによるコミュニケーションを行うものであったが、例えば、いわゆるチャットなどのように、音声メッセージの代わりに文字（テキストメッセージ）を用いてもよい。また、このような場合には、仮想空間内に表示されるアバタが上述した特定領域に移動したときに、仮想空間内に表示されるアバタ画像を撮影画像に切り替えるようにしてもよい。なお、画像及びメッセージを送受信する移動通信端末１０の数は、２つに限らず、３つ以上であってもよい。
【００６５】
（８）変形例８
移動通信端末１０の双方に対してアバタ画像と撮影画像の切替を指示する必要はなく、いずれか一方のみでもよい。例えば、通信先となる相手方に常に自分の撮影画像を表示させるとか、通信先となる相手方に撮影画像を見せたくないので、常に代替画像を表示させるなどといった設定がなされている場合には、制御装置３０はその相手方の移動通信端末１０に対してのみ、経過時間に応じてアバタ画像と撮影画像を切り替えて表示させることになる。
【００６６】
（９）その他の変形例
代替画像は、撮影画像の代替となる画像であればよく、実施形態で例示したアバタ画像に限らない。
実施形態では、撮影画像からアバタ画像へ切り替える際とか、アバタ画像から撮影画像へ切り替える際には、移動通信端末１０のユーザに対して、画像を切り替えてよいかどうかを確認してから切り替えるようにしていた。この確認は必ずしも必須ではなく、画像を切り替える条件が満たされたときには、直ちに画像を切り替えるようにしてもよい。
また、実施形態では、制御装置３０が提供する仮想空間において通話相手を探してテレビ電話を開始するという形態を採っていたが、必ずしもそうである必要はない。通話相手となるユーザの電話番号又はそれに代わるユーザＩＤ等をなんらかの手段によってユーザに提供し、ユーザがその電話番号やユーザＩＤ等を用いた発呼を行うことで、通話相手との間でテレビ電話を開始するようにしてもよい。
【００６７】
上述した実施形態においては、移動通信端末１０は携帯電話機であるとしたが、その他の通信端末であってもよい。例えば、ＰＤＡ（Personal Digital Assistance）等の携帯可能な通信端末であってもよいし、固定電話であってもよいし、パーソナルコンピュータ等のコンピュータ装置であってもよい。なお、通信端末が移動通信網を利用するものでない場合には、移動通信網に代えてインターネット等の他のネットワークを用いればよい。また、通信端末は、撮影部を内蔵する必要はなく、外付けのビデオカメラから撮影画像データが供給されるような構成であってもよい。なお、これは、マイクやスピーカについても同様である。
【００６８】
また、移動通信端末１０ＡがステップＳａ１において送信するデータには、電話番号を表すデータが含まれているとしたが、このデータは電話番号である必要はなく、通信元の移動通信端末１０を一意的に特定可能な情報であればよい。この場合、制御装置３０は、このような情報に基づいてサービス制御局に問い合わせを行い、電話番号を取得するようにしてもよい。
【００６９】
制御装置３０の機能を分散化して複数の装置に持たせてもよい。要するに、画像及びメッセージを送受信して画像を表示する第１の通信端末と、画像及びメッセージを送受信して画像を表示する第２の通信端末とが通信接続されたとき又はそのとき以降の決められた時期からの経過時間を計測する計測装置と、前記第１の通信端末又は前記第２の通信端末のうちの少なくともいずれか一方の通信端末に、他方の通信端末から送信されてくる撮影画像又は当該撮影画像の代替となる代替画像を、前記計測装置によって計測された経過時間に応じて表示させる制御装置とを移動通信システムに設けておけばよい。
また、制御装置３０は、移動通信網のノード装置（サービス制御局や交換局など）と別体の装置であったが、この制御装置３０を移動通信網のいずれかのノード装置に内蔵してもよい。
【００７０】
また、制御装置３０が実現する諸機能は、単一のプログラムとして提供することも可能である。ゆえに、かかるプログラムを記録媒体に記録した形態で提供したり、他の制御装置３０からインターネット等のネットワークを介してダウンロードすることにより提供したりすることも可能である。
【図面の簡単な説明】
【００７１】
【図１】本発明の一実施形態であるシステムの全体構成を示す図である。
【図２】制御装置の構成を示すブロック図である。
【図３】制御装置が記憶しているアバタＩＤ変換テーブルの構成を示す図である。
【図４】移動通信端末の構成を示すブロック図である。
【図５】移動通信端末が備える操作子を示す図である。
【図６】移動通信端末に実現される各部の論理的構成を示す図である。
【図７】（ａ）はアバタ画像の一例を示す図であり、（ｂ）は撮影画像の一例を示す図である。
【図８】移動通信端末が実行する処理を示すフローチャートである。
【図９】移動通信端末が表示する画像を例示した図である。
【図１０】移動通信端末が表示する画像を例示した図である。
【図１１】移動通信端末及び制御装置が実行する処理を示すシーケンスチャートである。
【図１２】移動通信端末が表示する画像を例示した図である。
【図１３】移動通信端末が表示する画像を例示した図である。
【図１４】移動通信端末が表示する画像を例示した図である。
【図１５】移動通信端末が表示する画像を例示した図である。
【図１６】移動通信端末が表示する画像を例示した図である。
【図１７】移動通信端末が表示する画像を例示した図である。
【符号の説明】
【００７２】
１０、１０Ａ、１０Ｂ…移動通信端末、１１…制御部、１２…無線通信部、１３…操作部、１４…表示部、１５…音声入出力部、１６…撮影部、１７…マルチメディア処理部、２０…移動通信網、３０…制御装置、３１…制御部、３３…記憶部。
【図１】
0004468418.tif 000002
【図２】
0004468418.tif 000003
【図３】
0004468418.tif 000004
【図４】
0004468418.tif 000005
【図５】
0004468418.tif 000006
【図６】
0004468418.tif 000007
【図７】
0004468418.tif 000008
【図８】
0004468418.tif 000009
【図９】
0004468418.tif 000010
【図１０】
0004468418.tif 000011
【図１１】
0004468418.tif 000012
【図１２】
0004468418.tif 000013
【図１３】
0004468418.tif 000014
【図１４】
0004468418.tif 000015
【図１５】
0004468418.tif 000016
【図１６】
0004468418.tif 000017
【図１７】
0004468418.tif 000018