(57)【要約】【課題】携帯電話等の通信端末によって画像付きデータを送受信する場合に、受信側の通信端末の性能に対応して任意の画像を正常に表示することのできる通信装置を提供することを目的とする。【解決手段】受信側通信端末１１１０の性能に対応して画像の画像特性を変換するため、受信側通信端末１１１０の性能に対応して任意の画像を正常に表示することができる。また、携帯電話等の通信端末によって複数の画像を合成したり画像に加工を加えて送受信する場合に、それぞれの画像毎に受信側通信端末１１１０の性能に対応して画像の画像特性を変換してから合成や加工等の処理を行うため、受信側通信端末１１１０の性能に対応して任意の画像を正常に表示することができる。【選択図】    図１１
2004193809.tif 000002
【特許請求の範囲】
【請求項１】
インターネットを用いた会話手段であって、
会話者の画像を撮影する手段と会話参加者全員の画像を表示する手段を備えて会話者の映像を表示しながらインターネットを用いた会話を行う複数の第１の通信端末と、
第１の通信端末に対応して設けられる第２の通信端末と、
インターネットを行うためのサーバと、
前記サーバと前記第１の通信端末とを接続する第１の通信回線と、
前記サーバと前記第２の通信端末とを接続する第２の通信回線と
を有し、第１の通信端末によりインターネットを用いた会話を行う際に、１または２以上の会話対象者が所持する第２の通信端末に前記会話手段への参加要請を送信することを特徴とする通信装置。
【請求項２】
前記参加要請に対してある会話対象者が参加不可能な場合、前記第２の通信端末により参加不可能な会話対象者が存在するとの情報および参加不可能な会話対象者からの任意の情報を前記サーバに送信し、前記サーバによりその他の会話対象者の前記第１の通信端末に前記参加不可能な会話対象者が存在するとの情報および前記参加不可能な会話対象者からの任意の情報を送信することを特徴とする請求項１記載の通信装置。
【請求項３】
前記第２の通信端末が電子メール機能付きの携帯型電話であることを特徴とする請求項１または請求項２のいずれかに記載の通信装置。
【請求項４】
前記第２の通信端末がポケットベルであることを特徴とする請求項１または請求項２のいずれかに記載の通信装置。
【請求項５】
前記第１の通信端末と第２の通信端末を電子メール機能付き携帯端末で共用することを特徴とする請求項１または請求項２のいずれかに記載の通信装置。
【請求項６】
前記第１の通信回線および第２の通信回線が共用されて１つの通信回線によりサーバに接続することを特徴とする請求項５記載の通信装置。
【請求項７】
前記会話対象者を識別する情報として本名あるいはニックネームを用いることを特徴とする請求項１または請求項２または請求項３または請求項４または請求項５または請求項６いずれかに記載の通信装置。
【請求項８】
前記会話対象者を識別する情報として電子メールのアドレスを用いることを特徴とする請求項１または請求項２または請求項３または請求項４または請求項５または請求項６のいずれかに記載の通信装置。
【請求項９】
インターネットを用いた通信手段であって、
通信者の画像を撮影する手段と通信参加者全員の画像を表示する手段と画像情報付加用スイッチと感情を表現する画像情報を選択する手段を備えインターネットを用いた通信を行う複数の通信端末と、
インターネットを行うためのサーバと、
前記サーバと前記通信端末とを接続する通信回線と、
前記感情を表現する画像情報を記録する手段と
を有し、前記画像情報付加用スイッチの指示により、前記感情を表現する画像情報を選択する手段により選択された感情を表現する画像情報を、前記画像を撮影する手段により撮影された画像と合成して、前記画像を表示する手段で表示することを特徴とする通信装置。
【請求項１０】
前記感情を表現する画像情報を選択する手段により選択された感情を表現する画像情報と前記画像を撮影する手段により撮影された画像との合成を画像情報を選択した通信端末側で行い、前記サーバを経由して通信対象者の通信端末へ送信して通信対象者の通信端末上の画像を表示する手段に表示することを特徴とする請求項９記載の通信装置。
【請求項１１】
前記感情を表現する画像情報を選択する手段により選択された感情を表現する画像情報と前記画像を撮影する手段により撮影された画像との合成をサーバで行い、通信対象者の通信端末へ送信して通信対象者の通信端末上の画像を表示する手段に表示することを特徴とする請求項９記載の通信装置。
【請求項１２】
前記感情を表現する画像情報を選択する手段により選択された感情を表現する画像情報と前記画像を撮影する手段により撮影された画像をそれぞれ通信対象者の通信端末側に送信し、合成を通信対象者の通信端末側で行って画像を表示する手段に表示することを特徴とする請求項９記載の通信装置。
【請求項１３】
前記感情を表現する画像情報を選択する手段により選択された感情を表現する画像情報は、前記画像を撮影する手段により撮影された画像の変化に対応してその合成する位置や形状を変化させることを特徴とする請求項９記載の通信装置。
【請求項１４】
前記画像を撮影する手段により撮影された画像の変化として人物の顔の位置の変化に対応することを特徴とする請求項１３記載の通信装置。
【請求項１５】
前記情報付加用スイッチを用いた指示を通信発信者が機械的に直接行うことを特徴とする請求項９記載の通信装置。
【請求項１６】
前記情報付加用スイッチは、音声キーワードを登録した記憶装置を有し、通信中の音声と前記音声キーワードの一致不一致により画像情報付加の指示を決定することを特徴とする請求項９記載の通信装置。
【請求項１７】
前記情報付加用スイッチは、任意の表情画像を登録した記憶装置を有し、通信中の画像と前記表情画像の一致不一致により画像情報付加の指示を決定することを特徴とする請求項９記載の通信装置。
【請求項１８】
前記サーバに記憶された感情を表現する画像情報を任意に取得して合成することを特徴とする請求項９記載の通信装置。
【請求項１９】
サーバに接続された任意の装置にて作成された前記感情を表現する画像情報を取得して合成することを特徴とする請求項９記載の通信装置。
【請求項２０】
前記感情を表現する画像情報が図形であることを特徴とする請求項９記載の通信装置。
【請求項２１】
前記感情を表現する画像情報が自然画像であることを特徴とする請求項９記載の通信装置。
【請求項２２】
前記感情を表現する画像情報が文字または記号であることを特徴とする請求項９記載の通信装置。
【請求項２３】
前記通信が音声による会話で行われる場合に、前記サーバにおいて、会話中の音声の大きさにより発言者を特定し、前記画像を表示する手段にてその発言者の画像を拡大して表示することを特徴とする請求項１または請求項２または請求項９記載の通信装置。
【請求項２４】
前記通信が音声による会話で行われる場合に、前記サーバにおいて、会話中の各発言者の音声波形を整流し、整流した直流成分を一定の時間単位で積分して積分値が所定の閾値を超えた会話参加者の画像を任意に拡大し、前記積分値が前記閾値を超える会話参加者がいない場合には各会話参加者からの画像を均等の大きさで、前記画像を表示する手段にて表示することを特徴とする請求項１または請求項２または請求項９記載の通信装置。
【請求項２５】
前記通信が音声による会話で行われる場合に、前記サーバにおいて、会話中の各発言者の音声波形を整流し、整流した直流成分を一定の時間単位で積分し、さらに複数の時間単位に渡る積分値の平均値を求めて積分値が所定の閾値を超えた会話参加者の画像を任意に拡大し、前記積分値が前記閾値を超える会話参加者がいない場合には各会話参加者からの画像を均等の大きさで、前記画像を表示する手段にて表示することを特徴とする請求項１または請求項２または請求項９記載の通信装置。
【請求項２６】
前記第２の通信端末に振動装置を設け、通信への参加要請を通信対象者が有する前記第２の通信端末の振動装置を動作させることにより行うことを特徴とする請求項１または請求項２記載の通信装置。
【請求項２７】
前記通信端末に振動装置を設け、通信への参加要請を通信対象者が有する前記通信端末の振動装置を動作させることにより行うことを特徴とする請求項９記載の通信装置。
【請求項２８】
前記通信端末に、振動によって感情を伝達する振動装置と通信対象者の前記振動装置を振動させるスイッチとを設け、前記スイッチによる指示によって前記振動装置を振動させることにより通信対象者に感情を伝達することを特徴とする請求項９記載の通信装置。
【請求項２９】
ネットワークに接続されたサーバと、前記サーバを介してそれぞれが通信可能な複数の通信端末とによって構成され、任意の通信端末からそれ以外の任意の通信端末に複数の画像を合成して送信可能な通信装置であって、
前記サーバは、
送信側通信端末から送信された任意の送信画像を受信して記憶する画像記憶手段と、
前記送信画像に合成される複数の付加情報を記憶する付加情報記憶手段と、
前記送信側通信端末の指示によって送信画像に合成される付加情報を任意に選択する付加情報選択手段と、
通信対象となる受信側通信端末に端末情報を送付することを要求する端末情報要求手段と、
前記受信側通信端末から送付された前記端末情報を受信する端末情報取得手段と、
前記端末情報に対応して前記送信画像および付加情報それぞれの画像特性を変換した後に両者を合成する付加情報合成手段と、
合成した合成画像を前記受信側通信端末に送信する合成画像送信手段と
を有し、
前記通信対象となる受信側通信端末にて最適に表示されるように送信画像および付加情報それぞれの画像特性を変換してから合成した画像を送受信することを特徴とする通信装置。
【請求項３０】
ネットワークに接続されたサーバと、前記サーバを介してそれぞれが通信可能な複数の通信端末とによって構成され、任意の通信端末からそれ以外の任意の通信端末に複数の画像を合成して送信可能な通信装置であって、
前記サーバは、
送信側通信端末から送信された任意の送信画像を受信して記憶する画像記憶手段と、
前記送信画像に合成される複数の付加情報および前記それぞれの付加情報に対して画像特性を異ならせた付加情報を記憶する付加情報記憶手段と、
前記送信側通信端末の指示によって送信画像に合成される付加情報を任意に選択する付加情報選択手段と、
受信側通信端末に端末情報を送付することを要求する端末情報要求手段と、
前記受信側通信端末から送付された前記端末情報を受信する端末情報取得手段と、
前記送信側通信端末の指示によって選択された任意の付加情報のうち前記端末情報に対応して前記受信側通信端末に最も適した付加情報を選択する付加情報選択手段と、
前記端末情報に対応して前記送信画像の画像特性を変換した後に前記選択した付加情報を合成する付加情報合成手段と、
合成した合成画像を前記受信側通信端末に送信する合成画像送信手段と
を有し、
前記通信対象となる受信側通信端末にて最適に表示されるように送信画像の画像特性を変換し、付加情報を選択してから両者を合成した画像を送受信することを特徴とする通信装置。
【請求項３１】
ネットワークに接続されたサーバと、前記サーバを介してそれぞれが通信可能な複数の通信端末とによって構成され、任意の通信端末からそれ以外の任意の通信端末に複数の画像を合成して送信可能な通信装置であって、
前記サーバは、
送信側通信端末から送信された任意の送信画像を受信して記憶する画像記憶手段と、
前記送信画像に合成される複数の付加情報を記憶する付加情報記憶手段と、
前記送信側通信端末の指示によって送信画像に合成される付加情報を任意に選択する付加情報選択手段と、
通信対象となる受信側通信端末に端末情報を送付することを要求する端末情報要求手段と、
前記受信側通信端末から送付された前記端末情報を受信する端末情報取得手段と、
前記送信画像の特徴を検出する画像特徴検出手段と、
前記端末情報に対応して前記送信画像および付加情報それぞれの画像特性を変換した後に前記送信画像の特徴に応じて決定した前記付加情報の前記送信画像への合成位置に前記付加情報を合成する付加情報合成手段と、
合成した合成画像を前記受信側通信端末に送信する合成画像送信手段と
を有し、
前記通信対象となる受信側通信端末にて最適に表示されるように送信画像および付加情報それぞれの画像特性を変換してから合成して画像を送受信することを特徴とする通信装置。
【請求項３２】
ネットワークに接続されたサーバと、前記サーバを介してそれぞれが通信可能な複数の通信端末とによって構成され、任意の通信端末からそれ以外の任意の通信端末に複数の画像を合成して送信可能な通信装置であって、
前記サーバは、
送信側通信端末から送信された任意の送信画像を受信して記憶する画像記憶手段と、
前記送信画像に合成される複数の付加情報および前記それぞれの付加情報に対して画像特性を異ならせた付加情報を記憶する付加情報記憶手段と、
前記送信側通信端末の指示によって送信画像に合成される付加情報を任意に選択する付加情報選択手段と、
通信対象となる受信側通信端末に端末情報を送付することを要求する端末情報要求手段と、
前記受信側通信端末から送付された前記端末情報を受信する端末情報取得手段と、
前記送信側通信端末の指示によって選択された任意の付加情報のうち前記端末情報に対応する最も受信側通信端末に適した付加情報を選択する付加情報選択手段と、
前記送信画像の特徴を検出する画像特徴検出手段と、
前記端末情報に対応して前記送信画像の画像特性を変換した後に前記送信画像の特徴に応じて決定した前記付加情報の前記送信画像への合成位置に前記選択した付加情報を合成する付加情報合成手段と、
合成した合成画像を前記受信側通信端末に送信する合成画像送信手段と
を有し、
前記通信対象となる受信側通信端末にて最適に表示されるように送信画像の画像特性を変換し、付加情報を選択してから両者を合成した画像を送受信することを特徴とする通信装置。
【請求項３３】
前記画像特徴検出手段は、送信画像中の人物の大きさやその位置あるいはその動きを検出することを特徴とする請求項３１または請求項３２記載の通信装置。
【請求項３４】
前記画像特徴検出手段は、送信画像中の人物の顔またはその他の構成要素の大きさおよびその位置を検出することを特徴とする請求項３１または請求項３２記載の通信装置。
【請求項３５】
前記画像特徴検出手段は、送信画像中の人物の肌の色も検出することにより画像特性を変換する際に人物の肌の色を損なわないようにすることを特徴とする請求項３３または請求項３４記載の通信装置。
【請求項３６】
ネットワークに接続されたサーバと、前記サーバを介してそれぞれが通信可能な複数の通信端末とによって構成され、任意の通信端末からそれ以外の任意の通信端末に画像に特殊効果を加えて送信することが可能な通信装置であって、
前記サーバは、
送信側通信端末から送信された任意の送信画像を受信して記憶する画像記憶手段と、
前記送信画像に特殊効果を加えるプログラムを記憶する特殊効果記憶手段と、
前記送信側通信端末の指示によって送信画像に加える特殊効果を任意に選択する特殊効果選択手段と、
通信対象となる受信側通信端末に端末情報を送付することを要求する端末情報要求手段と、
前記受信側通信端末から送付された前記端末情報を受信する端末情報取得手段と、
前記端末情報に対応して前記送信画像の画像特性を変換した後に前記選択した特殊効果を加える特殊効果合成手段と、
特殊効果を加えた合成画像を前記受信側通信端末に送信する合成画像送信手段と
を有し、
前記通信対象となる受信側通信端末にて最適に表示されるように送信画像の画像特性を変換してから特殊効果を加えた画像を送受信することを特徴とする通信装置。
【請求項３７】
前記サーバは前記送信画像の特徴を検出する画像特徴検出手段を備え、
前記検出した特徴に特殊効果を加えることを特徴とする請求項３６記載の通信装置。
【請求項３８】
前記画像特徴検出手段は、送信画像中の人物の大きさやその位置あるいはその動きを検出することを特徴とする請求項３７記載の通信装置。
【請求項３９】
前記画像特徴検出手段は、送信画像中の人物の顔またはその他の構成要素の大きさおよびその位置を検出することを特徴とする請求項３７記載の通信装置。
【請求項４０】
ネットワークに接続されたサーバと、前記サーバを介してそれぞれが通信可能な複数の通信端末とによって構成され、任意の通信端末からそれ以外の任意の通信端末に複数の画像を合成して送信可能な通信装置であって、
前記サーバは、
送信側通信端末から送信された任意の送信画像を受信して記憶する画像記憶手段と、
前記送信画像に合成される複数の付加情報を記憶する付加情報記憶手段と、
前記送信側通信端末の指示によって送信画像に合成される付加情報を任意に選択する付加情報選択手段と、
前記送信画像と前記付加情報を合成して確認のために前記送信側通信端末に合成した画像を送信する合成画像確認手段と、
前記送信側通信端末の確認を受けて前記送信画像を通信対象となる受信側通信端末に送信する送信画像送信手段と、
前記送信側通信端末の確認を受けて前記付加情報を受信側通信端末に送信する付加情報送信手段と
を備え、
前記通信端末は、
前記合成画像確認手段から受信した合成画像を表示する画像確認手段と、
送信画像を任意に選択して前記サーバに送信する送信画像送信手段と、
前記送信画像に合成する付加情報を前記画像確認手段で確認しながら指定する付加情報指定手段と、
前記送信画像および前記付加情報の受信側通信端末への送信を指示する送信指示手段と、
前記サーバから前記送信画像を受信する画像受信手段と、
前記サーバから前記付加情報を受信する付加情報受信手段と、
前記通信対象となる受信側通信端末自身の端末情報を取得する端末情報取得手段と、
前記端末情報に対応して前記送信画像および付加情報それぞれのの画像性を変換した後に両者を合成する付加情報合成手段と、
前記付加情報合成手段で合成した合成画像を表示する表示手段と
を備え、
前記通信対象となる受信側通信端末にて最適に表示されるように、前記受信側通信端末にて送信画像および付加情報それぞれの画像特性を変換してから合成した画像を送受信することを特徴とする通信装置。
【請求項４１】
ネットワークに接続されたサーバと、前記サーバを介してそれぞれが通信可能な複数の通信端末とによって構成され、任意の通信端末からそれ以外の任意の通信端末に複数の画像を合成して送信可能な通信装置であって、
前記サーバは、
送信側通信端末から送信された任意の送信画像を受信して記憶する画像記憶手段と、
前記送信画像に合成される複数の付加情報を記憶する付加情報記憶手段と、
前記送信側通信端末の指示によって送信画像に合成される付加情報を任意に選択する付加情報選択手段と、
前記送信画像と前記付加情報を合成して確認のために前記送信側通信端末に合成した画像を送信する合成画像確認手段と、
前記送信側通信端末の確認を受けて前記送信画像を通信対象となる受信側通信端末に送信する送信画像送信手段と、
前記送信側通信端末の確認を受けて前記付加情報を受信側通信端末に送信する付加情報送信手段と
を備え、
前記通信端末は、
前記合成画像確認手段から受信した合成画像を表示する画像確認手段と、
送信画像を任意に選択して前記サーバに送信する送信画像送信手段と、
前記送信画像に合成する付加情報を前記画像確認手段で確認しながら指定する付加情報指定手段と、
前記送信画像および前記付加情報の受信側通信端末への送信を指示する送信指示手段と、
前記サーバから前記送信画像を受信する画像受信手段と、
前記サーバから前記付加情報を受信する付加情報受信手段と、
前記通信対象となる受信側通信端末自身の端末情報を取得する端末情報取得手段と、
前記送信画像の特徴を検出する画像特徴検出手段と、
前記端末情報に対応して前記送信画像および付加情報それぞれの画像特性を変換した後に前記送信画像の特徴に応じて決定した前記付加情報の前記送信画像への合成位置に前記付加情報を合成する付加情報合成手段と、
付加情報合成手段で合成した合成画像を表示する表示手段と
を備え、
前記通信対象となる受信側通信端末にて最適に表示されるように、前記受信側通信端末にて送信画像および付加情報それぞれの画像特性を変換してから合成した画像を送受信することを特徴とする通信装置。
【請求項４２】
前記画像特徴検出手段は、送信画像中の人物の大きさやその位置あるいはその動きを検出することを特徴とする請求項４１記載の通信装置。
【請求項４３】
前記画像特徴検出手段は、送信画像中の人物の顔またはその他の構成要素の大きさおよびその位置を検出することを特徴とする請求項４１記載の通信装置。
【請求項４４】
前記画像特徴検出手段は、送信画像中の人物の肌の色をも検出することにより画像特性を変換する際に人物の肌の色を損なわないようにすることを特徴とする請求項４２または請求項４３記載の通信装置。
【請求項４５】
ネットワークに接続されたサーバと、前記サーバを介してそれぞれが通信可能な複数の通信端末とによって構成され、任意の通信端末からそれ以外の任意の通信端末に画像に特殊効果を加えて送信することが可能な通信装置であって、
前記サーバは、
送信側通信端末から送信された任意の送信画像を受信して記憶する画像記憶手段と、
前記送信画像に特殊効果を加えるプログラムを記憶する特殊効果記憶手段と、
前記送信側通信端末の指示によって送信画像に加える特殊効果を任意に選択する特殊効果選択手段と、
前記送信画像に特殊効果を加えて確認のために前記送信側通信端末に合成した画像を送信する合成画像確認手段と、
前記送信側通信端末の確認を受けて前記送信画像を通信対象となる受信側通信端末に送信する送信画像送信手段と、
前記前記送信画像に特殊効果を加えるプログラムを受信側通信端末に送信する付加情報送信手段と
を備え、
前記通信端末は、
前記合成画像確認手段から受信した合成画像を表示する画像確認手段と、
送信画像を任意に選択して前記サーバに送信する送信画像送信手段と、
前記送信画像に加える特殊効果を前記画像確認手段で確認しながら指定する特殊効果指定手段と、
前記送信画像および前記送信画像に特殊効果を加えるプログラムの前記受信側通信端末への送信を指示する送信指示手段と、
前記サーバから前記送信画像を受信する画像受信手段と、
前記サーバから前記送信画像に特殊効果を加えるプログラムを受信する付加情報受信手段と、
前記通信対象となる受信側通信端末自身の端末情報を取得する端末情報取得手段と、
前記端末情報に対応して前記送信画像の画像特性を変換した後に前記選択した特殊効果を加える特殊効果合成手段と、
特殊効果合成手段で特殊効果を加えた合成画像を表示する表示手段と
を備え、
前記通信対象となる受信側通信端末にて最適に表示されるように送信画像の画像特性を変換してから特殊効果を加えた画像を送受信することを特徴とする通信装置。
【請求項４６】
前記通信端末に、ネットワークに接続され、ネットワーク上から前記付加情報合成手段において前記端末情報に対応して前記送信画像および付加情報それぞれの画像性を変換した後に両者を合成するプログラムを取得するプログラムダウンロード手段を有することを特徴とする請求項４０記載の通信装置。
【請求項４７】
前記通信端末に、ネットワークに接続され、ネットワーク上から前記端末情報に対応して前記送信画像および付加情報それぞれの画像特性を変換した後に前記送信画像の特徴に応じて決定した前記付加情報の前記送信画像への合成位置に前記付加情報を合成するプログラムを取得するプログラムダウンロード手段を有することを特徴とする請求項４１または請求項４２または請求項４３または請求項４４記載の通信装置。
【請求項４８】
前記通信端末に、ネットワークに接続され、ネットワーク上から前記特殊効果合成手段において前記端末情報に対応して前記送信画像の画像特性を変換した後に前記選択した特殊効果を加えるプログラムを取得するプログラムダウンロード手段を有することを特徴とする請求項４５記載の通信装置。
【請求項４９】
ネットワークに接続されたサーバと、前記サーバを介してそれぞれが通信可能な複数の通信端末とによって構成され、任意の通信端末からそれ以外の任意の通信端末に複数の画像を合成して送信可能な通信装置であって、
前記サーバは、
送信側通信端末から送信された任意の送信画像を受信して記憶する画像記憶手段と、
前記送信画像に合成される複数の付加情報を記憶する付加情報記憶手段と、
前記送信側通信端末の指示によって送信画像に合成される付加情報を任意に選択する付加情報選択手段と、
前記送信画像と前記付加情報を合成して確認のために前記送信側通信端末に合成した画像を送信する合成画像確認手段と、
前記送信画像，前記付加情報および前記送信画像と前記付加情報を受信側端末装置の性能に応じて変換した後に合成するプログラムを送信する付加情報合成プログラム送信手段と
を備え、
前記通信端末は、
前記合成画像確認手段から受信した合成画像を表示する画像確認手段と、
送信画像を任意に選択して前記サーバに送信する送信画像送信手段と、
前記送信画像に合成する付加情報を前記画像確認手段で確認しながら指定する付加情報指定手段と、
前記送信画像および前記送信画像と前記付加情報を受信側端末装置の性能に応じて変換した後に合成するプログラムの前記受信側通信端末への送信を指示する送信指示手段と、
前記通信対象となる受信側通信端末自身の端末情報を取得する端末情報取得手段と、
前記送信画像と前記付加情報を受信側端末装置の性能に応じて変換した後に合成するプログラムを受信して前記送信画像と前記付加情報の画像特性を前記端末情報に応じて変換した後に合成する付加情報合成プログラム実行手段と、
前記付加情報合成プログラム実行手段で合成した合成画像を表示する表示手段と
を備え、
前記通信対象となる受信側通信端末にて最適に表示されるように、前記受信側通信端末にて送信画像および付加情報それぞれの画像特性を変換してから合成した画像を送受信することを特徴とする通信装置。
【請求項５０】
ネットワークに接続されたサーバと、前記サーバを介してそれぞれが通信可能な複数の通信端末とによって構成され、任意の通信端末からそれ以外の任意の通信端末に複数の画像を合成して送信可能な通信装置であって、
前記サーバは、
送信側通信端末から送信された任意の送信画像を受信して記憶する画像記憶手段と、
前記送信画像に合成される複数の付加情報を記憶する付加情報記憶手段と、
前記送信側通信端末の指示によって送信画像に合成される付加情報を任意に選択する付加情報選択手段と、
前記送信画像と前記付加情報を合成して確認のために前記送信側通信端末に合成した画像を送信する合成画像確認手段と、
前記送信画像，前記付加情報および前記送信画像と前記付加情報を受信側端末装置の性能に応じて変換した後に合成するプログラムを受信側通信端末送信する付加情報合成プログラム送信手段と
を備え、
前記通信端末は、
前記合成画像確認手段から受信した合成画像を表示する画像確認手段と、
送信画像を任意に選択して前記サーバに送信する送信画像送信手段と、
前記送信画像に合成する付加情報を前記画像確認手段で確認しながら指定する付加情報指定手段と、
前記送信画像および前記送信画像と前記付加情報を受信側端末装置の性能に応じて変換した後に合成するプログラムの前記受信側通信端末への送信を指示する送信指示手段と、
前記通信対象となる受信側通信端末自身の端末情報を取得する端末情報取得手段と、
前記送信画像の特徴を検出する画像特徴検出手段と、
前記送信画像と前記付加情報を受信側端末装置の性能に応じて変換した後に合成するプログラムを受信して前記送信画像と前記付加情報の画像特性を前記送信画像の特徴に応じて決定した前記付加情報の前記送信画像への合成位置に前記端末情報に応じて前記付加情報を合成する付加情報合成プログラム実行手段と、
前記付加情報合成プログラム実行手段で合成した合成画像を表示する表示手段と
を備え、
前記通信対象となる受信側通信端末にて最適に表示されるように、前記受信側通信端末にて送信画像および付加情報それぞれの画像特性を変換してから合成した画像を送受信することを特徴とする通信装置。
【請求項５１】
前記画像特徴検出手段は、送信画像中の人物の大きさやその位置あるいはその動きを検出することを特徴とする請求項５０記載の通信装置。
【請求項５２】
前記画像特徴検出手段は、送信画像中の人物の顔またはその他の構成要素の大きさおよびその位置を検出することを特徴とする請求項５０記載の通信装置。
【請求項５３】
前記画像特徴検出手段は、送信画像中の人物の肌の色をも検出することにより画像特性を変換する際に人物の肌の色を損なわないようにすることを特徴とする請求項５１または請求項５２記載の通信装置。
【請求項５４】
ネットワークに接続されたサーバと、前記サーバを介してそれぞれが通信可能な複数の通信端末とによって構成され、任意の通信端末からそれ以外の任意の通信端末に画像に特殊効果を加えて送信することが可能な通信装置であって、
前記サーバは、
送信側通信端末から送信された任意の送信画像を受信して記憶する画像記憶手段と、
前記送信画像に特殊効果を加えるプログラムを記憶する特殊効果記憶手段と、
前記送信側通信端末の指示によって送信画像に加える特殊効果を任意に選択する特殊効果選択手段と、
前記送信画像に特殊効果を加えて確認のために前記送信側通信端末に合成した画像を送信する合成画像確認手段と、
前記送信画像および前記送信画像を受信側端末装置の性能に応じて変換した後合成するプログラムを送信する付加情報合成プログラム送信手段と
を備え、
前記通信端末は、
前記合成画像確認手段から受信した合成画像を表示する画像確認手段と、
送信画像を任意に選択して前記サーバに送信する送信画像送信手段と、
前記送信画像に加える特殊効果を前記画像確認手段で確認しながら指定する付加情報指定手段と、
前記送信画像および前記送信画像を受信側端末装置の性能に応じて変換した後に前記指定した特殊効果を加えるプログラムの前記受信側通信端末への送信を指示する送信指示手段と、
前記通信対象となる受信側通信端末自身の端末情報を取得する端末情報取得手段と、
前記送信画像を受信側端末装置の性能に応じて変換した後に前記指定した特殊効果を加えるプログラムを受信して前記送信画像を前記端末情報に対応して変換した後に前記選択した特殊効果を加える付加情報合成プログラム実行手段と、
前記付加情報合成プログラム実行手段で特殊効果を加えた合成画像を表示する表示手段と
を備え、
前記通信対象となる受信側通信端末にて最適に表示されるように送信画像の画像特性を変換してから特殊効果を加えた画像を送受信することを特徴とする通信装置。
【発明の詳細な説明】
【０００１】
【発明の属する技術分野】
本発明は、通信端末を持つ複数の相手とネットワーク経由で画像を用いたコミュニケーションをはかるための通信装置に関するものであり、特に通信開始時の通信確立方法や、通信時の通信発信者の感情情報を正確に相手に伝えるための感情表現機能および画像を修飾する機能付きの通信装置に関するものである。
【０００２】
【従来の技術】
インターネット技術の発達に伴い、チャットやインターネット電話，携帯電話等の様々なコミュニケーションツールが普及するようになってきている。
【０００３】
ここで、インターネット上でのコミュニケーションを開始するためには、会話対象者のコミュニケーションツールがインターネットに接続されて起動していることが必要である。従来は、会話対象者のコミュニケーションツールが起動しているかどうかの状況を伝達するものとしては、ＩＣＱ（ｈｔｔｐ：／／ｗｅｂ．ｉｃｑ．ｃｏｍ／）などに記載されたものがあった。さらに、コミュニケーションツールには、文字によって意思を伝達し合う物，音声によって会話する物，画像を伴って会話する物等、様々な種類があり、会話対象者の起動しているコミュニケーションツールを識別してその使用状況を伝達してくれるものもあった（例えば、特許文献１参照）。
【０００４】
従って、これらの技術を用いることで、こちらが会話対象者の電子メールアドレス等を指示すれば、その会話対象者がインターネットに接続しているかどうかということや、文字、音声、画像等どんなメディアをとおして会話ができるかということを把握することができ、対応するメディアを通じて会話を開始することができる。
【０００５】
しかしながら、このようなインターネット上でのコミュニケーションでは、こちらがコミュニケーションをとりたい会話対象者はインターネットに接続していないケースが多く、複数の会話を行いたいメンバーを集めて、即時に会話や会議を任意の時間に行うことは非常に困難であった。通常は、会話を行いたいメンバーに予め会話開始時間を指定しておき、メンバー全員がその時間にインターネット接続を終えてから、会話あるいは会議を開始しなければならないという問題点があった。また、インターネット上における画像を用いたコミュニケーションでは通信経路のデータ転送レートが低いために、送信できる画面サイズは小さく抑えられ、さらに高い比率で画像データが圧縮される結果、会話対象者に伝えたいことが正確に伝わらないという問題点があった。
【０００６】
その他に、例えば、近年、携帯電話のメール機能を用いたコミュニケーションにおいては、画像データを添付したメールを送受信することによりコミュニケーションを取ることが行われている。この時、送信側の携帯電話と受信側の携帯電話の性能に差があるために、受信側の携帯電話で画像を正常に表示することができない場合があった。そのために、ある画像データを送信側の携帯電話から受信側の携帯電話に送信する場合、あらかじめインターネット上のサーバに各携帯電話の性能に対応した画像データを格納しておき、受信側の携帯電話からメールでサーバに受信側の携帯電話の機種情報を送信することにより、サーバでその機種に対応する画像データを選択して受信側の携帯電話に送信していた（例えば、特許文献２参照）。
【０００７】
しかしながら、このような従来の通信装置においては、サーバに登録された画像データを選択して送信するに際し、受信側の携帯電話で正常に表示できるように、あらかじめ登録された画像データと同じ画像で画像特性の異なる画像データを用意する必要があった。そのために、サーバに登録する画像データを増やした場合や、対応する受信側の携帯電話の機種を増やした場合に、それに伴ってサーバに格納しておく画像データが増加し、必要となる記憶領域が増大化するという問題点があった。また、送信側の携帯電話が内蔵するカメラ機能により撮影した画像データ等のあらかじめ登録していない画像データを送信したり、これら登録していない画像データと登録された画像データを合成して送信する場合、これら登録していない画像データは受信側の携帯電話に対応していない画像データである場合があるので、受信側の携帯電話で送信された画像を正常に表示できない場合があるという問題点があった。
【０００８】
【特許文献１】
特開２０００−４９９０１号公報
【０００９】
【特許文献２】
特開２００２−１１６９８５号公報
【００１０】
【発明が解決しようとする課題】
本発明は、上記従来の問題点を解決するもので、インターネット上でコミュニケーションを行う場合に、会話対象者がインターネットに接続されていなくても、会話対象者に対してネットワーク上のサーバへの接続を要請できる通信装置を提供することを目的とする。
【００１１】
また、インターネット上でのコミュニケーションにおいて、自己の感情を加えてに相手に伝えることができる感情表現機能付きの通信装置を提供することを目的とする。
【００１２】
さらに、携帯電話等の通信端末によって画像付きデータを送受信する場合に、受信側の通信端末の性能に対応して任意の画像を正常に表示することのできる通信装置を提供することを目的とする。
【００１３】
【課題を解決するための手段】
上記目的を達成するために、本発明の請求項１記載の通信装置は、インターネットを用いた会話手段であって、会話者の画像を撮影する手段と会話参加者全員の画像を表示する手段を備えて会話者の映像を表示しながらインターネットを用いた会話を行う複数の第１の通信端末と、第１の通信端末に対応して設けられる第２の通信端末と、インターネットを行うためのサーバと、前記サーバと前記第１の通信端末とを接続する第１の通信回線と、前記サーバと前記第２の通信端末とを接続する第２の通信回線とを有し、第１の通信端末によりインターネットを用いた会話を行う際に、１または２以上の会話対象者が所持する第２の通信端末に前記会話手段への参加要請を送信することを特徴とする。
【００１４】
請求項２記載の通信装置は、請求項１記載の通信装置において、前記参加要請に対してある会話対象者が参加不可能な場合、前記第２の通信端末により参加不可能な会話対象者が存在するとの情報および参加不可能な会話対象者からの任意の情報を前記サーバに送信し、前記サーバによりその他の会話対象者の前記第１の通信端末に前記参加不可能な会話対象者が存在するとの情報および前記参加不可能な会話対象者からの任意の情報を送信することを特徴とする。
【００１５】
請求項３記載の通信装置は、請求項１または請求項２のいずれかに記載の通信装置において、前記第２の通信端末が電子メール機能付きの携帯型電話であることを特徴とする。
【００１６】
請求項４記載の通信装置は、請求項１または請求項２のいずれかに記載の通信装置において、前記第２の通信端末がポケットベルであることを特徴とする。
請求項５記載の通信装置は、請求項１または請求項２のいずれかに記載の通信装置において、前記第１の通信端末と第２の通信端末を電子メール機能付き携帯端末で共用することを特徴とする。
【００１７】
請求項６記載の通信装置は、請求項５記載の通信装置において、前記第１の通信回線および第２の通信回線が共用されて１つの通信回線によりサーバに接続することを特徴とする。
【００１８】
請求項７記載の通信装置は、請求項１または請求項２または請求項３または請求項４または請求項５または請求項６いずれかに記載の通信装置において、前記会話対象者を識別する情報として本名あるいはニックネームを用いることを特徴とする。
【００１９】
請求項８記載の通信装置は、請求項１または請求項２または請求項３または請求項４または請求項５または請求項６のいずれかに記載の通信装置において、前記会話対象者を識別する情報として電子メールのアドレスを用いることを特徴とする。
【００２０】
請求項９記載の通信装置は、インターネットを用いた通信手段であって、通信者の画像を撮影する手段と通信参加者全員の画像を表示する手段と画像情報付加用スイッチと感情を表現する画像情報を選択する手段を備えインターネットを用いた通信を行う複数の通信端末と、インターネットを行うためのサーバと、前記サーバと前記通信端末とを接続する通信回線と、前記感情を表現する画像情報を記録する手段とを有し、前記画像情報付加用スイッチの指示により、前記感情を表現する画像情報を選択する手段により選択された感情を表現する画像情報を、前記画像を撮影する手段により撮影された画像と合成して、前記画像を表示する手段で表示することを特徴とする。
【００２１】
請求項１０記載の通信装置は、請求項９記載の通信装置において、前記感情を表現する画像情報を選択する手段により選択された感情を表現する画像情報と前記画像を撮影する手段により撮影された画像との合成を、画像情報を選択した通信端末側で行い、前記サーバを経由して通信対象者の通信端末へ送信して通信対象者の通信端末上の画像を表示する手段に表示することを特徴とする。
【００２２】
請求項１１記載の通信装置は、請求項９記載の通信装置において、前記感情を表現する画像情報を選択する手段により選択された感情を表現する画像情報と前記画像を撮影する手段により撮影された画像との合成をサーバで行い、通信対象者の通信端末へ送信して通信対象者の通信端末上の画像を表示する手段に表示することを特徴とする。
【００２３】
請求項１２記載の通信装置は、請求項９記載の通信装置において、前記感情を表現する画像情報を選択する手段により選択された感情を表現する画像情報と前記画像を撮影する手段により撮影された画像をそれぞれ通信対象者の通信端末側に送信し、合成を通信対象者の通信端末側で行って画像を表示する手段に表示することを特徴とする。
【００２４】
請求項１３記載の通信装置は、請求項９記載の通信装置において、前記感情を表現する画像情報を選択する手段により選択された感情を表現する画像情報は、前記画像を撮影する手段により撮影された画像の変化に対応してその合成する位置や形状を変化させることを特徴とする。
【００２５】
請求項１４記載の通信装置は、請求項１３記載の通信装置において、前記画像を撮影する手段により撮影された画像の変化として人物の顔の位置の変化に対応することを特徴とする。
【００２６】
請求項１５記載の通信装置は、請求項９記載の通信装置において、前記情報付加用スイッチを用いた指示を通信発信者が機械的に直接行うことを特徴とする。
請求項１６記載の通信装置は、請求項９記載の通信装置において、前記情報付加用スイッチは、音声キーワードを登録した記憶装置を有し、通信中の音声と前記音声キーワードの一致不一致により画像情報付加の指示を決定することを特徴とする。
【００２７】
請求項１７記載の通信装置は、請求項９記載の通信装置において、前記情報付加用スイッチは、任意の表情画像を登録した記憶装置を有し、通信中の画像と前記表情画像の一致不一致により画像情報付加の指示を決定することを特徴とする。
【００２８】
請求項１８記載の通信装置は、請求項９記載の通信装置において、前記サーバに記憶された感情を表現する画像情報を任意に取得して合成することを特徴とする。
【００２９】
請求項１９記載の通信装置は、請求項９記載の通信装置において、サーバに接続された任意の装置にて作成された前記感情を表現する画像情報を取得して合成することを特徴とする。
【００３０】
請求項２０記載の通信装置は、請求項９記載の通信装置において、前記感情を表現する画像情報が図形であることを特徴とする。
請求項２１記載の通信装置は、請求項９記載の通信装置において、前記感情を表現する画像情報が自然画像であることを特徴とする。
【００３１】
請求項２２記載の通信装置は、請求項９記載の通信装置において、前記感情を表現する画像情報が文字または記号であることを特徴とする。
請求項２３記載の通信装置は、請求項１または請求項２または請求項９記載の通信装置において、前記通信が音声による会話で行われる場合に、前記サーバにおいて、会話中の音声の大きさにより発言者を特定し、前記画像を表示する手段にてその発言者の画像を拡大して表示することを特徴とする。
【００３２】
請求項２４記載の通信装置は、請求項１または請求項２または請求項９記載の通信装置において、前記通信が音声による会話で行われる場合に、前記サーバにおいて、会話中の各発言者の音声波形を整流し、整流した直流成分を一定の時間単位で積分して積分値が所定の閾値を超えた会話参加者の画像を任意に拡大し、前記積分値が前記閾値を超える会話参加者がいない場合には各会話参加者からの画像を均等の大きさで、前記画像を表示する手段にて表示することを特徴とする。
【００３３】
請求項２５記載の通信装置は、請求項１または請求項２または請求項９記載の通信装置において、前記通信が音声による会話で行われる場合に、前記サーバにおいて、会話中の各発言者の音声波形を整流し、整流した直流成分を一定の時間単位で積分し、さらに複数の時間単位に渡る積分値の平均値を求めて積分値が所定の閾値を超えた会話参加者の画像を任意に拡大し、前記積分値が前記閾値を超える会話参加者がいない場合には各会話参加者からの画像を均等の大きさで、前記画像を表示する手段にて表示することを特徴とする。
【００３４】
請求項２６記載の通信装置は、請求項１または請求項２記載の通信装置において、前記第２の通信端末に振動装置を設け、通信への参加要請を通信対象者が有する前記第２の通信端末の振動装置を動作させることにより行うことを特徴とする。
【００３５】
請求項２７記載の通信装置は、請求項９記載の通信装置において、前記通信端末に振動装置を設け、通信への参加要請を通信対象者が有する前記通信端末の振動装置を動作させることにより行うことを特徴とする。
【００３６】
請求項２８記載の通信装置は、請求項９記載の通信装置において、前記通信端末に、振動によって感情を伝達する振動装置と通信対象者の前記振動装置を振動させるスイッチとを設け、前記スイッチによる指示によって前記振動装置を振動させることにより通信対象者に感情を伝達することを特徴とする。
【００３７】
請求項２９記載の通信装置は、ネットワークに接続されたサーバと、前記サーバを介してそれぞれが通信可能な複数の通信端末とによって構成され、任意の通信端末からそれ以外の任意の通信端末に複数の画像を合成して送信可能な通信装置であって、前記サーバは、送信側通信端末から送信された任意の送信画像を受信して記憶する画像記憶手段と、前記送信画像に合成される複数の付加情報を記憶する付加情報記憶手段と、前記送信側通信端末の指示によって送信画像に合成される付加情報を任意に選択する付加情報選択手段と、通信対象となる受信側通信端末に端末情報を送付することを要求する端末情報要求手段と、前記受信側通信端末から送付された前記端末情報を受信する端末情報取得手段と、前記端末情報に対応して前記送信画像および付加情報それぞれの画像特性を変換した後に両者を合成する付加情報合成手段と、合成した合成画像を前記受信側通信端末に送信する合成画像送信手段とを有し、前記通信対象となる受信側通信端末にて最適に表示されるように送信画像および付加情報それぞれの画像特性を変換してから合成した画像を送受信することを特徴とする。
【００３８】
請求項３０記載の通信装置は、ネットワークに接続されたサーバと、前記サーバを介してそれぞれが通信可能な複数の通信端末とによって構成され、任意の通信端末からそれ以外の任意の通信端末に複数の画像を合成して送信可能な通信装置であって、前記サーバは、送信側通信端末から送信された任意の送信画像を受信して記憶する画像記憶手段と、前記送信画像に合成される複数の付加情報および前記それぞれの付加情報に対して画像特性を異ならせた付加情報を記憶する付加情報記憶手段と、前記送信側通信端末の指示によって送信画像に合成される付加情報を任意に選択する付加情報選択手段と、受信側通信端末に端末情報を送付することを要求する端末情報要求手段と、前記受信側通信端末から送付された前記端末情報を受信する端末情報取得手段と、前記送信側通信端末の指示によって選択された任意の付加情報のうち前記端末情報に対応して前記受信側通信端末に最も適した付加情報を選択する付加情報選択手段と、前記端末情報に対応して前記送信画像の画像特性を変換した後に前記選択した付加情報を合成する付加情報合成手段と、合成した合成画像を前記受信側通信端末に送信する合成画像送信手段とを有し、前記通信対象となる受信側通信端末にて最適に表示されるように送信画像の画像特性を変換し、付加情報を選択してから両者を合成した画像を送受信することを特徴とする。
【００３９】
請求項３１記載の通信装置は、ネットワークに接続されたサーバと、前記サーバを介してそれぞれが通信可能な複数の通信端末とによって構成され、任意の通信端末からそれ以外の任意の通信端末に複数の画像を合成して送信可能な通信装置であって、前記サーバは、送信側通信端末から送信された任意の送信画像を受信して記憶する画像記憶手段と、前記送信画像に合成される複数の付加情報を記憶する付加情報記憶手段と、前記送信側通信端末の指示によって送信画像に合成される付加情報を任意に選択する付加情報選択手段と、通信対象となる受信側通信端末に端末情報を送付することを要求する端末情報要求手段と、前記受信側通信端末から送付された前記端末情報を受信する端末情報取得手段と、前記送信画像の特徴を検出する画像特徴検出手段と、前記端末情報に対応して前記送信画像および付加情報それぞれの画像特性を変換した後に前記送信画像の特徴に応じて決定した前記付加情報の前記送信画像への合成位置に前記付加情報を合成する付加情報合成手段と、合成した合成画像を前記受信側通信端末に送信する合成画像送信手段とを有し、前記通信対象となる受信側通信端末にて最適に表示されるように送信画像および付加情報それぞれの画像特性を変換してから合成して画像を送受信することを特徴とする。
【００４０】
請求項３２記載の通信装置は、ネットワークに接続されたサーバと、前記サーバを介してそれぞれが通信可能な複数の通信端末とによって構成され、任意の通信端末からそれ以外の任意の通信端末に複数の画像を合成して送信可能な通信装置であって、前記サーバは、送信側通信端末から送信された任意の送信画像を受信して記憶する画像記憶手段と、前記送信画像に合成される複数の付加情報および前記それぞれの付加情報に対して画像特性を異ならせた付加情報を記憶する付加情報記憶手段と、前記送信側通信端末の指示によって送信画像に合成される付加情報を任意に選択する付加情報選択手段と、通信対象となる受信側通信端末に端末情報を送付することを要求する端末情報要求手段と、前記受信側通信端末から送付された前記端末情報を受信する端末情報取得手段と、前記送信側通信端末の指示によって選択された任意の付加情報のうち前記端末情報に対応する最も受信側通信端末に適した付加情報を選択する付加情報選択手段と、前記送信画像の特徴を検出する画像特徴検出手段と、前記端末情報に対応して前記送信画像の画像特性を変換した後に前記送信画像の特徴に応じて決定した前記付加情報の前記送信画像への合成位置に前記選択した付加情報を合成する付加情報合成手段と、合成した合成画像を前記受信側通信端末に送信する合成画像送信手段とを有し、前記通信対象となる受信側通信端末にて最適に表示されるように送信画像の画像特性を変換し、付加情報を選択してから両者を合成した画像を送受信することを特徴とする。
【００４１】
請求項３３記載の通信装置は、請求項３１または請求項３２記載の通信装置において、前記画像特徴検出手段は、送信画像中の人物の大きさやその位置あるいはその動きを検出することを特徴とする。
【００４２】
請求項３４記載の通信装置は、請求項３１または請求項３２記載の通信装置において、前記画像特徴検出手段は、送信画像中の人物の顔またはその他の構成要素の大きさおよびその位置を検出することを特徴とする。
【００４３】
請求項３５記載の通信装置は、請求項３３または請求項３４記載の通信装置において、前記画像特徴検出手段は、送信画像中の人物の肌の色も検出することにより画像特性を変換する際に人物の肌の色を損なわないようにすることを特徴とする。
【００４４】
請求項３６記載の通信装置は、ネットワークに接続されたサーバと、前記サーバを介してそれぞれが通信可能な複数の通信端末とによって構成され、任意の通信端末からそれ以外の任意の通信端末に画像に特殊効果を加えて送信することが可能な通信装置であって、前記サーバは、送信側通信端末から送信された任意の送信画像を受信して記憶する画像記憶手段と、前記送信画像に特殊効果を加えるプログラムを記憶する特殊効果記憶手段と、前記送信側通信端末の指示によって送信画像に加える特殊効果を任意に選択する特殊効果選択手段と、通信対象となる受信側通信端末に端末情報を送付することを要求する端末情報要求手段と、前記受信側通信端末から送付された前記端末情報を受信する端末情報取得手段と、前記端末情報に対応して前記送信画像の画像特性を変換した後に前記選択した特殊効果を加える特殊効果合成手段と、特殊効果を加えた合成画像を前記受信側通信端末に送信する合成画像送信手段とを有し、前記通信対象となる受信側通信端末にて最適に表示されるように送信画像の画像特性を変換してから特殊効果を加えた画像を送受信することを特徴とする。
【００４５】
請求項３７記載の通信装置は、請求項３６記載の通信装置において、前記サーバは前記送信画像の特徴を検出する画像特徴検出手段を備え、前記検出した特徴に特殊効果を加えることを特徴とする。
【００４６】
請求項３８記載の通信装置は、請求項３７記載の通信装置において、前記画像特徴検出手段は、送信画像中の人物の大きさやその位置あるいはその動きを検出することを特徴とする。
【００４７】
請求項３９記載の通信装置は、請求項３７記載の通信装置において、前記画像特徴検出手段は、送信画像中の人物の顔またはその他の構成要素の大きさおよびその位置を検出することを特徴とする。
【００４８】
請求項４０記載の通信装置は、ネットワークに接続されたサーバと、前記サーバを介してそれぞれが通信可能な複数の通信端末とによって構成され、任意の通信端末からそれ以外の任意の通信端末に複数の画像を合成して送信可能な通信装置であって、前記サーバは、送信側通信端末から送信された任意の送信画像を受信して記憶する画像記憶手段と、前記送信画像に合成される複数の付加情報を記憶する付加情報記憶手段と、前記送信側通信端末の指示によって送信画像に合成される付加情報を任意に選択する付加情報選択手段と、前記送信画像と前記付加情報を合成して確認のために前記送信側通信端末に合成した画像を送信する合成画像確認手段と、前記送信側通信端末の確認を受けて前記送信画像を通信対象となる受信側通信端末に送信する送信画像送信手段と、前記送信側通信端末の確認を受けて前記付加情報を受信側通信端末に送信する付加情報送信手段とを備え、前記通信端末は、前記合成画像確認手段から受信した合成画像を表示する画像確認手段と、送信画像を任意に選択して前記サーバに送信する送信画像送信手段と、前記送信画像に合成する付加情報を前記画像確認手段で確認しながら指定する付加情報指定手段と、前記送信画像および前記付加情報の受信側通信端末への送信を指示する送信指示手段と、前記サーバから前記送信画像を受信する画像受信手段と、前記サーバから前記付加情報を受信する付加情報受信手段と、前記通信対象となる受信側通信端末自身の端末情報を取得する端末情報取得手段と、前記端末情報に対応して前記送信画像および付加情報それぞれのの画像性を変換した後に両者を合成する付加情報合成手段と、前記付加情報合成手段で合成した合成画像を表示する表示手段とを備え、前記通信対象となる受信側通信端末にて最適に表示されるように、前記受信側通信端末にて送信画像および付加情報それぞれの画像特性を変換してから合成した画像を送受信することを特徴とする。
【００４９】
請求項４１記載の通信装置は、ネットワークに接続されたサーバと、前記サーバを介してそれぞれが通信可能な複数の通信端末とによって構成され、任意の通信端末からそれ以外の任意の通信端末に複数の画像を合成して送信可能な通信装置であって、前記サーバは、送信側通信端末から送信された任意の送信画像を受信して記憶する画像記憶手段と、前記送信画像に合成される複数の付加情報を記憶する付加情報記憶手段と、前記送信側通信端末の指示によって送信画像に合成される付加情報を任意に選択する付加情報選択手段と、前記送信画像と前記付加情報を合成して確認のために前記送信側通信端末に合成した画像を送信する合成画像確認手段と、前記送信側通信端末の確認を受けて前記送信画像を通信対象となる受信側通信端末に送信する送信画像送信手段と、前記送信側通信端末の確認を受けて前記付加情報を受信側通信端末に送信する付加情報送信手段とを備え、前記通信端末は、前記合成画像確認手段から受信した合成画像を表示する画像確認手段と、送信画像を任意に選択して前記サーバに送信する送信画像送信手段と、前記送信画像に合成する付加情報を前記画像確認手段で確認しながら指定する付加情報指定手段と、前記送信画像および前記付加情報の受信側通信端末への送信を指示する送信指示手段と、前記サーバから前記送信画像を受信する画像受信手段と、前記サーバから前記付加情報を受信する付加情報受信手段と、前記通信対象となる受信側通信端末自身の端末情報を取得する端末情報取得手段と、前記送信画像の特徴を検出する画像特徴検出手段と、前記端末情報に対応して前記送信画像および付加情報それぞれの画像特性を変換した後に前記送信画像の特徴に応じて決定した前記付加情報の前記送信画像への合成位置に前記付加情報を合成する付加情報合成手段と、付加情報合成手段で合成した合成画像を表示する表示手段とを備え、前記通信対象となる受信側通信端末にて最適に表示されるように、前記受信側通信端末にて送信画像および付加情報それぞれの画像特性を変換してから合成した画像を送受信することを特徴とする。
【００５０】
請求項４２記載の通信装置は、請求項４１記載の通信装置において、前記画像特徴検出手段は、送信画像中の人物の大きさやその位置あるいはその動きを検出することを特徴とする。
【００５１】
請求項４３記載の通信装置は、請求項４１記載の通信装置において、前記画像特徴検出手段は、送信画像中の人物の顔またはその他の構成要素の大きさおよびその位置を検出することを特徴とする。
【００５２】
請求項４４記載の通信装置は、請求項４２または請求項４３記載の通信装置において、前記画像特徴検出手段は、送信画像中の人物の肌の色をも検出することにより画像特性を変換する際に人物の肌の色を損なわないようにすることを特徴とする。
【００５３】
請求項４５記載の通信装置は、ネットワークに接続されたサーバと、前記サーバを介してそれぞれが通信可能な複数の通信端末とによって構成され、任意の通信端末からそれ以外の任意の通信端末に画像に特殊効果を加えて送信することが可能な通信装置であって、前記サーバは、送信側通信端末から送信された任意の送信画像を受信して記憶する画像記憶手段と、前記送信画像に特殊効果を加えるプログラムを記憶する特殊効果記憶手段と、前記送信側通信端末の指示によって送信画像に加える特殊効果を任意に選択する特殊効果選択手段と、前記送信画像に特殊効果を加えて確認のために前記送信側通信端末に合成した画像を送信する合成画像確認手段と、前記送信側通信端末の確認を受けて前記送信画像を通信対象となる受信側通信端末に送信する送信画像送信手段と、前記前記送信画像に特殊効果を加えるプログラムを受信側通信端末に送信する付加情報送信手段とを備え、前記通信端末は、前記合成画像確認手段から受信した合成画像を表示する画像確認手段と、送信画像を任意に選択して前記サーバに送信する送信画像送信手段と、前記送信画像に加える特殊効果を前記画像確認手段で確認しながら指定する特殊効果指定手段と、前記送信画像および前記送信画像に特殊効果を加えるプログラムの前記受信側通信端末への送信を指示する送信指示手段と、前記サーバから前記送信画像を受信する画像受信手段と、前記サーバから前記送信画像に特殊効果を加えるプログラムを受信する付加情報受信手段と、前記通信対象となる受信側通信端末自身の端末情報を取得する端末情報取得手段と、前記端末情報に対応して前記送信画像の画像特性を変換した後に前記選択した特殊効果を加える特殊効果合成手段と、特殊効果合成手段で特殊効果を加えた合成画像を表示する表示手段とを備え、前記通信対象となる受信側通信端末にて最適に表示されるように送信画像の画像特性を変換してから特殊効果を加えた画像を送受信することを特徴とする。
【００５４】
請求項４６記載の通信装置は、請求項４０記載の通信装置において、前記通信端末に、ネットワークに接続され、ネットワーク上から前記付加情報合成手段において前記端末情報に対応して前記送信画像および付加情報それぞれの画像性を変換した後に両者を合成するプログラムを取得するプログラムダウンロード手段を有することを特徴とする。
【００５５】
請求項４７記載の通信装置は、請求項４１または請求項４２または請求項４３または請求項４４記載の通信装置において、前記通信端末に、ネットワークに接続され、ネットワーク上から前記端末情報に対応して前記送信画像および付加情報それぞれの画像特性を変換した後に前記送信画像の特徴に応じて決定した前記付加情報の前記送信画像への合成位置に前記付加情報を合成するプログラムを取得するプログラムダウンロード手段を有することを特徴とする。
【００５６】
請求項４８記載の通信装置は、請求項４５記載の通信装置において、前記通信端末に、ネットワークに接続され、ネットワーク上から前記特殊効果合成手段において前記端末情報に対応して前記送信画像の画像特性を変換した後に前記選択した特殊効果を加えるプログラムを取得するプログラムダウンロード手段を有することを特徴とする。
【００５７】
請求項４９記載の通信装置は、ネットワークに接続されたサーバと、前記サーバを介してそれぞれが通信可能な複数の通信端末とによって構成され、任意の通信端末からそれ以外の任意の通信端末に複数の画像を合成して送信可能な通信装置であって、前記サーバは、送信側通信端末から送信された任意の送信画像を受信して記憶する画像記憶手段と、前記送信画像に合成される複数の付加情報を記憶する付加情報記憶手段と、前記送信側通信端末の指示によって送信画像に合成される付加情報を任意に選択する付加情報選択手段と、前記送信画像と前記付加情報を合成して確認のために前記送信側通信端末に合成した画像を送信する合成画像確認手段と、前記送信画像，前記付加情報および前記送信画像と前記付加情報を受信側端末装置の性能に応じて変換した後に合成するプログラムを送信する付加情報合成プログラム送信手段とを備え、前記通信端末は、前記合成画像確認手段から受信した合成画像を表示する画像確認手段と、送信画像を任意に選択して前記サーバに送信する送信画像送信手段と、前記送信画像に合成する付加情報を前記画像確認手段で確認しながら指定する付加情報指定手段と、前記送信画像および前記送信画像と前記付加情報を受信側端末装置の性能に応じて変換した後に合成するプログラムの前記受信側通信端末への送信を指示する送信指示手段と、前記通信対象となる受信側通信端末自身の端末情報を取得する端末情報取得手段と、前記送信画像と前記付加情報を受信側端末装置の性能に応じて変換した後に合成するプログラムを受信して前記送信画像と前記付加情報の画像特性を前記端末情報に応じて変換した後に合成する付加情報合成プログラム実行手段と、前記付加情報合成プログラム実行手段で合成した合成画像を表示する表示手段とを備え、前記通信対象となる受信側通信端末にて最適に表示されるように、前記受信側通信端末にて送信画像および付加情報それぞれの画像特性を変換してから合成した画像を送受信することを特徴とする。
【００５８】
請求項５０記載の通信装置は、ネットワークに接続されたサーバと、前記サーバを介してそれぞれが通信可能な複数の通信端末とによって構成され、任意の通信端末からそれ以外の任意の通信端末に複数の画像を合成して送信可能な通信装置であって、前記サーバは、送信側通信端末から送信された任意の送信画像を受信して記憶する画像記憶手段と、前記送信画像に合成される複数の付加情報を記憶する付加情報記憶手段と、前記送信側通信端末の指示によって送信画像に合成される付加情報を任意に選択する付加情報選択手段と、前記送信画像と前記付加情報を合成して確認のために前記送信側通信端末に合成した画像を送信する合成画像確認手段と、前記送信画像，前記付加情報および前記送信画像と前記付加情報を受信側端末装置の性能に応じて変換した後に合成するプログラムを受信側通信端末送信する付加情報合成プログラム送信手段とを備え、前記通信端末は、前記合成画像確認手段から受信した合成画像を表示する画像確認手段と、送信画像を任意に選択して前記サーバに送信する送信画像送信手段と、前記送信画像に合成する付加情報を前記画像確認手段で確認しながら指定する付加情報指定手段と、前記送信画像および前記送信画像と前記付加情報を受信側端末装置の性能に応じて変換した後に合成するプログラムの前記受信側通信端末への送信を指示する送信指示手段と、前記通信対象となる受信側通信端末自身の端末情報を取得する端末情報取得手段と、前記送信画像の特徴を検出する画像特徴検出手段と、前記送信画像と前記付加情報を受信側端末装置の性能に応じて変換した後に合成するプログラムを受信して前記送信画像と前記付加情報の画像特性を前記送信画像の特徴に応じて決定した前記付加情報の前記送信画像への合成位置に前記端末情報に応じて前記付加情報を合成する付加情報合成プログラム実行手段と、前記付加情報合成プログラム実行手段で合成した合成画像を表示する表示手段とを備え、前記通信対象となる受信側通信端末にて最適に表示されるように、前記受信側通信端末にて送信画像および付加情報それぞれの画像特性を変換してから合成した画像を送受信することを特徴とする。
【００５９】
請求項５１記載の通信装置は、請求項５０記載の通信装置において、前記画像特徴検出手段は、送信画像中の人物の大きさやその位置あるいはその動きを検出することを特徴とする。
【００６０】
請求項５２記載の通信装置は、請求項５０記載の通信装置において、前記画像特徴検出手段は、送信画像中の人物の顔またはその他の構成要素の大きさおよびその位置を検出することを特徴とする。
【００６１】
請求項５３記載の通信装置は、請求項５１または請求項５２記載の通信装置において、前記画像特徴検出手段は、送信画像中の人物の肌の色をも検出することにより画像特性を変換する際に人物の肌の色を損なわないようにすることを特徴とする。
【００６２】
請求項５４記載の通信装置は、ネットワークに接続されたサーバと、前記サーバを介してそれぞれが通信可能な複数の通信端末とによって構成され、任意の通信端末からそれ以外の任意の通信端末に画像に特殊効果を加えて送信することが可能な通信装置であって、前記サーバは、送信側通信端末から送信された任意の送信画像を受信して記憶する画像記憶手段と、前記送信画像に特殊効果を加えるプログラムを記憶する特殊効果記憶手段と、前記送信側通信端末の指示によって送信画像に加える特殊効果を任意に選択する特殊効果選択手段と、前記送信画像に特殊効果を加えて確認のために前記送信側通信端末に合成した画像を送信する合成画像確認手段と、前記送信画像および前記送信画像を受信側端末装置の性能に応じて変換した後合成するプログラムを送信する付加情報合成プログラム送信手段とを備え、前記通信端末は、前記合成画像確認手段から受信した合成画像を表示する画像確認手段と、送信画像を任意に選択して前記サーバに送信する送信画像送信手段と、前記送信画像に加える特殊効果を前記画像確認手段で確認しながら指定する付加情報指定手段と、前記送信画像および前記送信画像を受信側端末装置の性能に応じて変換した後に前記指定した特殊効果を加えるプログラムの前記受信側通信端末への送信を指示する送信指示手段と、前記通信対象となる受信側通信端末自身の端末情報を取得する端末情報取得手段と、前記送信画像を受信側端末装置の性能に応じて変換した後に前記指定した特殊効果を加えるプログラムを受信して前記送信画像を前記端末情報に対応して変換した後に前記選択した特殊効果を加える付加情報合成プログラム実行手段と、前記付加情報合成プログラム実行手段で特殊効果を加えた合成画像を表示する表示手段とを備え、前記通信対象となる受信側通信端末にて最適に表示されるように送信画像の画像特性を変換してから特殊効果を加えた画像を送受信することを特徴とする。
【００６３】
以上により、インターネット上でコミュニケーションを行う場合に、対象者がインターネットに接続されていなくても、対象者に対してネットワーク上のサーバへの接続を要請できる通信装置を提供することができる。
【００６４】
また、インターネット上でのコミュニケーションにおいて、自己の感情を加えてに相手に伝えることができる感情表現機能付きの通信装置を提供することができる。
【００６５】
さらに、携帯電話等の通信端末によって画像付きデータを送受信する場合に、受信側の通信端末の性能に対応して任意の画像を正常に表示することのできる通信装置を提供することができる。
【００６６】
【発明の実施の形態】
（実施の形態１）
以下に、本発明の実施の形態１における通信装置について、図１，図２，図３，図４，図５，図６を用いて説明する。
【００６７】
図１は本発明の実施の形態１における通信装置の構成図であり、図２は会話者をチャットルーム召集する処理を示したフローチャートである。
図１において、１はチャットルーム２と識別情報として電子メールアドレスを管理するｅ−ｍａｉｌデータベース３を有するサーバ、４は複数のユーザがそれぞれに所有する通信端末としてのパソコン６とサーバ１をつなぐネットワークで、パソコン６は画像入力装置としてカメラを持つ。９は複数のユーザがそれぞれに所有する携帯電話５とサーバ１をつなぐネットワークである。図１の例では、ユーザａ，ユーザｂ，ユーザｃ，ユーザｄの各ユーザが、携帯電話５およびパソコン６を所有してそれぞれネットワーク９およびネットワーク４を経由してサーバ１に接続されている。ここでは携帯電話５を用いて説明しているが、ポケットベルでもその他の通信端末でも良く、パソコン６と一体になった通信端末を用いる事もできる。
【００６８】
図２において、発信者がユーザａとして、処理が開始（Ｓ１）されると、まず、ユーザａがパソコン６からネットワーク４を経由してサーバ１のチャットルーム２に接続する（Ｓ２）。次に、ユーザａは画像付きの会話を行う会話対象者としてのユーザｂ，ユーザｃ，ユーザｄを呼び出すようサーバに要請する（Ｓ３）。ここでは、ユーザの識別情報として電子メールアドレスを指示する場合にて説明しているが、各ユーザがサーバ１に登録している本名やニックネームを指示しても良い。また、会話対象者としては１人でも複数人でもかまわない。次に、サーバ１は電子メールアドレスを指示されると、参加の可否を確認するために、その電子メールアドレスに対して、ユーザａがチャットルーム２への参加要請を出しているという旨の電子メールをネットワーク９を経由して発信する（Ｓ４）。これにより、ユーザｂ，ユーザｃ，ユーザｄは携帯電話５の電子メールにチャットルームへの参加要請が入ったことを認識できる。参加要請を知ったユーザｂ，ユーザｃ，ユーザｄは各自のパソコン６からネットワーク４を経由してチャットルーム２に接続し（Ｓ５）、画像付きの会話を開始することができる（Ｓ６）。ユーザｂ，ユーザｃ，ユーザｄがパソコン６を使用できない状況にある場合は、携帯電話５よりネットワーク９を経由してサーバに対し参加できない旨やその他の情報を電子メールで返事する（Ｓ７）。この電子メールの内容をサーバがユーザａに対して通知し（Ｓ８）、ユーザａはその状況を認識したうえで、接続してきたユーザとのみ画像付きの会話を開始することができる。あるいは接続できるユーザがいない場合は、ユーザａはチャットルーム２との接続を切ることもできるし、別のユーザを呼び出すようサーバに要請することもできる（Ｓ３）。
【００６９】
このことにより、インターネット上で会話を行う場合に、会話対象者がインターネットに接続されていなくても、会話対象者に対してネットワーク上のサーバへの接続を要請できる通信装置を提供すことができる。
【００７０】
図３は各ユーザーのパソコンのモニタ画面の例を示す概念図であり、図４は本発明の実施の形態１における音声情報による画像合成処理を示す構成図であり、図５は本発明の実施の形態１における発言者のみを出力したモニタ画面を示す図であり、図６は発明の実施の形態１における発言者を拡大して出力したモニタ画面を示す図である。
【００７１】
図３において、モニタ画面１０には各ユーザのパソコン６に取付けられているカメラの画像が表示される。現在参加者が４人であるのでモニタ画面を４分割して表示されるが、参加者が多い場合が９分割や１６分割して表示することも可能である。分割数が多くなると個々のユーザ表示サイズが小さくなるため表情が分かりにくくなってくる。その場合には、例えば、図３においてユーザｂが現在発言者だとすると、サーバ１が各ユーザの音声の有無や音量からユーザｂが発言者であると判断し、ユーザｂの表示画面を自動的に拡大することができる。
【００７２】
図４は参加人数がｎ人とした場合の構成を示しており、図３の例ではｎ＝４である。図４において、破線で囲んだ部分２５は音声処理ブロックである。音声入力端子２０へ入力された各ユーザの音声が、検波器２１で整流された後、ローパスフィルタ２２で一定時間積分される。この積分値は、閾値入力端子２７から与えられた閾値と比較器２３で比較され、閾値よりも大きければ比較器２３の出力は”１”、閾値よりも小さければ比較器２３の出力は”０”となる。ローパスフィルタ２２と比較器２３の出力の論理積を論理回路２４でとり、最大値ユーザ検出器２６に入力する。他のユーザｂ，ユーザｃ，ユーザｄの音声も同様に音声処理ブロック２５で処理され、最大値ユーザ検出器２６において、音声ブロック２５の出力値により各ユーザの順序をつける。最大値ユーザ検出器２６の順序出力をユーザ番号を用いて、あるいは全員が無音状態の場合は”０”を画像合成器２９へ出力する。一方、各ユーザの画像は画像入力端子２８から画像合成器２９へ入力される。ここで最大値ユーザ検出器２６の出力が”０”の場合は、各ユーザの画像を均等に１画面中に合成し、図３に示すような合成画像を画像出力端子３０より出力する。例えば、最大値ユーザ検出器２６の順序出力が大きい順にユーザｂ−ユーザｃ−ユーザｄ−ユーザａとされる場合は、図５に示すようにモニタ画面１０全体にユーザｂの画像を拡大し画像出力端子３０より出力することもできるし、図６に示すように各ユーザの画像サイズを変えて合成し画像出力端子３０よりモニタ画面１０に出力することも可能である。最大値ユーザ検出器２６の出力が他の順序を示す場合も同様に拡大して画像出力端子３０より出力する。
【００７３】
ローパスフィルタ２２の出力は検波器２１の出力を一定時間積分した結果をそのまま出力してもよいし、連続するｍ回の積分結果の平均値としてもよい。これら積分時間や平均回数ｍは実際の会話の状況と画面拡大の頻度との関係を見ながら調整することができる。
【００７４】
ここでは、インターネット上のコミュニケーションツールとしてチャットを例に説明したが、その他のインターネット電話などのインターネット上のコミュニケーションツールに用いることができる。
【００７５】
このことにより、発言者の画像をより鮮明にすることができ、インターネット上でのコミュニケーションにおいて、発言者の感情を正確に相手に伝えることができる。
【００７６】
（実施の形態２）
以下に、本発明の実施の形態２における通信装置について、図２，図３，図７，図８，図９を用いて説明する。
【００７７】
図７は本発明の実施の形態２における通信装置の構成図であり、図８は本発明の実施の形態２における画像処理を行う装置の構成図であり、図９は本発明の実施の形態２における画像処理例を示す概念図である。
【００７８】
図７において、１はチャットルーム２と識別情報として電子メールアドレスを管理するｅ−ｍａｉｌデータベース３と感情を表現するための情報を格納した情報ライブラリ７を有するサーバ、４は複数のユーザがそれぞれに所有する通信端末としてのパソコン６とサーバ１をつなぐネットワークで、パソコン６は画像入力装置としてカメラを持つ。９は複数のユーザがそれぞれに所有する携帯電話５とサーバ１をつなぐネットワークである。
【００７９】
図８において、パソコン６のキーボードの４つのキーを喜怒哀楽の感情表現用のスイッチとして割当て、それらをスイッチ４０，スイッチ４１，スイッチ４２，スイッチ４３とする。これらのスイッチ４０，スイッチ４１，スイッチ４２，スイッチ４３のオンにもとづき感情を表現するための情報を表情情報回路４４で選択する。表情情報回路４４で選択された情報とカメラ４５の画像を画像合成回路４６で合成し、画像出力端子４８よりネットワーク４へ送信するよう構成されている。
【００８０】
ここでは、この表情情報を合成処理する表情情報合成部４９が画像送信側のパソコン６上にある場合について説明したが、サーバ１上にあっても良いし、画像受信側のパソコン６上にあっても良い。
【００８１】
感情表現するための情報は、表現情報回路４４で管理されているが、パソコン６やネットワーク４につながるその他の装置で各ユーザ自身で作成することもでき、あるいは、ネットワーク４を経由して必要な情報を情報ライブラリ７からダウンロードして表現情報回路４４に登録することで内容を更新することもできる。
【００８２】
本実施の形態２において会話対象者を召集する手順は、実施の形態１において説明した図２に示した手順と同様であるので説明を省略する。
図３において画面を４分割して表示しているが、分割数が増えることで各ユーザの表示サイズが小さくなるため表情が分かりにくくなってくることは実施の形態１と同様である。
【００８３】
このように表情が分かりにくい状態での会話中にユーザｂが非常に不愉快な思いをして、それを表情で他のユーザに伝えたいとすると、パソコン６のキーボードに割当てられている感情表現用スイッチのうちの怒りに対応するスイッチ４１をユーザｂ自身で押す。このことにより、ユーザｂのパソコン６上で、図９に示すようにユーザｂのカメラ画像１１とスイッチ４１に対応する表情情報回路４４から出力された表情情報１２が合成され、合成された画像が送信され各ユーザのパソコン６のモニタ画面１０上に表示される。ここでは、怒りの感情を表現する場合について説明したが、その他、喜怒哀楽等の感情を表現することも可能である。
【００８４】
なお、カメラ画像１１に対する表情情報１２の合成位置は決まっており、例えば、感情の情報１２の場合は鬼の角と牙であるのでカメラ画像１１の中での顔の位置やサイズを認識した上で所定の位置に合成される。したがって、カメラ画像１１の変化、つまり顔の動きに応じて表情情報１２の合成位置も変化する。
【００８５】
本実施の形態２では表情情報１２として図形を例にとったが、有名人の写真等の様々な画像や、率直に文字を情報として合成することも可能である。また、感情表現用スイッチとしてパソコン６のキーボードではなく、ユーザの声や顔の表情を割当てておき、会話中に音声認識や画像認識を用いてそれらの一致を見て感情表現用スイッチのオンオフを判断させることも可能である。
【００８６】
ここでは、インターネット上のコミュニケーションツールとしてチャットを例に説明したが、その他のインターネット電話などのインターネット上のコミュニケーションツールに用いることができる。
【００８７】
以上の構成により、インターネット上でのコミュニケーションにおいて、自己の感情を加えてに相手に伝えることができる感情表現機能付きの通信装置を提供することができる。
【００８８】
（実施の形態３）
以下に、本発明の実施の形態３における通信装置について、図１０を用いて説明する。
【００８９】
図１０は本実施の形態３における通信装置の構成図である。
図１０において、１はチャットルーム２と識別情報として電子メールアドレスを管理するｅ−ｍａｉｌデータベース３と感情を表現するための情報を格納した情報ライブラリ７を有するサーバ、４は複数のユーザがそれぞれに所有する通信端末８とサーバ１をつなぐネットワークで、通信端末８はコミュニケーションツールとしての通信端末の機能と会話対象者を召集するための通信端末の機能を共用する構成になっている。また、通信端末８にはスイッチがオンされることにより通信端末８に振動を生じるバイブレーション装置１３が付いている。
【００９０】
複数のユーザで画像付きの会話が開始されてから、例えばユーザａが何らかのイライラした感情、あるいは他のユーザの注目を得たい等の感情を表現したい場合、バイブレーション装置１３に対応するスイッチをオンする。そのスイッチ情報がサーバ１とネットワーク４を経由して他のユーザの通信端末８へ送られ、通信端末８のバイブレーション装置１３を駆動し、その振動が他のユーザに伝えられる。これによりユーザａの何らかのイライラした感情、あるいは他のユーザの注目を得たい等の感情を他のユーザに確実に伝えることができるようになる。
【００９１】
以上の構成により、インターネット上での会話において、自己の感情を加えてに相手に伝えることができる感情表現機能付きの通信装置を提供することができる。
【００９２】
また、バイブレーション装置１３を、サーバへの接続の要請に使用することもできる。
ここでは、インターネット上のコミュニケーションツールとしてチャットを例に説明したが、その他のインターネット電話などのインターネット上のコミュニケーションツールに用いることができる。
【００９３】
このことにより、インターネット上でコミュニケーションを行う場合に、対象者がインターネットに接続されていなくても、対象者に対してネットワーク上のサーバへの接続を要請できる通信装置を提供することができる。
【００９４】
（実施の形態４）
以下に、本発明の実施の形態４における通信装置について、図１１，図１２，図１３，図１４，図１５，図１６，図１７，図１８を用いて説明する。
【００９５】
図１１は本発明の実施の形態４における通信装置の構成図，図１２は本発明の実施の形態４における通信装置の処理を示すフロー図，図１３は付加情報の例であるフレーム画像を示す図，図１４は付加情報の例である動画を示す図，図１５は受信者に送信するメールの内容を例示する図，図１６（ａ）は送信端末における送信画像を示す図，図１６（ｂ）は受信端末に対応した送信画像を示す図，図１７（ａ）は変換前の付加情報を示す図，図１７（ｂ）は受信端末に対応して変換した付加情報を示す図，図１８は受信端末に送信する合成画像を示す図である。
【００９６】
図１１において、１１０１はサーバ、１１０２は画像記憶手段、１１０３は付加情報記憶手段、１１０４は付加情報合成手段、１１０５は付加情報選択手段、１１０６は合成画像送信手段、１１０７は端末情報取得手段、１１０８は電子メール送信手段、１１０９は送信端末、１１１０は受信端末である。
【００９７】
まず、その動作を図１１，図１２，図１３，図１４，図１５に基づいて説明する。
サーバ１１０１は送信者が送信端末１１０９を通じて画像に付加情報を付加した合成画像を受信者に対して送信する。
【００９８】
送信端末１１０９、受信端末１１１０としては携帯電話が最も一般的に用いられており、近年カメラ付き携帯電話の急速な普及により、撮影した画像を友人が持っている携帯電話に送ることが一般化している。本発明の通信装置では、撮影した画像をそのまま送るのではなく、撮影した画像に新たに付加情報、例えばアニメーションを付加して送ることで、より趣向性を高めた画像、コンテンツを発信しようとするものである。
【００９９】
ここでは、付加する情報として画像を用いて説明するが、テキスト、音楽等を付加することも可能である。
図１３は一般的にフレーム画像とよばれる静止画であり、動画に付加した場合には、フレーム画像は動かずに元画像だけが動くことになる。図１４は付加する画像も動くものであり、都合上３枚だけ表示しているが複数枚、または動画の状態に応じた枚数記憶されている。
【０１００】
送信画像としては動画、静止画があるが、ここでは動画を送信する場合について説明する。
まず、送信者はあらかじめ受信者の受信端末１１１０に送信する画像を送信端末１１０９から、サーバ１１０１の画像記憶手段１１０２に記憶する（Ｓ１）。一般的にこの作業を画像のアップロードという。送信する画像は前述したカメラ付き携帯電話で撮影した画像が一般的に用いられるが、他の手段で入手した画像を用いても良い。
【０１０１】
次に、送信者は付加情報選択手段１１０５により、送信画像に付加する付加情報が記憶された付加情報記憶手段１１０３から、送信画像に付加する付加情報を選択する（Ｓ２）。送信者は付加情報選択手段１１０５から送られてくる図１３、図１４に示したような付加情報を端末で見て確認し、付加情報を選択する。
【０１０２】
次に、付加情報合成手段１１０４にて、画像記憶手段１１０２に記憶してある画像と、送信者が選択した付加情報記憶手段１１０３に記憶してある付加情報を合成する。合成した画像データは送信端末に送られ、送信者は合成画像を確認して選択することができる（Ｓ３）。合成画像は後述するように、受信端末が表示できるフォーマットに合わせて再度合成し、受信端末１１１０に送信される。
【０１０３】
合成画像が送信された場合、送信者が持つ送信端末１１０９と、受信者が持つ受信端末１１１０が同じ機種で、加入している通信会社も同じであれば、送信端末１１０９で確認した通りの合成画像を受信者は受信端末１１１０で観ることができるが、ほとんどの場合、送信端末１１０９と受信端末１１１０は異なっており、利用している通信会社も違うため、受信端末１１１０で合成画像が正常に表示できない、またはまったく表示できない場合も起こりうる。例えば、送信端末１１０９が動画の国際規格であるＭＰＥＧ４をサポートしており、合成画像をＭＰＥＧ４で作成し、受信端末１１１０に送信した場合、受信端末１１１０がＭＰＥＧ４をサポートしてなければ受信した合成画像を見ることはできない。
【０１０４】
そこで実施の形態４の通信装置では、受信端末１１１０の情報を取得し、この情報を基に画像記憶手段１１０２にある画像と付加情報記憶手段１１０３にある付加情報とをそれぞれ受信端末１１１０で表示できるフォーマットに変換した後、付加情報合成手段１１０４にて合成し、受信端末１１１０に送信する。
【０１０５】
そのため受信端末１１１０で表示できるフォーマットを、端末情報取得手段１１０７にて取得する。これは送信者が受信者の持つ受信端末の機種、情報を知らないのが一般的であり、受信端末の情報を自動的に取得することが必要であるためである。
【０１０６】
そこで、送信者が受信者に対して付加情報を合成した画像を送付する場合、サーバ１１０１ではそのまま画像を送付するのでなく、まず電子メール送信手段１１０８にて受信者に対してメールを送信する（Ｓ４）。ここで、メールの内容は図１５に示すように、サーバ１１０１にアクセスを促す内容であり、ここでは、ＵＲＬをクリックすることを促している。
【０１０７】
次に、受信者は電子メールに記載されたＵＲＬをクリックすることでサーバ１１０１にアクセスする（Ｓ５）。受信端末１１１０はサーバ１１０１にアクセスする際に、表示画面サイズ、表示色、ＣＰＵ処理能力等のハードウェア処理能力や、ブラウザタイプ、処理可能な画像フォーマット等の端末情報を送信してくる。端末情報取得手段１１０７ではその情報を受け取って（Ｓ６）、画像を付加するために必要な情報を付加情報合成手段１１０４に送付する。
【０１０８】
次に、付加情報合成手段１１０４では受信端末１１１０の表示性能、表示可能な画像フォーマットに合わせて画像記憶手段１１０２に記憶している画像および付加情報記憶手段１１０３にある付加情報のフォーマットを変換する（Ｓ７）。その後、画像および付加情報を合成する（Ｓ８）。最後に、サーバ１１０１から合成した画像が受信端末１１１０に送信される（Ｓ９）。このようにすることで受信者は受信端末１１１０上で合成画像を見ることができる。
【０１０９】
以下、図１１，図１６，図１７，図１８を用いて画像の変換，合成について具体的に説明する。
画像記憶手段１１０２に図１６（ａ）に示すような連続するＭＰＥＧ４の画像データが記憶されており、送信者が付加情報記憶手段１１０３に記憶されている図１７（ａ）に示すようなストーリー性のあるアニメーション情報を付加情報として選択し、これを合成する場合を考える。
【０１１０】
まず、端末情報取得手段１１０７にて受信端末１１１０が、ＭＰＥＧ４ではなく、動画のフォーマットとしてアニメーションＧＩＦをサポートしており、表示能力の関係で、３枚の画像しか表示できないことが判明した場合、付加情報合成手段１１０４では画像記憶手段１１０２にあるＭＰＥＧ４の画像から図１６（ｂ）に示すように３枚の画像を選択する。この場合、一番最初の画像、中間の画像、最後の画像という選択をしてもよいし、変化の一番大きい画像を３枚選択してもよい。同様に付加情報記憶手段１１０３に記憶してある付加情報であるアニメーションから図１７（ｂ）に示すように３枚画像を選択する。
【０１１１】
さらに、付加情報合成手段１１０４では、選択した画像およびアニメーションを端末情報取得手段１１０７からの情報に基づいて、受信端末１１１０の表示サイズ、表示容量、表示色等に合わせて変換を行い、図１８に示すようにそれぞれを合成する。
【０１１２】
合成画像は合成画像送信手段１１０６から受信端末１１１０に送られ、受信者は受信端末１１１０に最適化された合成画像を見ることができる。
これら一連の処理はサーバ１１０１で自動的に行われる処理であり、送信者は受信者に対して情報を付加した画像を送信するという作業を行うだけで、サーバ１１０１側で受信端末１１１０の特性に合わせて画像を送信することになる。
【０１１３】
このように、携帯電話等の通信端末によって画像付きデータを送受信する場合に、受信側の通信端末の性能に合わせて、画像や付加情報を最適に変換するため、受信側の通信端末の性能に対応して任意の画像を正常に表示することができる。
【０１１４】
また、受信端末１１１０の表示性能、表示可能な画像フォーマットに合わせて画像記憶手段１１０２に記憶している画像および付加情報記憶手段１１０３にある付加情報の画像特性を変換してそれぞれを合成する際に、付加情報の画像サイズの変更、および減色処理を行うが、１つの付加情報に対して複数の画像サイズや色等の画像特性を持つ付加情報を複数用意して、その中から最適な付加情報を選択するようにしてもよい。
【０１１５】
これは受信端末１１１０に合わせて、付加情報記憶手段１１０３にある画像を選択する際、付加情報を拡大、縮小あるいは減色処理等を行わなければならないが、受信端末は一般的には携帯電話であり、表示画像が小さいため、縮小した場合、付加情報が何であるかわからなくなる場合があるためである。例えば、付加情報が文字の場合、縮小処理により文字がつぶれて読めなくなる場合がある。また減色処理においても、自動的に最適化した場合には最終的にどの色を使用することになるのかわからないため、付加情報の見え方が変になる場合があった。
【０１１６】
そこで、あらかじめ、小さくてもつぶれのない付加情報を複数用意しておき、同様に色数が少なくても変にならない付加情報を１つのコンテンツにつき複数用意しておき、受信端末１１１０の性能に合わせて、最適な組み合わせを付加情報記憶手段１１０３に記憶してある付加情報から選択し、付加情報合成手段１１０４で合成する。文字の場合には、複数のフォントサイズを用意し、受信端末の表示サイズ等により、フォントサイズを選択するようにすればよい。こうすることで受信画像に最適な画像を送信することができる。
【０１１７】
また、上記説明ではサーバ上で送信する画像および付加情報それぞれに対して画像特性の変換した後に、両者を合成して受信端末に送信していたが、サーバから受信端末に送信する画像および付加情報を送信し、受信端末において両者の画像特性の変換および合成を行うことも可能である。
【０１１８】
（実施の形態５）
以下に、本発明の実施の形態５における通信装置について、図１９，図２０を用いて説明する。
【０１１９】
図１９は本発明の実施の形態５における通信装置の構成図，図２０（ａ）は本発明の実施の形態５における付加情報を示す図，図２０（ｂ）は本発明の実施の形態５における合成画像を示す図である。
【０１２０】
図１９において、基本的には実施の形態４と同じであるが、人物認識手段１１１１がある点が異なる。実施の形態５の通信装置では、実施の形態４と同様に、受信端末１１１０の情報を取得し、画像記憶手段１１０２にある画像と付加情報記憶手段１１０３にある付加情報とを受信端末１１１０で表示できるフォーマットに変換した後、付加情報合成手段１１０４にて合成し、受信端末１１１０に送信する。
【０１２１】
人物認識手段１１１１では画像記憶手段１１０２にある画像中の人物の部分を認識し、顔の位置、目の位置、口の位置などの位置を認識する。人物認識は肌色の検出や、目、口のパターンマッチング手法等により行う。
【０１２２】
付加情報合成手段１１０４では受信端末１１１０の表示性能、表示可能な画像フォーマットに合わせて画像記憶手段１１０２に記憶している画像および付加情報記憶手段１１０３にある付加情報の画像特性を変換してそれぞれを合成する。その際に画像記憶手段１１０２にある画像中の人物の大きさ、位置、動き等に合わせて合成方法を変える。
【０１２３】
例えば送信者が図２０（ａ）のような目のアニメーションを付加情報として選択し、付加情報を画像記憶手段１１０２に記憶してある画像に合成する場合、人物認識手段１１１１により画像中の人物の目を認識し、目の位置および目の大きさを検出し、それに合わせて目のアニメーションの大きさを変更して目の位置に合成し、図２０（ｂ）のような画像を得ることができる。この場合、付加するアニメーションの大きさを受信端末の表示サイズに合わせて、変えるようにしてもよい。例えば表示サイズが小さい場合には通常の大きさの１．５倍にして付加するようにする。これにより、表示サイズが小さいために付加した情報がわかりにくくなることを防止できる。
【０１２４】
また、人物の動きにより、合成方法を変えるようにしてもよい。例えば、実施の形態４において、端末情報取得手段１１０７にて受信端末が、ＭＰＥＧ４ではなく、動画のフォーマットとしてアニメーションＧＩＦをサポートしており、表示能力の関係で、ＭＰＥＧ４の画像から３枚の画像を選択する場合、一番最初の画像、中間の画像、最後の画像という選択をしてもよいし、変化の一番大きい画像を３枚選択してもよいと説明した。
【０１２５】
実施の形態５では人物の動きが大きく異なる３枚の画像を選択して合成を行うようにすることが可能である。こうすることで、画像の特徴をよく表した画像を選択でき、その画像に付加情報を付加できるので、最適な合成画像を受信端末１１１０に送信することができる。
【０１２６】
また、受信端末１１１０の表示能力の関係でアニメーションＧＩＦにする場合、元画像がフルカラーであったとすると、減色処理を行う必要があるが、使用できる色に制限があるため、顔の肌色が割り当てられず、顔色が不適切になる可能性がある。そこで人物認識手段１１１１により人物が存在すると認識された場合、無条件で肌色を、減色後も残るように減色処理を行う。このようにすることで、人物の肌色を損なうことなく画像を送信することができる。
【０１２７】
このように、携帯電話等の通信端末によって人物画像付きデータを送受信する場合に、受信側の通信端末の性能に合わせて、画像や付加情報を最適に変換するため、受信側の通信端末の性能に対応して任意の画像を正常に表示することができる。
【０１２８】
また、上記説明ではサーバ上で送信する画像および付加情報それぞれに対して画像特性の変換した後に、両者を合成して受信端末に送信していたが、サーバから受信端末に送信する画像および付加情報を送信し、受信端末において両者の画像特性の変換および合成を行うことも可能である。
【０１２９】
（実施の形態６）
以下に、本発明の実施の形態６における通信装置について、図２１，図２２を用いて説明する。
【０１３０】
図２１は本発明の実施の形態６における通信装置の構成図，図２２（ａ）は本発明の実施の形態６における特殊効果前の画像を示す図，図２２（ｂ）は本発明の実施の形態６における特殊効果後の画像を示す図であり、顔の任意のパーツを歪ませる特殊効果を加えている。
【０１３１】
図２１において、基本的には実施の形態５と同じであるが、付加情報記憶手段１１０３、付加情報合成手段１１０４、付加情報選択手段１１０５の代わりにそれぞれ、特殊効果記憶手段２１０３、特殊効果合成手段２１０４、特殊効果選択手段２１０５を有する点が異なる。
【０１３２】
実施の形態６では画像記憶手段１１０２に記憶してある画像に特殊効果を加える。特殊効果とは、例えば顔全体を大きくしたり、図２２に示すように顔の一部分を変形したり、目を大きくしたりすることをいう。
【０１３３】
特殊効果を加えるため、実施の形態６では、人物認識手段１１１１により画像記憶手段１１０２にある画像の中の人物を認識し、顔の位置、目の位置、口の位置などの位置を認識する。人物認識は肌色の検出や、目、口のパターンマッチング手法等により行う。
【０１３４】
特殊効果合成手段２１０４では受信端末１１１０の表示性能、表示可能な画像フォーマットに合わせて特殊効果を加えた画像の画像特性を変換する。例えば、受信端末１１１０の表示サイズが小さい場合、画像の変形量が小さいと特殊効果がよくわからない場合があるので、受信端末１１１０の表示サイズが小さい場合には、画像の変形量をより大きくして受信端末１１１０で特殊効果がわかりやくなるように画像特性を変換してから特殊効果を加える。
【０１３５】
別の例としては、受信端末に合わせて減色処理を行う際に、実施の形態５で述べたように、人物認識手段１１１１により人物が存在すると認識された場合、無条件で肌色を減色しないようにしてもよい。このようにすることで、肌色を受信端末１１１０で表示することができるため、受信端末で肌色がなくなるという現象を防止することができる。
【０１３６】
このように、携帯電話等の通信端末によって特殊効果を加えた画像付きデータを送受信する場合に、受信側の通信端末の性能に合わせて、画像を最適に変換するため、受信側の通信端末の性能に対応して任意の画像を正常に表示することができる。
【０１３７】
また、上記説明ではサーバ上で送信する画像および付加情報それぞれに対して画像特性の変換した後に、両者を合成して受信端末に送信していたが、サーバから受信端末に送信する画像および付加情報を送信し、受信端末において両者の画像特性の変換および合成を行うことも可能である。
【０１３８】
（実施の形態７）
以下に、本発明の実施の形態７における通信装置について、図２３，図２４を用いて説明する。
【０１３９】
図２３は本発明の実施の形態７における受信端末で合成を行う通信装置の構成図，図２４は本発明の実施の形態７における受信端末でプログラムにより合成を行う通信装置の構成図である。
【０１４０】
前述の実施の形態では、サーバで送信する画像と付加情報を受信端末に対応する画像特性に変換し、それらを合成してから受信端末に合成画像を送信する構成としていたが、受信端末において、受信した画像と付加情報を適当な画像特性に変換して合成することも可能である。
【０１４１】
図２３において、サーバ２３０１は、送信端末１１０９から送信される画像を記憶する画像記憶手段１１０２と、送信される画像と合成される付加情報を選択する付加情報選択手段１１０５と、選択された付加情報を記憶する付加情報記憶手段１１０３と、画像と付加情報を合成して送信端末に合成画像を送信する付加情報合成手段１１０４と、送信する画像を受信端末２３０９に送信する画像送信手段２３０５と、付加情報を受信端末２３０９に送信する付加情報送信手段２３０７により構成さる。受信端末２３０９は、サーバ２３０１の画像送信手段２３０５から送信された画像を受信する画像受信手段２３１０と、サーバ２３０１の付加情報送信手段２３０７から送信された付加情報を受信する付加情報受信手段２３１２と、端末情報取得手段２３１３で取得した受信端末２３０９自身の端末情報に対応して送信された画像と付加情報の画像特性を変換した後にそれらを合成する付加情報合成手段２３１１と、付加情報合成手段２３１１で合成した合成画像を表示する表示手段２３１４と、画像と付加情報を変換するプログラムをネットワーク２３１６から入手するプログラムダウンロード手段２３１５より構成される。
【０１４２】
以下その動作を説明する。
まず、実施の形態４と同様に送信端末１１０９より画像と選択された付加情報を合成した合成画像を送信する場合、本実施の形態７ではサーバ２３０１で変換および合成を行わず、送信する画像と付加情報をそれぞれ画像送信手段２３０５および付加情報送信手段２３０７から別々に受信端末２３０９に送信する。
【０１４３】
ここで、送信端末１１０９における、サーバ２３０１で合成された画像を確認する手段，付加情報を選択する手段，送信画像を選択する手段および送信画像と付加情報を受信端末に送信する指示を行う手段の図示は省略する。
【０１４４】
次に、受信端末２３０９では、画像受信手段２３１０および付加情報受信手段２３１２によりそれぞれ受信した画像と付加情報を、端末情報取得手段２３１３にて取得した受信端末２３０９自身の端末情報を用いて、付加情報合成手段２３１１により受信端末で正常に表示できる画像特性に変換された後に合成する。
【０１４５】
最後に、合成された合成画像を表示手段２３１４にて受信端末２３０９上に表示する。
この時、付加情報合成手段２３１１で画像および付加情報を変換するプログラムはプログラムダウンロード手段２３１５にて接続されたネットワーク２３１６より入手することが可能であり、常に、最新または最適な変換を行うことができる。
【０１４６】
また、サーバ２３０１より受信端末２３０９に、画像と付加情報と共に画像と付加情報の画像特性を端末情報に対応して変換した後に合成するプログラムを送信することにより、受信端末２３０９にて画像と付加情報の画像特性変換した後に合成するようにすることも可能である。
【０１４７】
図２４において、サーバ２４０１は、画像記憶手段１１０２，合成画像確認手段２４０５，付加情報記憶手段１１０３，付加情報選択手段１１０５と、受信端末２４０３に送信する画像，付加情報および送信する画像と付加情報を最適に変換した後に合成するプログラムを送信する付加情報合成プログラム転送手段２４０２により構成される。受信端末２４０３は、端末情報取得手段２３１３，表示手段２３１４と、付加情報合成プログラム転送手段２４０２から送られたデータにより、端末情報に対応して受信した画像と付加情報の画像特性を変換した後に合成する付加情報合成プログラム実行手段２４０４により構成される。
【０１４８】
ここで、付加情報合成プログラムには、受信端末２４０３より端末情報を取得するプログラムも内蔵されている。
この構成により、付加情報合成手段２３１１で画像と付加情報の画像特性を変換した後に合成する代わりに、付加情報合成プログラム実行手段２４０４にて、端末情報と、受信した画像，付加情報および受信した画像と付加情報の画像特性を端末情報に対応して変換した後に合成するプログラムにより、端末情報に対応して画像と付加情報の画像特性を変換した後に合成して、受信端末で正常に合成画像を表示することができる。
【０１４９】
ここで、付加情報合成プログラムはＪＡＶＡ（登録商標）などの、プラットフォームに依存しないプログラム言語を用いることにより、より広範囲な機種に対応することができる。
【０１５０】
以上により、携帯電話等の通信端末によって特殊効果を加えた画像付きデータを送受信する場合に、受信側の通信端末にて自身の性能に合わせて、画像を最適に変換するため、より容易に受信側の通信端末の性能に対応して任意の画像を正常に表示することができる。さらに、各受信側の通信端末にて処理できるため、たとえ複数の受信側の通信端末に送信する場合でも、サーバにて各受信側の通信端末毎に変換，合成処理を行う必要がなく、１度の処理で各受信側の通信端末の性能に対応して任意の画像を正常に表示することができる。
【０１５１】
【発明の効果】
以上のように、本発明の通信装置によると、インターネット上でコミュニケーションを行うに際し、会話対象者が携帯する通信端末に会話への参加の要請を発信できるため、会話対象者がインターネットに接続されていなくても、会話対象者に対してネットワーク上のサーバへの接続を要請することができる。
【０１５２】
また、互いの画像情報を表示しながらインターネットを用いたコミュニケーションを行う際に、ライブラリに登録された感情を表現する画像を送信する画像に合成できるようにすることにより、インターネット上でのコミュニケーションにおいて、自己の感情を加えてに相手に伝えることができる。
【０１５３】
また、携帯電話等の通信端末によって画像を送受信する場合、受信側の通信端末の性能に対応して画像の画像特性を変換するため、受信側の通信端末の性能に対応して任意の画像を正常に表示することができる。
【０１５４】
さらに、携帯電話等の通信端末によって複数の画像を合成したり画像に加工を加えて送受信する場合に、それぞれの画像毎に受信側の通信端末の性能に対応して画像の画像特性を変換してから合成や加工等の処理を行うため、受信側の通信端末の性能に対応して任意の画像を正常に表示することができる。
【図面の簡単な説明】
【図１】本発明の実施の形態１における通信装置の構成図
【図２】会話者をチャットルーム召集する処理を示したフローチャート
【図３】各ユーザーのパソコンのモニタ画面の例を示す概念図
【図４】本発明の実施の形態１における音声情報による画像合成処理を示す構成図
【図５】本発明の実施の形態１における発言者のみを出力したモニタ画面を示す図
【図６】発明の実施の形態１における発言者を拡大して出力したモニタ画面を示す図
【図７】本発明の実施の形態２における通信装置の構成図
【図８】本発明の実施の形態２における画像処理を行う装置の構成図
【図９】本発明の実施の形態２における画像処理例を示す概念図
【図１０】本発明の実施の形態３における通信装置の構成図
【図１１】本発明の実施の形態４における通信装置の構成図
【図１２】本発明の実施の形態４における通信装置の処理を示すフロー図
【図１３】付加情報の例であるフレーム画像を示す図
【図１４】付加情報の例である動画を示す図
【図１５】受信者に送信するメールの内容を例示する図
【図１６】（ａ）送信端末における送信画像を示す図
（ｂ）受信端末に対応した送信画像を示す図
【図１７】（ａ）変換前の付加情報を示す図
（ｂ）受信端末に対応して変換した付加情報を示す図
【図１８】受信端末に送信する合成画像を示す図
【図１９】本発明の実施の形態５における通信装置の構成図
【図２０】（ａ）本発明の実施の形態５における付加情報を示す図
（ｂ）本発明の実施の形態５における合成画像を示す図
【図２１】本発明の実施の形態６における通信装置の構成図
【図２２】（ａ）本発明の実施の形態６における特殊効果前の画像を示す図
（ｂ）本発明の実施の形態６における特殊効果後の画像を示す図
【図２３】本発明の実施の形態７における受信端末で合成を行う通信装置の構成図
【図２４】本発明の実施の形態７における受信端末でプログラムにより合成を行う通信装置の構成図
【符号の説明】
１    サーバ
２    チャットルーム
３    ｅ−ｍａｉｌデータベース
４    ネットワーク
５    携帯電話
６    パソコン
７    情報ライブラリ
８    通信端末
９    ネットワーク
１０    モニタ画面
１１    カメラ画像
１２    表情情報
１３    バイブレーション装置
２０    音声入力端子
２１    検波器
２２    ローパスフィルタ
２３    比較器
２４    論理回路
２５    音声処理ブロック
２６    最大値ユーザ検出器
２７    閾値入力端子
２８    画像入力端子
２９    画像合成器
３０    画像出力端子
４０    スイッチ
４１    スイッチ
４２    スイッチ
４３    スイッチ
４４    表情情報回路
４５    カメラ
４６    画像合成回路
４８    画像出力端子
４９    表情情報合成部
１１０１    サーバ
１１０２    画像記憶手段
１１０３    付加情報記憶手段
１１０４    付加情報合成手段
１１０５    付加情報選択手段
１１０６    合成画像送信手段
１１０７    端末情報取得手段
１１０８    電子メール送信手段
１１０９    送信端末
１１１０    受信端末
１１１１    人物認識手段
２１０３    特殊効果記憶手段
２１０４    特殊効果合成手段
２１０５    特殊効果選択手段
２３０１    サーバ
２３０５    画像送信手段
２３０７    付加情報送信手段
２３０９    受信端末
２３１０    画像受信手段
２３１１    付加情報合成手段
２３１２    付加情報受信手段
２３１３    端末情報取得手段
２３１４    表示手段
２３１５    プログラムダウンロード手段
２３１６    ネットワーク
２４０１    サーバ
２４０２    付加情報合成プログラム転送手段
２４０３    受信端末
２４０４    付加情報合成プログラム実行手段
２４０５    合成画像確認手段
【図１】
2004193809.tif 000003
【図２】
2004193809.tif 000004
【図３】
2004193809.tif 000005
【図４】
2004193809.tif 000006
【図５】
2004193809.tif 000007
【図６】
2004193809.tif 000008
【図７】
2004193809.tif 000009
【図８】
2004193809.tif 000010
【図９】
2004193809.tif 000011
【図１０】
2004193809.tif 000012
【図１１】
2004193809.tif 000013
【図１２】
2004193809.tif 000014
【図１３】
2004193809.tif 000015
【図１４】
2004193809.tif 000016
【図１５】
2004193809.tif 000017
【図１６】
2004193809.tif 000018
【図１７】
2004193809.tif 000019
【図１８】
2004193809.tif 000020
【図１９】
2004193809.tif 000021
【図２０】
2004193809.tif 000022
【図２１】
2004193809.tif 000023
【図２２】
2004193809.tif 000024
【図２３】
2004193809.tif 000025
【図２４】
2004193809.tif 000026