(57)【要約】【課題】従来テレビ電話は、リアルタイムの通話の音声と画像を送受信することで通信を行う。しかし、通話の音声と画像のみでは、単調になりがちである。【解決手段】本発明では、この課題を解決するために、話者の顔や背景などを話者同士で自由に変形し、演出効果を高めることができるテレビ電話を提案する。また、音声認識により、相手の画面に字幕をつけることができ、さらに、話者の声の大きさや感情に応じて、字幕の文字の大きさやフォントが変形する。これによって、印象づけたい部分を強調したり、音声とともに文字で補完したりすることが可能となる。【選択図】　　　　　　図２
2004072310.tif 000002
【特許請求の範囲】
【請求項１】
通話相手からの音声情報又は／及び映像情報である相手通話情報を受信するための相手通話情報受信部と、
相手通話情報受信部で受信した相手通話情報と合成すべき音声情報又は／及び映像情報である合成用情報を蓄積するための合成用情報蓄積部と、
相手通話情報受信部で受信した相手通話情報と、合成用情報蓄積部で蓄積されている合成用情報とを所定の態様で合成して合成情報とする情報合成部と、
情報合成部で合成された合成情報を出力するための出力部と、
を有するテレビ電話装置。
【請求項２】
通話相手からの音声情報又は／及び映像情報である相手通話情報を受信するための相手通話情報受信部と、
相手通話情報受信部で受信した相手通話情報と合成すべき音声情報又は／及び映像情報である合成用情報を蓄積するための合成用情報蓄積部と、
相手通話情報受信部で受信した相手通話情報と、合成用情報蓄積部で蓄積されている合成用情報との合成の態様を決定するための命令である合成命令を取得するための合成命令取得部と、
合成命令取得部で取得された合成命令に基づいて相手通話情報受信部で受信した相手通話情報と、合成用情報蓄積部で蓄積されている合成用情報とを所定の態様で合成して合成情報とする情報合成部と、
情報合成部で合成された合成情報を出力するための出力部と、
を有するテレビ電話装置。
【請求項３】
相手通話情報と合成すべき音声情報又は／及び映像情報である合成用情報を蓄積するための合成用情報蓄積部と、
前記合成用情報蓄積部で蓄積されている合成用情報と、相手通話情報、又は、通話相手に送信する音声情報又は／及び映像情報である自通話情報との合成の態様を決定するための命令である合成命令を生成する合成命令生成部と、
合成命令を取得するための合成命令取得部と、
前記合成命令を送信する送信部と、
を有するテレビ電話装置。
【請求項４】
合成用情報を取得して合成用情報蓄積部に蓄積する合成用情報取得部を有する請求項１から３のいずれか一に記載のテレビ電話装置。
【請求項５】
前記合成用情報は、合成用情報を複数のテレビ電話装置に送信して利用させるための合成用情報サービス装置から送信されるものである請求項４に記載のテレビ電話装置。
【請求項６】
合成命令を通話相手に出力するための合成命令出力部を有する請求項１から３のいずれか一に記載のテレビ電話装置。
【請求項７】
合成命令取得部で取得した合成命令に基づいて所定の態様の合成情報を合成できるか判断するための合成可否判断部と、
合成可否判断部での判断結果が合成不可である場合に、その旨を出力する合成不可情報出力部と、
を有する請求項２に記載のテレビ電話装置。
【請求項８】
合成命令取得部で取得した合成命令に基づいて所定の態様の合成情報を合成できるか判断するための合成可否判断部と、
合成可否判断部での判断結果が合成用情報が不足していることを理由として合成不可である場合に、ネットワーク上のサイトに、前記不足している合成用情報を取得するためのアクセスをする不足合成用情報取得部と、
を有する請求項２に記載のテレビ電話装置。
【請求項９】
通話相手である請求項７記載のテレビ電話装置の合成不可情報出力部から出力された判断結果を取得する判断結果取得部と、
判断結果取得部で取得した判断結果が、合成用情報が不足していることを理由として合成不可である場合に、その通話相手に対して合成用情報を出力する合成用情報出力部と、
を有する請求項１に記載のテレビ電話装置。
【請求項１０】
通話相手である請求項７記載のテレビ電話装置の合成不可情報出力部から出力された判断結果を取得する判断結果取得部と、
判断結果取得部で取得した判断結果が、合成用情報が不足していることを理由として合成不可である場合に、その通話相手に対して前記合成命令に基づいて合成すべき合成情報の一部を合成するために必要な合成用情報を出力する合成用情報出力部と、
を有する請求項１に記載のテレビ電話装置。
【請求項１１】
相手通話情報を受信するための相手通話情報受信部と、
自通話情報を取得する自通話情報取得部と、
前記相手通話情報受信部で受信した相手通話情報及び、前記自通話情報取得部で取得した自通話情報と合成すべき音声情報又は／及び、映像情報である合成用情報を蓄積するための合成用情報蓄積部と、
前記相手通話情報受信部で受信した相手通話情報と、自通話情報取得部で取得した自通話情報と、前記合成用情報蓄積部に蓄積された合成用情報とを所定の態様で合成して合成情報とする情報合成部と、
を有するテレビ電話装置。
【請求項１２】
前記情報合成部で合成した合成情報を通話相手のテレビ電話装置へ送信する合成情報送信部
をさらに有する請求項１１に記載のテレビ電話装置。
【請求項１３】
通話相手である請求項７記載の電話装置の合成不可情報出力部から出力された判断結果を取得する判断結果取得部と、
判断結果取得部で取得した判断結果が合成不可である場合に、相手通話情報、又は／及び、自通話情報を利用して合成情報を生成する合成情報生成部と、
前記合成情報を前記通話相手である請求項７記載のテレビ電話装置にて利用可能とするために出力する合成情報出力部と、
を有する請求項１に記載のテレビ電話装置。
【請求項１４】
通話相手である請求項９記載のテレビ電話装置から出力された合成用情報を取得する合成用情報取得部と、
合成用情報取得部で取得した合成用情報を情報合成部にて利用するために保持する合成用情報保持部と、
合成用情報保持部で保持されている合成用情報を削除して利用不可とするための合成用情報削除部と、
を有する請求項７記載のテレビ電話装置。
【請求項１５】
通話相手を識別するための情報である通話相手識別情報を取得する通話相手識別情報取得部と、
前記合成用情報取得部で取得した合成用情報を出力した通話相手を識別するための通話相手識別情報である合成用情報付与相手識別情報をその合成用情報と関連付けて蓄積する合成用情報利用相手情報蓄積部と、
通話相手識別情報取得部で取得された通話相手識別情報に基づいて、合成用情報を利用可能とする合成用情報利用許可部と、
を有する請求項１４に記載のテレビ電話装置。
【請求項１６】
通話相手である請求項１３記載のテレビ電話装置から出力された合成情報を取得する合成情報取得部と、
合成情報取得部で取得した合成情報を利用するために保持する合成情報保持部と、
合成情報保持部で保持されている合成情報を削除して利用不可とするための合成情報削除部と、
を有する請求項７記載のテレビ電話装置。
【請求項１７】
通話相手を識別するための情報である通話相手識別情報を取得する通話相手識別情報取得部と、
前記合成情報取得部で取得した合成情報を出力した通話相手を識別するための通話相手識別情報である合成情報付与相手識別情報をその合成情報と関連付けて蓄積する合成情報利用相手情報蓄積部と、
通話相手識別情報取得部で取得された通話相手識別情報に基づいて、合成情報を利用可能とする合成情報利用許可部と、
を有する請求項１６に記載のテレビ電話装置。
【請求項１８】
前記合成情報生成部は、通話相手に送信する音声情報又は／及び映像情報である自通話情報及び前記合成用情報蓄積部により蓄積される合成用情報とに基づいて合成情報を生成することを特徴とする請求項１３に記載のテレビ電話。
【請求項１９】
前記合成命令生成部は、相手通話情報又は、通話相手に送信する音声情報又は／及び映像情報である自通話情報に基づいて合成命令を生成することを特徴とする請求項３に記載のテレビ電話装置。
【請求項２０】
合成情報を生成する合成情報生成部を有し、
前記合成情報生成部で生成される合成情報は、合成情報として、相手通話情報、又は、自通話情報の音声情報をテキストに変換したテキスト情報、相手通話情報の音声情報を異なる言語へ翻訳した音声の情報、前記テキスト情報の表示形態の変更のための情報のいずれか一又は二以上の組合せを含むものである請求項１に記載のテレビ電話装置。
【請求項２１】
合成用情報は、背景を表示するための情報である請求項１記載のテレビ電話装置。
【請求項２２】
合成用情報を受け付ける合成用情報受付部と、
合成用情報受付部で受け付けた合成用情報を、複数のテレビ電話装置に送信して利用させるための合成用情報送付部と、
を有する合成用情報サービス装置。
【請求項２３】
通話相手からの音声情報又は／及び映像情報である相手通話情報を受信するための相手通話情報受信ステップと、
相手通話情報受信ステップにおいて受信した相手通話情報と、蓄積されている合成用情報とを所定の態様で合成して合成情報とする情報合成ステップと、
情報合成ステップで合成された合成情報を出力するための出力ステップと、
を含むテレビ電話通話方法。
【請求項２４】
通話相手からの音声情報又は／及び映像情報である相手通話情報を受信するための相手通話情報受信ステップと、
相手通話情報受信ステップにおいて受信した相手通話情報と、蓄積されている合成用情報との合成の態様を決定するための命令である合成命令を取得するための合成命令取得ステップと、
合成命令取得ステップにおいて取得された合成命令に基づいて相手通話情報受信ステップで受信した相手通話情報と、蓄積されている合成用情報とを所定の態様で合成して合成情報とする情報合成ステップと、
情報合成ステップで合成された合成情報を出力するための出力ステップと、
を含むテレビ電話通話方法。
【請求項２５】
合成用情報を受け付ける合成用情報受付ステップと、
合成用情報受付部で受け付けた合成用情報を、複数のテレビ電話装置に送信して利用させるための合成用情報送付ステップと、
を含む合成用情報サービス方法。
【請求項２６】
通話相手からの音声情報又は／及び映像情報である相手通話情報を受信するための相手通話情報受信ステップと、
相手通話情報受信ステップで受信した相手通話情報と、蓄積されている合成用情報とを所定の態様で合成して合成情報とする情報合成ステップと、
情報合成ステップで合成された合成情報を出力するための出力ステップと、
を含むテレビ電話通話プログラム。
【請求項２７】
通話相手からの音声情報又は／及び映像情報である相手通話情報を受信するための相手通話情報受信ステップと、
相手通話情報受信ステップで受信した相手通話情報と、蓄積されている合成用情報との合成の態様を決定するための命令である合成命令を取得するための合成命令取得ステップと、
合成命令取得ステップで取得された合成命令に基づいて相手通話情報受信ステップで受信した相手通話情報と、合成用情報蓄積ステップで蓄積されている合成用情報とを所定の態様で合成して合成情報とする情報合成ステップと、
情報合成ステップで合成された合成情報を出力するための出力ステップと、
を含むテレビ電話通話プログラム。
【請求項２８】
合成用情報を受け付ける合成用情報受付ステップと、
合成用情報受付部で受け付けた合成用情報を、複数のテレビ電話装置に送信して利用させるための合成用情報送付ステップと、
を含む合成用情報サービスプログラム。
【発明の詳細な説明】
【０００１】
【発明の属する技術分野】
本発明はテレビ電話装置に関するものである。
【０００２】
【従来の技術】
従来、テレビ電話は、通話の音声と、話者やその背景などの画像を送受信して通信を行う。
【０００３】
【発明が解決しようとする課題】
しかし、通話の音声と通話の時の実際の画像のみでは、単調になりがちである。
【０００４】
【課題を解決するための手段】
本発明では、この課題を解決するために、話者の顔や背景などを話者同士で自由に変形し、演出効果を高めることができるテレビ電話を提案する。
【０００５】
また、音声認識により、相手の画面に字幕をつけることができ、さらに、話者の声の大きさや感情に応じて、字幕の文字の大きさやフォントが変形する。これによって、印象づけたい部分を強調したり、音声とともに文字で補完したりすることが可能となる。
【０００６】
【発明の実施の形態】
以下に、本発明の実施の形態を説明する。なお、本発明はこれら実施の形態に何ら限定されるものではなく、その要旨を逸脱しない範囲において、種々なる態様で実施しうる。
【０００７】
実施形態１は、主に請求項１、２３、２６などについて説明する。
【０００８】
実施形態２は、主に請求項２、２４、２７などについて説明する。
【０００９】
実施形態３は、主に請求項３などについて説明する。
【００１０】
実施形態４は、主に請求項４などについて説明する。
【００１１】
実施形態５は、主に請求項５などについて説明する。
【００１２】
実施形態６は、主に請求項６などについて説明する。
【００１３】
実施形態７は、主に請求項７などについて説明する。
【００１４】
実施形態８は、主に請求項８などについて説明する。
【００１５】
実施形態９は、主に請求項９などについて説明する。
【００１６】
実施形態１０は、主に請求項１０などについて説明する。
【００１７】
実施形態１１は、主に請求項１１などについて説明する。
【００１８】
実施形態１２は、主に請求項１２などについて説明する。
【００１９】
実施形態１３は、主に請求項１３などについて説明する。
【００２０】
実施形態１４は、主に請求項１４などについて説明する。
【００２１】
実施形態１５は、主に請求項１５などについて説明する。
【００２２】
実施形態１６は、主に請求項１６などについて説明する。
【００２３】
実施形態１７は、主に請求項１７などについて説明する。
【００２４】
実施形態１８は、主に請求項１８などについて説明する。
【００２５】
実施形態１９は、主に請求項１９などについて説明する。
【００２６】
実施形態２０は、主に請求項２０などについて説明する。
【００２７】
実施形態２１は、主に請求項２１などについて説明する。
【００２８】
実施形態２２は、主に請求項２２、２５、２８などについて説明する。
＜＜実施形態１、２＞＞
【００２９】
＜実施形態１：概要＞
【００３０】
実施形態１について説明する。図１は、本実施形態の概念の一例を示すものである。図の左側はテレビ電話を利用する通話相手で、右側は自分のテレビ電話のモニタであるとする。通話相手は室内で通話しているため、通常であれば、自分のテレビ電話のモニタには、通話相手と通話相手の背景である室内の風景が映し出される。しかし、ここではあらかじめ蓄積されている桜並木の背景が合成され、あたかも通話相手が桜並木をバックに通話しているかのような映像となる。これにより、単調だったテレビ電話の通話中の背景に変化を持たせ、利用者を退屈させないようにすることができる。
【００３１】
また、自分のテレビ電話のボタン操作によって、相手のテレビ電話のモニタに映る背景を自由に変更することができるとしてもよい。
【００３２】
＜実施形態１：構成＞
【００３３】
実施形態１は、蓄積された合成用情報を利用するテレビ電話装置である。本実施形態での機能ブロックの一例を図２に示した。
【００３４】
図２に示す本実施形態の「テレビ電話装置」（０２００）は、「相手通話情報受信部」（０２０１）と、「合成用情報蓄積部」（０２０２）と、「情報合成部」（０２０３）と、「出力部」（０２０４）とからなる。
【００３５】
本件発明の構成要素である各部は、ハードウエア、ソフトウエア、ハードウエアとソフトウエアの両者、のいずれかによって構成される。たとえば、これらを実現する一例として、コンピュータを利用する場合には、ＣＰＵ、メモリ、バス、インターフェイス、周辺装置などから構成されるハードウエアと、これらのハードウエア上にて実行可能なソフトウエアを挙げることができる。
【００３６】
具体的には、メモリ上に展開されたプログラムを順次実行することで、メモリ上のデータや、インターフェイスを介して入力されるデータの加工、蓄積、出力などにより各部の機能が実現される。（本明細書の全体を通じて同様である。）
【００３７】
このような構成を、携帯電話、パソコン、ＰＤＡ等の機器に組み込むことも可能である。
【００３８】
「相手通話情報受信部」（０２０１）は、通話相手からの相手通話情報を受信するための処理を行う。
【００３９】
「相手通話情報」とは、通話相手の音声情報又は／及び映像情報より構成される情報をいう。ここでの音声情報は、発信者と通話相手との会話における声や音の情報をいう。また、映像情報は、テレビ電話装置に装備されたカメラなどによってとらえられた通話相手などの映像の情報をいう。受信した相手通話情報は、情報合成部（０２０３）に渡される。
【００４０】
「合成用情報蓄積部」（０２０２）は、合成用情報を蓄積する。
【００４１】
「合成用情報」とは、相手通話情報受信部で受信した相手通話情報と合成すべき音声情報又は／及び映像情報である。例えば、音声情報としては効果音、ＢＧＭなどが、映像情報としては背景、ふきだし、通話相手の静止画などが該当する。
【００４２】
図３は、合成用情報蓄積部に蓄積されている合成用情報の一例を示したものである。合成用情報蓄積部には、複数の音声情報、あるいは、映像情報（アイテム）から構成される合成用情報（ここでは、合成用情報とパッケージが同義であり、パッケージはアイテムの束によって構成される。）が蓄積されている。ここで、パッケージＩＤ１０００で識別される一連の合成用情報は、１０個のアイテムより構成される。各アイテムには、識別符号（アイテムＩＤ）、カテゴリ（背景、効果音、ふきだしなど）、アイテム種別（動画、静止画、音声など）、フォーマット（ＭＰＥＧ４、ＡＡＣ（Ａｄｖａｎｃｅｄ　Ａｕｄｉｏ　Ｃｏｄｉｎｇ）、ＧＩＦなど）などが関連付けられている。例えば、アイテムＩＤ１００１で識別されるアイテム１については、動画の映像情報であり、ＭＰＥＧ４のフォーマットによって構成され、背景として利用することができる。
【００４３】
また、ボタンの押下によってふきだし等が出現する場合には、ボタンの割り当てがなされているとしてもよい。ここでは、アイテムＩＤ１００３で識別されるアイテム３に、デフォルトキーとして割り当てられている。
【００４４】
ユーザが操作するボタンは、テレビ電話に既存の数字や記号（＃、＊）のボタンであるが、その他に、例えばパソコンで本実施の形態を実現するのであればキーボードに適当なボタンを割り振ることができ、携帯電話で本実施の形態を実現するのであればテンキーにより実現でき、ＰＤＡではタッチパネルにより実現することができる。また、既存のボタンを割り振る代わりに、合成用情報の出力専用のボタンを設けてもよい。ボタン押下による合成用情報の出力については、後述の実施形態２にて説明する。
【００４５】
「情報合成部」（０２０３）は、相手通話情報受信部で受信した相手通話情報と、合成用情報蓄積部で蓄積されている合成用情報とを所定の態様で合成して合成情報とする。
【００４６】
「所定の態様」とは、相手通話情報と合成用情報とをより適当な配置、あるいは、タイミングで出力できるような態様をいう。具体的には、次に示す３つの態様が想定できる。第一の態様は、相手通話情報に合成用情報を重ねて配置する場合で、第二の態様は、合成用情報に、一部分を抜き出す等した相手通話情報を配置する場合で、第三の態様は、相手通話情報を妨害しないように合成用情報を配置する場合である。
【００４７】
第一の態様の場合は、相手通話情報（映像情報）にふきだしなどの合成用情報を重ねて配置する場合が想定される。このとき、相手通話情報の人物の部分に重ならないように、配置される位置を変更できるとしてもよい。
【００４８】
第二の態様の場合は、相手通話情報の一部（人物の部分）を抜き出して背景などの合成用情報に重ねて配置する場合が想定される。このとき、相手通話情報の一部（人物の部分）の方を背景よりも優先させて、前面に配置する。
【００４９】
第三の態様の場合は、相手通話情報（音声情報）を妨害しないように効果音などの合成用情報を出力する場合である。具体的には、相手通話情報（音声情報）の切れ目に効果音を割り込ませるようにすることが該当する。
【００５０】
これら３つの態様は、複数が組合されて用いられる場合もある。例えば、ふきだしと背景を合成用情報として利用する場合には、合成用情報の構成要素であるふきだしと背景のそれぞれと、相手通話情報との優先順位をどのように付けるかについても所定の態様に含まれるとしてもよい。まずテレビ電話装置は、相手通話情報（映像情報）の一部である人物の部分が画像処理等によって特定し、抜き出す。この抜き出された相手通話情報の人物部分の優先順位が最も高くなり、次に優先順位が高いものとしてふきだしが指定される。最後に、背景の優先順位が最も低いため、最背面に配置される。所定の態様にて合成された相手通話情報と合成用情報は合成情報となる。ここでは、人物部分の方がふきだしの優先順位よりも高いとしたが、逆にふきだしの下に人物部分が隠れる表示等でもよい。
【００５１】
なお、これは一例であり、優先順位に関係なく、相手通話情報と合成用情報が組合わされて用いられる場合もある。例えば、あるときは人物部分の上にアニメーションが動き、またあるときは人物部分の下にアニメーションが隠れたりする表示や、人物の顔が加工されて変更されたりする表示が該当する。
【００５２】
「出力部」（０２０４）は、情報合成部で合成された合成情報を出力するための処理を行う。実際に受信者のテレビ電話装置に出力する場合には、受信者のテレビ電話装置の画面や、スピーカー（受話器）に出力する。また、プリンタによってプリントアウトすることができるとしてもよい。その他、フレキシブルディスク等の可搬性のメディアに記録することができるとしてもよい。
【００５３】
図３５は、電話をかけ、相手に通じた時点から、相手が指定するパッケージ（合成用情報）が蓄積されているか確認を行う処理の流れを模式的に示したものである。発信者が電話をかけることにより、接続操作が開始される（▲１▼）。接続先の情報（電話番号）や、パッケージＩＤ等を指定して、接続要求を行う（▲２▼）。ここで指定するパッケージＩＤは、発信者がどのような背景や効果音を用いて通話を行うか決定するものである。パッケージＩＤの指定の代わりに、アイテムＩＤを指定し、パッケージ全体ではなく、パッケージを構成するアイテムごとに指定するとしてもよい。
【００５４】
受信者のテレビ電話装置では、接続要求を受けて、呼び鈴や画面表示などで着信を受信者に伝えるための表示指示が出される（▲３▼）。また、その際、発信者から指定されたパッケージＩＤの確認処理が行われる（▲４▼）。指定されたパッケージＩＤに対応する背景や効果音等が蓄積されているか否かについて、受信者側から発信者側へその旨が通知されるとしてもよい（▲４▼）。指定のパッケージが蓄積されておらず、発信者に通知がされない場合には、所定の時間経過後にタイムアウトとなり、発信者は指定のパッケージを用いた通話ができないことを認識するとしてもよい。
【００５５】
着信表示に対して、受信者が電話を受けることで接続許可が発信者のテレビ電話装置に伝えられる（▲５▼）。ここで、受信者からもパッケージＩＤ等が指定できるとしてもよい。あるいは、パッケージが蓄積されているかどうかを通知する場合もある。
【００５６】
接続許可を受けた発信者のテレビ電話装置では、指定のパッケージＩＤの確認処理が行われる（▲６▼）。指定されたパッケージＩＤに対応する背景や効果音等が蓄積されているか否かについて、発信者側から受信者側へその旨が通知される（▲７▼）。指定のパッケージが蓄積されている場合には、さらに受信者にその情報が通知され（▲８▼）、受信者は相手のテレビ電話装置に自分が使おうとしたパッケージがあることが確認できる。接続が確立したことを、音や画面表示などで発信者に通知され（▲９▼）、接続処理は終了する。
【００５７】
＜実施形態１：処理の流れ＞
【００５８】
図４は、実施形態１での処理の流れを示したものである。本実施形態におけるテレビ電話通話方法は、以下に示す３つのステップよりなる。
【００５９】
まず、通話相手からの音声情報又は／及び映像情報である相手通話情報を受信するための処理を行う（相手通話情報受信ステップ　ステップＳ０４０１）。
【００６０】
次に、ステップＳ０４０１で受信した相手通話情報と、蓄積されている合成用情報とを所定の態様で合成して合成情報とする。（情報合成ステップ　ステップＳ０４０２）。
【００６１】
最後に、ステップＳ０４０２で合成された合成情報を出力するための処理を行う（出力ステップ　ステップＳ０４０３）。
【００６２】
以上の処理は、計算機に実行させるためのプログラムで実行することができ、また、このプログラムを計算機によって読み取り可能な記録媒体に記録することができる。（本明細書の全体を通して同様である。）
【００６３】
＜実施形態２：概要＞
【００６４】
実施形態２について説明する。本実施形態は、ボタンの押下等による合成命令を取得して、それに基づいた合成情報を出力するテレビ電話装置である。
【００６５】
図５は、本実施形態の概念の一例を示すものである。図の左側は通話相手で、右側はその受信者（自己）のテレビ電話のモニタであるとする。図５（ａ）では、通話相手がテレビ電話装置のボタンを押すことで、受信者（自己）のテレビ電話のモニタ上に、発信者の映像にふきだしが付加される場面を示したものである。また、図５（ｂ）では、同じく通話相手がテレビ電話装置のボタンを押すと、受信者のテレビ電話のモニタに映る発信者の映像全体に特殊効果が行われる場面を示している。特殊効果としては、映像全体が縮小する、湾曲するなど種々の効果が含まれるとしてもよい。
【００６６】
ここで例示したものは、通話相手によるテレビ電話装置の操作で、受信者（自己）のテレビ電話のモニタ上に合成情報が表示される場面であるが、自分のテレビ電話装置の操作によって、自分のテレビ電話のモニタ上に合成情報が表示される場合もある。
【００６７】
＜実施形態２：構成＞
【００６８】
実施形態２は、合成命令により蓄積された合成用情報を利用するテレビ電話装置である。本実施形態での機能ブロックの一例を図６に示した。
【００６９】
図６に示す本実施形態の「テレビ電話装置」（０６００）は、「相手通話情報受信部」（０６０１）と、「合成用情報蓄積部」（０６０２）と、「情報合成部」（０６０３）と、「出力部」（０６０４）と、さらに、「合成命令取得部」（０６０５）からなる。
【００７０】
「合成命令取得部」（０６０５）は、合成命令を取得するための処理を行う。
【００７１】
「合成命令」とは、相手通話情報受信部で受信した相手通話情報と、合成用情報蓄積部で蓄積されている合成用情報との合成の態様を決定するための命令である。具体的には、合成命令はテレビ電話装置のボタン、キーボード、タッチパネルなどの入力装置からの入力であるとして、外部から取得する場合が想定される。自分のテレビ電話装置に出力するために、自らが行った入力処理が合成命令として取得されるとしてもよいし、通話相手から送られる合成命令を取得するとしてもよい。その他、内部的に生成された合成命令を取得するとしてもよい。これについては、実施形態３で述べる。
【００７２】
「情報合成部」（０６０３）は、合成命令取得部で取得された合成命令に基づいて相手通話情報受信部で受信した相手通話情報と、合成用情報蓄積部で蓄積されている合成用情報とを所定の態様で合成して合成情報とする。
【００７３】
具体的に、合成命令に基づいた合成の処理を考える。なんらかの入力処理が行われると、その入力情報が合成命令として情報合成部に渡される。例えば、青ボタンを押下する場合には、図３で示すように、デフォルトキーとして青ボタンと対応付けられているのはアイテム３である。ボタンの押下に伴い、合成命令に基づく合成用情報として、ふきだしのアニメーションが選択される。その後、所定の態様として、例えば、相手通話情報（映像情報）に重ならないように、吹き出しが隅に配置される等する。加えて背景も合成用情報として利用する場合には、合成用情報の優先順位が最も低いため、最背面に配置されるとしてもよい。
【００７４】
その他各部の処理については、実施形態１と同様である。
【００７５】
＜実施形態２：処理の流れ＞
【００７６】
図７は、実施形態２での処理の流れを示したものである。本実施形態におけるテレビ電話通話方法は、以下に示す４つのステップよりなる。
【００７７】
ステップＳ０７０１において、通話相手からの音声情報又は／及び映像情報である相手通話情報を受信するための処理を行う（相手通話情報受信ステップ）。
【００７８】
ステップＳ０７０２において、ステップＳ０７０１で受信した相手通話情報と、蓄積されている合成用情報との合成の態様を決定するための命令である合成命令を取得するための処理を行う（合成命令取得ステップ）。
【００７９】
ステップＳ０７０３において、ステップＳ０７０２において取得された合成命令に基づいてステップＳ０７０１で受信した相手通話情報と、蓄積されている合成用情報とを所定の態様で合成して合成情報とする（情報合成ステップ）
【００８０】
ステップＳ０７０４において、ステップＳ０７０３で合成された合成情報を出力するための処理を行う（出力ステップ）。
【００８１】
＜実施形態１、２：効果＞
【００８２】
テレビ電話装置を利用して通話をする際に、あらかじめ蓄積されている背景や効果音などを用いたり、利用者の入力処理に伴い自由にふきだしや効果音を行いたりすることで、単調になりがちだったテレビ電話の通話中の背景に変化を持たせることができ、利用者が退屈しないようにする効果がある。
＜＜実施形態３＞＞
【００８３】
＜実施形態３：概要＞
【００８４】
実施形態３について説明する。本実施形態は、合成命令を生成するテレビ電話装置である。
【００８５】
＜実施形態３：構成＞
【００８６】
実施形態３は、生成した合成命令により蓄積された合成用情報を利用するテレビ電話装置である。本実施形態での機能ブロックの一例を図８に示した。
【００８７】
図８に示す本実施形態の「テレビ電話装置」（０８００）は、「合成用情報蓄積部」（０８０１）と、「合成命令取得部」（０８０２）と、さらに、「合成命令生成部」（０８０３）と、「送信部」（０８０４）からなる。
【００８８】
「合成命令生成部」（０８０３）は、前記合成用情報蓄積部で蓄積されている合成用情報と、相手通話情報又は／及び自通話情報との合成の態様を決定するための命令である合成命令を生成する。生成される合成命令は、蓄積されている合成用情報を任意に選択して合成するような命令でもよいし、通話ごとに特定の合成用情報を利用するような命令でもよい。
【００８９】
「自通話情報」とは、通話相手に送信する音声情報又は／及び映像情報である。自通話情報は、自分のテレビ電話装置に装備されたマイクやカメラから入力された音声情報又は／及び映像情報である。ここでの合成命令は、合成用情報と、相手通話情報又は／及び自通話情報との合成の態様を決定する。例えば、通話相手によって合成すべき合成用情報を変える命令などが該当する。合成命令は、自分自身の映像情報である自通話情報を通話相手に見せたい映像に、自分でコントロールできるように送信される。
【００９０】
通話相手によって合成すべき合成用情報を変える命令の一例は、具体的には、通話相手が仕事関係の知り合いの場合には、自分の映像の上半身部分にスーツとネクタイを着用した上半身部分の映像である合成用情報を合成することを命令する命令である。このとき、通話相手からは、自分があたかもスーツとネクタイを着用して通話しているように見える。逆に、通話相手が、友達の場合には、普段着の合成用情報を合成することを命令する合成命令を生成するとしてもよい。また、通話相手が、親戚の場合には、自分の隣に家族がいるように家族の写真を配置した合成用情報を合成することを命令する合成命令を生成するとしてもよい。生成された合成命令は、合成命令取得部（０８０２）に渡される。
【００９１】
「送信部」（０８０４）は、前記合成命令を送信する。
【００９２】
通話開始から一定時間経過ごとに背景が更新されるような命令の場合には、他のテレビ電話装置などに送信することで、通話するテレビ電話間で表示させる映像を同一にすることができる。具体的には、発信者のテレビ電話装置が、通話時間を一定間隔ごとに通知する表示がでる設定の場合には、相手のテレビ電話装置のモニタにも同様の表示が出力される。
【００９３】
通話相手によって合成すべき合成用情報を変える命令の場合には、自分が見せたいと希望するような画像を合成する命令を相手に送信することができる。
【００９４】
その他各部の処理については、実施形態２と同様である。
【００９５】
＜実施形態３：具体例＞
【００９６】
図３７に本実施形態のより具体的な機能ブロックの一例を示した。図３７に示す本実施形態の「テレビ電話装置Ａ」（３７００）は、「合成用情報蓄積部」（３７０１）と、「合成命令取得部」（３７０２）と、「合成命令生成部」（３７０３）と、「送信部」（３７０４）と、さらに、「相手通話情報受信部」（３７０５）と、「自通話情報取得部」（３７０６）と、「自通話情報送信部」（３７０７）と、「情報合成部」（３７０８）からなる。また、「テレビ電話装置Ｂ」（３７１０）も同様に、「合成用情報蓄積部」（３７１１）と、「合成命令取得部」（３７１２）と、さらに、「合成命令生成部」（３７１３）と、「送信部」（３７１４）と、「相手通話情報受信部」（３７１５）と、「自通話情報取得部」（３７１６）と、「自通話情報送信部」（３７１７）と、「情報合成部」（３７１８）からなる。
【００９７】
テレビ電話装置Ａ、Ｂは、相互に通話を行い、相手方から送信された相手通話情報（送信元にとっては「自通話情報」）に基づいて合成情報を生成する。
【００９８】
それぞれ実施形態３のテレビ電話装置をさらに具体的に表したものである。
【００９９】
情報合成部（３７０８）では、合成命令に基づいて、合成用情報と、相手通話情報又は／及び自通話情報との合成を行う。ここで、合成用情報は、合成用情報蓄積部（３７０１）に蓄積されている。また、相手通話情報は、相手通話情報受信部（３７０５）にてテレビ電話装置Ｂから受信したものである。一方、自通話情報は、自通話情報取得部（３７０６）にて、カメラやマイク等を用いて取得したものである。合成命令は、合成命令生成部（３７０３）にて生成される。
【０１００】
自通話情報送信部（３７０７）では、自通話情報取得部（３７０６）にて取得された自通話情報をテレビ電話装置Ｂへ送信する。自通話情報はテレビ電話装置Ａに装備されたカメラなどにより取得された情報である。送信された自通話情報が、テレビ電話装置Ｂの相手通話情報受信部（３７１５）にて受信されると、相手通話情報となる。テレビ電話装置Ｂの自通話情報送信部（３７１７）から送信された自通話情報が、テレビ電話装置Ａの相手通話情報受信部（３７０５）にて受信される場合も同様である。
【０１０１】
例えば、相手通話情報として、相手の顔の映像が相手から送信されてきた場合に、その相手の顔の映像と、自通話情報である自分の顔の映像とをお互いに向き合って配置し、合成命令によって発言者側の顔の映像を拡大し、逆に聞いている人の顔の映像を縮小して合成する、などの例を本実施形態の具体例としてあげることができる。このとき、合成命令は、発言者側の顔の映像を拡大し、逆に聞いている人の顔の映像を縮小するという合成の態様などを決定するための命令である。さらに、生成した合成情報は、出力機能があれば、相手のテレビ電話装置に対して出力することで利用される。
【０１０２】
＜実施形態３：処理の流れ＞
【０１０３】
図９は、実施形態３での処理の流れを示したものである。本実施形態におけるテレビ電話通話方法は、以下に示すステップよりなる。
【０１０４】
ステップＳ０９０１において、合成の態様を決定するための命令である合成命令を生成する（合成命令生成ステップ）。
【０１０５】
ステップＳ０９０２において、ステップＳ０９０１で生成した合成命令を送信するために取得する（合成命令取得ステップ）。
【０１０６】
ステップＳ０９０３において、合成命令を送信する（合成命令送信ステップ）。
【０１０７】
＜実施形態３：効果＞
【０１０８】
テレビ電話装置が合成命令を内部的に生成することで、利用者自身が通話相手に見せたい映像を生成するような命令を送信することができる。また、合成用情報を一定時間経過ごとに更新し、単調になりがちだったテレビ電話の通話中の背景に恒常的に変化を持たせ、受信者を退屈させないようにする効果をさらに高める。
＜＜実施形態４＞＞
【０１０９】
＜実施形態４：概要＞
【０１１０】
実施形態４について説明する。本実施形態は、合成用情報を取得して合成用情報蓄積部に蓄積するところに特徴を有する実施形態１から３のいずれか一に記載のテレビ電話装置である。
【０１１１】
＜実施形態４：構成＞
【０１１２】
実施形態４は、合成用情報取得部を有するテレビ電話装置である。本実施形態の機能ブロックの一例を図１０、１１に示した。
【０１１３】
図１０は、実施形態１を基礎とするテレビ電話装置を示したものであり、図１１は、実施形態２を基礎とするテレビ電話装置を示したものである。ここでは、一例として図１０を用いて実施形態１を基礎とするテレビ電話装置について説明する。本実施形態の「テレビ電話装置」（１０００）は、「相手通話情報受信部」（１００１）と、「合成用情報蓄積部」（１００２）と、「情報合成部」（１００３）と、「出力部」（１００４）と、さらに、「合成用情報取得部」（１００５）からなる。
【０１１４】
「合成用情報取得部」（１００５）は、合成用情報を取得して合成用情報蓄積部に蓄積する。外部からの合成用情報を取得し、合成用情報蓄積部に渡す。外部は、別のテレビ電話装置などが該当する。それ以外でも、ＣＤ−ＲＯＭやフレキシブルディスク等の可搬性メディアから取得する場合もある。
【０１１５】
実施形態２、３を基礎とするテレビ電話装置においては、合成用情報を取得することで、通話相手からの合成命令に対処することができる。合成命令は、通話相手自身が自己の見せたい映像を自分でコントロールすることを目的として送信される。したがって、合成命令に応じた（通話相手の希望する）合成用情報を蓄積していれば、通話相手の意図した映像を見ることができる。
【０１１６】
その他各部の処理については、実施形態１から３と同様である。
【０１１７】
＜実施形態４：処理の流れ＞
【０１１８】
図１２は、実施形態４での処理の流れを示したものである。本実施形態におけるテレビ電話通話方法は、以下に示すのステップよりなる。
【０１１９】
ステップＳ１２０１において、相手通話情報を受信するための処理を行う（相手通話情報受信ステップ）。
【０１２０】
ステップＳ１２０２において、合成用情報を取得して蓄積する（合成用情報取得ステップ）。
【０１２１】
ステップＳ１２０３において、ステップＳ１２０１で受信した相手通話情報と、蓄積されている合成用情報とを所定の態様で合成して合成情報とする（情報合成ステップ）。ここで、合成命令を取得し、それに基づいて合成を行うとしてもよい。
【０１２２】
ステップＳ１２０４において、ステップＳ１２０３で合成された合成情報を出力するための処理を行う（出力ステップ）。
【０１２３】
＜実施形態４：効果＞
【０１２４】
受信者に対して、通話相手が希望する合成用情報を取得させることで、通話相手は自分の希望する映像を見せることができる。
＜＜実施形態５＞＞
【０１２５】
＜実施形態５：概要＞
【０１２６】
実施形態５について説明する。本実施形態は、合成用情報サービス装置から送信される合成用情報を取得することに特徴を有する実施形態４に記載のテレビ電話装置である。
【０１２７】
＜実施形態５：構成＞
【０１２８】
実施形態５は、合成用情報サービス装置から送信される合成用情報を取得する合成用情報取得部を有するテレビ電話装置である。本実施形態での機能ブロックの一例はすでに図１０に示した。
【０１２９】
図１０は、一例として実施形態１を基礎とするテレビ電話装置を示したものである。本実施形態の「テレビ電話装置」（１０００）は、「相手通話情報受信部」（１００１）と、「合成用情報蓄積部」（１００２）と、「情報合成部」（１００３）と、「出力部」（１００４）と、さらに、「合成用情報取得部」（１００５）からなる。
【０１３０】
「合成用情報取得部」（１００５）は、合成用情報を取得して合成用情報蓄積部に蓄積する。外部から送信される合成用情報を取得し、合成用情報蓄積部に渡す。本実施形態において、前記合成用情報は、合成用情報を複数のテレビ電話装置に送信して利用させるための合成用情報サービス装置から送信されるものである。
【０１３１】
その他各部の処理については、実施形態４と同様である。
【０１３２】
＜実施形態５：効果＞
【０１３３】
センタ等の合成用情報サービス装置から合成用情報を取得することで、最新の合成用情報に更新することが可能になる。また、合成用情報サービス装置から合成用情報を配信すること自体をビジネスの一形態とすることもできる。
＜＜実施形態６＞＞
【０１３４】
＜実施形態６：概要＞
【０１３５】
実施形態６について説明する。本実施形態は、合成命令を通話相手に出力することに特徴を有する実施形態１から３のいずれか一に記載のテレビ電話装置である。
【０１３６】
＜実施形態６：構成＞
【０１３７】
実施形態６は、合成命令を通話相手に出力する合成命令出力部を有するテレビ電話装置である。本実施形態での機能ブロックの一例を図１３、１４に示した。
【０１３８】
図１３は、実施形態１を基礎とするテレビ電話装置を示したものであり、図１４は、実施形態２を基礎とするテレビ電話装置を示したものである。ここでは、一例として図１３を用いて実施形態１を基礎とするテレビ電話装置について説明する。本実施形態の「テレビ電話装置」（１３００）は、「相手通話情報受信部」（１３０１）と、「合成用情報蓄積部」（１３０２）と、「情報合成部」（１３０３）と、「出力部」（１３０４）と、さらに、「合成命令出力部」（１３０５）からなる。
【０１３９】
「合成命令出力部」（１３０５）は、合成命令を通話相手に出力するための処理を行う。合成命令として例えば発信者のボタン操作などに基づく合成命令が出力され、通話相手のテレビ電話装置のモニタにふきだしの表示等がでる。
【０１４０】
図１５は、実施形態６でのテレビ電話装置間の処理の流れを模式的に示したものである。発信者は、ボタン押下し（▲１▼）、それによりふきだしと効果音を合成するための合成命令が出される（▲２▼）。押下されたボタンから関連付けされているアイテムのＩＤなどが、受信者（相手）のテレビ電話装置に伝えられる。受信者のテレビ電話装置では、合成命令に含まれるアイテムＩＤやパッケージＩＤなどから指定の合成用情報を確認し、出力の命令が出される（▲３▼）。蓄積されている合成用情報は、復号化処理と合成処理を経て再生が行われる（▲４▼）。再生は、画面やスピーカーを介して、表示、再生等される（▲５▼）。
【０１４１】
その他各部の処理については、実施形態１から３と同様である。
【０１４２】
＜実施形態６：効果＞
【０１４３】
発信者は、ボタン操作などで任意のタイミングでふきだしや効果音を通話相手のモニタに表示できるため、通話中特に強調したい部分や、注意を喚起したい場面で用いることで、受信者に通話の内容をより効果的に伝えることができる。
＜＜実施形態７＞＞
【０１４４】
＜実施形態７：概要＞
【０１４５】
実施形態７について説明する。本実施形態は、合成命令に基づいて合成情報が合成できるか判断し、合成不可を知らせることに特徴を有する実施形態２に記載のテレビ電話装置である。
【０１４６】
＜実施形態７：構成＞
【０１４７】
実施形態７は、合成命令に基づいて合成情報が合成できるか判断し、その結果として合成不可の旨を出力する合成不可情報出力部を有するテレビ電話装置である。本実施形態での機能ブロックの一例は図１６に示す。
【０１４８】
図１６は、実施形態２に示すテレビ電話装置を基礎とするものである。本実施形態の「テレビ電話装置」（１６００）は、「相手通話情報受信部」（１６０１）と、「合成用情報蓄積部」（１６０２）と、「情報合成部」（１６０３）と、「出力部」（１６０４）と、「合成命令取得部」（１６０５）と、さらに、「合成可否判断部」（１６０６）と、「合成不可情報出力部」（１６０７）とからなる。
【０１４９】
「合成可否判断部」（１６０６）は、合成命令取得部で取得した合成命令に基づいて所定の態様の合成情報を合成できるか判断するための処理を行う。合成命令により指定された合成用情報が、合成用情報蓄積部（１６０２）に蓄積されているか、識別ＩＤを用いる等して判断する場合などが該当する。他には例えば、効果音の合成用情報を相手通話情報と合成して出力する際に、そのタイミングに問題がないかどうか判断するとしてもよい。通話の音声が途絶えたときに効果音の出力可となり、通話の音声が続行している間は効果音の出力不可となる識別子等によって判断する場合などが該当する。
【０１５０】
「合成不可情報出力部」（１６０７）は、合成可否判断部での判断結果が合成不可である場合に、その旨を出力する。出力は、発信者のテレビ電話装置へ合成不可である旨が伝えられるとしてもよい。加えて、受信者のテレビ電話装置でエラー表示等が出るとしてもよい。
【０１５１】
図１７は、実施形態７でのテレビ電話装置間の処理の流れを模式的に示したものである。発信者は、ボタン押下し（▲１▼）、それによりふきだしと効果音を合成するための合成命令が出される（▲２▼）。受信者のテレビ電話装置では、出力の命令が出される（▲３▼）。このとき、アイテムＩＤやパッケージＩＤなどによって指定された合成用情報が、蓄積済みか、あるいは、蓄積していないかの応答がなされる（▲４▼）。本実施形態では、蓄積されていない場合として、受信者のテレビ電話装置から発信者のテレビ電話装置へ、その旨が伝えられる（▲５▼）。
【０１５２】
その他各部の処理については、実施形態２と同様である。
【０１５３】
＜実施形態７：処理の流れ＞
【０１５４】
図１８は、実施形態７での処理の流れを示したものである。本実施形態におけるテレビ電話通話方法は、以下に示すステップよりなる。
【０１５５】
ステップＳ１８０１において、通話相手からの音声情報又は／及び映像情報である相手通話情報を受信するための処理を行う（相手通話情報受信ステップ）。
【０１５６】
ステップＳ１８０２において、ステップＳ１８０１で受信した相手通話情報と、蓄積されている合成用情報との合成の態様を決定するための命令である合成命令を取得するための処理を行う（合成命令取得ステップ）。
【０１５７】
ステップＳ１８０３において、ステップＳ１８０２において取得した合成命令に基づいて合成情報を合成できるか判断するための処理を行う（合成可否判断ステップ）。
【０１５８】
ステップＳ１８０４において、ステップＳ１８０３においての判断結果が合成可である場合に、ステップＳ１８０２において取得された合成命令に基づいてステップＳ１８０１で受信した相手通話情報と、蓄積されている合成用情報とを所定の態様で合成して合成情報とする（情報合成ステップ）
【０１５９】
ステップＳ１８０５において、ステップＳ１８０４で合成された合成情報を出力するための処理を行う（出力ステップ）。
【０１６０】
ステップＳ１８０６において、ステップＳ１８０３においての判断結果が合成不可である場合に、その旨を出力する（合成不可情報出力ステップ）。
【０１６１】
＜実施形態７：効果＞
【０１６２】
発信者によるボタン操作などの入力処理に対して、対応するふきだしや効果音の出力の可否を判断し、不可の場合にはその旨が通知されるため、発信者は希望する表示が行えないことを認識でき、それ以外のアイテムを利用するなど、必要な措置をとることができるという効果がある。
＜＜実施形態８＞＞
【０１６３】
＜実施形態８：概要＞
【０１６４】
実施形態８について説明する。本実施形態は、通話相手のテレビ電話装置にて合成用情報が不足していることを理由として合成不可の場合にネットワーク上のサイトに、前記不足している合成用情報を取得するためのアクセスをすることに特徴を有する実施形態２に記載のテレビ電話装置である。
【０１６５】
＜実施形態８：構成＞
【０１６６】
実施形態８は、不足している合成用情報を取得するためのアクセスをするテレビ電話装置である。本実施形態での機能ブロックの一例を図３６に示した。
【０１６７】
図３６は、実施形態２に示すテレビ電話装置を基礎とするものである。本実施形態の「テレビ電話装置」（３６００）は、「相手通話情報受信部」（３６０１）と、「合成用情報蓄積部」（３６０２）と、「情報合成部」（３６０３）と、「出力部」（３６０４）と、「合成命令取得部」（３６０５）と、さらに、「合成可否判断部」（３６０６）と、「不足合成用情報取得部」（３６０７）とからなる。
【０１６８】
「合成可否判断部」（３６０６）は、合成命令取得部（３６０５）で取得した合成命令に基づいて所定の態様の合成情報を合成できるか判断するための処理を行う。詳細は実施形態７と同様である。
【０１６９】
「不足合成用情報取得部」（３６０７）は、合成可否判断部での判断結果が、合成用情報が不足していることを理由として合成不可である場合に、ネットワーク上のサイトに、前記不足している合成用情報を取得するためのアクセスをする。ネットワークサイト上を特定する方法としては、予め定められたネットワーク上のサイトを各テレビ電話装置が記憶している方法と、合成用情報の利用を通知してきた通信者のテレビ電話装置が合成不可情報を受けたときに、その合成用情報を取得したサイトを指定する方法がある。
【０１７０】
「合成用情報の不足」とは、所定の合成用情報が合成用情報蓄積部（３６０２）に一部分、あるいは、全部が蓄積されていないことことをいう。この場合、そのままにしておくと受信者のテレビ電話装置には、指定した合成用情報の表示がなされないことになる。したがって、受信者は、必要な合成用情報を取得するために、予め定められたネットワーク上のサイトにアクセスをする。
【０１７１】
ここで、不足している合成用情報を取得することができるサイトは、一ヶ所の場合もあるし、数種類ある場合もある。数種類あるサイトから、適当なサイトを選択する方法の一例としては、合成用情報と、それを取得できるサイトとの対応関係が、あらかじめテーブルで表されており、そのテーブルに基づいて、サイトを決定する方法がある。具体的には、富士山の背景と、富士山の背景を取得できるサイトに関する情報が対になって格納されていて、その対応関係がテーブルとして表されている。今、受信者のテレビ電話装置で、富士山の背景が必要な場合に、そのテーブルに基づいて、富士山の背景と対応付けられた富士山の背景を取得できるサイトの情報である合成用情報サービス装置のＵＲＬ（例えば、ｈｔｔｐ：／／ｗｗｗ．ｔｖｐｈｏｎｅ．ＸＸＸ）やアドレス（例えば、ＩＰアドレス：６１．１２５．２５５．ＸＸＸ）を得ることができる。受信者のテレビ電話装置は、その合成用情報サービス装置のアドレスから富士山の背景をダウンロードできることが分かれば、受信者はそのアドレスへアクセスする等できる。
【０１７２】
その他各部の処理については、実施形態２と同様である。
【０１７３】
＜実施形態８：効果＞
【０１７４】
受信者のテレビ電話装置は、不足している合成用情報を取得するために、予め定められたネットワーク上のサイトに、自らアクセスすることができる。受信者は、必要に応じてダウンロードを行えばよいため、受信者のテレビ電話装置の蓄積能力を超える合成用情報はダウンロードしないなど、主体的にダウンロードを行うことができる。
＜＜実施形態９＞＞
【０１７５】
＜実施形態９：概要＞
【０１７６】
実施形態９について説明する。本実施形態は、通話相手のテレビ電話装置にて合成不可の場合に必要な合成用情報を通話相手に出力することに特徴を有する実施形態１に記載のテレビ電話装置である。
【０１７７】
＜実施形態９：構成＞
【０１７８】
実施形態９は、通話相手のテレビ電話装置にて合成不可の場合に必要な合成用情報を通話相手に出力する合成用情報出力部を有するテレビ電話装置である。本実施形態での機能ブロックの一例は図１９に示す。
【０１７９】
図１９は、実施形態１に示すテレビ電話装置を基礎とするものである。本実施形態の「テレビ電話装置」（１９００）は、「相手通話情報受信部」（１９０１）と、「合成用情報蓄積部」（１９０２）と、「情報合成部」（１９０３）と、「出力部」（１９０４）と、さらに、「判断結果取得部」（１９０５）と、「合成用情報出力部」（１９０６）とからなる。
【０１８０】
「判断結果取得部」（１９０５）は、通話相手である実施形態７記載のテレビ電話装置の合成不可情報出力部から出力された判断結果を取得する。
【０１８１】
「合成用情報出力部」（１９０６）は、判断結果取得部で取得した判断結果が、合成用情報が不足していることを理由として合成不可である場合に、その通話相手に対して合成用情報を出力する。
【０１８２】
判断結果が合成不可ということは、発信者が合成命令により指定した合成用情報が、受信者のテレビ電話装置に蓄積されていないことが想定される。この場合、そのままにしておくと受信者のテレビ電話装置には、指定した合成用情報の表示がなされないことになる。したがって、発信者は、必要な合成用情報を受信者に対して出力して、合成用情報を共有することができる。出力には、受信者に対して必要な合成用情報を送信する場合の他に、ダウンロードするように要求する場合や、受信者自身で生成するように促す場合などを含むこともある。
【０１８３】
図２０は、実施形態９でのテレビ電話装置間の処理の流れを模式的に示したものである。受信者のテレビ電話装置から発信者のテレビ電話装置へ合成不可が伝えられる（▲１▼）。それを受けて発信者は、必要な合成用情報を合成用情報蓄積部から取得するために要求を行う（▲２▼）。合成用情報が蓄積されている場合には、合成用情報を受信者が接続等して取得できるようにする（▲３▼）。このとき、その合成用情報がダウンロード可能であり、ダウンロードするように受信者に要求する（▲４▼）。受信者は、指定の合成用情報をダウンロード後蓄積する（▲５▼）。受信者は、蓄積が完了したことを発信者に伝える（▲６▼）。これにより、受信者は、以降の発信者の入力処理に対応することが可能となる。
【０１８４】
その他各部の処理については、実施形態１と同様である。
【０１８５】
＜実施形態９：処理の流れ＞
【０１８６】
図２１は、実施形態９での処理の流れを示したものである。通話相手のテレビ電話装置から合成不可の判断結果を取得した以降の本実施形態におけるテレビ電話通話方法は、以下に示すステップよりなる。
【０１８７】
ステップＳ２１０１において、通話相手のテレビ電話装置から合成不可の判断結果を取得する（判断結果取得ステップ）。
【０１８８】
ステップＳ２１０２において、蓄積されている合成用情報から、指定の合成用情報を取得する（合成用情報取得ステップ）。
【０１８９】
ステップＳ２１０３において、通話相手に対して取得した合成用情報を出力する（合成用情報出力ステップ）。
【０１９０】
＜実施形態９：効果＞
【０１９１】
発信者による合成命令の出力に対して、指定のふきだしや効果音の出力が不可の場合の通知を受けて、例えば必要な合成用情報の送信等が行われるため、発信者は受信者に希望する表示を行うことができる。したがって、発信者は、受信者が指定の合成用情報を蓄積しているかどうかを気にすることなく、テレビ電話装置を利用することができる。
＜＜実施形態１０＞＞
【０１９２】
＜実施形態１０：概要＞
【０１９３】
実施形態１０について説明する。本実施形態は、通話相手のテレビ電話装置にて合成不可の場合に、合成命令に応じて合成情報の一部を合成するために必要な合成用情報を通話相手に出力することに特徴を有する実施形態１に記載のテレビ電話装置である。
【０１９４】
＜実施形態１０：構成＞
【０１９５】
実施形態１０は、通話相手のテレビ電話装置にて合成不可の場合に、合成情報の一部を合成するために必要な合成用情報を通話相手に出力する合成用情報出力部を有するテレビ電話装置である。本実施形態での機能ブロックの一例はすでに図１９に示したとおりである。
【０１９６】
図１９に示す本実施形態の「テレビ電話装置」（１９００）は、「相手通話情報受信部」（１９０１）と、「合成用情報蓄積部」（１９０２）と、「情報合成部」（１９０３）と、「出力部」（１９０４）と、さらに、「判断結果取得部」（１９０５）と、「合成用情報出力部」（１９０６）とからなる。
【０１９７】
「判断結果取得部」（１９０５）は、通話相手である実施形態７記載のテレビ電話装置の合成不可情報出力部から出力された判断結果を取得する。
【０１９８】
「合成用情報出力部」（１９０６）は、判断結果取得部で取得した判断結果が合成不可である場合に、その通話相手に対して前記合成命令に基づいて合成すべき合成情報の一部を合成するために必要な合成用情報を出力する。
【０１９９】
ここで、合成情報は合成命令に基づいて合成され、単一、あるいは、複数の合成用情報を用いて構成される。合成情報の一部を合成するために必要な合成用情報は、合成命令に基づいて合成される複数の合成用情報のうち、一部の合成用情報をいう。合成情報の一部を合成するために必要な合成用情報は、合成命令に基づいて合成される合成情報が図３に示した合成用情報（ここでは、合成用情報は、パッケージと同義である。）を用いて構成される場合、その１０のアイテムのうち、例えば、アイテムＩＤ１００２などの一部分のアイテムが該当する。通話相手のテレビ電話装置に、例えば、すでにアイテムＩＤ１００２から１０１０までのアイテムが蓄積されているとすると、合成用情報全てを出力するのではなく、アイテムＩＤ１００１の「桜の背景」だけを出力すれば足りる。したがって、パッケージＩＤ１０００のパッケージの一部であるアイテムＩＤ１００１のアイテムが、合成情報の一部を合成するために必要な合成用情報として出力される。
【０２００】
その他各部の処理については、実施形態１と同様である。
【０２０１】
＜実施形態１０：効果＞
【０２０２】
合成情報の一部を合成するために必要な合成用情報を出力することができることによって、受信者のテレビ電話装置の処理能力に見合う処理をさせることができる。また、発信者、受信者間の通信処理の負担を軽くすることができる。
＜＜実施形態１１＞＞
【０２０３】
＜実施形態１１：概要＞
【０２０４】
実施形態１１について説明する。本実施形態は、相手通話情報と、自通話情報と、合成用情報とを所定の態様で合成して合成情報とするテレビ電話装置である。
【０２０５】
＜実施形態１１：構成＞
【０２０６】
本実施形態での機能ブロックの一例を図３９に示す。
【０２０７】
図３９で示す本実施形態の「テレビ電話装置」（３９００）は、「相手通話情報受信部」（３９０１）と、「自通話情報取得部」（３９０２）と、「合成用情報蓄積部」（３９０３）と、「情報合成部」（３９０４）とからなる。
【０２０８】
「相手通話情報受信部」（３９０１）は、相手通話情報を受信するための処理を行う。
【０２０９】
「自通話情報取得部」（３９０２）は、自通話情報を取得する。
【０２１０】
「合成用情報蓄積部」（３９０３）は、合成用情報を蓄積するための処理を行う。本実施形態での合成用情報は、前記相手通話情報受信部で受信した相手通話情報及び、前記自通話情報取得部で取得した自通話情報と合成すべき音声情報又は／及び、映像情報である。
【０２１１】
「情報合成部」（３９０４）は、前記相手通話情報受信部で受信した相手通話情報と、自通話情報取得部で取得した自通話情報と、前記合成用情報蓄積部に蓄積された合成用情報とを所定の態様で合成して合成情報とする。
【０２１２】
例えば、相手通話情報として、相手の顔の映像が相手から送信されてきた場合に、その相手の顔の映像と、自通話情報である自分の顔の映像と、さらに、背景である合成用情報を合成することができる。例えば、打ち上げ花火を背景に、通話相手と自分とが並んで花火見物をしながら、会話を楽しんでいるような映像を合成でき、会話を盛り上げることができる。また自通話情報と、相手通話情報の合成は、自分と通話相手の双方のテレビ電話装置で行うことができる。
【０２１３】
さらに、相手通話情報を合成せずに、自通話情報と合成用情報の合成のみを行うとしてもよい。この場合、自分の顔の映像と、打ち上げ花火の映像が合成される。さまざまなバリエーションによって、変化のある通話を行うことができる。
【０２１４】
＜実施形態１１：効果＞
【０２１５】
相手通話情報、自通話情報、合成用情報を利用して、変化のある通話を行うことができる。
＜＜実施形態１２＞＞
【０２１６】
＜実施形態１２：概要＞
【０２１７】
実施形態１２について説明する。本実施形態は、実施形態１１で合成した合成情報を通話相手のテレビ電話装置に送信することに特徴を有する実施形態１１に記載のテレビ電話装置である。
【０２１８】
＜実施形態１２：構成＞
【０２１９】
実施形態１２は、実施形態１１で合成した合成情報を通話相手のテレビ電話装置に送信することに特徴を有する実施形態１１に記載のテレビ電話装置である。本実施形態での機能ブロックの一例を図４０に示した。
【０２２０】
図４０で示す本実施形態の「テレビ電話装置」（４０００）は、「相手通話情報受信部」（４００１）と、「自通話情報取得部」（４００２）と、「合成用情報蓄積部」（４００３）と、「情報合成部」（４００４）と、さらに、「合成情報送信部」（４００５）とからなる。
【０２２１】
「合成情報送信部」（４００５）は、前記情報合成部（４００４）で合成した合成情報を通話相手のテレビ電話装置へ送信する。合成結果を相手に送信することで、通話相手のテレビ電話装置に、合成の機能が備わっているかどうかを気にかけることなく通話をすることができる。
【０２２２】
また、相手通話情報を合成せずに、自通話情報と合成用情報のみによって合成された合成用情報を送信する場合もある。例えば、ボタン押下などのタイミングで、自分の顔の映像と、打ち上げ花火の映像が合成され、その合成結果の映像が通話相手に送信される。これにより、合成の機能が備わっていないテレビ電話装置との間でも、さまざまなバリエーションによる変化のある通話を行うことができる。
【０２２３】
＜実施形態１２：効果＞
【０２２４】
通話相手のテレビ電話装置に、合成の機能が備わっているかどうかを気にかけることなく通話をすることができる。また、これにより、通話相手と合成情報の共有をすることができる。
＜＜実施形態１３＞＞
【０２２５】
＜実施形態１３：概要＞
【０２２６】
実施形態１３について説明する。本実施形態は、通話相手のテレビ電話装置にて合成不可の場合、もしくは、送信側の都合により合成情報を生成して、通話相手に出力することに特徴を有する実施形態１に記載のテレビ電話装置である。
【０２２７】
＜実施形態１３：構成＞
【０２２８】
実施形態１３は、合成不可の場合に必要な合成情報を通話相手に出力する合成情報出力部を有するテレビ電話装置である。本実施形態での機能ブロックの一例は図２２に示す。
【０２２９】
図２２は、実施形態１に示すテレビ電話装置を基礎とするものである。本実施形態の「テレビ電話装置」（２２００）は、「相手通話情報受信部」（２２０１）と、「合成用情報蓄積部」（２２０２）と、「情報合成部」（２２０３）と、「出力部」（２２０４）と、さらに、「判断結果取得部」（２２０５）と、「合成情報生成部」（２２０６）と、「合成情報出力部」（２２０７）とからなる。
【０２３０】
「判断結果取得部」（２２０５）は、通話相手である実施形態７記載の電話装置の合成不可情報出力部から出力された判断結果を取得する。
【０２３１】
「合成情報生成部」（２２０６）は、判断結果取得部で取得した判断結果が合成不可である場合に、合成情報を生成する。
【０２３２】
合成情報は、特に本実施形態では、相手通話情報と、又は／及び自通話情報とを利用して生成される情報をいう。例えば、自分の顔の映像にふきだしを重ねて合成して生成した情報などが該当する。自通話情報は、自分のテレビ電話装置に装備されたカメラや、マイク等から入力されたものであり、相手通話情報は相手のテレビ電話装置により取得された映像などの情報が、自分のテレビ電話装置に送信されたものである。
【０２３３】
判断結果が合成不可ということは、通話相手のテレビ電話装置に合成情報を生成する能力がないことが想定される。この場合、そのままにしておくと受信者のテレビ電話装置には、合成情報の表示がなされないことになる。したがって、発信者は、自己のテレビ電話装置で合成情報を生成する。
【０２３４】
ここでは、通話相手が合成情報の生成能力を有するか否かに関わらず、送信側の話者の意思に応じて、例えば通話前に利用者のボタン押下などにより、合成可否判断部に対して合成不可と判断させることにより、上で説明したように自通話情報と合成用情報を合成して、相手のテレビ電話装置に強制的に合成情報を送りつけ、使用させる場合もある。これにより、発信者の都合により、発信者のテレビ電話装置で合成を行うこともできる。
【０２３５】
「合成情報出力部」（２２０７）は、前記合成情報を前記通話相手である実施形態７記載のテレビ電話装置にて利用可能とするために出力する。生成された合成情報が通話相手のテレビ電話装置へ送られると、通話相手のテレビ電話装置では、合成情報を受信し、受信した合成情報そのままが出力されることになる。
【０２３６】
その他各部の処理については、実施形態１と同様である。
【０２３７】
＜実施形態１３：具体例＞
【０２３８】
図３８に本実施形態の具体的機能ブロックの一例を表した図を示した。図３８に示す本実施形態の「テレビ電話装置Ａ」（３８００）は、「相手通話情報受信部」（３８０１）と、「合成用情報蓄積部」（３８０２）と、「情報合成部」（３８０３）と、「出力部」（３８０４）と、「判断結果取得部」（３８０５）と、「合成情報生成部」（３８０６）と、「合成情報出力部」（３８０７）と、さらに、「自通話情報取得部」（３８０８）と、「自通話情報送信部」（３８０９）からなる。また、「テレビ電話装置Ｂ」（３８１０）は、「相手通話情報受信部」（３８１１）と、「合成用情報蓄積部」（３８１２）と、「情報合成部」（３８１３）と、「出力部」（３８１４）と、「合成命令取得部」（３８１５）と、「合成可否判断部」（３８１６）と、「合成不可情報出力部」（３８１７）と、「自通話情報取得部」（３８１８）と、「自通話情報送信部」（３８１９）からなる。
【０２３９】
テレビ電話装置Ａ、Ｂは、相互に通話を行い、テレビ電話装置Ａは実施形態１３のテレビ電話装置を、テレビ電話装置Ｂは実施形態７のテレビ電話装置をさらに具体的に表したものである。
【０２４０】
合成情報生成部（３８０６）では、合成用情報と、相手通話情報又は／及び自通話情報との合成を行う。ここで、合成用情報は、合成用情報蓄積部（３８０２）に蓄積されている。また、相手通話情報は、相手通話情報受信部（３８０１）にてテレビ電話装置Ｂから受信したものである。一方、自通話情報は、自通話情報取得部（３８０８）にて、カメラやマイク等を用いて取得したものである。
【０２４１】
また、自通話情報送信部（３８０９）では、自通話情報取得部（３８０８）にて取得された自通話情報をテレビ電話装置Ｂへ送信する。ここで、自通話情報はテレビ電話装置Ａに装備されたカメラなどにより取得した情報であるが、送信された自通話情報が、テレビ電話装置Ｂの相手通話情報受信部（３８１１）にて受信される場合には、相手通話情報となる。テレビ電話装置Ｂの自通話情報送信部（３８１９）から送信された自通話情報が、テレビ電話装置Ａの相手通話情報受信部（３８０１）にて受信される場合も同様である。
【０２４２】
例えば、相手通話情報として、相手の顔の映像が相手から送信されてきた場合に、その相手の顔の映像と、自通話情報である自分の顔の映像とを漫画風にアレンジして、お互いに向き合って話をしている様子を合成情報として合成し、相手のテレビ電話装置に対して送信する、などの具体例を本実施形態の具体例として挙げることができる。
【０２４３】
このような態様の合成情報は、通話している双方の情報を合成することで初めて合成可能となるので、いずれか一方のテレビ電話装置が合成のプロセスを受け持つ必要がある。従って、本実施形態のように、自通話情報と、相手通話情報とを合成する構成が必要となる。なお、相手通話情報を使わず、ボタン押下などのタイミングで、自通話情報と合成用情報とを合成し、その合成結果を通話相手に送信する場合もある。
【０２４４】
また、通話しているテレビ電話の一方のテレビ電話が合成情報の合成機能を有しない場合が想定される。例えば、高級機種のテレビ電話には情報の合成機能があるが、廉価版のテレビ電話にはそのような機能がない場合である。
【０２４５】
そのような場合には、高級機種の側のテレビ電話が廉価版のテレビ電話に対して合成情報を提供することで、廉価版のテレビ電話でも合成情報を利用したテレビ電話の機能を楽しむことが可能となる。
【０２４６】
例えば、そのような高級機種が持つべき構成として、自通話情報を利用した合成情報の合成と、合成された合成情報の出力機能（合成情報出力部）があれば役に立つ。
【０２４７】
＜実施形態１３：処理の流れ＞
【０２４８】
図２３は、実施形態１３での処理の流れを示したものである。通話相手のテレビ電話装置から合成不可の判断結果を取得した以降の本実施形態におけるテレビ電話通話方法は、以下に示すステップよりなる。
【０２４９】
ステップＳ２３０１において、蓄積されている合成用情報から、指定の合成用情報を取得する（合成用情報取得ステップ）。
【０２５０】
ステップＳ２３０２において、取得した合成用情報と、自通話情報とを合成して合成情報とする（合成情報生成ステップ）。
【０２５１】
ステップＳ２３０３において、通話相手に対して生成した合成情報を出力する（合成情報出力ステップ）。
【０２５２】
＜実施形態１３：効果＞
【０２５３】
発信者から合成情報を生成して、通話相手に送信することで、通話相手のテレビ電話装置に、合成情報を生成する能力がない場合であっても、発信者は受信者に希望のふきだしや効果音の表示を行うことができる。発信者は、受信者が合成情報を生成できるかどうかを気にすることなく、テレビ電話装置を利用することができる。
＜＜実施形態１４＞＞
【０２５４】
＜実施形態１４：概要＞
【０２５５】
実施形態１４について説明する。本実施形態は、通話相手から取得した合成用情報を通話終了後削除することに特徴を有する実施形態７に記載のテレビ電話装置である。
【０２５６】
＜実施形態１４：構成＞
【０２５７】
実施形態１４は、通話相手から取得した合成用情報を通話終了後削除する合成用情報削除部を有するテレビ電話装置である。本実施形態での機能ブロックの一例は図２４に示す。
【０２５８】
図２４は、実施形態７に示すテレビ電話装置を基礎とするものである。本実施形態の「テレビ電話装置」（２４００）は、「相手通話情報受信部」（２４０１）と、「合成用情報蓄積部」（２４０２）と、「情報合成部」（２４０３）と、「出力部」（２４０４）と、「合成命令取得部」（２４０５）と、「合成可否判断部」（２４０６）と、「合成不可情報出力部」（２４０７）と、さらに、「合成用情報取得部」（２４０８）と、「合成用情報保持部」（２４０９）と、「合成用情報削除部」（２４１０）とからなる。
【０２５９】
「合成用情報取得部」（２４０８）は、通話相手である実施形態９記載のテレビ電話装置から出力された合成用情報を取得する。
【０２６０】
「合成用情報保持部」（２４０９）は、合成用情報取得部で取得した合成用情報を情報合成部にて利用するために保持する。取得した合成用情報は、必要に応じて情報合成部（２４０３）へ渡される。情報合成部における合成用情報の利用が完了すると、合成用情報保持部においては、合成用情報は合成用情報削除部で削除されるまで保持される。
【０２６１】
「合成用情報削除部」（２４１０）は、合成用情報保持部で保持されている合成用情報を削除して利用不可とするための処理を行う。通話終了などのタイミングで、不要となった合成用情報を削除する。
【０２６２】
その他各部の処理については、実施形態７と同様である。
【０２６３】
＜実施形態１４：処理の流れ＞
【０２６４】
図２５は、実施形態１４での処理の流れを示したものである。通話相手のテレビ電話装置から送られた合成用情報を削除する方法は、以下に示すステップよりなる。
【０２６５】
ステップＳ２５０１において、通話相手のテレビ電話装置から出力された合成用情報を取得する（合成用情報取得ステップ）。
【０２６６】
ステップＳ２５０２において、取得した合成用情報を合成に利用する。
【０２６７】
ステップＳ２５０３において、通話終了等のタイミングで、合成用情報を削除して利用不可とするための処理を行う（合成用情報削除ステップ）。
【０２６８】
＜実施形態１４：効果＞
【０２６９】
通話相手から送られた合成用情報を削除することで、テレビ電話装置のデータの蓄積容量を減らし、資源を有効に活用できる。また、通話終了後には受信者側は合成用情報の利用ができなくなってしまうが、合成用情報に対して課金を行うシステムの場合には、課金を行っていない者の無断利用を排除する効果がある。＜＜実施形態１５＞＞
【０２７０】
＜実施形態１５：概要＞
【０２７１】
実施形態１５について説明する。本実施形態は、識別した通話相手に対して合成用情報を利用可能とすることに特徴を有する実施形態１４に記載のテレビ電話装置である。
【０２７２】
＜実施形態１５：構成＞
【０２７３】
実施形態１５は、通話相手の識別情報に基づいて、合成用情報を利用可能とする合成用情報利用許可部を有するテレビ電話装置である。本実施形態での機能ブロックの一例は図２６に示す。
【０２７４】
図２６は、実施形態１４に示すテレビ電話装置を基礎とするものである。本実施形態の「テレビ電話装置」（２６００）は、「相手通話情報受信部」（２６０１）と、「合成用情報蓄積部」（２６０２）と、「情報合成部」（２６０３）と、「出力部」（２６０４）と、「合成命令取得部」（２６０５）と、「合成可否判断部」（２６０６）と、「合成不可情報出力部」（２６０７）と、「合成用情報取得部」（２６０８）と、「合成用情報保持部」（２６０９）と、「合成用情報削除部」（２６１０）と、さらに、「通話相手識別情報取得部」（２６１１）と、「合成用情報利用相手情報蓄積部」（２６１２）と、「合成用情報利用許可部」（２６１３）とからなる。
【０２７５】
「通話相手識別情報取得部」（２６１１）は、通話相手識別情報を取得する。
【０２７６】
「通話相手識別情報」とは、通話相手を識別するための情報である。例えば、電話番号などが該当する。テレビ電話装置で通話を行う際に通話相手識別情報が送信される。このとき相手通話情報に通話相手識別情報が付加されて送信されるとしてもよい。
【０２７７】
「合成用情報利用相手情報蓄積部」（２６１２）は、合成用情報付与相手識別情報をその合成用情報と関連付けて蓄積する。
【０２７８】
「合成用情報付与相手識別情報」とは、前記合成用情報取得部で取得した合成用情報を出力した通話相手を識別するための通話相手識別情報である。合成用情報の送信元である通話相手の電話番号などが該当する。
【０２７９】
合成用情報利用相手情報蓄積部では、合成用情報と、その送信元である通話相手の合成用情報付与相手識別情報と関連付けて蓄積する。一の合成用情報付与相手識別情報に対して複数の合成用情報が関連付けられる場合もある。このとき、合成用情報が識別情報などによって管理されていて、合成用情報付与相手識別情報と、合成用情報の識別情報が関連付けられているとしてもよい。
【０２８０】
「合成用情報利用許可部」（２６１３）は、通話相手識別情報取得部で取得された通話相手識別情報に基づいて、合成用情報を利用可能とする。
【０２８１】
これによって、通話相手識別情報により識別される通話相手とは、関連付けられた合成用情報のみを利用して通話することができる。
【０２８２】
その他各部の処理については、実施形態１４と同様である。
【０２８３】
＜実施形態１５：処理の流れ＞
【０２８４】
図２７は、実施形態１５での処理の流れを示したものである。通話相手のテレビ電話装置から取得した合成用情報を利用する方法は、以下に示すステップよりなる。
【０２８５】
ステップＳ２７０１において、通話相手識別情報を取得する（通話相手識別情報取得ステップ）。
【０２８６】
ステップＳ２７０２において、通話相手識別情報取得ステップで取得された通話相手識別情報と合成用情報付与相手識別情報が合致するか判断する（判断ステップ）。
【０２８７】
ステップＳ２７０３において、判断ステップでの判断が合致するとの判断結果の場合、その合成用情報を利用可能とする（合成用情報利用許可ステップ）。
【０２８８】
＜実施形態１５：効果＞
【０２８９】
識別情報により認証できた通話相手にのみ合成用情報を利用することができるようにすることで、合成用情報に対して課金を行うシステムの場合には、課金を行っていない者の無断利用を排除する効果がある。通話相手のみが料金を支払っている場合には、自分のテレビ電話装置に蓄積されている合成用情報であっても、無断使用できず、その通話相手との通話のときにのみ利用可能となるという利点がある。
＜＜実施形態１６＞＞
【０２９０】
＜実施形態１６：概要＞
【０２９１】
実施形態１６について説明する。本実施形態は、通話相手から取得した合成情報を通話終了後削除することに特徴を有する実施形態７に記載のテレビ電話装置である。
【０２９２】
＜実施形態１６：構成＞
【０２９３】
実施形態１６は、通話相手から取得した合成情報を通話終了後削除する合成情報削除部を有するテレビ電話装置である。本実施形態での機能ブロックの一例は図２８に示す。
【０２９４】
図２８は、実施形態７に示すテレビ電話装置を基礎とするものである。本実施形態の「テレビ電話装置」（２８００）は、「相手通話情報受信部」（２８０１）と、「合成用情報蓄積部」（２８０２）と、「情報合成部」（２８０３）と、「出力部」（２８０４）と、「合成命令取得部」（２８０５）と、「合成可否判断部」（２８０６）と、「合成不可情報出力部」（２８０７）と、さらに、「合成情報取得部」（２８０８）と、「合成情報保持部」（２８０９）と、「合成情報削除部」（２８１０）とからなる。
【０２９５】
「合成情報取得部」（２８０８）は、通話相手である実施形態１３記載のテレビ電話装置から出力された合成情報を取得する。
【０２９６】
「合成情報保持部」（２８０９）は、合成情報取得部で取得した合成情報を利用するために保持する。取得した合成情報は、必要に応じて情報合成部（２８０３）へ渡される。情報合成部における合成情報の利用が完了すると、合成情報保持部においては、合成情報は合成情報削除部で削除されるまで保持される。
【０２９７】
「合成情報削除部」（２８１０）は、合成情報保持部で保持されている合成情報を削除して利用不可とするための処理を行う。通話終了などのタイミングで、不要となった合成情報を削除する。
【０２９８】
その他各部の処理については、実施形態７と同様である。
【０２９９】
＜実施形態１６：処理の流れ＞
【０３００】
図２９は、実施形態１６での処理の流れを示したものである。通話相手のテレビ電話装置から送られた合成用情報を削除する方法は、以下に示すステップよりなる。
【０３０１】
ステップＳ２９０１において、通話相手のテレビ電話装置から出力された合成情報を取得する（合成情報取得ステップ）。
【０３０２】
ステップＳ２９０２において、取得した合成情報を合成に利用する。
【０３０３】
ステップＳ２９０３において、通話終了等のタイミングで、合成情報を削除して利用不可とするための処理を行う（合成情報削除ステップ）。
【０３０４】
＜実施形態１６：効果＞
【０３０５】
通話相手から送られた合成情報を削除することで、テレビ電話装置の蓄積容量を減らし、資源を有効に活用できる。また、自分の顔の映像などが通話相手のテレビ電話装置に送信された場合でも、その後削除されるのであれば、プライバシーは保たれるので、利用者が安心して利用できる。
【０３０６】
さらに、通話終了後には受信者側は合成情報の利用ができなくなってしまうが、合成情報に対して課金を行うシステムの場合には、課金を行っていない者の無断利用を排除する効果がある。
＜＜実施形態１７＞＞
【０３０７】
＜実施形態１７：概要＞
【０３０８】
実施形態１７について説明する。本実施形態は、識別した通話相手に対して合成情報を利用可能とすることに特徴を有する実施形態１６に記載のテレビ電話装置である。
【０３０９】
＜実施形態１７：構成＞
【０３１０】
実施形態１７は、通話相手の識別情報に基づいて、合成情報を利用可能とする合成情報利用許可部を有するテレビ電話装置である。本実施形態での機能ブロックの一例は図３０に示す。
【０３１１】
図３０は、実施形態１６に示すテレビ電話装置を基礎とするものである。本実施形態の「テレビ電話装置」（３０００）は、「相手通話情報受信部」（３００１）と、「合成用情報蓄積部」（３００２）と、「情報合成部」（３００３）と、「出力部」（３００４）と、「合成命令取得部」（３００５）と、「合成可否判断部」（３００６）と、「合成不可情報出力部」（３００７）と、「合成情報取得部」（３００８）と、「合成情報保持部」（３００９）と、「合成情報削除部」（３０１０）と、さらに、「通話相手識別情報取得部」（３０１１）と、「合成情報利用相手情報蓄積部」（３０１２）と、「合成情報利用許可部」（３０１３）とからなる。
【０３１２】
「通話相手識別情報取得部」（３０１１）は、通話相手識別情報を取得する。
【０３１３】
「合成情報利用相手情報蓄積部」（３０１２）は、合成情報付与相手識別情報をその合成情報と関連付けて蓄積する。
【０３１４】
「合成情報付与相手識別情報」とは、前記合成情報取得部で取得した合成情報を出力した通話相手を識別するための通話相手識別情報である。合成情報付与相手識別情報は、例えば、合成情報の送信元である通話相手の電話番号などが該当する。
【０３１５】
合成情報利用相手情報蓄積部では、その送信元である通話相手の合成情報付与相手識別情報と合成情報とを関連付けて蓄積する。このとき、合成情報が識別情報などによって管理されていて、合成情報付与相手識別情報と、合成情報の識別情報が関連付けられているとしてもよい。
【０３１６】
「合成情報利用許可部」（３０１３）は、通話相手識別情報取得部で取得された通話相手識別情報に基づいて、合成情報を利用可能とする。
【０３１７】
通話相手識別情報により識別される通話相手とは、関連付けられた合成情報のみを利用して通話することができる。
【０３１８】
その他各部の処理については、実施形態１６と同様である。
【０３１９】
＜実施形態１７：処理の流れ＞
【０３２０】
図３１は、実施形態１７での処理の流れを示したものである。通話相手のテレビ電話装置から取得した合成用情報を利用する方法は、以下に示すステップよりなる。
【０３２１】
ステップＳ３１０１において、通話相手識別情報を取得する（通話相手識別情報取得ステップ）。
【０３２２】
ステップＳ３１０２において、通話相手識別情報取得ステップで取得された通話相手識別情報と合成情報付与相手識別情報が合致するか判断する（判断ステップ）。
【０３２３】
ステップＳ３１０３において、判断ステップでの判断が合致するとの判断結果の場合、その合成情報を利用可能とする（合成情報利用許可ステップ）。
【０３２４】
＜実施形態１７：効果＞
【０３２５】
識別情報により認証できた通話相手にのみ合成情報を利用することができるようにすることで、合成情報に対して課金を行うシステムの場合には、課金を行っていない者の無断利用を排除する効果がある。
＜＜実施形態１８＞＞
【０３２６】
＜実施形態１８：概要＞
【０３２７】
実施形態１８について説明する。本実施形態は、自通話情報及び蓄積される合成用情報とに基づいて合成情報を生成することに特徴を有する実施形態１３に記載のテレビ電話装置である。
【０３２８】
＜実施形態１８：構成＞
【０３２９】
実施形態１８は、自通話情報及び蓄積される合成用情報とに基づいて合成情報を生成する合成情報生成部を有するテレビ電話装置である。本実施形態での機能ブロックの一例はすでに図２２に示したとおりである。
【０３３０】
図２２に示す本実施形態の「テレビ電話装置」（２２００）は、「相手通話情報受信部」（２２０１）と、「合成用情報蓄積部」（２２０２）と、「情報合成部」（２２０３）と、「出力部」（２２０４）と、「判断結果取得部」（２２０５）と、「合成情報生成部」（２２０６）と、「合成情報出力部」（２２０７）とからなる。
【０３３１】
「合成情報生成部」（２２０６）は、自通話情報及び前記合成用情報蓄積部により蓄積される合成用情報とに基づいて合成情報を生成する。
【０３３２】
「自通話情報」とは、通話相手に送信する音声情報又は／及び映像情報である。
【０３３３】
具体的には、合成用情報蓄積部（２２０２）から指定の合成用情報を取得し、その合成用情報と、自通話情報とを所定の態様で合成して合成情報を生成する。生成した合成情報は、合成情報出力部（２２０７）へ渡され、通話相手のテレビ電話装置へ出力される。
【０３３４】
その他各部の処理については、実施形態１３と同様である。
＜＜実施形態１９＞＞
【０３３５】
＜実施形態１９：概要＞
【０３３６】
実施形態１９について説明する。本実施形態は、自通話情報に基づいて合成命令を生成することに特徴を有する実施形態３に記載のテレビ電話装置である。
【０３３７】
＜実施形態１９：構成＞
【０３３８】
実施形態１９は、自通話情報に基づいて合成命令を生成する合成命令生成部を有するテレビ電話装置である。本実施形態での機能ブロックの一例はすでに図８に示したとおりである。
【０３３９】
図８に示す本実施形態の「テレビ電話装置」（０８００）は、「合成用情報蓄積部」（０８０１）と、「合成命令取得部」（０８０２）と、「合成命令生成部」（０８０３）と、「送信部」（０８０４）からなる。
【０３４０】
「合成命令生成部」（０８０３）は、相手通話情報又は、通話相手に送信する音声情報又は／及び映像情報である自通話情報に基づいて合成命令を生成する。
【０３４１】
合成命令の生成は、通話者が操作できるボタン等が押されたときに開始するとしてもよい。合成命令の生成は、ボタンの押下に加え、音声認識の機能を用いて特別な音、言葉（フレーズ）を発することや、動画認識の機能を用いて特別な動作や合図を行うことにより開始してもよい。具体的には、会話中に発生された「さくら」という言葉に応じて、背景が桜並木に変える等する場合が該当する。
【０３４２】
その他各部の処理については、実施形態３と同様である。
＜＜実施形態２０＞＞
【０３４３】
＜実施形態２０：概要＞
【０３４４】
実施形態２０について説明する。本実施形態は、相手通話情報の音声情報をテキストに変換したテキスト情報等を合成用情報を生成することに特徴を有する実施形態１に記載のテレビ電話装置である。
【０３４５】
＜実施形態２０：構成＞
【０３４６】
実施形態２０は、相手通話情報の音声情報をテキストに変換したテキスト情報等を合成用情報を生成する合成情報生成部を有するテレビ電話装置である。本実施形態での機能ブロックの一例は図３４に示す。
【０３４７】
図３４に示す本実施形態の「テレビ電話装置」（３４００）は、「相手通話情報受信部」（３４０１）と、「合成用情報蓄積部」（３４０２）と、「情報合成部」（３４０３）と、「出力部」（３４０４）と、さらに、「合成情報生成部」（３４０５）からなる。
【０３４８】
「合成情報生成部」（３４０５）は、相手通話情報の音声情報をテキストに変換したテキスト情報、相手通話情報の音声情報を異なる言語へ翻訳した音声の情報、前記テキスト情報の表示形態の変更のための情報のいずれか一又は二以上の組合せを含む合成情報を生成する。
【０３４９】
相手通話情報の音声情報をテキストに変換したテキスト情報は、音声情報を変換して、テレビ電話装置のモニタなどに表示されることで出力される。
【０３５０】
相手通話情報の音声情報を異なる言語へ翻訳した音声の情報は、音声情報を変換して、副音声として、相手通話情報又は自通話情報の音声情報に重ねて、あるいは、それのみの単独で出力される。異なる言語は、外国語でもよいし、日本語の方言が含まれる場合もある。
【０３５１】
前記テキスト情報の表示形態の変更のための情報は、フォント形式の変更、フォントサイズの変更、文字の色の変更等がなされてテレビ電話装置のモニタなどに表示されることで出力される。具体的には、大きな声で話すと文字が大きくなる、あるいは、高い声で話すと硬いイメージのフォント形式に変わる場合などが該当する。それ以外にも音声認識により、予め特定のキーワードが話者から発せられた場合にのみ、そのキーワードのみが変形する場合などがある。
【０３５２】
さらに、相手通話情報だけでなく、自通話情報に対して同様に、音声情報をテキストに変換したテキスト情報、音声情報を異なる言語へ翻訳した音声の情報、前記テキスト情報の表示形態の変更のための情報のいずれか一又は二以上の組合せを含む合成情報を生成するとしてもよい。
【０３５３】
またここでは、合成情報を生成する形態について説明したが、合成用情報を生成して送るとしてもよい。
【０３５４】
その他各部の処理については、実施形態１と同様である。
＜＜実施形態２１＞＞
【０３５５】
＜実施形態２１：概要＞
【０３５６】
実施形態２１について説明する。本実施形態は、合成用情報は、通話相手の背景を表示するための情報であることに特徴を有する実施形態１に記載のテレビ電話装置である。
【０３５７】
＜実施形態２１：構成＞
【０３５８】
実施形態２１は、背景を表示するための情報である合成用情報を蓄積する合成用情報蓄積部を有するテレビ電話装置である。本実施形態での機能ブロックの一例はすでに図２に示したとおりである。
【０３５９】
図２に示す本実施形態の「テレビ電話装置」（０２００）は、「相手通話情報受信部」（０２０１）と、「合成用情報蓄積部」（０２０２）と、「情報合成部」（０２０３）と、「出力部」（０２０４）とからなる。
【０３６０】
「合成用情報蓄積部」（０２０２）は、通話相手の背景を表示するための情報である合成用情報を蓄積する。背景として、複数の合成用情報を蓄積しておいて、利用者等の指示により、指定の背景を出力する。
＜＜実施形態２２＞＞
【０３６１】
＜実施形態２２：概要＞
【０３６２】
実施形態２２について説明する。本実施形態は、テレビ電話装置に合成用情報を送信して利用させるための処理を行う合成用情報サービス装置である。合成用情報サービス装置は、新しいコンテンツを配信するセンタの端末装置等が該当する。
【０３６３】
＜実施形態２２：構成＞
【０３６４】
実施形態２２は、テレビ電話装置に送信して利用させるための合成用情報送付部を有する合成用情報サービス装置である。本実施形態での機能ブロックの一例を図３２に示す。
【０３６５】
図３２に示す本実施形態の「合成用情報サービス装置」（３２００）は、「合成用情報受付部」（３２０１）と、「合成用情報送付部」（３２０２）とからなる。
【０３６６】
「合成用情報受付部」（３２０１）は、合成用情報を受け付ける。この受付けは、合成用情報の提供者から送信される場合の他、合成用情報サービス装置自身が生成するとしてもよい。また、受け付ける処理を行う際に、合成用情報として適当かどうかの一定の判断がなされる場合もある。判断が行われるのは、テレビ電話装置に送信して利用させるためである。
【０３６７】
「合成用情報送付部」（３２０２）は、合成用情報受付部で受け付けた合成用情報を、複数のテレビ電話装置に送信して利用させるための処理を行う。
【０３６８】
「利用させるための処理」には、合成用情報を送信する場合の他、ダウンロードさせる場合などが含まれるとしてもよい。また、ここでの複数のテレビ電話装置とは、実施形態５で示したテレビ電話装置などが該当する。
【０３６９】
また、合成用情報を利用させるために、合成用情報サービス装置の内部で合成情報の生成も行う場合もある。送り手側が、生成能力が充分でない装置（例えば、本サービスに対応していない古い機種のテレビ電話装置）の場合には、すでに合成が完了した合成情報を送信する方が、利用しやすいというメリットがある。このとき、送り手側からの依頼により、合成用情報サービス装置が合成情報生成の代行を行うとしてもよい。
【０３７０】
＜実施形態２２：処理の流れ＞
【０３７１】
図３３は、実施形態２２での処理の流れを示したものである。合成用情報サービス装置による合成用情報の送付方法は、以下に示すステップよりなる。
【０３７２】
ステップＳ３３０１において、合成用情報を受け付ける（合成用情報受付ステップ）。
【０３７３】
ステップＳ３３０２において、合成用情報受付ステップで受け付けた合成用情報を、複数のテレビ電話装置に送信して利用させるための処理を行う（合成用情報送付ステップ）。
【発明の効果】
テレビ電話装置を利用して通話をする際に、あらかじめ蓄積されている背景や効果音などを用いることにより、単調になりがちだったテレビ電話の通話中の背景に変化を持たせ、受信者を退屈させないようにする効果がある。
【０３７４】
また、発信者がなんらかの入力処理を行うことで、自由にふきだしや効果音を通話相手のテレビ電話装置に伝送し、発信者が通話中特に強調したい部分や、注意を喚起したい場面で用いることができるため、受信者に通話の内容をより効果的に伝えることができる。
【０３７５】
またこれらの背景、ふきだし、効果音などの情報は、識別情報により認証できた通話相手にのみ利用することができるようにし、合成用情報に対して課金を行うシステムの場合には、課金を行っていない者の無断利用を排除する効果がある。
【図面の簡単な説明】
【図１】実施形態１を説明するための概念図
【図２】実施形態１を説明するための機能ブロック図
【図３】合成用情報蓄積部に蓄積されている合成用情報の一例を示した図
【図４】実施形態１の処理の流れを説明する図
【図５】実施形態２を説明するための概念図
【図６】実施形態２を説明するための機能ブロック図
【図７】実施形態２の処理の流れを説明する図
【図８】実施形態３を説明するための機能ブロック図
【図９】実施形態３の処理の流れを説明する図
【図１０】実施形態４（実施形態１に対応）を説明するための機能ブロック図
【図１１】実施形態４（実施形態２に対応）を説明するための機能ブロック図
【図１２】実施形態４の処理の流れを説明する図
【図１３】実施形態６（実施形態１に対応）を説明するための機能ブロック図
【図１４】実施形態６（実施形態２に対応）を説明するための機能ブロック図
【図１５】実施形態６でのテレビ電話装置間の処理の流れを示した図
【図１６】実施形態７を説明するための機能ブロック図
【図１７】実施形態７でのテレビ電話装置間の処理の流れを示した図
【図１８】実施形態７の処理の流れを説明する図
【図１９】実施形態９を説明するための機能ブロック図
【図２０】実施形態９でのテレビ電話装置間の処理の流れを示した図
【図２１】実施形態９の処理の流れを説明する図
【図２２】実施形態１３を説明するための機能ブロック図
【図２３】実施形態１３の処理の流れを説明する図
【図２４】実施形態１４を説明するための機能ブロック図
【図２５】実施形態１４の処理の流れを説明する図
【図２６】実施形態１５を説明するための機能ブロック図
【図２７】実施形態１５の処理の流れを説明する図
【図２８】実施形態１６を説明するための機能ブロック図
【図２９】実施形態１６の処理の流れを説明する図
【図３０】実施形態１７を説明するための機能ブロック図
【図３１】実施形態１７の処理の流れを説明する図
【図３２】実施形態２２を説明するための機能ブロック図
【図３３】実施形態２２の処理の流れを説明する図
【図３４】実施形態２０を説明するための機能ブロック図
【図３５】実施形態１でのテレビ電話装置間の処理の流れを示した図
【図３６】実施形態８を説明するための機能ブロック図
【図３７】実施形態３を説明するための具体的機能ブロック図
【図３８】実施形態１５を説明するための機能ブロック図
【図３９】実施形態１１を説明するための機能ブロック図
【図４０】実施形態１２を説明するための機能ブロック図
【符号の説明】
０２００　　テレビ電話装置
０２０１　　相手通話情報受信部
０２０２　　合成用情報蓄積部
０２０３　　情報合成部
０２０４　　出力部
【図１】
2004072310.tif 000003
【図２】
2004072310.tif 000004
【図３】
2004072310.tif 000005
【図４】
2004072310.tif 000006
【図５】
2004072310.tif 000007
【図６】
2004072310.tif 000008
【図７】
2004072310.tif 000009
【図８】
2004072310.tif 000010
【図９】
2004072310.tif 000011
【図１０】
2004072310.tif 000012
【図１１】
2004072310.tif 000013
【図１２】
2004072310.tif 000014
【図１３】
2004072310.tif 000015
【図１４】
2004072310.tif 000016
【図１５】
2004072310.tif 000017
【図１６】
2004072310.tif 000018
【図１７】
2004072310.tif 000019
【図１８】
2004072310.tif 000020
【図１９】
2004072310.tif 000021
【図２０】
2004072310.tif 000022
【図２１】
2004072310.tif 000023
【図２２】
2004072310.tif 000024
【図２３】
2004072310.tif 000025
【図２４】
2004072310.tif 000026
【図２５】
2004072310.tif 000027
【図２６】
2004072310.tif 000028
【図２７】
2004072310.tif 000029
【図２８】
2004072310.tif 000030
【図２９】
2004072310.tif 000031
【図３０】
2004072310.tif 000032
【図３１】
2004072310.tif 000033
【図３２】
2004072310.tif 000034
【図３３】
2004072310.tif 000035
【図３４】
2004072310.tif 000036
【図３５】
2004072310.tif 000037
【図３６】
2004072310.tif 000038
【図３７】
2004072310.tif 000039
【図３８】
2004072310.tif 000040
【図３９】
2004072310.tif 000041
【図４０】
2004072310.tif 000042