(57)【要約】【課題】  広告の効果が期待されるＣＭ画像の配信を行い、合成された画像を見ながら双方向通信をリアルタイムに行うことが可能な双方向通信画像配信システムを提供する。【解決手段】  ＣＭコンテンツサーバ２は嗜好管理サーバ５からの嗜好情報と端末位置情報プレゼンスサーバ６からの端末位置情報／プレゼンス情報とを基に端末４−１，４−２に提供するＣＭ画像を選択して双方向通信画像合成装置１に送出する。双方向通信画像合成装置１は携帯端末４−１，４−２からの画像とＣＭコンテンツサーバ２からのＣＭ画像との画像合成におけるデコード処理、ミキシング処理、エンコード処理をマクロブロック単位で行い、移動通信網１０１，１０２及び３ＧＧＷ３−１，３−２を通して携帯端末４−１，４−２に配信する。【選択図】      図１
2007251741.tif 000002
【特許請求の範囲】
【請求項１】
複数の端末間で当該端末各々の画像フレームを伴った双方向通信を行う際に前記画像フレームの配信を行う双方向通信画像配信システムであって、
少なくとも端末利用者の位置情報を基に当該端末利用者の端末に配信するコマーシャル画像を選択するＣＭコンテンツサーバと、
前記双方向通信に伴う前記画像フレームと前記コマーシャル画像とをそれぞれマクロブロック単位でデコードする手段と、そのデコード結果に対してマクロブロック単位で重畳処理を行う手段と、この重畳結果をマクロブロック単位でエンコードして出力する手段とを含む双方向通信画像合成装置とを有することを特徴とする双方向通信画像配信システム。
【請求項２】
前記ＣＭコンテンツサーバは、前記位置情報と前記端末利用者の状態を示すプレゼンス情報とを基に当該端末利用者の端末に配信するコマーシャル画像を選択することを特徴とする請求項１記載の双方向通信画像配信システム。
【請求項３】
前記ＣＭコンテンツサーバは、前記位置情報と少なくとも前記端末利用者の加入者情報に基づいた嗜好情報とを基に当該端末利用者の端末に配信するコマーシャル画像を選択することを特徴とする請求項１または請求項２記載の双方向通信画像配信システム。
【請求項４】
前記重畳処理を行う手段は、前記画像フレーム及び前記コマーシャル画像の前記マクロブロック単位でのデコード結果の重畳を予め設定された領域に対してのみ行うことを特徴とする請求項１から請求項３のいずれか記載の双方向通信画像配信システム。
【請求項５】
前記端末は、少なくとも携帯端末及びセットトップボックスのいずれかを含むことを特徴とする請求項１から請求項４のいずれか記載の双方向通信画像配信システム。
【請求項６】
前記双方向通信画像合成装置は、少なくとも無線基地局、基地局制御装置のいずれかに接続することを特徴とする請求項１から請求項５のいずれか記載の双方向通信画像配信システム。
【請求項７】
前記ＣＭコンテンツサーバは、前記端末利用者の位置情報に基づいて当該端末利用者の端末に配信する災害情報の画像を選択することを特徴とする請求項１から請求項６のいずれか記載の双方向通信画像配信システム。
【請求項８】
前記ＣＭコンテンツサーバは、前記双方向通信を行う前記複数の端末各々に対応するコマーシャル画像及び災害情報の画像のいずれかを選択することを特徴とする請求項７記載の双方向通信画像配信システム。
【請求項９】
複数の端末間で当該端末各々の画像フレームを伴った双方向通信を行う際に前記画像フレームの配信を行うシステムにおいて前記複数の端末に少なくともコマーシャル画像を配信するＣＭコンテンツサーバであって、
少なくとも端末利用者の位置情報を基に当該端末利用者の端末に配信するコマーシャル画像を選択する手段と、選択したコマーシャル画像を前記画像フレームの合成をマクロブロック単位で行う双方向通信画像合成装置に出力する手段とを有することを特徴とするＣＭコンテンツサーバ。
【請求項１０】
前記位置情報と前記端末利用者の状態を示すプレゼンス情報とを基に当該端末利用者の端末に配信するコマーシャル画像を選択することを特徴とする請求項９記載のＣＭコンテンツサーバ。
【請求項１１】
前記位置情報と少なくとも前記端末利用者の加入者情報に基づいた嗜好情報とを基に当該端末利用者の端末に配信するコマーシャル画像を選択することを特徴とする請求項９または請求項１０記載のＣＭコンテンツサーバ。
【請求項１２】
前記端末は、少なくとも携帯端末及びセットトップボックスのいずれかを含むことを特徴とする請求項９から請求項１１のいずれか記載のＣＭコンテンツサーバ。
【請求項１３】
前記端末利用者の位置情報に基づいて当該端末利用者の端末に配信する災害情報の画像を選択することを特徴とする請求項９から請求項１２のいずれか記載のＣＭコンテンツサーバ。
【請求項１４】
前記双方向通信を行う前記複数の端末各々に対応するコマーシャル画像及び災害情報の画像のいずれかを選択することを特徴とする請求項１３記載のＣＭコンテンツサーバ。
【請求項１５】
複数の端末間で当該端末各々の画像フレームを伴った双方向通信を行う際に前記画像フレームの配信を行うシステムにおいて前記画像フレームの合成を行う双方向通信画像合成装置であって、
少なくとも端末利用者の位置情報を基に当該端末利用者の端末に配信するコマーシャル画像を選択するＣＭコンテンツサーバで選択された前記コマーシャル画像と前記双方向通信に伴う前記画像フレームとをそれぞれマクロブロック単位でデコードする手段と、そのデコード結果に対してマクロブロック単位で重畳処理を行う手段と、この重畳結果をマクロブロック単位でエンコードして出力する手段とを有することを特徴とする双方向通信画像合成装置。
【請求項１６】
前記ＣＭコンテンツサーバが、前記位置情報と前記端末利用者の状態を示すプレゼンス情報とを基に当該端末利用者の端末に配信するコマーシャル画像を選択することを特徴とする請求項１５記載の双方向通信画像合成装置。
【請求項１７】
前記ＣＭコンテンツサーバが、前記位置情報と少なくとも前記端末利用者の加入者情報に基づいた嗜好情報とを基に当該端末利用者の端末に配信するコマーシャル画像を選択することを特徴とする請求項１５または請求項１６記載の双方向通信画像合成装置。
【請求項１８】
前記重畳処理を行う手段は、前記画像フレーム及び前記コマーシャル画像の前記マクロブロック単位でのデコード結果の重畳を予め設定された領域に対してのみ行うことを特徴とする請求項１５から請求項１７のいずれか記載の双方向通信画像合成装置。
【請求項１９】
前記端末が、少なくとも携帯端末及びセットトップボックスのいずれかを含むことを特徴とする請求項１５から請求項１８のいずれか記載の双方向通信画像合成装置。
【請求項２０】
少なくとも無線基地局、基地局制御装置のいずれかに接続されることを特徴とする請求項１５から請求項１９のいずれか記載の双方向通信画像合成装置。
【請求項２１】
複数の端末間で当該端末各々の画像フレームを伴った双方向通信を行うシステムに用いられる双方向通信画像合成方法であって、
ＣＭコンテンツサーバが、少なくとも端末利用者の位置情報を基に当該端末利用者の端末に配信するコマーシャル画像を選択する処理を実行し、
前記画像フレームの合成を行う双方向通信画像合成装置が、前記双方向通信に伴う前記画像フレームと前記コマーシャル画像とをそれぞれマクロブロック単位でデコードする処理と、そのデコード結果に対してマクロブロック単位で重畳処理を行う処理と、この重畳結果をマクロブロック単位でエンコードして出力する処理とを実行することを特徴とする双方向通信画像配信方法。
【請求項２２】
前記ＣＭコンテンツサーバが、前記位置情報と前記端末利用者の状態を示すプレゼンス情報とを基に当該端末利用者の端末に配信するコマーシャル画像を選択することを特徴とする請求項２１記載の双方向通信画像配信方法。
【請求項２３】
前記ＣＭコンテンツサーバが、前記位置情報と少なくとも前記端末利用者の加入者情報に基づいた嗜好情報とを基に当該端末利用者の端末に配信するコマーシャル画像を選択することを特徴とする請求項２１または請求項２２記載の双方向通信画像配信方法。
【請求項２４】
前記重畳処理を行う処理において、前記画像フレーム及び前記コマーシャル画像の前記マクロブロック単位でのデコード結果の重畳を予め設定された領域に対してのみ行うことを特徴とする請求項２１から請求項２３のいずれか記載の双方向通信画像配信方法。
【請求項２５】
前記端末が、少なくとも携帯端末及びセットトップボックスのいずれかを含むことを特徴とする請求項２１から請求項２４のいずれか記載の双方向通信画像配信方法。
【請求項２６】
前記双方向通信画像合成装置を、少なくとも無線基地局、基地局制御装置のいずれかに接続することを特徴とする請求項２１から請求項２５のいずれか記載の双方向通信画像配信方法。
【請求項２７】
前記ＣＭコンテンツサーバが、前記端末利用者の位置情報に基づいて当該端末利用者の端末に配信する災害情報の画像を選択することを特徴とする請求項２１から請求項２６のいずれか記載の双方向通信画像配信方法。
【請求項２８】
前記ＣＭコンテンツサーバが、前記双方向通信を行う前記複数の端末各々に対応するコマーシャル画像及び災害情報の画像のいずれかを選択することを特徴とする請求項２７記載の双方向通信画像配信方法。
【請求項２９】
複数の端末間で当該端末各々の画像フレームを伴った双方向通信を行う際に前記画像フレームの配信を行うシステムにおいて前記複数の端末に少なくともコマーシャル画像を配信するＣＭコンテンツサーバに用いる双方向通信画像配信方法のプログラムであって、
前記ＣＭコンテンツサーバの中央処理装置に、少なくとも端末利用者の位置情報を基に当該端末利用者の端末に配信するコマーシャル画像を選択する処理と、選択したコマーシャル画像を前記画像フレームの合成をマクロブロック単位で行う双方向通信画像合成装置に出力する処理とを実行させるためのプログラム。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は双方向通信画像配信システム、ＣＭコンテンツサーバ、双方向通信画像合成装置及びそれらに用いる双方向通信画像配信方法並びにそのプログラムに関し、特にＴＶ（テレビ）電話やＴＶ会議等の双方向通信における画像の配信方法に関する。
【背景技術】
【０００２】
近年、ＴＶ電話機能としては、固定電話機に限らず、携帯電話機等の携帯端末にも搭載されるようになってきている。また、家庭内のテレビ受像機には、セットトップボックスを接続することで、ＴＶ電話として使用することも可能となってきている。
【０００３】
さらに、ＰＣ（パーソナルコンピュータ）にＴＶ電話ソフトウェアを導入することで、ＴＶ会議やＴＶ電話も実現されている。このＴＶ電話では、ＰＣにＩＰ（Ｉｎｔｅｒｎｅｔ  Ｐｒｏｔｏｃｏｌ）電話ソフトウェアを導入することで実現されるＩＰ電話との提携も考えられている。上記のＴＶ電話では、１対１のＴＶ電話のみならず、１対ｎのＴＶ電話も実現可能である。
【０００４】
このＴＶ電話においては、ＣＭ（コマーシャル）をＴＶ電話に組込むことによって、ＴＶ電話の通話料金を割引く方法等も種々提案されている（例えば、特許文献１〜６参照）。
【０００５】
例えば、特許文献１，２に記載の方法では、ＴＶ電話システムの交換ネットワーク内に、広告映像信号を送信するための付加サービス提供手段あるいは情報配信装置を設け、１つの端末装置が他の端末装置へ発信した時に、２つの端末装置が接続されるまでの回線接続処理期間中及び通話状態となってからの一定時間間隔毎の一方または双方を用いて、付加サービス提供手段あるいは情報配信装置が広告用映像信号を発信側端末装置へ送信し、発信側端末装置の映像表示画面に広告映像を表示させることによって、通話料金を一部広告主の負担としている。
【０００６】
特許文献３に記載の方法では、受信されたユーザＩＤが予め登録された登録ユーザＩＤに一致した際に、広告画像またはテキストを表示するための広告情報を制御信号に多重化して送信するサーバを設け、電源投入後の待ち受け時に、広告受信契約者のユーザＩＤが多重化された制御信号をサーバに送信するとともに、ユーザＩＤを受信したサーバから送信されてくる広告情報を受信して記憶し、発呼時に記憶された広告情報を表示画面に所定時間表示した後、回線接続している。
【０００７】
特許文献４に記載の方法では、送信側と中継局と受信側とが通信手段によって接続されたＴＶ電話において、送信側で画像を撮像して中継局に通信手段を介して送信し、該送信された画像を、通信手段を介して受信側に送信して映像を得るとともに、送信側または中継局あるいは受信側の画面にＣＭ画像を合成し、該合成した画像をＴＶ電話の映像とすることによって、ＣＭ画像を提供するスポンサーからのＣＭ収入を電話料金に充当している。
【０００８】
特許文献５に記載の方法では、ＴＶ電話の背景を広告画像とし、カメラの撮像画像から抽出されて通信相手から送られてくる通信相手の本人画像のみを広告画像に合成して表示することで、通話料金を広告業者に負担させている。
【０００９】
特許文献６に記載の方法では、端末から受信した発信時のダイヤル信号に応じて相手端末を呼び出し、相手と接続できた場合に、ダイヤル信号と併せてＣＭ表示済み発信情報（ＣＭフラグ）を受取っているかを判定し、受取っている場合に通常の課金額から一定額を割り引いた額を発信者に課金している。
【００１０】
【特許文献１】特開平０９−２４７２７６号公報
【特許文献２】特開２００２−１６５００８号公報
【特許文献３】特開２０００−２２８７０４号公報
【特許文献４】特開２００１−３２６９１７号公報
【特許文献５】特開２００５−１１００８７号公報
【特許文献６】特開２００５−２２３５４０号公報
【発明の開示】
【発明が解決しようとする課題】
【００１１】
上述した従来のＴＶ電話では、ＣＭをＴＶ電話に組込むことによって、ＴＶ電話の通話料金を割引いているが、発信者や着信者がどこにいるかに関係なく、所定のＣＭ画像を端末側に送っており、ＣＭ画像による広告の効果が期待できないという問題がある。この点について、上記の特許文献１〜６では特に言及されていない。
【００１２】
そこで、本発明の目的は上記の問題点を解消し、広告の効果が期待されるＣＭ画像の配信を行うことができるとともに、合成された画像を見ながら双方向通信をリアルタイムに行うことができる双方向通信画像配信システム、ＣＭコンテンツサーバ、双方向通信画像合成装置及びそれらに用いる双方向通信画像配信方法並びにそのプログラムを提供することにある。
【課題を解決するための手段】
【００１３】
本発明による双方向通信画像配信システムは、複数の端末間で当該端末各々の画像フレームを伴った双方向通信を行う際に前記画像フレームの配信を行う双方向通信画像配信システムであって、
少なくとも端末利用者の位置情報を基に当該端末利用者の端末に配信するコマーシャル画像を選択するＣＭコンテンツサーバと、
前記双方向通信に伴う前記画像フレームと前記コマーシャル画像とをそれぞれマクロブロック単位でデコードする手段と、そのデコード結果に対してマクロブロック単位で重畳処理を行う手段と、この重畳結果をマクロブロック単位でエンコードして出力する手段とを含む双方向通信画像合成装置とを備えている。
【００１４】
本発明によるＣＭコンテンツサーバは、複数の端末間で当該端末各々の画像フレームを伴った双方向通信を行う際に前記画像フレームの配信を行うシステムにおいて前記複数の端末に少なくともコマーシャル画像を配信するＣＭコンテンツサーバであって、
少なくとも端末利用者の位置情報を基に当該端末利用者の端末に配信するコマーシャル画像を選択する手段と、選択したコマーシャル画像を前記画像フレームの合成をマクロブロック単位で行う双方向通信画像合成装置に出力する手段とを備えている。
【００１５】
本発明による双方向通信画像合成装置は、複数の端末間で当該端末各々の画像フレームを伴った双方向通信を行う際に前記画像フレームの配信を行うシステムにおいて前記画像フレームの合成を行う双方向通信画像合成装置であって、
少なくとも端末利用者の位置情報を基に当該端末利用者の端末に配信するコマーシャル画像を選択するＣＭコンテンツサーバで選択された前記コマーシャル画像と前記双方向通信に伴う前記画像フレームとをそれぞれマクロブロック単位でデコードする手段と、そのデコード結果に対してマクロブロック単位で重畳処理を行う手段と、この重畳結果をマクロブロック単位でエンコードして出力する手段とを備えている。
【００１６】
本発明による双方向通信画像配信方法は、複数の端末間で当該端末各々の画像フレームを伴った双方向通信を行うシステムに用いられる双方向通信画像合成方法であって、
ＣＭコンテンツサーバが、少なくとも端末利用者の位置情報を基に当該端末利用者の端末に配信するコマーシャル画像を選択する処理を実行し、
前記画像フレームの合成を行う双方向通信画像合成装置が、前記双方向通信に伴う前記画像フレームと前記コマーシャル画像とをそれぞれマクロブロック単位でデコードする処理と、そのデコード結果に対してマクロブロック単位で重畳処理を行う処理と、この重畳結果をマクロブロック単位でエンコードして出力する処理とを実行している。
【００１７】
本発明による双方向通信画像配信方法のプログラムは、複数の端末間で当該端末各々の画像フレームを伴った双方向通信を行う際に前記画像フレームの配信を行うシステムにおいて前記複数の端末に少なくともコマーシャル画像を配信するＣＭコンテンツサーバに用いる双方向通信画像配信方法のプログラムであって、
前記ＣＭコンテンツサーバの中央処理装置に、少なくとも端末利用者の位置情報を基に当該端末利用者の端末に配信するコマーシャル画像を選択する処理と、選択したコマーシャル画像を前記画像フレームの合成をマクロブロック単位で行う双方向通信画像合成装置に出力する処理とを実行させている。
【００１８】
すなわち、本発明の双方向通信画像配信システムは、端末利用者の位置情報／プレゼンス情報（通話者の状態を示す情報）や嗜好情報を基に選択されたＣＭ（コマーシャル）画像と双方向通信でやり取りされる画像とをそれぞれマクロブロック単位でデコードし、デコードした画像に対してマクロブロック単位で重畳処理（ミキシング）を行い、重畳した画像をマクロブロック単位でエンコードして出力している。
【００１９】
ここで、マクロブロックとはフレームを構成しかつ動画像の符号化の際の動き補償の単位である。したがって、本発明の双方向通信画像配信システムでは、このマクロブロック単位で画像合成のデコード処理、ミキシング処理、エンコード処理を行っているため、出力画像として出力されるまでの遅延を小さくすることが可能となり、テレビ電話等の双方向通信における音声と画像とのずれを小さくすることが可能になるとともに、配信されるＣＭ画像が端末利用者の位置情報／プレゼンス情報や嗜好情報に基づいているので、広告の効果が期待されるＣＭ画像（最適化された広告）の配信を行うことが可能となる。
【００２０】
上述した従来のテレビ電話における画像の合成方法では、フレーム単位で画像の重畳処理を行うために、処理負荷が大きくなるとともに、その処理を行う間、画像を蓄積しておくためのメモリも大容量が必要となる。そのため、この合成方法は、ＰＣ（パーソナルコンピュータ）ならば処理可能であり、この画像合成を行いながら双方向通信が可能である。
【００２１】
一方、携帯電話機等の携帯端末、既存のテレビ受像機に接続して使用するセットトップボックスにおいては、それらに用いられるＣＰＵ（中央処理装置）等の制御手段の処理能力が小さく、メモリ容量も小さいため、画像合成を行いながら双方向通信を行うことができない。
【００２２】
しかしながら、本発明の双方向通信画像配信システムでは、テレビ電話等の双方向通信における音声と画像とのずれを小さくすることが可能となるため、無線基地局、基地局制御装置（ＲＮＣ：Ｒａｄｉｏ  Ｎｅｔｗｏｒｋ  Ｃｏｎｔｒｏｌｌｅｒ）、交換局等に双方向通信画像合成装置を接続することで、上記の携帯電話機等の携帯端末やセットトップボックスに合成した画像を提供することが可能となり、携帯端末やセットトップボックスを用いる場合でも、合成された画像を見ながら双方向通信をリアルタイムに行うことが可能となる。
【発明の効果】
【００２３】
本発明は、上記のような構成及び動作とすることで、広告の効果が期待されるコマーシャル画像の配信を行うことができるとともに、合成された画像を見ながら双方向通信をリアルタイムに行うことができるという効果が得られる。
【発明を実施するための最良の形態】
【００２４】
次に、本発明の実施例について図面を参照して説明する。図１は本発明の一実施例による双方向通信画像配信システムの構成を示すブロック図である。図１において、本発明の一実施例による双方向通信画像配信システムは、複数の画像を合成する双方向通信画像合成装置１と、ＣＭ（コマーシャル）コンテンツ（ＣＭ画像）を提供するＣＭコンテンツサーバ２と、双方向通信画像合成装置１を移動通信網１０１，１０２にそれぞれ接続するための３ＧＧＷ（３Ｇゲートウェイ）３−１，３−２と、携帯電話機等の携帯端末４−１，４−２と、携帯端末４−１，４−２の嗜好情報を管理しかつその情報をＣＭコンテンツサーバ２に提供する嗜好管理サーバ５と、携帯端末４−１，４−２の端末位置情報／プレゼンス情報（通話者の状態を示す情報）を管理しかつそれらの情報をＣＭコンテンツサーバ２に提供する端末位置情報プレゼンスサーバ６とから構成されている。
【００２５】
携帯端末４−１，４−２はそれぞれ移動通信網１０１，１０２及び３ＧＧＷ３−１，３−２を介して双方向通信画像合成装置１に接続されている。携帯端末４−１，４−２各々は、少なくとも利用者の画像を撮影する撮像素子（図示せず）と利用者の音声を入力するマイク（図示せず）とを備えている。
【００２６】
尚、本実施例では、テレビ電話において表示される画像にＣＭ画像を合成して配信する場合について述べる。また、以下の説明では、携帯端末４−１，４−２各々の利用者におけるテレビ電話について述べるが、複数の携帯端末によるＴＶ会議等にも適用可能であり、後述する実施例に限定されるものではない。また、ＴＶ電話やＴＶ会議については公知であるので、それらの構成や動作についての説明は省略する。
【００２７】
図２は図１の双方向通信画像合成装置１の構成例を示すブロック図である。図２において、双方向通信画像合成装置１はＣＭ画像送出制御コントローラ１１と、ＣＭ画像データ蓄積部１２と、ＣＭ画像データマクロブロックデコーダ１３と、画像データマクロブロックデコーダ１４，１５と、画像データマクロブロックエンコーダ１６，１７と、ＤＴＭＦ（Ｄｉａｌ  Ｔｏｎｅ  Ｍｕｌｔｉ  Ｆｒｅｑｕｅｎｃｙ）デコーダ１８，１９と、画像データマクロブロックミキシング２０，２１とから構成されている。
【００２８】
ＣＭ画像送出制御コントローラ１１はＤＴＭＦデコーダ１８，１９からのトーン信号のデコード結果を基にＣＭ画像データの出力選択制御を行う。ＣＭ画像データ蓄積部１２は予めＣＭコンテンツサーバ２において嗜好管理サーバ５からの嗜好情報及び端末位置情報プレゼンスサーバ６からの端末位置情報／プレゼンス情報に基づいて選択されて送られてくるＣＭ画像データを蓄積する。ＣＭ画像データマクロブロックデコーダ１３はＣＭ画像データ蓄積部１２から読出したＣＭ画像データをマクロブロック単位でデコードし、そのデコードした画像データを画像データマクロブロックミキシング２０，２１に送る。
【００２９】
画像データマクロブロックデコーダ１４，１５はテレビ電話等の双方向通信で送信側端末及び受信側端末の間でやり取りされる画像データをマクロブロック単位でデコードし、そのデコードした画像データを画像データマクロブロックミキシング２０，２１に送る。画像データマクロブロックミキシング２０，２１はＣＭ画像データマクロブロックデコーダ１３及び画像データマクロブロックデコーダ１４，１５各々でデコードされた画像データに対してマクロブロック単位の重畳処理（ミキシング）を施し、画像データマクロブロックエンコーダ１６，１７に送る。この画像データマクロブロックミキシング２０，２１での処理によって、送信側端末及び受信側端末の間でやり取りされる画像データにＣＭ画像データが重畳される。
【００３０】
画像データマクロブロックエンコーダ１６，１７は画像データマクロブロックミキシング２０，２１で重畳された画像データをマクロブロック単位でエンコードし、そのエンコードした画像データを出力画像として送信側端末及び受信側端末に出力する。ＤＴＭＦデコーダ１８，１９は送信側端末及び受信側端末からのトーン信号をデコードし、そのデコード結果をＣＭ画像送出制御コントローラ１１に送る。ここで、送信側端末及び受信側端末は図１に示す携帯端末４−１，４−２である。
【００３１】
図３は図１のＣＭコンテンツサーバ２の構成例を示すブロック図である。図３において、ＣＭコンテンツサーバ２はＣＰＵ（中央処理装置）２３と、ＣＰＵ２３が実行する制御プログラム２４ａを格納するメインメモリ２４と、入力される嗜好情報や端末位置情報／プレゼンス情報に基づく配信先情報等を蓄積して画像処理の作業領域として用いられる記憶装置２５と、上記の双方向通信画像合成装置１、嗜好管理サーバ５、端末位置情報プレゼンスサーバ６との間で画像データや各種情報等の入出力を行うＩＦ（インタフェース）部２６とから構成されている。
【００３２】
ＣＰＵ２３、メインメモリ２４、記憶装置２５、ＩＦ部２６各々は内部バス２１０に接続されている。記憶装置２５は双方向通信画像合成装置１に提供するＣＭ画像データを予め蓄積するＣＭコンテンツ蓄積部２５１と、嗜好情報や端末位置情報／プレゼンス情報に基づく配信先情報等を保持するＣＭコンテンツ配信先情報保持部２５２とを備えている。
【００３３】
図４は図１の嗜好管理サーバ５の構成例を示すブロック図である。図４において、嗜好管理サーバ５はＣＰＵ５１と、ＣＰＵ５１が実行する制御プログラム５２ａを格納するメインメモリ５２と、予め入力される加入者情報を蓄積してその加入者情報を解析する際の作業領域として用いられる記憶装置５３と、加入者情報の解析結果である嗜好情報を上記のＣＭコンテンツサーバ２に出力したり、加入者情報の入力を行うＩＦ部５４とから構成されている。
【００３４】
ＣＰＵ５１、メインメモリ５２、記憶装置５３、ＩＦ部５４各々は内部バス５１０に接続されている。記憶装置５３はＩＦ部５４を通して入力される加入者情報を蓄積する加入者情報蓄積部５３１と、その加入者情報を解析して得た嗜好情報を保持する加入者情報解析結果保持部５３２とを備えている。
【００３５】
図５は図１の端末位置情報プレゼンスサーバ６の構成例を示すブロック図である。図５において、端末位置情報プレゼンスサーバ６はＣＰＵ６１と、ＣＰＵ６１が実行する制御プログラム６２ａを格納するメインメモリ６２と、入力される端末位置情報やプレゼンス情報等を蓄積してプレゼンスの通知処理の作業領域として用いられる記憶装置６３と、端末位置情報やプレゼンス情報を上記のＣＭコンテンツサーバ２に出力したり、携帯端末４−１，４−２からの端末位置情報やプレゼンス情報の入力を行うＩＦ部６４とから構成されている。
【００３６】
ＣＰＵ６１、メインメモリ６２、記憶装置６３、ＩＦ部６４各々は内部バス６１０に接続されている。記憶装置６３は携帯端末４−１，４−２から入力される端末位置情報を蓄積する端末位置情報蓄積部６３１と、携帯端末４−１，４−２から入力されるプレゼンス情報を保持するプレゼンス情報保持部６３２とを備えている。
【００３７】
図６は図３のＣＭコンテンツ配信先情報保持部２５２の構成例を示す図である。図６において、ＣＭコンテンツ配信先情報保持部２５２には、端末識別情報（「Ａ１」，「Ａ２」，「Ｂ１」，「Ｃ２」，・・・）と、嗜好情報［「趣味（釣り）」，「趣味（車）」，「趣味（映画）」，「趣味（スポーツ）」，・・・］と、位置情報（「ａ１」，「ｂ１」，「ｆ５」，「ｂ３」，「ｃ３」，「ｃ１」，「ｆ２」，「ｈ１」，「ｄ２」，「ｅ４」，・・・）と、プレゼンス情報（「休暇中」，「仕事中」，「自宅」，「帰宅中」）と、ＣＭ画像データ（「ａ１周辺のイベントＣＭ」，「−−−」，「ｆ５周辺スーパーＣＭ・セールＣＭ」，「新車ＣＭ・保険ＣＭ・車検ＣＭ」，「ｃ３周辺グルメＣＭ・娯楽ＣＭ」，「新製品ＣＭ・ｃ１周辺専門店ＣＭ」，「ｈ１周辺映画館ＣＭ」，「ｄ２周辺スポーツイベントＣＭ」，・・・）とが対応付けられて保持されている。
【００３８】
ここで、嗜好情報の一例として、「趣味」を挙げているが、「趣味」以外にも、最近の関心事項、興味を持ったＣＭの業種等であってもよく、それらに限定されない。また、プレゼンス情報としては、上記以外に、「在席中」、「会議中」、「外出中」等がある。さらに、ＣＭ画像データとしてはＣＭ名を挙げているが、それ以外にＣＭの識別情報（例えば、ＣＭ画像に付された符号等）であってもよい。尚、ＣＭコンテンツ配信先情報保持部２５２では、端末識別情報に、嗜好情報と、位置情報と、プレゼンス情報とを対応付けているが、少なくとも位置情報に対応付けられていればよく、これに限定されない。
【００３９】
図７は図３のＣＭコンテンツサーバ２のＣＭコンテンツの選択動作を示すフローチャートである。これら図１〜図６を参照して本発明の一実施例による双方向通信画像配信システムの動作について説明する。尚、図７に示す処理動作はＣＭコンテンツサーバ２のＣＰＵ２３が制御プログラム２４ａを実行することで実現される。
【００４０】
携帯端末４−１，４−２間で双方向通信が開始されると、ＣＭコンテンツサーバ２のＣＰＵ２３は携帯端末４−１，４−２各々に対応する嗜好情報（加入者情報の解析結果）を嗜好管理サーバ５から取得する（図７ステップＳ１）。また、ＣＰＵ２３は携帯端末４−１，４−２各々の現在の位置情報・プレゼンス情報を端末位置情報プレゼンスサーバ６から取得する（図７ステップＳ２）。
【００４１】
ＣＰＵ２３は上記の処理で取得した嗜好情報、位置情報・プレゼンス情報に対応するＣＭコンテンツ配信先情報をＣＭコンテンツ配信先情報保持部２５２（図６参照）から検索する（図７ステップＳ３）。例えば、携帯端末４−１の識別情報が「Ａ１」でかつ端末位置が「ｆ５」、プレゼンスが「自宅」であり、携帯端末４−２の識別情報が「Ａ２」でかつ端末位置が「ｃ３」、プレゼンスが「帰宅中」であった場合、携帯端末４−１のＣＭ画像データとして「ｆ５周辺スーパーＣＭ・セールＣＭ」が配信先情報として検索され、携帯端末４−２のＣＭ画像データとして「ｃ３周辺グルメＣＭ・娯楽ＣＭ」が配信先情報として検索される。
【００４２】
ＣＰＵ２３はＣＭコンテンツ配信先情報がなければ（図７ステップＳ４）、再度、ステップＳ１に戻って嗜好情報、位置情報・プレゼンス情報の取得を行う。また、ＣＰＵ２３はＣＭコンテンツ配信先情報があれば（図７ステップＳ４）、ＣＭコンテンツ配信先情報に対応するＣＭコンテンツをＣＭコンテンツ蓄積部２５１から検索する（図７ステップＳ５）。
【００４３】
ＣＰＵ２３はその検索で対応するＣＭコンテンツがあれば（図７ステップＳ６）、対応するＣＭ画像をＣＭコンテンツ蓄積部２５１から読出す（図７ステップＳ７）。また、ＣＰＵ２３はその検索で対応するＣＭコンテンツがなく（図７ステップＳ６）、指定のＣＭコンテンツもなければ（図７ステップＳ８）、ステップＳ１に戻って嗜好情報、位置情報・プレゼンス情報の取得を行う。ＣＰＵ２３は指定のＣＭコンテンツがあれば（図７ステップＳ８）、その指定のＣＭ画像をＣＭコンテンツ蓄積部２５１から読出す（図７ステップＳ９）。
【００４４】
ＣＰＵ２３はＣＭ画像データ蓄積部２５１から読出したＣＭ画像を双方向通信画像合成装置に送出する（図７ステップＳ１０）。ＣＰＵ２３は上記の処理を携帯端末４−１，４−２間の双方向通信が終了するまで（図７ステップＳ１１）、繰り返し実行する。
【００４５】
携帯端末４−１，４−２各々で撮影された画像はフレーム単位で移動通信網１０１，１０２、３ＧＧＷ３−１，３−２を介して双方向通信画像合成装置１に入力され、ＣＭコンテンツサーバ２もＣＭ画像データをフレーム単位で双方向通信画像合成装置１に提供する。双方向通信画像合成装置１はそれらの画像データをフレーム単位で蓄積する。この場合、フレームは動画像の符号化の際の動き補償の単位である複数のマクロブロックから構成されている。
【００４６】
また、画像データマクロブロックデコーダ１４、画像データマクロブロックエンコーダ１６、ＤＴＭＦデコーダ１８は携帯端末４−１に対応し、画像データマクロブロックデコーダ１５、画像データマクロブロックエンコーダ１７、ＤＴＭＦデコーダ１９は携帯端末４−２に対応している。
【００４７】
双方向通信画像合成装置１において、ＣＭ画像送出制御コントローラ１１はＤＴＭＦデコーダ１９からのトーン信号のデコード結果を基に、携帯端末４−２の利用者の情報に基づいて選択されたＣＭ画像データをＣＭ画像データ蓄積部１２から読出してＣＭ画像データマクロブロックデコーダ１３に入力させ、ＣＭ画像データマクロブロックデコーダ１３でマクロブロック単位でデコードさせ、そのデコード結果が画像データマクロブロックミキシング２０に送出させる。
【００４８】
携帯端末４−１で撮影された画像データは移動通信網１０１及び３ＧＧＷ３−１を介して双方向通信画像合成装置１に入力され、画像データマクロブロックデコーダ１４でマクロブロック単位でデコードされ、そのデコード結果が画像データマクロブロックミキシング２０に送出される。
【００４９】
画像データマクロブロックミキシング２０はＣＭ画像データマクロブロックデコーダ１３のデコード結果と、画像データマクロブロックデコーダ１４のデコード結果とに対して、マクロブロック単位の重畳処理を施し、重畳した画像データを画像データマクロブロックエンコーダ１７に渡す。画像データマクロブロックエンコーダ１７は画像データマクロブロックミキシング２０で重畳された画像データをマクロブロック単位でエンコードし、そのエンコード結果を出力画像として携帯端末４−２側に送出する。
【００５０】
一方、ＣＭ画像送出制御コントローラ１１はＤＴＭＦデコーダ１８からのトーン信号のデコード結果を基に、携帯端末４−１の利用者の情報に基づいて選択されたＣＭ画像データをＣＭ画像データ蓄積部１２から読出してＣＭ画像データマクロブロックデコーダ１３に入力させ、ＣＭ画像データマクロブロックデコーダ１３でマクロブロック単位でデコードさせ、そのデコード結果が画像データマクロブロックミキシング２１に送出させる。
【００５１】
携帯端末４−２で撮影された画像データは移動通信網１０２及び３ＧＧＷ３−１を介して双方向通信画像合成装置１に入力され、画像データマクロブロックデコーダ１５でマクロブロック単位でデコードされ、そのデコード結果が画像データマクロブロックミキシング２１に送出される。
【００５２】
画像データマクロブロックミキシング２１はＣＭ画像データマクロブロックデコーダ１３のデコード結果と、画像データマクロブロックデコーダ１５のデコード結果とに対して、マクロブロック単位の重畳処理を施し、重畳した画像データを画像データマクロブロックエンコーダ１６に渡す。画像データマクロブロックエンコーダ１６は画像データマクロブロックミキシング２１で重畳された画像データをマクロブロック単位でエンコードし、そのエンコード結果を出力画像として携帯端末４−１側に送出する。
【００５３】
このように、本実施例では、マクロブロック単位で画像合成のデコード処理、ミキシング処理、エンコード処理を行っているため、出力画像として出力されるまでの遅延を小さくすることができ、テレビ電話等の双方向通信における音声と画像とのずれを小さくすることができるとともに、配信されるＣＭ画像が端末利用者の位置情報／プレゼンス情報や嗜好情報に基づいているので、広告の効果が期待されるＣＭ画像（最適化された広告）の配信を行うことができる。
【００５４】
したがって、本実施例では、テレビ電話等の双方向通信における音声と画像とのずれを小さくすることができるため、双方向通信画像合成装置１を無線基地局、基地局制御装置（ＲＮＣ：Ｒａｄｉｏ  Ｎｅｔｗｏｒｋ  Ｃｏｎｔｒｏｌｌｅｒ）、交換局等に接続することで、上記の携帯端末４−１，４−２に合成した画像を提供することができ、携帯端末４−１，４−２を用いる場合でも、合成された画像を見ながら双方向通信をリアルタイムに行うことができる。尚、上記の双方向通信画像合成装置１の処理動作はプログラムを実行することでも実現可能である。
【００５５】
図８は本発明の他の実施例によるＣＭコンテンツ配信先情報保持部の構成例を示す図である。図８において、本発明の他の実施例によるＣＭコンテンツ配信先情報保持部は、災害情報（「ａ１周辺災害情報」，「ｂ１周辺災害情報」，「ｆ５周辺災害情報」，「ｂ３周辺災害情報」，「ｃ３周辺災害情報」，「ｃ１周辺災害情報」，「ｆ２周辺災害情報」，「ｈ１周辺災害情報」，「ｄ２周辺災害情報」，「ｅ４周辺災害情報」，・・・）を追加した以外は、図６に示す本発明の一実施例によるＣＭコンテンツ配信先情報保持部２５２と同様の構成となっている。
【００５６】
図９は本発明の他の実施例によるＣＭコンテンツサーバのＣＭコンテンツの選択動作を示すフローチャートである。本発明の他の実施例による双方向通信画像配信システム及びそれを構成する各装置は図１〜図５に示す本発明の一実施例による双方向通信画像配信システム及びそれを構成する各装置と同様の構成となっている。これら図１〜図５と図８と図９とを参照して本発明の他の実施例による双方向通信画像配信システムの動作について説明する。尚、図９に示す処理動作はＣＭコンテンツサーバ２のＣＰＵ２３が制御プログラム２４ａを実行することで実現される。
【００５７】
携帯端末４−１，４−２間で双方向通信が開始されると、ＣＭコンテンツサーバ２のＣＰＵ２３は携帯端末４−１，４−２各々に対応する嗜好情報（加入者情報の解析結果）を嗜好管理サーバ５から取得する（図９ステップＳ２１）。また、ＣＰＵ２３は携帯端末４−１，４−２各々の現在の位置情報・プレゼンス情報を端末位置情報プレゼンスサーバ６から取得する（図９ステップＳ２２）。
【００５８】
ＣＰＵ２３は上記の処理で取得した嗜好情報、位置情報・プレゼンス情報に対応するＣＭコンテンツ配信先情報をＣＭコンテンツ配信先情報保持部２５２（図８参照）から検索する（図９ステップＳ２３）。例えば、携帯端末４−１の識別情報が「Ａ１」でかつ端末位置が「ｆ５」、プレゼンスが「自宅」であり、携帯端末４−２の識別情報が「Ａ２」でかつ端末位置が「ｃ３」、プレゼンスが「帰宅中」であった場合、携帯端末４−１のＣＭ画像データとして「ｆ５周辺スーパーＣＭ・セールＣＭ」が配信先情報として検索され、携帯端末４−２のＣＭ画像データとして「ｃ３周辺グルメＣＭ・娯楽ＣＭ」が配信先情報として検索される。
【００５９】
ＣＰＵ２３はＣＭコンテンツ配信先情報がなければ（図９ステップＳ２４）、再度、ステップＳ２１に戻って嗜好情報、位置情報・プレゼンス情報の取得を行う。また、ＣＰＵ２３はＣＭコンテンツ配信先情報があれば（図９ステップＳ２４）、ＣＭコンテンツ配信先情報に対応するＣＭコンテンツをＣＭコンテンツ蓄積部２５１から検索する（図９ステップＳ２５）。
【００６０】
ＣＰＵ２３はその検索で対応するＣＭコンテンツがあれば（図９ステップＳ２６）、対応するＣＭ画像をＣＭコンテンツ蓄積部２５１から読出す（図９ステップＳ２７）。また、ＣＰＵ２３はその検索で対応するＣＭコンテンツがなく（図９ステップＳ２６）、指定のＣＭコンテンツもなければ（図９ステップＳ２８）、ステップＳ２１に戻って嗜好情報、位置情報・プレゼンス情報の取得を行う。ＣＰＵ２３は指定のＣＭコンテンツがあれば（図９ステップＳ２８）、その指定のＣＭ画像をＣＭコンテンツ蓄積部２５１から読出す（図９ステップＳ２９）。
【００６１】
ＣＰＵ２３はＣＭ画像データ蓄積部２５１から読出したＣＭ画像を双方向通信画像合成装置１に送出する（図９ステップＳ３０）。この後、ＣＰＵ２３は携帯端末４−１，４−２の所在位置周辺で災害が発生していないかを判定し（図９ステップＳ３１）、災害が発生していなければ、上記の処理を携帯端末４−１，４−２間の双方向通信が終了するまで（図９ステップＳ３２）、繰り返し実行する。一方、ＣＰＵ２３は災害が発生していれば、ステップＳ２９に戻って、災害が発生した所在位置周辺の災害情報の画像をＣＭ画像データ蓄積部２５１から読出して双方向通信画像合成装置１に送出する。
【００６２】
携帯端末４−１，４−２各々で撮影された画像はフレーム単位で移動通信網１０１，１０２、３ＧＧＷ３−１，３−２を介して双方向通信画像合成装置１に入力され、ＣＭコンテンツサーバ２もＣＭ画像データをフレーム単位で双方向通信画像合成装置１に提供する。双方向通信画像合成装置１はそれらの画像データをフレーム単位で蓄積する。この場合、フレームは動画像の符号化の際の動き補償の単位である複数のマクロブロックから構成されている。双方向通信画像合成装置１による画像の合成処理は上述した本発明の一実施例と同様であるので、その説明を省略する。
【００６３】
このように、本実施例では、災害発生時に、その災害情報の画像をＣＭ画像に切替えて携帯端末４−１，４−２に送出するので、広告の効果が期待されるＣＭ画像（最適化された広告）の配信を行うことができるとともに、携帯端末４−１，４−２間での双方向通信時に発生した災害情報をも即座に報知することができる。
【００６４】
図１０は本発明の別の実施例による双方向通信画像配信システムの構成を示すブロック図である。図１０において、本発明の別の実施例による双方向通信画像配信システムは、携帯端末４−２の代わりに、既存のＴＶ（テレビ）受像機８に接続されかつＴＶ電話等の画像と音声とを用いた双方向通信を実現するセットトップボックス７を配設し、ＩＰ（Ｉｎｔｅｒｎｅｔ  Ｐｒｏｔｏｃｏｌ）ネット網２００を介してセットトップボックス７を双方向通信画像合成装置１に接続した以外は、図１に示す本発明の一実施例による双方向通信画像配信システムと同様の構成となっている。
【００６５】
このように、本実施例では、既存のＴＶ受像機８に接続されたセットトップボックス７と携帯端末４との間でもテレビ電話等の双方向通信における音声と画像とのずれを小さくすることができるとともに、広告の効果が期待されるＣＭ画像（最適化された広告）の配信を行うことができる。但し、本実施例では、セットトップボックス７が移動することがないので、端末位置情報プレゼンスサーバ６がセットトップボックス７の位置情報を管理する必要はなく、プレゼンス情報のみを管理すればよい。
【００６６】
尚、本発明では、上記の各実施例において、表示画面においてＣＭ画像を表示する領域を特に指定することなく、画像を合成する場合について述べたが、表示画面においてＣＭ画像を表示する領域を指定する場合にも適用可能である。その場合には、上記の重畳処理を指定された領域のみ行えばよいので、処理の負荷軽減や処理速度の高速化を図ることができる。
【００６７】
また、本発明では、送信側及び受信側各々の画像データにＣＭ画像データを重畳する場合について述べたが、ＣＭ画像データ以外の画像（動画像、静止画、テキスト等）を重畳する場合にも、あるいは送信側及び受信側各々の画像データを互いに重畳して送信側及び受信側に表示することも可能である。
【図面の簡単な説明】
【００６８】
【図１】本発明の一実施例による双方向通信画像配信システムの構成を示すブロック図である。
【図２】図１の双方向通信画像合成装置の構成例を示すブロック図である。
【図３】図１のＣＭコンテンツサーバの構成例を示すブロック図である。
【図４】図１の嗜好管理サーバの構成例を示すブロック図である。
【図５】図１の端末位置情報プレゼンスサーバの構成例を示すブロック図である。
【図６】図３のＣＭコンテンツ配信先情報保持部の構成例を示す図である。
【図７】図３のＣＭコンテンツサーバのＣＭコンテンツの選択動作を示すフローチャートである。
【図８】本発明の他の実施例によるＣＭコンテンツ配信先情報保持部の構成例を示す図である。
【図９】本発明の他の実施例によるＣＭコンテンツサーバのＣＭコンテンツの選択動作を示すフローチャートである。
【図１０】本発明の別の実施例による双方向通信画像配信システムの構成を示すブロック図である。
【符号の説明】
【００６９】
１  双方向通信画像合成装置
２  ＣＭコンテンツサーバ
３，３−１，３−２  ３ＧＧＷ
４，４−１，４−２  携帯端末
５  嗜好管理サーバ
６  端末位置情報プレゼンスサーバ
７  セットトップボックス
８  ＴＶ受像機
１１  ＣＭ画像送出制御コントローラ
１２  ＣＭ画像データ蓄積部
１３  ＣＭ画像データマクロブロックデコーダ
１４，１５  画像データマクロブロックデコーダ
１６，１７  画像データマクロブロックエンコーダ
１８，１９  ＤＴＭＦデコーダ
２０，２１  画像データマクロブロックミキシング
２３，５１，６１  ＣＰＵ
２４，５２，６２  メインメモリ
２４ａ，５２ａ，６２ａ  制御プログラム
２５，５３，６３  記憶装置
２６，５４，６４  ＩＦ部
１００，１０１，１０２  移動通信網
２００  ＩＰネット網
２１０，５１０，６１０  内部バス
２５１  ＣＭコンテンツ蓄積部
２５２  ＣＭコンテンツ配信先情報保持部
５３１  加入者情報蓄積部
５３２  加入者情報解析結果保持部
６３１  端末位置情報蓄積部
６３２  プレゼンス情報保持部
【図１】
2007251741.tif 000003
【図２】
2007251741.tif 000004
【図３】
2007251741.tif 000005
【図４】
2007251741.tif 000006
【図５】
2007251741.tif 000007
【図６】
2007251741.tif 000008
【図７】
2007251741.tif 000009
【図８】
2007251741.tif 000010
【図９】
2007251741.tif 000011
【図１０】
2007251741.tif 000012