【誤訳訂正書】
【提出日】平成22年8月2日(2010.8.2)
【誤訳訂正１】
【訂正対象書類名】特許請求の範囲
【訂正対象項目名】全文
【訂正方法】変更
【訂正の内容】
【特許請求の範囲】
【請求項１】
携帯通信機器（２００）からの通信セッション中に送信され、音声信号と画像信号とを有する出力メディアストリームを形成するための方法であって、
少なくとも１つの生成ユニット（２０６、２０８）が、前記携帯通信機器において、音声信号と画像信号とを有する第１メディアストリームをリアルタイムに生成するステップ（ステップ１０４）と、
デマルチプレックスユニット（２１２）が、第２メディアストリーム内の音声信号と画像信号とを分解するステップ（ステップ１０６）と、
第１合成ユニット（２１６）が、前記第１メディアストリームからの音声信号と前記第２メディアストリームからの音声信号とをリアルタイムに合成するステップ（ステップ１１０）と、
第２合成ユニット（２１８）が、前記第１メディアストリームからの画像信号と前記第２メディアストリームからの画像信号とをリアルタイムに合成するステップ（ステップ１１２）と、
マルチプレクシングユニット（２２０）が、前記出力メディアストリームを形成するために、前記合成された音声信号と前記合成された画像信号とを混合するステップ（ステップ１１４）と
を有する方法。
【請求項２】
送信ユニット（２２２）が、前記出力メディアストリームを送信するステップ（ステップ１１６）をさらに有する請求項１に記載の方法。
【請求項３】
制御ユニット（２０４）が、他の機器との接続を確立するステップ（ステップ１０２）をさらに有する請求項１に記載の方法。
【請求項４】
前記ステップの少なくとも１つは、前記携帯通信機器のユーザからの入力データに依存する請求項１乃至３のいずれか１項に記載の方法。
【請求項５】
前記出力メディアストリームの中に音声信号と画像信号とが同期した前記第２メディアストリームを提供するために、前記合成するステップの前に、遅延ユニット（２１４）が、前記第２メディアストリームからの画像信号に関連させて、前記第２メディアストリームからの音声信号を遅延するステップ（ステップ１０８）をさらに有する請求項１に記載の方法。
【請求項６】
前記音声信号を合成するステップと前記画像信号を合成するステップとは、独立して実行されることを特徴とする請求項５に記載の方法。
【請求項７】
前記混合するステップは、
前記出力メディアストリームの中に音声信号と画像信号とが同期した前記第１メディアストリームを提供するために、前記マルチプレクシングユニットが、前記出力メディアストリームの音声信号と画像信号とのうち一方に関連させて、前記出力メディアストリームの音声信号と画像信号とのうち他方を遅延するステップを含む請求項１に記載の方法。
【請求項８】
前記音声信号を合成するステップは、前記第１合成ユニット（２１６）が、前記音声信号を重畳するステップを含む請求項１に記載の方法。
【請求項９】
前記重畳するステップは、前記第１メディアストリームおよび前記第２メディアストリームからの音声信号の特性を重み付けるステップを含む請求項８に記載の方法。
【請求項１０】
前記画像信号を合成するステップは、前記第２合成ユニット（２１８）が、前記画像信号をアルファブレンディングするステップを含む請求項１に記載の方法。
【請求項１１】
前記アルファブレンディングするステップは、前記第１メディアストリームおよび前記第２メディアストリームからの画像信号の特性を重み付けるステップを含む請求項１０に記載の方法。
【請求項１２】
前記特性を重み付けるステップは、前記第２メディアストリームからの信号の前記特性に関連させて、前記第１メディアストリームからの信号の割合を変更するステップを含む請求項９又は１１に記載の方法。
【請求項１３】
前記重み付けられた特性は、前記携帯通信機器のユーザの入力データに依存する請求項１２に記載の方法。
【請求項１４】
携帯通信機器（２００）からの通信セッション中に送信され、音声信号と画像信号とを有する出力メディアストリームを形成する携帯通信機器（２００）であって、
音声信号と画像信号とを有する第１メディアストリームを生成するために提供される少なくとも１つの生成ユニット（２０６、２０８）と、
第２メディアストリーム内の音声信号と画像信号とを分解するために提供されるデマルチプレックスユニット（２１２）と、
前記生成ユニットに接続され、前記第１メディアストリームの音声信号と第２メディアストリームの音声信号とをリアルタイムに合成するために提供される第１合成ユニット（２１６）と、
前記生成ユニットに接続され、前記第１メディアストリームの画像信号と第２メディアストリームの画像信号とをリアルタイムに合成するために提供される第２合成ユニット（２１８）と、
前記出力メディアストリームを形成するために、前記合成された音声信号と前記合成された画像信号とを混合するために提供されるマルチプレクシングユニット（２２０）と
を備える携帯通信機器（２００）。
【請求項１５】
前記第２メディアストリームのための蓄積部を提供するメモリユニット（２１０）をさらに備える請求項１４に記載の携帯通信機器（２００）。
【請求項１６】
ユーザ入力を提供するためのユーザ入力インターフェース（２０２）をさらに備える請求項１４又は１５に記載の携帯通信機器（２００）。
【請求項１７】
前記マルチプレクシングユニット（２２０）は、前記出力メディアストリームの中で、前記第１メディアストリームからの画像信号に関連させて、前記第１メディアストリームからの音声信号の同期を提供するためにさらに提供される請求項１４に記載の携帯通信機器（２００）。
【請求項１８】
前記第１メディアストリームと混合する前に、前記第２メディアストリームからの音声信号と画像信号との同期を提供する遅延ユニット（２１４）をさらに備える請求項１４乃至１６のいずれか１項に記載の携帯通信機器（２００）。
【請求項１９】
前記遅延ユニット（２１４）は、前記第２メディアストリームからの音声信号と画像信号とのうち一方に関連して、前記第２メディアストリームからの音声信号と画像信号とのうち他方を遅延する請求項１８に記載の携帯通信機器（２００）。
【誤訳訂正２】
【訂正対象書類名】明細書
【訂正対象項目名】全文
【訂正方法】変更
【訂正の内容】
【発明の詳細な説明】
【発明の名称】メディアストリームの混合
【技術分野】
【０００１】
本発明は、携帯通信機器における少なくとも２つのメディアストリームのリアルタイム混合に関する。特に、本発明は、リアルタイム送信された出力メディアストリームを提供するため、少なくとも２つのメディアストリームをリアルタイム混合する方法および機器に関する。
【背景技術】
【０００２】
多くの第３世代携帯端末は、３ＧＰＰ仕様３２４Ｍに基づくビデオ電話（Video Telephony(VT)）アプリケーションが実装されると予測される。このＶＴアプリケーションは、リアルタイム音声及び映像情報を含む通信により、個人と個人との間の接続を可能とする。これらのアプリケーションは、音声と画像情報の両方を含んだ１つの単一映像ストリームの記録及び生成を備える。
【０００３】
もし、携帯通信機器において２つの異なるメディアストリームを合成することが可能であれば、１つのストリームの音声と他のストリームからの音声とを交換するとか、１つのストリームの画像情報と他のストリームの画像情報とを置き換える等の、多くの魅力ある機能を提供することが可能である。
【０００４】
ＶＴを使用する興味深い方法のひとつに、"show & tell”と呼ばれる使い方がある。これは、音声および画像情報を含む録画されたビデオを再生しているとき、声（音声）がこのストリームに同時に追加される。
【０００５】
さらに、或る消費者は、明らかに不適当な場所で、またはセキュリティの理由から他人が見ることを許されていない場所で撮影されたことを問題にする。明らかなリアルタイム動画は、たとえば２つの異なる動画の合成であり、その１つは場所を映し、他の１つは消費者を映す。
【０００６】
本発明は、移動体ＶＴアプリケーションの利用をどの様に促進するか、そしてビデオ電話で使われる時に整合性の問題をどの様に取り扱うことが出来るかに関連する。
【０００７】
したがって、少なくとも１つがリアルタイムストリームである２つの別々の入力ストリームに基づいた出力メディアストリームを提供可能な方法および機器の要求がある。
【発明の開示】
【発明が解決しようとする課題】
【０００８】
本発明は、したがって、出力メディアストリームが第１（リアルタイム）メディアストリームと第２メディアストリームの混合物である、携帯通信機器から送信されている前記リアルタイム同期出力メディアストリームを提供する課題を解決するものである。
【０００９】
これは、携帯通信機器で第１メディアストリームをリアルタイムに生成し、前記出力メディアストリームを形成するために、前記第１メディアストリームと第２メディアストリームをリアルタイムに合成することを提供することで達成される。
本発明の1つの目的は、第１リアルタイムメディアストリームと第２メディアストリームからなるリアルタイム出力メディアストリームを形成する方法を提供することである。
【課題を解決するための手段】
【００１０】
本発明の第１の側面によれば、この目的は、メディアストリームが第１型式の信号よりなり、携帯通信機器からの通信セッション中に送信される出力メディアストリームを形成するための方法であって、
前記携帯通信機器において第１メディアストリームをリアルタイムに生成し、
前記出力メディアストリームを形成するために、前記第１メディアストリームと第２メディアストリームをリアルタイムに合成する、ステップを備える方法により達成される。  本発明の第２の側面は、前記第１の側面の特徴を含む方法であって、前記出力メディアストリームは第２型式の信号を備える。
【００１１】
本発明の第３の側面は、前記第１の側面の特徴を含む方法であって、前記出力メディアストリームを送信するステップをさらに備える。
【００１２】
本発明の第４の側面は、前記第１の側面の特徴を含む方法であって、他の機器との接続を確立するステップをさらに備える。
【００１３】
本発明の第５の側面は、前記第４の側面の特徴を含む方法であって、前記接続は回路スイッチ型接続である。
【００１４】
本発明の第６の側面は、前記第１の側面の特徴を含む方法であって、前記ステップの少なくとも１つは、前記携帯通信機器のユーザからの入力データに依存する。
【００１５】
本発明の第７の側面は、前記第１の側面の特徴を含む方法であって、前記合成するステップは、前記第１メディアストリームからの第１型式の信号と、前記第２メディアストリームからの第２型式の信号との合成を備える。
【００１６】
本発明の第８の側面は、前記第１の側面の特徴を含む方法であって、前記合成するステップは、前記第１メディアストリームからの第１型式の信号と、前記第２メディアストリームの前記第１型式の信号との合成を備える。
【００１７】
本発明の第９の側面は、前記第８の側面の特徴を含む方法であって、前記合成するステップは、前記第１メディアストリームからの第２型式の信号と、前記第２メディアストリームからの前記信号とを合成するステップをさらに備える。
【００１８】
本発明の第１０の側面は、前記第８の側面の特徴を含む方法であって、前記合成するステップは、前記第１メディアストリームからの信号と、前記第２メディアストリームからの前記第２型式の信号とを合成するステップをさらに備える。
【００１９】
本発明の第１１の側面は、前記第１０の側面の特徴を含む方法であって、前記合成するステップは、前記第１メディアストリームからの前記第２型式の信号と、前記第２メディアストリームからの信号とを合成するステップをさらに備える。
【００２０】
本発明の第１２の側面は、前記第１１の側面の特徴を含む方法であって、前記合成するステップは、前記出力メディアストリームの中に前記第２メディアストリームからの同期した信号を提供するために、合成する前に、同じメディアストリームの他の形式の信号に関連させて、前記第２メディアストリームの１の型式の信号を遅延するステップをさらに備える。
【００２１】
本発明の第１３の側面は、前記第１０の側面の特徴を含む方法であって、前記合成するステップは、前記第１型式の信号と、前記第２型式の信号を別々に合成するステップをさらに備える。
【００２２】
本発明の第１４の側面は、前記第９の側面または前記第１１の側面の特徴を含む方法であって、前記合成するステップは、前記出力メディアストリームの中に前記第１メディアストリームからの同期した信号を提供するために、同じメディアストリームの他の形式の信号に関連させて、前記出力メディアストリームの中の１の型式の信号を遅延するステップをさらに備える。
【００２３】
本発明の第１５の側面は、前記第９の側面の特徴を含む方法であって、前記第１型式の信号が音声信号である場合、前記信号を合成するステップは、前記第１型式の信号を重畳するステップをさらに備える。
【００２４】
本発明の第１６の側面は、前記第１５の側面の特徴を含む方法であって、前記重畳するステップは、前記第１メディアストリームおよび前記第２メディアストリームからの音声信号の特性の重み付けをするステップをさらに備える。
【００２５】
本発明の第１７の側面は、前記第９の側面の特徴を含む方法であって、前記第１型式の信号が画像信号である場合、前記信号を合成するステップは、前記第１型式の信号を混合するステップをさらに備える。
【００２６】
本発明の第１８の側面は、前記第１７の側面の特徴を含む方法であって、前記混合ステップは、前記第１メディアストリームおよび前記第２メディアストリームからの画像信号の特性の重み付けをするステップをさらに備える。
【００２７】
本発明の第１９の側面は、前記第１６の側面の特徴を含む方法であって、前記特性の重み付けをするステップは、前記第２メディアストリームからの信号の特性に関連させて、前記第１メディアストリームからの信号の割合を変えるステップを含む。
【００２８】
本発明の第２０の側面は、前記第１９の側面の特徴を含む方法であって、前記特性の重み付けをするステップは、前記携帯通信機器のユーザの入力データに依存する。
【００２９】
本発明の第２１の側面は、前記第１９の側面の特徴を含む方法であって、前記割合を変える前記ステップは、０と１００％との間の範囲の中で各特性を変えるステップを備える。
【００３０】
本発明の他の目的は、第１リアルタイムメディアストリームと第２メディアストリームよりなるリアルタイム出力メディアストリームを形成するための携帯通信機器を提供することである。
【００３１】
本発明の第２２の側面によれば、この目的は、出力メディアストリームが第１型式の信号を備え、携帯通信機器からの通信セッション中に送信される出力メディアストリームを形成する携帯通信機器であって、
第１メディアストリームを生成するために提供される少なくとも１つの生成ユニットと、前記生成ユニットに接続され、前記第１メディアストリームと第２メディアストリームをリアルタイムに合成するために提供される第１合成ユニットと、
ユーザ入力に依存して前記生成ユニットおよび前記第１合成ユニットを制御する制御ユニットと、を備える携帯通信機器で達成される。
【００３２】
本発明の第２３の側面は、前記第２２の側面を含む携帯通信機器であって、前記第１合成ユニットが前記第１および第２メディアストリームの両方の前記第１型式の信号を合成するために提供され、前記出力メディアストリームが前記第１型式および第２型式の信号を備える携帯通信機器からの通信セッション中に送信される出力メディアストリームを形成するための携帯通信機器であって、第２合成ユニットと、をさらに備え、前記第２合成ユニットを使用して、前記第１メディアストリームからの前記第２型式の信号と前記第２メディアストリームからの前記第２型式の信号を合成する。
【００３３】
本発明の第２４の側面は、前記第２２の側面を含む携帯通信機器であって、前記第２メディアストリームのための蓄積部を提供するメモリユニットをさらに備える。
【００３４】
本発明の第２５の側面は、前記第２２の側面を含む携帯通信機器であって、コントロールユニットに接続されて、それにより生成ユニットおよび全ての合成ユニットがユーザ入力にしたがって制御される、ユーザ入力を提供するためのユーザ入力インターフェースをさらに備える。
【００３５】
本発明の第２６の側面は、前記第２３の側面を含む携帯通信機器であって、前記出力メディアストリームの中で、前記同じ第１メディアストリームからの他の型式の信号に関連させて、前記第１メディアストリームからの１の型式の信号の同期を提供するためのマルチプレクシングユニット（２２０）をさらに備える。
【００３６】
本発明の第２７の側面は、前記第２３の側面を含む携帯通信機器であって、前記出力メディアストリームの中で、同期した信号を提供する遅延ユニットをさらに備える。
【００３７】
本発明の第２８の側面は、前記第２７の側面を含む携帯通信機器であって、前記遅延ユニットは、前記第１メディアストリームと合成する前に、前記第２メディアストリームからの信号の同期を提供する。
【００３８】
本発明の第２９の側面は、前記第２８の側面を含む携帯通信機器であって、前記遅延ユニットは、前記同じ第２メディアストリームからの他の型式の信号に関連して、１の型式の信号の同期を提供する。
【００３９】
本発明は、第１リアルタイムメディアストリームが第２第２メディアストリームと合成された出力メディアストリームを提供する。これは、前記２つのメディアストリームが、たとえば多くの異なる魅力ある機能を提供するために多くの方法で合成される点において特徴を有する。
【００４０】
移動体機器のユーザは、通信相手に別々にビデオカメラ画像を送る代わりに、先立って録画された映像や音声を、先に録画された映像にリアルタイムの声または音声を混合しながら送信することが可能となり、それにより、通信相手に、相手が実際にいる場所とは違う場所にいることの認識を提供できる。そのような効果は、先に録画された映像の中に、ユーザの顔のような動画情報を混合することでさらに強調される。
【００４１】
ビデオ電話の呼び出しを受けた時、移動体映像応答装置を提供するために、呼び出しに対してカメラからのリアルタイムビデオカメラ画像を送らずに、動画または静止画を含み、メモリに蓄積されている先に録画された映像応答メッセージを再生するように決めることが可能である。
【００４２】
会話の途中で、通信機器のユーザは、ＶＴセッションの出力メディアストリームの中に提供することで、映像または静止画の情報内容を即座に共有することが可能である。これは、すなわち、同時マルチメデイアを可能とする使い方が可能である。
【００４３】
他の例は、ＶＴセッションの立ち上がり時に、先に録画された映像ファイルの送信の使用であって、そこでは、ファイルは通信料金の減額に適する広告を含むことが出来る。
【００４４】
この明細書で、用語（備える／備えている）が使われるときは、その特徴、構造、ステップ、構成物の存在を特定するが、１または１以上の他の特徴、構造、ステップ、構成物、またはそれらのグループの存在を排除するものではない点を強調しておく。
【発明の効果】
【００４５】
本発明によれば、少なくとも１つがリアルタイムストリームである２つの別々の入力ストリームに基づいた出力メディアストリームを提供可能な方法および機器を提供することが出来る。
【発明を実施するための最良の形態】
【００４６】
本発明は、携帯通信機器からの通信セッション中に送信される同期した出力メディアストリームの形成に関する。
【００４７】
本願の好ましい実施例による特徴は、通信機器の３Ｇ−３２４Ｍアプリケーションで得られる。これを達成するために、Ｈ．２４５プロトコルの柔軟性がアップデートされたＳＷ/ＨＷアーキテクチャと共に利用される。
【００４８】
次に、携帯通信機器から送信される同期した出力メディアストリームをリアルタイムに提供する方法および本発明に係る携帯通信機器のそれぞれを図示する、図１と図２を参照する。
【００４９】
この好ましい実施例によれば、前記方法は携帯通信機器２００と他の通信機器との間で接続を確立する、ステップ１０２で始まるもので、それを使って携帯通信機器のユーザはＶＴ通信セッションを確立することを希望する。これはユーザがユーザ入力インターフェース２０２を介してＶＴセッションを選択することでなされ、この選択に基づき、制御ユニット２０４は送信ユニット２２２に他の機器とのＶＴセッションを設定する。音声および画像情報、すなわち、第１第２型式の信号の両方を有する第１メディアストリームの生成のステップ１０４は、共に制御ユニット２０４で制御される音声生成ユニット２０６および画像生成ユニット２０８で実行される。これは、画像生成ユニット２０８の中に構成されているカメラで画像を、そして音声生成ユニット２０６の中に有するマイクロフォンで音声を記録することでなされる。
【００５０】
本実施例によれば、第１メディアストリームは、音声および画像情報の両方で構成される。次に、第２メディアストリームを提供するステップ１０６は、メモリユニット２１０から前記メディアストリームを得ることで実行される。またこれは、ユーザ入力に依存した制御ユニットの制御を介してなされる。この好ましい実施例において、このメモリユニットは携帯通信機器２００に含まれて構成された内部メモリである。第２メディアストリームは混合された音声および画像情報を含むので、このストリームはこれら２つの信号を分離するように分解される。これはデマルチプレックスユニット２１２で実行される。この好ましい実施例によれば、混合するのに好ましいフォーマットを得るために、デマルチプレックスユニット２１２は画像フォーマットのデコードを実行する。好ましいフォーマットは、例えばＹＵＶフォーマットである。このデマルチプレックスユニット２１２は、さらに音声情報を好ましいフォーマットにデコードする。この音声フォーマットは、たとえばＰＣＭフォーマットである。このデマルチプレックスユニット２１２は、合成ユニット２１６および２１８において、同じ型式の情報を合成するステップを助けて音声および／または画像情報のビットレートを変換するために、さらにビットレート変換能力を有する。第１および第２メディアストリームはこうして音声および画像情報をそれぞれ含んでいるデコードされた分離した型式の信号を含む。
【００５１】
本発明によれば、上記した異なる信号型式の分解およびデコードは異なる量の時間を消耗する。この好ましい実施例においては、通常の場合、画像処理経路は音声処理経路より、より多くの時間を必要とする。第２メディアストリームから、順次同期した音声および画像情報よりなる出力メディアストリームを得るために、この第２ストリームからの音声情報は、遅延ユニット２１４での遅延するステップ１０８を受ける。ここでの遅延量は、さらに異なる処理ステップの時間の違いに基づき制御ユニットにより決定される。しかしながら、ここで使われる遅延量は、また第１メディアストリームの音声と画像情報との間の時間差に依存する。第２メディアストリームに有効な遅延ユニット２１４は、したがって、出力メディアストリームに有効なマルチプレックスユニット２２０による引き続く同期の１部分、すなわち第１メディアストリームの中で、音声と画像情報との間のタイミングの違いによる部分を補償しなければならない。
【００５２】
音声と画像のような分離した形の情報は合成が前提となる。両方のストリームからの音声情報は、ステップ１１０にあるように第１合成ユニット２１６で合成される。第２合成ユニット２１８は、同様にステップ１１２で両ストリームからの画像情報を合成する。音声情報の合成は、第１ストリームの音声情報を第２ストリームの音声情報に重畳することで行われる。この合成はさらに第１ストリームからの音声情報と第２ストリームからの音声情報の特性の重み付けを含む。これは他のストリームからの音声情報の特性に関連させて１つのストリームからの音声情報の特性の変更を網羅する。
【００５３】
本発明の好ましい本実施例によれば、第１合成ユニット２１６は、合成された音声情報をＡＭＲのような好ましいフォーマットへの符号化を含む。
【００５４】
画像情報については、合成ユニット２１８が第１ストリームからの画像情報と第２ストリームからの画像情報をアルファブレンディングと呼ばれる処理で合成するが、このアルファブレンディングはこの分野の当業者には良く知られており、ここではさらに説明はしない。しかしながら、この画像情報の合成は、第１ストリームおよび第２ストリームからの画像情報の特性の重み付けを含む。第１合成ユニット２１６による音声情報の合成と同様に、第２合成ユニット２１８での特性の重み付けは、他のストリームからの画像情報の特性に関連させて１のストリームからの画像情報の特性の変更を含む。
【００５５】
音声および画像情報の特性の重み付けは、ユーザ入力インターフェース２０２を介してユーザから得られたユーザ入力データに依存する。
【００５６】
さらに、この好ましい実施例によれば、第２合成ユニット２１８は、合成画像情報をＭＰＥＧ−４のような好ましいフォーマットへの符号化を含む。
【００５７】
２つの異なるストリームからの同じ型式の情報を合成するステップの後に、マルチプレクシングユニット２２０によって出力メディアストリームを形成するステップ１１４が続いて行われる。
【００５８】
マルチプレクシングユニット２２０は、さらに第１メディアストリームからの２つの型式の情報の間で内部同期を行う、すなわちこのストリームからの音声を画像情報に同期させるために同期能力を含む。この同期では、第１ストリームにおける音声情報と画像情報との時間差が考慮される。しかしながら、また、一方では音声情報が合成ユニットを通過するのに要する時間と、他方では画像情報が合成ユニットを通過するのに要する時間との間の時間差も考慮する。これらの必要とされた期間は、主として合成されるメディアストリームに音声および／または画像情報が存在することに依存する。
【００５９】
第１メディアストリームからの情報と、第２ストリームの同期情報を含む出力メディアストリームが形成されると、合成された混合出力ストリームは、送信ユニット２２２によりステップ１１６でリアルタイム送信されることになる。
【００６０】
図２に示した携帯通信機器を参照すると、制御ユニット２０４は、ユーザ入力データインターフェース２０２からのユーザ入力データを受信した際にこれらを制御するため、全ての他の実行ユニットに接続されている。第１メディアストリームを生成するステップ、ステップ１０４、第２メディアストリームの提供、ステップ１０６および音声情報を合成するステップ、ステップ１１０、画像情報の合成およびステップ１１２は、ユーザ入力データを要求する。
【００６１】
さらに、音声または画像情報のいずれか正しい形式の情報を遅延させるため、遅延ユニットにおいて正しい型式の情報であることを前提に遅延を調整するため、第２合成ユニット２１２と制御ユニット２０４との間に帰還信号系が含まれる。
【００６２】
本発明は、たとえば次のように色々な方法で変形することが出来る。
【００６３】
第１メディアストリームは、ただ画像情報だけ、ただ音声情報だけ、あるいは両方の組み合わせを備えることが可能である。第２メディアストリームもまた、ただ画像情報だけ、ただ音声情報だけ、あるいは両方の組み合わせを備えることが可能である。第１および第２メディアストリームのこれら全ての変形例は、組み合わせることが可能である。メモリユニットは、機器の中に固定することも、携帯通信機器に接続または挿入可能なメモリステイックまたは他のメモリユニットのような差し替え可能なユニットとすることも可能である。
【００６４】
画像情報は第１または第２ストリームの中に、動画、または静止画と動画の両方の組み合わせとして提供することが出来る。
【００６５】
第２メディアストリームの音声情報の処理は、同じストリームの画像情報の処理より時間が掛かるが、これは、同期した情報を含む出力２メディアストリームを得るために、第２メディアストリームの画像情報は音声情報との関係において遅延される必要があるからである。
【００６６】
第２メディアストリームは、さらに多くの異なるコードのいずれかを用いてコード化された音声および画像情報を含む。第１および第２合成ユニットは、さらに重畳された音声情報とブレンディングされた画像情報を多くの異なるフォーマットにコード化するコード化能力を有する。
【００６７】
他の実施例によれば、単一のメディアストリーム生成ユニットからの単一の混合された第１メディアストリームとして、第１メディアストリームは提供される。この場合、音声情報と画像情報とを別々に合成するステップの前に、付加的なユニットとしてこの混合されたメディアストリームを分解するデマルチプレックスユニットが必要である。
【００６８】
他の実現可能な変形例は、この方法のステップを異なる順序で実行することにある。
【００６９】
さらに、２つ以上の異なる型式の情報を持つ出力メディアストリームを形成するのと同様に、２つ以上のメディアストリームから出力メディアストリームを形成することが可能である。さらに、マルチメディアストリームからの情報を合成することで、出力メディアストリームを形成することが可能である。
【００７０】
本発明のさらに他の実施例においては、第１および第２リアルタイムメディアストリームは合成される。この場合、第２メディアストリームはリアルタイムで携帯通信機器に提供される。この実施例の１例は、たとえば携帯機器の前面に設置されたカメラからの１のリアルタイムメディアストリームと、たとえば携帯機器の後面に設置された同じカメラからの他のリアルタイムメディアストリームとを合成することである。異なる、あるいは反対の方向に定められた２つのカメラと共に、たとえば観光スポットの前に立って、腕を伸ばして手に携帯機器を保持することは、音声および画像情報を含む自分のメディアストリームを、自分が現在いる場所、すなわち観光スポットの音声および画像を含む第２メディアストリームに合成するのを可能とする。このように、たとえば２番目の人を探すことを必要とせず、音声および画像情報を含むリアルタイムストリームに自分自身を含ませるのは簡単であり、便利である。
【００７１】
前記するように、本発明は、第１メディアストリームを第２メディアストリームに混合することにより、リアルタイムで出力メディアストリームを形成する方法および機器である。
【００７２】
メディアストリームの混合の提供は、たとえば多くの魅力ある機能を提供する。
【００７３】
別に映像カメラ画像を通信相手に送る代わりに、携帯機器のユーザは先に録画された映像に声または音声情報を混合して、先に録画された映像または音声を送信することが可能である。この混合はリアルタイムですぐに実行されるので、受信相手は、ユーザが実際居る所とは異なる、例えば贅沢な休暇リゾート地等の他の場所に居る印象を受けると思う。  ユーザの顔を先に録画された映像に混合するなど、動く画像情報を混合することによって、この効果はさらに強調される。
【００７４】
これは、たとえば、通信相手がセキュリティの理由からその場所を見ることが許されない場合等の他の状況でも応用できる。
【００７５】
ビデオ電話の呼び出しを受けた時、ユーザは呼び出し相手にカメラからのリアルタイムビデオカメラ画像を送信する代わりに、メモリに蓄積され動画像または静止画像を含む録画された映像応答メッセージを再生するように決めることが可能である。この特徴は、この様に携帯映像応答装置として用いることが出来る。ユーザは生の映像カメラをＯＮとしようとは思わないかも知れないので、ＶＴ呼び出し応答し、しかもまだ呼び出し相手からの写真を受信する可能性がある時、これは非常に有用である。
【００７６】
会話している間、通信機器のユーザはメデイアファイル交換の担い手として映像または静止画像等の内容情報を即時に共有することができ、同時化マルチメデイアを可能とする。
【００７７】
ＶＴセッッションのセットアップ中に宣伝広告を含ますことが可能な録画映像ファイルを送信すれば、減額された通信費用の適格性がある。
【００７８】
本発明は、同封の図面に関連してさらに詳細に説明される。
【図面の簡単な説明】
【００７９】
【図１】携帯通信機器から送信されるリアルタイムに同期出力メディアストリームを提供する方法を示し、前記出力メディアストリームは第１メディアストリームと第２メディアストリームとの混合物である。
【図２】図１の方法によって生成される同期出力メディアストリームを提供する携帯通信機器を描く。
【誤訳訂正３】
【訂正対象書類名】図面
【訂正対象項目名】図１
【訂正方法】変更
【訂正の内容】
【図１】
2007527128.tif 000001