(57)【要約】【課題】画像の任意の領域を指定して相手方に伝送する場合には、直観的に領域情報を表現することが可能で、また、遠隔地の通信相手に画像全体とその一部分の範囲情報をリアルタイムに伝送することが可能な送信装置、受信装置、およびこれらを用いた画像伝送システムを提供する。【解決手段】第１メモリ３０１に格納された元の静止画像と第２メモリに格納されたディスプレイデバイス１１２上でマウスカーソルにより指し示めされた範囲情報を含む軌跡画像とを加算して、シーケンシャルな軌跡画像群の数だけ、静止画像と軌跡画像との合成静止画像を生成する画像合成回路３０３と、画像合成回路３０３によるシーケンシャルな合成静止画像を、連続的に再生することで動画像を得、これを動画像圧縮方式に基づいてエンコードしてネットワーク１３に伝送するエンコーダ３０４とを含む送信装置３００を設ける。【選択図】　　　図２
2004145431.tif 000002
【特許請求の範囲】
【請求項１】
画像を表示する表示手段と、
上記表示手段に表示される画像を記憶する第１メモリと、
上記表示手段に表示されている画像の所望の範囲を指定する指定手段と、
上記指定手段により指し示された範囲の軌跡画像を記憶する第２メモリと、
上記第１メモリに格納された画像と上記第２メモリに格納された軌跡画像とを合成する画像合成手段と、
上記画像合成手段で合成された画像をエンコードして動画像として送出するエンコーダと
を有する送信装置。
【請求項２】
上記第１メモリに記憶される画像は静止画像であり、
上記第２メモリは、上記指定手段により指し示された範囲のシーケンシャルな軌跡画像を記憶し、
上記画像合成手段は、上記第１メモリに格納された静止画像と上記第２メモリに格納されたシーケンシャルな軌跡画像とを受けて、シーケンシャルな軌跡画像群の数だけ、静止画像と軌跡画像との合成静止画像を生成し、
上記エンコーダは、シーケンシャルな合成静止画像を、連続的に再生することで動画像を得る
請求項１記載の送信装置。
【請求項３】
元画像と指定手段により指し示された範囲の軌跡画像が合成された動画像データを受信し、受信画像を表示手段に表示する受信装置であって、
受信した動画像データをデコードするデコーダと、
上記デコーダでデコードされた画像を記憶するメモリと、
を有し、
上記メモリに記憶される元画像に軌跡画像を含む画像を上記表示手段に再生表示する
受信装置。
【請求項４】
送信装置と受信装置とを有し、送信装置から送信された画像データを受信装置で受信して表示手段に表示する画像伝送システムであって、
上記送信装置は、
画像を表示する表示手段と、
上記表示手段に表示される画像を記憶する第１メモリと、
上記表示手段に表示されている画像の所望の範囲を指定する指定手段と、
上記指定手段により指し示された範囲の軌跡画像を記憶する第２メモリと、
上記第１メモリに格納された画像と上記第２メモリに格納された軌跡画像とを合成する画像合成手段と、
上記画像合成手段で合成された画像をエンコードして動画像として送出するエンコーダと
を有し、
上記受信装置は、
送信装置による動画像データをデコードするデコーダと、
上記デコーダでデコードされた画像を記憶するメモリと、
を有し、
上記メモリに記憶される元画像に軌跡画像を含む画像を上記表示手段に再生表示する
画像伝送システム。
【請求項５】
上記送信装置において、上記第１メモリに記憶される画像は静止画像であり、
上記第２メモリは、上記指定手段により指し示された範囲のシーケンシャルな軌跡画像を記憶し、
上記画像合成手段は、上記第１メモリに格納された静止画像と上記第２メモリに格納されたシーケンシャルな軌跡画像とを受けて、シーケンシャルな軌跡画像群の数だけ、静止画像と軌跡画像との合成静止画像を生成し、
上記エンコーダは、シーケンシャルな合成静止画像を、連続的に再生することで動画像を得る
請求項４記載の画像伝送システム。
【発明の詳細な説明】
【０００１】
【発明の属する技術分野】
本発明は、たとえばコンピュータ画像信号を、ネットワークを介して相手方に任意の画像全体とその一部分を指で指し示すかのように指定して伝送する送信装置、この伝送信号を受信する受信装置、およびこれらを用いた画像伝送システムに関するものである。
【０００２】
【従来の技術】
現在のコンピュータの画像データは精細度が上がる一方で、表示素子の解像度も着実に上がってきている。
これらの技術の傾向から、たとえば近年コンピュータの画像信号を液晶プロジェクタに入力し、これを用いて投射しプレゼンテーションを行うことが盛んになってきている。
【０００３】
このように、コンピュータ画像信号を、ネットワークを介して相手方に任意の画像全体とその一部分を指で指し示すかのように指定して伝送する伝送システムにおいては、たとえば図４（Ａ）に示すようなコンピュータ画像の任意の一部、すなわち、指し示したい範囲を、図４（Ｂ）に示すように、カーソルの軌跡として指し示す。
そして、ネットワークを介して画像全体とその指し示す範囲の情報を通信相手に伝送し、受信側でデコードする。
【０００４】
図５は、従来の画像伝送システムの送信側および受信側の基本的な構成例を説明するための図である。
【０００５】
この画像伝送システム１は、伝送元である送信装置２、伝送先である受信装置３、および送信装置２と受信装置３が接続されるネットワーク４を有している。
【０００６】
送信装置２は、図示しないディスプレイ上で指し示した元の静止画像を記憶する第１メモリ２１と、図示しないディスプレイ上で指し示めされた範囲情報を記憶する第２メモリ２２と、第１メモリ２１の元の静止画像をエンコードしネットワーク４に送出するエンコーダ２３と、第２メモリ２２の指し示めされた範囲情報をたとえば数学的表現でデータ化してネットワーク４に送出するデータ化回路２４を有している。
【０００７】
受信装置３は、ネットワーク４を介した送信装置２のエンコーダ２３による元の静止画像をデコードするデコーダ３１と、ネットワーク４を介した送信装置２のデータ化回路２４による指し示めされた部分を描画する描画部３２と、デコーダ３１による元の静止画像と描画部３２による部分データとを合成する画像合成回路３３と、図示しないディスプレイ上に表示すべき合成画像を格納するメモリ３４を有している。
【０００８】
以上の構成を有する画像伝送システムでは、画像全体の情報と、その一部分の範囲を、数学的表現を使って簡潔化された情報との２つの情報を別々に伝送する。
【０００９】
【発明が解決しようとする課題】
上述した従来の画像伝送システムでは、送信装置２からネットワーク４上を流れるデータ量はかなり小さくなる反面、伝送相手である受信装置３の画像の範囲指定部分が多少直観的ではなくなることが多い。
【００１０】
本発明は、かかる事情に鑑みてなされたものであり、その目的は、画像の任意の領域を指定して相手方に伝送する場合には、直観的に領域情報を表現することが可能で、また、遠隔地の通信相手に画像全体とその一部分の範囲情報をリアルタイムに伝送することが可能な送信装置、受信装置、およびこれらを用いた画像伝送システムを提供することにある。
【００１１】
【課題を解決するための手段】
上記目的を達成するため、本発明の第１の観点に係る送信装置は、画像を表示する表示手段と、上記表示手段に表示される画像を記憶する第１メモリと、上記表示手段に表示されている画像の所望の範囲を指定する指定手段と、上記指定手段により指し示された範囲の軌跡画像を記憶する第２メモリと、上記第１メモリに格納された画像と上記第２メモリに格納された軌跡画像とを合成する画像合成手段と、上記画像合成手段で合成された画像をエンコードして動画像として送出するエンコーダとを有する。
【００１２】
本発明の第２の観点に係る受信装置は、元画像と指定手段により指し示された範囲の軌跡画像が合成された動画像データを受信し、受信画像を表示手段に表示する受信装置であって、受信した動画像データをデコードするデコーダと、上記デコーダでデコードされた画像を記憶するメモリと、を有し、上記メモリに記憶される元画像に軌跡画像を含む画像を上記表示手段に再生表示する。
【００１３】
本発明の第３の観点に係る画像伝送システムは、送信装置と受信装置とを有し、送信装置から送信された画像データを受信装置で受信して表示手段に表示する画像伝送システムであって、上記送信装置は、画像を表示する表示手段と、上記表示手段に表示される画像を記憶する第１メモリと、上記表示手段に表示されている画像の所望の範囲を指定する指定手段と、上記指定手段により指し示された範囲の軌跡画像を記憶する第２メモリと、上記第１メモリに格納された画像と上記第２メモリに格納された軌跡画像とを合成する画像合成手段と、上記画像合成手段で合成された画像をエンコードして動画像として送出するエンコーダとを有し、上記受信装置は、送信装置による動画像データをデコードするデコーダと、上記デコーダでデコードされた画像を記憶するメモリと、を有し、上記メモリに記憶される元画像に軌跡画像を含む画像を上記表示手段に再生表示する。
【００１４】
好適には、上記送信装置において、上記第１メモリに記憶される画像は静止画像であり、上記第２メモリは、上記指定手段により指し示された範囲のシーケンシャルな軌跡画像を記憶し、上記画像合成手段は、上記第１メモリに格納された静止画像と上記第２メモリに格納されたシーケンシャルな軌跡画像とを受けて、シーケンシャルな軌跡画像群の数だけ、静止画像と軌跡画像との合成静止画像を生成し、上記エンコーダは、シーケンシャルな合成静止画像を、連続的に再生することで動画像を得る。
【００１５】
本発明によれば、送信装置において、たとえば静止画像が第１メモリに展開され、表示手段に静止画像が表示される。
ここで、操作者が、マウス等の指示手段を用いて表示手段上の画像のうちの指定したい範囲をなぞる。
送信装置では、この軌跡が軌跡画像としてサンプリングされ、シーケンシャルな画像群が生成される。
次に、第１メモリに格納されている静止画像と、第２メモリにシーケンシャルに格納される軌跡画像群とにより、画像合成手段において、合成静止画像がシーケンシャルな軌跡画像データの数だけ生成される。
画像合成手段において生成された合成静止画像は、順次にエンコーダに供給される。
エンコーダにおいては、画像合成手段によるシーケンシャルな合成静止画像が、連続的に再生されることで動画像が得られる。そして、所定の動画像圧縮方式に基づいてエンコードされて受信装置に送信される。
【００１６】
受信装置においては、送信装置のエンコーダによる動画像がデコードされ、メモリに格納される。
そして、メモリに記憶される元画像に軌跡画像を含む画像が表示手段に再生表示される。
【００１７】
【発明の実施の形態】
図１は、本発明に係る画像伝送システムの一実施形態を示す概念図である。
【００１８】
本画像伝送システム１０は、図１に示すように、伝送元となる第１のコンピュータシステム１１、伝送先となる第２のコンピュータシステム１２、およびネットワーク１３とを有する。
なお、第１のコンピュータシステム１１と第２のコンピュータシステム１２をネットワーク１３を通して画像データ等の授受が可能であり、送信機能および受信機能を備えた同様の構成を有するものであるが、本実施形態においては、説明の簡単化および本発明の理解を容易にするために、第１のコンピュータシステム１１を伝送元とし、第２のコンピュータシステム１２を伝送先に限定して説明する。
【００１９】
第１のコンピュータシステム１１は、コンピュータ本体１１１、ディスプレイデバイス（表示装置）１１２、キーボード１１３、および範囲指定手段としてのマウス１１４を有する。
第１のコンピュータシステム１１では、本体１１１の制御によりディスプレイデバイス１１２に表示されている画像の所望の範囲をマウス１１４を用いて指定したい範囲をなぞることにより、本体１１１において、画像全体とマウスカーソルを含む画像とを合成し、これを動画像に変換して、ネットワーク１３に伝送する。
【００２０】
第２のコンピュータシステム１２は、コンピュータ本体１２１、ディスプレイデバイス（表示装置）１２２、キーボード１２３、およびマウス１２４を有する。
第２のコンピュータシステム１２では、本体１２１によりネットワーク１３を伝送された第１のコンピュータシステムによる動画像を受信して、デコードし、ディスプレイデバイス１２２に再生表示する。
【００２１】
図２は、本実施形態に係る第１のコンピュータシステムの送信装置および第２のコンピュータシステムの受信装置の基本的な構成例を示すブロック図である。
【００２２】
第１のコンピュータシステム１１の送信装置３００は、本体１１１に設けられている。
送信装置３００は、図２に示すように、第１メモリ３０１、第２メモリ３０２、画像合成回路３０３、およびエンコーダ３０４を有する。
【００２３】
第１メモリ３０１は、ディスプレイデバイス１１２上に表示された元の静止画像を記憶する。
【００２４】
第２メモリ３０２は、ディスプレイデバイス１１２上でマウスカーソルにより指し示めされた範囲のシーケンシャルな軌跡画像を記憶する。
【００２５】
画像合成回路３０３は、第１メモリ３０１に格納されたディスプレイデバイス１１２上に表示された元の静止画像と第２メモリに格納されたディスプレイデバイス１１２上でマウスカーソルにより指し示めされた範囲情報を含む軌跡画像とを加算して合成する。
画像合成回路３０３は、シーケンシャルな軌跡画像群の数だけ、静止画像とシ軌跡画像との合成静止画像を生成する。
【００２６】
エンコーダ３０４は、画像合成回路３０３によるシーケンシャルな合成静止画像を、連続的に再生することで動画像を得、これを動画像圧縮方式、たとえばＭＰＥＧ（Ｍｏｖｉｎｇ　Ｐｉｃｔｕｒｅ　Ｅｘｐｅｒｔｓ　Ｇｒｏｕｐ）４に基づいてエンコードしてネットワーク１３に伝送する。
【００２７】
第２のコンピュータシステム１２の受信装置４００は、本体１２１に設けられている。
受信装置４００は、図２に示すように、デコーダ４０１、およびメモリ４０２を有する。
【００２８】
デコーダ４０１は、ネットワーク１３を介した送信装置３００のエンコーダ３０４による動画像をデコードする。
【００２９】
メモリ４０２は、デコーダ４０１でデコードされた動画像を記憶する。
【００３０】
本体１２１は、このメモリ４０２に記憶される元画像に軌跡画像を含む画像をディスプレイデバイス１２２に再生表示する。
【００３１】
次に、上記構成による動作を、図３に関連付けて説明する。
【００３２】
まず、第１のコンピュータシステム１１において、静止画像がＶＲＡＭである第１メモリ４０１に展開され、コンピュータ本体１１１の制御の下、ディスプレイデバイス１１２に、たとえば図３（Ａ）に示すような、静止画像が表示される。
また、第２のコンピュータシステム１２においても、コンピュータ本体１２１の制御の下、ディスプレイデバイス１２２に、たとえば図３（Ａ）に示す画像と同様の静止画像が表示される。
すなわち、同一画面を見ながら、遠隔地同士の会議等が行われる。
【００３３】
ここで、伝送元の第１のコンピュータシステム１１側において、操作者が、マウス１１４を用いて、図３（Ｂ）に示すように、ディスプレイデバイス１１２の画面上のマウスカーソルＣＳＬを動かし、ディスプレイデバイス１２２に表示されている画像のうちのに指定したい範囲をなぞる。
コンピュータ本体１１１は、マウス１１４の動きからマウスカーソルＣＳＬの軌跡を軌跡画像としてサンプリングし、シーケンシャルな画像群にする。
たとえば図３（Ｂ）に示すように、ｎ個サンプリングした場合には、ｉ＝１，２，３，４，…，ｎとして軌跡画像を生成する。
【００３４】
次に、第１メモリ３０１に格納されている静止画像と、第２メモリ３０２にシーケンシャルに格納される軌跡画像群とにより、画像合成回路３０３において、図３（Ｃ）に示すように、合成静止画像をシーケンシャルな軌跡画像データの数だけ生成する。
たとえば図３（Ｃ）に示すように、ｊ＝１，２，３，４，…，ｎとして合成静止画像を生成する。
画像合成回路３０３において生成された合成静止画像は、順次にエンコーダ３０４に供給される。
【００３５】
エンコーダ３０４においては、画像合成回路３０３によるシーケンシャルな合成静止画像を、連続的に再生することで動画像が得られる。そして、所定の動画像圧縮方式に基づいてエンコードされてネットワーク１３を介して第２のコンピュータシステム１２の本体１２１の受信装置４００に伝送される。
【００３６】
受信装置４００のデコーダ４０１においては、ネットワーク１３を介した送信装置３００のエンコーダ３０４による動画像がデコードされ、メモリ４０２に格納される。
そして、第２のコンピュータシステム１２においては、本体１２１が、このメモリ４０２に記憶される元画像に軌跡画像を含む画像をディスプレイデバイス１２２に再生表示する。
【００３７】
以上説明したように、本実施形態によれば、伝送元となる第１のコンピュータシステム１１と伝送先となる第２のコンピュータシステム１２を有し、第１のコンピュータシステム１１は、ディスプレイデバイス１１２上に表示された元の静止画像を記憶する第１メモリ３０１と、ディスプレイデバイス１１２上でマウスカーソルにより指し示めされた範囲のシーケンシャルな軌跡画像を記憶する第２メモリ３０２と、第１メモリ３０１に格納されたディスプレイデバイス１１２上に表示された元の静止画像と第２メモリに格納されたディスプレイデバイス１１２上でマウスカーソルにより指し示めされた範囲情報を含む軌跡画像とを加算して、シーケンシャルな軌跡画像群の数だけ、静止画像と軌跡画像との合成静止画像を生成する画像合成回路３０３と、画像合成回路３０３によるシーケンシャルな合成静止画像を、連続的に再生することで動画像を得、これを動画像圧縮方式に基づいてエンコードしてネットワーク１３に伝送するエンコーダ３０４とを含む送信装置３００を有し、第２のコンピュータシステム１２は、ネットワーク１３を介した送信装置３００のエンコーダ３０４による動画像をデコードするデコーダ４０１と、デコーダ４０１でデコードされた動画像を記憶するメモリ４０２とを含み、メモリ４０２に記憶される元画像に軌跡画像を含む画像をディスプレイデバイス１２２に再生表示する受信装置４００とを有することから、以下の効果を得ることができる。
【００３８】
すなわち、画像の任意の領域を指定して相手方に伝送する場合には、直観的に領域情報を表現することが可能である。
また、遠隔地の通信相手に画像全体とその一部分の範囲情報をリアルタイムに伝送することが可能となる利点がある。
【００３９】
なお、本実施形態においては、静止画像に対する部分範囲指定システムについて述べたが、静止画像ではなく、動画像に対しても同様の方法によって直観的でわかりやすい範囲指定表現を行うことができる。
また、部分範囲指定の軌跡画像群と静止画像あるいは動画像との合成時に種々の合成効果、たとえば、フェードイン効果や反転合成などを使うとこにより、さらに表現力を増やすことが可能である。
さらに、このような合成効果を伝送元であらかじめ施すことにより、ネットワーク上のデータ負荷の軽減と伝送先での処理システムの簡素化に伴う処理時間の短縮によって、さらにリアルタイム性の向上を図ることができる。
【００４０】
【発明の効果】
以上説明したように、本発明によれば、画像の任意の領域を指定して相手方に伝送する場合には、直観的に領域情報を表現することが可能である。
また、遠隔地の通信相手に画像全体とその一部分の範囲情報をリアルタイムに伝送することが可能となる利点がある。
【図面の簡単な説明】
【図１】本発明に係る画像伝送システムの一実施形態を示す概念図である。
【図２】本実施形態に係る第１のコンピュータシステムの送信装置および第２のコンピュータシステムの受信装置の基本的な構成例を示すブロック図である。
【図３】本実施形態の動作を説明するための図である。
【図４】コンピュータ画像信号を、ネットワークを介して相手方に任意の画像全体とその一部分を指で指し示すかのように指定して伝送する方法を説明するための図である。
【図５】従来の伝送システムの送信側および受信側の基本的な構成例を説明するための図である。
【符号の説明】
１０…画像伝送システム、１１…第１のコンピュータシステム、１１１…コンピュータ本体、１１２…ディスプレイデバイス、１１３…キーボード、１１４…マウス、１２…第２のコンピュータシステム、１２１…コンピュータ本体、１２２…ディスプレイデバイス、１２３…キーボード、１２４…マウス、３００…送信装置、３０１…第１メモリ、３０２…第２メモリ、３０３…画像合成回路、３０４…エンコーダ、４００…受信装置、４０１…デコーダ、４０２…メモリ。
【図１】
2004145431.tif 000003
【図２】
2004145431.tif 000004
【図３】
2004145431.tif 000005
【図４】
2004145431.tif 000006
【図５】
2004145431.tif 000007