(57)【要約】【課題】テレビ会議システム等において、遠隔地間を実際に移動して会議を行う場合に比して経済的負担を軽減する。【解決手段】ビジュアル双方向リアルタイム通信を行うための、他の端末とデータの送受が可能な端末であって、画像情報、文字情報、音声情報の少なくともいずれか１つの蓄積が可能な記憶手段と、画像情報、文字情報、音声情報の少なくともいずれか１つの入力手段と、画像情報、文字情報の表示、音声情報の再生、の少なくともいずれか１つのための表示・再生手段と、入力手段から入力された追加情報を単独で、或いは、画像情報、文字情報、音声情報の少なくともいずれか１つと関連付けて記憶手段に格納する追加情報格納手段と、他の端末から送信された画像情報、文字情報、音声情報、追加情報、の少なくともいずれか１つを、端末の前記表示・再生手段に表示・再生することを可能とする情報交換手段を備える端末。【選択図】図３
2007116527.tif 000002
【特許請求の範囲】
【請求項１】
他の端末とデータの送受が可能な第１の端末と、
前記第１の端末とデータの送受が可能な第２の端末と、
を備えるビジュアル双方向リアルタイム通信システムであって、
前記第１の端末、及び、前記第２の端末はともに、
画像情報、文字情報、音声情報、の少なくともいずれか１つの蓄積が可能な記憶手段と、
画像情報、文字情報、音声情報、の少なくともいずれか１つの入力手段と、
前記画像情報の表示、前記文字情報の表示、前記音声情報の再生、の少なくともいずれか１つのための表示・再生手段と、
前記入力手段から入力された追加情報を単独で、或いは、前記画像情報、前記文字情報、前記音声情報の少なくともいずれか１つと関連付けて前記記憶手段に格納する追加情報格納手段と、
前記第１の端末、及び、前記第２の端末のいずれからも、いずれの端末の記憶手段に格納されている前記画像情報、前記文字情報、前記音声情報、前記追加情報、の少なくともいずれか１つを、自己の端末の前記表示・再生手段に表示・再生することを可能とする情報交換手段
を備える、
ビジュアル双方向リアルタイム通信システム。
【請求項２】
他の端末とデータの送受が可能な第１の端末と、
前記第１の端末とデータの送受が可能な第２の端末と、
を備えるビジュアル双方向リアルタイム通信システムであって、
前記第１の端末、及び、前記第２の端末はともに、
画像情報、文字情報、音声情報、の少なくともいずれか１つの蓄積が可能な記憶手段と、
画像情報、文字情報、音声情報、の少なくともいずれか１つの入力手段と、
前記画像情報の表示、前記文字情報の表示、前記音声情報の再生、の少なくともいずれか１つのための表示・再生手段と、
自己の表示・再生手段に表示・再生された画像情報、文字情報、音声情報、前記入力手段から入力された追加情報、の少なくともいずれか１つを相手端末に伝送することによって、相手端末の表示・再生手段に表示・再生する、ミラーリング手段、
を備えるビジュアル双方向リアルタイム通信システム。
【請求項３】
前記各端末の一方の端末で表示・再生されている前記画像情報、前記文字情報、前記音声情報、前記追加情報の少なくともいずれか１つが、前記一方の端末のタイミング信号発生手段により発生した信号に基づき前記一方の端末の記憶手段に格納される、請求項１又は２に記載のビジュアル双方向リアルタイム通信システム。
【請求項４】
前記各端末の一方の端末におけるタイミング信号が発生した時刻、その時点での他方の端末のＩＤ情報、前記一方の端末の表示画像の属性の少なくとも１つを、前記画像情報、前記文字情報、前記音声情報、前記追加情報の少なくともいずれか１つと対応付けた識別情報として前記一方の端末の記憶手段に格納する、識別情報付与手段を有する、請求項３に記載のビジュアル双方向リアルタイム通信システム。
【請求項５】
他の端末とデータの送受が可能な第１の端末と、
前記第１の端末とデータの送受が可能な第２の端末と、
を備えるビジュアル双方向リアルタイム通信システムであって、
前記第１の端末、及び、前記第２の端末はともに、
画像情報、文字情報、音声情報の、少なくともいずれか１つの入力手段と、
画像情報の表示、文字情報の表示、音声情報の再生、の少なくともいずれか１つのための表示・再生手段と、
を備え、
前記各端末の少なくとも一方は、
前記各端末の他方端末への送出用データを圧縮可能な送出データ準備手段と、
前記各端末の他方端末にて表示されるべきデータの状態をモニタする他方端末表示状態モニタ手段と、
を備える、
ビジュアル双方向リアルタイム通信システム。
【請求項６】
前記他方端末表示状態モニタ手段が、
前記送出データ準備手段により準備された前記他方端末への送出用データを前記一方端末の表示・再生手段へ渡す送出用データ転送手段、
を備える、請求項５に記載のビジュアル双方向リアルタイム通信システム。
【請求項７】
前記他方端末が、前記一方端末から送出されたデータの他方端末における受信状態を、他方端末から前記一方端末に返送する受信状態返送手段を備え、
前記他方端末表示状態モニタ手段が、
前記受信状態返送手段により、前記他方端末から前記一方端末に返送された他方端末の受信状態データを前記一方端末の表示・再生手段へ渡す、受信状態データ転送手段、
を備える、請求項５に記載のビジュアル双方向リアルタイム通信システム。
【請求項８】
他の端末とデータの送受が可能な第１の端末と、
前記第１の端末とデータの送受が可能な第２の端末と、
を備えるビジュアル双方向リアルタイム通信システムであって、
前記第１の端末、及び、前記第２の端末はともに、画像情報の表示、文字情報の表示、音声情報の再生、の少なくともいずれか１つのための表示・再生手段と、
鍵情報の入力手段と、
前記入力手段から入力された鍵情報に基づき他端末へ送出するデータを撹乱する手段と、
自己端末で受信した攪乱データを、前記入力された鍵情報に基づき復号化して前記自己端末の表示・再生手段に与える手段と、
を備える、
ビジュアル双方向リアルタイム通信システム。
【請求項９】
請求項８記載のビジュアル双方向リアルタイム通信システムであって、
前記入力された鍵情報が正しい鍵情報ではないと判断された場合に、前記自己端末で受信した撹乱データの撹乱状態が解除されたか否かを示す情報を自己端末の表示・再生手段に与える表示・再生状態確認手段を更に含む、ビジュアル双方向リアルタイム通信システム。
【請求項１０】
３個以上の端末群を備え、当該端末群の中の任意の１個の端末を第１の端末とし、残りの端末群が、以上のいずれかの請求項に記載の第２の端末の有する構成を備える、ビジュアル双方向リアルタイム通信システム。
【請求項１１】
前記第１の端末と前記第２の端末間のデータのやり取りの少なくとも一部が、仲介端末を介して、又は、当該仲介端末の統制下で行われる、以上のいずれかの請求項に記載のビジュアル双方向リアルタイム通信システム。
【請求項１２】
前記仲介端末が、以上の請求項のいずれかに記載の、前記第１の端末又は前記第２の端末の備える手段のうち、少なくとも一部を肩代わりして備える、請求項１１に記載のビジュアル双方向リアルタイム通信システム。
【請求項１３】
ビジュアル双方向リアルタイム通信を行うための、他の端末とデータの送受が可能な端末であって、
画像情報、文字情報、音声情報の少なくともいずれか１つの蓄積が可能な記憶手段と、
画像情報、文字情報、音声情報の少なくともいずれか１つの入力手段と、
前記画像情報、文字情報の表示、音声情報の再生、の少なくともいずれか１つのための表示・再生手段と、
前記入力手段から入力された追加情報を単独で、或いは、前記画像情報、前記文字情報、前記音声情報の少なくともいずれか１つと関連付けて前記記憶手段に格納する追加情報格納手段と、
他の端末から送信された画像情報、文字情報、音声情報、追加情報、の少なくともいずれか１つを、前記端末の前記表示・再生手段に表示・再生することを可能とする情報交換手段
を備える端末。
【請求項１４】
ビジュアル双方向リアルタイム通信を行うための、他の端末とデータの送受が可能な端末であって、
画像情報、文字情報、音声情報の、少なくともいずれか１つの入力手段と
画像情報、文字情報の表示、音声情報の再生、の少なくともいずれか１つのための表示・再生手段と、
前記他の端末への送出用データを圧縮可能な送出データ準備手段と、
前記他の端末にて表示されるべきデータの状態をモニタする他方端末表示状態モニタ手段と、
を備える端末。
【請求項１５】
ビジュアル双方向リアルタイム通信を行うための、他の端末とデータの送受が可能な端末であって、
画像情報、文字情報の表示、音声情報の再生、の少なくともいずれか１つのための表示・再生手段と、
鍵情報の入力手段と、
前記入力手段から入力された鍵情報に基づき他の端末へ送出するデータを撹乱する手段と、
自己端末で受信した攪乱データを、前記入力された鍵情報に基づき復号化して前記自己端末の表示・再生手段に与える手段と、
を備える端末。
【請求項１６】
コンピュータに少なくとも、
ビジュアル双方向リアルタイム通信を行うための、他の端末とデータの送受が可能な端末としての、
画像情報、文字情報、音声情報の少なくともいずれか１つの蓄積が可能な記憶機能と、
画像情報、文字情報、音声情報の少なくともいずれか１つの入力機能と、
前記画像情報、文字情報の表示、音声情報の再生、の少なくともいずれか１つのための表示・再生機能と、
前記入力機能を用いて入力された追加情報を単独で、或いは、前記画像情報、文字情報、前記音声情報の少なくともいずれか１つと関連付けて記憶手段に格納する追加情報格納機能と、
他の端末の記憶手段に格納されている前記画像情報、前記文字情報、前記音声情報、前記追加情報、の少なくともいずれか１つを、前記端末の表示・再生手段に表示・再生することを可能とする情報交換機能、
を実現させる、ビジュアル双方向リアルタイム通信用プログラム。
【請求項１７】
コンピュータに少なくとも、
ビジュアル双方向リアルタイム通信を行うための、他の端末とデータの送受が可能な端末としての、
画像情報、文字情報、音声情報の、少なくともいずれか１つの入力機能と
画像情報、文字情報の表示、音声情報の再生、の少なくともいずれか１つのための表示・再生機能と、
前記他の端末への送出用データを圧縮可能な送出データ準備機能と、
前記他の端末にて表示されるべきデータの状態をモニタする他方端末表示状態モニタ機能と、
を実現させる、ビジュアル双方向リアルタイム通信用プログラム。
【請求項１８】
コンピュータに少なくとも、
ビジュアル双方向リアルタイム通信を行うための、他の端末とデータの送受が可能な端末としての、
画像情報、文字情報の表示、音声情報の再生、の少なくともいずれか１つのための表示・再生機能と、
鍵情報の入力機能と、
前記入力機能を用いて入力された鍵情報に基づき他の端末へ送出するデータを撹乱する機能と、
自己端末で受信した攪乱データを、前記入力された鍵情報に基づき復号化して前記自己端末の表示・再生手段に与える機能と、
を実現させる、ビジュアル双方向リアルタイム通信用プログラム。
【請求項１９】
請求項１６から１８のいずれかに記載のプログラムを記憶した情報記憶媒体。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は例えば、複数の情報端末間で情報の共有を行うビジュアル双方向リアルタイム通信システムに関する。
【背景技術】
【０００２】
＜ネットワーク打ち合わせについて＞
従来、コンピュータ端末を用いてテレビ電話会議を行う際に、各会議場所毎にサーバを用意し、当該サーバ内に別々のプロセスとしての「共有ホワイトボード装置」及び「共有資料表示装置」を包含させたシステムが知られている（特許文献１）。
この特許文献１の技術によれば、それぞれ独立した「共有ホワイトボード装置」及び「共有資料表示装置」の間での画面データ交換によって、「共有ホワイトボード装置」に書き込んだ描画データや、「共有資料表示装置」に蓄積されていた会議用の資料を、表示、蓄積、交換等、することが可能であった。
【０００３】
＜自局におけるネットワーク打ち合わせの事前検証について＞
また、従来、上述のような特許文献１のような技術が存在したが、「共有ホワイトボード装置」に描画情報等を実際に書き込んでしまった場合の、テレビ会議の相手方への表示態様等について、実際に相手方端末に表示される前に、事前に自己端末で検証する技術は少ない。
【０００４】
＜伝送レート・モニタについて＞
また、従来、テレビ電話システムにおいて、伝送画像の圧縮データについて、一定時間で伝送し得る圧縮率を設定することで、画像圧縮データの伝送時間を一定に確保しながら、画像受信側で見たい部分を自由に設定して高画質で表示する技術が開示されている（特許文献２）。
【０００５】
＜暗号化確認について＞
更に、暗号通信を必要とする機器と、いたずらされてもそれほど大きな問題とならないためコストなどの要求から暗号通信を用いない機器とがネットワークに混在した場合の区別における課題を解決すべく、各機器から、暗号機能を有するか否かを示す識別子を送出する技術が開示されている（特許文献３）。
【０００６】
【特許文献１】特開平１０−５１５８１号公報
【特許文献２】特開平１０−２５７４６１号公報
【特許文献３】特開２００５−２３６８４１号公報
【発明の開示】
【発明が解決しようとする課題】
【０００７】
＜全体的課題＞
上記各特許文献においては、実際の会議を操作性良く模擬できるようにする（特許文献１）、より小さなハードウェア規模で、送信側で撮り込んだ画像に対して受信側で見たい部分を自由に設定して表示することのできる画像送信装置、画像受信装置、画像通信システム及び画像通信方法の提供を目的とする（特許文献２）、盗聴や無秩序な送受信を行うことなく、ＡＶデータ受信を許可したＡＶデータ受信装置とＡＶデータ送信装置との間でのみ無線ＡＶデータ伝送が可能なシステムを自由に構築できるＡＶデータ無線通信システムを提供することを目的とする（特許文献３）、のような目的を持っているが、テレビ会議等において、対話者が、各自の意見を、リアルタイムでビジュアルに交換でき、実際に対面会議を行っている状態に近い、ユーザフレンドリな対話を行うまでには至っていない。
そこで、本発明においては、例えば、テレビ会議システム等において、ユーザ・フレンドリな対話を可能とし、遠隔地間を実際に移動して会議を行う場合に比して、経済的負担を軽減することを解決課題の１つとする。
【０００８】
＜ネットワーク打ち合わせについての課題＞
上記特許文献１においては、「共有ホワイトボード装置」及び「共有資料表示装置」をはっきり分離しているため、例えば、双方に含まれる画像を重畳して表示し、それを各参加者の端末の画面上で共有するようなことは不可能であった。
本発明の或る態様においては、例えば、テレビ会議システム等において、対話者間で相手方に伝えたい情報を、リアルタイムで共有し、当該共有された情報を必要に応じて格納し、将来の利用に供することを解決課題の１つとする。
【０００９】
＜自局におけるネットワーク打ち合わせの事前検証についての課題＞
テレビ会議システム等において、会議の相手方に対する提示を予定する描画情報等を書き込んだ場合の、テレビ会議の相手方への表示態様等について、実際に相手方端末に表示される前に、事前に自己端末で検証することを解決課題の１つとする。
【００１０】
＜伝送レート・モニタについての課題＞
上記特許文献２では、受信端末で要求される画像サイズ等、回線の伝送容量、伝送制限時間等から、送信可能な画面の最大圧縮率を逆算し、当該圧縮率を採用して画像伝送を行うものであるが、送信端末において、当該圧縮率で送信した場合に、どの程度の画質の劣化となるか、については考慮されていない。
そこで、本発明の或る態様においては、例えば、テレビ会議システム等において、受信端末に伝送するデータの品質を、送信端末でモニタすることを解決課題の１つとする。
【００１１】
＜暗号化確認についての課題＞
上記特許文献３では、各機器から、暗号機能を有するか否かを示す識別子を送出する技術が開示されている。しかし、テレビ会議システム等の、機密性が要求されるシステムにおいては、各端末が暗号機能を有するか否かよりも、実際に伝送されているデータが、本当に攪乱されているか、そして、受信端末においてその攪乱状態が正当な鍵によって解除されたかについて、送信端末側で確認したい、という必要性がある。
そこで、本発明の或る態様においては、例えば、テレビ会議システム等において、受信端末に伝送されるデータが本当に暗号化等によって攪乱化されているかを確認し、安心してデータ伝送することを可能とすることを解決課題の１つとする。
【課題を解決するための手段】
【００１２】
上記各課題を解決するために、本願においては、以下の各発明を提供する。
【００１３】
＜ネットワーク打ち合わせについての課題を解決するための手段＞
（発明１）
他の端末とデータの送受が可能な第１の端末と、
前記第１の端末とデータの送受が可能な第２の端末と、
を備えるビジュアル双方向リアルタイム通信システムであって、
前記第１の端末、及び、前記第２の端末はともに、
画像情報、文字情報、音声情報の少なくともいずれか１つの蓄積が可能な記憶手段と、
画像情報、文字情報、音声情報の少なくともいずれか１つの入力手段と、
前記画像情報、文字情報の表示、音声情報の再生、の少なくともいずれか１つのための表示・再生手段と、
前記入力手段から入力された追加情報を単独で、或いは、前記画像情報、文字情報、前記音声情報の少なくともいずれか１つと関連付けて前記記憶手段に格納する追加情報格納手段と、
前記第１の端末、及び、前記第２の端末のいずれからも、いずれの端末の記憶手段に格納されている前記画像情報、前記文字情報、前記音声情報、前記追加情報、の少なくともいずれか１つを、自己の端末の前記表示・再生手段に表示・再生することを可能とする情報交換手段、
を備える、
ビジュアル双方向リアルタイム通信システム。
【００１４】
この発明１によれば、ＴＶ会議等の情報交換の場面において、記憶手段内に予め用意してあった資料を参加者の端末の再生・表示手段に提示することが可能である。そして、提示された資料に対し、各参加者が、例えばライトペン等の入力手段から、提示された資料に対するコメント等の追加情報を入力し、当該追加情報が付加された画像情報も記憶手段に保存できる。また、当該提示された資料についてなされた議論の音声情報も、当該追加情報が付加された画像情報と対応付けられて、記憶手段内に格納が可能である。このような、音声情報付きの、追加情報が付加された画像情報を、電子議事録として各参加者に配布することもできる。
更に、会議終了後、記憶手段に格納された各種資料、追加情報が付加された画像情報、音声情報、等を自由に編集して、次回以降の会議に備えることもできる。
上記「画像情報、文字情報、音声情報の少なくともいずれか１つの蓄積が可能な記憶手段」と、「画像情報、文字情報、音声情報の少なくともいずれか１つの入力手段」と、「前記画像情報、文字情報の表示、音声情報の再生、の少なくともいずれか１つのための表示・再生手段」との関係について、ここで若干追加説明する。
上記「記憶手段」が蓄積可能な情報が、例えば「画像情報」のみであった場合には、上記「入力手段」は、少なくとも「画像情報」の入力が可能でなければならない。つまり、上記「記憶手段」に記憶される情報の種類と、上記「入力手段」で入力される情報の種類は対応している必要がある。
一方、上記「表示・再生手段」に表示・再生可能な情報の種類と、上記「記憶手段」に記憶、及び／又は、上記「入力手段」に入力される情報の種類は、必ずしも対応している必要はない。即ち、第１の端末では、「画像情報」の「入力手段」及び「記憶手段」のみを持ち、「表示・再生手段」は、第２の端末から送られてきた「文字情報」のみを再生可能な場合もあり得る。このような場合であっても、第１の端末から第２の端末へは、「画像情報」のみが送られ、第２の端末から第１の端末へは「文字情報」のみが送られ、そのような使用形態で、双方向の通信が可能だからである。
この点は、次の（発明２）以降の発明においても同様に妥当する。
換言すれば、発明１では、記憶手段、入力手段、表示・再生手段、は、第１と第２の端末それぞれにおいて、必ずしも両者で同一構成である必要はない。
一方の端末においては、少なくとも、
自己端末で入力する情報に対応した入力手段と表示・再生手段、
他の端末から送られてきた情報および自己の提供する情報を蓄積するための記憶手段と蓄積された情報に対応した表示・再生手段、
追加情報のための入力手段、記憶手段、表示・再生手段、
を備えていれば良い。
またこれら、各入力手段、各記憶手段、各表示手段は、物理的に別々のものでも、同一のものを共用することでもよい。
なお、本発明１においては、その作用・効果との関係上、構成要素「前記第１の端末、及び、前記第２の端末のいずれからも、いずれの端末の記憶手段に格納されている前記画像情報、前記文字情報、前記音声情報、前記追加情報、の少なくともいずれか１つを、自己の端末の前記表示・再生手段に表示・再生することを可能とする情報交換手段」が、本質的部分、或いは、重要な要素と考えられる。
【００１５】
（発明２）
他の端末とデータの送受が可能な第１の端末と、
前記第１の端末とデータの送受が可能な第２の端末と、
を備えるビジュアル双方向リアルタイム通信システムであって、
前記第１の端末、及び、前記第２の端末はともに、
画像情報、文字情報、音声情報、の少なくともいずれか１つの蓄積が可能な記憶手段と、
画像情報、文字情報、音声情報、の少なくともいずれか１つの入力手段と、
前記画像情報、文字情報の表示、音声情報の再生用の少なくともいずれか１つの表示・再生手段と、
自己の表示・再生手段に表示・再生された画像情報、文字情報、音声情報、追加情報、の少なくともいずれか１つを相手端末に伝送することによって、相手端末の表示・再生手段に表示・再生する、ミラーリング手段、
を備えるビジュアル双方向リアルタイム通信システム。
【００１６】
ここで、「ミラーリング」とは、データの複製を別の場所にリアルタイムに保存すること、及びデータをネットワーク上の他のコンピュータにコピーすることを意味する。コンピュータ用語としての「ミラーリング」は、一方向のコピーを意味することが多いが、本願発明においては、追加情報伝送を可能とした、双方向のコピーをも意味する。
ちなみに、Webサーバなどはミラーリングしたサーバを公開して負荷分散を図ったり、ネットワーク上の距離が近いコンピュータからデータを取り寄せることによってデータ転送に要する時間を短縮することができる。
ここで発明２では、記憶手段、入力手段、表示・再生手段、は、第１と第２の端末それぞれにおいて、必ずしも両者で同一構成である必要はない。
一方の端末においては、少なくとも、
自己端末で入力する情報に対応した入力手段と表示・再生手段、
他の端末から送られてきた情報および自己の提供する情報を蓄積するための記憶手段と蓄積された情報に対応した表示・再生手段、
追加情報のための入力手段、記憶手段、表示・再生手段、
を備えていれば良い。
またこれら、各入力手段、各記憶手段、各表示手段は、物理的に別々のものでも、同一のものを共用することでもよい。
【００１７】
（発明３）
前記各端末の一方の端末で表示・再生されている前記画像情報、前記文字情報、前記音声情報、前記追加情報の少なくともいずれか１つが、前記一方の端末のタイミング信号発生手段により発生した信号に基づき前記一方の端末の記憶手段に格納される、（発明１）又は（発明２）に記載のビジュアル双方向リアルタイム通信システム。
【００１８】
（発明３−１）
前記一方の端末のタイミング信号は、
（１）前記一方の端末の入力手段からの入力信号、
（２）予め設定された所定の時刻、
（３）所定の時間間隔
の少なくともいずれか一つに基づいて発生する
発明３に記載のビジュアル双方向リアルタイム通信システム。
【００１９】
（発明３−２）
前記一方の端末の入力手段からの入力信号は、
前記一方の端末の表示画面上の所定のアイコンをクリックすること、又は、キーボードからの入力操作、により与えられる、発明３−１に記載のビジュアル双方向リアルタイム通信システム。
【００２０】
（発明３−３）
前記の、予め設定された所定の時刻、又は、所定の時間間隔で発生すること、には、端末の使用終了時に発生すること、が含まれる発明３−１に記載のビジュアル双方向リアルタイム通信システム。
【００２１】
（発明４）
前記各端末の一方の端末におけるタイミング信号が発生した時刻、その時点での他方の端末のＩＤ情報、前記一方の端末の表示画像の属性の少なくとも１つを、前記画像情報、前記文字情報、前記音声情報、前記追加情報の少なくともいずれか１つと対応付けた識別情報として前記一方の端末の記憶手段に格納する、識別情報付与手段を有する、発明３に記載のビジュアル双方向リアルタイム通信システム。
【００２２】
発明４により、対話中の
（１）打ち合わせプロセス確認,（２）追記入力，
が非常に容易になる。
ここで、打ち合わせプロセス確認とは、打ち合わせ中、又は、打ち合わせ終了後に、過去を振り返って、どのような打ち合わせの進行経過であったかを、各対話者が提示した画像・文字情報等の時間経過に従って確認することである。上記構成のようにすることによって、他端末の操作者のＩＤ情報、タイミング信号発生時刻、表示画像の属性、等をキーとして、提示された画像・文字情報等をソーティングすることが容易となる。他端末の操作者のＩＤ情報とは、他端末のＩＰアドレス、他端末の操作者のログイン名などを含む。
また、追記入力とは、打ち合わせの進行中に提示された画像・文字情報等に対して、マウス、キーボード、マイク等によってメモが付加でき、後に、更に、別のメモの付加が可能である、という意味である。タイミング信号発生時刻をキーとして、その付加されたメモの時間的付加過程を追跡することによって、付加されたメモを、時系列で把握・整理することが容易となる。
【００２３】
（発明４−１）
前記一方の端末の表示画像の属性には、動画／静止画の区別、テキスト文書を含むか否か、グラフ／表を含むか否か、追加情報が含まれるか、のいずれか少なくとも１つが含まれる、発明４に記載のビジュアル双方向リアルタイム通信システム。
【００２４】
＜自局におけるネットワーク打ち合わせの事前検証、及び、伝送レート・モニタについての課題を解決するための手段＞
【００２５】
（発明５）
他の端末とデータの送受が可能な第１の端末と、
前記第１の端末とデータの送受が可能な第２の端末と、
を備えるビジュアル双方向リアルタイム通信システムであって、
前記第１の端末、及び、前記第２の端末はともに、
画像情報、文字情報、音声情報の、少なくともいずれか１つの入力手段と、
画像情報、文字情報の表示、音声情報の再生、の少なくともいずれか１つのための表示・再生手段と、
を備え、
前記各端末の少なくとも一方は、
前記各端末の他方端末への送出用データを圧縮可能な送出データ準備手段と、
前記各端末の他方端末にて表示されるべきデータの状態をモニタする他方端末表示状態モニタ手段と、
を備える、
ビジュアル双方向リアルタイム通信システム。
【００２６】
ここで発明５では、記憶手段、入力手段、表示・再生手段、は、第１と第２の端末それぞれにおいて、必ずしも両者で同一構成である必要はない。
一方の端末においては、少なくとも、
自己端末で入力する情報に対応した入力手段と表示・再生手段、
他の端末から送られてきた情報および自己の提供する情報を蓄積するための記憶手段と蓄積された情報に対応した表示・再生手段、
追加情報のための入力手段、記憶手段、表示・再生手段、
を備えていれば良い。
またこれら、各入力手段、各記憶手段、各表示手段は、物理的に別々のものでも、同一のものを共用することでもよい。
この発明５によれば、自己端末から他端末に、データを伝送する場合に、当該他端末で受信されたデータがどのように表示されるかが自己端末上でチェックできる。
なお、本発明５においては、その作用・効果との関係上、構成要素「前記各端末の他方にて表示されるべきデータの状態」を「モニタ」する「他方端末表示状態モニタ手段」が、本質的部分、或いは、重要な要素と考えられる。
【００２７】
（発明６／７）
（Ａ）前記他方端末表示状態モニタ手段は、前記送出データ準備手段により準備された前記他方端末への送出用データを前記一方端末の表示・再生手段へ渡す送出用データ転送手段を備える、
または、
（Ｂ）前記他方端末表示状態モニタ手段が、前記一方端末から送出されたデータを前記一方端末で再度受信し、前記一方端末の表示・再生手段へ送る手段を備える、
または、
（Ｃ）前記他方端末が、前記一方端末から送出されたデータの他方端末における受信状態を、前記他方端末から前記一方端末に送る受信状態返送手段を備え、
前記他方端末表示状態モニタ手段が、前記受信状態返送手段により、前記他方端末から前記一方端末に返送された他方端末の受信状態データを前記一方端末の表示・再生手段へ渡す、受信状態転送手段、を備える、
または、
（Ｄ）前記他方端末が、前記一方端末から受信したデータが前記他方端末の表示・再生手段で表示・再生された際の表示・再生状態データを前記一方端末に送る表示・再生状態返送手段を備え、
前記他方端末表示状態モニタ手段が、前記表示・再生状態返送手段により前記一方端末に返送された他方端末の前記表示・再生状態データを前記一方端末の表示手段へ送る手段を備える、
発明５記載のビジュアル双方向リアルタイム通信システム。
【００２８】
本発明６／７によれば、データを圧縮して伝送する場合に、当該圧縮の圧縮率の程度によって、自己端末内での圧縮された状態での表示・再生状態の把握、自己端末から送出された後の圧縮された状態での表示・再生状態の把握、受信端末での表示・再生状態の把握がチェックできる。
より詳しい、段階的効果としては、上記（Ａ）から（Ｄ）へと追加の構成要件を変化させることによって、
（上記Ａ）：送出用データ準備手段による劣化を確認可能である。自己端末で表示・再生するデータは、他端末への伝送用するために準備された「圧縮前のもの」「圧縮後に伸張したもの」更には「暗号化したもの」「暗号化した後に、自己端末上で解除したもの」のいずれでも良い。
（上記Ｂ）：（Ａ）に加え、ネットワークの状態による劣化も加味して確認可能である。
（上記Ｃ）：（Ｂ）に加え第２端末へ届いた時点までの劣化も加味して確認可能である。この態様には、「他方端末に届いたデータをそのまま送信側端末に戻して表示・再生する」こと、「他方端末に届いたデータを受け取った後、元データと比較して、その結果を表示・再生する」こと等を含む。
（上記Ｄ）：（Ｃ）に加え第２端末での表示状態も加味して直接確認可能である。
というメリットが得られる。
勿論、発明６／７のように「または」ではなく、上記（Ａ）から（Ｄ）の構成を重畳的に備えても良い。
一方、デメリットも存在することは否めない。即ち、（Ａ）から（Ｄ）へ行くほど、遅延時間が大きくなる。
従って、モニタしたい目的に合わせて（Ａ）から（Ｄ）は選択すれば良い。
【００２９】
＜暗号化確認についての課題を解決するための手段＞
（発明８）  他の端末とデータの送受が可能な第１の端末と、
前記第１の端末とデータの送受が可能な第２の端末と、
を備えるビジュアル双方向リアルタイム通信システムであって、
前記第１の端末、及び、前記第２の端末はともに、前記画像情報、前記文字情報の表示、音声情報の再生、の少なくともいずれか１つのための表示・再生手段と、
鍵情報の入力手段と、
前記入力手段から入力された鍵情報に基づき他端末へ送出するデータを撹乱する手段と、
自己端末で受信した攪乱データを、前記入力された鍵情報に基づき復号化して前記自己端末の表示・再生手段に与える手段と、
を備える、
ビジュアル双方向リアルタイム通信システム。
【００３０】
この発明８によれば、自己端末から他端末に、データを撹乱して伝送する場合に、当該他端末において、データが撹乱されたままの状態での受信がまず確認できる。そして、当該他端末で、正当な鍵情報を入力することによって、他端末から送信され自己端末で受信された攪乱データの攪乱状態が解除されて表示・再生され、これにより撹乱されたデータが正常に復号化されたことを確認できる。
このような手順を践むことによって、機密性が強く要求される現代のビジュアル双方向リアルタイム通信システムにおいて、送信データが確実に撹乱されていることが確認でき、その後、安心してデータの伝送が行える。
なお、本発明８においては、その作用・効果との関係上、構成要素「自己端末から送出されるデータを撹乱するデータ撹乱手段」及び「自己端末で受信した攪乱データを復号化して前記表示・再生手段に与える手段」が、本質的部分、或いは、重要な要素と考えられる。
【００３１】
（発明９）
請求項８記載のビジュアル双方向リアルタイム通信システムであって、
前記入力された鍵情報が正しい鍵情報ではないと判断された場合に、前記自己端末で受信した撹乱データの撹乱状態が解除されたか否かを示す情報を自己端末の表示・再生手段に与える表示・再生状態確認手段を更に含む、ビジュアル双方向リアルタイム通信システム。
発明８のような構成とすることによって、自己端末から、撹乱されたデータが送出され、受信端末において、まず、撹乱状態のデータが受信され、次に、受信端末で、正しい鍵情報によって撹乱が解除されたことが確認でき、送信端末において、受信端末の相手が、正当な相手であることが確認できる。
「撹乱データの撹乱状態が解除されたか否かを示す情報を表示・再生手段に与える」とは、「撹乱が解除されていないデータをそのまま表示・再生すること」だけでなく、「撹乱解除されていない音声情報は再生せずに無音状態のままとし、代わりに撹乱が解除されていない旨のアナウンスを流すこと」、「撹乱解除されていない旨の画面表示のみを出すこと」なども含む。
【００３２】
＜上記各発明のバリエーション＞
（発明１０）
３個以上の端末群を備え、当該端末群の中の任意の１個の端末を第１の端末とし、残りの端末群が、以上のいずれかの発明に記載の第２の端末の有する構成を備える、ビジュアル双方向リアルタイム通信システム。
【００３３】
このようにすることによって、講義形式で、１対多のビジュアル双方向リアルタイム通信システムが構築できる。但し、講義形式とはいっても、一方的な講義ではなく、１対多の「多」の端末側から「１」の端末側への、追加情報の伝送、伝送レート・モニタや、暗号化確認等も可能である。
【００３４】
（発明１１）
前記第１の端末と前記第２の端末間のデータのやり取りの少なくとも一部が、仲介端末を介して、又は、当該仲介端末の統制下で行われる、以上のいずれかの発明に記載のビジュアル双方向リアルタイム通信システム。
【００３５】
このようにすることによって、仲介端末によって、システム全体のトラフィックを調整したり、場合によっては、送信頻度の高い特定端末からの送信を制限したり、様々な制御が可能となるというメリットが得られる。
ここで、仲介端末には、いわゆるサーバが含まれるが、これに限定されない。複数の端末間のデータのやり取り等を仲介する端末を全て含む。
【００３６】
（発明１２）
前記仲介端末が、以上の発明のいずれかに記載の、前記第１の端末又は前記第２の端末の備える手段のうち、少なくとも一部を肩代わりして備える、発明１１に記載のビジュアル双方向リアルタイム通信システム。
【００３７】
ここで、「肩代わりして」とは、例えば、サーバが、クライアントたる、第１端末の記憶手段や,追加情報格納手段、等の機能を代替し、サーバが代替した当該機能の処理結果だけを、通信回線を通じて、第１端末に送ったりすることを含むが、これに限定されない。
【００３８】
＜ネットワーク打ち合わせ＞
（発明１３）
ビジュアル双方向リアルタイム通信を行うための、他の端末とデータの送受が可能な端末であって、
画像情報、文字情報、音声情報の少なくともいずれか１つの蓄積が可能な記憶手段と、
画像情報、文字情報、音声情報の少なくともいずれか１つの入力手段と、
前記画像情報、文字情報の表示、音声情報の再生、の少なくともいずれか１つのための表示・再生手段と、
前記入力手段から入力された追加情報を単独で、或いは、前記画像情報、前記文字情報、前記音声情報の少なくともいずれか１つと関連付けて前記記憶手段に格納する追加情報格納手段と、
他の端末から送信された画像情報、文字情報、音声情報、追加情報、の少なくともいずれか１つを、前記端末の前記表示・再生手段に表示・再生することを可能とする情報交換手段
を備える端末。
【００３９】
ここで発明１３では、記憶手段、入力手段、表示・再生手段、は、第１と第２の端末それぞれにおいて、必ずしも両者で同一構成である必要はない。
一方の端末においては、少なくとも、
自己端末で入力する情報に対応した入力手段と表示・再生手段、
他の端末から送られてきた情報および自己の提供する情報を蓄積するための記憶手段と蓄積された情報に対応した表示・再生手段、
追加情報のための入力手段、記憶手段、表示・再生手段、
を備えていれば良い。
またこれら、各入力手段、各記憶手段、各表示手段は、物理的に別々のものでも、同一のものを共用することでもよい。
この発明の端末を用いれば、ＴＶ会議等の情報交換の場面において、記憶手段内に予め用意してあった資料を参加者の端末の再生・表示手段に提示することが可能である。そして、提示された資料に対し、各参加者が、例えばライトペン等の入力手段から、提示された資料に対するコメント等の追加情報を入力し、当該追加情報が付加された画像情報も記憶手段に保存できる。また、当該提示された資料についてなされた議論の音声情報も、当該追加情報が付加された画像情報と対応付けられて、記憶手段内に格納が可能である。このような、音声情報付きの、追加情報が付加された画像情報を、電子議事録として各参加者に配布することもできる。
更に、会議終了後、記憶手段に格納された各種資料、追加情報が付加された画像情報、音声情報、等を自由に編集して、次回以降の会議に備えることもできる。
なお、本発明においては、その作用・効果との関係上、構成要素「前記第１の端末、及び、前記第２の端末のいずれからも、いずれの端末の記憶手段に格納されている前記画像情報、前記文字情報、前記音声情報、前記追加情報、の少なくともいずれか１つを、自己の端末の前記表示・再生手段に表示・再生することを可能とする情報交換手段」が、本質的部分、或いは、重要な要素と考えられる。
【００４０】
＜自局におけるネットワーク打ち合わせの事前検証、及び、伝送レート・モニタ＞
（発明１４）
ビジュアル双方向リアルタイム通信を行うための、他の端末とデータの送受が可能な端末であって、
画像情報、文字情報、音声情報の、少なくともいずれか１つの入力手段と
画像情報、文字情報の表示、音声情報の再生、の少なくともいずれか１つのための表示・再生手段と、
前記他の端末への送出用データを圧縮可能な送出データ準備手段と、
前記他の端末にて表示されるべきデータの状態をモニタする他方端末表示状態モニタ手段と、
を備える端末。
【００４１】
本発明の端末によれば、自己端末から他端末に、データを圧縮して伝送する場合に、当該圧縮の圧縮率の程度によって、自己端末内での圧縮された状態での表示・再生状態の把握、自己端末から送出された後の圧縮された状態での表示・再生状態の把握、受信端末での表示・再生状態の把握がチェックできる。
なお、本発明においては、その作用・効果との関係上、構成要素「前記各端末の他方にて表示されるべきデータの状態」を「モニタ」する「他方端末表示状態モニタ機能」が、本質的部分、或いは、重要な要素と考えられる。
【００４２】
＜暗号化確認＞
（発明１５）
ビジュアル双方向リアルタイム通信を行うための、他の端末とデータの送受が可能な端末であって、
画像情報、文字情報の表示、音声情報の再生、の少なくともいずれか１つのための表示・再生手段と、
鍵情報の入力手段と、
前記入力手段から入力された鍵情報に基づき他の端末へ送出するデータを撹乱する手段と、
自己端末で受信した攪乱データを、前記入力された鍵情報に基づき復号化して前記自己端末の表示・再生手段に与える手段と、
を備える端末。
【００４３】
本発明の端末によれば、自己端末から他端末に、データを撹乱して伝送する場合に、当該他端末において、データが撹乱されたままの状態での受信がまず確認できる。そして、当該他端末で、正当な鍵情報を入力することによって、他端末から受信された攪乱データの攪乱状態が解除されて表示・再生され、これにより撹乱されたデータの撹乱状態が解除されたことを確認できる。
このような手順を践むことによって、機密性が強く要求される現代のビジュアル双方向リアルタイム通信システムにおいて、送信データが確実に撹乱されていることが確認でき、その後、安心してデータの伝送が行える。
なお、本発明１５においては、その作用・効果との関係上、構成要素「自己端末から送出されるデータを撹乱するデータ撹乱手段」及び「自己端末で受信した攪乱データを、前記入力された鍵情報に基づき復号化して前記自己端末の表示・再生手段に与える手段」が、本質的部分、或いは、重要な要素と考えられる。
【００４４】
＜ネットワーク打ち合わせ＞
（発明１６）
コンピュータに少なくとも、
ビジュアル双方向リアルタイム通信を行うための、他の端末とデータの送受が可能な端末としての、
画像情報、文字情報、音声情報の少なくともいずれか１つの蓄積が可能な記憶機能と、
画像情報、文字情報、音声情報の少なくともいずれか１つの入力機能と、
前記画像情報、文字情報の表示、音声情報の再生、の少なくともいずれか１つのための表示・再生機能と、
前記入力機能を用いて入力された追加情報を単独で、或いは、前記画像情報、文字情報、前記音声情報の少なくともいずれか１つと関連付けて記憶手段に格納する追加情報格納機能と、
他の端末の記憶手段に格納されている前記画像情報、前記文字情報、前記音声情報、前記追加情報、の少なくともいずれか１つを、前記端末の表示・再生手段に表示・再生することを可能とする情報交換機能、
を実現させる、ビジュアル双方向リアルタイム通信用プログラム。
【００４５】
ここで発明１６では、
少なくとも、
自己端末で入力する情報に対応した入力機能と表示・再生機能、
他の端末から送られてきた情報および自己の提供する情報を蓄積するための記憶機能と蓄積された情報に対応した表示・再生機能、
追加情報のための入力機能、記憶機能、表示・再生機能、
を備えていれば良い。
この発明のプログラムを実行させることによって構成される端末によれば、ＴＶ会議等の情報交換の場面において、記憶手段内に予め用意してあった資料を参加者の端末の再生・表示手段に提示することが可能である。そして、提示された資料に対し、各参加者が、例えばライトペン等の入力手段から、提示された資料に対するコメント等の追加情報を入力し、当該追加情報が付加された画像情報も記憶手段に保存できる。また、当該提示された資料についてなされた議論の音声情報も、当該追加情報が付加された画像情報と対応付けられて、記憶手段内に格納が可能である。このような、音声情報付きの、追加情報が付加された画像情報を、電子議事録として各参加者に配布することもできる。
更に、会議終了後、記憶手段に格納された各種資料、追加情報が付加された画像情報、音声情報、等を自由に編集して、次回以降の会議に備えることもできる。
なお、本発明１６においては、その作用・効果との関係上、構成要素「他の端末の記憶手段に格納されている前記画像情報、前記文字情報、前記音声情報、前記追加情報、の少なくともいずれか１つを、自己端末の表示・再生手段に表示・再生することを可能とする情報交換機能」が、本質的部分、或いは、重要な要素と考えられる。
【００４６】
＜自局におけるネットワーク打ち合わせの事前検証、及び、伝送レート・モニタ＞
（発明１７）
コンピュータに少なくとも、
ビジュアル双方向リアルタイム通信を行うための、他の端末とデータの送受が可能な端末としての、
画像情報、文字情報、音声情報の、少なくともいずれか１つの入力機能と
画像情報、文字情報の表示、音声情報の再生、の少なくともいずれか１つのための表示・再生機能と、
前記他の端末への送出用データを圧縮可能な送出データ準備機能と、
前記他の端末にて表示されるべきデータの状態をモニタする他方端末表示状態モニタ機能と、
を実現させる、ビジュアル双方向リアルタイム通信用プログラム。
【００４７】
本プログラムを実行することにより構成される端末によれば、自己端末から他端末に、データを圧縮して伝送する場合に、当該圧縮の圧縮率の程度によって、自己端末内での圧縮された状態での表示・再生状態の把握、自己端末から送出された後の圧縮された状態での表示・再生状態の把握、受信端末での表示・再生状態の把握がチェックできる。
なお、本発明においては、その作用・効果との関係上、構成要素「前記他の端末にて表示されるべきデータの状態」を「モニタ」する「他方端末表示状態モニタ機能」が、本質的部分、或いは、重要な要素と考えられる。
【００４８】
＜暗号化確認＞
（発明１８）
コンピュータに少なくとも、
ビジュアル双方向リアルタイム通信を行うための、他の端末とデータの送受が可能な端末としての、
画像情報、文字情報の表示、音声情報の再生、の少なくともいずれか１つのための表示・再生機能と、
鍵情報の入力機能と、
前記入力機能を用いて入力された鍵情報に基づき他の端末へ送出するデータを撹乱する機能と、
自己端末で受信した攪乱データを、前記入力された鍵情報に基づき復号化して前記自己端末の表示・再生手段に与える機能と、
を実現させる、ビジュアル双方向リアルタイム通信用プログラム。
【００４９】
本プログラムを実行することによって構成される端末によれば、自己端末から他端末に、データを撹乱して伝送する場合に、当該他端末において、データが撹乱されたままの状態での受信がまず確認できる。そして、当該他端末で、正当な鍵情報を入力することによって、他端末から受信された攪乱データの攪乱状態が解除されて表示・再生され、これにより撹乱されたデータの撹乱状態が解除されたことを確認できる。
このような手順を践むことによって、機密性が強く要求される現代のビジュアル双方向リアルタイム通信システムにおいて、送信データが確実に撹乱されていることが確認でき、その後、安心してデータの伝送が行える。
なお、本発明１８においては、その作用・効果との関係上、構成要素「自己端末から送出されるデータを撹乱するデータ撹乱手段」及び「自己端末で受信した攪乱データを復号化して前記自己端末の表示・再生手段に与える機能」が、本質的部分、或いは、重要な要素と考えられる。
【００５０】
（発明１９）
（発明１６）から（発明１８）のいずれかに記載のプログラムを記憶した情報記憶媒体。
本発明は、上記のようにシステム、システムの機能を実行するプログラム、そのプログラムを記録した媒体、のカテゴリーで特許請求の範囲を記載しているが、これらの形態に限らず、上記のシステムの機能の実行のためのあらゆる形態のプログラム・プロダクト、当該機能を実行するに際して使用する信号、その他、システムの実施に使用するプログラムを実行する際に使用するコンピュータ端末以外の機器、についても必要があれば特許請求の範囲に記載する。
また、上記システムのカテゴリーの各発明について、「〜手段」を「〜機能」と読み替え、コンピュータに、そのような各機能を実現させるためのプログラムのカテゴリーの発明や、当該プログラムを記憶した情報記憶媒体のカテゴリーの発明が容易に導かれることは勿論である。
【００５１】
以上、本願に係る各（発明）の代表例を、上述のように記載したが、本願発明はこれらに限定されるものではなく、上記各（発明）の全て、又は、いくつかの構成要件を任意に組み合わせて、合目的的に別の発明を構成できることは勿論であり、そのようにすることによって、本願発明の指向する「ビジュアル双方向リアルタイム通信システム」において、より臨場感のある、双方向性に富んだシステムが得られることは勿論である。
例えば、上記＜ネットワーク打ち合わせ＞、＜伝送レート・モニタ＞、及び＜暗号化確認＞、に含まれる各発明を組み合わせて、これら全ての発明の効果を重畳的に奏するような構成にすること等が可能である。
従って、本願の審査過程における、手続補正、いわゆる国内優先権主張、又は、分割出願等によって、そのような種々のバリエーションが、特許請求の範囲に加えられる可能性があることは、当業者が当然に予測可能である。
【００５２】
なお、装置、システム発明、プログラム発明、及び媒体発明において、各構成要素の記載順序が、各発明が実施される場合の経時的順序を規定するものではない。逆に、各発明の目的・効果を達成する範囲内で、各発明を実施する際に各構成要素の実現する機能の作動順序は自由に変更でき、そのような技術も各発明の範囲内に属する。
【００５３】
以下に、本明細書中で用いられる用語の一覧を示す。
表１  本明細書中で用いられる用語の意義
2007116527.tif 000003
2007116527.tif 000004
2007116527.tif 000005
【発明の効果】
【００５４】
本発明の実施例により、例えば、テレビ会議システム等において、ユーザ・フレンドリな対話を可能とし、遠隔地間を実際に移動して会議を行う場合に比して、経済的負担を軽減することが可能となる。
【発明を実施するための最良の形態】
【００５５】
以下、本発明の各種の実施例を図を参照しつつ説明する。但し、以下の説明は、あくまでも本発明の例示であり、以下の記載によって、本発明の技術的範囲が限定されるものではない。
また、本発明の技術は、如何なる既知の、或いは、今後開発される、ビジュアル双方向リアルタイム通信システムに対しても適することを理解して欲しい。
【００５６】
＜システム構成＞
図１は、この発明の実施例に係る、情報共有技術が適用可能なネットワーク・システムの概略構成を示す図である。なお、図１では、端末１Ａと端末１Ｂとがネットワーク２を介して接続されているが、ＬＡＮケーブルなどの通信ケーブルによりこれら端末１Ａ、１Ｂ間が直接接続されていても良い。また、インターネットと既存の電話回線など、複数種類のネットワークが併用されても良い。これら端末の接続形態としては、図１に示されたようなサーバを介さぬ１対１の接続の他、サーバを介した１対１接続、１対１接続であるが接続のために認証用にのみサーバを介するものや、サーバを介し１台の端末と複数台の端末が接続された、講義形式が実現可能な１対多接続や、サーバを介さないグループ対話などがある。以下の説明は主に、１対１の情報共有態様を例にとって行うが、このような講義形式の１対多の態様や、各参加者が任意に別の参加者の一人又は複数人に対して情報伝送するような、多対多の態様も勿論、本発明の範囲内である。
また、以下の説明は、通信ケーブルを介して直接接続された１対１接続（peer to peer）の形態を例にとって行うが、サーバを介して行われる１対１、１対多、多対多、の態様も勿論、本発明の範囲内である。なお、通信を１対１接続（peer to peer）の形態で行う場合のメリットは、サーバに負担がかからないこと、及び、中継サーバを介さない直接接続による高速な通信の実現ができることである。また、１対１接続（peer to peer）の形態に適しているアプリケーションとしては、大容量のデータを扱う映像系アプリケーション（ビデオ・チャット等）や、リアルタイムな処理が必要なアプリケーション（ホワイトボード等）が挙げられる。
【００５７】
図１において、伝送手段としてのネットワーク２には、それぞれノード２ａ、２ｂを介して端末１Ａ、１Ｂが接続されており、これら端末１Ａ、１Ｂ間での双方向対話が可能になっている。例えば、端末１Ａは、一般的に、通信制御機能等、主要な情報処理機能を実行するＰＣ本体１００Ａと、表示装置２００Ａを備えている。同様に、端末１Ｂも、ＰＣ本体１００Ｂと、表示装置２００Ｂを備える。
本発明の実施例に係る情報共有技術は、上述のような伝送手段（例えば、図１の場合、ネットワーク２）を介して、直接又は間接的に接続されることにより、互いに対話可能な状態に設定された端末１Ａから第２端末１Ｂに対して、該端末１Ａから該端末１Ａの表示画面の一部を選択的に端末１Ｂに送信することを含む。
【００５８】
図２は、本発明の実施例に係る情報共有技術を実施可能な端末の構成のブロック図である。この端末１Ａ（１Ｂ）は、モニタ等の表示装置２００Ａ（２００Ｂ）と、映像処理を行うＰＣ本体１００Ａ（１００Ｂ）と、外部記録装置７００Ａ（７００Ｂ）と、マウス等のポインティング・デバイス４００Ａ（４００Ｂ）と、キーボード５００Ａ（５００Ｂ）と、マイク６００Ａ（６００Ｂ）と、スピーカ３００Ａ（３００Ｂ）と、を備える。なお、端末１Ｂについても、同様の構成を有するため、以下、端末１Ａについてのみ説明する。
【００５９】
なお、本発明の実施態様又は実施例において説明される本発明の具体例は、ＰＣに格納されたソフトウェアに基づいて、ＣＰＵが上記各ハードウェアを制御することによって実現される。
【００６０】
ＰＣ本体１００Ａは、ネットワーク２を介して相手対話者からの音声データや画像データの発明に係る情報共有技術を実施する制御部１２０と、送受信される画像データ等を格納しておくための記憶手段１３０（図中、Ｄ／Ｂ）と、表示装置２００Ａへ制御部１２０の指示に従って所定のパターンを表示させるための、ＶＲＡＭ１４１を有する描画部１４０と、マウス等のポインティング・デバイス４００Ａからの位置情報の取り込みや外部装置７００Ａとのデータ授受を可能にするデータ入出力部１５０（図中、Ｉ／Ｏ）と、相手対話者の音声が出力されるスピーカ３００Ａを制御するための音源コントローラ１６０と、カメラ８００Ａとを備える。
なお、外部記録装置７００Ａは、例えば、磁気テープ、ＣＤ、光ディスク、ハードディスク、ＤＶＤ、フラッシュメモリ等を含み、この発明に係る情報共有技術を実施するコンピュータ・プログラムや相手対話者からの送信データなどが格納される。
【００６１】
本発明の実施例に係る情報共有技術は、上述のような構造を有する端末１Ａが設置されたＡ地点と、端末１Ｂが設置されたＢ地点との間で実行される双方向対話に特に有効である。
【００６２】
図３に、本発明の実施例に係る情報共有技術を双方向対話に適用する場合の、視覚的に分かり易い構成図を示す。本図に示すように、本発明の実施例においては、図面左側のＡ地点の対話者３Ａと、Ａ地点から離れた、図面右側のＢ地点の対話者３Ｂが、ＰＣ本体１００Ａ、及びその周辺機器（図２参照）（以下、この両者を含めて「端末装置」９００Ａ（９００Ｂ）と呼ぶ。）を用いて、相互に対話及び情報交換を行う。
【００６３】
対話は、Ａ，Ｂ両地点のカメラ８００Ａ（８００Ｂ）で撮像された各対話者３Ａ（３Ｂ）の顔の映像、マイク６００Ａ（６００Ｂ）によって集音された各対話者３Ａ（３Ｂ）の発言、外部記憶装置７００Ａ（７００Ｂ）に蓄積された各種データの画面上への提示、画面に提示された各種データへの、マウス４００Ａ（４００Ｂ）やキーボード５００Ａ（５００Ｂ）による書き込み、が、相互に、相手方の端末装置９００Ｂ（９００Ａ）にほぼリアルタイムで伝送され、画像表示・音声再生されることによって主に行われる。
【００６４】
図３に、各端末装置本発明の実施例の各種特徴を、各端末装置９００Ａ（９００Ｂ）のディスプレイ２００Ａ（２００Ｂ）の画面上に表しているが、これを拡大したのが、図４である。
【００６５】
図４には、（１）から（５）の付番が為されているが、以下、簡単に、これらの付番による画面表示と、当該画面表示を通じて実現される本発明の各実施例の概要を説明し、その後、各実施例の詳細説明を行う。なお、本図の画面表示は、図３のＡ地点における表示である、と仮定して説明を行う。
【００６６】
（１）は、コントロール画面である。この画面上の操作アイコン（音量調整ツマミ）をマウス等の操作によって、チェック、移動等させることによって、カメラ撮像、画像送信、音声送信、音量調整、送信データの暗号化モード切り替え、等の制御を行う。なおここで、「送信データの暗号化モード切り替え」とは、”暗号鍵を、対話者同士が予め指定したものを使用する、予め自動的に初期設定された共通鍵に切り替える、全く暗号化を行わない”等の状態を選択することを意味する。
【００６７】
（２）は、相手動画像受信画面である。図３のカメラ８００Ｂで撮像されたＢ地点の相手対話者の顔画像が、Ａ地点のディスプレイ２００Ａに表示される。この、相手方の顔画像は、完全にリアルタイムの動画でも良いし、伝送容量削減のために圧縮された動画でも良いし、間欠的に静止画を伝送するものであっても良い。
端末１Ｂで受信されたフレーム画像は、予め相手対話者３Ｂによって設定された相手方画像受信画面（２）や、相手方画像受信画面（４）の表示ウィンドウ内に表示できるよう、受信された後に拡大或いは縮小などの処理を施して表示画面上に表示される。
【００６８】
また、図５の（ａ）から（ｃ）に示されるように、Ａ地点、Ｂ地点のそれぞれにおいて、各対話者が、相手の顔画像を自己のディスプレイ２００Ａ（２００Ｂ）に表示させ、自己端末装置のカメラ８００Ａ（８００Ｂ）の撮像部（当該撮像部がディスプレイ２００Ａ（２００Ｂ）内に配置されている）の位置が、相手の顔画像の目の位置より上で、かつなるべく顔に近い位置となるように、自己端末装置のカメラ８００Ａ（８００Ｂ）の位置を移動させるか、又は、ディスプレイ２００Ａ（２００Ｂ）内の顔画像を表示するウィンドウ（図４の（２））を移動させることが、アイコンタクトの見地から好ましい。なお、このとき、自己端末のカメラ撮像した像をモニタして、バランス良く自己像が撮像されているかのチェックを行う。バランスが悪いときは、カメラの角度を変えて撮像状態を調整すると良い。
【００６９】
（３）は、画像キャプチャ枠／送信枠である。画像キャプチャ枠は、自己のディスプレイ２００Ａ上に表示された対話の相手方（３Ｂ）に示したい画像情報、文字情報等を、キーボード５００Ａやマウス４００Ａの操作等によって当該画像キャプチャ枠内に移動したり、又は逆に、当該画像キャプチャ枠／送信枠を当該画像の上に移動させたりして、当該画像キャプチャ枠内に表示されている当該画像情報等を一旦、後述のイメージ・オーガナイザ枠 (5)に保存させたり、当該画像キャプチャ枠内に表示されている当該画像情報等を相手方（３Ｂ）にリアルタイムで手動により、又は、自動的に連続して伝送したり、選択した画像付きホワイトボードを発生させたりする機能を担う。
【００７０】
当該画像キャプチャ枠を重ね合わせられる画像情報、文字情報等には、PowerPoint（マイクロソフト社の登録商標）、表計算ソフト（例えば”Excel”など）、ワープロ・ソフト（例えば”word”など）、ブラウザなどのアプリケーション・ソフトにより生成される資料データ（テキスト、写真、映像）が含まれるがこれに限定されない。ディスプレイ上に表示される画像全て又はその任意の一部を対象として、選択して、相手に送信し、更に、相手方画面上で画像付きホワイトボードの発生をさせることが可能である。
【００７１】
（４）は、相手画像受信画面である。これを受信枠とも呼ぶ。これは、相手方（３Ｂ）の端末装置から送られてきた画像・文字等の情報を表示するウィンドウである。ここに表示された画像・文字等の情報を後述のイメージ・オーガナイザ枠(5)に移動させることも可能である。
【００７２】
（５）は、イメージ・オーガナイザ枠である。
上述の画像キャプチャ枠／送信枠、又は、相手画像受信・キャプチャ画面でキャプチャされた画像・文字情報等を、本画面に取り込み、取り込まれた画像に対して画像付きホワイトボードを発生させ、マウスやキーボード等によってメモを記入したり、当該メモを記入した画像・音声情報を外部記憶装置７００Ａ（７００Ｂ）に蓄積したり、取り込んだ画像・文字情報に対する音声によるコメントを当該取り込んだ画像・文字情報と対応付けて外部記憶装置７００Ａ（７００Ｂ）に蓄積したりする機能を有する。
【００７３】
以下、これらの、（１）コントロール画面、（２）相手動画像受信画面、（３）画像キャプチャ枠／送信枠、（４）相手画像受信画面（受信枠）、（５）イメージ・オーガナイザ枠、等の機能を利用した、本発明の各実施例について説明する。
実施例１は＜ネットワーク打ち合わせ＞、実施例２は＜自局におけるネットワーク打ち合わせの事前検証＞、実施例３は＜伝送レート・モニタ＞、実施例４は＜暗号化確認＞、について説明する。
【００７４】
ここで、＜ネットワーク打ち合わせ＞とは、複数の対話者が、場所的に隔離された状態で、ネットワーク等の通信手段で結合されたＰＣ端末装置を介して情報交換するような態様を意味する。
【００７５】
また、＜自局におけるネットワーク打ち合わせの事前検証＞とは、＜ネットワーク打ち合わせ＞において、他の端末装置に対して自己端末に表示・再生され情報を送信する前に、擬似的又は模擬的に、他端末に情報を伝送した状態を自己端末内部の閉じたシステム内でシミュレートし、相手方端末装置のディスプレイ２００Ｂに表示される画像・文字情報の表示態様、相手端末で再生される自己の音声の品質や音量、をチェックすることを含む。これにより、自己端末装置のカメラが自己の顔を向いていなかったり、自己のマイクがオフになっていたりするような事態を予防できる。
【００７６】
＜伝送レート・モニタ＞とは、＜ネットワーク打ち合わせ＞等（それ以外の端末装置間の通信の場合も含む）において、自己端末内で圧縮済みの圧縮データ、自己端末内から送出された圧縮済みの圧縮データ、相手端末から送られてきた圧縮データ、を自己端末で伸張し、データの圧縮・伝送過程で、どの程度データ品質が劣化するかをモニタする態様である。このようなモニタを行うことによって、＜ネットワーク打ち合わせ＞等で使用される画像・文字データ等が、送信者の意図した品質で確実に伝送されているかが確認できる。もしデータ品質が必要なレベルより低いと感じた場合には、相手方に伝送する複数のデータに優先順位を付け、優先度の高いものの圧縮率を下げ、逆に、優先度の低いデータの圧縮率を上げる、等の措置を取ることができる。例えば、レントゲン写真等であれば、圧縮率を下げて高詳細度の画像を送る必要があるが、自己の顔などは、高圧縮で送っても余り問題が無い、というような状況に柔軟に対応可能である。
【００７７】
＜暗号化確認＞は、自己端末装置から送信されるデータが暗号化されている等の場合、相手方端末において受信された場合に、まず、相手方端末装置においては、暗号化された撹乱データが表示され、次に、正しい鍵情報の入力によってその撹乱状態が解除されたという一連のシーケンスが、自己端末側で確認できるような態様を主に含む。
【実施例１】
【００７８】
＜ネットワーク打ち合わせ＞
図６から図８Ａ、８Ｂを参照する。
図６を参照する。ここで、自己端末装置の例えば外部記憶装置７００Ａに格納されている画像情報を画面上に表示させたものや、インターネットを介して得られた画面等を図４の画像キャプチャ・送信枠(3)で囲みキャプチャする（図６（ａ））。ここで、「キャプチャ」とは、図６の画面（ａ）の表示画面上の或る部分（○で囲まれた領域）の近傍を画像キャプチャ・送信枠(3)（角枠）で囲むことで相手方端末装置への伝送用に当該部分のみを指定することを意味する。
【００７９】
キャプチャされた画像等は、図４のコントロール画面(1)上での操作により、相手方端末装置に伝送後、表示される（図６（ｂ））。
このように、或る画像中の、特に注意が必要な部分のみを、相手方端末装置に送ることによって、画面全体を伝送する場合に比して、より重要な情報に注目したコミュニケーションを図ることが可能となる。また、議題をフォーカシングできる。
【００８０】
また、図４のコントロール画面(1)上での操作を待たずに、自己画面においてキャプチャした画像情報を自動的に（例えば、２秒ごとに）相手方端末装置に送信するようにしても良い。また、１秒に３０フレーム以上送れば、いわゆる動画伝送も可能である。
【００８１】
このように、資料を共有して閲覧することによって、対話者全員が共通の認識を持つことが容易になる。
【００８２】
次に、図７を参照する。
図７（ａ）は、仮想ホワイトボードの機能を示す。仮想ホワイトボードとは、例えば、図４のイメージ・オーガナイザ内に貼り付けられた各種画像や文字情報を含み、その周りに、仮想的に設定された、例えば白色の白板類似の領域を含み、また、当該白板類似の領域のみならず、当該各種画像等自体の上にも当該文字情報等を書き込めるようにした場合には、当該各種画像も、仮想ホワイトボードに含まれる、ことを意味する。
【００８３】
画像付きホワイトボードは、送信枠、イメージ・オーガナイザにより、それぞれ発生させることができる。
図７では、イメージ・オーガナイザ内に貼り付けられたインターネットからダウンロードされた画面に隣接して、右下部分に白色の白板類似の領域が配置されており、「コレ」という文字と、当該文字から延びる矢印がインターネットからダウンロードされた画面上までライトペンによって記入されている。
【００８４】
このようにして仮想ホワイトボードに記入された文字や描画情報が、イメージ・オーガナイザ内に貼り付けられた画面図７とともに、そのままの態様で、相手方端末装置のディスプレイ２００Ｂ上に表示される（図４（ｂ））。
より具体的な態様においては、送信側の画像付き仮想ホワイトボード機能をＯＮにすると、送信側では画像キャプチャ画面（送信枠）が画像付き仮想ホワイトボードモードに自動的に切り替わり、受信側では画像表示画面が画像付き仮想ホワイトボードモードに自動的に切り替わる。また、送信側、受信側双方で、表示されている画像に対し、ペイント・ソフトと同様に線描画やテキスト描画を行うことが可能であるし、その結果を、イメージ・オーガナイザへ保存することも可能である。なお、ここで、「仮想ホワイトボードモード」とは、仮想ホワイトボードが表示される状態、の意味である。
【００８５】
また、図８Ａに示すように、自己端末装置のディスプレイ上の表示画面に対して、ライトペン等による描画、キーボード５００Ａによるコメント記入等を行うと同時に、コントロール画面（図４の（１）参照）を介した操作によって、マイク６００Ａによる音声コメントも加え、それら全体を、イメージ・オーガナイザ（図４の（５）参照）に保存することもできる。更に、それを電子メールに添付することもできる。当該電子メールを受信した受信者は、受信側のイメージ・オーガナイザを用いて当該電子メールに添付された情報を解凍可能である。
【００８６】
イメージ・オーガナイザに保存されたメールデータは、電子メール送信によって相手方端末装置に伝送され、相手方端末のイメージ・オーガナイザ上に表示される。相手方端末のコントロール画面（図４の（１）参照）で、送られてきた画像、描画コメント、音声コメント、の全てが、送信端末側で行われたシーケンスと同じシーケンスで再現される。
【００８７】
図８Ｂに、より詳しい使用態様を示す。本図においては、送信端末装置から、受信端末装置に送られるメールの本文には「添付資料の『マニュアル』の説明文をもう少し判りやすく書いて下さい」というメッセージが記載され、添付資料には、当該『マニュアル』部分の画像情報及び「他は判り易いので、この部分の説明をもう少し判りやすく書いてくれると良いかな」という音声メッセージが含まれており、受信側端末装置では、これらの全てが受信・表示・再生される。
このような態様によれば、音声を通しての、相手方に感情のこもったメールを送信することが可能となる。また、文字では書きにくいような言い回しも、容易に付加できる。
【００８８】
以上のような、実施例１の奏する効果について、追加的構成も含めて更に詳細に説明する。以下は、本実施例の効果であって、必ずしも上記”課題を解決するための手段”に記載された各”（発明）”の奏する効果に含まれるとは限らない。
一方、下記の説明中の追加的構成を、上記各（発明）に追加する補正は、当業者にとって、当然予測可能である。
【００８９】
（１）全員が特定の画像領域にフォ−カスされている同じ資料をみることができる：
ディスプレイには大きさの制限があり、話題となるところを抽出、画像フォーカスして表示することが重要となる。送信枠の機能である。
（２）画像フォ−カスされたところ、及び、その周辺に、誰でも、書き込みが、できる：
そして、この画像フォーカスされたところへの書き込みや、対象画像を取り込んだ形で、ホワイトボ−ド領域を発生させ、取り込み画像上を含むホワイトボ−ド領域へのテキスト入力やペン入力ができるようにする。
この様にすることにより、画像を見ながら、打合せでき、かつ、取り込んだ画像とホワイトボ−ド上に追加した情報を一体化して、保存や再表示ができる。この機能は、モニタを通しての対話において実現できる特徴の１つである。送信枠の画像取り込み型のホワイトボ−ド機能である。
（３）保存がワンクリック又は、自動で実施でき、ページングされている：
これにより、打合せプロセスの保存画像を通しての確認ができる。イメージオ−ガナイザの有利な機能である。
（４）保存は、どの打合せセッションか、誰の資料なのかが、識別される：
データベースが自動生成できるイメージオ−ガナイザの１つの機能である。特に、グループ対話では、セッション名称と共に、誰の資料なのかが識別されると資料確認が非常にやりやすくなる。
（５）保存されたものの再表示と、それを共通資料として再書き込みができる：
イメージオ−ガナイザ再表示と送信枠との統合機能である。
（６）更に、以上、の画像伝送対話統合技術は、１対１打合せだけでなく、グループ打合せにも適用できる。応用例としては、グループ打合せとして、ネットワークを介して、４〜５人程度が、本発明のソフトを利用して、カメラなし（顔画像なし）でも、音声とこの送受信枠、画像付ホワイトボード、イメージ・オーガナイザを統合活用し、資料共有書き込み型の打合せが可能となる。今までは、会議室に全員集まっていたが、自席での打合せが可能となる。また、１対１打合せのケースでは、音声は電話を用いておこない、資料情報の共有に関して、本発明のソフトを利用しておこなうのも有効である。
【００９０】
（上記（２）及び（５）についての補足説明）
従来は、資料とホワイトボードとは、一体化されて、生成、書き込み、音声入力などができなかったが、本実施例の技術では、必要な画像を取り込み、その周辺にホワイトボードを自在サイズで生成でき、書き込み、音声入力ができる。
更に、資料とホワイトボードとは、一体化されて、生成、書き込み、音声入力された追加情報体の一部、又は全体に対しても、更に、その情報を含んだホワイトボード領域を自在サイズで生成でき、書き込み、音声入力ができる。これを、ネットワークを介しての対話中に実行することができる。そのための実現手段として、送信枠（受信枠）とイメージ・オーガナイザの統合活用が有効となる。
送信枠を用いることにより、資料情報とホワイトボード上に追加した情報とは、一体化されて、生成、書き込み、音声入力などを実施した後、イメージ・オーガナイザに保存され、そこで再表示させたものに対して、送信枠で、ホワイトボード上に追加した情報と一体化されて、生成、書き込み、音声入力などの繰り返し情報追加ができる。もちろん、繰り返し情報追加は、モニタサイズが許容するまで、先行情報の全体に対して、又は、選択部分に対して、おこなうことができる。
従来は、この様なビジュアル対話に適応したソフトが無かったので、円滑な思考、認知対話が実現できなかった。
本実施例では、焦点となる画像・資料の取り出しと、その情報を含むホワイトボード領域を自在サイズで生成し、保存し、更に、再選択して、新たなホワイトボード領域を自在サイズで何回でも生成できる。創造的対話の展開を容易にすることができる。更に、履歴も残っていくので、再考もできる。この様な、デジタル処理をもとにした、ビジュアルのアナログ処理の容易な実行が、創造的対話に、画期的ツールとして役立つことになる。
【００９１】
＜本実施例の適用＞
本実施例はネットワークを介してのビジュアル対話において、画像・資料を用いての創造的対話を提供するものである。本実施例を用いることにより、距離を克服しての迅速な画像・資料コミュニケーションができるとともに、結果として、出張費の削減、移動時間の他への転用ができる。また、人々の移動エネルギーの削減にもつながり、環境保全にも貢献できる。また、焦点化された共視空間の形成、双方向書き込みや、保存、再表示、追加書き込みなど、対面では実現しにくかった機能創出により、対面と同等以上の多機能な創造的対話が提供できる。
【００９２】
本実施例のビジュアル対話とは、少なくとも、画像・資料をディスプレイ上に表示しておこなう対話を意味しており、顔画像はあるにこしたことはないが、必須要素ではない。また、音声についても、電話を活用するなど、かならずしも本実施例に必須要素ではない。
また、本実施例は、１対１のみならず、グループ間での創造的対話にも活用できる。サーバを介したサーバ、クライエント型でもよいし、対話時にサーバを介さない１対１や、グループ対話などのpeer to peerに利用することもできる。本実施例の説明では、主として、peer to peerによる１対１や、（サーバを介さない）４〜５人程度のグループ対話を例として説明している。
【００９３】
創造的対話の実現に向けては、参加者の感情交流、認知（思考）交流が重要となる。感情交流では、表情観察、視線一致、視線認知が必要となり、認知（思考）交流では、画像・資料のリアルタイムの全員参画型のアナログ的ハンドリングが重要である。本実施例では、創造的対話の実現に向けて、主に、認知（思考）交流に着目しての画像・資料のハンドリング手法を提案するものである。
【００９４】
＜イメージ・オーガナイザと、その送信枠の機能の説明＞
イメージ・オーガナイザの機能
イメージ・オーガナイザは、以下の機能を備えるが、これに限定されない：
【００９５】
（Ａ）基本機能
（Ａ−１）送信枠（受信枠）で範囲選択された画像領域の保存
（Ａ−２）イメージ・オーガナイザ自体による範囲選択した画像領域（イメージ・オーガナイザ自体が画像取り込み機能を有している）
（Ａ−３）保存された画像の表示
（Ａ−４）画像取り込み型ホワイトボード発生
（Ａ−５）イメージ・オーガナイザでの処理画像の保存（画像取り込み型ホワイトボードを発生させ、その保存、画像取り込みをする）
【００９６】
（Ｂ）拡張機能
（Ｂ−１）画像取り込み無しの全面ホワイトボード発生
（Ｂ−２）保存された画像の識別情報による検索ソート
（Ｂ−３）印刷機能
（Ｂ−４）メール添付機能
（Ｂ−５）音声付画像の生成機能
（Ｂ−６）音声付画像の保存、再生、編集機能
【００９７】
（Ｃ）応用展開
（Ｃ−１）対話中の録画（音声、顔画像、資料画像など選択したもの）
（Ｃ−２）対話中に録画されたものの再生、編集
（Ｃ−３）対話中の録画の静止画に対する画像取り込み型ホワイトボードと一連の処理
【００９８】
（Ｄ）送信枠の機能
（Ｄ−１）送信枠で範囲選択された画像領域の保存（保存先は、イメージオーガナイザ）
（Ｄ−２）送信枠で範囲選択された画像領域の対話先への伝送
（Ｄ−３）送信枠で範囲選択された画像を取り込み、ホワイトボードを発生。画像、ホワイトボードには、双方向から書き込みが可能で、情報共有。画像、ホワイトボード内容は、イメージ・オーガナイザに保存できる。
【００９９】
（Ｅ）受信枠の機能
（Ｅ−１）受信画像の表示と保存（Ｆ）イメージ・オーガナイザと送信枠の統合作用の説明
【０１００】
一例として、
（Ｆ−１）事前に、打合せ資料として、パワーポイントを作成用意
（Ｆ−２）ビジュアル対話時に、パワーポイント表示領域に送信枠を重ねて、伝送表示
（Ｆ−３）必要に応じて、送信枠で焦点部分を抜き取りホワイトボード発生
（Ｆ−４）双方向に、ホワイトボードに書き込み（代表者記入式でもよい）
（Ｆ−５）必要に応じて、内容保存（保存先は、イメージ・オーガナイザ）
（Ｆ−６）ホワイトボードに書き込みしたところで、特に焦点化したいところが発生したら、イメージ・オーガナイザの画像取り込み機能で、画像取り込みもできる。
（発散的思考で、別途打合せ事項が発生したときの対応）
（Ｆ−７）これらを、くりかえす。保存ページがふえる。
（Ｆ−８）イメージ・オーガナイザで、ページをレビューして、打合せを深める。
このとき、イメージ・オーガナイザの表示領域に送信枠を重ねることにより、イメージ・オーガナイザ保存情報を共有できる。
なお、この機能の簡易ケースとして、送信枠を重ねなくともすむように、イメージ・オーガナイザ保存情報の伝送表示共有機能、ホワイトボード処理の伝送表示共有機能を、イメージ・オーガナイザに付加しておいてもよい。（収束的思考での打合せに対応）
【０１０１】
以上のように、送信枠で発生させたホワイトボードとイメージ・オーガナイザの組み合わせ、及び、イメージ・オーガナイザと送信枠の組み合わせなどにより、画像の自在切り出し表示と、追加情報の記入、打合せプロセスの履歴活用など、対話中の画像の自在なハンドリングができ、創造的対話の強力なサポートツールとなる。
【０１０２】
なお、本実施例は、創造的対話の強力なサポートツールとなるが、これを自己端末で閉じた系に応用し、自分自身との内的コミュニケーションツール、自己との創造的対話に用いることも、特殊例として活用できる。
【実施例２】
【０１０３】
＜自局におけるネットワーク打ち合わせの事前検証＞
本実施例においては、上記実施例において、図６から図９を参照して説明した各使用態様を、自己の端末上のみで模擬的に行う場合を説明する。
上記図６から図８Ａ、８Ｂを再び参照する。
【０１０４】
本実施例においては、図４のコントロール画面の「事前検証モード」を選択し、図６の（ａ）のような表示画面中の○で囲んだ部分近傍を、マウス等の操作により画像キャプチャ・送信枠(3)で囲み、キャプチャ部分だけを、擬似送信すると、自己の画面上に、通常の送信では相手方端末装置上に表示されるキャプチャ部分が、自己ディスプレイ上に表示される。
更に、図７に示すように、送信側仮想ホワイトボードへの記入が、どのように受信側ホワイトボードに反映されるかも、擬似的に、自己端末装置上に表示できる。
また同様に、図８Ａ、８Ｂに示すような、画像情報や音声情報を含む資料が添付されたメールを、擬似的に送信し、自己端末上で表示・再生することが可能となる。
このような機能を持つことによって、相手方端末に、実際に画像情報等を伝送する前に、相手方端末上でどのような表示等が為されることになるかを、事前に検証することが可能となる。
【実施例３】
【０１０５】
下記の説明では、「圧縮」の語の意義を、フレーム・レートを落とす、画像サイズを小さくする、など、「データ量は減らしているが」いわゆる「圧縮」とは異なる操作も、本願発明では広く「圧縮」と捉える。
【０１０６】
＜伝送レート・モニタ＞
図９を参照する。
本図の（ａ）において、図４の(1)（コントロール画面）が示されている。このコントロール画面において、制御バーのレベル調整を行うことによって、自己端末装置（ＰＣ−Ａ）から、相手方端末装置（ＰＣ−Ｂ）に送出される画像データの、フレーム・レート（圧縮率に比例）を変更することが可能である。
本実施例においては、図１０に示されるように、自己端末装置内で圧縮手段によって圧縮済みの圧縮データ（１）、自己端末装置（ＰＣ−Ａ）内から送出された圧縮済みの圧縮データ（２）、相手方端末装置（ＰＣ−Ｂ）から送られてきた圧縮データ（３）、の少なくともいずれか１つを伸張して表示・再生手段２００Ａに与えることによって、自己端末装置（ＰＣ−Ａ）で選択した上記フレーム・レートによる圧縮率の程度によって、自己端末装置（ＰＣ−Ａ）から相手方端末装置（ＰＣ−Ｂ）までの伝送過程において、どのような画質劣化が生じるか、そして、相手方端末装置（ＰＣ−Ｂ）で表示される画像の質がどの程度かをモニタすることが可能である。
もし、モニタされた相手方端末装置（ＰＣ−Ｂ）で表示される画像の質が、望ましいレベルより低いのであれば、自己端末装置（ＰＣ−Ａ）における画像の圧縮率を下げたり、或いは、相手方端末装置（ＰＣ−Ｂ）の表示画面上に表示される画像のサイズを小さくすることによって、画質を上げる、等の措置を取ることが可能である。
【実施例４】
【０１０７】
＜暗号化確認＞
本実施例の第１の態様を説明する。
図１１を参照する。
これは、従来技術で知られているものに近い暗号化＋復号化のスキームである。
Ａ地点の端末の画像（1101）を、鍵Ｋ１で暗号化（1102）して画像を撹乱する（1105）。この撹乱画像をＢ地点に伝送し（1106）、Ｂ地点において、Ａ地点の撹乱用の鍵Ｋ１で復号化すれば（1110）、撹乱が解除された画面（1113）が得られる。
一方、Ｂ地点において、Ａ地点での撹乱用の鍵Ｋ１以外で復号化すれば（1114）、撹乱が解除されない画面（1117）しか得られず、復号化に失敗する。
次に、Ｂ地点の端末の画像（1121）を、鍵Ｋ２で暗号化（1122）して画像を撹乱する（1125）。この撹乱画像をＡ地点に伝送し（1126）、Ａ地点において、Ｂ地点の撹乱用の鍵Ｋ２で復号化すれば（1130）、撹乱が解除された画面（1133）が得られる。
一方、Ａ地点において、Ｂ地点での撹乱用の鍵Ｋ２以外で復号化すれば（1134）、撹乱が解除されない画面（1137）しか得られず、復号化に失敗する。
次に、このような従来の暗号化スキームに、若干の追加条件を加えた、本実施例における態様について説明する。
【０１０８】
この実施例の態様では、
（１）データ伝送は必ず、所定の暗号化鍵を用いて暗号化する、
（２）暗号化鍵と復号化鍵は同じもの（以下の説明では「Ｋ１」）を使用する、
という前提条件を持つ。
【０１０９】
図１２を参照する。
Ａ地点の端末の画像（1201）を、共通鍵Ｋ１で暗号化（1202）して画像を撹乱する（1205）。この撹乱画像をＢ地点に伝送し（1206）、Ｂ地点において、共通鍵Ｋ１で復号化すれば（1210）、撹乱が解除された画面（1213）が得られる。
一方、Ｂ地点において、共通鍵Ｋ１以外で復号化すれば（1214）、撹乱が解除さない画面（1217）しか得られず、復号化に失敗する。
次に、Ｂ地点の端末の画像（1221）を、共通鍵Ｋ１で暗号化（1222）して画像を撹乱する（1225）。この撹乱画像をＡ地点に伝送し（1226）、Ａ地点において、共通鍵Ｋ１で復号化すれば（1230）、撹乱が解除された画面（1233）が得られる。
一方、Ｂ地点の端末の画像（1237）を、共通鍵Ｋ１以外の鍵で暗号化（1238）して画像を撹乱し（1241）、この撹乱画像をＡ地点に伝送し（1242）、Ａ地点において、共通鍵Ｋ１で復号化しても（1246）、撹乱が解除されない画面（1249）しか得られない。
【０１１０】
このような構成とすることによって、Ａ地点において、Ｂ地点から伝送されてきた画面が、共通鍵Ｋ１で復号できた場合には、
（１）Ｂ地点において、取決め通りに、共通鍵Ｋ１を用いて暗号化されていること、
及び、
（２）(1)の事実を前提とすれば、Ａ地点から送られた、共通鍵Ｋ１で暗号化された撹乱が画像が、Ｂ地点で、復号化にも使用されている”はず”である共通鍵Ｋ１によって、正しく復号化されている”はず”であること、
が確認できる。
【０１１１】
なお、本実施例においては、「双方向リアルタイム通信」を行っているため、相手方の画面状態や、相手方の画面操作等が、自己端末にリアルタイムで反映されており、「Ａ地点から送られた、共通鍵Ｋ１で暗号化された撹乱が画像が、Ｂ地点で、復号化にも使用されている”はず”である共通鍵Ｋ１によって、正しく復号化されている”はず”である」であることが確認できれば、”はず”＝”その可能性が非常に高い”と理解できるので、実用上殆ど問題は無い。
【０１１２】
更に、本実施例４の別の態様の説明として、同じく図１２を参照する。
Ａ地点の端末の画像（1201）を、予め自動的にセットされた初期設定共通鍵Ｋ１で暗号化（1202）して画像を撹乱する（1205）。この撹乱画像をＢ地点に伝送し（1206）、Ｂ地点において、同じ初期設定共通鍵Ｋ１で復号化し（1210）、撹乱が解除された画面（1213）が得られる。
【０１１３】
一方、Ｂ地点においても、端末の画像（1221）を、同じ初期設定共通鍵Ｋ１で暗号化（1222）して画像を撹乱する（1225）。この撹乱画像をＡ地点に伝送し（1226）、Ａ地点において、同じ初期設定共通鍵Ｋ１で復号化すれば（1230）、撹乱が解除された画面（1233）が得られる。これにより、Ａ、Ｂ各地点では、暗号化されていることを特に意識せずに互いに送られてきた情報を確認することができる。
このような構成とすることによって、自己端末装置から、暗号化された画面情報が送出され、受信端末装置において、まず、暗号化された画像情報が表示され、次に、受信端末装置で、正しい鍵情報によって暗号が解除されたことが確認できる。そして、送信端末において、本当に伝送データが暗号化されていること、及び、受信端末の相手が、正当な相手であることが確認できる。
【０１１４】
以上のような、実施例４の奏する効果について、追加的構成も含めて更に詳細に説明する。以下は、本実施例の効果であって、必ずしも上記（発明）の奏する効果に含まれるとは限らない。
一方、下記の説明中の追加的構成を、上記各（発明）に追加する補正は、当業者にとって、当然予測可能である。
【０１１５】
従来は、ＡからＢに暗号文を送付するときに、例えば、暗号キー１２３を用いて、逆に、ＢからＡに暗号文を送付するときに、例えば、暗号キー４５６を用いておこなっていたので、相手が解読できたのか、暗号はかかっていたのか、確認できなかった。
これに対して、ＡからＢに暗号文を送付するときに、例えば、暗号キー１２３を用い、ＢからＡに暗号文を送付されたときに、解読キーも、同じ暗号キー１２３にしておくことにより、ＢからＡに暗号文が届いたときに、相手が解読できていること、暗号キー１２３以外を入れると、解読できないことが確認できる。ここでの確認とは、画像のスクランブル有無、音声のスクランブル有無に相当し、視聴覚的に確認ができることを意味する。
【０１１６】
本実施例は、１対１に加え、グループ対話でも有効である。
本実施例では、音声、顔画像、資料のどれかを双方向でやりとりすることにより、適用可能である。ＡからＢに暗号資料を送り、その確認に、資料ではなく、相手の音声のスクランブル状況のチェックで確認が可能となる。
また、音声のスクランブルは、ノイズになるため、無音化させ、ビジュアルで、音声のスクランブル状況を文字や図形デザインで表示してもよい。例えば、グループ対話で、Ｃさんが誤った暗号キーを入力した場合、Ｃさんのみの顔画像にスクランブルがかかって表示されるとともに、顔画像伝送が無い場合は、個別に、Ｃさんの音量表示部に、音声のスクランブル状況を文字や図形デザインで表示させるとよい。
【０１１７】
なお、一般的には、暗号キーの受け渡しは、電話など別の手段が望まれるが、暗号キー不明のケースなどの対応として、暗号キーを予め自動的に初期設定された共通のものを使用したり、全く暗号化を行わないで伝送する状態を選択できるよう、「暗号化モード切り替え機能」を入れておけば緊急対応によい。
【０１１８】
なお、上述の本発明の実施例は、例として説明したものであって、本発明はこれに限定されるものではない。
特許請求の範囲に記載される本発明の思想を逸脱することなく、種々の代替、変形、及び変更が可能である。
【産業上の利用可能性】
【０１１９】
本発明の各実施例は、テレビ会議システムや、ネットワークを介した双方向教育等の分野等に利用可能であるが、これに限定されない。
【図面の簡単な説明】
【０１２０】
【図１】この発明の実施例に係る、情報共有技術が適用可能なネットワーク・システムの概略構成。
【図２】本発明の実施例に係る情報共有技術を実施可能な端末の構成のブロック図。
【図３】本発明の実施例に係る情報共有技術を双方向対話に適用する場合の、視覚的に分かり易い構成図。
【図４】図３の各端末装置９００Ａ（９００Ｂ）のディスプレイ２００Ａ（２００Ｂ）の画面上に表された各端末装置の各種特徴を拡大した図。
【図５】画面上の人物像をアイコンタクト状態へ移行させるための、ウインドウ画面の移動方法の例。
【図６】自己端末装置の例えば外部記憶装置７００Ａに格納されている画像情報を画面上に表示させたものや、インターネットを介して得られた画面等を図４の画像キャプチャ・送信枠(3)で囲みキャプチャする様子の概説図。
【図７】仮想ホワイトボードの機能を示す図。
【図８Ａ】イメージ・オーガナイザの機能説明図。
【図８Ｂ】イメージ・オーガナイザの、より詳しい使用態様説明図。
【図９】伝送レート・モニタの概説図。
【図１０】伝送レート・モニタのシステム・ブロック図。
【図１１】従来技術で知られているものに近い暗号化＋復号化のスキーム。
【図１２】図１１のような従来の暗号化スキームに、若干の追加条件を加えた、本発明の一実施例における態様についての説明図。
【符号の説明】
【０１２１】
1A  端末
1B  端末
2  ネットワーク
2a  ノード
2b  ノード
100A  ＰＣ本体
100B  ＰＣ本体
110  入出力インターフェース
120  制御部
130  記憶手段
140  描画部
141  ＶＲＡＭ
150  データ入出力部
160  音源コントローラ
200A  表示装置
200B  表示装置
300A  スピーカ
300B  スピーカ
400A  ポインティング・デバイス
400B  ポインティング・デバイス
500A  キーボード
500B  キーボード
600A  マイク
600B  マイク
700A  外部記録装置
700B  外部記録装置
800A  カメラ
800B  カメラ
1101  Ａ地点の端末の画像
1105  画像を撹乱
1113  撹乱が解除された画面
1117  撹乱が解除されない画面
1121  Ｂ地点の端末の画像
1125  画像を撹乱
1133  撹乱が解除された画面
1137  撹乱が解除されない画面
1201  Ａ地点の端末の画像
1205  画像を撹乱
1213  撹乱が解除された画面
1217  撹乱が解除さない画面
1221  Ｂ地点の端末の画像
1225  画像を撹乱
1233  撹乱が解除された画面
1237  Ｂ地点の端末の画像
1241  画像を撹乱
1249  撹乱が解除されない画面
【図１】
2007116527.tif 000006
【図２】
2007116527.tif 000007
【図３】
2007116527.tif 000008
【図４】
2007116527.tif 000009
【図５】
2007116527.tif 000010
【図６】
2007116527.tif 000011
【図７】
2007116527.tif 000012
【図８Ａ】
2007116527.tif 000013
【図８Ｂ】
2007116527.tif 000014
【図９】
2007116527.tif 000015
【図１０】
2007116527.tif 000016
【図１１】
2007116527.tif 000017
【図１２】
2007116527.tif 000018