(57)【特許請求の範囲】
【請求項１】
通信回線を介して接続された第１の画像表示装置および第２の画像表示装置により同一の画像を共有する画像共有システムにおいて、
所定の対象物より採取した断層像からその対象物の三次元モデルを作成する三次元モデル構築手段と、
前記三次元モデルを所定の視点から見た場合の三次元画像を作成する三次元画像作成手段と、
前記三次元画像を前記第２の画像表示装置に前記通信回線を介して送信する第１の送信手段と、
前記三次元画像を表示する第１の表示装置と、
前記通信回線を介して送信されてくる視点変更要求を受信する第１の受信手段と、
第１のユーザによる操作に基づいて視点変更を入力される第１の入力手段と、
受信された視点変更要求または入力された視点変更に応じて視点を変更し、変更後の視点に基づく前記三次元画像を前記三次元画像作成手段に作成させ、作成させた三次元画像を、前記第１の送信手段に前記第２の画像表示装置へ送信させるとともに前記第１の表示装置に表示させる制御手段とを前記第１の画像表示装置に備え、
前記通信回線を介して送信されてくる前記三次元画像を受信する第２の受信手段と、
受信された三次元画像を表示する第２の表示装置と、
第２のユーザによる操作に基づいて視点変更を入力される第２の入力手段と、
前記第２の入力手段に視点変更を入力されると視点変更要求を生成する視点変更要求生成手段と、
その視点変更要求を前記第１の画像表示装置に前記通信回線を介して送信する第２の送信手段とを前記第２の画像表示装置に備える
ことを特徴とする画像共有システム。
【請求項２】
第１の画像表示装置は、カーソルを第１の表示装置に表示させる第１のカーソル表示手段と、第１のユーザによる操作に基づいてカーソル位置を入力される第３の入力手段と、通信回線を介して通知されたカーソル位置または前記第３の入力手段に入力されたカーソル位置に前記カーソルの表示位置を変更する第１のカーソル位置制御手段と、前記第３の入力手段に入力されたカーソル位置を第２の画像表示装置に前記通信回線を介して通知する第１のカーソル位置通知手段とを備え、
前記第２の画像表示装置は、カーソルを第２の表示装置に表示させる第２のカーソル表示手段と、第２のユーザによる操作に基づいてカーソル位置を入力される第４の入力手段と、前記通信回線を介して通知されたカーソル位置または前記第４の入力手段に入力されたカーソル位置に前記カーソルの表示位置を変更する第２のカーソル位置制御手段と、前記第４の入力手段に入力されたカーソル位置を第１の画像表示装置に前記通信回線を介して通知する第２のカーソル位置通知手段とを備える
ことを特徴とする請求項１記載の画像共有システム。
【請求項３】
第１の画像表示装置は、第１のユーザを撮影する第１の撮影手段と、前記第１のユーザの音声を集音する第１の集音手段と、前記第１の撮影手段により撮影された前記第１のユーザの画像および前記第１の集音手段により集音された前記第１のユーザの音声を所定のデータ形式に変換する第１の変換手段と、変換後の前記第１のユーザの画像および音声を第２の画像表示装置に通信回線を介して送信する第３の送信手段と、前記通信回線を介して送信されてくる前記所定のデータ形式に変換後の第２のユーザの画像および音声を受信する第３の受信手段と、受信した第２のユーザの画像および音声を、変換前の画像および音声に復元する第１の復元手段と、復元された前記第２のユーザの画像を表示する第３の表示装置と、復元された前記第２のユーザの音声を出力する第１の音声出力装置とを備え、
前記第２の画像表示装置は、前記第２のユーザを撮影する第２の撮影手段と、前記第２のユーザの音声を集音する第２の集音手段と、前記第２の撮影手段により撮影された前記第２のユーザの画像および前記第２の集音手段により集音された前記第２のユーザの音声を所定のデータ形式に変換する第２の変換手段と、変換後の前記第２のユーザの画像および音声を前記第１の画像表示装置に通信回線を介して送信する第４の送信手段と、前記通信回線を介して送信されてくる前記所定のデータ形式に変換後の前記第１のユーザの画像および音声を受信する第４の受信手段と、受信した第１のユーザの画像および音声を、変換前の画像および音声に復元する第２の復元手段と、復元された前記第１のユーザの画像を表示する第４の表示装置と、復元された前記第１のユーザの音声を出力する第２の音声出力装置とを備える
ことを特徴とする請求項１または請求項２記載の画像共有システム。
【発明の詳細な説明】
【０００１】
【発明の属する技術分野】
この発明は、通信回線を介して接続された第１の画像表示装置および第２の画像表示装置により同一の画像を共有する画像共有システムに関するものである。
【０００２】
【従来の技術】
図３１は例えば特開平２−２１８３３６号公報に記載の従来の画像共有システムを示すブロック図である。図において、５０１は、遠隔地に設置され、患者の画像情報を発生する画像撮影装置であり、５０２は、発生した画像情報を読み取り、デジタルデータに変換する画像読取装置であり、５０３は、画像情報を一時的に蓄積するとともに、患者情報、撮影条件、画像の伝送指令などを作業者に入力される画像蓄積装置であり、５０４は、画像情報を表示し確認するための表示装置である。５０５は、ラインクロックなどの画像フォーマットを変換するとともに第２の送受信装置５０７からの指令に対応する処理を実行するデータ処理部５１１と、通信回線５０６を介して第２の送受信装置５０７との間で通信を実行する通信部５１２とで構成される第１の送受信装置である。
【０００３】
５０７は、ラインクロックなどの画像フォーマットを変換するとともに第１の送受信装置５０５からの指令に対応する処理を実行するデータ処理部５２１と、通信回線５０６を介して第１の送受信装置５０５との間で通信を実行する通信部５２２とで構成される第２の送受信装置である。５０８は、第２の送受信装置５０７で受信された画像情報に所定の画像処理を施す画像処理装置であり、５０９は、画像を再生する画像出力装置である。
【０００４】
次に動作について説明する。
遠隔地において画像撮影装置５０１により発生した患者の画像情報は画像読取装置５０２により読み取られ、画像蓄積装置５０３に蓄積されるとともに、表示装置５０４に表示される。そして作業者により画像の伝送指令が入力されると、その画像情報が第１の送受信装置５０５のデータ処理部５１１により処理された後に通信部５１２により通信回線５０６を介して第２の送受信装置５０７の通信部５２２へ伝送される。
【０００５】
第２の送受信装置５０７の通信部５２２は画像情報を受信するとデータ処理部５２１に供給し、その画像情報はデータ処理部５２１により元の画像情報に変換される。そして、画像処理装置５０８により適宜その画像に対して所定の画像処理が施され、画像出力装置５０９により患者の画像が出力される。都市部の医師はこの患者の画像に基づいて診断を行う。
【０００６】
この他、関連する従来の技術としては、特開平４−１１８６８５号公報、特開平５−２６１０８７号公報、特開平９−１３５８１６号公報、特開平９−８４０００号公報、特開平１０−３１７５４号公報、特開平１０−５７３７０号公報、国際公開９３／１９６７２号公報などにそれぞれ記載がある。
【０００７】
【発明が解決しようとする課題】
従来の画像共有システムは以上のように構成されているので、遠隔地の患者の画像を見て医師が診療することはできるが、様々な視点からの患者の画像を遠隔地の医師と共有しつつ、同一視点での画像を互いに見ながら連携して診療にあたることが困難であるなどの課題があった。
【０００８】
この発明は上記のような課題を解決するためになされたもので、断層像から三次元モデルを作成し、設定された視点から三次元モデルを見た場合の三次元画像を共有し、視点変更操作があった場合にはそれに応じて視点を変更した後の三次元画像を共有するようにして、様々な視点からの患者の三次元画像を遠隔地の医師と共有しつつ、同一視点での画像を互いに見ながら連携して診療にあたることができる画像共有システムを得ることを目的とする。
【０００９】
【課題を解決するための手段】
この発明に係る画像共有システムは、所定の対象物より採取した断層像からその対象物の三次元モデルを作成する三次元モデル構築手段と、三次元モデルを所定の視点から見た場合の三次元画像を作成する三次元画像作成手段と、三次元画像を第２の画像表示装置に通信回線を介して送信する第１の送信手段と、三次元画像を表示する第１の表示装置と、通信回線を介して送信されてくる視点変更要求を受信する第１の受信手段と、第１のユーザによる操作に基づいて視点変更を入力される第１の入力手段と、受信された視点変更要求または入力された視点変更に応じて視点を変更し、変更後の視点に基づく三次元画像を三次元画像作成手段に作成させ、作成させた三次元画像を、第１の送信手段に第２の画像表示装置へ送信させるとともに第１の表示装置に表示させる制御手段とを第１の画像表示装置に備え、通信回線を介して送信されてくる三次元画像を受信する第２の受信手段と、受信された三次元画像を表示する第２の表示装置と、第２のユーザによる操作に基づいて視点変更を入力される第２の入力手段と、第２の入力手段に視点変更を入力されると視点変更要求を生成する視点変更要求生成手段と、その視点変更要求を第１の画像表示装置に通信回線を介して送信する第２の送信手段とを第２の画像表示装置に備えるものである。
【００１０】
この発明に係る画像共有システムは、カーソルを第１の表示装置に表示させる第１のカーソル表示手段と、第１のユーザによる操作に基づいてカーソル位置を入力される第３の入力手段と、通信回線を介して通知されたカーソル位置または第３の入力手段に入力されたカーソル位置にカーソルの表示位置を変更する第１のカーソル位置制御手段と、第３の入力手段に入力されたカーソル位置を第２の画像表示装置に通信回線を介して通知する第１のカーソル位置通知手段とを第１の画像表示装置にさらに備え、カーソルを第２の表示装置に表示させる第２のカーソル表示手段と、第２のユーザによる操作に基づいてカーソル位置を入力される第４の入力手段と、通信回線を介して通知されたカーソル位置または第４の入力手段に入力されたカーソル位置にカーソルの表示位置を変更する第２のカーソル位置制御手段と、第４の入力手段に入力されたカーソル位置を第１の画像表示装置に通信回線を介して通知する第２のカーソル位置通知手段とを第２の画像表示装置にさらに備えるものである。
【００１１】
この発明に係る画像共有システムは、第１のユーザを撮影する第１の撮影手段と、第１のユーザの音声を集音する第１の集音手段と、第１の撮影手段により撮影された第１のユーザの画像および第１の集音手段により集音された第１のユーザの音声を所定のデータ形式に変換する第１の変換手段と、変換後の第１のユーザの画像および音声を第２の画像表示装置に通信回線を介して送信する第３の送信手段と、通信回線を介して送信されてくる所定のデータ形式に変換後の第２のユーザの画像および音声を受信する第３の受信手段と、受信した第２のユーザの画像および音声を、変換前の画像および音声に復元する第１の復元手段と、復元された第２のユーザの画像を表示する第３の表示装置と、復元された第２のユーザの音声を出力する第１の音声出力装置とを第１の画像表示装置にさらに備え、第２のユーザを撮影する第２の撮影手段と、第２のユーザの音声を集音する第２の集音手段と、第２の撮影手段により撮影された第２のユーザの画像および第２の集音手段により集音された第２のユーザの音声を所定のデータ形式に変換する第２の変換手段と、変換後の第２のユーザの画像および音声を第１の画像表示装置に通信回線を介して送信する第４の送信手段と、通信回線を介して送信されてくる所定のデータ形式に変換後の第１のユーザの画像および音声を受信する第４の受信手段と、受信した第１のユーザの画像および音声を、変換前の画像および音声に復元する第２の復元手段と、復元された第１のユーザの画像を表示する第４の表示装置と、復元された第１のユーザの音声を出力する第２の音声出力装置とを第２の画像表示装置にさらに備えるものである。
【００１２】
【発明の実施の形態】
以下、この発明の実施の一形態を説明する。
実施の形態１．
図１は、この発明の実施の形態１による画像共有システムの構成例を示すブロック図である。図において、１１は、断層像採取装置１２により採取された対象物（例えば患者）の断層像から対象物の三次元モデルを構築し、その三次元モデルを所定の視点から見た場合の三次元画像を第１のユーザに対して表示するとともに、第１のユーザにより視点変更の入力がなされた場合および画像表示装置２１から視点変更要求を受信した場合に視点変更をし、視点変更後の三次元画像を表示するとともに画像表示装置２１に送信する画像表示装置（第１の画像表示装置）であり、１２は、患者などの対象物の二次元の断層像を採取するＸ線ＣＴ（Computed Tomography）、ＭＲＩ（Magnetic Resonance Imaging）などの断層像採取装置である。
【００１３】
画像表示装置１１において、１３−１は第１のユーザにより操作され、画像表示命令、画像送信命令、視点変更命令などを入力される操作手段（第１の入力手段、第３の入力手段）であり、１４−１は三次元画像などを表示するディスプレイなどの表示装置（第１の表示装置、第３の表示装置）であり、３１は断層像採取装置１２により採取された断層画像を読み込む断層像採取インタフェース手段であり、３２−１は公衆電話網などの広域ネットワーク（通信回線）２０を介して各種情報を送受信するモデムなどの通信制御手段（第１の送信手段、第１の受信手段、第３の送信手段、第３の受信手段）であり、３３−１は断層像および三次元画像のデータを蓄積するメモリ、ハードディスク装置などの蓄積手段である。
【００１４】
３４−１は三次元モデルに対する視点を変更する際に三次元モデルについて回転などの座標変換を実行する三次元モデル座標変換手段（三次元画像作成手段、第１の三次元画像作成手段）であり、３５−１は複数の一連の断層像から三次元モデルを構築する三次元モデル構築手段（三次元モデル構築手段、第１の三次元モデル構築手段）であり、３６−１は設定された視点から三次元モデルを見た場合の三次元画像を生成する三次元画像生成手段（三次元画像作成手段、第１の三次元画像作成手段）であり、３８−１は生成された三次元画像を一時的に記憶する画像記憶手段であり、３９は操作手段１３−１に入力された各種命令に応じた処理を各部位に実行させるとともに、画像表示装置２１から視点変更要求が受信された場合にはそれに応じた処理を各部位に実行させる制御手段（制御手段、第１の制御手段）であり、４０−１は画像記憶手段３８−１に記憶された三次元画像に対応するビデオ信号を生成し、表示装置１４−１に供給するビデオ信号生成手段である。
【００１５】
なお、操作手段１３−１および表示装置１４−１は、画像表示装置１１に設ける代わりに、画像表示装置１１と独立して設け画像表示装置１１に接続するようにしてもよい。
【００１６】
２１は、画像表示装置１１より送信されてくる三次元画像を第２のユーザに対して表示するとともに、第２のユーザにより視点変更の入力がなされた場合には画像表示装置１１に視点変更要求を送信する画像表示装置（第２の画像表示装置）である。
【００１７】
画像表示装置２１において、１３−２は第２のユーザにより操作され、画像表示命令、視点変更命令などを入力される操作手段（第２の入力手段、第４の入力手段）であり、１４−２は三次元画像などを表示するディスプレイなどの表示装置（第２の表示装置、第４の表示装置）であり、３２−２は広域ネットワーク２０を介して各種情報を送受信するモデムなどの通信制御手段（第２の送信手段、第２の受信手段、第４の送信手段、第４の受信手段）であり、３３−２は受信された三次元画像のデータを蓄積するメモリ、ハードディスク装置などの蓄積手段である。
【００１８】
３８−２は三次元画像を一時的に記憶する画像記憶手段であり、４０−２は画像記憶手段３８−２に記憶された三次元画像に対応するビデオ信号を生成し、表示装置１４−２に供給するビデオ信号生成手段である。４６は第２のユーザによる操作手段１３−２への操作により三次元モデルに対する視点変更が生じた場合に視点変更要求を生成し、通信制御手段３２−２および広域ネットワーク２０を介して画像表示装置１１に送信する視点変更要求手段（視点変更要求生成手段）であり、５１は操作手段１３−２に入力された各種命令に応じた処理を各部位に実行させる制御手段（第２の制御手段）である。
【００１９】
なお、操作手段１３−２および表示装置１４−２は、画像表示装置２１に設ける代わりに、画像表示装置２１と独立して設け画像表示装置２１に接続するようにしてもよい。
【００２０】
次に動作について説明する。
図２は、図１の画像共有システムの動作について説明するフローチャートである。図３は、図２における画像表示操作処理（ステップＳＴ１）について説明するフローチャートである。図４は、三次元モデル、三次元画像および視点の関係を示す図である。図５は、図２における送信操作処理（ステップＳＴ２）について説明するフローチャートである。図６は、図２における画像表示処理（ステップＳＴ３）について説明するフローチャートである。図７は、図２における視点変更要求処理（ステップＳＴ４）について説明するフローチャートである。図８は、図２における視点変更処理（ステップＳＴ５）について説明するフローチャートである。
【００２１】
まず図２のステップＳＴ１において、送信元となる画像表示装置１１の操作手段１３−１に画像表示命令が第１のユーザにより入力されると、図３に示す画像表示操作処理が実行される。
【００２２】
画像表示操作処理（図３）では、ステップＳＴ１１において画像表示命令が第１のユーザにより入力されると、制御手段３９はステップＳＴ１２において断層像採取インタフェース手段３１を介して断層像採取装置１２に断層像の採取を実行させ、ステップＳＴ１３において断層像採取インタフェース手段３１に断層像の読み込みを実行させる。読み込まれた断層像のデータはステップＳＴ１４において蓄積手段３３−１に蓄積される。
【００２３】
断層像の蓄積が終わると制御手段３９は、ステップＳＴ１５において三次元モデル構築手段３５−１に、蓄積手段３３−１に蓄積されている断層像から三次元モデルを作成させ、ステップＳＴ１６において三次元モデル座標変換手段３４−１に、予め設定されている視点に対応して三次元モデルの座標変換を実行させ、ステップＳＴ１７において三次元画像生成手段３６−１に、その三次元モデルをその視点から見た場合の三次元画像を作成させる。図４に示すように仮想的な光源１０２からの光が三次元モデル１０１に照射された場合に、三次元モデル１０１と視点１０５との間に仮想的に配置したスクリーン１０３に投影される像が三次元画像とされる。
【００２４】
作成された三次元画像はステップＳＴ１８において画像記憶手段３８−１に記憶される。そして、画像記憶手段３８−１に記憶された三次元画像からビデオ信号生成手段４０−１によりビデオ信号がステップＳＴ１９において生成され、表示装置１４−１に供給される。表示装置１４−１はステップＳＴ２０においてそのビデオ信号に基づきその三次元画像を第１のユーザに対して表示する。
【００２５】
このようにして画像表示操作処理が実行される。
【００２６】
次に図２のステップＳＴ２において、送信元となる画像表示装置１１の操作手段１３−１に画像送信命令が第１のユーザにより入力されると、図５に示す送信操作処理が実行される。
【００２７】
送信操作処理（図５）では、ステップＳＴ２１において画像送信命令が第１のユーザにより入力されると、制御手段３９はステップＳＴ２２において通信制御手段３２−１に、広域ネットワーク２０を介して画像表示装置２１との回線を確立させ、ステップＳＴ２３において画像記憶手段３８−１から三次元画像のデータを読み出し、ステップＳＴ２４において通信制御手段３２−１に、その三次元画像のデータを送信させる。
【００２８】
このようにして送信操作処理が実行される。
【００２９】
そして送信元である画像表示装置１１から三次元画像が送信されると、図２のステップＳＴ３において、送信先となる画像表示装置２１により図６に示す画像表示処理が実行される。
【００３０】
画像表示処理（図６）では、通信制御手段３２−２によりステップＳＴ３１において広域ネットワーク２０を介して画像表示装置１１との回線が確立され、ステップＳＴ３２において三次元画像のデータが受信され、ステップＳＴ３３において画像記憶手段３８−２に記憶される。そして、画像記憶手段３８−２に記憶された三次元画像からビデオ信号生成手段４０−２によりビデオ信号がステップＳＴ３４において生成され、表示装置１４−２に供給される。表示装置１４−２はステップＳＴ３５においてそのビデオ信号に基づきその三次元画像を第２のユーザに対して表示する。
【００３１】
このようにして画像表示処理が実行される。
ここまでのステップＳＴ１〜ステップＳＴ３の処理により、予め設定された視点での三次元画像が第１のユーザおよび第２のユーザにより共有される。次に第２のユーザによる三次元モデルに対する視点の変更が生じた場合の処理について説明する。
【００３２】
まず、図２のステップＳＴ４において、送信先である画像表示装置２１の操作手段１３−２に視点変更命令が第２のユーザにより入力されると、図７に示す視点変更要求処理が実行される。
【００３３】
視点変更要求処理（図７）では、ステップＳＴ４１において視点変更命令が第２のユーザにより入力されると、制御手段５１はステップＳＴ４２において視点変更要求手段４６に、その視点変更命令に応じて視点変更量または変更後の視点の位置を含む視点変更要求を生成させ、ステップＳＴ４３において通信制御手段３２−２に、広域ネットワーク２０を介して画像表示装置１１との回線を確立させ、ステップＳＴ４４において通信制御手段３２−２に、視点変更要求を送信させる。
【００３４】
このように視点変更要求処理が実行される。
【００３５】
そして送信先である画像表示装置２１から視点変更要求が送信されると、図２のステップＳＴ５において、送信元である画像表示装置１１により図８に示す視点変更処理が実行される。
【００３６】
視点変更処理（図８）では、通信制御手段３２−１によりステップＳＴ５１において広域ネットワーク２０を介して画像表示装置２１との回線が確立され、ステップＳＴ５２において視点変更要求が受信される。視点変更要求が受信されると、制御手段３９は、ステップＳＴ５３において断層像のデータを読み出し、ステップＳＴ５４において三次元モデル構築手段３５−１に、その断層像から三次元モデルを作成させ、ステップＳＴ５５において三次元モデル座標変換手段３４−１に、視点変更要求による視点に対応して三次元モデルの座標変換を実行させ、ステップＳＴ５６において三次元画像生成手段３６−１に、その三次元モデルをその視点から見た場合の三次元画像を作成させる。作成された三次元画像はステップＳＴ５７において画像記憶手段３８−１に記憶される。
【００３７】
そして、画像記憶手段３８−１に記憶された三次元画像からビデオ信号生成手段４０−１によりビデオ信号がステップＳＴ５８において生成され、表示装置１４−１に供給される。表示装置１４−１はステップＳＴ５９においてそのビデオ信号に基づきその三次元画像を第１のユーザに対して表示する。
【００３８】
一方、この視点変更後の三次元画像の表示に並行して、制御手段３９はステップＳＴ６０において通信制御手段３２−１に、広域ネットワーク２０を介して画像表示装置２１との回線を確立させ、ステップＳＴ６１において画像記憶手段３８−１から三次元画像のデータを読み出し、通信制御手段３２−１に、その三次元画像のデータを送信させる。
【００３９】
このようにして視点変更処理が実行される。
【００４０】
そして送信元である画像表示装置１１から三次元画像が送信されると、図２のステップＳＴ６において、送信先である画像表示装置２１により図６に示す画像表示処理がステップＳＴ３と同様に実行され、視点変更後の三次元画像が画像表示装置２１の表示装置１４−２により第２のユーザに対して表示される。
【００４１】
ここまでのステップＳＴ４〜ステップＳＴ６の処理により、第２のユーザにより送信先である画像表示装置２１に対して入力された視点変更命令に応じて実行した視点変更の後の三次元画像が第１のユーザおよび第２のユーザにより共有される。
【００４２】
なお、第１のユーザにより画像表示装置１１に対して視点変更命令が入力された場合には、図２の視点変更処理（ステップＳＴ５）および画像表示処理（ステップＳＴ６）が実行され、視点変更後の三次元画像が第１のユーザおよび第２のユーザにより共有される。この場合、視点変更処理（図８）のうちのステップＳＴ５１およびステップＳＴ５２の処理は実行されず、視点変更命令の入力に対応して制御手段３９はステップＳＴ５３以降の処理を実行させる。
【００４３】
以上のように、この実施の形態１によれば、送信元である画像表示装置１１において断層像から三次元モデルを作成し、所定の視点から見た場合の三次元画像を送信先である画像表示装置２１に送信して共有し、視点変更があった場合にはそれに応じて視点を変更した後の三次元画像を画像表示装置１１において作成し、その視点変更後の三次元画像を画像表示装置２１に送信して共有するようにしたので、様々な視点からの患者の三次元画像を遠隔地の医師と共有しつつ、同一視点での画像を互いに見ながら連携して診療にあたることができるという効果が得られる。
【００４４】
実施の形態２．
図９は、この発明の実施の形態２による画像共有システムの構成例を示すブロック図である。図において、１１Ａは、断層像採取装置１２により採取された対象物（例えば患者）の断層像のデータを画像表示装置２１Ａに送信するとともに、その断層像から対象物の三次元モデルを構築し、その三次元モデルを所定の視点から見た場合の三次元画像を第１のユーザに対して表示するとともに、第１のユーザにより視点変更の入力がなされた場合には視点変更通知を画像表示装置２１Ａに送信し、第１のユーザにより視点変更の入力がなされた場合および画像表示装置２１Ａから視点変更通知を受信した場合に視点変更をし、視点変更後の三次元画像を表示する画像表示装置（第１の画像表示装置）である。なお、１２は、実施の形態１と同様の断層像採取装置である。
【００４５】
２１Ａは、画像表示装置２１Ａより送信されてくる断層像のデータを受信し、その断層像から対象物の三次元モデルを構築し、その三次元モデルを所定の視点から見た場合の三次元画像を第２のユーザに対して表示するとともに、第２のユーザにより視点変更の入力がなされた場合には視点変更通知を画像表示装置１１Ａに送信し、第２のユーザにより視点変更の入力がなされた場合および画像表示装置１１Ａから視点変更通知を受信した場合に視点変更をし、視点変更後の三次元画像を表示する画像表示装置（第２の画像表示装置）である。
【００４６】
画像表示装置１１Ａにおいて、３７−１は、視点変更命令が入力された場合に視点変更通知を生成し、通信制御手段３２−１および広域ネットワーク２０を介して画像表示装置２１Ａに送信する視点変更通知手段（第１の視点変更通知生成手段）である。なお、画像表示装置１１Ａにおけるその他の構成要素については実施の形態１の画像表示装置１１におけるものと同様であるので、その説明を省略する。
【００４７】
画像表示装置２１Ａにおいて、３７−２は、視点変更命令が入力された場合に視点変更通知を生成し、通信制御手段３２−２および広域ネットワーク２０を介して画像表示装置１１Ａに送信する視点変更通知手段（第２の視点変更通知生成手段）である。なお、三次元モデル座標変換手段（第２の三次元画像作成手段）３４−２、三次元モデル構築手段（第２の三次元モデル構築手段）３５−２、三次元モデル画像生成手段（第２の三次元画像作成手段）３６−２は、画像表示装置１１Ａにおける三次元モデル座標変換手段３４−１、三次元モデル構築手段３５−１、三次元モデル画像生成手段３６−１とそれぞれ同様である。また、画像表示装置２１Ａにおけるその他の構成要素については実施の形態１の画像表示装置２１におけるものと同様であるので、その説明を省略する。
【００４８】
すなわち、画像表示装置１１Ａ，２１Ａは、断層像採取インタフェース手段３１を除き、同様に構成されている。
【００４９】
次に動作について説明する。
図１０は、図９の画像共有システムの動作について説明するフローチャートである。図１１は、図１０における送信操作処理（ステップＳＴ１０２）について説明するフローチャートである。図１２は、図１０における画像表示処理（ステップＳＴ１０３）について説明するフローチャートである。図１３は、図１０における視点変更操作処理（ステップＳＴ１０４）について説明するフローチャートである。図１４は、図１０における視点変更処理（ステップＳＴ１０５）について説明するフローチャートである。
【００５０】
まず図１０のステップＳＴ１０１において、送信元となる画像表示装置１１Ａの操作手段１３−１に画像表示命令が第１のユーザにより入力されると、画像表示操作処理が実行される。なお、画像操作処理については実施の形態１の場合（図３）と同様であるので、その説明を省略する。
【００５１】
次に図１０のステップＳＴ１０２において、送信元である画像表示装置１１Ａの操作手段１３−１に画像送信命令が第１のユーザにより入力されると、図１１に示す送信操作処理が実行される。
【００５２】
送信操作処理（図１１）では、ステップＳＴ１１１において画像送信命令が第１のユーザにより入力されると、制御手段３９−１はステップＳＴ１１２において通信制御手段３２−１に、広域ネットワーク２０を介して画像表示装置２１Ａとの回線を確立させ、ステップＳＴ１１３において蓄積手段３３−１から一連の断層像のデータを読み出し、ステップＳＴ１１４において通信制御手段３２−１に、その断層像のデータを画像表示装置２１Ａへ送信させる。
【００５３】
このようにして送信操作処理が実行される。
【００５４】
そして送信元である画像表示装置１１Ａから断層像が送信されると、図１０のステップＳＴ１０３において、送信先となる画像表示装置２１Ａにより図１２に示す画像表示処理が実行される。
【００５５】
画像表示処理（図１２）では、通信制御手段３２−２によりステップＳＴ１２１において広域ネットワーク２０を介して画像表示装置１１Ａとの回線が確立され、ステップＳＴ１２２において断層像のデータが受信され、ステップＳＴ１２３において蓄積手段３３−２に蓄積される。そして、断層像の蓄積が終わると制御手段５１は、ステップＳＴ１２４において三次元モデル構築手段３５−２に、蓄積手段３３−２に蓄積されている断層像から三次元モデルを作成させ、ステップＳＴ１２５において三次元モデル座標変換手段３４−２に、予め設定されている視点に対応して三次元モデルの座標変換を実行させ、ステップＳＴ１２６において三次元画像生成手段３６−２に、その三次元モデルをその視点から見た場合の三次元画像を作成させる。
【００５６】
作成された三次元画像はステップＳＴ１２７において画像記憶手段３８−２に記憶される。そして、画像記憶手段３８−２に記憶された三次元画像からビデオ信号生成手段４０−２によりビデオ信号がステップＳＴ１２８において生成され、表示装置１４−２に供給される。表示装置１４−２はステップＳＴ１２９においてそのビデオ信号に基づきその三次元画像を第２のユーザに対して表示する。
【００５７】
このようにして画像表示処理が実行される。
ここまでのステップＳＴ１０１〜ステップＳＴ１０３の処理により、予め設定された視点での三次元画像が第１のユーザおよび第２のユーザにより共有される。次に第２のユーザによる三次元モデルに対する視点の変更が生じた場合の処理について説明する。
【００５８】
まず、図１０のステップＳＴ１０４において、送信先である画像表示装置２１Ａの操作手段１３−２に視点変更命令が第２のユーザにより入力されると、図１３に示す視点変更操作処理が実行される。
【００５９】
視点変更操作処理（図１３）では、ステップＳＴ１３１において視点変更命令が第２のユーザにより入力されると、制御手段５１はステップＳＴ１３２において断層像のデータを読み出し、ステップＳＴ１３３において三次元モデル構築手段３５−２に、その断層像から三次元モデルを作成させ、ステップＳＴ１３４において三次元モデル座標変換手段３４−２に、視点変更命令により変更された視点に対応して三次元モデルの座標変換を実行させ、ステップＳＴ１３５において三次元画像生成手段３６−２に、その三次元モデルをその視点から見た場合の三次元画像を作成させる。作成された三次元画像はステップＳＴ１３６において画像記憶手段３８−２に記憶される。
【００６０】
そして、画像記憶手段３８−２に記憶された三次元画像からビデオ信号生成手段４０−２によりビデオ信号がステップＳＴ１３７において生成され、表示装置１４−２に供給される。表示装置１４−２はステップＳＴ１３８においてそのビデオ信号に基づきその三次元画像を第２のユーザに対して表示する。
【００６１】
一方、この視点変更後の三次元画像の表示に並行して、制御手段５１はステップＳＴ１３９において視点変更通知手段３７−２に、視点変更量または変更後の視点の位置を含む視点変更通知を生成させ、ステップＳＴ１４０において通信制御手段３２−２に、広域ネットワーク２０を介して画像表示装置１１Ａとの回線を確立させ、ステップＳＴ１４１において視点変更通知手段３７−２および通信制御手段３２−２に、その視点変更通知を画像表示装置１１Ａへ送信させる。
【００６２】
このようにして視点変更操作処理が実行される。
【００６３】
そして送信先である画像表示装置２１Ａから視点変更通知が送信されると、図１０のステップＳＴ１０５において、送信元である画像表示装置１１Ａにより図１４に示す視点変更処理が実行される。
【００６４】
視点変更処理（図１４）では、通信制御手段３２−１によりステップＳＴ１５１において広域ネットワーク２０を介して画像表示装置２１Ａとの回線が確立され、ステップＳＴ１５２において視点変更通知が受信される。視点変更通知が受信されると、制御手段３９−１は、ステップＳＴ１５３において断層像のデータを読み出し、ステップＳＴ１５４において三次元モデル構築手段３５−１に、その断層像から三次元モデルを作成させ、ステップＳＴ１５５において三次元モデル座標変換手段３４−１に、視点変更通知による視点に対応して三次元モデルの座標変換を実行させ、ステップＳＴ１５６において三次元画像生成手段３６−１に、その三次元モデルをその視点から見た場合の三次元画像を作成させる。作成された三次元画像はステップＳＴ１５７において画像記憶手段３８−１に記憶される。
【００６５】
そして、画像記憶手段３８−１に記憶された三次元画像からビデオ信号生成手段４０−１によりビデオ信号がステップＳＴ１５８において生成され、表示装置１４−１に供給される。表示装置１４−１はステップＳＴ１５９においてそのビデオ信号に基づきその三次元画像を第１のユーザに対して表示する。
【００６６】
このようにして視点変更処理が実行される。
ここまでのステップＳＴ１０４およびステップＳＴ１０５の処理により、第２のユーザにより画像表示装置２１Ａに対して入力された視点変更命令に応じて実行した視点変更の後の三次元画像が第１のユーザおよび第２のユーザにより共有される。
【００６７】
次に第１のユーザの操作による三次元モデルに対する視点の変更が生じた場合の処理について説明する。
【００６８】
まず、図１０のステップＳＴ１０６において、画像表示装置１１Ａの操作手段１３−１に視点変更命令が第１のユーザにより入力されると、視点変更操作処理が実行される。なお、この視点変更操作処理は、上述のステップＳＴ１０４（図１３）と同様にして画像表示装置１１Ａにより実行される。そして画像表示装置１１Ａから視点変更通知が送信されると、図１０のステップＳＴ１０７において、画像表示装置２１Ａにより視点変更処理が実行される。なお、この視点変更処理は、上述のステップＳＴ１０５（図１４）と同様にして画像表示装置２１Ａにより実行される。
【００６９】
このステップＳＴ１０６およびステップＳＴ１０７の処理により、第１のユーザにより画像表示装置２１Ａに対して入力された視点変更命令に応じて実行した視点変更の後の三次元画像が第１のユーザおよび第２のユーザにより共有される。
【００７０】
以上のように、この実施の形態２によれば、実施の形態１のよる効果の他、予め断層像のデータを共有し、各画像表示装置１１Ａ，２１Ａにおいて三次元画像を作成するようにしたので、視点変更時に画像データを送受信することなく、視点変更通知の授受のみで迅速に視点変更後の三次元画像を共有することができるという効果が得られる。
【００７１】
実施の形態３．
この発明の実施の形態３による画像共有システムは、実施の形態１による画像共有システムに、各表示装置１４−１，１４−２にカーソルを表示し、そのカーソルを共有して操作する機能を追加したものである。
【００７２】
図１５はこの発明の実施の形態３による画像共有システムの構成例を示すブロック図である。図において、４１−１は、カーソルの画像のデータを画像記憶手段３８−１に書き込み、表示画像にカーソルを重畳させるとともに、第１のユーザによる操作手段１３−１に対する操作、または画像表示装置２１より供給されるカーソル座標に応じてカーソルを表示画像上で移動させるカーソル操作手段（第１のカーソル表示手段、第１のカーソル位置制御手段）であり、４２−１は、第１のユーザによる操作手段１３−１に対する操作に応じてカーソルが移動した場合に移動後のカーソルの座標（位置）を画像表示装置２１に通知するカーソル座標通知手段（第１のカーソル位置通知手段）である。
【００７３】
４１−２は、カーソルの画像のデータを画像記憶手段３８−２に書き込み、表示画像にカーソルを重畳させるとともに、第２のユーザによる操作手段１３−２に対する操作、または画像表示装置１１より供給されるカーソル座標に応じてカーソルを表示画像上で移動させるカーソル操作手段（第２のカーソル表示手段、第２のカーソル位置制御手段）であり、４２−２は、第２のユーザによる操作手段１３−２に対する操作に応じてカーソルが移動した場合に移動後のカーソルの座標（位置）を画像表示装置１１に通知するカーソル座標通知手段（第２のカーソル位置通知手段）である。
【００７４】
なお、図１５におけるその他の構成要素については実施の形態１（図１）におけるものと同様であるので、その説明を省略する。
【００７５】
次に動作について説明する。
図１６は、図１５の画像共有システムの動作について説明するフローチャートである。図１７は、図１６におけるカーソル操作処理（ステップＳＴ２０７）について説明するフローチャートである。図１８は、図１６におけるカーソル表示処理（ステップＳＴ２０８）について説明するフローチャートである。
【００７６】
この実施の形態３による画像共有システムでは、画像表示操作処理（ステップＳＴ２０１）、送信操作処理（ステップＳＴ２０２）、画像表示処理（ステップＳＴ２０３、ステップＳＴ２０６）、視点変更要求処理（ステップＳＴ２０４）、視点変更処理（ステップＳＴ２０５）などが実施の形態１による画像共有システムと同様に実行される。
【００７７】
そして第１のユーザによりカーソル操作が操作手段１３−１になされると、カーソル操作処理（ステップＳＴ２０７）が実行される。
【００７８】
カーソル操作処理（図１７）では、ステップＳＴ２１１においてカーソル操作が第１のユーザによりなされると、制御手段３９は、ステップＳＴ２１２においてカーソル操作手段４１−１およびカーソル座標通知手段４２−１に、操作後のカーソルの座標を供給する。
【００７９】
そしてステップＳＴ２１３において、カーソル操作手段４１−１は、操作後の座標に対応してカーソルの画像のデータを画像記憶手段３８−１に書き込み、表示画像にカーソルを重畳させる。画像記憶手段３８−１に記憶された三次元画像からビデオ信号生成手段４０−１によりビデオ信号がステップＳＴ２１４において生成され、表示装置１４−１に供給される。表示装置１４−１はステップＳＴ２１５においてそのビデオ信号に基づきカーソルを伴う三次元画像を第１のユーザに対して表示する。すなわち、カーソルが操作されると、それに伴いカーソルが表示画像上を移動する。
【００８０】
一方、このカーソルを伴う三次元画像の表示に並行して、カーソル座標通知手段４２−１はステップＳＴ２１６においてカーソル座標を受け取り、ステップＳＴ２１７において通信制御手段３２−１に、広域ネットワーク２０を介して画像表示装置２１との回線を確立させ、ステップＳＴ２１８において通信制御手段３２−１および広域ネットワーク２０を介してそのカーソル座標のデータを画像表示装置２１へ送信させる。
【００８１】
このようにしてカーソル操作処理が実行される。
【００８２】
そして画像表示装置１１からカーソル座標のデータが送信されると、図１６のステップＳＴ２０８において、画像表示装置２１により図１８に示すカーソル表示処理が実行される。
【００８３】
カーソル表示処理（図１８）では、通信制御手段３２−２によりステップＳＴ２２１において広域ネットワーク２０を介して画像表示装置１１との回線が確立され、ステップＳＴ２２２においてカーソル座標のデータが受信され、ステップＳＴ２２３においてカーソル操作手段４１−２がそのカーソル座標のデータを受け取り、ステップＳＴ２２４においてカーソル操作手段４１−２により、そのカーソル座標に、画像記憶手段３８−２におけるカーソルの書き込み位置が変更される。そして、画像記憶手段３８−２に記憶された三次元画像からビデオ信号生成手段４０−２によりビデオ信号がステップＳＴ２２５において生成され、表示装置１４−２に供給される。表示装置１４−２はステップＳＴ２２６においてそのビデオ信号に基づきカーソルを伴う三次元画像を第２のユーザに対して表示する。
【００８４】
このようにしてカーソル表示処理が実行される。
ここまでのステップＳＴ２０７およびステップＳＴ２０８の処理により、第１のユーザのカーソル操作によるカーソル位置の座標に応じて各画像表示装置１１，２１で表示画像上の同一座標にカーソルが表示され、第１のユーザおよび第２のユーザによりカーソルが共有される。
【００８５】
また、第２のユーザによりカーソル操作が操作手段１３−２になされると、ステップＳＴ２０９において画像表示装置２１によりカーソル操作処理がステップＳＴ２０７と同様に実行され、表示装置１４−２でカーソル操作に応じた座標にカーソルが第２のユーザに対して表示されるとともに、カーソル座標のデータが画像表示装置１１に送信される。
【００８６】
そして画像表示装置２１からカーソル座標のデータが送信されると、図１６のステップＳＴ２１０において、画像表示装置１１によりカーソル表示処理がステップＳＴ２０８と同様に実行され、表示装置１４−２で、受信したカーソル座標にカーソルが第１のユーザに対して表示される。
【００８７】
以上のように、この実施の形態３によれば、実施の形態１による効果の他、同一の座標にカーソルを表示するとともに、そのカーソルの表示位置を両者ともに操作可能にするようにしたので、カーソルにより第１のユーザおよび第２のユーザがそれぞれ着目点を示すことができ、その着目点を共有することができるという効果が得られる。
【００８８】
実施の形態４．
この発明の実施の形態４による画像共有システムは、実施の形態２による画像共有システムに、実施の形態３と同様に、各表示装置１４−１，１４−２にカーソルを表示し、そのカーソルを共有して操作する機能を追加したものである。
【００８９】
図１９はこの発明の実施の形態４による画像共有システムの構成例を示すブロック図である。図において、４１−１および４１−２は実施の形態３によるもの同様のカーソル操作手段であり、４２−１および４２−２は実施の形態３によるもの同様のカーソル座標通知手段である。
【００９０】
なお、図１９におけるその他の構成要素については実施の形態２（図９）におけるものと同様であるので、その説明を省略する。
【００９１】
次に動作について説明する。
図２０は、図１９の画像共有システムの動作について説明するフローチャートである。この実施の形態４による画像共有システムでは、画像表示操作処理（ステップＳＴ３０１）、送信操作処理（ステップＳＴ３０２）、画像表示処理（ステップＳＴ３０３）、視点変更操作処理（ステップＳＴ３０４、ステップＳＴ３０６）、視点変更処理（ステップＳＴ３０５、ステップＳＴ３０７）などが実施の形態２による画像共有システムと同様に実行される。
【００９２】
そして第１のユーザによりカーソル操作が画像表示装置１１Ａの操作手段１３−１になされると、ステップＳＴ３０８においてカーソル操作処理が、実施の形態３の場合（図１７）と同様に実行され、表示装置１４−１でカーソル操作に応じた座標にカーソルが第１のユーザに対して表示されるとともに、カーソル座標のデータが画像表示装置２１Ａに送信される。
【００９３】
そして画像表示装置１１Ａからカーソル座標のデータが送信されると、ステップＳＴ３０９において、画像表示装置２１Ａによりカーソル表示処理が実施の形態３の場合（図１８）と同様に実行され、受信したカーソル座標にカーソルが第１のユーザに対して表示装置１４−２に表示される。
【００９４】
ここまでのステップＳＴ３０８およびステップＳＴ３０９の処理により、第１のユーザのカーソル操作によるカーソル位置の座標に応じて各画像表示装置１１Ａ，２１Ａで表示画像上の同一座標にカーソルが表示され、第１のユーザおよび第２のユーザによりカーソルが共有される。
【００９５】
また、第２のユーザによりカーソル操作が画像表示装置２１Ａの操作手段１３−２になされると、ステップＳＴ３１０において画像表示装置２１Ａによりカーソル操作処理がステップＳＴ３０８と同様に実行され、表示装置１４−２でカーソル操作に応じた座標にカーソルが第２のユーザに対して表示されるとともに、カーソル座標のデータが画像表示装置１１Ａに送信される。
【００９６】
そして画像表示装置２１Ａからカーソル座標のデータが送信されると、ステップＳＴ３１１において画像表示装置１１Ａによりカーソル表示処理がステップＳＴ３０９と同様に実行され、受信したカーソル座標にカーソルが第１のユーザに対して表示装置１４−１に表示される。
【００９７】
以上のように、この実施の形態４によれば、実施の形態２による効果の他、同一の座標にカーソルを表示するとともに、そのカーソルの表示位置を両者ともに操作可能にするようにしたので、カーソルにより第１のユーザおよび第２のユーザがそれぞれ着目点を示すことができ、その着目点を共有することができるという効果が得られる。
【００９８】
実施の形態５．
この発明の実施の形態５による画像共有システムは、実施の形態１による画像共有システムに、第１のユーザと第２のユーザとの間で使用するいわゆるＴＶ会議機能を追加したものである。
【００９９】
図２１は、この発明の実施の形態５による画像共有システムの構成例を示すブロック図である。図において、１５−１は第１のユーザを撮影するビデオカメラなどの画像入力装置（第１の撮影手段）であり、１６−１は第１のユーザの音声を集音するマイクロフォンなどの音声入力装置（第１の集音手段）であり、１７−１は第２のユーザの音声を出力するスピーカなどの音声出力装置（第１の音声出力手段）であり、４３−１は、第１のユーザおよび第２のユーザについての画像および音声のデータの授受を、広域ネットワーク２０を介して実行するＴＶ会議手段（第１の変換手段、第１の復元手段）である。
【０１００】
１５−２は第２のユーザを撮影するビデオカメラなどの画像入力装置（第２の撮影手段）であり、１６−２は第２のユーザの音声を集音するマイクロフォンなどの音声入力装置（第２の集音手段）であり、１７−２は第１のユーザの音声を出力するスピーカなどの音声出力装置（第２の音声出力手段）であり、４３−２は、第１のユーザおよび第２のユーザについての画像および音声のデータの授受を、広域ネットワーク２０を介して実行するＴＶ会議手段（第２の変換手段、第２の復元手段）である。
【０１０１】
なお、図２１におけるその他の構成要素については実施の形態１（図１）におけるものと同様であるので、その説明を省略する。
【０１０２】
次に動作について説明する。
図２２は、図２１の画像共有システムの動作を説明するフローチャートである。図２３は、図２２におけるＴＶ会議データ送信処理（ステップＳＴ４０７）について説明するフローチャートである。図２４は、図２２におけるＴＶ会議データ再生処理（ステップＳＴ４０８）について説明するフローチャートである。
【０１０３】
この実施の形態５による画像共有システムでは、画像表示操作処理（ステップＳＴ４０１）、送信操作処理（ステップＳＴ４０２）、画像表示処理（ステップＳＴ４０３、ステップＳＴ４０６）、視点変更要求処理（ステップＳＴ４０４）、視点変更処理（ステップＳＴ４０５）などが実施の形態１による画像共有システムと同様に実行される。
【０１０４】
そして、所定の操作によりＴＶ会議機能の実行が開始されると、まずステップＳＴ４０７において図２３に示すＴＶ会議データ送信処理が実行される。
【０１０５】
ＴＶ会議データ送信処理（図２３）では、ステップＳＴ４１１において画像入力装置１５−１により第１のユーザが撮影されるとともに、ステップＳＴ４１２において音声入力装置１６−１により第１のユーザの音声が集音される。そしてＴＶ会議手段４３−１は、ステップＳＴ４１３においてその第１のユーザの画像および音声を所定のデータ形式のデータに変換し、ステップＳＴ４１４において通信制御手段３２−１に画像表示装置２１との回線を確立させ、ステップＳＴ４１５において第１のユーザの画像および音声のデータであるＴＶ会議データを画像表示装置２１へ送信させる。
【０１０６】
このようにしてＴＶ会議データ送信処理が実行される。
【０１０７】
そして画像表示装置１１によりＴＶ会議データが送信されると、ステップＳＴ４０８において画像表示装置２１により図２４に示すＴＶ会議データ再生処理が実行される。
【０１０８】
ＴＶ会議データ再生処理（図２４）では、通信制御手段３２−２によりステップＳＴ４２１において広域ネットワーク２０を介して画像表示装置１１との回線が確立され、ステップＳＴ４２２においてＴＶ会議データが受信され、ステップＳＴ４２３においてＴＶ会議手段４３−２はＴＶ会議データからの画像データの分離および音声データの復元を実行する。
【０１０９】
そして、ステップＳＴ４２４においてＴＶ会議手段４３−２により、その画像データが、三次元画像とは独立に、画像記憶手段３８−２の所定の領域に記憶される。そして、画像記憶手段３８−２に記憶された画像データからビデオ信号生成手段４０−２によりビデオ信号がステップＳＴ４２５において生成され、表示装置１４−２に供給される。表示装置１４−２はステップＳＴ４２６においてそのビデオ信号に基づき第１のユーザの画像を三次元画像とは独立に第２のユーザに対して表示する。その第１のユーザの画像の表示に並行して、ステップＳＴ４２７においてＴＶ会議手段４３−２は音声出力装置１７−２に、復元した第１のユーザの音声を出力させる。
【０１１０】
このようにしてＴＶ会議データ再生処理が実行される。
【０１１１】
また同様にして、図２２のステップＳＴ４０９において画像表示装置２１により上述のＴＶ会議データ送信処理が実行され、第２のユーザについてのＴＶ会議データが画像表示装置１１に送信される。そして、ステップＳＴ４１０において画像表示装置１１により上述のＴＶ会議データ再生処理が実行され、第２のユーザの画像が表示装置１４−１に表示されるとともに、第２のユーザの音声が音声出力装置１７−１により出力される。
【０１１２】
以上のように、この実施の形態５によれば、実施の形態１による効果の他、ＴＶ会議機能を使用して互いの意志疎通を良好にすることができ、より綿密に連携して診療にあたることができるという効果が得られる。
【０１１３】
実施の形態６．
この発明の実施の形態６による画像共有システムは、実施の形態２による画像共有システムに、第１のユーザと第２のユーザとの間で使用するいわゆるＴＶ会議機能を追加したものである。
【０１１４】
図２５は、この発明の実施の形態６による画像共有システムの構成例を示すブロック図である。図において、ＴＶ会議機能のための画像入力装置１５−１，１５−２、音声入力装置１６−１，１６−２、音声出力装置１７−１，１７−２およびＴＶ会議手段４３−１，４３−２は、実施の形態５と同様のものである。
【０１１５】
なお、図２５におけるその他の構成要素については実施の形態２（図９）によるものと同様であるので、その説明を省略する。
【０１１６】
次に動作について説明する。
図２６は、図２５の画像共有システムの動作について説明するフローチャートである。この実施の形態６による画像共有システムでは、画像表示操作処理（ステップＳＴ５０１）、送信操作処理（ステップＳＴ５０２）、画像表示処理（ステップＳＴ５０３）、視点変更操作処理（ステップＳＴ５０４、ステップＳＴ５０６）、視点変更処理（ステップＳＴ５０５、ステップＳＴ５０７）などが実施の形態２による画像共有システムと同様に実行される。
【０１１７】
そして、所定の操作によりＴＶ会議機能の実行が開始されると、ステップＳＴ５０８において実施の形態５と同様にして画像表示装置１１ＡによりＴＶ会議データ送信処理が実行され、第１のユーザについてのＴＶ会議データが画像表示装置２１Ａへ送信される。画像表示装置１１ＡによりＴＶ会議データが送信されると、ステップＳＴ５０９において画像表示装置２１Ａにより実施の形態５と同様にしてＴＶ会議データ再生処理が実行され、第１のユーザの画像が表示装置１４−２に表示され、第１のユーザの音声が音声出力装置１７−２により出力される。
【０１１８】
同様にして、ステップＳＴ５１０において画像表示装置２１Ａにより同様のＴＶ会議データ送信処理が実行され、第２のユーザについてのＴＶ会議データが画像表示装置１１Ａへ送信される。そして、ステップＳＴ５１１において画像表示装置１１Ａにより同様のＴＶ会議データ再生処理が実行され、第２のユーザの画像が表示装置１４−１に表示されるとともに、第２のユーザの音声が音声出力装置１７−１により出力される。
【０１１９】
以上のように、この実施の形態６によれば、実施の形態２による効果の他、ＴＶ会議機能を使用して互いの意志疎通を良好にすることができ、より綿密に連携して診療にあたることができるという効果が得られる。
【０１２０】
実施の形態７．
この発明の実施の形態７による画像共有システムは、実施の形態３による画像共有システムに、第１のユーザと第２のユーザとの間で使用するいわゆるＴＶ会議機能を追加したものである。
【０１２１】
図２７は、この発明の実施の形態７による画像共有システムの構成例を示すブロック図である。図において、ＴＶ会議機能のための画像入力装置１５−１，１５−２、音声入力装置１６−１，１６−２、音声出力装置１７−１，１７−２およびＴＶ会議手段４３−１，４３−２は、実施の形態５と同様のものである。
【０１２２】
なお、図２７におけるその他の構成要素については実施の形態３（図１５）によるものと同様であるので、その説明を省略する。
【０１２３】
次に動作について説明する。
図２８は、図２７の画像共有システムの動作について説明するフローチャートである。この実施の形態７による画像共有システムでは、画像表示操作処理（ステップＳＴ６０１）、送信操作処理（ステップＳＴ６０２）、画像表示処理（ステップＳＴ６０３、ステップＳＴ６０６）、視点変更要求処理（ステップＳＴ６０４）、視点変更処理（ステップＳＴ６０５）、カーソル操作処理（ステップＳＴ６０７、ステップＳＴ６０９）、カーソル表示処理（ステップＳＴ６０８、ステップＳＴ６１０）などが実施の形態３による画像共有システムと同様に実行される。
【０１２４】
そして、所定の操作によりＴＶ会議機能の実行が開始されると、ステップＳＴ６１１において実施の形態５と同様にして画像表示装置１１によりＴＶ会議データ送信処理が実行され、第１のユーザについてのＴＶ会議データが画像表示装置２１へ送信される。画像表示装置１１によりＴＶ会議データが送信されると、ステップＳＴ６１２において画像表示装置２１により実施の形態５と同様にしてＴＶ会議データ再生処理が実行され、第１のユーザの画像が表示装置１４−２に表示され、第１のユーザの音声が音声出力装置１７−２により出力される。
【０１２５】
同様にして、ステップＳＴ６１３において画像表示装置２１により同様のＴＶ会議データ送信処理が実行され、第２のユーザについてのＴＶ会議データが画像表示装置１１へ送信される。そして、ステップＳＴ６１４において画像表示装置１１により同様のＴＶ会議データ再生処理が実行され、第２のユーザの画像が表示装置１４−１に表示されるとともに、第２のユーザの音声が音声出力装置１７−１により出力される。
【０１２６】
以上のように、この実施の形態７によれば、実施の形態３による効果の他、ＴＶ会議機能を使用して互いの意志疎通を良好にすることができ、より綿密に連携して診療にあたることができるという効果が得られる。
【０１２７】
実施の形態８．
この発明の実施の形態８による画像共有システムは、実施の形態４による画像共有システムに、第１のユーザと第２のユーザとの間で使用するいわゆるＴＶ会議機能を追加したものである。
【０１２８】
図２９は、この発明の実施の形態８による画像共有システムの構成例を示すブロック図である。図において、ＴＶ会議機能のための画像入力装置１５−１，１５−２、音声入力装置１６−１，１６−２、音声出力装置１７−１，１７−２およびＴＶ会議手段４３−１，４３−２は、実施の形態５と同様のものである。
【０１２９】
なお、図２９におけるその他の構成要素については実施の形態４（図１９）によるものと同様であるので、その説明を省略する。
【０１３０】
次に動作について説明する。
図３０は、図２９の画像共有システムの動作について説明するフローチャートである。この実施の形態８による画像共有システムでは、画像表示操作処理（ステップＳＴ７０１）、送信操作処理（ステップＳＴ７０２）、画像表示処理（ステップＳＴ７０３）、視点変更操作処理（ステップＳＴ７０４、ステップＳＴ７０６）、視点変更処理（ステップＳＴ７０５、ステップＳＴ７０７）、カーソル操作処理（ステップＳＴ７０８、ステップＳＴ７１０）、カーソル表示処理（ステップＳＴ７０９、ステップＳＴ７１１）などが実施の形態４による画像共有システムと同様に実行される。
【０１３１】
そして、所定の操作によりＴＶ会議機能が実行されると、ステップＳＴ７１２において実施の形態５と同様にして画像表示装置１１ＡによりＴＶ会議データ送信処理が実行され、第１のユーザについてのＴＶ会議データが画像表示装置２１Ａへ送信される。画像表示装置１１ＡによりＴＶ会議データが送信されると、ステップＳＴ７１３において画像表示装置２１Ａにより実施の形態５と同様にしてＴＶ会議データ再生処理が実行され、第１のユーザの画像が表示装置１４−２に表示され、第１のユーザの音声が音声出力装置１７−２により出力される。
【０１３２】
同様にして、ステップＳＴ７１４において画像表示装置２１Ａにより同様のＴＶ会議データ送信処理が実行され、第２のユーザについてのＴＶ会議データが画像表示装置１１Ａへ送信される。そして、ステップＳＴ７１５において画像表示装置１１Ａにより同様のＴＶ会議データ再生処理が実行され、第２のユーザの画像が表示装置１４−１に表示されるとともに、第２のユーザの音声が音声出力装置１７−１により出力される。
【０１３３】
以上のように、この実施の形態８によれば、実施の形態４による効果の他、ＴＶ会議機能を使用して互いの意志疎通を良好にすることができ、より綿密に連携して診療にあたることができるという効果が得られる。
【０１３４】
尚、以上の実施の形態では、所定の対象物から採取した断層像からその対象物の三次元モデルを作成するように説明したが、断層像に限らず、例えば、対象物の外観撮像画像から三次元モデルを作成するようにしても良い。
【０１３５】
【発明の効果】
以上のように、この発明によれば、所定の対象物より採取した断層像からその対象物の三次元モデルを作成する三次元モデル構築手段と、三次元モデルを所定の視点から見た場合の三次元画像を作成する三次元画像作成手段と、三次元画像を第２の画像表示装置に通信回線を介して送信する第１の送信手段と、三次元画像を表示する第１の表示装置と、通信回線を介して送信されてくる視点変更要求を受信する第１の受信手段と、第１のユーザによる操作に基づいて視点変更を入力される第１の入力手段と、受信された視点変更要求または入力された視点変更に応じて視点を変更し、変更後の視点に基づく三次元画像を三次元画像作成手段に作成させ、作成させた三次元画像を、第１の送信手段に第２の画像表示装置へ送信させるとともに第１の表示装置に表示させる制御手段とを第１の画像表示装置に備え、通信回線を介して送信されてくる三次元画像を受信する第２の受信手段と、受信された三次元画像を表示する第２の表示装置と、第２のユーザによる操作に基づいて視点変更を入力される第２の入力手段と、第２の入力手段に視点変更を入力されると視点変更要求を生成する視点変更要求生成手段と、その視点変更要求を第１の画像表示装置に通信回線を介して送信する第２の送信手段とを第２の画像表示装置に備えるようにしたので、様々な視点からの患者の三次元画像を遠隔地の医師と共有しつつ、同一視点での画像を互いに見ながら連携して診療にあたることができるという効果がある。
【０１３６】
この発明によれば、カーソルを第１の表示装置に表示させる第１のカーソル表示手段と、第１のユーザによる操作に基づいてカーソル位置を入力される第３の入力手段と、通信回線を介して通知されたカーソル位置または第３の入力手段に入力されたカーソル位置にカーソルの表示位置を変更する第１のカーソル位置制御手段と、第３の入力手段に入力されたカーソル位置を第２の画像表示装置に通信回線を介して通知する第１のカーソル位置通知手段とを第１の画像表示装置にさらに備え、カーソルを第２の表示装置に表示させる第２のカーソル表示手段と、第２のユーザによる操作に基づいてカーソル位置を入力される第４の入力手段と、通信回線を介して通知されたカーソル位置または第４の入力手段に入力されたカーソル位置にカーソルの表示位置を変更する第２のカーソル位置制御手段と、第４の入力手段に入力されたカーソル位置を第１の画像表示装置に通信回線を介して通知する第２のカーソル位置通知手段とを第２の画像表示装置にさらに備えるようにしたので、カーソルにより第１のユーザおよび第２のユーザがそれぞれ着目点を示すことができ、その着目点を共有することができるという効果がある。
【０１３７】
この発明によれば、第１のユーザを撮影する第１の撮影手段と、第１のユーザの音声を集音する第１の集音手段と、第１の撮影手段により撮影された第１のユーザの画像および第１の集音手段により集音された第１のユーザの音声を所定のデータ形式に変換する第１の変換手段と、変換後の第１のユーザの画像および音声を第２の画像表示装置に通信回線を介して送信する第３の送信手段と、通信回線を介して送信されてくる所定のデータ形式に変換後の第２のユーザの画像および音声を受信する第３の受信手段と、受信した第２のユーザの画像および音声を、変換前の画像および音声に復元する第１の復元手段と、復元された第２のユーザの画像を表示する第３の表示装置と、復元された第２のユーザの音声を出力する第１の音声出力装置とを第１の画像表示装置にさらに備え、第２のユーザを撮影する第２の撮影手段と、第２のユーザの音声を集音する第２の集音手段と、第２の撮影手段により撮影された第２のユーザの画像および第２の集音手段により集音された第２のユーザの音声を所定のデータ形式に変換する第２の変換手段と、変換後の第２のユーザの画像および音声を第１の画像表示装置に通信回線を介して送信する第４の送信手段と、通信回線を介して送信されてくる所定のデータ形式に変換後の第１のユーザの画像および音声を受信する第４の受信手段と、受信した第１のユーザの画像および音声を、変換前の画像および音声に復元する第２の復元手段と、復元された第１のユーザの画像を表示する第４の表示装置と、復元された第１のユーザの音声を出力する第２の音声出力装置とを第２の画像表示装置にさらに備えるようにしたので、ＴＶ会議機能を使用して互いの意志疎通を良好にすることができ、より綿密に連携して診療にあたることができるという効果がある。
【図面の簡単な説明】
【図１】  この発明の実施の形態１による画像共有システムの構成例を示すブロック図である。
【図２】  図１の画像共有システムの動作について説明するフローチャートである。
【図３】  図２における画像表示操作処理について説明するフローチャートである。
【図４】  三次元モデル、三次元画像および視点の関係を示す図である。
【図５】  図２における送信操作処理について説明するフローチャートである。
【図６】  図２における画像表示処理について説明するフローチャートである。
【図７】  図２における視点変更要求処理について説明するフローチャートである。
【図８】  図２における視点変更処理について説明するフローチャートである。
【図９】  この発明の実施の形態２による画像共有システムの構成例を示すブロック図である。
【図１０】  図９の画像共有システムの動作について説明するフローチャートである。
【図１１】図１０における送信操作処理について説明するフローチャートである。
【図１２】  図１０における画像表示処理について説明するフローチャートである。
【図１３】  図１０における視点変更操作処理について説明するフローチャートである。
【図１４】  図１０における視点変更処理について説明するフローチャートである。
【図１５】  この発明の実施の形態３による画像共有システムの構成例を示すブロック図である。
【図１６】  図１５の画像共有システムの動作について説明するフローチャートである。
【図１７】  図１６におけるカーソル操作処理について説明するフローチャートである。
【図１８】  図１６におけるカーソル表示処理について説明するフローチャートである。
【図１９】  この発明の実施の形態４による画像共有システムの構成例を示すブロック図である。
【図２０】  図１９の画像共有システムの動作について説明するフローチャートである。
【図２１】  この発明の実施の形態５による画像共有システムの構成例を示すブロック図である。
【図２２】  図２１の画像共有システムの動作を説明するフローチャートである。
【図２３】  図２２におけるＴＶ会議データ送信処理について説明するフローチャートである。
【図２４】  図２２におけるＴＶ会議データ再生処理について説明するフローチャートである。
【図２５】  この発明の実施の形態６による画像共有システムの構成例を示すブロック図である。
【図２６】  図２５の画像共有システムの動作について説明するフローチャートである。
【図２７】  この発明の実施の形態７による画像共有システムの構成例を示すブロック図である。
【図２８】  図２７の画像共有システムの動作について説明するフローチャートである。
【図２９】  この発明の実施の形態８による画像共有システムの構成例を示すブロック図である。
【図３０】  図２９の画像共有システムの動作について説明するフローチャートである。
【図３１】  従来の画像共有システムを示すブロック図である。
【符号の説明】
１１，１１Ａ  画像表示装置（第１の画像表示装置）、１３−１  操作手段（第１の入力手段、第３の入力手段）、１３−２  操作手段（第２の入力手段、第４の入力手段）、１４−１  表示装置（第１の表示装置、第３の表示装置）、１４−２  表示装置（第２の表示装置、第４の表示装置）、１５−１  画像入力装置（第１の撮影手段）、１５−２  画像入力装置（第２の撮影手段）、１６−１  音声入力装置（第１の集音手段）、１６−２  音声入力装置（第２の集音手段）、１７−１  音声出力装置（第１の音声出力手段）、１７−２  音声出力装置（第２の音声出力手段）、２０  広域ネットワーク（通信回線）、２１，２１Ａ  画像表示装置（第２の画像表示装置）、３２−１  通信制御手段（第１の送信手段、第１の受信手段、第３の送信手段、第３の受信手段）、３２−２  通信制御手段（第２の送信手段、第２の受信手段、第４の送信手段、第４の受信手段）、３４−１  三次元モデル座標変換手段（三次元画像作成手段、第１の三次元画像作成手段）、３４−２  三次元モデル座標変換手段（第２の三次元画像作成手段）、３５−１  三次元モデル構築手段（三次元モデル構築手段、第１の三次元モデル構築手段）、３５−２  三次元モデル構築手段（第２の三次元モデル構築手段）、３６−１  三次元画像生成手段（三次元画像作成手段、第１の三次元画像作成手段）、３６−２  三次元画像生成手段（第２の三次元画像作成手段）、３７−１  視点変更通知手段（第１の視点変更通知生成手段）、３７−２  視点変更通知手段（第２の視点変更通知生成手段）、３９  制御手段（制御手段、第１の制御手段）、４１−１  カーソル操作手段（第１のカーソル表示手段、第１のカーソル位置制御手段）、４１−２  カーソル操作手段（第２のカーソル表示手段、第２のカーソル位置制御手段）、４２−１  カーソル座標通知手段（第１のカーソル位置通知手段）、４２−２  カーソル座標通知手段（第２のカーソル位置通知手段）、４３−１  ＴＶ会議手段（第１の変換手段、第１の復元手段）、４３−２  ＴＶ会議手段（第２の変換手段、第２の復元手段）、４６  視点変更要求手段（視点変更要求生成手段）、５１  制御手段（第２の制御手段）。
【図１】
0003816259.tif 000002
【図２】
0003816259.tif 000003
【図３】
0003816259.tif 000004
【図４】
0003816259.tif 000005
【図５】
0003816259.tif 000006
【図６】
0003816259.tif 000007
【図７】
0003816259.tif 000008
【図８】
0003816259.tif 000009
【図９】
0003816259.tif 000010
【図１０】
0003816259.tif 000011
【図１１】
0003816259.tif 000012
【図１２】
0003816259.tif 000013
【図１３】
0003816259.tif 000014
【図１４】
0003816259.tif 000015
【図１５】
0003816259.tif 000016
【図１６】
0003816259.tif 000017
【図１７】
0003816259.tif 000018
【図１８】
0003816259.tif 000019
【図１９】
0003816259.tif 000020
【図２０】
0003816259.tif 000021
【図２１】
0003816259.tif 000022
【図２２】
0003816259.tif 000023
【図２３】
0003816259.tif 000024
【図２４】
0003816259.tif 000025
【図２５】
0003816259.tif 000026
【図２６】
0003816259.tif 000027
【図２７】
0003816259.tif 000028
【図２８】
0003816259.tif 000029
【図２９】
0003816259.tif 000030
【図３０】
0003816259.tif 000031
【図３１】
0003816259.tif 000032