(57)【要約】【課題】複数の表示装置を視覚的に一元管理しながらも個別の表示要求に応じる会議室制御システム及び会議室制御方法を提供する。【解決手段】  ライブ画像とコマンド画像とを表示する表示手段と表示手段で表示されたコマンド画像を選択する選択命令を入力する入力手段と入力手段で入力された選択命令が選択するコマンドの実行を制御する制御手段と制御手段で制御されたコマンドの実行結果を表示する第２の表示手段とを備え、選択命令はコマンド画像とライブ画像内の第２の表示手段を表す画像とを選択することを特徴とする。  この構成によれば、第１のコマンド画像と第２の表示手段を表す画像とを選択することで第２の表示手段に結果を表示させる第１のコマンドの実行を命令できるため、第２の表示手段の物理的距離に関わらず容易にプログラムの実行結果を第２の表示手段表示させる制御を行なうことができる。【選択図】図１
2007215057.tif 000002
【特許請求の範囲】
【請求項１】
会議室の様子を撮像する撮像手段と、
前記撮像手段が撮像したライブ画像と、プログラムの第１の機能の提供を指示する第１のコマンドと表示によって関連付けられた画像である第１のコマンド画像と、を表示する第１の表示手段と、
前記第１の表示手段で表示された第１のコマンド画像を選択する第１の選択命令を入力する第１の入力手段と、
前記第１の入力手段で入力された第１の選択命令が選択する第１のコマンド画像に関連付けられた第１のコマンドの実行を制御する制御手段と、
前記制御手段で制御された第１のコマンドの実行先の機器である１以上のデバイスと、を備え、
前記第１の選択命令は、第１のコマンド画像とライブ画像内の前記デバイスを表す画像とを関連付けて選択することを特徴とする会議室制御システム。
【請求項２】
前記デバイスは１以上の第２の表示手段であり、
前記撮像手段は、前記１以上の第２の表示手段を撮像し、
前記ライブ画像内には、表示手段を表す複数の画像が表示され、
前記第２の表示手段は、前記１以上の表示手段の任意の一つであることを特徴とする請求項１に記載の会議室制御システム。
【請求項３】
第１のコマンド画像は、文字画像、記号画像、絵画像、絵文字画像、又は、絵記号画像のいずれかであることを特徴とする請求項１又は２に記載の会議室制御システム。
【請求項４】
第１のコマンド画像は、アイコンであることを特徴とする請求項１又は２に記載の会議室制御システム。
【請求項５】
前記第１の入力手段で入力される第１の選択命令は、ドラッグ・アンド・ドロップによって入力されることを特徴とする請求項１ないし４に記載の会議室制御システム。
【請求項６】
前記プログラムの第１の機能は、プログラムの第２の機能の提供を指示する第２のコマンドと表示によって関連付けられた画像である第２のコマンド画像を表示する機能であり、
前記第１の表示手段における第２の領域に表示された第２のコマンド画像を選択する第２の選択命令を入力する第２の入力手段を、更に備える、ことを特徴とする請求項１ないし５会議室制御システム。
【請求項７】
前記第２のコマンド画像は、会議で使用する資料を基礎として作成されたサムネイルであり、
前記第２の選択命令は、前記サムネイルを選択する命令であり、
前記プログラムの第２の機能は、前記第２の選択命令が選択するサムネイルの作成の基礎とされた会議で使用する資料を表示する機能であり、
前記第２の表示手段は、前記第２の選択命令が選択する第２のコマンド画像に関連付けられた第２のコマンドの実行結果である第２の実行結果を表示する、ことを特徴とする請求項１ないし６会議室制御システム。
【請求項８】
前記表示手段は、会議で使用する資料を表示し、
前記第２のコマンド画像は、前記表示手段が表示する資料に関連付けられた資料を基礎として作成されたサムネイルであり、
前記第２の選択命令は、前記サムネイルを選択する命令であり、
前記プログラムの第２の機能は、前記第２の選択命令が選択するサムネイルの作成の基礎とされた資料を表示する機能であり、
前記第２の表示手段は、前記第２の選択命令が選択する第２のコマンド画像に関連付けられた第２のコマンドの実行結果である第２の実行結果を表示する、ことを特徴とする請求項１ないし６会議室制御システム。
【請求項９】
前記第２のコマンド画像は、会議で参照される議事録を基礎として作成されたサムネイルであり、
前記第２の選択命令は、前記サムネイルを選択する選択命令を入力し、
前記プログラムの第２の機能は、前記第２の選択命令が選択するサムネイルの作成の基礎とされた議事録を表示する機能であり、
前記第２の表示手段は、前記第２の選択命令が選択する第２のコマンド画像に関連付けられた第２のコマンドの実行結果である第２の実行結果を表示する、ことを特徴とする請求項１ないし６会議室制御システム。
【請求項１０】
前記会議は、テレビ会議であり、
前記第２のコマンド画像は、前記テレビ会議の接続先を表現した画像である接続先画像であり、
前記第２の選択命令は、前記接続先画像を選択する命令であり、
前記プログラムの第２の機能は、前記第２の選択命令が選択する接続先画像が表現する前記テレビ会議の接続先から受信した画像を表示する機能であり、
前記第２の表示手段は、前記第２の選択命令が選択する第２のコマンド画像に関連付けられた第２のコマンドの実行結果である第２の実行結果を表示する、ことを特徴とする請求項１ないし６会議室制御システム。
【請求項１１】
前記第２のコマンド画像は、外部の画像入力装置を表現した画像である入力装置画像であり、
前記第２の選択命令は、前記入力装置画像を選択する命令であり、
前記プログラムの第２の機能は、前記第２の選択命令が選択する前記情報入力装置から受信した画像を表示する機能であり、
前記第２の表示手段は、前記第２の選択命令が選択する第２のコマンド画像に関連付けられた第２のコマンドの実行結果である第２の実行結果を表示する、ことを特徴とする請求項１ないし６会議室制御システム。
【請求項１２】
前記第２のコマンド画像は、前記撮像手段を制御するコマンドと表示によって関連付けられた画像である制御画像であり、
前記第２の選択命令は、前記制御画像を選択する命令であり、
前記プログラムの第２の機能は、前記第２の選択命令が選択する制御画像と関連付けられたコマンドを実行する機能である、ことを特徴とする請求項１ないし６会議室制御システム。
【請求項１３】
前記第２の表示手段、及び、前記第２の入力手段は、遠隔地に設置されることを特徴とする請求項１ないし１２に記載の会議室制御システム。
【請求項１４】
前記デバイスは、表示装置、プリンタ、ファクシミリ装置、ファイルサーバ、メールサーバの内、少なくとも１つである、ことを特徴とする請求項１ないし１３に記載の会議室制御システム。
【請求項１５】
前記第１の表示手段は、前記第１の入力手段でドラッグ・アンド・ドロップによって選択された１以上の第２の表示手段に対応して表示させる画像を時系列順序に従って表示する第３の領域を有し、
前記制御装置は、前記第１の表示手段の第３の領域に表示された時系列順序に従って前記１以上の第２の表示手段へ同期して前記画像を表示させる制御を行う、
ことを特徴とする請求項１ないし１４に記載の会議室制御システム。
【請求項１６】
前記第２の機能は、接続先画像を表示するまでのテレビ会議システムの操作手順を示す機能を含む特徴とする請求項１０に記載の会議室制御システム。
【請求項１７】
プログラムの第１の機能の提供を指示する第１のコマンドと表示によって関連付けられた画像である第１のコマンド画像と、ライブ画像とを表示する第１の表示ステップと、
前記第１の表示ステップで表示された第１のコマンド画像とライブ画像内の第２の表示手段を表す画像とを選択する選択命令を入力する第１の入力ステップと、
前記第１の入力ステップで入力された選択命令が選択する第１のコマンド画像に関連付けられた第１のコマンドの実行を制御する制御ステップと、
前記制御ステップで制御された第１のコマンドの実行先の機器である１以上のデバイスと、を備え、
前記第１の選択命令は、第１のコマンド画像とライブ画像内の前記デバイスを表す画像とを関連付けて選択する、ことを特徴とする会議室制御方法。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、表示装置の表示を制御できる会議室制御システム及び会議室制御方法に関し、特に、複数の表示装置の表示を視覚的に一元管理しながらも個別の表示要求に応じる会議室制御システム及び会議室制御方法を提供することにある。
【背景技術】
【０００２】
会議室においては複数の互いに関連した資料を、距離を隔てた会議室間で共有する必要があるそこで、近年の会議室は多数のプロジェクタや大画面ディスプレイ等の表示装置を備え、テレビ会議システムを導入する等している。しかし、このように複数の会議会場に散在する表示装置をそれぞれ別個に制御することは困難であり、時に会議の進行の妨げとなっていた。よって、各会議室の表示装置を一元管理する必要が生じている。
【０００３】
このような機能を有する統合システムとしては、ライブビデオ画像内に写し出された物理的装置を表す画像領域に対し、物理的装置へ表示させる画像等をドラッグ・アンド・ドロップ操作することで物理的装置の表示を操作する技術が知られている（例えば、特許文献１参照）。
【特許文献１】特開２００５‐５１７７８
【０００４】
また、このような機能を有するマルチスクリーン制御システムとしては、ネットワークプロトコル（例えば、ＴＣＰ／ＩＰ）によりマトリックススイッチャへ命令を送信することで複数の表示装置を制御する技術が知られている（例えば、特許文献２参照）。
【特許文献２】特許３２９０３３４
【発明の開示】
【発明が解決しようとする課題】
【０００５】
ところで、上記のように画像等をドラッグ・アンド・ドロップ操作することで物理的装置の表示を制御する統合システムでは、表示制御させる画像を視覚的に一元制御できるが、例えば、物理的装置の表示を説明する者等が選択する画像を表示させるような制御を行うことができなかった。このため、一元制御された物理的装置の表示と説明者が個別に望む表示とが齟齬する場合があると言う問題が生じていた。
【０００６】
また、上記のようにマトリックススイッチャを用いて複数の表示装置を制御するマルチスクリーン制御システムでは、表示情報の入力元と出力先との対応を記憶しておく必要があり操作が困難であった。
【０００７】
本発明は、上記問題に鑑みて成されたものであり、その目的とするところは、表示装置に実行結果を表示させるプログラムの実行を制御することで、複数の表示装置の表示を視覚的に一元管理しながらも個別の表示要求に応じる会議室制御システム及び会議室制御方法を提供することにある。
【課題を解決するための手段】
【０００８】
本発明に係る会議室制御装置は、会議室の様子を撮像する撮像手段と、撮像手段が撮像したライブ画像と、プログラムの第１の機能の提供を指示する第１のコマンドと表示によって関連付けられた画像である第１のコマンド画像と、を表示する第１の表示手段と、第１の表示手段で表示された第１のコマンド画像を選択する第１の選択命令を入力する第１の入力手段と、第１の入力手段で入力された第１の選択命令が選択する第１のコマンド画像に関連付けられた第１のコマンドの実行を制御する制御手段と、制御手段で制御された第１のコマンドの実行先の機器である１以上のデバイスと、を備え、第１の選択命令は、第１のコマンド画像とライブ画像内のデバイスを表す画像とを関連付けて選択して入力されることを特徴としている。
この構成によれば、第１のコマンド画像と第２の表示手段を表す画像とを選択することで第２の表示手段に結果を表示させる第１のコマンドの実行を命令できるため、第２の表示手段の物理的距離に関わらず容易にプログラムの実行結果を第２の表示手段表示させる制御を行なうことができる。
また、第１のコマンドの入力元と第１の実行結果の出力先とを、第１のコマンド画像とライブ画像内の第２の表示手段を表す画像とを選択することで指定できるため、入力元と出力先との対応を記憶しておく必要がなく命令を入力する操作が容易となる。
【０００９】
上記構成において、デバイスは１以上の第２の表示手段であり、撮像手段は、１以上の第２の表示手段を撮像し、ライブ画像内には、表示手段を表す複数の画像が表示され、第２の表示手段は、１以上の表示手段の任意の一つである構成を採用できる。
この構成によれば、複数の表示手段の表示するプログラムの実行結果を視覚的に一元制御できる。
【００１０】
上記構成において、第１のコマンド画像は、文字画像、記号画像、絵画像、絵文字画像、又は、絵記号画像のいずれかである構成を採用できる。
この構成によれば、第１のコマンド画像は文字画像、記号画像、絵画像、絵文字画像、又は、絵記号画像のいずれかであるため、第１のコマンドと第１のコマンド画像とを容易に表示によって関連付けることができるだけでなく、第１の選択命令を入力する操作が容易となる。
【００１１】
上記構成において、第１のコマンド画像は、アイコンであることを特徴とする構成を採用できる。
この構成によれば、第１のコマンド画像はアイコンであるため、第１のコマンドと第１のコマンド画像とを容易に表示によって関連付けることができるだけでなく、第１の選択命令を入力する操作が容易となる。
【００１２】
上記構成において、第１の入力手段で入力される第１の選択命令は、ドラッグ・アンド・ドロップによって入力されることを特徴とする構成を採用できる。
この構成によれば、ドラッグ・アンド・ドロップすることによって視覚的に第１の選択命令を入力できるため、選択命令の入力操作が容易になる。
【００１３】
上記構成において、プログラムの第１の機能は、プログラムの第２の機能の提供を指示する第２のコマンドと表示によって関連付けられた画像である第２のコマンド画像を表示する機能であり、第１の表示手段における第２の領域に表示された第２のコマンド画像を選択する第２の選択命令を入力する第２の入力手段を、更に備え、第２の表示手段は、第２の選択命令が選択する第２のコマンド画像に関連付けられた第２のコマンドの実行結果である第２の実行結果を表示することを特徴とする構成を採用できる。
この構成によれば、第２の表示手段に表示される第２のコマンドの実行結果を第２の入力手段を通じて選択できるため、例えば、第２の表示手段に表示される情報を説明対象とする説明者が第２の入力手段を通じて本システムを操作することで、一元管理された情報以外に説明者の所望の情報を選択できる。
【００１４】
上記構成において、第２のコマンド画像は、会議で使用する資料を基礎として作成されたサムネイルであり、第２の選択命令は、サムネイルを選択する命令であり、プログラムの第２の機能は、第２の選択命令が選択するサムネイルの作成の基礎とされた会議で使用する資料を表示する機能である、ことを特徴とする構成を採用できる。
この構成によれば、第２の表示手段に表示される資料を第２の入力手段を通じて選択できるため、例えば、第２の表示手段に表示される資料を説明する説明者が第２の入力手段を通じて本システムを操作することで、一元管理された資料のみならず説明者の所望の資料を第２の表示手段に表示させることができる。
また、この構成によれば、第２の表示手段に表示させる資料をサムネイルとして表示して選択可能とするため、操作者が表示可能な資料を記憶しておく必要が無いだけでなく資料を選択する操作が容易となる。
【００１５】
上記構成において、表示手段は、会議で使用する資料を表示し、第２のコマンド画像は、表示手段が表示する資料に関連付けられた資料を基礎として作成されたサムネイルであり、第２の選択命令は、サムネイルを選択する命令であり、プログラムの第２の機能は、第２の選択命令が選択するサムネイルの作成の基礎とされた資料を表示する機能である、ことを特徴とする構成を採用できる。
この構成によれば、第２の表示手段に表示させる資料をサムネイルとして表示して選択可能とするため、操作者が資料を選択する操作が容易となるだけでなく、資料間の関連性を記憶しておく必要が無くなる。
【００１６】
上記構成において、第２のコマンド画像は、会議で参照される議事録を基礎として作成されたサムネイルであり、第２の選択命令は、サムネイルを選択する選択命令を入力し、プログラムの第２の機能は、第２の選択命令が選択するサムネイルの作成の基礎とされた議事録を表示する機能である、ことを特徴とする構成を採用できる。
また、この構成によれば、第２の表示手段に表示させる議事録をサムネイルとして表示して選択可能とするため、操作者が表示可能な議事録を記憶しておく必要が無いだけでなく議事録を選択する操作が容易となる。
【００１７】
上記構成において、会議は、テレビ会議であり、第２のコマンド画像は、テレビ会議の接続先を表現した画像である接続先画像であり、
第２の選択命令は、接続先画像を選択する命令であり、プログラムの第２の機能は、第２の選択命令が選択する接続先画像が表現するテレビ会議の接続先から受信した画像を表示する機能である、ことを特徴とする構成を採用できる。
この構成によれば、第２の表示手段に表示されるテレビ会議の接続先を第２の入力手段を通じて選択できるため、例えば、第２の表示手段に表示される情報を説明する説明者が第２の入力手段を通じて本システムを操作することで、一元管理された資料のみならず説明者の所望の接続先から受信した画像を第２の表示手段に表示させることができる。
また、この構成によれば、テレビ会議の接続先をサムネイルとして表示して選択可能とするため、操作者が接続可能なテレビ会議の接続先を記憶しておく必要が無いだけでなく接続先を選択する操作が容易となる。
【００１８】
上記構成において、第２のコマンド画像は、外部の画像入力装置を表現した画像である入力装置画像であり、第２の選択命令は、入力装置画像を選択する命令であり、プログラムの第２の機能は、第２の選択命令が選択する情報入力装置から受信した画像を表示する機能である、ことを特徴とする構成を採用できる。
この構成によれば、第２の表示手段に表示される情報を第２の入力手段を通じて選択できるため、例えば、第２の表示手段に表示される情報を説明する説明者が第２の入力手段を通じて本システムを操作することで、一元管理された資料のみならず説明者の所望の画像入力装置から受信した画像を第２の表示手段に表示させることができる。
また、この構成によれば、画像入力装置を画像として表示して選択可能とするため、操作者が入力可能な画像入力装置を記憶しておく必要が無いだけでなく入力先を選択する操作が容易となる。
【００１９】
上記構成において、第２のコマンド画像は、撮像手段を制御するコマンドと表示によって関連付けられた画像である制御画像であり、
第２の選択命令は、制御画像を選択する命令であり、プログラムの第２の機能は、第２の選択命令が選択する制御画像と関連付けられたコマンドを実行する機能である、ことを特徴とする構成を採用できる。
この構成によれば、第１の表示手段に表示されるライブ画像を第２の入力手段を通じて制御できるため、例えば、ライブ画像で撮像される画像を説明する説明者が第２の入力手段を通じて本システムを操作することで、説明者の所望のライブ画像を第１の表示手段に表示させることができる。
また、この構成によれば、撮像手段を制御するコマンドと関連付けられた制御画像を表示することで制御画像の選択により実行する制御コマンドを選択可能とするため、操作者が制御コマンドを記憶しておく必要が無いだけでなく制御コマンドを選択する操作が容易となる。
【００２０】
上記構成において、第２の表示手段、及び、第２の入力手段は、遠隔地に設置されることを特徴とする構成を採用できる。
この構成によれば、第１のコマンド画像と第２の表示手段を表す画像とを選択することで第２の表示手段に結果を表示させる第１のコマンドの実行を命令できるため、第２の表示手段が遠隔地に配置されるにも関わらず容易にプログラムの実行結果を第２の表示手段へ表示をさせる制御を行なうことができる。
【００２１】
上記構成において、デバイスは、表示装置、プリンタ、ファクシミリ装置、ファイルサーバ、メールサーバの内、少なくとも１つである、構成を採用できる。
この構成によれば、第１の入力手段を操作することで、表示装置、プリンタ、ファクシミリ装置、ファイルサーバ、メールサーバのいずれかを操作することができるため、複数の機器を第１の入力手段で一元的に操作できる。
【００２２】
上記構成において、第１の表示手段は、第１の入力手段でドラッグ・アンド・ドロップによって選択された１以上の第２の表示手段に対応して表示させる画像を時系列順序に従って表示する第3の領域を有し、制御装置は、前記第１の表示手段の第３の領域に表示された時系列順序に従って１以上の第２の表示手段へ同期して前記画像を表示させる制御を行う、構成を採用できる。
この構成によれば、第２の表示手段に表示させる画像を予め時系列順序に沿って第１の表示手段へ表示するため、複数の表示手段に表示させる画像を容易に一元管理できる。
【００２３】
上記構成において、前記第２の機能は、接続先画像を表示するまでのテレビ会議システムの操作手順を示す機能を含む構成を採用できる。
この構成によれば、接続先画像を表示するまでの操作手順が表示されるため、接続先画像を表示する操作をユーザが記憶する必要がなくなり、ユーザの操作負担が軽減する。
【００２４】
本発明に係る会議室制御方法は、プログラムの第１の機能の提供を指示する第１のコマンドと表示によって関連付けられた画像である第１のコマンド画像と、ライブ画像とを表示する第１の表示ステップと、第１の表示ステップで表示された第１のコマンド画像とライブ画像内の第２の表示手段を表す画像とを選択する選択命令を入力する第１の入力ステップと、第１の入力ステップで入力された選択命令が選択する第１のコマンド画像に関連付けられた第１のコマンドの実行を制御する制御ステップと、制御ステップで制御された第１のコマンドの実行先の機器である１以上のデバイスと、を備え、第１の選択命令は、第１のコマンド画像とライブ画像内のデバイスを表す画像とを関連付けて選択して入力されることを特徴としている。
この構成によれば、第１のコマンド画像と第２の表示手段を表す画像とを選択するだけで第２の表示手段に表示される第１のコマンドの実行結果を選択できるため、第２の表示手段の物理的距離に関わらずプログラムの実行結果の第２の表示手段へ表示を容易に制御できる。
【発明の効果】
【００２５】
本発明によれば、表示装置に実行結果を表示させるプログラムの実行を制御することで、複数の表示装置の表示を視覚的に一元管理しながらも個別の表示要求に応じる会議室制御システム及び会議室制御方法を提供できる。
【発明を実施するための最良の形態】
【００２６】
以下、本発明の最良の実施形態について、添付図面を参照しつつ説明する。図１は本発明の一実施例に係る議事録作成システムの構成図である。
【００２７】
本発明の会議室制御システム１００は、制御手段である制御装置１１０、アプリケーションサーバ１２１ないし１２４（以下単に、ＡＰサーバと言う）、表示切替装置１３０、第１の入力手段である第１入力装置２１０、第１の表示手段である第１表示装置２２０、プリンタ３１０、ファクシミリ装置３１１、ファイルサーバ３１２、メールサーバ３１３、第２の入力手段である第２入力装置３２１ないし３２３、表示手段の一つであり第２の表示手段である第２表示装置３３１ないし３３３、及び、撮像手段である撮像装置３４０等で構成されている。
【００２８】
本発明の会議室制御システム１００を構成する第１入力装置２１０、及び、第１表示装置２２０は、制御装置１１０等とネットワーク５００を介して接続している。ここで、ネットワーク５００を、例えば、ＬＡＮとすることで第１表示装置２２０等と制御装置１１０等とを同じ構内に設置する、又は例えば、インタネットとして第１表示装置２２０等を遠隔地に設置する構成を採用することができる。尚、第１入力装置２１０、及び、第１表示装置２２０は、通常、同一会議室内に設置される。
【００２９】
更に、本発明の会議室制御システム１００を構成するプリンタ３１０、ファクシミリ装置３１１、ファイルサーバ３１２、メールサーバ３１３、第２入力装置３２１ないし３２３、第２表示装置３３１ないし３３３、及び、撮像装置３４０は、制御装置１１０等とネットワーク５００を介して接続している。ここで、ネットワーク５００を、例えば、ＬＡＮとすることで第１表示装置２２０等と制御装置１１０等とを同じ構内に設置する、又は例えば、インタネットとして第２表示装置３３１等を遠隔地に設置する構成を採用することができる。
【００３０】
尚、プリンタ３１０、ファクシミリ装置３１１、ファイルサーバ３１２、メールサーバ３１３、及び、第２表示装置３３１ないし３３３は、撮像装置３４０が撮像可能な位置に配置される。また、通常、第２入力装置３２１ないし３２３と第２表示装置３３１ないし３３３とは、同一の会議室内に配置される。
【００３１】
また、本発明の会議室制御システム１００へ画像を入力する画像入力装置４１１及び４１２は、制御装置１１０等とネットワーク５００を介して接続している。ここで、ネットワーク５００を、例えば、ＬＡＮとすることで画像入力装置４１２と制御装置１１０等とを同じ構内に設置する、又は例えば、インタネットとして画像入力装置４１２を遠隔地に設置する構成を採用することができる。
【００３２】
制御装置１１０は、例えば、コンピュータで構成され、ＡＰサーバ１２１ないし１２４、及び、表示切替装置１３０に接続している。また、制御装置１１０は、ネットワーク５００を介して、第１入力装置２１０及び第１表示装置２２０、並びに、プリンタ３１０、ファクシミリ装置３１１、ファイルサーバ３１２、メールサーバ３１３、第２入力装置３２１ないし３２３、第２表示装置３３１ないし３３３、及び、撮像装置３４０に接続している。
【００３３】
制御装置１１０は、ＡＰサーバ１２１ないし１２４及び表示切替装置１３０、第１入力装置２１０及び第１表示装置２２０、並びに、プリンタ３１０、ファクシミリ装置３１１、ファイルサーバ３１２、メールサーバ３１３、第２入力装置３２１ないし３２３、第２表示装置３３１ないし３３３、及び、撮像装置３４０を制御する。尚、具体的な制御については後述する。
【００３４】
ＡＰサーバ１２１は、制御装置１１０及び表示切替装置１３０に接続している。アプリケーションサーバ１２１は、制御装置１１０から選択命令と会議を識別する情報である会議ＩＤとを受信する。その後、ＡＰサーバ１２１は、受信した選択情報に基づいて会議ＩＤで識別される会議で使用される資料（以下単に、会議資料と言う）、会議資料のサムネイル、第２表示装置３３１ないし３３３に表示されている会議資料に関連する資料（以下単に、関連資料）、及び、関連資料のサムネイル等をコマンドに基づいてプログラムを実行することで表示情報として制御装置１１０及び表示切替装置１３０へ送信する。
【００３５】
また、ＡＰサーバ１２１は、議事録、及び、議事録のサムネイルを受信したコマンドに基づいてプログラムを実行することで表示情報として制御装置１１０及び表示切替装置１３０へ送信する。尚、コマンド、及び、ＡＰサーバ１２２の処理については後述する。
【００３６】
ＡＰサーバ１２１は、図示は省略するが、例えば、ハードディスク等の記録媒体で構成される記憶部を備えている。これにより、アプリケーションサーバ１２１は、記憶部に会議で使用される電子データである会議資料及び議事録を蓄積している。
【００３７】
また、ＡＰサーバ１２１は、図示は省略するが例えば、リレーショナルデータベースで構成されるデータベースを備えている。
ここで、図２を参照してＡＰサーバ１２１の備えるデータベースが蓄積する情報について説明する。図２は、ＡＰサーバ１２１の備えるデータベースの一例を説明するための図である。
【００３８】
ＡＰサーバ１２１のデータベースは、資料管理テーブルＴ１０１、資料−スライドテーブルＴ１０２、関連テーブルＴ１０３、会議管理テーブルＴ２０１、会議−資料テーブルＴ３０１、及び、議事録管理テーブルＴ４０１を有している。
【００３９】
資料管理テーブルＴ１０１は、会議資料を管理するテーブルである。資料管理テーブルＴ１０１は、会議資料を識別する情報である資料ＩＤと会議資料の記憶先を表すファイル名を含むファイルパス（絶対パス又は相対パスのいずれでも構わない）とを関連付けられて蓄積している。
【００４０】
資料−スライドテーブルＴ１０２は、会議資料を識別する資料ＩＤと会議資料を構成するスライドを識別するスライドＩＤとを関連付けられて蓄積している。
【００４１】
関連テーブルＴ１０３は、資料ＩＤとスライドＩＤとで特定されるスライドに関連したスライドを資料ＩＤとスライドＩＤとで特定して関連付けている。尚、特定された一つのスライドに関連付けられるスライドは、存在しない、一つ、又は、複数のいずれかである。
【００４２】
この構成によって、特定のスライドに関連したスライドの有無、及び、特定のスライドに関連したスライドの全てを取得することができる。
【００４３】
会議関連テーブルＴ２０１は、会議を識別する情報である会議ＩＤと会議の書誌的情報である開催日付や会議の開始時刻等を関連付けられて蓄積している。
【００４４】
会議−資料テーブルＴ３０１は、会議ＩＤと資料ＩＤとを関連付けて蓄積している。これによって、会議で使用される資料を特定することができる。
【００４５】
議事録管理テーブルＴ４０１は、会議ＩＤと議事録の記憶先を表すファイル名を含むファイルパス（絶対パス又は相対パスのいずれでも構わない）とを関連付けられて蓄積している。これによって、会議で作成された議事録を特定することができる。
【００４６】
ここで、図１に戻って本会議室制御システムの構成を説明する。
ＡＰサーバ１２２は、制御装置１１０及び表示切替装置１３０に接続している。ＡＰサーバ１２２は、制御装置１１０からコマンドを受信する。その後、ＡＰサーバ１２２は、テレビ会議の接続先を表現した画像である接続先画像、及び、テレビ会議の接続先から受信した画像（以下単に、テレビ会議画像と言う）を受信したコマンドに基づいてプログラムを実行することで表示情報として制御装置１１０及び表示切替装置１３０へ送信する。尚、ＡＰサーバ１２２の処理の詳細については後述する。
【００４７】
ＡＰサーバ１２３は、制御装置１１０、表示切替装置１３０及び画像入力装置４１１又は４１２に接続している。ＡＰサーバ１２３は、制御装置１１０から選択命令を受信する。その後、ＡＰサーバ１２３は、画像入力装置４１１又は４１２を表現した画像である入力装置画像、及び、画像入力装置４１１又は４１２から受信した画像をコマンドに基づいてプログラムを実行することで表示情報として制御装置１１０及び表示切替装置１３０へ送信する。尚、ＡＰサーバ１２３の処理の詳細については後述する。
【００４８】
ＡＰサーバ１２４は、制御装置１１０及び撮像装置３４０に接続している。ＡＰサーバ１２４は、制御装置１１０からコマンドを受信する。その後、ＡＰサーバ１２４は、撮像装置３４０を制御するコマンドと表示によって関連付けられた画像である制御画像を受信したコマンドに基づいてプログラムを実行することで表示情報として表示切替装置１３０へ送信する。また、ＡＰサーバ１２４は、撮像装置３４０を制御する命令をプログラムを実行することで撮像装置３４０へ送信する。尚、ＡＰサーバ１２４の処理の詳細については後述する。
【００４９】
表示切替装置１３０は、例えば、ＣＰＵ切替装置等で構成され、制御装置１１０、ＡＰサーバ１２１ないし１２４、及び、一又は複数の第２表示装置３３１ないし３３３に接続している。表示切替装置１３０は、ＡＰサーバ１２１ないし１２４から表示情報を受信する。次に、表示切替装置１３０は、制御装置１１０から受信した切替命令に従って、受信した表示情報を第２表示装置３３１ないし３３３のいずれか一つ以上に送信する。
【００５０】
第１入力装置２１０は、例えば、タッチパネル、ボタン、マウス又はキーボード等から構成される。第１入力装置２１０は、ネットワーク５００を介して制御装置１１０へ接続している。入力装置１４０は、ユーザにより、以下で説明する第１表示装置で表示された第１コマンド画像を選択する第１選択命令を入力される。
【００５１】
尚、第１選択命令は、第１コマンド画像とライブ画像内の第２表示手段を表す画像とをドラッグ・アンド・ドロップ操作によって関連付けて選択する。また、第１コマンド画像、ライブ画像、ライブ画像内の第２表示手段を表す画像、及び、選択命令の入力方法については後述する。その後、第１入力装置２１０は、入力された選択命令をネットワーク５００を介して制御装置１１０へ送信する。
【００５２】
第１表示装置２２０は、例えばＣＲＴディスプレイや液晶画面等で構成される。第１表示装置２２０はネットワーク５００を介して制御装置１１０へ接続している。第１表示装置２２０は、制御装置１１０から表示情報を受信して表示情報を表示する。尚、第１表示装置２２０が表示する表示情報については後述する。
【００５３】
プリンタ３１０は、制御装置１１０に接続している。プリンタ３１０は、制御装置１１０からデータを受信し、受信したデータから画像データを展開し、展開した画像データを出力する。
【００５４】
ファクシミリ装置３１１は、制御装置１１０に接続している。ファクシミリ装置３１１は、制御装置１１０からデータを受信し、受信したデータから画像データを展開し、展開した画像データをＦＡＸ出力する。
【００５５】
ファイルサーバ３１２は、制御装置１１０に接続している。ファイルサーバ３１２は、制御装置１１０からデータを受信し、受信したデータを所定のディレクトリに蓄積する。
【００５６】
メールサーバ３１３は、制御装置１１０に接続している。メールサーバ３１３は、制御装置１１０からデータを受信し、受信したデータを電子メールとして、又は電子メールに添付して所定のあて先に送信する。
【００５７】
第２入力装置３２１ないし３２３は、例えば、タッチパネル、ボタン、マウス又はキーボード等から構成される。第２入力装置３２１ないし３２３は、ネットワーク５００を介して制御装置１１０へ接続している。第２入力装置３２１ないし３２３は、ユーザにより、以下で説明する第２表示手段３３１ないし３３３に表示された第２コマンド画像を選択する第２選択命令を入力される。
【００５８】
また、第２コマンド画像及び選択命令の入力方法については後述する。その後、第２入力装置３２１ないし３２３は、入力された選択命令をネットワーク５００を介して制御装置１１０へ送信する。
【００５９】
第２表示装置３３１ないし３３３は、例えばＣＲＴや液晶画面等で構成される。第２表示装置３３１ないし３３３はネットワーク５００を介して制御装置１１０へ接続している。第２表示装置３３１ないし３３３は、表示切替装置１３０から表示情報を受信して、受信した表示情報を表示する。尚、第２表示装置３３１ないし３３３が表示する表示情報については後述する。
【００６０】
ここで、図３を参照して第２入力装置３２１ないし３２３と第２表示装置３３１ないし３３３との構成を説明する。図３は、第２入力装置３２１ないし３２３と第２表示装置３３１ないし３３３との構成を説明するための図である。
【００６１】
図３において、第２表示装置３３１ないし３３３は、液晶ディスプレイで構成される。また、第２入力装置３２１ないし３２３は、液晶画面に設置されたタッチパネルで構成され、Ｘ軸とＹ軸からなる二次元座標軸に基づいて表されたユーザのタッチ位置を入力される。つまり、第２入力装置３２１ないし３２３は、タッチ位置座様によって第２コマンド画像を選択する第２の選択命令を入力する。
【００６２】
次に、図１に戻り会議室制御システムの構成の説明を引き続き行う。
撮像装置３４０は、例えば、ＣＣＤカメラ等のビデオカメラで構成され、ＡＰサーバ１２４に接続している。撮像装置３４０は、一又は複数の第２表示装置３３１ないし３３３、プリンタ３１０、ファクシミリ装置３１１、ファイルサーバ３１２、及び、メールサーバ３１３を撮像可能に配置されている。撮像装置３４０は、撮像した画像を制御装置１１０へライブ送信する。
【００６３】
撮像装置３４０は、また、ＡＰサーバ１２４から制御命令を受信する。撮像装置３４０は、受信した命令に従ってズームや方向転換といった動作を行なう。
【００６４】
画像入力装置４１１又は４１２は、例えば、コンピュータで構成され、ＡＰサーバ１２３に接続している。画像入力装置４１２は、ＡＰサーバ１２３へ画像データを送信する。
【００６５】
ネットワーク５００は、例えば、ＬＡＮ、ＷＡＮ、又は、インタネット等で構成される。
【００６６】
ここで、図４を参照して第１表示装置２２０が表示する表示画面を説明する。図４は、第１表示装置が表示する表示画面の一例である。
【００６７】
図４に示す第１表示装置２２０が表示する表示画面Ｍ１００は、ライブ画像画面ＭＳ１１０、遠隔地ライブ画像画面ＭＳ１２０、操作順序指定画面ＭＳ１３０、機能指定画面ＭＳ１４０、及び、オブジェクト指定画面ＭＳ１５０等と言うサブ画面から構成される。
【００６８】
ライブ画像画面ＭＳ１１０は、撮像装置３４０が撮像した撮像画像がライブで表示される。尚、ライブとは、一般に、一旦録音・録画等することなくリアルタイムに画像を伝達することを言うが、一時的な音声又は画像の記憶は、録音・録画等に含まれないものとする。
【００６９】
ライブ画像画面ＭＳ１１０で表示されるライブ画像は、本会議室制御システムが制御対象とする会議室の内の一つであって、特に、本会場とされる会議室を撮像した撮像画像である。尚、本会場とされる会議室が遠隔地に存在する構成を採用することもできる。
【００７０】
また、ライブ画像画面ＭＳ１１０は、本会場に配置された一又は複数の第２表示装置３３１ないし３３３を表す画像（以下単に、表示装置画像と言う）Ｇ１１１ないしＧ１１３、及び、プリンタ３１０を表す画像（以下単に、プリンタ画像と言う）Ｇ１１４を含む。尚、本実施例では、表示装置又はプリンタを例に挙げたが、その他の物理的装置であるファクシミリ装置３１１、ファイルサーバ３１２、又は、メールサーバ３１３を表示する構成を採用できる。
【００７１】
遠隔地ライブ画像画面ＭＳ１２０は、遠隔地にある撮像装置３４０会議室を撮像した撮像画像がライブで表示される。
遠隔地ライブ画像画面ＭＳ１２０の構成は、ライブ画像画面ＭＳ１１０の構成と同様であるため省略する。
【００７２】
操作順序指定画面ＭＳ１３０は、ライブ画像画面ＭＳ１１０内の表示装置画像Ｇ１１１ないしＧ１１３の表示操作を順序付けて指定する画面である。
【００７３】
操作順序指定画面ＭＳ１３０は、表示順番を有した行と、表示装置画像Ｇ１１１ないしＧ１１３を表した列とから構成される行列と、表示操作の開始を命令する操作開始ボタンＢＴ１３１と表示操作の停止を命令する操作停止ボタンＢＴ１３２と、表示対象を一つ前に戻す操作を命令する実行順序操作ボタンＢＴ１３５及び表示対象を一つ後に進める操作を命令するＢＴ１３６から構成される。
【００７４】
操作順序指定画面ＭＳ１３０の行列の要素は、それぞれ会議資料のサムネイル、議事録のサムネイル、又は、第１コマンド画像である。つまり、それぞれ第２表示装置３３１ないし３３３に表示する情報又はプログラムの実行結果を表す。尚、第１コマンド画像については後述する。
【００７５】
具体的には、第１行１列の要素は、表示操作の第１番目にライブ画像の最も左に表示された第２表示装置３３１へ表示する情報を表す。また、第１行３列の要素は、表示操作の第１番目にライブ画像の最も右に表示された第２表示装置３３３へ表示する第１コマンド画像に関連付けられたコマンドに従ったプログラムの実行結果を表す。尚、行列の要素は、
【００７６】
ここで、図５ないし１０を参照して機能指定画面ＭＳ１４０及びオブジェクト指定画面ＭＳ１５０について説明する。図５は、機能指定画面の資料アイコンを選択した場合に表示されるオブジェクト指定画面の一例を説明するための図である。尚、資料アイコンについては後述する。
【００７７】
機能指定画面ＭＳ１４０は、第１コマンド画像を表示する。図５において、第１コマンド画像は、アイコンとして表示されている。
機能指定画面ＭＳ１４０は、左から順に、資料アイコンＩ１、関連資料アイコンＩ２、議事録アイコンＩ３、テレビ会議アイコンＩ４、外部入力アイコンＩ５、及び、カメラアイコンＩ６と言うアイコンを表示している。
【００７８】
機能指定画面ＭＳ１４０の表示するアイコンＩ１ないし６は、アイコンとして絵により、ＡＰサーバ１２１ないし１２４のいずれかが実行するプログラムの第１機能の提供を指示する第１コマンドと関連付けられている。尚、第１コマンドとは、第２コマンド画像を表示する機能の提供を指示するコマンドを言う。
【００７９】
この構成によれば、第１のコマンド画像はアイコンであるため、第１のコマンドと第１のコマンド画像とを容易に表示によって関連付けることができるだけでなく、第１の選択命令を入力する操作が容易となる。
【００８０】
具体的には、資料アイコンＩ１は、第２資料コマンド画像を表示する機能の提供を指示するコマンド（以下単に、第１資料コマンドと言う）と、資料をイメージする絵によって関連付けられている。
【００８１】
尚、第２資料コマンド画像とは、ＡＰサーバ１２１が実行するプログラムの第２機能である選択された会議資料を表示する機能の提供を指示する第２コマンド（以下単に、第２資料コマンドと言う）に表示により関連付けられた画像を言う。
【００８２】
オブジェクト指定画面ＭＳ１５０は、図５に示すように、ユーザが機能指定画面ＭＳ１４０の表示する資料アイコンＩ１を選択した場合には、会議資料のサムネイルである第２資料コマンド画像ＳＳを表示する。
【００８３】
次に、図６を参照して関連資料アイコンＩ２を選択した場合に表示されるオブジェクト指定画面ＭＳ１５０について説明する。図６は、機能指定画面の関連資料アイコンＩ２を選択した場合に表示されるオブジェクト指定画面ＭＳ１５０の一例を説明するための図である。
【００８４】
関連資料アイコンＩ２は、第２関連資料コマンド画像を表示する機能の提供を指示するコマンド（以下単に、第１関連資料コマンドと言う）と、複数の資料間の関連をイメージする絵によって関連付けられている。
【００８５】
尚、第２関連資料コマンド画像とは、ＡＰサーバ１２１が実行するプログラムの第２機能である第２表示装置３３１に表示された会議資料と関連のある会議資料（以下単に、関連資料と言う）を表示する機能の提供を指示する第２コマンド（以下単に、第２関連資料コマンドと言う）に表示により関連付けられた画像を言う。
【００８６】
オブジェクト指定画面ＭＳ１５０は、図６に示すように、ユーザが機能指定画面ＭＳ１４０の表示する関連資料アイコンＩ２を選択した場合には、第２表示装置に表示されている資料の内で関連資料の表示を望む資料を第２表示装置を表す画像（とか単に、第２表示装置選択画像ＳＭと言う）を表示する。
【００８７】
その後、ユーザが選択した第２表示装置選択画像ＳＭに関連した関連資料のサムネイルである第２関連資料コマンド画像ＳＲを表示する。
【００８８】
次に、図７を参照して議事録アイコンＩ３を選択した場合に表示されるオブジェクト指定画面ＭＳ１５０について説明する。図７は、機能指定画面の議事録アイコンＩ３を選択した場合に表示されるオブジェクト指定画面ＭＳ１５０の一例を説明するための図である。
【００８９】
議事録アイコンＩ３は、第２議事録コマンド画像を表示する機能の提供を指示するコマンド（以下単に、第１議事録コマンドと言う）と、記録用のペン、記録された資料及び記録された音声をイメージする絵によって関連付けられている。
【００９０】
尚、第２議事録コマンド画像とは、ＡＰサーバ１２１が実行するプログラムの第２機能である議事録を表示する機能の提供を指示する第２コマンド（以下単に、第２議事録コマンドと言う）に表示により関連付けられた画像を言う。
【００９１】
オブジェクト指定画面ＭＳ１５０は、図７に示すように、ユーザが機能指定画面ＭＳ１４０の表示する議事録アイコンＩ３を選択した場合には、議事録のサムネイルである第２議事録コマンド画像ＳＣを表示する。
【００９２】
次に、図８を参照してテレビ会議アイコンＩ４を選択した場合に表示されるオブジェクト指定画面ＭＳ１５０について説明する。図８は、機能指定画面のテレビ会議アイコンＩ４を選択した場合に表示されるオブジェクト指定画面ＭＳ１５０の一例を説明するための図である。
【００９３】
テレビ会議アイコンＩ４は、第２テレビコマンド画像を表示する手順を表示するコマンド及び第２テレビコマンド画像を表示する機能の提供を指示するコマンド（以下単に、両コマンドを第１テレビコマンドと言う）と、テレビをイメージする絵によって関連付けられている。
【００９４】
尚、第２テレビコマンド画像とは、ＡＰサーバ１２２が実行するプログラムの第２機能であるテレビ会議の接続先から受信した画像を表示する機能の提供を指示する第２コマンド（以下単に、第２テレビコマンドと言う）に表示により関連付けられた画像を言う。
【００９５】
オブジェクト指定画面ＭＳ１５０は、図８に示すように、ユーザが機能指定画面ＭＳ１４０の表示するテレビ会議アイコンＩ４を選択した場合には、接続先画像である第２テレビコマンド画像ＳＴを表示する。
【００９６】
次に、図９を参照して外部入力アイコンＩ５を選択した場合に表示されるオブジェクト指定画面ＭＳ１５０について説明する。図９は、機能指定画面の外部入力アイコンＩ５を選択した場合に表示されるオブジェクト指定画面ＭＳ１５０の一例を説明するための図である。
【００９７】
外部入力アイコンＩ５は、第２外部入力コマンド画像を表示する機能の提供を指示するコマンド（以下単に、第１外部入力コマンドと言う）と、画像入力装置４１１又は４１２を構成する一例であるコンピュータをイメージする絵によって関連付けられている。
【００９８】
尚、第２外部入力コマンド画像とは、ＡＰサーバ１２３が実行するプログラムの第２機能である画像入力装置４１１又は４１２から受信した画像を表示する機能の提供を指示する第２コマンド（以下単に、第２外部入力コマンドと言う）に表示により関連付けられた画像を言う。
【００９９】
オブジェクト指定画面ＭＳ１５０は、図９に示すように、ユーザが機能指定画面ＭＳ１４０の表示する外部入力アイコンＩ５を選択した場合には、入力装置画像である第２外部入力コマンド画像ＳＦを表示する。
【０１００】
次に、図１０を参照してカメラアイコンＩ６を選択した場合に表示されるオブジェクト指定画面ＭＳ１５０について説明する。図１０は、機能指定画面のカメラアイコンＩ６を選択した場合に表示されるオブジェクト指定画面ＭＳ１５０の一例を説明するための図である。
【０１０１】
カメラアイコンＩ６は、第２カメラコマンド画像を表示する機能の提供を指示するコマンド（以下単に、第１カメラコマンドと言う）と、撮像装置３４０を構成する一例であるカメラをイメージする絵によって関連付けられている。
【０１０２】
尚、第２カメラコマンド画像とは、ＡＰサーバ１２４が実行するプログラムの第２機能である撮像装置３４０を制御する機能の提供を指示する第２コマンド（以下単に、第２カメラコマンドと言う）に表示により関連付けられた画像を言う。
【０１０３】
オブジェクト指定画面ＭＳ１５０は、図１０に示すように、ユーザが機能指定画面ＭＳ１４０の表示するカメラアイコンＩ６を選択した場合には、制御画像である第２カメラコマンド画像ＳＤを表示する。
【０１０４】
ここで、図１１を参照して第１コマンド画像について説明する。図１１は、第１コマンド画像の表示を説明するための図である。
図１１に示すように、第１コマンド画像は、絵画像、文字画像、記号画像、絵文字画像、及び、絵記号画像である第１コマンド画像Ｉ３、ＩＣ３、ＩＭ３、ＩＰＣ３、及び、ＩＰＭ３としても表される。
【０１０５】
第１コマンド画像Ｉ３は、会議議事録を表示する機能を議事録を記録するための鉛筆、議事録を構成する資料、及び、議事録に関連付けられた音声をイメージする絵によって表している。
【０１０６】
第１コマンド画像ＩＣ３は、会議議事録を表示する機能を、会議議事録を表す文字「Ｒｅｃ」よって表している。
第１コマンド画像ＩＭ３は、会議議事録を表示する機能を、記録を表す記号「○」によって表している。
【０１０７】
第１コマンド画像ＩＰＣ３は、会議議事録を表示する機能を、会議議事録を表す文字「Ｒｅｃ」を、議事録を記録するための鉛筆をイメージする絵によって絵文字として表している。
【０１０８】
第１コマンド画像ＩＰＭ３は、会議議事録を表示する機能を、記録を表す記号「○」、議事録を記録するための鉛筆をイメージする絵によって絵記号として表している。
【０１０９】
この構成によれば、第１のコマンド画像は文字画像、記号画像、絵画像、絵文字画像、又は、絵記号画像のいずれかであるため、第１のコマンドと第１のコマンド画像とを容易に表示によって関連付けることができるだけでなく、第１の選択命令を入力する操作が容易となる。
【０１１０】
ここで、図４に戻り、第１表示装置２２０に表示される表示画面Ｍ１００について引き続き説明する。
機能指定画面ＭＳ１４０に表示された第１コマンド画像及びオブジェクト指定画面ＭＳ１５０に表示された第２コマンド画像は、それぞれドラッグ・アンド・ドロップ操作の対象となる。
【０１１１】
この構成によれば、ドラッグ・アンド・ドロップすることによって視覚的に第１の選択命令を入力できるため、選択命令の入力操作が容易になる。
【０１１２】
具体的には、第１コマンド画像及び第２コマンド画像をドラッグし、操作順序指定画面ＭＳ１３０の要素としてドロップ、若しくは、ライブ画像画面ＭＳ１１０又は遠隔地ライブ画像画面ＭＳ１２０のライブ画像に表示された複数の表示装置画像Ｇ１１１ないし１１３又は１２１ないしＧ１２３、若しくは、プリンタ画像Ｇ１２４の内の一つにドロップする操作が可能である。
【０１１３】
これにより、ユーザは、第１コマンド画像又は第２コマンド画像と表示装置画像Ｇ１１１ないし１１３又は１２１ないしＧ１２３、若しくは、プリンタ画像Ｇ１１４とを関連付けて選択する。
【０１１４】
この構成によれば、第１のコマンド画像と第２の表示手段を表す画像とを選択することで第２の表示手段に結果を表示させる第１のコマンドの実行を命令できるため、第２の表示手段の物理的距離に関わらず容易にプログラムの実行結果を第２の表示手段へ表示させる制御を行なうことができる。
また、この構成によれば、第１のコマンドの入力元と第１の実行結果の出力先とを、第１のコマンド画像とライブ画像内の第２の表示手段を表す画像とを選択することで指定できるため、入力元と出力先との対応を記憶しておく必要がなく命令を入力する操作が容易となる。
【０１１５】
つまり、ライブ画像内のデバイスを表す画像、即ちホットスポット(機器に対応した制御可能領域)は、デバイスとその表示領域(領域を表す位置座標)が予め登録され、該当領域が指示されたとき、対応するデバイスが選択される。
【０１１６】
更にまた、この構成によれば、複数の表示手段の表示するプログラムの実行結果を視覚的に一元制御できる。
【０１１７】
ここで、図１２を参照して、機能指定画面ＭＳ１４０に表示された第１コマンド画像をドラッグし、ライブ画像画面ＭＳ１１０又は遠隔地ライブ画像画面ＭＳ１２０のライブ画像に表示された表示装置画像Ｇ１１１ないし１１３又は１２１ないしＧ１２３ドロップする操作をユーザがした場合に実行される制御装置１１０の制御処理を説明する。図１２は、制御装置１１０の制御処理を説明するための図である。
【０１１８】
先ず、制御装置１１０は、第１入力装置２１０から第１コマンド画像とライブ画像内の第２表示装置を表す画像とをドラッグ・アンド・ドロップによって関連付けて選択すること指示する選択命令を第１入力装置２１０から受信する（ステップＳＴ１）。
【０１１９】
次に、制御装置１１０は、選択命令によって選択された第２表示装置（以下単に、選択第２表示装置と言う）を取得する（ステップＳＴ２）。これは、第１入力手段２１０から入力されたドロップ操作のされた画面上の位置座標と第１表示装置２２０へ表示するよう制御しているライブ画像の画面上の位置座標とを比較することで得られる。
【０１２０】
その後、制御装置１１０は、選択命令によって選択された第１コマンド画像（以下単に、選択第１コマンド画像）を取得する（ステップＳＴ３）。これも同様に、第１入力手段２１０から入力されたドラッグ操作のされた画面上の位置座標と第１表示装置２２０へ表示するよう制御している機能指定画面ＭＳ１４０の画面上の位置座標とを比較することで得られる。
【０１２１】
次に、制御装置１１０は、ステップＳＴ３で取得した選択第１コマンド画像に関連付けられた第１コマンドを取得する（ステップＳＴ４）。
その後、制御装置１１０は、ステップＳＴ３で取得した第１コマンドを実行可能なＡＰサーバ（以下単に、実行サーバと言う）を取得する（ステップＳＴ５）。
【０１２２】
具体的には、選択第１コマンド画像が資料アイコンＩ１、関連資料アイコンＩ２、又は、議事録アイコンＩ３である場合にはＡＰサーバ１２１を、テレビ会議アイコンＩ４の場合にはＡＰサーバ１２２を、外部入力アイコンＩ５の場合にはＡＰサーバ１２３を、又は、カメラアイコンＩ６の場合にはＡＰサーバ１２４を実行サーバとする。
【０１２３】
次に、制御装置１１０は、ステップＳＴ２で取得した選択第２表示装置へ、ステップＳＴ４で取得した実行サーバの表示を切り替えるように、表示切替装置１３０へ切替通知を通知する（ステップＳＴ６）。
【０１２４】
また、この構成によれば、第１のコマンドの入力元と第１の実行結果の出力先とを、第１のコマンド画像とライブ画像内の第２の表示手段を表す画像とを選択することで指定できるため、入力元と出力先との対応を記憶しておく必要がなく命令を入力する操作が容易となる。
【０１２５】
その後、制御装置１１０は、実行サーバへ第１コマンドを通知する（ステップＳＴ７）。尚、第１コマンドが第１資料コマンドである場合には、会議ＩＤも実行サーバへ送信する。
【０１２６】
次に、制御装置１１０は、第２入力装置から第２選択命令を受信する（ステップＳＴ８）。その後、制御装置１１０は、受信した第２選択命令を実行サーバへを送信する（ステップＳＴ９）。
その後、制御装置１１０は、処理を終了する。
【０１２７】
この構成によれば、第２の表示手段に表示される第２のコマンドの実行結果を第２の入力手段を通じて選択できるため、例えば、第２の表示手段に表示される情報を説明対象とする説明者が第２の入力手段を通じて本システムを操作することで、一元管理された情報以外に説明者の所望の情報を選択できる。
【０１２８】
次に、図１３を参照して、第１コマンド画像をドラッグし、表示装置画像Ｇ１１１ないし１１３又は１２１ないしＧ１２３へドロップする操作をユーザがした場合に実行される実行サーバの実行処理を説明する。図１３は、実行サーバの制御処理を説明するための図である。
【０１２９】
先ず、実行サーバは、制御装置１１０から第１コマンドを受領する（ステップＳＴ１０１）。尚、第１コマンドが第１資料コマンドである場合には、会議ＩＤも制御装置１１０から受信する。
【０１３０】
次に、実行サーバは、第１コマンドを実行する（ステップＳＴ１０２）。
具体的には、第１コマンドが第１資料コマンドであり実行サーバがＡＰサーバ１２１である場合には、受信した会議ＩＤに基づいて会議−資料テーブルＴ３０１を検索して会議資料を取得する。その後、取得した会議資料を基礎としてサムネイルを作成する。
【０１３１】
また、この構成によれば、第２の表示手段に表示させる資料をサムネイルとして表示して選択可能とするため、操作者が表示可能な資料を記憶しておく必要が無いだけでなく資料を選択する操作が容易となる。
【０１３２】
特に、ＡＰサーバ１２１は、作成したサムネイルと作成したサムネイルの作成の基礎とされた会議資料の表示指示をする第２資料コマンドとを関連つけることで、サムネイルを第２資料コマンド画像として作成する。
【０１３３】
この構成によれば、第２の表示手段に表示させる資料をサムネイルとして表示して選択可能とするため、操作者が資料を選択する操作が容易となるだけでなく、資料間の関連性を記憶しておく必要が無くなる。
【０１３４】
第１コマンドが第１関連資料コマンドであり実行サーバがＡＰサーバ１２１である場合には、第２表示装置３３１ないし３３に表示させている会議資料の関連資料を、表示させている会議資料の資料ＩＤ及びスライドＩＤを基に関連テーブルＴ１０２を検索することで取得する。その後、取得した会議資料を基礎としてサムネイルを作成する。
【０１３５】
特に、ＡＰサーバ１２１は、作成したサムネイルと作成したサムネイルの作成の基礎とされた関連資料の表示指示をする第２資料コマンドとを関連つけることで、サムネイルを第２関連資料コマンド画像として作成する。
【０１３６】
第１コマンドが第１議事録コマンドであり実行サーバがＡＰサーバ１２１である場合には、議事録を議事録テーブルＴ４０１を検索することで取得する。その後、取得した議事録を基礎としてサムネイルを作成する。
【０１３７】
特に、ＡＰサーバ１２１は、作成したサムネイルと作成したサムネイルの作成の基礎とされた議事録の表示指示をする第２資料コマンドとを関連つけることで、サムネイルを第２議事録コマンド画像として作成する。
【０１３８】
また、この構成によれば、第２の表示手段に表示させる議事録をサムネイルとして表示して選択可能とするため、操作者が表示可能な議事録を記憶しておく必要が無いだけでなく議事録を選択する操作が容易となる。
【０１３９】
第１コマンドが第１テレビコマンドであり実行サーバがＡＰサーバ１２２である場合には、それぞれ接続先画像を表示するまでの手順を表した画像を生成する。次に、ＡＰサーバ１２２は、生成した画像を表示切替装置１３０へ送信する。その後、ユーザが接続先画像を表示するまでの手順を実行した後に、接続先画像を生成し、第２テレビコマンドと関連つけることで第２テレビコマンド画像として生成する。
【０１４０】
第１コマンドが第１コマンドが第１外部入力コマンドであり実行サーバがＡＰサーバ１２３である場合、及び、第１コマンドが第１カメラコマンドであり実行サーバがＡＰサーバ１２４である場合には、それぞれ入力装置画像、又は、制御画像を生成し、それぞれ第２外部入力コマンド、又は、第２カメラコマンドと関連つけることで第２外部入力コマンド画像、又は、第２カメラコマンド画像として生成する。
【０１４１】
この構成によれば、接続先画像を表示するまでの操作手順が表示されるため、接続先画像を表示する操作をユーザが記憶する必要がなくなり、ユーザの操作負担が軽減する。
【０１４２】
また、この構成によれば、テレビ会議の接続先を画像として表示して選択可能とするため、操作者が接続可能なテレビ会議の接続先を記憶しておく必要が無いだけでなく接続先を選択する操作が容易となる。
【０１４３】
また、この構成によれば、撮像手段を制御するコマンドと関連付けられた制御画像を表示することで制御画像の選択により実行する制御コマンドを選択可能とするため、操作者が制御コマンドを記憶しておく必要が無いだけでなく制御コマンドを選択する操作が容易となる。
【０１４４】
更に、この構成によれば、画像入力装置を画像として表示して選択可能とするため、操作者が入力可能な画像入力装置を記憶しておく必要が無いだけでなく入力先を選択する操作が容易となる。
【０１４５】
次に、実行サーバは、第１コマンドの実行結果である第１実行結果を表示切替装置へ送信する（ステップＳＴ１０３）。
【０１４６】
その後、実行サーバは、制御装置１１０から第２選択命令を受領する（ステップＳＴ１０４）。
【０１４７】
次に、実行サーバは、第２選択命令が選択する第２コマンド画像を取得する（ステップＳＴ１０５）。これは、第２入力手段３２１ないし３２３から入力された画面上のタッチ位置の位置座標と第２表示装置３３１ないし３３３へ表示するよう制御している第１実行結果の位置座標とを比較することで得られる。
【０１４８】
その後、実行サーバは、第２コマンド画像に関連付けられた第２コマンドを取得する（ステップＳＴ１０６）。これは、実行サーバが、第１コマンドの実行によって第２コマンド画像を生成した際に、第２コマンド画像と第２コマンドとの関連を記憶しておくことで可能となる。
【０１４９】
次に、実行サーバは、ステップＳＴ１０５で取得した第２コマンドを実行する（ステップＳＴ１０７）。
具体的には、第２コマンドが第２資料コマンドである場合には選択されたサムネイルの基礎とされた会議資料を、第２関連資料コマンドである場合には選択されたサムネイルの基礎とされた関連資料を、第２議事録コマンドである場合には選択されたサムネイルの基礎とされた議事録を、第２テレビコマンドである場合には接続先から受信した画像を、第２外部入力コマンドである場合には画像入力装置４１１又は４１２から受信した画像を、表示情報として表示切替装置１３０へ送信する。第２コマンドが第２カメラコマンドである場合には撮像装置３４０を制御するコマンドを撮像装置３４０へ送信する。
【０１５０】
この構成によれば、第１の表示手段に表示されるライブ画像を第２の入力手段を通じて制御できるため、例えば、ライブ画像で撮像される画像を説明する説明者が第２の入力手段を通じて本システムを操作することで、説明者の所望のライブ画像を第１の表示手段に表示させることができる。
【０１５１】
実行サーバは、第２コマンドが第２カメラコマンドであるかを判断する（ステップＳＴ１０８）。実行サーバは、第２コマンドが第２カメラコマンドであると判断した場合には処理を終了し、そうでない場合にはステップＳＴ１０９の処理を実行する。
【０１５２】
ステップＳＴ１０８において、実行サーバは、第２コマンドが第２カメラコマンドでないと判断した場合には、第２コマンドの実行結果である第２実行結果を表示切替装置へ送信する（ステップＳＴ１０９）。その後、実行サーバは処理を終了する。
【０１５３】
この構成によれば、第２の表示手段に表示される資料を第２の入力手段を通じて選択できるため、例えば、第２の表示手段に表示される資料を説明する説明者が第２の入力手段を通じて本システムを操作することで、一元管理された資料のみならず説明者の所望の資料を第２の表示手段に表示させることができる。
【０１５４】
この構成によれば、第２の表示手段に表示される情報を第２の入力手段を通じて選択できるため、例えば、第２の表示手段に表示される情報を説明する説明者が第２の入力手段を通じて本システムを操作することで、一元管理された資料のみならず説明者の所望の画像入力装置から受信した画像を第２の表示手段に表示させることができる。
【０１５５】
この構成によれば、第２の表示手段に表示されるテレビ会議の接続先を第２の入力手段を通じて選択できるため、例えば、第２の表示手段に表示される情報を説明する説明者が第２の入力手段を通じて本システムを操作することで、一元管理された資料のみならず説明者の所望の接続先から受信した画像を第２の表示手段に表示させることができる。
【０１５６】
次に、図１４を参照して、機能指定画面ＭＳ１４０に表示された第１コマンド画像をドラッグし、操作順序指定画面ＭＳ１３０へドロップする操作をユーザがした場合に実行される制御装置１１０の制御処理を説明する。図１４は、制御装置１１０の制御処理の他例を説明するための図である。
【０１５７】
先ず、制御装置１１０は、第１入力装置２１０から第１コマンド画像と操作順序指定画面ＭＳ１３０の第２表示装置を表す列と実行順序とをドラッグ・アンド・ドロップによって関連付けて選択すること指示する選択命令を第１入力装置２１０から受信する（ステップＳＴ２０１）。
【０１５８】
次に、制御装置１１０は、選択命令によって選択された実行順序（操作順序）を取得する（ステップＳＴ２０２）。
その後の制御装置１１０の実行する処理であるステップＳＴ２０３ないしステップＳＴ２０６は、図１２に示したステップＳＴ２ないしステップＳＴ５と同様であるため省略する。
【０１５９】
ステップＳＴ２０６を実行した後には、ステップＳＴ２０５で取得した第１コマンドを実行順序を行とし、選択表示装置を列とする第１コマンド行列の所定の位置に挿入する（ステップＳＴ２０７）。
【０１６０】
次に、制御装置１１０は、操作順序指定画面ＭＳ１３０の操作開始ボタンＢＴ１３２を選択することで実行開始命令を制御装置１１０から受領したかを判断する（ステップＳＴ２０８）。実行開始命令を受領していると判断した場合にはステップＳＴ２０９の処理を、そうでない場合にはステップＳＴ２０１に戻り上記処理を繰り返す。
【０１６１】
ステップＳＴ２０８において、制御装置１１０は、実行開始命令を受領していると判断した場合には、第１コマンド行列から処理対象としていない行（以下単に、未処理行と言う）が存在するかを判断する（ステップＳＴ２０８）。制御装置１１０は、未処理行が存在すると判断する場合にはステップＳＴ２１０の処理を、そうでない場合には処理を終了する。
【０１６２】
ステップＳＴ２０９において、制御装置１１０は、未処理行が存在すると判断した場合には、未処理行の第１コマンドと、それぞれの選択表示装置とについて、ステップＳＴ２１０ないしステップＳＴ２１３の処理を実行する。制御装置１１０は、ステップＳＴ２１３の処理を実行した後には、ステップＳＴ２０９に戻り上記処理を繰り返す。尚、ステップＳＴ２１０ないしステップＳＴ２１３の処理は、図１２で説明したステップＳＴ６ないしステップＳＴ９と同様であるため省略する。
【０１６３】
また、機能指定画面ＭＳ１４０に表示された第１コマンド画像をドラッグし、操作順序指定画面ＭＳ１３０へドロップする操作をユーザがした場合に実行される実行サーバの実行処理は、図１３で示した処理と同様であるため説明は省略する。
【０１６４】
この構成によれば、第２の表示手段に表示させる画像を予め時系列順序に沿って第１の表示手段へ表示するため、複数の表示手段に表示させる画像を容易に一元管理できる。
【０１６５】
次に、オブジェクト指定画面ＭＳ１５０に表示された第２コマンド画像をドラッグし、ライブ画像画面ＭＳ１１０又は遠隔地ライブ画像画面ＭＳ１２０のライブ画像に表示された表示装置画像Ｇ１１１ないし１１３又は１２１ないしＧ１２３、若しくは、プリンタ画像Ｇ１１４へドロップする操作をユーザがした場合に実行される制御装置１１０の制御処理を説明する。
【０１６６】
先ず、制御装置１１０は、第１入力装置２１０から第２コマンド画像とライブ画像内の第２表示装置又はプリンタを表す画像とをドラッグ・アンド・ドロップによって関連付けて選択すること指示する選択命令を第１入力装置２１０から受信する。
【０１６７】
次に、制御装置１１０は、選択命令によって選択されたプリンタ３１０又は選択第２表示装置を取得する。その後、制御装置１１０は、選択命令によって選択された第２コマンド画像（以下単に、選択第２コマンド画像）を取得する。
【０１６８】
次に、制御装置１１０は、取得した選択第２コマンド画像に関連付けられた第２コマンドを取得する。
その後、制御装置１１０は、第２コマンドを実行可能なＡＰサーバ（以下単に、実行サーバと言う）を取得する。
【０１６９】
具体的には、選択第２コマンド画像が第２資料コマンド画像、第２関連資料コマンド画像、又は、第２議事録コマンド画像である場合にはＡＰサーバ１２１を、第２テレビコマンド画像の場合にはＡＰサーバ１２２を、第２外部入力コマンド画像の場合にはＡＰサーバ１２３を、又は、第２カメラコマンド画像の場合にはＡＰサーバ１２４を実行サーバとする。
【０１７０】
ここで、選択命令が選択第２表示装置を選択した場合は、制御装置１１０は、選択第２表示装置へ実行サーバの表示を切り替えるように、表示切替装置１３０へ切替通知を通知する。その後、制御装置１１０は、実行サーバへ第２コマンドを通知する。
【０１７１】
ここで、選択命令がプリンタを選択した場合は、制御装置１１０は、実行サーバへ第２コマンドを通知し、実行サーバの第２実行結果である会議資料、関連資料、議事録、テレビ会議画像、又は、入力装置画像を受信する。その後、制御装置１１０は、受信した第２実行結果をプリンタ３１０へ送信する。
【０１７２】
尚、ファクシミリ装置３１１、ファイルサーバ３１２、又は、メールサーバ３１３を撮像したライブ画像領域を選択命令が選択した場合については、上記選択命令がプリンタを選択した場合と同様であるため省略する。
【０１７３】
この構成によれば、第１の入力手段を操作することで、表示装置、プリンタ、ファクシミリ装置、ファイルサーバ、メールサーバのいずれかを操作することができるため、複数の機器を第１の入力手段で一元的に操作できる。
【０１７４】
上記実施形態では、ＣＣＤカメラを用いた場合について説明したが、これに限定されるわけではなく、例えば、ＣＭＯＳイメージセンサを用いたカメラ等を採用することも可能である。
【０１７５】
上記実施形態では、第２入力装置３２１ないし３２３はタッチパネルで構成される場合について説明したが、これに限定されるわけではなく、例えば、第２入力装置３２１ないし３２３をポインティングディバイスとしてＷｉｎｄｏｗｓ（登録商標）  ＡＰＩ等のプログラム利用することで、ポインティングディバイスの指示位置を取得する構成を採用することも可能である。
【図面の簡単な説明】
【０１７６】
【図１】本発明の一実施例に係る議事録作成システムの構成図である。
【図２】ＡＰサーバの備えるデータベースの一例を説明するための図である。
【図３】第２入力装置と第２表示装置との構成を説明するための図である。
【図４】第１表示装置が表示する表示画面の一例である。
【図５】資料アイコンを選択した場合のオブジェクト指定画面の一例を説明するための図である。
【図６】関連資料アイコンを選択した場合のオブジェクト指定画面の一例を説明するための図である。
【図７】議事録アイコンを選択した場合のオブジェクト指定画面の一例を説明するための図である。
【図８】テレビ会議アイコンを選択した場合のオブジェクト指定画面の一例を説明するための図である。
【図９】外部入力アイコンを選択した場合のオブジェクト指定画面の一例を説明するための図である。
【図１０】カメラアイコンを選択した場合のオブジェクト指定画面の一例を説明するための図である。
【図１１】第１コマンド画像の表示を説明するための図である。
【図１２】制御装置の制御処理の一例を説明するためのフローチャートである。
【図１３】実行サーバの実行処理を説明するためのフローチャートである。
【図１４】制御装置の制御処理の他例を説明するためのフローチャートである。
【符号の説明】
【０１７７】
１００…会議室制御システム
１１０…制御装置（制御手段）
１２１〜１２４…アプリケーションサーバ
１３０…表示切替装置
２００…遠隔地等
２１０…第１入力装置（第１の入力手段）
２２０…第１表示装置（第１の表示手段）
３００…遠隔地等
３１０…プリンタ
３１１…ファクシミリ装置
３１２…ファイルサーバ
３１３…メールサーバ
３２１〜３２３…第２入力装置（第２の入力手段）
３３１〜３３３…第２表示装置（第２の表示手段、表示手段
３４０…撮像装置（撮像手段）
４００…システム外（遠隔地等）
４１１、４１２…画像入力装置
５００…ネットワーク
ＢＴ１３１…操作開始ボタン
ＢＴ１３２…操作停止ボタン
ＢＴ１３５、１３６…実行順序操作ボタン
Ｄ…ディスプレイ
Ｇ１１１〜１１３，１２１〜１２３…表示装置画像
Ｇ１１４…プリンタ画像
Ｉ１…資料アイコン
Ｉ２…関連資料アイコン
Ｉ３…議事録アイコン
Ｉ４…テレビ会議アイコン
Ｉ５…外部入力アイコン
Ｉ６…カメラアイコン
Ｉ３，ＩＣ３，ＩＭ３，ＩＰＣ３，ＩＰＭ３…第１コマンド画像
Ｍ１００…表示画面
ＭＳ１１０…ライブ画像画面
ＭＳ１２０…遠隔地ライブ画像画面
ＭＳ１３０…操作順序指定画面
ＭＳ１４０…機能指定画面
ＭＳ１５０…オブジェクト指定画面
ＭＳ１５０…オブジェクト指定画面
ＭＳ１５０…オブジェクト指定画面
ＭＳ１５０…オブジェクト指定画面
ＭＳ１５０…オブジェクト指定画面
ＭＳ１５０…オブジェクト指定画面
ＭＳ１５０…オブジェクト指定画面
ＳＣ１〜４…議事録のサムネイル
ＳＤ１〜３…制御画像
ＳＦ１〜３…入力装置画像
ＳＭ１〜３…表示装置選択画像
ＳＲ１〜８…関連資料のサムネイル
ＳＳ１〜８…会議資料のサムネイル
ＳＴ１〜３…接続先画像
Ｔ１０１…資料管理テーブル
Ｔ１０２…関連テーブル
Ｔ１０２…資料−スライドテーブル
Ｔ２０１…会議管理テーブル
Ｔ３０１…会議−資料テーブル
Ｔ４０１…議事録管理テーブル
【図１】
2007215057.tif 000003
【図２】
2007215057.tif 000004
【図３】
2007215057.tif 000005
【図４】
2007215057.tif 000006
【図５】
2007215057.tif 000007
【図６】
2007215057.tif 000008
【図７】
2007215057.tif 000009
【図８】
2007215057.tif 000010
【図９】
2007215057.tif 000011
【図１０】
2007215057.tif 000012
【図１１】
2007215057.tif 000013
【図１２】
2007215057.tif 000014
【図１３】
2007215057.tif 000015
【図１４】
2007215057.tif 000016