(57)【要約】【課題】会議で使用する画像を表す画像情報の送信を通知できる情報送信装置及び情報送信プログラムを提供する。【解決手段】  会議において使用する画像の変化を検出する検出手段と、検出手段が検出した変化の生じた画像を表す画像情報の送信を表す送信情報を送信した後に、画像情報を送信する送信手段と、送信手段が送信した画像情報が表す画像を表示したことを表す表示情報を受信する受信手段と、検出手段が画像の変化を検出した後に画像情報の送信を通知し始めるよう通知装置を制御し、かつ受信手段が表示情報を受信した後に通知を終了するよう通知装置を制御する制御手段とを備える。この構成によれば、変化が生じた画像を表す画像情報の送信に先立って、画像情報の送信を表す送信情報を送信できるだけでなく、画像情報の送信及び送信した画像情報の表す画像が表示されたことを通知するよう制御できる。【選択図】図７
2009152808.tif 000002
【特許請求の範囲】
【請求項１】
会議において使用する画像の変化を検出する検出手段と、
前記検出手段が検出した変化の生じた画像を表す画像情報の送信を表す送信情報を送信した後に、前記画像情報を送信する送信手段と、
前記送信手段が送信した画像情報が表す画像を表示したことを表す表示情報を受信する受信手段と、
前記検出手段が前記画像の変化を検出した後に前記画像情報の送信を通知し始めるよう通知装置を制御し、かつ前記受信手段が前記表示情報を受信した後に前記通知を終了するよう前記通知装置を制御する制御手段とを備えることを特徴とする情報送信装置。
【請求項２】
前記検出手段は、前記画像について発言した音声の変化を検出し、
前記送信手段は、前記検出手段が検出した変化の生じた音声を表す音声情報の送信を表す送信情報を送信した後に、前記音声情報を送信することを特徴とする請求項１に記載の情報送信装置。
【請求項３】
前記通知装置は、出音装置を含み、
前記制御手段は、前記検出手段が変化を検出した画像を表す画像情報の送信を通知する通知音声を出力するよう前記通知装置を制御することを特徴とする請求項１又は２に記載の情報送信装置。
【請求項４】
前記画像情報と、前記画像情報が表す画像について発言した音声を表す音声情報と、前記画像情報の送信を通知したことを表す通知情報とを、前記画像及び前記音声を取得した時刻と通知した時刻とで関連付けて記憶部に登録する登録手段と、
前記登録手段が登録した前記画像情報と前記音声情報と通知情報とを、前記会議を開催した時刻に基づいて検索する検索手段とを更に備えることを特徴とする請求項１から３のいずれかに記載の情報送信装置。
【請求項５】
会議において使用する画像と、前記画像を表す画像情報を送信したことを表す送信情報とを受信する受信手段と、
前記受信手段が前記画像情報の送信を表す送信情報を受信した後に前記画像情報が表す画像の受信を通知し始めるよう通知装置を制御し、かつ前記画像を表示するよう表示装置を制御した後に前記通知を終了するよう前記通知装置を制御する制御手段と、
前記制御手段が前記画像を表示するよう前記表示装置を制御した後に、前記画像を表示したことを表す表示情報を送信する送信手段とを備えることを特徴とする情報受信装置。
【請求項６】
前記受信手段は、前記画像について発言した音声を表す音声情報と、前記音声情報の送信を表す送信情報とを受信し、
前記制御手段は、前記受信手段が前記音声情報の送信を表す送信情報を受信した後であり、かつ前記受信手段が受信した音声情報が表す音声を出力するよう出音装置を制御する前に、前記音声情報の受信を通知するよう前記通知装置を制御することを特徴とする請求項５に記載の情報受信装置。
【請求項７】
前記通知装置は、前記表示装置を含み、
前記送信情報は、前記音声情報の送信と共に、前記音声情報が表す音声に関する変化を表し、
前記制御手段は、前記受信手段が送信情報を受信した後に、前記音声情報の受信と共に、前記音声情報が表す音声に関する変化を通知する通知画像を表示するよう前記通知装置を制御することを特徴とする請求項５又は６に記載の情報受信装置。
【請求項８】
会議において使用する画像の変化を検出する検出手段と、
前記検出手段が検出した変化の生じた画像を表す画像情報を送信する送信手段とを有する情報送信装置と、
前記情報送信装置が有する送信手段が送信した画像情報を受信する受信手段と、
前記情報送信装置が有する検出手段が前記画像の変化を検出した後に前記画像情報の受信を通知し始めるよう通知装置を制御し、かつ前記受信手段が受信した画像情報が表す画像を表示するよう表示装置を制御した後に前記通知を終了するよう前記通知装置を制御する制御手段とを有する情報受信装置とを備えることを特徴とする情報通信システム。
【請求項９】
会議において使用する画像を表す画像情報を受信する受信手段と、
前記受信手段が受信した画像情報が表す画像を表示するよう表示装置を制御する制御手段とを備える情報受信装置と、
前記会議において使用する画像の変化を検出する検出手段と、
前記検出手段が検出した変化の生じた画像を表す画像情報を送信する送信手段と、
前記検出手段が前記画像の変化を検出した後に前記画像情報の送信を通知し始めるよう通知装置を制御し、かつ前記情報受信装置が有する制御手段が前記画像を表示するよう前記表示装置を制御した後に前記通知を終了するよう前記通知装置を制御する制御手段とを有する情報送信装置とを備えることを特徴とする情報通信システム。
【請求項１０】
コンピュータを、
会議において使用する画像の変化を検出する検出手段と、
前記検出手段が検出した変化の生じた画像を表す画像情報の送信を表す送信情報を送信した後に、前記画像情報を送信する送信手段と、
前記送信手段が送信した画像情報が表す画像を表示したことを表す表示情報を受信する受信手段と、
前記検出手段が前記画像の変化を検出した後に前記画像情報の送信を通知し始めるよう通知装置を制御し、かつ前記受信手段が前記表示情報を受信した後に前記通知を終了するよう前記通知装置を制御する制御手段として機能させることを特徴とする情報送信プログラム。
【請求項１１】
コンピュータを、
会議において使用する画像と、前記画像を表す画像情報を送信したことを表す送信情報とを受信する受信手段と、
前記受信手段が前記画像情報の送信を表す送信情報を受信した後に前記画像情報が表す画像の受信を通知し始めるよう通知装置を制御し、かつ前記画像を表示するよう表示装置を制御した後に前記通知を終了するよう前記通知装置を制御する制御手段と、
前記制御手段が前記画像を表示するよう前記表示装置を制御した後に、前記画像を表示したことを表す表示情報を送信する送信手段として機能させることを特徴とする情報受信プログラム。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、情報送信装置、情報送信プログラム、情報受信装置、情報受信プログラム、及び情報通信システムに関する。
【背景技術】
【０００２】
従来より、例えば、遠隔会議での音声及び画像の伝達において生じる遅延により、意思の伝達が阻害される原因が知られている（例えば、非特許文献１参照）。
【０００３】
また、遠隔会議における音声の受信状態を通知することで、発言による意思伝達を容易にできる通知システムが知られている（例えば、特許文献１参照）。
【０００４】
この通知システムは、例えば、マイクロホンを備える発信部が音声を捕捉する第１の時点と、発信部が発信した音声を受信部が受信する第２の時点との差にほぼ等しい遅延時間を決定する遅延決定部と、第１の時点から遅延決定部が決定した遅延時間を経過した時点より前の時点において、音声の受信状態を通知するステータス信号を生成するステータス信号生成部とを備えることを特徴とする。
【０００５】
【特許文献１】特開２００６−１７４４８０号公報
【非特許文献１】BRIGITTE JORDAN 他１名 著、「Co-Constructing Non-Mutual Realities:Delay-Generated Trouble in Distributed Interaction」、Computer Supported Cooperative Work、（米国）、２００１年３月、第１０巻、第１号、ｐ．１１３−１３８
【発明の開示】
【発明が解決しようとする課題】
【０００６】
本発明の目的は、会議で使用する画像を表す画像情報の送信を通知できる情報送信装置、情報送信プログラム、及び情報通信システム、並びに会議で使用する画像を表す画像情報の受信を通知できる情報受信装置、情報受信プログラム、及び情報通信システムを提供することにある。
【課題を解決するための手段】
【０００７】
本発明に係る情報送信装置は、会議において使用する画像の変化を検出する検出手段と、検出手段が検出した変化の生じた画像を表す画像情報の送信を表す送信情報を送信した後に、画像情報を送信する送信手段と、送信手段が送信した画像情報が表す画像を表示したことを表す表示情報を受信する受信手段と、検出手段が画像の変化を検出した後に画像情報の送信を通知し始めるよう通知装置を制御し、かつ受信手段が表示情報を受信した後に通知を終了するよう通知装置を制御する制御手段とを備えることを特徴としている。
【０００８】
上記構成において、検出手段は、画像について発言した音声の変化を検出し、送信手段は、検出手段が検出した変化の生じた音声を表す音声情報の送信を表す送信情報を送信した後に、音声情報を送信する構成を採用できる。
【０００９】
上記構成において、通知装置は、出音装置を含み、制御手段は、検出手段が変化を検出した画像を表す画像情報の送信を通知する通知音声を出力するよう通知装置を制御する構成を採用できる。
【００１０】
上記構成において、画像情報と、画像情報が表す画像について発言した音声を表す音声情報と、画像情報の送信を通知したことを表す通知情報とを、画像及び音声を取得した時刻と通知した時刻とで関連付けて記憶部に登録する登録手段と、登録手段が登録した画像情報と音声情報と通知情報とを、会議を開催した時刻に基づいて検索する検索手段とを更に備える構成を採用できる。
【００１１】
本発明に係る情報受信装置は、会議において使用する画像と、画像を表す画像情報を送信したことを表す送信情報とを受信する受信手段と、受信手段が画像情報の送信を表す送信情報を受信した後に画像情報が表す画像の受信を通知し始めるよう通知装置を制御し、かつ画像を表示するよう表示装置を制御した後に通知を終了するよう通知装置を制御する制御手段と、制御手段が画像を表示するよう表示装置を制御した後に、画像を表示したことを表す表示情報を送信する送信手段とを備えることを特徴としている。
【００１２】
上記構成において、受信手段は、画像について発言した音声を表す音声情報と、音声情報の送信を表す送信情報とを受信し、制御手段は、受信手段が音声情報の送信を表す送信情報を受信した後であり、かつ受信手段が受信した音声情報が表す音声を出力するよう出音装置を制御する前に、音声情報の受信を通知するよう通知装置を制御する構成を採用できる。
【００１３】
上記構成において、通知装置は、表示装置を含み、送信情報は、音声情報の送信と共に、音声情報が表す音声に関する変化を表し、制御手段は、受信手段が送信情報を受信した後に、音声情報の受信と共に、音声情報が表す音声に関する変化を通知する通知画像を表示するよう通知装置を制御する構成を採用できる。
【００１４】
本発明に係る情報通信システムは、会議において使用する画像の変化を検出する検出手段と、検出手段が検出した変化の生じた画像を表す画像情報を送信する送信手段とを有する情報送信装置と、情報送信装置が有する送信手段が送信した画像情報を受信する受信手段と、情報送信装置が有する検出手段が画像の変化を検出した後に画像情報の受信を通知し始めるよう通知装置を制御し、かつ受信手段が受信した画像情報が表す画像を表示するよう表示装置を制御した後に通知を終了するよう通知装置を制御する制御手段とを有する情報受信装置とを備えることを特徴としている。
【００１５】
本発明に係る情報通信システムは、会議において使用する画像を表す画像情報を受信する受信手段と、受信手段が受信した画像情報が表す画像を表示するよう表示装置を制御する制御手段とを備える情報受信装置と、会議において使用する画像の変化を検出する検出手段と、検出手段が検出した変化の生じた画像を表す画像情報を送信する送信手段と、検出手段が画像の変化を検出した後に画像情報の送信を通知し始めるよう通知装置を制御し、かつ情報受信装置が有する制御手段が画像を表示するよう表示装置を制御した後に通知を終了するよう通知装置を制御する制御手段とを有する情報送信装置とを備えることを特徴としている。
【００１６】
本発明に係る情報送信プログラムは、コンピュータを、会議において使用する画像の変化を検出する検出手段と、検出手段が検出した変化の生じた画像を表す画像情報の送信を表す送信情報を送信した後に、画像情報を送信する送信手段と、送信手段が送信した画像情報が表す画像を表示したことを表す表示情報を受信する受信手段と、検出手段が画像の変化を検出した後に画像情報の送信を通知し始めるよう通知装置を制御し、かつ受信手段が表示情報を受信した後に通知を終了するよう通知装置を制御する制御手段として機能させることを特徴としている。
【００１７】
本発明に係る情報受信プログラムは、コンピュータを、会議において使用する画像と、画像を表す画像情報を送信したことを表す送信情報とを受信する受信手段と、受信手段が画像情報の送信を表す送信情報を受信した後に画像情報が表す画像の受信を通知し始めるよう通知装置を制御し、かつ画像を表示するよう表示装置を制御した後に通知を終了するよう通知装置を制御する制御手段と、制御手段が画像を表示するよう表示装置を制御した後に、画像を表示したことを表す表示情報を送信する送信手段として機能させる構成を採用できる。
【発明の効果】
【００１８】
請求項１の構成によれば、変化が生じた画像を表す画像情報の送信に先立って、画像情報の送信を表す送信情報を送信できるだけでなく、画像情報の送信及び送信した画像情報の表す画像が表示されたことを通知するよう制御できる。
【００１９】
請求項２の構成によれば、変化が生じた音声を表す音声情報の送信に先立って、音声情報の送信を表す送信情報を送信できる。
【００２０】
請求項３の構成によれば、画像の送信を通知する音声を出力するため、変化した画像に対する視認の妨げを防止できる。
【００２１】
請求項４の構成によれば、会議を開催した時刻に基づいて検索した通知情報から、検索に用いた時刻において検索した画像情報を送信したこと、及び検索した音声情報が表す音声を画像情報の送信中に発したことを知ることができる。
【００２２】
請求項５の構成によれば、会議において使用する画像の表示に先立って画像情報の受信を通知するよう制御できるだけでなく、画像情報が表す画像を表示したことを表す表示情報を送信できる。
【００２３】
請求項６の構成によれば、画像について発言した音声の出力に先立って音声情報の受信を通知するよう制御できる。
【００２４】
請求項７の構成によれば、音声に関する変化を通知する画像を表示するため、変化した音声に対する聴き取りの妨げを防止できる。
【００２５】
請求項８の構成によれば、変化が生じた画像の表示に先立って画像情報の受信を通知するよう制御できる。
【００２６】
請求項９の構成によれば、変化が生じた画像を表す画像情報の送信に先立って画像情報の送信を通知できるだけでなく、送信した画像情報が表す画像が表示されたことを通知するよう制御できる。
【００２７】
請求項１０の構成によれば、変化が生じた画像を表す画像情報の送信に先立って、画像情報の送信を表す送信情報を送信できるだけでなく、画像情報の送信及び送信した画像情報の表す画像が表示されたことを通知するよう制御できる。
【００２８】
請求項１１の構成によれば、会議において使用する画像の表示に先立って画像情報の受信を通知するよう制御できるだけでなく、画像情報が表す画像を表示したことを表す表示情報を送信できる。
【発明を実施するための最良の形態】
【００２９】
以下、本発明の最良の実施形態について、添付図面を参照しつつ説明する。
【実施例１】
【００３０】
図１は、本発明の情報送信装置及び情報受信装置を備える情報通信システムの一実施形態を示す構成図である。
【００３１】
図１に示す情報通信システム１は、会議室１０に設置された情報送信装置１０００、入力装置１５００、集音装置１７０１から１７０３、通知装置１９００、画像生成装置２０００、入力装置２５００、通知装置２９００、分配装置３０００、投影装置４０００、及び映写膜５０００、会議室１１に設置された情報受信装置６００１、入力装置６５０１、撮像装置６６０１、集音装置６７０１、及び通知装置６９０１、会議室１２に設置された情報受信装置６００２、入力装置６５０２、撮像装置６６０２、集音装置６７０２、及び通知装置６９０２、並びに会議室１０に設置された情報送信装置１０００、会議室１１に設置された情報受信装置６００１、及び会議室１２に設置された情報受信装置６００２を通信可能に接続する通信網１００とを備えている。
【００３２】
尚、集音装置１７０１から１７０３の接続、構成、及び機能は、それぞれほぼ同一であるため、以下主に、集音装置１７０１について説明を行う。
【００３３】
また、会議室１１に設置された情報受信装置６００１、入力装置６５０１、撮像装置６６０１、集音装置６７０１、及び通知装置６９０１と、会議室１２に設置された情報受信装置６００２、入力装置６５０２、撮像装置６６０２、集音装置６７０２、及び通知装置６９０２との接続、構成、及び機能は、それぞれほぼ同一である。よって、以下主に、会議室１１に設置された情報受信装置６００１、入力装置６５０１、撮像装置６６０１、集音装置６７０１、及び通知装置６９０１について説明する。
【００３４】
また、本実施例では、情報通信システム１は、会議室１０に設置された装置と、会議室１１及び１２に設置された装置とで構成されるとして説明を行うが、会議室の数は計３室に限定される訳ではない。例えば、情報通信システム１が、同じ会議室に設置された装置で構成される実施例、及び計４室以上の室に設置された装置で構成される実施例を採用できる。
【００３５】
通信網１００は、例えば、ＬＡＮ（Local Area Network ）、ＷＡＮ（Wide Area Network）、ＭＡＮ（Metropolitan Area Network）、又は公衆回線網で構成され、情報送信装置１０００と情報受信装置６００１及び６００２とを通信可能に接続する。
【００３６】
ここで、詳細については後述するように、情報送信装置１０００と情報受信装置６００１とは、会議で使用する画像を表す画像情報、及び会議の様子を撮影した撮像画像を表す画像情報、並びに会議における発言を表す音声情報を、通信網１００を介して送受信する。
【００３７】
本実施例においては、情報送信装置１０００と情報受信装置６００１とが通信網１００を介して画像情報及び音声情報を送受信するために要する通信時間が、画像情報及び音声情報を送受信の際に発生する遅延時間を主に決定するとして説明を行う。
【００３８】
また本実施例において、通信網１００を介して送受信される画像情報又は音声情報は、画像情報又は音声情報を送信したことを表す送信情報よりも情報量が多い。よって、送信情報を送受信する際に生じる遅延時間は、画像情報又は音声情報を送受信する際に生じる遅延時間よりも短い。
【００３９】
更に、送受信した画像情報及び音声情報を表示及び出力したことを表す表示情報及び出力情報は、送信情報と同様に、情報量が少ないため、表示情報及び出力情報を送受信する際に生じる遅延時間は短い。
【００４０】
尚、画像情報を送信したことを表す送信情報を画像送信情報といい、音声情報を送信したことを表す送信情報を音声送信情報という。
【００４１】
よって、本発明に係る情報送信装置１０００及び情報受信装置６００１は、画像情報及び音声情報の送受信する前に送信情報の送受信を行い、かつ送受信した画像情報及び音声情報を表示及び出力した後に表示情報及び出力情報を送受信することで、少ない遅延時間で画像情報及び音声情報の送受信、及び送受信した情報が表す画像及び音声の表示及び出力を通知する。
【００４２】
本実施例において、送信情報、表示情報、及び出力情報は、それぞれ１Ｂｙｔｅの情報であるとして説明を行うが、これに限定される訳ではない。例えば、音声送信情報は、音声情報が表す発言の音圧量、又は発言を行った人物を識別する発言者識別情報を表す数Ｂｙｔｅの情報であって、画像情報及び音声情報よりも情報量が少ない情報である構成を採用できる。
【００４３】
尚、発言者識別情報は、例えば、社員番号といった発言をした者を識別する情報を含む。また、音圧量とは、所定の時間区間における音声の音圧レベルを表す値をいい、例えば、所定の時間区間における音声の音圧レベルの平均値、最大値、又は最小値をいう。また、音圧レベルは、音声の有するエネルギー量を表す。
【００４４】
情報送信装置１０００について説明する前に、会議室１０に設置される入力装置１５００、集音装置１７０１、通知装置１９００、入力装置２５００、通知装置２９００、分配装置３０００、投影装置４０００、及び映写膜５０００、並びに会議室１１に設置される入力装置６５０１、撮像装置６６０１、集音装置６７０１、及び通知装置６９０１について説明する。
【００４５】
また、画像生成装置２０００については、情報送信装置１０００について説明した後に説明を行い、情報受信装置６００１については、画像生成装置２０００について説明した後に説明を行う。
【００４６】
入力装置１５００は、例えば、キーボード、タッチパネル、又はポインティング・ディバイス（以下単に、マウスという）で構成され、情報送信装置１０００に接続している。入力装置１５００は、情報送信装置１０００を使用する使用者に操作されて、後述する各種の情報を入力する。
【００４７】
集音装置１７０１は、例えば、マイクロホンで構成され、情報送信装置１０００に接続している。集音装置１７０１から１７０３は、それぞれ会議の参加者が、会議で使用する資料画像について発言した音声を収集できるように、参加者によって携帯される。
【００４８】
集音装置１７０１は、収集した音声を表す信号を、集音装置１７０１を識別する集音装置識別情報と共に情報送信装置１０００へ出力する。
【００４９】
通知装置１９００は、情報送信装置１０００に接続する。通知装置１９００は、情報送信装置１０００に制御されて、下記各種の通知を行う。
【００５０】
ここで図２を参照して、通知装置１９００の構成について説明する。図２は、通知装置１９００の一構成例を表す図である。
【００５１】
通知装置１９００は、表示装置１９１０及び出音装置１９２０で構成される。表示装置１９１０は、例えば、液晶ディスプレイ、プラズマディスプレイ、又はＣＲＴ（Cathode Ray Tube）で構成され、情報送信装置１０００に接続している。
【００５２】
表示装置１９１０は、情報送信装置１０００に制御されて、下記各種の通知を行う表示画面を表示する。尚、本実施例において、表示装置１９１０は、会議室１０において会議に参加する参加者に対して表示画面を表示できる位置に設置されているとして説明を行う。
【００５３】
ここで図３を参照して、表示装置１９１０が表示する表示画面の一例について説明を行う。図３は、表示装置１９１０が表示する表示画面の一例を表す図である。
【００５４】
図３に示す表示画面ＦＤ１１は、撮像表示部ＰＩ及び音圧量表示部ＰＡで構成される。尚、表示画面ＦＤ１１は、会議室１０に設置された表示装置１９１０が表示する表示画面の一例である。
【００５５】
撮像表示部ＰＩは、撮像表示部ＰＩを表示する表示装置１９１０が設置された会議室１０と異なる会議室１１に設置された撮像装置６６０１が撮像した撮像画像であって、同室における会議の様子を表す画像を表示する。
【００５６】
また、撮像表示部ＰＩは、撮像画像の表示を変更する前に、変更して表示する撮像画像を表す画像情報を、会議室１１に設置された情報受信装置６００１から会議室１０に設置された情報送信装置１０００が受信したことを通知する画像受信通知画像ＰＡＲＰを表示する。
【００５７】
音圧量表示部ＰＡは、受信音圧量通知画像ＰＡＲＡと出力音圧量通知画像ＰＡＯＡとを表示する。受信音圧量通知画像ＰＡＲＡは、会議室１１に設置された集音装置６７０１が収集した音声であって、同室における会議で発言された音声を表す音声情報を、会議室１１に設置された情報受信装置６００１から会議室１０に設置された情報送信装置１０００が受信したことを通知する。
【００５８】
尚、受信音圧量通知画像ＰＡＲＡは、受信した音声情報が表す音声の音圧量を通知することで、音声情報の受信を通知する画像である。
【００５９】
出力音圧量通知画像ＰＡＯＡは、会議室１０に設置された集音装置１７０１から１７０３が収集した音声であって、同室における会議で発言された音声を表す音声情報を、会議室１０に設置された情報送信装置１０００から会議室１１に設置された情報受信装置６００１が受信し、かつ受信した音声情報が表す音声を後述する出音装置６９２１が出力したことを通知する。
【００６０】
尚、出力音圧量通知画像ＰＡＯＡは、出力した音声の音圧量（以下単に、出力音圧量という）を通知することで、音声の出力を通知する画像である。
【００６１】
本実施例では、送信した音声の音圧量又は出力した音声の音圧量を通知する構成について説明するが、これに限定される訳ではなく、送信した音声の発話量又は出力した音声の発話量を通知する構成を採用できる。尚、音声の発話量とは、音声に対して行う音声認識処理により得られる発言内容を表す文字列の文字数、及び発言の行われた時間長のいずれか１つ以上を用いて表される。
【００６２】
次に、図４を参照して、表示装置２９１０が表示する表示画面の他例について説明を行う。図４は、表示装置２９１０が表示する表示画面の他例を表す図である。
【００６３】
図４に示す表示画面ＦＤ１１は、撮像表示部ＰＩ及び発言者表示部ＰＴで構成される。撮像表示部ＰＩは、図３で説明した撮像表示部ＰＩと同様であるので説明を省略する。
【００６４】
発言者表示部ＰＴは、発言受信通知画像ＰＴＲＴ及び受信発言者通知部ＰＴＲＰと、発言出力通知画像ＰＴＯＴ及び出力発言者通知部ＰＴＯＰとを表示する。
【００６５】
発言受信通知画像ＰＴＲＴは、受信音圧量通知画像ＰＡＲＡと同様に、音声情報の受信を通知する画像である。
【００６６】
受信発言者通知部ＰＴＲＰは、発言受信通知画像ＰＴＲＴが受信を通知する音声情報が表す発言の発言者の名前を通知するテキストボックスである。
【００６７】
発言出力通知画像ＰＴＯＴは、出力音圧量通知画像ＰＡＯＡと同様に、音声情報の出力を通知する画像である。
【００６８】
出力発言者通知部ＰＴＯＰは、発言出力通知画像ＰＴＯＴが出力を通知する音声情報が表す発言の発言者の名前を通知するテキストボックスである。
【００６９】
ここで図２に戻り、通知装置１９００の構成について引き続き説明を行う。
出音装置１９２０は、例えば、スピーカで構成され、情報送信装置１０００に接続している。出音装置１９２０は、情報送信装置１０００に制御されて、受信した音声情報が表す音声を出力する。
【００７０】
本実施例では、表示装置１９１０が、画像情報を受信したことを表す画像（つまり、画像受信通知画像ＰＡＲＰ）を表示することで、画像情報の受信を通知するとして説明したが、これに限定される訳ではなく、出音装置１９２０が、画像情報を受信したことを表す音声を出力することで、画像情報の受信を通知する構成を採用できる。
【００７１】
また本実施例では、表示装置１９１０が、音声情報を受信したことを表す画像（つまり、受信音圧量通知画像ＰＡＲＡ）、及び音声情報が表す音声を出力したことを表す画像（つまり、出力音圧量通知画像ＰＡＯＡ）を表示することで、音声情報の受信及び音声情報が表す音声の出力を通知するとして説明したが、これに限定される訳ではなく、出音装置１９２０が、音声情報を受信したことを表す音声、及び音声情報が表す音声を出力したことを表す音声を出力することで、音声情報の受信及び音声情報が表す音声の出力を通知する構成を採用できる。
【００７２】
ここで図１に戻り、情報送信システム１の構成について引き続き説明を行う。
【００７３】
入力装置２５００は、入力装置１５００と同様に、例えば、キーボード、タッチパネル、又はマウスで構成され、画像生成装置２０００に接続している。入力装置２５００は、画像生成装置２０００を使用する使用者に操作されて、後述する各種の情報を入力する。
【００７４】
通知装置２９００は、画像生成装置２０００及び分配装置３０００に接続する。通知装置２９００は、画像生成装置２０００を介して接続する情報送信装置１０００に制御されて、下記各種の通知を行う。
【００７５】
ここで再度図２を参照して、通知装置２９００の構成について説明する。
【００７６】
通知装置２９００は、表示装置２９１０及び出音装置２９２０で構成される。表示装置２９１０は、表示装置１９１０と同様に、例えば、液晶ディスプレイ、プラズマディスプレイ、又はＣＲＴで構成され、分配装置３０００に接続している。
【００７７】
表示装置２９１０は、分配装置３０００及び画像生成装置２０００を介して接続する情報送信装置１０００に制御されて、下記各種の通知を行う表示画面を表示する。
【００７８】
尚、本実施例において、表示装置２９１０は、会議室１０において画像生成装置２０００を使用する使用者であって、画像生成装置２０００が生成するスライド画像を用いてプレゼンテーションを行う者に対して、表示画面を表示できる位置に設置されているとして説明を行う。
【００７９】
ここで図５を参照して、表示装置２９１０が表示する表示画面の一例について説明を行う。図５は、表示装置２９１０が表示する表示画面の一例を表す図である。
【００８０】
図５に示す表示画面ＦＤ１２は、スライド表示部ＰＳ及び音圧量表示部ＰＡで構成される。尚、表示画面ＦＤ１２は、会議室１０に設置された表示装置２９１０が表示する表示画面の一例である。
【００８１】
スライド表示部ＰＳは、会議室１０に設置された画像生成装置２０００が生成した資料画像（以下、スライド画像ともいう）であって、同室で開催される会議で使用する画像を表示する。
【００８２】
また、スライド表示部ＰＳは、資料画像の表示を変更する前に、変更して表示する資料画像を表す画像情報を、会議室１０に設置された情報送信装置１０００から情報受信装置６００１へ送信していることを通知する画像送信通知画像ＰＡＳＰを表示する。
【００８３】
尚、画像送信通知画像ＰＡＳＰ、受信音圧量通知画像ＰＡＲＡ、及び出力音圧量通知画像ＰＡＯＡを、以下単に、通知画像という。
【００８４】
また、音圧量表示部ＰＡは、図３を参照して説明した表示装置１９１０が表示する音圧量表示部ＰＡと同様であるため、説明を省略する。
【００８５】
本実施例では、画像を表示することで通知が行われるとして説明するが、この通知に用いられる画像としては、通知内容を表す文字列、記号、及び図形、並びにこれらの組み合わせを明示的又は暗示的に表す画像のいずれか１つ以上を採用できる。
【００８６】
本実施例では、表示装置２９１０が、画像情報を送信したことを表す画像（つまり、画像送信通知画像ＰＡＳＰ）を表示することで、画像情報の送信を通知するとして説明したが、これに限定される訳ではなく、出音装置２９２０が、画像情報を送信したことを表す音声を出力することで、画像情報の送信を通知する構成を採用できる。
【００８７】
ここで図２に戻り、通知装置２９００の構成について引き続き説明を行う。
出音装置２９２０は、例えば、スピーカで構成され、画像生成装置２０００に接続している。出音装置２９２０は、画像生成装置２０００を介して接続する情報送信装置１０００に制御されて、受信した音声情報が表す音声を出力する。
【００８８】
本実施例では、表示装置２９１０が、画像情報を送信したことを表す画像を表示することで、画像情報の送信を通知するとして説明したが、これに限定される訳ではなく、出音装置２９２０が、画像情報を送信したことを表す音声を出力することで、画像情報の送信を通知する構成を採用できる。
【００８９】
また本実施例では、表示装置２９１０が、音声情報を受信したことを表す画像を表示することで、音声情報の受信を通知するとして説明したが、これに限定される訳ではなく、出音装置２９２０が、音声情報を受信したことを表す音声を出力することで、音声情報の受信を通知する構成を採用できる。
【００９０】
ここで図１に戻り、情報送信システム１の構成について引き続き説明を行う。
【００９１】
分配装置３０００は、例えば ＶＧＡ（Video Graphics Array）スプリッタで構成され、情報送信装置１０００、画像生成装置２０００、通知装置２９００、及び投影装置４０００に接続している。
【００９２】
分配装置３０００は、画像生成装置２０００から資料画像及び画像送信通知画像ＰＡＳＰを表す画像信号を取得し、取得した画像信号を情報送信装置１０００、通知装置２９００、及び投影装置４０００へ分配して出力する。
【００９３】
投影装置４０００は、例えば、プロジェクタで構成され、分配装置３０００に接続し、かつ映写膜５０００に対して投影可能に設置されている。投影装置４０００は、分配装置３０００から、資料画像及び画像送信通知画像ＰＡＳＰを表す画像信号を取得し、取得した信号に基づいて資料画像及び画像送信通知画像ＰＡＳＰを映写膜５０００へ投影する。
【００９４】
映写膜５０００は、例えば、投射スクリーンで構成され、投影装置４０００によって投影可能な位置に設置されている。映写膜５０００は、投影装置４０００によって資料画像及び画像送信通知画像ＰＡＳＰを投影される。尚、映写膜５０００は、投影された画像を会議の参加者が視認できる位置に設置されている。
【００９５】
次に、会議室１１に設置又は配置される装置について説明する。
【００９６】
入力装置６５０１は、入力装置１５００と同様に、例えば、キーボード、タッチパネル、又はマウスで構成され、情報受信装置６００１に接続している。入力装置６５０１は、情報受信装置６００１を使用する使用者に操作されて、後述する各種の情報を入力する。
【００９７】
撮像装置６６０１は、例えば、ビデオカメラ、デジタルカメラ、又はウェブカメラで構成され、情報受信装置６００１に接続している。撮像装置６６０１は、所定の周期で会議室１１における会議の様子を撮像し、撮像した撮像画像を表す画像情報を情報受信装置６００１へ出力する。
【００９８】
集音装置６７０１は、集音装置１７０１から１７０３と同様に、例えば、マイクロホンで構成され、情報受信装置６００１に接続している。集音装置６７０１は、会議の参加者が、会議で発言した音声を収集できるように、参加者によって携帯される。
【００９９】
集音装置６７０１は、収集した音声を表す信号を、集音装置６７０１を識別する集音装置識別情報と共に情報送信装置１０００へ出力する。
【０１００】
本実施例において、情報受信装置６００１は、１つの集音装置６７０１に接続するとして説明したが、これに限定される訳ではなく、複数の集音装置に接続する構成を採用できる。
【０１０１】
通知装置６９０１は、情報受信装置６００１に接続する。通知装置６９０１は、情報受信装置６００１に制御されて、下記各種の通知を行う。
【０１０２】
ここで再度図２を参照して、通知装置６９０１の構成について説明する。
【０１０３】
通知装置６９０１は、表示装置６９１１及び出音装置６９２１で構成される。表示装置６９１１は、表示装置１９１０と同様に、例えば、液晶ディスプレイ、プラズマディスプレイ、又はＣＲＴで構成され、情報受信装置６００１に接続している。
【０１０４】
表示装置６９１１は、情報受信装置６００１に制御されて、下記各種の通知を行う表示画面を表示する。尚、本実施例において、表示装置６９１１は、会議室１１において会議に参加する参加者に対して表示画面を表示できる位置に設置されているとして説明を行う。
【０１０５】
ここで図６を参照して、表示装置６９１１が表示する表示画面の一例について説明を行う。図６は、表示装置６９１１が表示する表示画面の一例を表す図である。
【０１０６】
図５に示す表示画面ＦＤ２１は、スライド表示部ＰＳ、撮像表示部ＰＩ、及び音圧量表示部ＰＡで構成される。尚、表示画面ＦＤ２１は、会議室１１に設置された表示装置６９１１が表示する表示画面の一例である。
【０１０７】
表示装置６９１１が表示するスライド表示部ＰＳは、図５を参照して説明した表示装置２９１０が表示するスライド表示部ＰＳと同様に、会議室１０に設置された画像生成装置２０００が生成したスライド画像を表示する。
【０１０８】
また、表示装置６９１１が表示するスライド表示部ＰＳは、表示装置２９１０が表示するスライド表示部ＰＳと異なり、表示するスライド画像を変更する前に、変更して表示するスライド画像を表す画像情報を、会議室１０に設置された情報送信装置１０００から会議室１１に設置された情報受信装置６００１が受信していることを通知する画像受信通知画像ＰＡＲＰを表示する。
【０１０９】
表示装置６９１１が表示する撮像表示部ＰＩは、図３を参照して説明した表示装置１９１０が表示する撮像表示部ＰＩと同様に、会議室１１に設置された撮像装置６６０１が撮像した撮像画像を表示する。
【０１１０】
また、撮像表示部ＰＩは、変化が生じた撮像画像を表す画像情報を、会議室１１に設置された情報受信装置６００１から会議室１０に設置された情報送信装置１０００へ送信したことを通知する画像送信通知画像ＰＡＳＰを表示する。
【０１１１】
表示装置６９１１が表示する音圧量表示部ＰＡは、図３を参照して説明した表示装置１９１０が表示する音圧量表示部ＰＡと同様に、受信音圧量通知画像ＰＡＲＡと出力音圧量通知画像ＰＡＯＡとを表示する。
【０１１２】
表示装置６９１１が表示する受信音圧量通知画像ＰＡＲＡは、表示装置１９１０が表示する受信音圧量通知画像ＰＡＲＡと異なり、会議室１０に設置された集音装置１７０１から１７０３が収集した音声であって、同室における会議で発言された音声を表す音声情報を、会議室１０に設置された情報送信装置１０００から会議室１１に設置された情報受信装置６００１が受信したことを通知する。
【０１１３】
表示装置６９１１が表示する出力音圧量通知画像ＰＡＯＡは、表示装置１９１０が表示する出力音圧量通知画像ＰＡＯＡと異なり、会議室１１に設置された集音装置６７０１が収集した音声であって、同室における会議で発言された音声を表す音声情報を、会議室１１に設置された情報受信装置６００１から会議室１０に設置された情報送信装置１０００が受信し、かつ受信した音声情報が表す音声を出音装置１９２０が出力したことを通知する。
【０１１４】
尚、画像送信通知画像ＰＡＳＰ、画像受信通知画像ＰＡＲＰ、受信音圧量通知画像ＰＡＲＡ、及び出力音圧量通知画像ＰＡＯＡを、以下単に、通知画像という。
【０１１５】
ここで図２に戻り、通知装置６９０１の構成について引き続き説明を行う。
出音装置６９２１は、例えば、スピーカで構成され、情報受信装置６００１に接続している。出音装置６９２１は、情報受信装置６００１に制御されて、受信した音声情報が表す音声を出力する。
【０１１６】
本実施例では、表示装置６９１１が、画像情報を送信又は受信したことを表す画像を表示することで、画像情報の送信又は受信を通知するとして説明したが、これに限定される訳ではなく、出音装置６９２１が、画像情報を送信又は受信したことを表す音声を出力することで、画像情報の送信又は受信を通知する構成を採用できる。
【０１１７】
また本実施例では、表示装置６９１１が、音声情報を受信又は出力したことを表す画像を表示することで、音声情報の受信又は出力を通知するとして説明したが、これに限定される訳ではなく、出音装置６９２１が、音声情報を受信又は出力したことを表す音声を出力することで、音声情報の受信又は出力を通知する構成を採用できる。
【０１１８】
ここで図１に戻り、情報送信システム１の構成について引き続き説明を行う。
【０１１９】
情報送信装置１０００は、例えば、パーソナル・コンピュータで構成され、通信網１００、入力装置１５００、集音装置１７０１から１７０３、通知装置１９００、画像生成装置２０００、及び分配装置３０００に接続している。
【０１２０】
情報送信装置１０００は、通信網１００を介して、下記各種の情報を情報受信装置６００１又は６００２へ送信する。
【０１２１】
ここで図６を参照して、情報送信装置１０００の構成について説明する。図６は、情報送信装置１０００の一構成例を表す機能ブロック図である。
【０１２２】
情報送信装置１０００は、画像取得部１０１０、画像処理部１０２０、時刻管理部１０３０、Ａ／Ｄ変換部１０４０、音声処理部１０５０、登録部１０６０、記憶部１０７０、検索部１０８０、インターフェイス部１０９０（以下単に、ＩＦ部１０９０という）、検出部１１００、制御部１１１０、送信部１１２０、及び受信部１１３０を備えている。
【０１２３】
画像取得部１０１０、画像処理部１０２０、時刻管理部１０３０、Ａ／Ｄ変換部１０４０、音声処理部１０５０、登録部１０６０、記憶部１０７０、検索部１０８０、ＩＦ部１０９０、検出部１１００、制御部１１１０、送信部１１２０、及び受信部１１３０が有する機能は、情報送信装置１０００が実行するソフトウェア制御により実現される。
【０１２４】
ここで図８を参照して、ソフトウェア制御を実行するために用いる情報送信装置１０００のハードウェア構成について説明する。図８は、ソフトウェア制御を実行するために用いる情報送信装置１０００のハードウェア構成の一例を表す図である。
【０１２５】
情報送信装置１０００は、例えば、ＣＰＵ（Central Processing Unit）等の演算部１００１、ＥＰＲＯＭ（Erasable Programmable Read-Only Memory）又はＥＥＰＲＯＭ（Electrically Erasable Programmable Read-Only Memory）等の読み出し専用メモリであるＲＯＭ１００２（Read-Only Memory ）、ＤＲＡＭ（Dynamic  RAM）又はＳＲＡＭ（Static  RAM）等の揮発性メモリ及びＮＶＲＡＭ（Non Volatile RAM）等の不揮発性メモリで構成されるＲＡＭ１００３（Random Access Memory）、並びにハードディスク等で構成される外部記憶部１００４で構成され、演算部１００１、ＲＯＭ１００２、ＲＡＭ１００３、及び外部記憶部１００４は互いにバス１００５によって接続している。
【０１２６】
ソフトウェア制御は、演算部１００１が、ＲＯＭ１００２又は外部記憶部１００４に格納したプログラムを読み込み、読み込んだプログラムに従って演算を行うことにより実現される。なお、ＲＡＭ１００３には、演算結果のデータが書き込まれ、特にＮＶＲＡＭには、電源オフ時にバックアップが必要なデータが保存される。
【０１２７】
ここで図７に戻り、情報送信装置１０００の構成について、引き続き説明を行う。
【０１２８】
画像取得部１０１０は、例えば、ＲＧＢキャプチャカードで構成され、分配装置３０００及び画像処理部１０２０に接続している。画像取得部１０１０は、後述する画像取得処理を実行することで、会議において投影される資料画像を表す画像情報を取得する。尚、画像取得部１０１０は、画像取得処理を定周期で実行する。
【０１２９】
ここで、画像取得部１０１０が実行する画像取得処理の一例について説明する。
【０１３０】
先ず、画像取得部１０１０は、分配装置３０００からＲＧＢ画像信号を取得する。次に、画像取得部１０１０は、取得したＲＧＢ画像信号に基づいて、例えば、ＢＭＰ（bitmap）フォーマットで画像を表す画像情報を取得する。その後、画像取得部１０１０は、取得した画像情報を画像処理部１０２０へ出力する。
【０１３１】
画像処理部１０２０は、画像取得部１０１０、時刻管理部１０３０、登録部１０６０、及び制御部１１１０に接続している。画像処理部１０２０は、画像情報に対して後述する各種の処理を行う。
【０１３２】
本実施例においては、通信網１００を介して行う画像情報の送受信に伴う遅延時間のみならず、画像処理部１０２０が行う各種の処理に要する処理時間も、画像情報の送信に伴う遅延時間を決定する。尚、画像処理部１０２０は、送信情報、表示情報、及び出力情報について情報処理を行わない。
【０１３３】
ここで図９を参照して、画像処理部１０２０の構成について説明する。図９は、画像処理部１０２０の一構成例を表す機能ブロック図である。
【０１３４】
図９に示す画像処理部１０２０は、新規画像検出部１０２１、判定部１０２２、画像圧縮部１０２３、及びテキスト抽出部１０２４で構成される。
【０１３５】
新規画像検出部１０２１は、画像取得部１０１０、時刻管理部１０３０、及び判定部１０２２に接続している。新規画像検出部１０２１は、後述する新規画像検出処理を実行することで、新たな資料画像を表す画像情報を検出する。尚、新規画像検出部１０２１は、新規画像検出処理を定周期で実行する。
【０１３６】
ここで、新規画像検出部１０２１が実行する新規画像検出処理の一例について説明する。
【０１３７】
先ず、新規画像検出部１０２１は、画像取得部１０１０から画像情報を取得する。次に、新規画像検出部１０２１は、取得した画像情報が表す資料画像と、直前に取得した画像情報が表す資料画像とを比較することで、新規な画像を表す画像情報を検出する。
【０１３８】
具体的に説明すると、新規画像検出部１０２１は、２つの画像情報が表す画像の各画素が変化したか否かを判断する。尚、新規画像検出部１０２１は、各画素のＲＧＢ値の差分が所定の閾値以上であると判断した場合に、当該画素が変化したと判断する。
【０１３９】
次に、新規画像検出部１０２１は、変化した画素が所定の閾値以上存在するか否かを判断する。変化した画素が所定の閾値以上存在すると判断した場合に、新規画像検出部１０２１は、２つの画像は異なると判定する。
【０１４０】
尚、新規画像検出処理における所定の閾値は、資料画像に対して、画像送信通知画像ＰＡＳＰを資料画像に重ね合わせた画像が新規な画像であるとして検出されない値に設定される。この所定の閾値は、実験又は理論により容易に定めることができる。
【０１４１】
画像が変化したと判定した場合には、新規画像検出部１０２１は、変化した後の資料画像を表す画像情報と、資料画像を取得した時刻とを関連づけて判定部１０２２に出力する。尚、画像を取得した時刻は、時刻管理部１０３０が管理するシステム時刻を参照して定める。
【０１４２】
判定部１０２２は、新規画像検出部１０２１、画像圧縮部１０２３、及び時刻管理部１０３０に接続している。判定部１０２２は、後述する送信判定処理を実行することで、画像情報を情報受信装置６００１へ送信するか否かを判定する。尚、判定部１０２２は、新規画像検出部１０２１が画像情報を出力する度に送信判定処理を実行する。
【０１４３】
また、判定部１０２２は、後述する登録判定処理を実行することで、画像情報を記憶部１０７０に登録するか否かを判定する。尚、判定部１０２２は、新規画像検出部１０２１が画像情報を出力する度に登録判定処理を実行する。
【０１４４】
ここで、判定部１０２２が実行する送信判定処理の一例について説明する。
【０１４５】
先ず、判定部１０２２は、新規画像検出部１０２１から資料画像を表す画像情報と資料画像を取得した時刻とを取得する。次に、判定部１０２２は、時刻管理部１０３０が管理するシステム時刻を参照する。
【０１４６】
その後、判定部１０２２は、システム時刻から資料画像を取得した時刻を減算することで、資料画像が映写膜５０００に投影されている時間長を算出する。
【０１４７】
次に、判定部１０２２は、算出した時間長が所定の閾値を超えたか否かを判断する。算出した時間長が所定の閾値を超えたと判断した場合には、判定部１０２２は、画像情報を情報受信装置６００１へ送信すると判定する。
【０１４８】
次に、判定部１０２２は、取得した画像情報を画像圧縮部１０２３へ出力する。その後、判定部１０２２は、送信判定処理の実行を終了する。
【０１４９】
本実施例において、送信判定処理における所定の閾値は５秒であるとして説明するが、これに限定される訳ではなく、実験又は理論に基づいて定まるより好適な値を採用することができる。
【０１５０】
判定部１０２２は、算出した時間長が所定の閾値を超えないと判断した場合には、所定時間スリープする。次に、判定部１０２２は、新規画像検出部１０２１が新たな画像情報を出力するか否かを判断する。
【０１５１】
新規画像検出部１０２１が新たな画像情報を出力すると判断した場合には、判定部１０２２は、送信判定処理の実行を終了する。新規画像検出部１０２１が新たな画像情報を出力しないと判断した場合には、システム時刻を参照する処理から上記処理を繰り返す。
【０１５２】
本実施例においては、資料画像の投影されている時間長が所定の閾値を超えるまで、判定部１０２２が、画像情報を送信すると判定しない。よって、判定部１０２２が判定処理を実行するために要する処理時間が、画像情報の送信に伴う遅延時間を決定する要因の１つとなる。
【０１５３】
次に、判定部１０２２が実行する登録判定処理の一例について説明する。
【０１５４】
先ず、判定部１０２２は、新規画像検出部１０２１から資料画像を表す画像情報と資料画像を取得した時刻とを取得する。次に、判定部１０２２は、前回取得した資料画像が表す資料画像が会議において投影された時間区間である投影区間を求める。
【０１５５】
具体的には、前回取得した資料画像が表す資料画像を取得した時刻を、前回取得した資料画像の投影を開始した投影開始時刻とし、かつ今回取得した資料画像を取得した時刻を前回取得した資料画像の投影開始時刻として、投影開始時刻と投影終了時刻とで定まる投影区間を算出する。
【０１５６】
次に、判定部１０２２は、算出した投影区間の時間長が所定の閾値を超えたか否かを判断する。算出した投影区間の時間長が所定の閾値を超えたと判断した場合には、判定部１０２２は、画像情報を記憶部１０７０へ登録すると判定する。
【０１５７】
次に、判定部１０２２は、取得した資料画像を表す画像情報と資料画像の投影区間を表す情報とを画像圧縮部１０２３へ出力する。その後、判定部１０２２は、登録判定処理の実行を終了する。
【０１５８】
算出した投影区間の時間長が所定の閾値を超えないと判断した場合には、判定部１０２２は、画像情報を記憶部１０７０へ登録しないと判定する。次に、判定部１０２２は、登録判定処理の実行を終了する。
【０１５９】
画像圧縮部１０２３は、判定部１０２２、テキスト抽出部１０２４、及び制御部１１１０に接続している。画像圧縮部１０２３は、後述する画像圧縮処理を実行することで、画像情報が表す画像を圧縮して、情報量ががより小さい画像ファイルフォーマットに変換する。尚、画像圧縮部１０２３は、判定部１０２２が登録すると判定する度に画像圧縮処理を実行する。
【０１６０】
本実施例においては、ＢＭＰファイルフォーマットからＪＰＥＧ（Joint Photographic Experts Group）ファイルフォーマットへ変換するとして説明するが、これに限定される訳ではなく、例えば、ＧＩＦ（Graphics Interchange Format ）ファイルフォーマット、ＰＮＧ（Portable Network Graphics）ファイルフォーマット、ＴＩＦＦ（Tagged Image File Format）ファイルフォーマット、及びＨＤ  Ｐｈｏｔｏファイルフォーマットへ変換する構成を採用できる。
【０１６１】
ここで、画像圧縮部１０２３が実行する画像圧縮処理の一例について説明する。
【０１６２】
先ず、画像圧縮部１０２３は、判定部１０２２から画像情報のみ、又は画像情報と投影時間区間を表す情報とを取得する。次に、画像圧縮部１０２３は、取得した画像情報をＪＰＥＧファイルフォーマットに圧縮する。
【０１６３】
その後、画像圧縮部１０２３は、圧縮した画像情報を制御部１１１０へ出力するか、又は圧縮した画像情報と投影区間投影区間を表す情報とをテキスト抽出部１０２４へ出力する。その後、画像圧縮部１０２３は、画像圧縮処理の実行を終了する。
【０１６４】
本実施例においては、送信する画像情報を圧縮する画像圧縮処理の実行に要する処理時間が、圧縮された画像情報の送信に伴う遅延時間を決定する要因の１つとなる。
【０１６５】
テキスト抽出部１０２４は、例えば、ＯＣＲ装置で構成され、画像圧縮部１０２３及び登録部１０６０に接続している。
【０１６６】
テキスト抽出部１０２４は、後述するテキスト抽出処理を実行することで、資料画像に含まれる文字列を抽出する。尚、テキスト抽出部１０２４は、画像圧縮部１０２３が画像情報を出力する度にテキスト抽出処理を実行する。
【０１６７】
ここで、テキスト抽出部１０２４が実行するテキスト抽出処理の一例について説明する。
【０１６８】
先ず、テキスト抽出部１０２４は、画像圧縮部１０２３から画像情報を取得する。次に、テキスト抽出部１０２４は、画像情報が表す資料画像に対し文字認識処理を行う。
【０１６９】
その後、テキスト抽出部１０２４は、文字認識処理によって資料画像から抽出した文字列を表す情報、資料画像を表す画像情報、及び資料画像の投影区間を表す情報を登録部１０６０へ出力する。その後、テキスト抽出部１０２４は、テキスト抽出処理の実行を終了する。
【０１７０】
図６に戻り、情報送信装置１０００の構成について引き続き説明を行う。
【０１７１】
時刻管理部１０３０は、画像処理部１０２０、音声処理部１０５０、及び登録部１０６０に接続する。時刻管理部１０３０は、例えば、ハードウェアクロックを基にシステム時刻を管理する。
【０１７２】
Ａ／Ｄ変換部１０４０は、例えば、Ａ／Ｄコンバータで構成され、集音装置１７０１から１７０３及び音声処理部１０５０に接続している。
【０１７３】
また、Ａ／Ｄ変換部１０４０は、後述するＡ／Ｄ変換処理を実行することで、集音装置１７０１が出力するアナログ信号である音声信号を、デジタル・データである音声情報へと変換する。尚、Ａ／Ｄ変換部１０４０は、定周期でＡ／Ｄ変換処理を実行する。
【０１７４】
ここで、Ａ／Ｄ変換部１０４０が実行するＡ／Ｄ変換処理の一例について説明する。
【０１７５】
先ず、Ａ／Ｄ変換部１０４０は、集音装置１７０１から音声信号と集音装置識別情報とを取得する。次に、Ａ／Ｄ変換部１０４０は、取得した音声信号を、音声情報へ変換する。
【０１７６】
その後、Ａ／Ｄ変換部１０４０は、変換した音声情報と集音装置識別情報とを音声処理部１０５０へ出力する。その後、Ａ／Ｄ変換部１０４０は、Ａ／Ｄ変換処理の実行を終了する。
【０１７７】
音声処理部１０５０は、Ａ／Ｄ変換部１０４０、時刻管理部１０３０、登録部１０６０、検出部１１００、及び制御部１１１０に接続している。音声処理部１０５０は、音声情報に対して後述する各種の処理を行う。
【０１７８】
本実施例においては、通信網１００を介して行う音声情報の送受信に伴う遅延時間のみならず、音声処理部１０５０が行う各種の処理に要する処理時間も、音声情報の送信に伴う遅延時間を決定する。尚、音声処理部１０５０は、送信情報、表示情報、及び出力情報について情報処理を行わない。
【０１７９】
ここで図１０を参照して、音声処理部１０５０の構成について説明する。図１０は、音声処理部１０５０の一構成例を表す機能ブロック図である。
【０１８０】
音声処理部１０５０は、発言検出部１０５１、発言者識別部１０５２、交代検出部１０５３、音圧量検出部１０５４、及び音声圧縮部１０５５で構成される。
【０１８１】
発言検出部１０５１は、時刻管理部１０３０、Ａ／Ｄ変換部１０４０、及び登録部１０６０に接続している。発言検出部１０５１は、後述する発言検出処理を実行することで、会議における発言を検出する。尚、発言検出部１０５１は、定周期で発言検出処理を実行する。
【０１８２】
ここで、発言検出部１０５１が実行する発言検出処理の一例について説明する。
【０１８３】
先ず、発言検出部１０５１は、Ａ／Ｄ変換部１０４０から、音声情報と集音装置識別情報を取得する。
【０１８４】
その後、発言検出部１０５１は、取得した集音装置識別情報毎に、音声情報に基づいて発言区間を抽出する。尚、発言区間とは、音声情報が表す音声に基づいて得られる発言のなされた時間区間を言う。
【０１８５】
具体的には、発言検出部１０５１は、音声情報が表す音声の音量レベルを検査し、所定の閾値以上の音量レベルが所定時間以上継続した場合に発言を開始したと判断し、かつ所定の閾値以下の音量レベルが所定時間以上継続した場合に発言を終了したと判断する。
【０１８６】
尚、本実施例においては、所定時間は２秒であるとして説明するが、これに限定される訳ではなく、実験又は理論に基づいて定まるより好適な値を採用することができる。
【０１８７】
これにより、発言検出部１０５１は、発言を開始した時刻である発言開始時刻と、発言を終了した時刻である発言終了時刻とで表される発言区間を取得する。
【０１８８】
その後、発言検出部１０５１は、会議における音声を表す音声情報を発言開始時刻と発言終了時刻とで分割する。次に、発言検出部１０５１は、発言区間を表す情報と、発言区間に基づいて分割した音声情報と、発言を収集した集音装置１７０１の集音装置識別情報とを登録部１０６０へ出力する。その後、発言検出部１０５１は、発言検出処理の実行を終了する。
【０１８９】
発言者識別部１０５２は、時刻管理部１０３０、Ａ／Ｄ変換部１０４０、交代検出部１０５３、及び登録部１０６０に接続している。発言者識別部１０５２は、集音装置識別情報と発言者識別情報とを関連付けて記憶する。
【０１９０】
発言者識別部１０５２は、後述する発言者識別処理を実行することで、音声情報が表す音声の発言者を識別する。尚、発言者識別部１０５２は、定周期で発言者識別処理を実行する。
【０１９１】
ここで、発言者識別部１０５２が実行する発言者識別処理の一例について説明する。
【０１９２】
先ず、発言者識別部１０５２は、Ａ／Ｄ変換部１０４０から集音装置識別情報を取得する。次に、発言者識別部１０５２は、取得した集音装置識別情報と関連付けた発言者識別情報を検索することで、集音装置識別情報で識別される集音装置を携帯している発言者を識別する情報を取得する。
【０１９３】
その後、発言者識別部１０５２は、時刻管理部１０３０からシステム時刻を取得して、発言者を識別した時刻とする。次に、発言者識別部１０５２は、取得した発言者識別情報と発言者を識別した時刻と発言を収集した装置を識別する集音装置識別情報とを登録部１０６０へ出力する。
【０１９４】
また、発言者識別部１０５２は、集音装置識別情報と発言者識別情報と発言者を識別した時刻とを交代検出部１０５３へ出力する。その後、発言者識別部１０５２は、発言者識別処理の実行を終了する。
【０１９５】
交代検出部１０５３は、発言者識別部１０５２及び登録部１０６０に接続している。交代検出部１０５３は、後述する交代検出処理を実行することで、発言者識別部１０５２が識別した発言者の交代を検出する。尚、交代検出部１０５３は、発言者識別部１０５２が発言者識別情報を出力する度に交代検出処理を実行する。
【０１９６】
先ず、交代検出部１０５３は、発言者識別部１０５２から発言者識別情報と発言者を識別した時刻とを取得する。次に、交代検出部１０５３は、前回取得した発言者識別情報と今回取得した発言者識別情報とが同じであるか否かを判断する。
【０１９７】
発言者識別情報が同じだと判断する場合には、交代検出部１０５３は、発言者の交代を検出し、そうでない場合は発言者の交代を検出しない。その後、交代検出部１０５３は、発言者が交代したか否かを表す情報（以下、交代情報という）と、発言者を識別した時刻とを登録部１０６０へ出力する。次に、交代検出部１０５３は、交代検出処理の実行を終了する。
【０１９８】
音圧量検出部１０５４は、時刻管理部１０３０、Ａ／Ｄ変換部１０４０、音声圧縮部１０５５、及び検出部１１００に接続している。音圧量検出部１０５４は、後述する音圧量検出処理を実行することで、所定の時間区間における音圧量を検出する。尚、音圧量検出部１０５４は、所定周期で音圧量検出処理を実行する。
【０１９９】
先ず、音圧量検出部１０５４は、Ａ／Ｄ変換部１０４０から音声情報と集音装置識別情報とを取得する。次に、音圧量検出部１０５４は、音声情報が表す所定の時間区間における音声の音圧量を取得する。尚、音圧量検出部１０５４は、所定の時間区間を、時刻管理部１０３０が管理するシステム時刻に基づいて取得する。その後、音圧量検出部１０５４は、取得した音圧量を検出部１１００へ出力する。
【０２００】
また、音圧量検出部１０５４は、取得した音圧量と、発言の音圧量を取得した時間区間を表す情報と、発言を表す音声を収集した装置の識別情報とを登録部１０６０へ出力する。
【０２０１】
更に、音圧量検出部１０５４は、音声情報を音声圧縮部１０５５へ出力する。その後、音圧量検出部１０５４は、音圧量検出処理の実行を終了する。
【０２０２】
音声圧縮部１０５５は、音圧量検出部１０５４及び制御部１１１０に接続している。音声圧縮部１０５５は、後述する音声圧縮処理を実行することで、音声情報が表す音声を圧縮して、情報量がより小さい音声ファイルフォーマットに変換する。尚、音声圧縮部１０５５は、定周期で音声圧縮処理を実行する。
【０２０３】
本実施例においては、ｗａｖｅファイルフォーマットからｍｐ３（MPEG Audio Layer-3）ファイルフォーマットへ変換するとして説明するが、これに限定される訳ではなく、例えば、ａｉｆｆ（Audio Interchange File Format）ファイルフォーマットからＶｏｒｂｉｓファイルフォーマットへ変換する構成を採用できる。
【０２０４】
ここで、音声圧縮部１０５５が実行する音声圧縮処理の一例について説明する。
【０２０５】
先ず、音声圧縮部１０５５は、音圧量検出部１０５４から音声情報を取得する。次に、音声圧縮部１０５５は、取得した音声情報をｍｐ３ファイルフォーマットに圧縮する。
【０２０６】
その後、音声圧縮部１０５５は、圧縮した音声情報を制御部１１１０へ出力する。その後、音声圧縮部１０５５は、音声圧縮処理の実行を終了する。
【０２０７】
本実施例においては、送信する音声情報を圧縮する音声圧縮処理の実行に要する処理時間が、圧縮された音声情報の送信に伴う遅延時間を決定する要因の１つとなる。
【０２０８】
ここで図７に戻り、情報送信装置１０００の構成について、引き続き説明を行う。
【０２０９】
登録部１０６０について説明する前に、記憶部１０７０について説明する。
【０２１０】
記憶部１０７０は、例えば、ハードディスクである外部記憶部１００４で構成され、登録部１０６０、検索部１０８０、及び制御部１１１０に接続している。
【０２１１】
記憶部１０７０は、画像情報と、画像情報が表す画像について発言した音声を表す音声情報と、画像情報の送信を通知したことを表す通知情報とを、画像及び音声を取得した時刻と通知した時刻とで関連付けて記憶する。
【０２１２】
尚、記憶部１０７０が記憶する情報は、登録部１０６０によって新規登録、又は更新登録される。また、記憶部１０７０が記憶する情報は、検索部１０８０によって情報検索のために参照される。
【０２１３】
ここで表１から４を参照して、記憶部１０７０が記憶する情報について説明する。表１は、記憶部１０７０が記憶する資料画像に関する情報の一例を示す表である。
【０２１４】
【表１】
2009152808.tif 000003
【０２１５】
表１は、画像識別情報フィールド、投影開始時刻フィールド、投影終了時刻フィールド、電子ファイル識別情報フィールド、及びテキストフィールドを有する。
【０２１６】
画像識別情報フィールドは、資料画像を表す画像情報を識別する情報（以下単に、画像識別情報という）を、投影開始時刻フィールドは同一レコードの画像識別情報フィールドに保存された情報が識別する画像情報が表す資料画像の投影開始時刻を、投影終了時刻フィールドは投影終了時刻を、電子ファイル識別情報フィールドは、例えば、ファイル名（又はこれとディレクトリパスとの組合せ）といった画像情報を保存する電子ファイルを識別する情報（以下単に、電子ファイル識別情報という）を、テキストフィールドは画像情報が表す画像から抽出した文字列を表す情報を保存する。
【０２１７】
表２は、記憶部１０７０が記憶する音声に関する情報の一例を示す表である。
【０２１８】
【表２】
2009152808.tif 000004
【０２１９】
表２は、音声識別情報フィールド、発言開始時刻フィールド、発言終了時刻フィールド、電子ファイル識別情報フィールド、集音装置識別情報フィールド、発言者識別情報フィールド、交代情報フィールド、及び音圧量フィールドを有する。
【０２２０】
音声識別情報フィールドは、発言を表す音声情報を識別する情報（以下単に、音声識別情報という）を、発言開始時刻フィールドは同一レコードの音声識別情報フィールドに保存された情報が識別する音声情報が表す発言の開始時刻を、発言終了時刻フィールドは発言終了時刻を、電子ファイル識別情報フィールドは、表１と同様に、音声情報を保存する電子ファイルを識別する電子ファイル識別情報を、集音装置識別情報フィールドは発言を収集した装置の識別情報を、発言者識別情報フィールドは発言者の識別情報を、交代情報フィールドは発言に関する交代情報を、音圧量フィールドは音圧量を保存する。尚、交代情報は、発言の交代があったことをブール型変数の値"ＴＲＵＥ"を用いて表す。
【０２２１】
表３は、記憶部１０７０が記憶する通知に関する情報の一例を示す表である。
【０２２２】
【表３】
2009152808.tif 000005
【０２２３】
表３は、通知識別情報フィールド、通知開始時刻フィールド、及び通知終了時刻フィールドを有する。
【０２２４】
音声識別情報フィールドは、通知を識別する識別情報（以下単に、通知識別情報という）を、通知開始時刻フィールドは同一レコードの通知識別情報フィールドに保存された情報が識別する通知の開始時刻を、通知終了時刻フィールドは通知終了時刻を保存する。
【０２２５】
尚、通知識別情報は、通知を識別するだけでなく、画像情報の送信を通知したことを表すため、通知識別情報は、通知情報に含まれる。
【０２２６】
表４は、記憶部１０７０が記憶する表であって、音声情報と画像情報と通知情報とを画像及び音声を取得した時刻、及び通知した時刻で関連付けた表の一例を示す表である。
【０２２７】
【表４】
2009152808.tif 000006
【０２２８】
表４は、音声識別情報フィールド、画像識別情報フィールド、及び通知識別情報フィールドを有する。
【０２２９】
音声識別情報フィールドは音声識別情報を保存する。画像識別情報フィールドは、画像識別情報を保存する。この画像識別情報で識別される画像情報が表す資料画像は、同一レコードの音声識別情報フィールドに保存された情報が識別する音声情報が表す発言がなされた発言区間において投影されていた画像である。
【０２３０】
通知識別情報フィールドは、通知情報識別情報である通知情報を保存する。この通知情報が表す通知は、同一レコードの画像識別情報フィールドに保存された情報が識別する画像情報の送信を通知する通知であり、かつ同一レコードの音声識別情報フィールドに保存された情報が識別する音声情報が表す発言がなされた発言区間においてされた通知である。
【０２３１】
また、記憶部１０７０は、画像送信通知画像ＰＡＳＰ及び画像受信通知画像ＰＡＲＰを記憶し、かつ出力音圧量通知画像ＰＡＯＡ及び受信音圧量通知画像ＰＡＲＡを画像が表す音圧量と関連付けて記憶する。記憶部１０７０が記憶する通知画像は、制御部１１１０によって参照される。
【０２３２】
登録部１０６０は、画像処理部１０２０、時刻管理部１０３０、音声処理部１０５０、記憶部１０７０、及び制御部１１１０に接続している。
【０２３３】
登録部１０６０は、後述する画像登録処理を実行することで、画像に関する情報を記憶部１０７０が記憶する表１に登録する。尚、登録部１０６０は、定周期で画像登録処理を実行する。
【０２３４】
また、登録部１０６０は、後述する音声登録処理を実行することで、音声に関する情報を記憶部１０７０が記憶する表２に登録する。尚、登録部１０６０は、画像登録処理の実行後に、音声登録処理を実行する。
【０２３５】
更に、登録部１０６０は、後述する通知登録処理を実行することで、通知に関する情報を記憶部１０７０が記憶する表３に登録する。尚、登録部１０６０は、制御部１１１０が画像情報の送信を通知し始めるよう通知装置を制御する度に、通知登録処理を実行する。
【０２３６】
更にまた、登録部１０６０は、後述する登録処理を実行することで、画像情報と、画像情報が表す画像について発言した音声を表す音声情報と、画像情報の送信を通知したことを表す通知情報とを、画像及び音声を取得した時刻と通知した時刻とで関連付けて記憶部１０７０に登録する。尚、登録部１０６０は、定周期で、又は所定の時刻において登録処理を実行する。
【０２３７】
ここで、登録部１０６０が実行する画像登録処理の一例について説明する。
【０２３８】
先ず、登録部１０６０は、画像処理部１０２０から、資料画像を表す画像情報、資料画像の投影区間を表す情報、及び資料画像から抽出した文字列を表す情報取得する。
【０２３９】
次に、登録部１０６０は、画像情報を記憶部１０７０に電子ファイルとして保存する。その後、登録部１０６０は、保存した電子ファイルの電子ファイル識別情報を取得する。次に、登録部１０６０は、例えば、シーケンシャル・ナンバー等の画像識別情報を生成する。
【０２４０】
その後、登録部１０６０は、資料画像を表す画像情報を識別する画像識別情報と、資料画像の投影開始時刻及び投影終了時刻とで定まる投影区間を表す情報と、画像情報を保存したファイルの電子ファイル識別情報と、資料画像から抽出した文字列を表す情報とを関連付けて表１に登録する。その後、登録部１０６０が実行する画像登録処理の実行を終了する。
【０２４１】
ここで、登録部１０６０が実行する音声登録処理の一例について説明する。
【０２４２】
次に、登録部１０６０は、発言検出部１０５１から、発言区間を表す情報と、発言区間における音声を表す音声情報と、発言を収集した装置の集音装置識別情報と取得する。
【０２４３】
その後、登録部１０６０は、音声情報を記憶部１０７０に電子ファイルとして保存する。その後、登録部１０６０は、保存した電子ファイルの電子ファイル識別情報を取得する。次に、登録部１０６０は、例えば、画像識別情報と同様に、シーケンシャル・ナンバー等の音声識別情報を生成する。
【０２４４】
次に、登録部１０６０は、発言者識別部１０５２から、発言を収集した装置の集音装置識別情報と、発言者を識別する発言者識別情報と、発言者を識別した時刻とを取得する。
【０２４５】
その後、登録部１０６０は、交代検出部１０５３から、発言者が交代したか否かを表す交代情報と、発言者を識別した時刻と取得する。
【０２４６】
次に、登録部１０６０は、音圧量検出部１０５４から、発言の音圧量と、発言の音圧量を取得する対象とした時間区間を表す情報と、発言を表す音声を収集した装置の集音装置識別情報とを取得する。
【０２４７】
その後、登録部１０６０は、発言を表す音声情報を識別する音声識別情報と、発言の開始時刻及び終了時刻で定まる発言区間を表す情報と、音声情報を保存したファイルの電子ファイル識別情報と、発言を収集した装置の集音装置識別情報と、発言者を識別する発言者識別情報と、発言の交代の有無を表す交代情報と、発言の音圧量とを関連付けて表２に登録する。その後、登録部１０６０が実行する音声登録処理の実行を終了する。
【０２４８】
尚、登録する音圧量は、発言区間に属する時間区間における発言の音圧量の総和とする実施例を採用できる。
【０２４９】
ここで、登録部１０６０が実行する通知登録処理の一例について説明する。
【０２５０】
先ず、登録部１０６０は、制御部１１１０から、画像情報の送信を通知し始めるよう通知装置を制御したことを表す通知開始情報を取得する。次に、登録部１０６０は、通知開始情報に基づいて、通知を識別する通知識別情報を生成する。
【０２５１】
その後、登録部１０６０は、時刻管理部１０３０が管理するシステム時刻を参照して、通知を開始するよう制御した時刻を通知を開始した時刻とみなすことで、通知開始時刻を取得する。
【０２５２】
その後、登録部１０６０は、通知を識別する通知識別情報、及び通知を開始した通知開始時刻を記憶部１０７０が記憶する表３へ登録する。
【０２５３】
次に、登録部１０６０は、通知を終了するよう通知装置を制御したことを表す通知終了情報を取得する。その後、登録部１０６０は、時刻管理部１０３０が管理するシステム時刻を参照して、通知を終了するよう制御した時刻を通知を終了した時刻とみなすことで、通知終了時刻を取得する。
【０２５４】
その後、登録部１０６０は、通知を識別する通知識別情報、及び通知を終了した通知終了時刻を記憶部１０７０が記憶する表３へ登録する。その後、登録部１０６０は、通知登録処理の実行を終了する。
【０２５５】
ここで、登録部１０６０が実行する登録処理の一例について説明する。
【０２５６】
先ず、登録部１０６０は、表２が保存するレコードの内で、以下の処理の対象としてないレコードが存在するか否かを判断する。登録部１０６０は、処理の対象としてないレコードが存在しないと判断する場合は登録処理の実行を終了し、そうで無い場合には、処理の対象としてないレコード農地の内の１つを選択する。
【０２５７】
次に、選択した表２が保存するレコードから音声識別情報を取得する。その後、登録部１０６０は、選択した表２が保存するレコードが保存する発言区間を取得する。
【０２５８】
次に、登録部１０６０は、取得した発言区間と重複する投影区間を保存したレコードを、表１から選択する。その後、選択した表１が保存するレコードから画像識別情報を取得する。
【０２５９】
次に、登録部１０６０は、取得したる発言区間と重複する通知区間を保存したレコードを、表３から選択する。その後、選択した表３が保存するレコードから通知識別情報を取得する。
【０２６０】
次に、登録部１０６０は、取得した音声識別情報と、画像識別情報と、通知識別情報とを関連付けて記憶部１０７０が記憶する表４へ登録する。その後、登録部１０６０は、処理の対象としてないレコードが存在するか否かを判断する処理から、上記処理を繰り返す。
【０２６１】
本実施例において、登録部１０６０は、資料画像を表す画像情報と、画像情報が表す資料画像について発言した音声を表す音声情報と、資料画像を表す画像情報の送信を通知したことを表す通知情報とを、画像及び音声を取得した時刻と通知した時刻とで関連付けて記憶部１０７０に登録するとして説明したが、これに限定される訳ではない。
【０２６２】
例えば、登録部１０６０は、資料画像を表す画像情報と、画像情報が表す画像について発言した音声を表す音声情報と、音声情報の受信を通知したことを表す通知情報、若しくは送信した画像情報又は音声情報の表示又は出力を通知したことを表す通知情報とを、画像及び音声を取得した時刻と通知した時刻とで関連付けて記憶部１０７０に登録する構成を採用できる。
【０２６３】
また例えば、登録部１０６０は、資料画像を表す画像情報と、画像情報が表す画像について発言した音声を表す音声情報と、音声情報の受信を通知したことを表す通知情報、又は音声情報の出力を通知したことを表す通知情報と、例えば、受信を通知した音声情報が表す発言の音圧量、又は出力を通知した音声情報が表す発言の音圧量などの通知内容とを、画像及び音声を取得した時刻と通知した時刻とで関連付けて記憶部１０７０に登録する構成を採用できる。
【０２６４】
更に例えば、登録部１０６０は、撮像画像を表す画像情報と、画像情報が表す撮像画像に撮像された会議における発言を表す音声情報と、撮像画像を表す画像情報の受信を通知したことを表す通知情報とを、画像及び音声を取得した時刻と通知した時刻とで関連付けて記憶部１０７０に登録する構成を採用できる。
【０２６５】
検索部１０８０は、制御部１１１０及び記憶部１０７０に接続している。検索部１０８０は、後述する検索処理を実行することで、登録部１０６０が登録した画像情報と音声情報と通知情報とを、会議を開催した時刻に基づいて検索する。
【０２６６】
ここで、検索部１０８０が実行する検索処理の一例について説明する。
【０２６７】
先ず、検索部１０８０は、制御部１１１０から、検索に用いる時刻であって、会議を開催した時間区間に属する時刻を取得する。次に、検索部１０８０は、表２から、取得した時刻に属する発言区間を保存したレコードを検索する。次に、検索部１０８０は、検索した表２のレコードに保存された音声識別情報を取得する。
【０２６８】
その後、検索部１０８０は、検索した表２のレコードが保存する電子ファイル識別情報及び発言区間を表す情報を取得する。次に、検索部１０８０は、電子ファイル識別情報が識別する電子ファイルから、音声情報を取得する。
【０２６９】
その後、検索部１０８０は、表４から、取得した音声識別情報を保存するレコードを検索する。次に、検索部１０８０は、検索した表４のレコードに保存された画像識別情報を取得する。その後、検索部１０８０は、表１から、取得した画像識別情報を保存するレコードを検索する。
【０２７０】
次に、検索部１０８０は、検索した表１のレコードが保存する電子ファイル識別情報及び投影区間を表す情報を取得する。その後、検索部１０８０は、電子ファイル識別情報が識別する電子ファイルから、画像情報を取得する。
【０２７１】
次に、検索部１０８０は、検索した表４のレコードに保存された通知識別情報を取得する。その後、検索部１０８０は、表３から、取得した通知識別情報を保存するレコードを検索する。
【０２７２】
次に、検索部１０８０は、検索した表３のレコードに保存された通知区間を表す情報を取得する。その後、検索部１０８０は、検索した資料画像を表す画像情報及び資料画像の投影区間、発言を表す音声情報及び発言の行われた発言区間、画像情報の送信を通知したことを表す通知情報及び通知がされた通知区間を、制御部１１１０へ出力する。
【０２７３】
尚、検索部１０８０が制御部１１１０へ出力した情報は、情報受信装置６００１が受信する。情報受信装置６００１は、受信した画像情報が表す画像、音声情報が表す音声、及び通知情報が表す画像情報の送信を、投影区間、発言区間、及び通知区間で同期して表示、出力、及び通知するよう表示装置６９１１及び出音装置６９２１で構成される通知装置６９０１を制御する。
【０２７４】
本実施例において、検索部１０８０は、登録部１０６０が登録した画像情報と音声情報と通知情報とを、会議を開催した時刻に基づいて検索するとして説明したが、これに限定される訳で無い。
【０２７５】
例えば、検索部１０８０は、検索に用いる（つまり、検索キーワードとする）文字列に基づいて、当該文字列を含む資料画像を表す画像情報、資料画像について発言した音声を表す音声情報、画像情報の送信を通知したことを表す通知情報を検索する構成を採用できる。
【０２７６】
また例えば、検索部１０８０は、検索に用いる発言の音圧量の範囲、発言者識別情報に関連付けられた発言者の氏名、又は発言者の交代の有無に基づいて、当該音圧量の範囲に属する音圧量の発言、発言者識別情報で識別される発言者の発言、発言者が交代した後又は前の発言を表す音声情報、発言の対象となった資料画像、及び資料画像を表す画像情報を送信したことを通知する通知情報を検索する構成を採用できる。
【０２７７】
更に例えば、検索部１０８０は、登録部１０６０が登録した画像情報と音声情報と画像情報又は音声情報の送信又は受信、若しくは表示又は出力を通知する通知を表す通知情報とを、会議を開催した時刻に基づいて検索する構成を採用できる。
【０２７８】
ＩＦ部１０９０は、検出部１１００、制御部１１１０、及び画像生成装置２０００に接続する。ＩＦ部１０９０は、情報送信装置１０００が備える検出部１１００及び制御部１１１０が情報を入出力するために用いるバス１００５と、画像生成装置２０００が備える各部が情報を入出力するために用いるバスとの間で、情報を表す電気信号の大きさ又は情報の形式を変換することで情報の仲介を行う。
【０２７９】
検出部１１００は、音声処理部１０５０、ＩＦ部１０９０、及び制御部１１１０に接続する。検出部１１００は、後述する検出処理を実行することで、会議において使用する資料画像の変化を検出するだけでなく、資料画像について発言した音声の変化を検出する。
【０２８０】
ここで図１１を参照して、検出部１１００が実行する検出処理について説明する。図１１は、検出部１１００が実行する検出処理の一例を表すフローチャートの一部であり、図１２は、検出部１１００が実行する検出処理の一例を表すフローチャートの他部である。
【０２８１】
先ず、検出部１１００は、所定時間スリープする（ステップＳＴ０００１）。次に、検出部１１００は、音圧量を表す変数を初期化する（ステップＳＴ０００２）。
【０２８２】
その後、検出部１１００は、終了信号を取得したか否かを判断する（ステップＳＴ０００３）。検出部１１００は、終了信号を取得したと判断する場合には検出処理の実行を終了し、そうで無い場合にはステップＳＴ０００４の処理を実行する。尚、終了信号は、例えば、入力装置１５００が入力した又は受信部１１３０が受信した処理の終了を命じる信号をいう。
【０２８３】
ステップＳＴ０００３において、終了信号を取得しないと判断した場合には、検出部１１００は、音圧量検出部１０５４から音圧量を取得する（ステップＳＴ０００４）。次に、検出部１１００は、画像生成装置２０００が生成して出力する画像を変更する又は変更したことを表す画像変更情報を取得したか否かを判断する（ステップＳＴ０００５）。つまり、検出部１１００は、会議において使用する画像の変化を検出する。
【０２８４】
検出部１１００は、画像変更情報を取得したと判断した場合にはステップＳＴ００１０の処理を、そうで無い場合にはステップＳＴ０００６の処理を実行する。
【０２８５】
ステップＳＴ０００５において、画像変更情報を取得しないと判断した場合には、検出部１１００は、音圧量検出部１０５４が検出した音圧量が変化したか否かを判断する（ステップＳＴ０００６）。つまり、検出部１１００は、資料画像について発言した音声の変化を検出する。
【０２８６】
検出部１１００は、音圧量が変化したと判断する場合にはステップＳＴ０００７の処理を実行し、そうで無い場合にはステップＳＴ０００１に戻り上記処理を繰り返す。尚、検出部１１００は、音圧量が変化したか否かを、前回に音圧量を表す変数に保存した音圧量と今回に取得した音圧量とを比較することで判断する。
【０２８７】
ステップＳＴ０００６において、音圧量が変化したと判断した場合には、検出部１１００は、制御部１１１０へ、音声情報が表す音声の音圧量の変化を検出したことを表す音圧量変化検出情報を出力する（ステップＳＴ０００７）。
【０２８８】
次に、検出部１１００は、制御部１１１０へ、変化後の音圧量を出力する（ステップＳＴ０００８）。その後、検出部１１００は、音圧量を表す変数の値を、今回に取得した音圧量で更新する（ステップＳＴ０００９）。その後、検出部１１００は、ステップＳＴ０００１に戻り上記処理を繰り返す。
【０２８９】
ステップＳＴ０００５において、画像変更情報を取得したと判断した場合には、検出部１１００は、会議において使用する資料画像の変化を検出したと判断して、制御部１１１０へ、資料画像の変化を検出した事を表す画像変化検出情報を出力する（ステップＳＴ００１０）。次に、検出部１１００は、ステップＳＴ０００１に戻り上記処理を繰り返す。
【０２９０】
尚、音圧量変化検出情報及び画像変化検出情報を合わせて、以下単に、検出情報という。
【０２９１】
本実施例においては、検出部１１００は、画像生成装置２０００が出力する画像変更情報に基づいて画像の変化を検出するとして説明したが、これに限定される訳ではなく、例えば、新規画像検出部１０２１が新規な画像を検出した場合に、検出部１１００は画像の変化を検出する構成を採用できる。
【０２９２】
本実施例においては、検出部１１００は、音圧量検出部１０５４が出力した音圧量に基づいて、資料画像について発言した音声の変化を検出するとして説明したが、これに限定される訳ではない。
【０２９３】
例えば、検出部１１００は、交代検出部１０５３と同様に、発言者識別部１０５２が識別する発言者に基づいて（つまり、発言者識別情報に基づいて）発言者の交代による音声の変化を検出する構成、及び発言検出部１０５１と同様に、Ａ／Ｄ変換部１０４０が出力する音声信号が表す音圧レベルに基づいて発言の開始による音声の変化を検出する構成を採用できる。
【０２９４】
次に、図７に戻り、情報送信装置１０００の構成について引き続き説明を行う。
【０２９５】
制御部１１１０は、画像処理部１０２０、音声処理部１０５０、登録部１０６０、記憶部１０７０、検索部１０８０、ＩＦ部１０９０、送信部１１２０、受信部１１３０、入力装置１５００、及び通知装置１９００に接続している。
【０２９６】
制御部１１１０は、制御部１１１０に接続する各部、及び各装置を制御する。特に、制御部１１１０は、後述する通知制御処理を実行することで、検出部１１００が資料画像の変化を検出した後に画像情報の送信を通知し始めるよう通知装置１９００を制御し、かつ後述する受信部１１３０が表示情報を受信した後に通知を終了するよう通知装置１９００を制御する。
【０２９７】
本実施例において、制御部１１１０は、検出部１１００が変化を検出した資料画像を表す画像情報の送信を通知する通知画像を表示するよう通知装置２９００を制御する構成について説明するが、これに限定される訳ではなく、画像情報の送信を通知する通知音声を出力するよう通知装置１９００又は２９００を制御する構成を採用できる。
【０２９８】
また、制御部１１１０は、受信部１１３０が画像情報の送信を表す送信情報を受信した後に画像情報が表す撮像画像の受信を通知し始めるよう通知装置２９００を制御し、かつ撮像画像を表示するよう表示装置２９１０を制御した後に通知を終了するよう通知装置２９００を制御する。
【０２９９】
更に、制御部１１１０は、受信部１１３０が音声情報の送信を表す送信情報を受信した後であり、かつ受信部１１３０が受信した音声情報が表す音声を出力するよう出音装置１９２０及び２９２０を制御する前に、音声情報の受信を通知するよう通知装置１９００又は２９００を制御する。
【０３００】
また更に、制御部１１１０は、受信部１１３０が送信情報を受信した後に、音声情報の受信と共に、音声情報が表す音声に関する変化を通知する通知画像を表示するよう通知装置１９００及び２９００を制御する。
【０３０１】
ここで図１３を参照して、制御部１１１０が実行する通知制御処理について概説する。図１３は、制御部１１１０が実行する通知制御処理における画像情報の送信を通知する処理の一例を概説するための図である。
【０３０２】
先ず、時刻Ｔ００において、制御部１１１０は、情報送信装置１０００が設置された側（以下単に、送信装置側ＡＳという）に設置された通知装置２９００が、文字Ａを含む資料画像を表示するよう制御している。
【０３０３】
尚、通知装置２９００は、資料画像を生成する画像生成装置２０００を操作する者が視認できる位置に設置されている。また、通知装置２９００は、図５を参照して説明した表示画面ＦＤ１２のスライド表示部ＰＳに文字Ａを含む資料画像（つまり、スライド画像）表示する。
【０３０４】
また、時刻Ｔ００において、後述する情報受信装置６００１が有する制御部は、情報受信装置６００１が設置された側（以下単に、受信装置側ＡＲという）に設置された通知装置６９０１が、文字Ａを含む資料画像を表示するよう制御している。尚、通知装置６９０１は、図６を参照して説明した表示画面ＦＤ２１のスライド表示部ＰＳに文字Ａを含む資料画像（つまり、スライド画像）表示する。
【０３０５】
つまり、時刻Ｔ００において、送信装置側ＡＳの通知装置２９００と、受信装置側ＡＲの通知装置６９０１とは、同じ資料画像を表示している。
【０３０６】
次に、時刻Ｔ０１付近において、制御部１１１０は、検出部１１００が文字Ｂを含む資料画像への変更を検出した後であって、かつ後述する送信部１１２０が変更された画像を表す画像情報を送信する前に、通知装置２９００が画像送信通知画像ＰＡＳＰの表示を開始するよう制御する。尚、通知装置２９００は、図５を参照して説明した表示画面ＦＤ１２のスライド表示部ＰＳに画像送信通知画像ＰＡＳＰを表示する。
【０３０７】
また、時刻Ｔ０１付近において、情報受信装置６００１が有する制御部は、後述する情報受信装置６００１が有する受信部が画像送信情報を受信した後に、通知装置６９０１が画像受信通知画像ＰＡＲＰの表示を開始するよう制御する。尚、通知装置６９０１は、図６を参照して説明した表示画面ＦＤ２１のスライド表示部ＰＳに画像受信通知画像ＰＡＲＰを表示する。
【０３０８】
つまり、時刻Ｔ０１付近において、送信装置側ＡＳの通知装置２９００は変更した後の資料画像を表示するが、受信装置側ＡＲの通知装置６９０１は変更する前の資料画像を表示している。
【０３０９】
次に、時刻Ｔ０２付近において、制御部１１１０は、画像処理部１０２０が画像情報を圧縮する間、及び送信部１１２０が圧縮した画像情報を送信する間、通知装置２９００が画像送信通知画像ＰＡＳＰを表示するよう制御を続ける。
【０３１０】
また、時刻Ｔ０２付近において、情報受信装置６００１が有する制御部は、情報受信装置６００１が有する受信部が圧縮された画像情報を受信する間、及び圧縮された画像情報を解凍する間、通知装置６９０１が画像受信通知画像ＰＡＲＰを表示するよう制御を続ける。
【０３１１】
次に、時刻Ｔ０３付近において、情報受信装置６００１が有する制御部は、解凍した画像情報が表す資料画像であって、文字Ｂを含む変更された資料画像を表示するよう通知装置６９０１を制御する。次に、情報受信装置６００１が有する制御部は、通知装置６９０１が画像受信通知画像ＰＡＲＰの表示を終了するよう制御する。尚、その後、情報受信装置６００１が有する送信部は、表示情報を情報送信装置１０００へ送信する
【０３１２】
また、時刻Ｔ０３付近において、制御部１１１０は、受信部１１３０が表示情報を受信した後に、通知装置２９００が画像送信通知画像ＰＡＳＰの表示を終了するよう制御する。
【０３１３】
つまり、時刻Ｔ０３付近において、送信装置側ＡＳの通知装置２９００と、受信装置側ＡＲの通知装置６９０１とは、同じ資料画像を表示する。
【０３１４】
ここで図１４を参照して、制御部１１１０が実行する通知制御処理における画像情報の受信を通知する処理について概説する。図１４は、制御部１１１０が実行する通知制御処理における画像情報の受信を通知する処理の一例を概説するための図である。
【０３１５】
先ず、時刻Ｔ１０において、制御部１１１０は、受信装置側ＡＲに設置された通知装置６９０１が表示する撮像画像と同じ画像を表示するよう送信装置側ＡＳに設置された通知装置１９００を制御している。
【０３１６】
尚、通知装置１９００は、会議室１１において会議の参加者が視認できる位置に設置されている。また、通知装置１９００は、図３及び４を参照して説明した表示画面ＦＤ１１の撮像表示部ＰＩに撮像画像を表示する。また、通知装置６９０１は、図６を参照して説明した表示画面ＦＤ２１の撮像表示部ＰＩに撮像画像を表示する。
【０３１７】
次に、時刻Ｔ１１付近において、情報受信装置６００１が有する制御部は、後述する情報受信装置６００１が有する検出部１１００が撮像画像の変更を検出した後であって、かつ情報受信装置６００１が有する送信部１１２０が変更された画像を表す画像情報を送信する前に、通知装置６９０１が画像送信通知画像ＰＡＳＰの表示を開始するよう制御する。尚、通知装置６９０１は、図６を参照して説明した表示画面ＦＤ２１の撮像表示部ＰＩに画像送信通知画像ＰＡＳＰを表示する。
【０３１８】
また、時刻Ｔ１１付近において、制御部１１１０は、受信部１１３０が画像送信情報を受信した後に、通知装置１９００が画像受信通知画像ＰＡＲＰの表示を開始するよう制御する。尚、通知装置１９００は、図３及び４を参照して説明した表示画面ＦＤ１１の撮像表示部ＰＩに画像受信通知画像ＰＡＲＰを表示する。
【０３１９】
つまり、時刻Ｔ１１付近において、受信装置側ＡＲの通知装置６９０１は変更した後の撮像画像を表示するが、送信装置側ＡＳの通知装置１９００は変更する前の撮像画像を表示している。
【０３２０】
次に、時刻Ｔ１２付近において、情報受信装置６００１が有する制御部は、後述する情報受信装置６００１が有する画像処理部が画像情報を圧縮する間、及び情報受信装置６００１が有する送信部が圧縮した画像情報を送信する間、通知装置６９０１が画像送信通知画像ＰＡＳＰを表示するよう制御を続ける。
【０３２１】
また、時刻Ｔ１２付近において、制御部１１１０は、受信部１１３０が圧縮された画像情報を受信する間、及び圧縮された画像情報を解凍する間、通知装置１９００が画像受信通知画像ＰＡＲＰを表示するよう制御を続ける。
【０３２２】
次に、時刻Ｔ１３付近において、制御部１１１０は、解凍した画像情報が表す変更した撮像画像を表示するよう通知装置１９００を制御する。次に、制御部１１１０は、通知装置１９００が画像受信通知画像ＰＡＲＰの表示を終了するよう制御する。尚、その後、送信部１１２０は、表示情報を情報受信装置６００１へ送信する
【０３２３】
また、時刻Ｔ１３付近において、情報受信装置６００１が有する制御部は、情報受信装置６００１が有する受信部が表示情報を受信した後に、通知装置６９０１が画像送信通知画像ＰＡＳＰの表示を終了するよう制御する。
【０３２４】
つまり、時刻Ｔ１３付近において、送信装置側ＡＳの通知装置１９００と、受信装置側ＡＲの通知装置６９０１とは、同じ撮像画像を表示する。
【０３２５】
次に図１５を参照して、制御部１１１０が実行する通知制御処理における音声情報の受信を通知する処理について概説する。図１５は、制御部１１１０が実行する通知制御処理における音声情報の受信を通知する処理について概説するための図である。
【０３２６】
先ず、時刻Ｔ２０付近において、情報受信装置６００１が有する送信部は、会議室２１で開催された会議における音声を表す音声情報を送信することを表す音声送信情報、及び発言の音圧量を情報送信装置１０００へ送信する。
【０３２７】
尚、情報受信装置６００１が有する送信部は、受信装置側ＡＲに設置された集音装置６７０１が入力した発言の音圧量が変化したことを検出部が検出した後に、音声送信情報及び音圧量情報送信装置１０００へ送信する。
【０３２８】
また、時刻Ｔ２０付近において、制御部１１１０は、受信部１１３０が音声送信情報を受信した後であって、かつ受信部１１３０が音圧量を受信した後に、受信する音声情報が表す音声の音圧量を通知する受信音圧量通知画像ＰＡＲＡを表示し始めるよう通知装置１９００及び２９００を制御する。尚、通知装置１９００又は２９００は、図３から５を参照して説明した表示画面ＦＤ１１及び１２の音圧量表示部ＰＡに受信音圧量通知画像ＰＡＲＡを表示する。
【０３２９】
尚、受信音圧量通知画像ＰＡＲＡは、受信する音声情報が表す音声の音圧量を通知すると共に、音声情報の受信をも通知する。
【０３３０】
次に、時刻Ｔ２１付近において、情報受信装置６００１が有する制御部は音声情報を圧縮し、かつ情報受信装置６００１が有する送信部は圧縮した音声情報を情報送信装置１０００へ送信する。
【０３３１】
また、時刻Ｔ２１付近において、制御部１１１０は、受信部１１３０が圧縮された音声情報を受信する間、及び圧縮された音声情報を解凍する間、通知装置１９００及び２９００が受信音圧量通知画像ＰＡＲＡを表示するよう制御を続ける。
【０３３２】
次に、時刻Ｔ２２付近において、制御部１１１０は、解凍した音声情報が表す発言であって、音圧量が変化した音声を出力するよう通知装置１９００又は２９００を制御する。尚、その後、送信部１１２０は、受信した音声情報が表す音声を出力したことを表す出力情報、及び出力した音声の音圧量を情報送信装置１０００へ送信する。
【０３３３】
また、時刻Ｔ２２付近において、情報受信装置６００１が有する制御部は、情報受信装置６００１が有する受信部が出力情報と音圧量とを受信した後に、送信装置側ＡＳの通知装置１９００又は２９００が出力した発言の音圧量を通知する出力音圧量通知画像ＰＡＯＡの表示を開始するよう通知装置６９０１を制御する。
【０３３４】
尚、出力音圧量通知画像ＰＡＯＡは、送信した音声情報が表す音声であって、出力した発言の音圧量を通知すると共に、送信した音声情報が表す音声の出力をも通知する。
【０３３５】
ここで図１６を参照して、制御部１１１０の構成について説明する。図１６は、制御部１１１０の一構成例を表す機能ブロック図である。
【０３３６】
制御部１１１０は、通知制御部１１９１、受信制御部１１９２、送信制御部１１９３、及び検索制御部１１９４で構成される。
【０３３７】
通知制御部１１９１は、受信部１１３０、ＩＦ部１０９０、検出部１１００、記憶部１０７０、及び通知装置１９００に接続する。通知制御部１１９１は、上記通知制御処理を定周期で実行する。
【０３３８】
ここで図１７から１９を参照して、通知制御部１１９１が実行する通知制御処理について説明する。図１７は、通知制御部１１９１が実行する通知制御処理の一例を表すフローチャートの一部であり、図１８及び１９は、通知制御部１１９１が実行する通知制御処理の一例を表すフローチャートの他部である。
【０３３９】
先ず、通知制御部１１９１は、検出部１１００から画像変化検出情報を取得したか否かを判断する（ステップＳＴ０１０１）。通知制御部１１９１は、画像変化検出情報を取得したと判断する場合にはステップＳＴ０１２６の処理を、そうで無い場合にはステップＳＴ０１０２の処理を実行する。
【０３４０】
ステップＳＴ０１０１において、通知制御部１１９１は、画像変化検出情報を取得しないと判断した場合には、受信制御部１１９２から、受信した画像情報が表す撮像画像を表示装置１９１０が表示したことを表す表示情報（つまり、情報送信装置１０００が送信する表示情報）を取得したか否かを判断する（ステップＳＴ０１０２）。通知制御部１１９１は、情報送信装置１０００が送信する表示情報を取得したと判断する場合にはステップＳＴ０１２５の処理を実行し、そうで無い場合にはステップＳＴ０１０３の処理を実行する。
【０３４１】
ステップＳＴ０１０２において、通知制御部１１９１は、情報送信装置１０００が送信する表示情報を取得しなかったと判断した場合には、送信部１１２０が送信した画像情報が表す画像を表示装置６９１１が表示したことを表す表示情報（つまり、情報受信装置６００１が送信する表示情報）、又は送信部１１２０が送信した音声情報が表す音声を出音装置６９２１が出力したことを表す出力情報（つまり、情報受信装置６００１が送信する出力情報）を取得したか否かを判断する（ステップＳＴ０１０３）。
【０３４２】
通知制御部１１９１は、情報受信装置６００１が送信する表示情報又は出力情報を取得したと判断する場合にはステップＳＴ０１１５の処理を、そうで無い場合にはステップＳＴ０１０４の処理を実行する。
【０３４３】
ステップＳＴ０１０３において、通知制御部１１９１は、情報受信装置６００１が送信する表示情報及び出力情報を取得のいずれも取得しなかったと判断した場合には、受信部１１３０から、情報受信装置６００１が送信した送信情報を取得したか否かを判断する（ステップＳＴ０１０４）。通知制御部１１９１は、情報受信装置６００１が送信した送信情報を取得したと判断する場合にはステップＳＴ０１０５の処理を実行し、そうで無い場合には通知制御処理の実行を終了する。
【０３４４】
ステップＳＴ０１０４において、通知制御部１１９１は、情報受信装置６００１が送信した送信情報を取得したと判断した場合には、取得した送信情報が、画像送信情報であるか否かを判断する（ステップＳＴ０１０５）。通知制御部１１９１は、画像送信情報であると判断した場合にはステップＳＴ０１１３の処理を、そうで無い場合にはステップＳＴ０１０６の処理を実行する。
【０３４５】
ステップＳＴ０１０５において、通知制御部１１９１は、情報受信装置６００１が送信した画像送信情報を取得しなかったと判断した場合には、取得した送信情報は音声送信情報であると判断する。また、通知制御部１１９１は、表示装置１９１０への受信音圧量通知画像の出力を停止することで、通知を終了するように通知装置１９００を制御する（ステップＳＴ０１０６）。
【０３４６】
次に、通知制御部１１９１は、ＩＦ部１０９０を介して画像生成装置２０００へ、受信音圧量通知画像ＰＡＲＡの表示を停止するよう命じる受信音圧量通知停止命令を出力することで、通知を停止するよう通知装置２９００を制御する（ステップＳＴ０１０７）。
【０３４７】
尚、受信音圧量通知停止命令とは、通知装置２９００が音圧量の通知を停止するよう制御することを命じる命令をいう。つまり、受信音圧量通知停止命令とは、表示装置２９１０が受信音圧量通知画像ＰＡＲＡの表示を停止するようを制御することを命じる命令をいう。
【０３４８】
その後、通知制御部１１９１は、受信部１１３０から、情報受信装置６００１が送信した音圧量を取得する（ステップＳＴ０１０８）。次に、通知制御部１１９１は、記憶部１０７０から、受信音圧量通知画像ＰＡＲＡを音圧量の大きさに基づいて取得する（ステップＳＴ０１０９）。
【０３４９】
その後、通知制御部１１９１は、表示装置１９１０へ、受信音圧量通知画像ＰＡＲＡの出力を開始することで、音声情報の受信及び受信する音声情報が表す発言の変化した音圧量を通知するよう通知装置１９００を制御する（ステップＳＴ０１１０）。
【０３５０】
次に、通知制御部１１９１は、ＩＦ部１０９０を介して接続する画像生成装置２０００へ、受信音圧量通知開始命令を出力することで、音声情報の受信及び受信する音声情報が表す発言の変化した音圧量を通知するよう通知装置２９００を制御する（ステップＳＴ０１１１）。
【０３５１】
尚、受信音圧量通知開始命令とは、通知装置２９００が音圧量の通知を開始するよう制御することを命じる命令をいう。つまり、受信音圧量通知開始命令とは、表示装置２９１０が受信音圧量通知画像ＰＡＲＡの表示を開始するようを制御することを命じる命令をいう。
【０３５２】
その後、通知制御部１１９１は、ＩＦ部１０９０を介して接続する画像生成装置２０００へ、受信音圧量通知画像ＰＡＲＡを出力する（ステップＳＴ０１１２）。その後、通知制御部１１９１は、通知制御処理の実行を終了する。
【０３５３】
ステップＳＴ０１０５において、通知制御部１１９１は、情報受信装置６００１が送信した送信情報を取得したと判断した場合には、通知制御部１１９１は、記憶部１０７０から、画像受信通知画像ＰＡＲＰを取得する（ステップＳＴ０１１３）。
【０３５４】
次に、通知制御部１１９１は、表示装置１９１０へ、画像受信通知画像ＰＡＲＰの出力を開始することで、画像情報の受信を通知するよう通知装置１９００を制御する（ステップＳＴ０１１４）。その後、通知制御部１１９１は、通知制御処理の実行を終了する。
【０３５５】
ステップＳＴ０１０３において、通知制御部１１９１は、情報受信装置６００１が送信する表示情報又は出力情報を取得したと判断した場合には、取得した情報が表示情報であるか否かを判断する（ステップＳＴ０１１５）。通知制御部１１９１は、取得した情報が表示情報であると判断する場合にはステップＳＴ０１２４の処理を、そうで無い場合にはステップＳＴ０１１６の処理を実行する。
【０３５６】
ステップＳＴ０１１５において、通知制御部１１９１は、取得した情報が表示情報でないと判断した場合には、取得した情報は出力情報であると判断する。また、通知制御部１１９１は、表示装置１９１０への出力音圧量通知画像ＰＡＯＡの出力を停止することで、通知を停止するよう通知装置１９００を制御する（ステップＳＴ０１１６）。
【０３５７】
次に、通知制御部１１９１は、ＩＦ部１０９０を介して画像生成装置２０００へ、出力音圧量通知停止命令を出力することで、通知を停止するよう通知装置２９００を制御する（ステップＳＴ０１１７）。
【０３５８】
尚、出力音圧量通知停止命令とは、通知装置２９００が出力音圧量の通知を停止するよう制御することを命じる命令をいう。つまり、出力音圧量通知停止命令とは、表示装置２９１０が出力音圧量通知画像ＰＡＯＡの表示を停止するようを制御することを命じる命令をいう。
【０３５９】
その後、通知制御部１１９１は、受信部１１３０から、情報受信装置６００１が送信した出力音圧量を取得する（ステップＳＴ０１１８）。通知制御部１１９１は、記憶部１０７０から、取得した出力音圧量に基づいて新たな出力音圧量通知画像ＰＡＯＡを取得する（ステップＳＴ０１１９）。
【０３６０】
次に、通知制御部１１９１は、表示装置１９１０へ、出力音圧量通知画像ＰＡＯＡの出力を開始する（ステップＳＴ０１２０）。その後、通知制御部１１９１は、ＩＦ部１０９０を介して画像生成装置２０００へ、出力音圧量通知開始命令を出力する（ステップＳＴ０１２１）。
【０３６１】
尚、出力音圧量通知開始命令とは、通知装置２９００が出力音圧量の通知を開始するよう制御することを命じる命令をいう。つまり、出力音圧量通知開始命令とは、表示装置２９１０が出力音圧量通知画像ＰＡＯＡの表示を開始するようを制御することを命じる命令をいう。
【０３６２】
次に、通知制御部１１９１は、ＩＦ部１０９０を介して画像生成装置２０００へ、出力音圧量通知画像ＰＡＯＡを出力する（ステップＳＴ０１２２）。その後、通知制御部１１９１は、通知終了情報を登録部１０６０へ出力する（ステップＳＴ０１２３）。次に、通知制御部１１９１は、通知制御処理の実行を終了する。
【０３６３】
ステップＳＴ０１１５において、通知制御部１１９１は、取得した情報が表示情報であると判断した場合には、ＩＦ部１０９０を介して画像生成装置２０００へ、画像送信通知停止命令を出力することで、画像情報を送信したことの通知を終了するよう通知装置２９００を制御する（ステップＳＴ０１２４）。
【０３６４】
尚、画像送信通知停止命令とは、通知装置２９００が画像情報を送信した事の通知を停止するよう制御することを命じる命令をいう。つまり、画像送信通知停止命令とは、表示装置２９１０が画像送信通知画像ＰＡＳＰの表示を停止するようを制御することを命じる命令をいう。その後、通知制御部１１９１は、通知制御処理の実行を終了する。
【０３６５】
尚、画像送信通知停止命令、受信音圧量通知停止命令、及び出力音圧量通知停止命令を、以下単に、通知停止命令という。
【０３６６】
ステップＳＴ０１０２において、通知制御部１１９１は、情報送信装置１０００が送信する表示情報を取得したと判断した場合には、表示装置１９１０への画像受信通知画像ＰＡＲＰの出力を停止することで、通知を終了するよう通知装置１９００を制御する（ステップＳＴ０１２５）。その後、通知制御部１１９１は、通知制御処理の実行を終了する。
【０３６７】
ステップＳＴ０１０１において、通知制御部１１９１は、画像変化検出情報を取得したと判断した場合には、記憶部１０７０から、画像送信通知画像ＰＡＳＰを取得する（ステップＳＴ０１２６）。
【０３６８】
次に、通知制御部１１９１は、ＩＦ部１０９０を介して画像生成装置２０００へ、画像送信通知開始命令を出力することで、画像情報の送信を通知し始めるよう通知装置２９００を制御する（ステップＳＴ０１２７）。
【０３６９】
尚、画像送信通知開始命令とは、通知装置２９００が画像情報を送信した事の通知を開始するよう制御することを命じる命令をいう。つまり、画像送信通知開始命令とは、表示装置２９１０が画像送信通知画像ＰＡＳＰの表示を開始するようを制御することを命じる命令をいう。
【０３７０】
尚、画像送信通知開始命令、受信音圧量通知開始命令、及び出力音圧量通知開始命令を、以下単に、通知開始命令という。
【０３７１】
その後、通知制御部１１９１は、ＩＦ部１０９０を介して画像生成装置２０００へ、画像送信通知画像ＰＡＳＰを出力する（ステップＳＴ０１２８）。次に、通知制御部１１９１は、通知開始情報を登録部１０６０へ出力する（ステップＳＴ０１２９）。その後、通知制御部１１９１は、通知制御処理の実行を終了する。
【０３７２】
ここで図１６に戻り、制御部１１１０の構成について引き続き説明する。
【０３７３】
受信制御部１１９２は、送信制御部１１９３、受信部１１３０、及び通知装置１９００に接続している。受信制御部１１９２は、受信制御処理を実行することで、情報受信装置６００１が送信する音声情報及び画像情報を受信し、受信した情報が表す撮像画像及び発言を表示及び出力するよう表示装置１９１０及び出音装置１９２０を制御する。尚、受信制御部１１９２は、受信制御処理を定周期で実行する。
【０３７４】
ここで図２０を参照して、受信制御部１１９２が実行する受信制御処理について説明する。図２０は、受信制御部１１９２が実行する受信制御処理の一例を表すフローチャートである。
【０３７５】
先ず、受信制御部１１９２は、受信部１１３０から画像情報を取得したか否かを判断する（ステップＳＴ０２０１）。受信制御部１１９２は、受信部１１３０から画像情報を取得したと判断した場合にはステップＳＴ０２０７の処理を、そうで無い場合にはステップＳＴ０２０２の処理を実行する。
【０３７６】
ステップＳＴ０２０１において、受信制御部１１９２は、受信部１１３０から画像情報を取得しないと判断した場合には、受信部１１３０から音声情報を取得したか否かを判断する（ステップＳＴ０２０２）。受信制御部１１９２は、受信部１１３０から音声情報を取得したと判断する場合にはステップＳＴ０２０３の処理を、そうで無い場合には受信制御処理の実行を終了する。
【０３７７】
ステップＳＴ０２０２において、受信制御部１１９２は、受信部１１３０から音声情報を取得したと判断した場合には、圧縮された音声情報を伸張する（ステップＳＴ０２０３）。
【０３７８】
本実施例においては、通信網１００を介して行う画像情報の送受信に伴う遅延時間のみならず、受信制御部１１９２が行う圧縮された情報の伸張に要する処理時間も、音声情報の送信に伴う遅延時間を決定する。尚、受信制御部１１９２は、送信情報、表示情報、及び出力情報について情報処理を行わない。
【０３７９】
次に、受信制御部１１９２は、出音装置１９２０へ、伸張した音声情報が表す音声を出力する（ステップＳＴ０２０４）。その後、受信制御部１１９２は、送信制御部１１９３へ、受信した音声情報が表す音声を出力したことを表す出力情報を出力する（ステップＳＴ０２０５）。
【０３８０】
次に、受信制御部１１９２は、出音装置１９２０が出力した発言の音圧量を、送信制御部１１９３へ出力する（ステップＳＴ０２０６）。その後、受信制御部１１９２は、受信制御処理の実行を終了する。
【０３８１】
ステップＳＴ０２０１において、受信制御部１１９２は、受信部１１３０から画像情報を取得したと判断した場合には、圧縮された画像情報を伸張する（ステップＳＴ０２０７）。
【０３８２】
本実施例においては、通信網１００を介して行う画像情報の送受信に伴う遅延時間のみならず、受信制御部１１９２が行う圧縮された情報の伸張に要する処理時間も、画像情報の送信に伴う遅延時間を決定する。
【０３８３】
次に、受信制御部１１９２は、表示装置１９１０へ、伸張した音声情報が表す音声を出力する（ステップＳＴ０２０８）。その後、受信制御部１１９２は、送信制御部１１９３へ、受信した画像情報が表す撮像画像を出力したことを表す表示情報を出力する（ステップＳＴ０２０９）。
【０３８４】
次に、受信制御部１１９２は、通知制御部１１９１へ、表示情報を出力する（ステップＳＴ０２１０）。その後、受信制御部１１９２は、受信制御処理の実行を終了する。
【０３８５】
ここで図１６に戻り、制御部１１１０の構成について引き続き説明を行う。
【０３８６】
送信制御部１１９３は、画像処理部１０２０、音声処理部１０５０、検出部１１００、受信制御部１１９２、送信部１１２０、及び受信部１１３０に接続している。
【０３８７】
送信制御部１１９３は、後述する送信制御処理を実行することで、会議で使用した資料画像を表す画像情報及び資料画像について発言した音声を表す音声情報を送信するよう送信部１１２０を制御する。尚、送信制御部１１９３は、定周期で送信制御処理を実行する。
【０３８８】
ここで図２１から２３を参照して、送信制御部１１９３は、が実行する送信制御処理について説明する。図２１は、送信制御部１１９３が実行する送信制御処理の一例を表すフローチャートの一部であり、図２２及び２３は、送信制御部１１９３が実行する送信制御処理の一例を表すフローチャートの他部である。
【０３８９】
先ず、送信制御部１１９３は、受信部１１３０から、情報送信装置１０００が取得した画像情報及び音声情報を送信することを求める送信要求を取得したか否かを判断する（ステップＳＴ０３０１）。送信制御部１１９３は、送信要求を取得したと判断する場合にはステップＳＴ０３１９の処理を、そうで無い場合にはステップＳＴ０３０２の処理を実行する。
【０３９０】
ステップＳＴ０３０１において、送信制御部１１９３は、送信要求を取得しないと判断した場合には、検出部１１００から検出情報を取得したか否かを判断する（ステップＳＴ０３０２）。送信制御部１１９３は、検出情報を取得したと判断した場合にはステップＳＴ０３１４の処理を、そうでない場合にはステップＳＴ０３０３の処理を実行する。
【０３９１】
ステップＳＴ０３０２において、送信制御部１１９３は、検出情報を取得しなかったと判断した場合には、受信制御部１１９２から、表示装置１９１０が撮像画像を表示したことを表す表示情報（つまり、情報送信装置１０００が送信する表示情報）、若しくは出音装置１９２０又は２９２０が音声を出力したことを表す出力情報（つまり、情報送信装置１０００が送信する出力情報）を取得したか否かを判断する（ステップＳＴ０３０３）。送信制御部１１９３は、表示情報又は出力情報を取得したと判断する場合にはステップＳＴ０３０９の処理を、そうで無い場合にはステップＳＴ０３０４の処理を実行する。
【０３９２】
ステップＳＴ０３０３において、送信制御部１１９３は、情報送信装置１０００が送信する表示情報及び出力情報のいずれも取得しなかったと判断する場合には、画像圧縮部１０２３が画像情報の圧縮を完了したか否かを判断する（ステップＳＴ０３０４）。送信制御部１１９３は、画像情報の圧縮を完了したと判断する場合にはステップＳＴ０３０７の処理を、そうで無い場合にはステップＳＴ０３０５の処理を実行する。尚、送信制御部１１９３は、例えば、画像圧縮部１０２３が圧縮をする処理の実行終後に出力するシグナルによって、画像圧縮部１０２３が画像情報の圧縮を完了したか否かを判断できる。
【０３９３】
ステップＳＴ０３０４において、送信制御部１１９３は、画像情報の圧縮が完了していないと判断した場合には、音声処理部１０５０から圧縮された音声情報を取得する（ステップＳＴ０３０５）。
【０３９４】
次に、送信制御部１１９３は、取得した音声情報と、音声情報の送信要求を出力した情報受信装置６００１を識別する受信装置識別情報とを送信部１１２０へ出力する（ステップＳＴ０３０６）。尚、送信部１１２０は、受信装置識別情報で識別される装置へ音声情報を送信する。その後、送信制御部１１９３は、送信制御処理の実行を終了する。
【０３９５】
尚、受信装置識別情報は、例えば、ＩＰ（Internet Protocol）アドレス、ＭＡＣ（Media Access Control Address）アドレス、又はマシン名、若しくはこれらと関連付けられたドメイン名を含む。
【０３９６】
ステップＳＴ０３０４において、送信制御部１１９３は、画像情報の圧縮が完了したと判断した場合には、画像処理部１０２０から圧縮された画像情報を取得する（ステップＳＴ０３０７）。
【０３９７】
次に、送信制御部１１９３は、取得した画像情報と受信装置識別情報とを送信部１１２０へ出力する（ステップＳＴ０３０８）。その後、送信制御部１１９３は、送信制御処理の実行を終了する。
【０３９８】
ステップＳＴ０３０３において、送信制御部１１９３は、表示情報又は出力情報を取得した判断した場合には、取得した情報が表示情報であるか否かを判断する（ステップＳＴ０３０９）。送信制御部１１９３は、表示情報であると判断する場合にはステップＳＴ０３１３の処理を、そうで無い場合にはステップＳＴ０３１０の処理を実行する。
【０３９９】
ステップＳＴ０３０９において、送信制御部１１９３は、取得した情報が表示情報でないと判断した場合には、出力情報を取得したと判断し、送信部１１２０へ、受信装置識別情報と出力情報とを出力する（ステップＳＴ０３１０）。
【０４００】
次に、送信制御部１１９３は、受信制御部１１９２から、出音装置１９２０又は２９２０が出力した発言の音圧量を取得する（ステップＳＴ０３１１）。
【０４０１】
その後、送信制御部１１９３は、送信部１１２０へ、受信装置識別情報と出力音圧量とを出力する（ステップＳＴ０３１２）。その後、送信制御部１１９３は、送信制御処理の実行を終了する。
【０４０２】
ステップＳＴ０３０９において、送信制御部１１９３は、取得した情報が表示情報であると判断した場合には、送信部１１２０へ、受信装置識別情報と表示情報とを出力する（ステップＳＴ０３１３）。その後、送信制御部１１９３は、送信制御処理の実行を終了する。
【０４０３】
ステップＳＴ０３０２において、送信制御部１１９３は、検出情報を取得したと判断した場合には、取得した検出情報は、画像変化検出情報であるか否かを判断する（ステップＳＴ０３１４）。送信制御部１１９３は、取得した情報が画像変化検出情報であると判断する場合にはステップＳＴ０３１８の処理を、そうで無い場合にはステップＳＴ０３１５の処理を実行する。
【０４０４】
ステップＳＴ０３１４において、送信制御部１１９３は、取得した情報が画像変化検出情報で無いと判断した場合には、取得した情報は音圧量変化検出情報であると判断して、送信部１１２０へ、音圧量が変化した発言を表す音声情報を送信することを表す音声送信情報と受信装置識別情報とを出力する（ステップＳＴ０３１５）。
【０４０５】
次に、送信制御部１１９３は、検出部１１００から変化した音圧量であって、送信を要求した受信装置へ送信する音圧量を取得する（ステップＳＴ０３１６）。その後、送信制御部１１９３は、送信部１１２０へ受信装置識別情報と音圧量とを出力する（ステップＳＴ０３１７）。その後、送信制御部１１９３は、送信制御処理の実行を終了する。
【０４０６】
ステップＳＴ０３１４において、送信制御部１１９３は、取得した情報が画像変化検出情報であると判断した場合には、送信部１１２０へ、画像変化検出情報と受信装置識別情報とを出力する（ステップＳＴ０３１８）。その後、送信制御部１１９３は、送信制御処理の実行を終了する。
【０４０７】
ステップＳＴ０３０１において、送信制御部１１９３は、送信要求を取得したと判断した場合には、受信部１１３０から送信要求を送信した情報受信装置６００１の受信装置識別情報を取得する（ステップＳＴ０３１９）。その後、送信制御部１１９３は、送信制御処理の実行を終了する。
【０４０８】
ここで図１６に戻り、制御部１１１０の構成について引き続き説明を行う。
【０４０９】
検索制御部１１９４は、検索部１０８０、送信部１１２０、及び受信部１１３０に接続している。検索制御部１１９４は、後述する検索制御処理を実行することで、受信部１１３０から取得した情報に基づいて画像情報、音声情報、及び通知情報とを検索するよう検索部１０８０を制御する。
【０４１０】
尚、検索制御部１１９４は、受信部１１３０から検索に用いる情報を取得する度に検索制御処理を実行する。また、検索に用いる情報は、検索に用いる時刻であって、会議の開催された時間に属する時刻を表す情報を含む。更に、検索に用いる情報は、検索に用いる文字列であって、会議で使用された資料画像が有する文字列を表す情報をも含む。
【０４１１】
ここで、検索制御部１１９４が実行する検索制御処理の一例について説明する。
【０４１２】
先ず、検索制御部１１９４は、受信部１１３０から、検索に用いる情報と情報を送信した装置の受信装置識別情報とを取得する。次に、検索制御部１１９４は、取得した情報を検索部１０８０へ出力する。
【０４１３】
その後、検索制御部１１９４は、検索部１０８０から検索された画像情報及び画像情報が表す資料画像の投影区間、資料画像に対する発言を表す音声情報及び発言の行われた発言区間、画像情報の送信を通知したことを表す通知情報及び通知がされた通知区間を取得する。
【０４１４】
次に、検索制御部１１９４は、受信装置識別情報と検索された情報とを送信部１１２０へ出力する。その後、検索制御部１１９４は、検索制御処理の実行を終了する。尚、送信部１１２０は、受信装置識別情報で識別される情報受信装置６００１へ検索された情報を送信する。
【０４１５】
ここで図７に戻り、情報送信装置１０００の構成について引き続き説明を行う。
【０４１６】
送信部１１２０は、例えば、ネットワーク・カードで構成され、通信網１００及び制御部１１１０に接続している。送信部１１２０は、送信処理を実行することで、上記各種の情報を受信装置識別情報で識別される情報受信装置６００１又は６００２へ送信する。
【０４１７】
特に、送信部１１２０は、検出部１１００が検出した変化の生じた資料画像を表す画像情報の送信を表す送信情報を送信した後に、画像情報を送信する。また、送信部１１２０は、検出部１１００が検出した変化の生じた音声を表す音声情報の送信を表す送信情報を送信した後に、音声情報を送信する。
【０４１８】
更に、送信部１１２０は、受信部１１３０が受信した画像情報が表す撮像画像を表示するよう表示装置１９１０を制御部１１１０が制御した後に、撮像画像を表示したことを表す表示情報を送信する。
【０４１９】
また、送信部１１２０は、受信部１１３０が受信した音声情報が表す音声を出力するよう出音装置１９２０を制御部１１１０が制御した後に、音声を出力したことを表す出力情報を送信する。
【０４２０】
受信部１１３０は、例えば、ネットワーク・カードで構成され、通信網１００及び制御部１１１０に接続している。受信部１１３０は、受信処理を実行することで、上記各種の情報を受信する。
【０４２１】
特に、受信部１１３０は、送信部１１２０が送信した画像情報が表す画像を表示したことを表す表示情報を受信する。また、受信部１１３０は、送信部１１２０が送信した音声情報が表す音声を出力したことを表す出力情報を受信する。
【０４２２】
更に、受信部１１３０は、会議室１１で開催された会議において撮像された撮像画像と、撮像画像を表す画像情報を送信したことを表す送信情報とを受信する。また、受信部１１３０は、会議室１１で開催された会議において発言した音声を表す音声情報と、音声情報の送信を表す送信情報とを受信する。
【０４２３】
ここで図１に戻り、情報通信システム１の構成について引き続き説明する。
【０４２４】
画像生成装置２０００は、例えば、パーソナル・コンピュータで構成され、情報送信装置１０００、入力装置２５００、通知装置２９００、及び分配装置３０００に接続している。画像生成装置２０００は、会議で使用する資料画像を生成する。
【０４２５】
ここで図２４を参照して、画像生成装置２０００の構成について説明する。図２６は、画像生成装置２０００の一構成例を表す機能ブロック図である。
【０４２６】
画像生成装置２０００は、ＩＦ部２０１０、記憶部２０２０、画像生成部２０３０、及び制御部２０４０で構成される。ＩＦ部２０１０、画像生成部２０３０、及び制御部２０４０が有する機能は、画像生成装置２０００が実行するソフトウェア制御により実現される。
【０４２７】
画像生成装置２０００がソフトウェア制御を実行するために用いるハードウェア構成は、情報送信装置１０００がソフトウェア制御を実行するために用いるハードウェア構成と、ほぼ同様であるので説明を省略する。
【０４２８】
ＩＦ部２０１０は、情報送信装置１０００及び制御部２０４０に接続する。ＩＦ部２０１０の機能は、情報送信装置１０００が有するＩＦ部１０９０の機能とほぼ同様であるので説明を省略する。
【０４２９】
記憶部２０２０は、例えば、ハードディスク等の外部記憶装置で構成され、画像生成部２０３０に接続する。記憶部２０２０は、会議で使用する資料画像を表す電子ファイルを記憶し、記憶する電子ファイルを画像生成部２０３０によって参照される。
【０４３０】
画像生成部２０３０は、記憶部２０２０及び制御部２０４０に接続する。画像生成部２０３０は、後述する画像生成処理を実行することで、会議で使用する資料画像を生成する。
【０４３１】
ここで、画像生成部２０３０が実行する画像生成処理について説明する。
【０４３２】
先ず、画像生成部２０３０は、制御部２０４０から、資料画像を表す電子ファイルを識別する資料識別情報と、画像の生成を開始するよう命じる画像生成命令を取得する。尚、資料識別情報は、例えば、ディレクトリパスとファイル名とで電子ファイルを識別する情報である。
【０４３３】
次に、画像生成部２０３０は、資料識別情報に基づいて電子ファイルを開く。その後、画像生成部２０３０は、開いた電子ファイルを読み込むことで、電子ファイルが表す複数の資料画像の内で最初の頁に相当する資料画像を生成する。
【０４３４】
その後、画像生成部２０３０は、生成した資料画像を制御部２０４０へ出力する。次に、画像生成部２０３０は、制御部２０４０から生成する画像を変更するよう命じる画像変更命令を取得する。
【０４３５】
その後、画像生成部２０３０は、電子ファイルが表す情報を更に読み込むことで、電子ファイルが表す資料画像の内で次の頁に相当する資料画像を生成する。その後、画像生成部２０３０は、生成した資料画像を制御部２０４０へ出力する。
【０４３６】
次に、画像生成部２０３０は、制御部２０４０から、画像の生成を終了するよう命じる命令を取得する。その後、画像生成部２０３０は、開いた電子ファイルを閉じる。
【０４３７】
制御部２０４０は、ＩＦ部２０１０、画像生成部２０３０、通知装置２９００、及び入力装置２８００に接続する。制御部２０４０は、後述する制御処理を実行することで、画像生成装置２０００を構成する各部を制御する。尚、制御部２０４０は、定周期で制御処理を実行する。
【０４３８】
ここで図２５を参照して、制御部２０４０が実行する制御処理について説明する。図２５は、制御部２０４０が実行する制御処理の一例を表すフローチャートである。
【０４３９】
先ず、制御部２０４０は、入力装置２５００から資料の表示を命じる資料表示信号、又は表示する資料画像を変更するよう命じる画像変更信号を取得したか否か判断する（ステップＳＴ０４０１）。制御部２０４０は、資料表示信号又は画像変更信号を取得したと判断する場合にはステップＳＴ０４０７の処理を実行し、そうで無い場合にはステップＳＴ０４０２の処理を実行する。
【０４４０】
尚、資料表示信号は、例えば、画像生成装置２０００の使用者が入力装置２５００を操作することで表示装置２９１０に表示されたアイコンにマウスカーソルを重ねた後に、入力装置２５００をダブルクリックすることで入力装置２５００が入力する信号である。
【０４４１】
また、画像変更信号は、例えば、画像生成装置２０００の使用者が入力装置２５００が有するページダウン（"Page Down"）又はページアップ（"Page Up"）キーを操作することで入力装置２５００が入力する信号である。
【０４４２】
ステップＳＴ０４０１において、資料表示信号及び画像変更信号のいずれも取得しない判断した場合には、制御部２０４０は、ＩＦ部２０１０を介して情報送信装置１０００から通知停止命令を取得したか否かを判断する（ステップＳＴ０４０２）。制御部２０４０は、通知停止命令を取得したと判断した場合にはステップＳＴ０４０６の処理を、そうで無い場合にはステップＳＴ０４０３の処理を実行する。
【０４４３】
ステップＳＴ０４０２において、制御部２０４０は、通知停止命令を取得しなかったと判断した場合には、ＩＦ部２０１０を介して情報送信装置１０００から通知開始命令を取得したか否かを判断する（ステップＳＴ０４０３）。制御部２０４０は、通知開始命令を取得したと判断する場合はステップＳＴ０４０４の処理を実行し、そうで無い場合には制御処理の実行を終了する。
【０４４４】
ステップＳＴ０４０３において、制御部２０４０は、通知開始命令を取得したと判断する場合には、ＩＦ部２０１０を介して情報送信装置１０００から通知画像を取得する（ステップＳＴ０４０４）。
【０４４５】
その後、制御部２０４０は、表示装置２９１０へ、通知画像を出力することで、通知装置２９００が通知を開始するよう制御する（ステップＳＴ０４０５）。次に、制御部２０４０は、制御処理の実行を終了する。
【０４４６】
ステップＳＴ０４０２において、制御部２０４０は、通知停止命令を取得したと判断した場合には、通知停止命令に係る通知画像の出力を停止することで、
通知停止命令が停止するよう命じる通知を停止するよう通知装置２９００を制御する（ステップＳＴ０４０６）。その後、制御部２０４０は、制御処理の実行を終了する。
【０４４７】
ステップＳＴ０４０１において、制御部２０４０は、入力装置２５００から信号を取得したと判断した場合には、後述する表示制御処理を実行することで、入力装置２５００が入力した信号に基づいて画像生成部２０３０が生成する画像を表示するよう表示装置２９１０を制御する（ステップＳＴ０４０７）。その後、制御部２０４０は、制御処理の実行を終了する。
【０４４８】
ここで図２６を参照して、制御部２０４０が実行する表示制御処理について説明する。図２６は、制御部２０４０が実行する表示制御処理の一例を表すフローチャートである。
【０４４９】
先ず、制御部２０４０は、取得した信号が、資料画像の表示を開始することを命じる資料表示信号であるか否かを判断する（ステップＳＴ０５０１）。制御部２０４０は、資料表示信号を取得したと判断した場合にはステップＳＴ０５０８の処理を、そうで無い場合にはステップＳＴ０５０２の処理を実行する。
【０４５０】
ステップＳＴ０５０１において、制御部２０４０は、取得した信号が資料表示信号でないと判断した場合には、取得した信号が画像変更信号であるか否かを判断する（ステップＳＴ０５０２）。制御部２０４０は、取得した信号が画像変更信号であると判断する場合はステップＳＴ０５０３の処理を、そうで無い場合にはステップＳＴ０５０４の処理を実行する。
【０４５１】
ステップＳＴ０５０２において、制御部２０４０は、画像変更信号でないと判断した場合には、入力装置２５００から資料識別情報を取得する（ステップＳＴ０５０３）。その後、制御部２０４０は、表示制御処理の実行を終了する。
【０４５２】
ステップＳＴ０５０２において、制御部２０４０は、画像変更信号であると判断した場合には、ＩＦ部２０１０を介して情報送信装置１０００へ画像変更情報を出力する（ステップＳＴ０５０４）。次に、画像生成部２０３０へ生成する画像を変更することを命じる画像変更命令を出力する（ステップＳＴ０５０５）。
【０４５３】
次に、制御部２０４０は、画像生成部２０３０から、次頁目に相当する変更後の資料画像を取得する（ステップＳＴ０５０６）。その後、制御部２０４０は、分配装置３０００へ変更後の資料画像を出力する（ステップＳＴ０５０７）。次に、制御部２０４０は、表示制御処理の実行を終了する。
【０４５４】
ステップＳＴ０５０１において、制御部２０４０は、資料表示信号であると判断した場合には、ＩＦ部２０１０を介して情報送信装置１０００へ画像変更情報を出力する（ステップＳＴ０５０８）。次に、画像生成部２０３０へ、資料識別情報と画像生成命令とを出力する（ステップＳＴ０５０９）。
【０４５５】
次に、制御部２０４０は、画像生成部２０３０から、資料識別情報が識別する電子資料が表す資料画像であって、１頁目に相当する資料画像を取得する（ステップＳＴ０５１０）。
【０４５６】
その後、制御部２０４０は、分配装置３０００へ変更後の資料画像を出力する（ステップＳＴ０５１１）。次に、制御部２０４０は、表示制御処理の実行を終了する。
【０４５７】
ここで図１に戻り、情報通信システムの構成について引き続き説明を行う。
【０４５８】
情報受信装置６００１は、例えば、パーソナル・コンピュータで構成され、通信網１００、入力装置６５０１、撮像装置６６０１、集音装置６７０１、及び通知装置６９０１に接続している。情報受信装置６００１は、情報送信装置１０００から、各種情報を受信する。
【０４５９】
ここで図２７を参照して、情報受信装置６００１の構成について説明する。図２７は、情報受信装置６００１の一構成例を表す機能ブロック図である。
【０４６０】
情報受信装置６００１は、画像取得部６０１１、画像処理部６０２１、Ａ／Ｄ変換部６０４１、音声処理部６０５１、検出部６１０１、記憶部６０７１、制御部６１１１、送信部６１２１、及び受信部６１３１で構成される。
【０４６１】
画像取得部６０１１、画像処理部６０２１、時刻管理部６０３１、Ａ／Ｄ変換部６０４１、音声処理部６０５１、記憶部６０７１、検出部６１０１、制御部６１１１、送信部６１２１、及び受信部６１３１が有する機能は、情報受信装置６００１が実行するソフトウェア制御により実現される。
【０４６２】
尚、情報受信装置６００１が、ソフトウェア制御を実行するために用いる情報受信装置６００１のハードウェア構成は、情報送信装置１０００が、ソフトウェア制御を実行するために用いるハードウェア構成とほぼ同様なので、説明を省略する。
【０４６３】
また、画像取得部６０１１、画像処理部６０２１、時刻管理部６０３１、Ａ／Ｄ変換部６０４１、音声処理部６０５１、記憶部６０７１、検出部６１０１、制御部６１１１、送信部６１２１、及び受信部６１３１の接続及び機能は、図７を参照して説明した情報送信装置１０００を構成する画像取得部１０１０、画像処理部１０２０、時刻管理部１０３０、Ａ／Ｄ変換部１０４０、音声処理部１０５０、記憶部１０７０、検出部１１００、制御部１１１０、送信部１１２０、及び受信部１１３０の接続及び機能とほぼ同様であるので、以下主に相違点について説明する。
【０４６４】
画像取得部６０１１は、撮像装置６６０１及び画像処理部６０２１に接続する。画像取得部６０１１は、会議室１１で開催される会議の様子を撮像した撮像画像を表す画像情報を取得する。
【０４６５】
画像処理部６０２１は、画像取得部６０１１、時刻管理部６０３１、検出部６１０１、及び制御部６１１１に接続している。
【０４６６】
音声処理部６０５１は、Ａ／Ｄ変換部６０４１、時刻管理部６０３１、検出部６１０１、及び制御部６１１１に接続している。
【０４６７】
記憶部６０７１は、制御部６１１１に接続する。記憶部６０７１は、表１から４に示した情報を記憶しないが、通知画像を記憶する。
【０４６８】
制御部６１１１について説明する前に、送信部６１２１及び受信部６１３１について説明する。
【０４６９】
送信部６１２１は、上記各種の情報を送信する。特に、送信部６１２１は、受信部６１３１が受信した画像情報が表す資料画像を表示するよう表示装置６９１１を制御部６１１１が制御した後に、資料画像を表示したことを表す表示情報を送信する。
【０４７０】
また、送信部６１２１は、受信部６１３１が受信した音声情報が表す音声を出力するよう出音装置６９２１を制御部６１１１が制御した後に、音声を出力したことを表す出力情報を送信する。
【０４７１】
更に、送信部６１２１は、検出部６１０１が検出した変化の生じた撮像画像を表す画像情報の送信を表す送信情報を送信した後に、画像情報を送信する。また、送信部６１２１は、検出部６１０１が検出した変化の生じた音声を表す音声情報の送信を表す送信情報を送信した後に、音声情報を送信する。
【０４７２】
受信部６１３１は、上記各種の情報を送信する。特に、受信部６１３１は、会議において使用された資料画像と、資料画像を表す画像情報を送信したことを表す送信情報とを受信する。また、受信部６１３１は、資料画像について発言した音声を表す音声情報と、音声情報の送信を表す送信情報とを受信する。
【０４７３】
更に、受信部６１３１は、送信部６１２１が送信した画像情報が表す画像を表示したことを表す表示情報を受信する。また、受信部６１３１は、送信部６１２１が送信した音声情報が表す音声を出力したことを表す出力情報を受信する。
【０４７４】
制御部６１１１は、受信部６１３１が画像情報の送信を表す送信情報を受信した後に画像情報が表す資料画像の受信を通知し始めるよう通知装置６９０１を制御し、かつ資料画像を表示するよう表示装置６９１１を制御した後に通知を終了するよう通知装置６９０１を制御する。
【０４７５】
また、制御部６１１１は、受信部６１３１が音声情報の送信を表す送信情報を受信した後であり、かつ受信部６１３１が受信した音声情報が表す音声を出力するよう出音装置６９２１を制御する前に、音声情報の受信を通知するよう通知装置６９０１を制御する。
【０４７６】
更に、制御部６１１１は、受信部６１３１が送信情報を受信した後に、音声情報の受信と共に、音声情報が表す音声に関する変化を通知する通知画像を表示するよう通知装置６９０１を制御する。
【０４７７】
また、制御部６１１１は、検出部６１０１が撮像画像の変化を検出した後に画像情報の送信を通知し始めるよう通知装置６９０１を制御し、かつ後述する受信部６１３１が表示情報を受信した後に通知を終了するよう通知装置６９０１を制御する。
【０４７８】
本実施例において、制御部６１１１は、検出部６１０１が変化を検出した資料画像を表す画像情報の送信を通知する通知画像を表示するよう通知装置６９００を制御する構成について説明するが、これに限定される訳ではない。例えば、制御部６１１１は、画像情報の送信を通知する通知音声を出力するよう通知装置６９００を制御する構成を採用できる。
【０４７９】
ここで図２８を参照して、制御部６１１１の構成について説明する。図２８は、情報受信装置６００１が備える制御部６１１１の一構成例を表す機能ブロック図である。
【０４８０】
制御部６１１１は、通知制御部６１９１、受信制御部６１９２、及び送信制御部６１９３で構成される。制御部６１１１は、検索制御部を有しない点で情報送信装置１０００を構成する制御部１１１０と異なる。
【０４８１】
通知制御部６１９１が実行する通知制御処理は、情報送信装置１０００を構成する通知制御部１１９１が実行する通知制御処理とほぼ同様である。しかし、通知制御部１１９１が実行する通知制御処理は通知装置１９００及び２９００を制御する処理であるが、通知制御部６１９１が実行する通知制御処理は通知装置６９００のみを制御する点で異なる。
【０４８２】
本実施例において、情報送信装置１０００が有する制御部１１１０は、通知画像又は通知音声を表示又は出力するよう通知装置１９００又は２９００を制御することで、画像情報の送信又は受信を通知するとして説明したがこれに限定される訳ではない。
【０４８３】
例えば、制御部１１１０は、画像情報の送信又は受信中には、画像生成装置２０００に対する操作を受け付けないよう画像生成装置２０００を制御することで、画像情報の送信又は受信を通知する構成を採用できる。
【０４８４】
また本実施例において、情報送信装置１０００が有する制御部１１１０は、画像情報を送信した全ての情報受信装置から表示情報を受信した場合に限り、送信の通知を停止するよう通知装置２９００を制御する構成を採用できる。また、制御部１１１０は、表示情報を受け取っていない（つまり、送信した画像情報が表す資料画像を表示していない）情報受信装置の数を表す文字、図形、記号、及び画像のいずれか１つ以上、若しくは音声を表示又は出力するよう通知装置２９００を制御する構成を採用できる。
【０４８５】
本実施例においては、検出部１１００が検出手段に相当し、制御部１１１０が情報送信装置の備える制御手段に相当し、送信部１１２０が情報送信装置の備える送信手段に相当し、受信部１１３０が情報送信装置の備える受信手段に相当し、制御部６１１１が情報受信装置の備える制御手段に相当し、送信部６１２１が情報受信装置の備える送信手段に相当し、受信部６１３１が情報受信装置の備える受信手段に相当する。
【０４８６】
情報送信装置１０００、並びに情報受信装置６００１及び６００２は、演算部がＲＯＭ及びＲＡＭの少なくともひとつに格納されたプログラムを実行することによって実現される。また、このプログラムは、磁気ディスクや光ディスク、半導体メモリ、その他の記録媒体に格納して配布したり、ネットワークを介して配信したりすることにより提供できる。
【０４８７】
以上本発明の好ましい実施例について詳述したが、本発明は係る特定の実施例に限定されるものではなく、特許請求の範囲に記載された本発明の要旨の範囲内において、種々の変形、変更が可能である。
【図面の簡単な説明】
【０４８８】
【図１】本発明の情報送信装置及び情報受信装置を備える情報通信システムの一実施形態を示す構成図である。
【図２】通知装置の一構成例を表す図である。
【図３】情報送信装置に接続する表示装置が表示する表示画面の一例を表す図である。
【図４】情報送信装置に接続する表示装置が表示する表示画面の他例を表す図である。
【図５】画像生成装置に接続する表示装置が表示する表示画面の一例を表す図である。
【図６】情報受信装置に接続する表示装置が表示する表示画面の一例を表す図である。
【図７】情報送信装置の一構成例を表す機能ブロック図である。
【図８】ソフトウェア制御を実行するために用いる情報送信装置のハードウェア構成の一例を表す図である。
【図９】画像処理部の一構成例を表す機能ブロック図である。
【図１０】音声処理部の一構成例を表す機能ブロック図である。
【図１１】検出部が実行する検出処理の一例を表すフローチャートの一部である。
【図１２】検出部が実行する検出処理の一例を表すフローチャートの他部である。
【図１３】情報送信装置の有する制御部が実行する画像情報の送信を通知する処理の一例を概説するための図である。
【図１４】情報送信装置の有する制御部が実行する画像情報の受信を通知する処理の一例を概説するための図である。
【図１５】情報送信装置の有する制御部が実行する音声情報の受信を通知する処理について概説するための図である。
【図１６】情報送信装置が有する制御部の一構成例を表す機能ブロック図である。
【図１７】通知制御部が実行する通知制御処理の一例を表すフローチャートの一部である。
【図１８】通知制御部が実行する通知制御処理の一例を表すフローチャートの他部である。
【図１９】通知制御部が実行する通知制御処理の一例を表すフローチャートの他部である。
【図２０】受信制御部が実行する受信制御処理の一例を表すフローチャートである。
【図２１】送信制御部が実行する送信制御処理の一例を表すフローチャートの一部である。
【図２２】送信制御部が実行する送信制御処理の一例を表すフローチャートの他部である。
【図２３】送信制御部が実行する送信制御処理の一例を表すフローチャートの他部である。
【図２４】画像生成装置の一構成例を表す機能ブロック図である。
【図２５】画像生成装置の有する制御部が実行する制御処理の一例を表すフローチャートである。
【図２６】画像生成装置の有する制御部が実行する表示制御処理の一例を表すフローチャートである。
【図２７】情報受信装置の一構成例を表す機能ブロック図である。
【図２８】情報受信装置が有する制御部の一構成例を表す機能ブロック図である。
【符号の説明】
【０４８９】
１…情報通信システム      １０，１１，１２…会議室  
１００…通信網            １０００…情報送信装置    
１００１…演算部          １００２…ＲＯＭ          
１００３…ＲＡＭ          １００４…外部記憶部      
１００５…バス            １０１０…画像取得部      
１０２０…画像処理部      １０２１…新規画像検出部  
１０２２…判定部          １０２３…画像変換部      
１０２４…テキスト抽出部  １０３０…時刻管理部      
１０４０…Ａ／Ｄ変換部    １０５０…音声処理部      
１０５１…発言検出部      １０５２…発言者識別部    
１０５３…交代検出部      １０５４…音圧量検出部    
１０５５…発言検出部      １０６０…登録部          
１０７０…記憶部          １０８０…検索部          
１０９０…ＩＦ部          １１００…検出部（検出手段）
１１１０…制御部（制御手段）
１１２０…送信部（送信手段）
１１３０…受信部（受信手段）
１１９１…通知制御部      １１９２…受信制御部      
１１９３…送信制御部      １１９４…検索制御部      
１５００…入力装置        １７０１〜３…集音装置    
１９００…通知装置        １９１０…表示装置        
１９２０…出音装置        ２０００…画像生成装置    
２０１０…ＩＦ部          ２０２０…記憶部          
２０３０…画像生成部      ２０４０…制御部          
２５００…入力装置        ２９００…通知装置        
２９１０…表示装置        ２９２０…出音装置        
３０００…分配装置        ４０００…投影装置        
５０００…映写幕          ６００１，２…情報受信装置
６０１１…画像取得部      ６０２１…画像処理部      
６０３１…時刻管理部      ６０４１…Ａ／Ｄ変換部    
６０５１…音声処理部      ６０５１…音声処理部      
６０７１…記憶部          ６０９１…ＩＦ部          
６１０１…検出部          ６１１１…制御部（制御手段）
６１２１…送信部（送信手段）
６１３１…受信部（受信手段）
６１９１…通知制御部      ６１９２…受信制御部      
６１９３…送信制御部      ６５０１…入力装置        
６５０２…入力装置        ６６０１，２…撮像装置    
６７０１，２…集音装置    ６９０１，２…通知装置    
６９１１…表示装置        ６９２１…出音装置        
ＡＲ…受信装置側          ＡＳ…送信装置側          
ＦＤ１１，１２，２１…表示画面
ＩＮＡＯ…出力通知時間区間
ＩＮＡＲ…受信通知時間区間
ＩＮＰ…通知時間区間      ＰＡ…発話量表示部        
ＰＡＯＡ…出力発話量通知画像
ＰＡＲＡ…受信発話量通知画像
ＰＡＲＰ…画像受信通知画像
ＰＡＳＰ…画像送信通知画像
ＰＩ…撮像表示部          ＰＳ…スライド表示部      
ＰＴ…発言者表示部        
ＰＴＯＰ…出力発言者通知部
ＰＴＯＴ…発言出力通知画像
ＰＴＲＰ…受信発言者通知部
ＰＴＲＴ…発言受信通知画像
【図１】
2009152808.tif 000007
【図２】
2009152808.tif 000008
【図３】
2009152808.tif 000009
【図４】
2009152808.tif 000010
【図５】
2009152808.tif 000011
【図６】
2009152808.tif 000012
【図７】
2009152808.tif 000013
【図８】
2009152808.tif 000014
【図９】
2009152808.tif 000015
【図１０】
2009152808.tif 000016
【図１１】
2009152808.tif 000017
【図１２】
2009152808.tif 000018
【図１３】
2009152808.tif 000019
【図１４】
2009152808.tif 000020
【図１５】
2009152808.tif 000021
【図１６】
2009152808.tif 000022
【図１７】
2009152808.tif 000023
【図１８】
2009152808.tif 000024
【図１９】
2009152808.tif 000025
【図２０】
2009152808.tif 000026
【図２１】
2009152808.tif 000027
【図２２】
2009152808.tif 000028
【図２３】
2009152808.tif 000029
【図２４】
2009152808.tif 000030
【図２５】
2009152808.tif 000031
【図２６】
2009152808.tif 000032
【図２７】
2009152808.tif 000033
【図２８】
2009152808.tif 000034