(57)【要約】【課題】プレゼンテーションデータで会議時に注目された領域を容易に特定可能にする。【解決手段】プレゼンテーション時に表示されるプレゼンテーションデータを入力するプレゼンテーションデータ入力部と、表示されたプレゼンテーションデータの画面上の座標領域に対して指示された指示領域を検出する指示領域検出部と、検出された指示領域に基づいて、プレゼンテーションデータにおける注目領域を判定する注目領域判定部と、プレゼンテーションデータにおいて、プレゼンテーション時に注目された領域と判定された注目領域を強調表示する映像表示処理部と、を備える。【選択図】        図２
2008084110.tif 000002
【特許請求の範囲】
【請求項１】
プレゼンテーション情報を表示部に表示処理する表示処理部と、
利用者から前記表示部への指示を受け付ける指示入力受付部と、
表示された前記プレゼンテーション情報を含む所定の座標領域に対して、指示された指示領域を検出する指示領域検出部と、
検出された前記指示領域及び注目領域判定ルールに基づいて、前記プレゼンテーション情報に対する注目領域を判定する注目領域判定部と、を備え、
前記表示処理部は、前記プレゼンテーション情報に対して、判定された前記注目領域を強調表示処理することを特徴とする情報表示装置。
【請求項２】
前記表示処理部は、プレゼンテーションが行われた時間の経過を示す時間軸情報を表示し、該時間軸情報において、前記プレゼンテーション情報が表示された時刻と対応付けて、判定された前記注目領域を強調表示処理すること、
を特徴とする請求項１に記載の情報表示装置。
【請求項３】
前記注目領域判定部は、前記プレゼンテーション情報の所定の単位毎に区切られた表示領域から、検出された前記指示領域を含む該表示領域を特定し、特定された該表示領域を前記注目領域として判定すること、
を特徴とする請求項１又は２に記載の情報表示装置。
【請求項４】
前記注目領域判定部は、前記プレゼンテーション情報に含まれた文書情報を行単位で区切られた行領域から、検出された指示領域を含む該行領域を特定し、特定された該行領域を前記注目領域として判定すること、
を特徴とする請求項３に記載の情報表示装置。
【請求項５】
前記前記注目領域判定ルールは、前記指示領域に対する条件と、該条件を満足した場合の前記注目領域の範囲とを対応付けて保持し、
注目領域判定部は、検出された前記指示領域が、前記注目領域判定ルールに格納された前記条件を満足した場合に、当該条件と注目領域判定ルールにおいて対応付けられた前記注目領域の範囲を、前記注目領域として判定すること、
を特徴とする請求項１乃至４のいずれか一つに記載の情報表示装置。
【請求項６】
利用者の発話による音声情報を取得する音声取得部と、をさらに備え、
前記指示領域検出部は、前記音声取得部により取得された前記音声情報に基づいて、前記指示領域を検出すること、
を特徴とする請求項１乃至５のいずれか一つに記載の情報表示装置。
【請求項７】
前記指示領域検出部は、前記音声取得部により取得された前記音声情報に含まれた発話内容と前記プレゼンテーション情報として表示された文字列が一致した場合に、該文字列を含む領域を、前記指示領域として検出すること、
を特徴とする請求項６に記載の情報表示装置。
【請求項８】
前記表示処理部は、前記注目領域に含まれる文字又は図形を拡大して表示処理を行うこと、
を特徴とする請求項１乃至７のいずれか一つに記載の情報表示装置。
【請求項９】
プレゼンテーション情報を表示部に表示処理する表示処理ステップと、
利用者から前記表示部への指示を受け付ける指示入力受付部ステップと、
表示された前記プレゼンテーション情報を含む所定の座標領域に対して、指示された指示領域を検出する指示領域検出ステップと、
検出された前記指示領域及び注目領域判定ルールに基づいて、前記プレゼンテーション情報に対する注目領域を判定する注目領域判定ステップと、
前記プレゼンテーション情報に対して、判定された前記注目領域を強調表示処理する強調表示処理ステップと、
を有することを特徴とする情報表示方法。
【請求項１０】
プレゼンテーション情報を表示する情報表示プログラムであって、
プレゼンテーション情報を表示部に表示処理する表示処理ステップと、
利用者から前記表示部への指示を受け付ける指示入力受付部ステップと、
表示された前記プレゼンテーション情報を含む所定の座標領域に対して、指示された指示領域を検出する指示領域検出ステップと、
検出された前記指示領域及び注目領域判定ルールに基づいて、前記プレゼンテーション情報に対する注目領域を判定する注目領域判定ステップと、
前記プレゼンテーション情報に対して、判定された前記注目領域を強調表示処理する強調表示処理ステップと、
をコンピュータに実行させる情報表示プログラム。
【発明の詳細な説明】
【技術分野】
【０００１】
この発明は、プレゼンテーションとして情報表示装置、情報表示方法及び情報表示プログラムに関するものである。
【背景技術】
【０００２】
従来、会議や授業などにおいて、ディスプレイ機器、プロジェクター又は電子ホワイトボードなどが利用されている。これらはプレゼンテーションデータ等を表示する。そして、表示されたプレゼンテーションデータを利用して説明や議論が行われる。また、電子ホワイトボードの場合、ペンデバイス等を用いて指示された位置を検出することで、プレゼンテーションデータに対して書き込みも行える。
【０００３】
そして、このような機器が用いられた会議や授業などにおいて、以前参照された資料や書き込んだ内容を再び表示したいという状況がある。このような場合、利用者がＨＤＤ(Hard Disk Drive)等の資料等が保存されている領域に対して検索を行い、検出された資料等を表示する。または、資料の所有者が持つＰＣ(Personal Computer)とディスプレイ機器を再び接続し直して、表示する。また、会議等で書き込んだ内容等を保存していない場合、書き込み内容がすでに失われているので、表示することができない。このように、以前提示されていた内容を再び提示するためには大きな人的、時間的コストを必要とする。
【０００４】
そこで、会議の重要な内容の管理または活用するための手段が提案されている。例えば、会議または授業の様子を全て記録し、検索するためのユーザインターフェースを提供することで、記録された会議データまたは授業データを再び提示する技術なども提案されている。
【０００５】
このような記録された会議データまたは授業データを後から閲覧して、議事録を作成するインターフェースとしては、例えば特許文献１に記載された技術がある。この特許文献１においては、タイムラインと、時間毎に表示された画面を見出し画像として対応付けて表示することで、利用者は議事録を容易に作成することができる。
【０００６】
【特許文献１】特許第３１８５５０５号公報
【発明の開示】
【発明が解決しようとする課題】
【０００７】
しかしながら、特許文献１に記載された技術では、利用者が所望する画面の検索した後に表示する場合、大量の情報から所望する表示画面を検出できたとしても、会議時にどの領域が注目すべきポイントとされたのか、即座に認識することができないという問題がある。
【０００８】
本発明は、上記に鑑みてなされたものであって、プレゼンテーション用のデータが表示されている時に示された注目領域を容易に認識できる情報表示装置、情報表示方法及び情報表示プログラムを提供することを目的とする。
【課題を解決するための手段】
【０００９】
上述した課題を解決し、目的を達成するために、本発明は、情報表示装置であって、プレゼンテーション情報を表示部に表示処理する表示処理部と、利用者から前記表示部への指示を受け付ける指示入力受付部と、表示された前記プレゼンテーション情報を含む所定の座標領域に対して、指示された指示領域を検出する指示領域検出部と、検出された前記指示領域および注目領域判定ルールに基づいて、前記プレゼンテーション情報に対する注目領域を判定する注目領域判定部と、を備え、前記表示処理部は、前記プレゼンテーション情報に対して、判定された前記注目領域を強調表示処理することを特徴とする。
【００１０】
また、本発明は、情報表示方法であって、プレゼンテーション情報を表示部に表示処理する表示処理ステップと、利用者から前記表示部への指示を受け付ける指示入力受付部ステップと、表示された前記プレゼンテーション情報を含む所定の座標領域に対して、指示された指示領域を検出する指示領域検出ステップと、検出された前記指示領域および注目領域判定ルールに基づいて、前記プレゼンテーション情報に対する注目領域を判定する注目領域判定ステップと、前記プレゼンテーション情報に対して、判定された前記注目領域を強調表示処理する強調表示処理ステップと、を有することを特徴とする。
【００１１】
また、本発明は、プレゼンテーション情報を表示する情報表示プログラムであって、プレゼンテーション情報を表示部に表示処理する表示処理ステップと、利用者から前記表示部への指示を受け付ける指示入力受付部ステップと、表示された前記プレゼンテーション情報を含む所定の座標領域に対して、指示された指示領域を検出する指示領域検出ステップと、検出された前記指示領域および注目領域判定ルールに基づいて、前記プレゼンテーション情報に対する注目領域を判定する注目領域判定ステップと、前記プレゼンテーション情報に対して、判定された前記注目領域を強調表示処理する強調表示処理ステップと、をコンピュータに実行させることを特徴とする。
【発明の効果】
【００１２】
本発明によれば、利用者は表示処理時に注目された注目領域を、後で表示する際に強調表示できるので、表示処理時の注目された注目領域を容易に特定することができるという効果を奏する。
【発明を実施するための最良の形態】
【００１３】
以下に添付図面を参照して、この発明にかかる情報表示装置、情報表示方法及び情報表示プログラムの最良な実施の形態を詳細に説明する。後述する実施形態においては、情報表示装置をミーティングサーバに適用した例について説明する。なお、情報表示装置は、ミーティングサーバ以外の様々な装置に対して適用することができる。
【００１４】
（第１の実施の形態）
図１は、本実施の形態に係る会議支援システムを示す概要図である。図１に示す会議支援システムは、ホワイトボード１０３と、ミーティングサーバ１００と、プレゼンテーションデータが蓄積された資料ストレージ１０１と、会議ログストレージ１０２と、参加者やプレゼンテーション用画面等を撮影するカメラ１０４と、表示された画面に対してメモ書きや指示を行うためのペンデバイス１０５と、参加者の発言を記録するマイク１０６ａ〜ｎとで構成されている。
【００１５】
また、プレゼンテーションデータとは、会議や授業などの複数に行われる会合時に、ホワイトボード又はモニタに表示されるデータとする。このようなプレゼンテーションには、プレゼンテーション用に整形されたデータのみならず、報告書等の文書ファイル、表計算アプリケーションで生成されたデータや動画データなど、会議や授業で表示される全ての資料を含むものとする。
【００１６】
ホワイトボード１０３は、プレゼンテーションデータの表示、利用者により入力されたメモ書きの表示、又は会議時の情報として格納された見出し情報等を表示する。また、ホワイトボード１０３上には、会議等の経過を表したタイムラインインターフェースが表示されている。このタイムラインインターフェース上に備えられたスライダを利用者が操作することで、過去に記録された情報を、当該ホワイトボード１０３上に呼び出すことができる。なお、この過去に記録された情報は、後述する会議ログストレージ１０２に蓄積されている。
【００１７】
ミーティングサーバ１００は、PowerPoint(登録商標)等の会議で用いるプレゼンテーションデータをホワイトボード１０３に表示処理、又は利用者から受け付けられたプレゼンテーションデータの編集処理などを行う。
【００１８】
資料ストレージ１０１は、プレゼンテーションデータが蓄積されている。
【００１９】
会議ログストレージ１０２は、会議時に利用者により表示又は編集されたプレゼンテーションデータを記録する。また、会議ログストレージ１０２は、ホワイトボード１０３に表示された画面を切り替えられた順序を特定可能に記録する。また、会議ログストレージ１０２は、ペンデバイス１０５等から入力された情報が変換された特徴量を、所定の時間帯を示した時間情報と対応付けて格納している。
【００２０】
カメラ１０４は、参加者やプレゼンテーション用画面等を撮影する。ペンデバイス１０５は、利用者がプレゼンテーションデータを表示した画面に対してメモ書きや指示を行うために使用される。マイク１０６ａ〜ｎは、参加者の発言を記録する。
【００２１】
本実施の形態にかかる会議支援システムは、ペン又はマウス等による会議中の書き込み、指示動作などの特徴量を記録し、記録された特徴量から会議の場面毎の注目領域を算出し、算出された注目領域を示す見出し情報を生成している。そして、このような処理を行う構成を備えたことで、過去の会議中に注目された領域を特定できると共に、注目内容から任意の情報を容易に取り出すことができる。なお、具体的な処理については後述する。
【００２２】
図２は、第１の実施の形態にかかるミーティングサーバ１００と会議ログストレージ１０２の構成を示すブロック図である。
【００２３】
また、図２に示す会議ログストレージ１０２は、プレゼンテーションデータ格納部２５１と、外部データ格納部２５２とを備える。
【００２４】
外部データ格納部２５２は、ペンデバイス１０５、マウス２３１、カメラ１０４及びマイク１０６ａ〜ｎから入力された外部データを記録する。また、外部データ格納部２５２は、プレゼンテーションデータ提示中に外部データの特徴量を記録する。外部データの特徴量は、外部データ毎に生成される。そして、外部データことに異なる特徴量別に外部データ格納部２５２に記録される。
【００２５】
図３は、外部データ格納部２５２に記録される特徴量の種類の例を示した説明図である。ミーティングサーバ１００のデータ制御部２０３が、図３に示した特徴量を、接続された機器や表示されたプレゼンテーションデータ毎に抽出する。その後、データ制御部２０３は、抽出された特徴量を外部データが入力された時間と対応付けて、外部データ格納部２５２に記録する。また、特徴量が、外部データに関する属性を保持している場合、当該属性も同様に対応付けて記録される。次に抽出される特徴量及び特徴量が持つ属性の例を示す。
【００２６】
図３に示すように、ペンデバイス１０５より入力されたストローク又は文字が、ペンの特徴量として抽出される。ストロークとは、ペンデバイス１０５の入力から認識された丸や下線などの特定の図形等の記述とする。また、データ制御部２０３は、ストロークに対して、その形の種類や図形がホワイトボード上のどの範囲をカバーしているかを表す範囲を属性として抽出する。そして、ストローク（属性も含む、以下も同様とする）と時間とを対応付けて外部データ格納部２５２に記録する。
【００２７】
また、データ制御部２０３が、ペンデバイス１０５より入力されたデータに対して文字認識を行う。そして、データ制御部２０３は、ペンデバイス１０５で記述された文字又は文字列情報を、時間と対応付けて記録する。
【００２８】
また、マイク１０６ａ〜ｎより入力された音声データから認識された発言内容や発話を行った発言者が、マイクの特徴量として抽出される。データ制御部２０３は、マイク１０６ａ〜ｎより入力された音声データに対して音声認識を行い、音声認識された発言内容の文字列を抽出する。また、マイク１０６ａ〜ｎは、各参加者の前に設置されている。このため、データ制御部２０３は、入力されたマイクの音量により、発言者を特定することができる。この特定された発言者を、発話の属性とする。そして、データ制御部２０３は、この発言と、発言が行われた時間とを対応付けて記録する。
【００２９】
また、カメラ１０４等から入力された映像データから会議の参加者が行ったジェスチャーが、カメラの特徴量として抽出される。データ制御部２０３は、カメラ１０４から入力された映像データに対して、画像認識を行うことで、参加者が行ったジェスチャーを抽出することができる。ジェスチャーは、参加者が行った動作に関する情報とし、例えば参加者が行った動作の種類や、参加者が指し示したホワイトボード１０３の指示範囲等が含まれる。そして、データ制御部２０３は、抽出されたジェスチャーを、時間と対応付けて記録する。
【００３０】
また、プレゼンテーションデータに対する操作より、表示されたプレゼンテーションデータの表示領域又はスライドが、プレゼンテーションデータの特徴量として抽出される。この表示領域は、当該プレゼンテーションデータの特定部分を表示するためのスクロールやズーム動作から判別され、特徴量として抽出される。なお、スクロールやズームを表示領域の属性とする。また、スライドは、プレゼンテーションデータとして表示された内容を示し、当該プレゼンテーションデータから特徴量として抽出される。また、スライドの属性としてタイトルや、全スライド中の何ページ目かという情報も抽出される。
【００３１】
また、ペンデバイス１０５やマウス２３１等でホワイトボード１０３に対して指示されたポイント（範囲）が、ホワイトボード１０３の特徴量として抽出される。また、ホワイトボード１０３の属性として、ポインタ機能を用いてポイントされた範囲も抽出される。
【００３２】
また、ホワイトボード１０３に対して利用者がタイムラインを操作して過去のプレゼンテーションデータとして表示された見出し情報が、タイムラインの特徴量として抽出される。このタイムラインにおける見出し情報は、表示された映像も抽出される。また、見出し情報の属性として、当該見出し情報を表示するときにタイムラインに対する操作を行った操作者の情報も抽出される。
【００３３】
これら抽出された特徴量は、会議時にプレゼンテーションデータ等のどの部分が、参加者により注目されたのか判別するために用いられる。なお、判別方法については後述する。
【００３４】
プレゼンテーションデータ格納部２５１は、プレゼンテーションとして用いられたプレゼンテーションデータの映像及びプレゼンテーションデータのファイル属性や参照先などの情報を記録する。また、プレゼンテーションデータ格納部２５１は、会議中にプレゼンテーションデータに対して編集等が行われた場合、この編集前及び編集後のプレゼンテーションデータについても記録する。
【００３５】
また、プレゼンテーションデータ格納部２５１は、会議中において発生したイベントを、イベント管理テーブルとして記憶する。また、イベントの有無は、上述した特徴量により判断する。
【００３６】
図４は、プレゼンテーションデータ格納部２５１が保持するイベント管理テーブルのデータ構造の例を示した図である。図４に示すように、時刻（タイムスタンプ）と、特徴量の種類と、内容と、属性とを対応付けて保持している。また、時刻と、特徴量と、属性とは、上述した処理により抽出される。また、内容は、抽出された特徴量の種類からデータ制御部２０３が判断する。データ制御部２０３は、このようなイベント管理テーブルに対して、抽出された特徴量に応じて、レコードを追加する処理を行う。このイベント管理テーブルは、見出し情報を含むタイムラインインターフェースを実現するときに使用される。なお、タイムラインインターフェースを実現するときの処理については後述する。
【００３７】
図２に戻り、ミーティングサーバ１００は、外部データ入力部２０１と、プレゼンテーションデータ入力部２０２と、データ制御部２０３と、映像表示処理部２０４と、見出し情報表示処理部２０５と、指示領域検出部２０６と、注目領域判定部２０７と、見出し情報生成部２０８と、注目領域関連生成部２０９と、注目領域格納部２１０と、見出し情報格納部２１１とを備える。
【００３８】
外部データ入力部２０１は、操作入力受付部２２１と、音声取得部２２２とを備え、会議中に接続されたペンデバイス１０５、マウス２３１、カメラ１０４及びマイク１０６ａ〜ｎから入力されたデータを受け付ける。これらデバイスから入力されたペン入力や音声情報なども、映像投影データと共に後述する外部データ格納部２５２に記録する。
【００３９】
操作入力受付部２２１は、ペンデバイス１０５又はマウス２３１により指示された操作情報を受け付ける。また、操作入力受付部２２１は、換言すれば指示入力受付部に相当する。これにより、プレゼンテーションデータの操作や、プレゼンテーションデータに対するメモ書きを行うことができる。また、プレゼンテーションデータの操作としては、例えばプレゼンテーションデータに対する拡大縮小操作やスクロール操作など、あらゆる操作を含むものとする。
【００４０】
音声取得部２２２は、マイク１０６ａ〜ｎから入力された音声情報を取得する。このように取得した音声情報は会議のデータとして記録するほか、指示領域の検出等にも用いられる。なお、詳細については後述する。
【００４１】
プレゼンテーションデータ入力部２０２は、ホワイトボード１０３に表示するために使用されるプレゼンテーションデータを入力する。このプレゼンテーションデータは、例えば資料ストレージ１０１や、利用者のＰＣ等から入力される。また、入力されるプレゼンテーションデータは、どのような形式であっても良く、例えばファイルや、映像信号であってもよい。
【００４２】
データ制御部２０３は、ミーティングサーバ１００全体を制御する。また、データ制御部２０３は、入力されたプレゼンテーションデータ及び外部データを制御する。また、データ制御部２０３は、プレゼンテーションデータ入力部２０２から入力されたプレゼンテーションデータと、外部データ入力部２０１から入力されたデータとを、時間情報に基づいて統合して管理する。
【００４３】
例えば、データ制御部２０３は、入力されたデータの統合管理として、入力された外部データから特徴量を抽出し、時刻等と対応付けてプレゼンテーションデータ格納部２５１に格納する。また、データ制御部２０３は、上述したように特徴量より発生したと判断されたイベント等もプレゼンテーションデータ格納部２５１に格納して管理する。
【００４４】
また、データ制御部２０３は、入力されたプレゼンテーションデータと、利用者による操作等を含む外部データとから、映像表示処理部２０４に対して、表示すべき映像データを出力する。また、データ制御部２０３は、後述する見出し情報格納部２１１から見出し情報を読み込み、タイムラインとあわせてホワイトボード１０３上に見出し情報を表示する機能を提供する。
【００４５】
映像表示処理部２０４は、プレゼンテーションデータ等を、ホワイトボード１０３に表示するための処理を行う。また、映像表示処理部２０４は、ホワイトボード１０３上に、タイムラインＵＩ(User Interface)を表示する。また、映像表示処理部２０４は、データ制御部２０３から見出し情報が入力された場合に、タイムライン上の時刻に対応付けて見出し情報を表示する。
【００４６】
図５−１は、映像表示処理部２０４によりホワイトボード１０３に表示された画面例を示した図である。本図に示すように、タイムラインにより表示された時間に対応付けて見出し画像が表示されている。このタイムラインにおいて任意の時間毎に区切られたフレームは、図４で示したイベント毎に区切られた時間帯とする。
【００４７】
また、タイムライン上に表示される見出し画面は、全て表示するのではなく所定の条件を満たした画面のみ表示する。これにより、利用者は、見出し画面の確認が容易となる。また、見出し画面を表示するための条件は、どのような条件でも良いが、例えば、参加者により注目された領域を含むプレゼンテーションデータを表示することにしても良い。他の例としては、フレーム毎に特徴量と属性に基づいて評価値を算出し、この評価値が所定の閾値を超えている場合、これら連続する複数のフレームを一つのまとまりとして扱い、一つのまとまり毎に一つの見出し画面を表示してもよい。
【００４８】
また、表示された見出し画面において注目された領域は、強調表示が行われる。例えば、図５−１の見出し画面に含まれる「事業所へのヒアリング（鈴木）」５０１を、元のプレゼンテーションデータと比較すると拡大されている。これにより、会議中にこの領域が注目されたことが容易に確認できる。
【００４９】
この強調表示をするか否かは、特徴量及び特徴量における属性に基づいて判別される。この強調表示をするための処理手順については後述する。
【００５０】
なお、タイムラインは縦方向に表示することに制限するものではなく、例えば横要方向など、いずれの方向で表示しても良い。また、利用者の操作により、表示方向を切り替えても良い。
【００５１】
また、タイムラインに表示する見出し画面は、他の形態で表示しても良い。図５−２は、本実施の形態と異なる変形例にかかる映像表示処理部２０４によりホワイトボード１０３に表示された画面例を示した図である。
【００５２】
また、タイムラインには見出し画面のみ表示することに制限するものではなく、例えば見出し画面毎に、見出し情報を説明する説明文を表示しても良い。なお、この説明文は、特徴量及び属性等から生成することなどが考えられる。
【００５３】
また、本実施の形態は、映像表示処理部２０４の表示先をホワイトボード１０３に限るものではなく、ビデオプロジェクタ、パーソナルコンピュータの画面等、どのようなディスプレイ装置に対して表示処理を行っても良い。なお、後述する見出し情報表示処理部２０５も同様に、表示先を制限するものではない。
【００５４】
見出し情報表示処理部２０５は、タイムラインＵＩで選択された見出し情報に対応する表示データの表示処理を行う。見出し情報表示処理部２０５は、利用者の操作によりタイムラインＵＩで見出し情報が選択されたと判断された場合に、当該見出し情報に対応する表示データを取得するようにデータ制御部２０３に対して指示する。これにより、データ制御部２０３は、プレゼンテーションデータ格納部２５１から表示するためのプレゼンテーションデータを表示データとして取得する。そして、見出し情報表示処理部２０５は、データ制御部２０３から表示データが入力された場合、ホワイトボード１０３に当該表示データを表示する。
【００５５】
指示領域検出部２０６は、データ制御部２０３から、プレゼンテーションデータと外部データを取得し、会議時にホワイトボード１０３に表示された映像データを含む座標領域に対して、利用者に指示された指示領域を検出する。
【００５６】
注目領域判定部２０７は、指示領域検出部２０６によって検出された指示領域から、プレゼンテーションデータに対する注目領域を判定する。また、注目領域判定部２０７は、注目領域判定ルールを用いることで、指示された領域から注目領域を判定できる。
【００５７】
図６は、指示された領域から注目領域の判定及び注目量を特定するために用いられる注目領域判定ルールのデータ構造の例を示した説明図である。本図に示すように、注目領域判定ルールは、条件と、判定と、強調方法と、注目量とを対応付けて保持している。つまり、注目領域判定部２０７は、特徴量、属性及び検出された指示領域のうちいずれか一つ以上により、「条件」に一致するか否か判断する。そして、注目領域判定部２０７は、「条件」に一致すると判断した場合、当該ルールを用いて注目領域を特定可能と判断し、「判定」に記載された領域を注目領域として判定する。
【００５８】
また、注目領域判定ルールは、図６で示したものに限らず、例えば利用者によるプレゼンテーションデータの拡大操作、スライダ操作を検出した場合、この操作が行われた後に表示されたプレゼンテーションデータを、注目領域が含まれるものとみたしてもよい。つまり、利用者がこれらの操作を行ったということは、このプレゼンテーションデータに注目領域が含まれる可能性が高いと考えられるためである。このように、参加者が行う様々な動作に基づいて、注目領域を判定するためのルールを定めてもよい。
【００５９】
また、注目領域判定部２０７は、このように判定された情報を、後述する見出し情報生成部２０８に出力する。これにより、これら判定された情報が、注目領域格納部２１０に格納される。
【００６０】
また、注目領域判定部２０７は「条件」に一致したルールで対応付けられた「注目量」と、「強調表示の種類」についても、同様に見出し情報生成部２０８に出力する。これにより、見出し画像を生成する際に、注目内容に対する強調表示方法を特定できる。
【００６１】
なお、一つの指示領域に対して、複数の注目領域判定ルールが合致する場合も存在する。この場合、一つ指示領域に対して、複数の注目領域が存在することになり、複数の強調表示処理が行われることになる。
【００６２】
見出し情報生成部２０８は、注目領域判定部２０７から入力された注目領域として対応付けられた情報に基づいて、タイムライン上に表示する見出し情報を生成する。なお、この見出し情報は、見出し画像データや、タイムライン上に表示される説明文等を含むものとする。また、見出し情報生成部２０８は、生成した見出し情報を、注目領域関連生成部２０９に出力する。
【００６３】
例えば、見出し情報生成部２０８は、注目領域判定部２０７から入力された情報により、プレゼンテーションデータとして提示された画像データにおける注目領域を特定する。そして、見出し情報生成部２０８は、当該画像データの特定された注目領域に対して、強調表示の種類で示された処理を行う。そして、見出し情報生成部２０８は、当該処理が行われた画像データを、見出し画像データとして生成する。この見出し画像データを表示することで、利用者が注目領域を認識することができる。また、タイムライン上に表示される説明文は、入力された情報に基づいて生成する。
【００６４】
次に、注目領域の強調表示について説明する。図７−１は、指示領域に基づいて検出された注目領域に対して強調表示した第１の例を示した図である。まず、指示領域検出部２０６が、プレゼンテーションデータの画面上の座標領域において、利用者が操作しているマウス２３１で指し示されたポインティング範囲を、指示領域として特定する。
【００６５】
注目領域判定部２０７は、このときに図６で示した注目領域判定ルールを用いて、指示領域から注目領域を判定する。また、プレゼンテーションデータが表示された座標領域において、図７−１（ａ）の点線で区切られた各領域を、テキスト項目とする。
【００６６】
そして、注目領域判定部２０７は、注目領域判定ルールで示された各ルールが適用されるか判断する。図７−１（ａ）で示された例では、発話は行われておらず、ペン入力も行われていないので「Rule1」〜「Rule3」の条件の適用はない。そして、注目領域判定部２０７は、「Rule4」に応じて、指示領域が存在するテキスト領域７０１を、注目領域として判定する。
【００６７】
また、「Rule4」の強調方法が表示倍率１．５倍なので、見出し情報生成部２０８は、テキスト領域７０１に含まれるテキストを、１．５倍に拡大した見出し画面データを生成する。図７−１（ｂ）は、見出し情報生成部２０８が生成した見出し画面データの例を示した図である。このように、指示された領域に対応する注目領域７０２が拡大表示されるので、利用者は、当該注目領域に含まれるテキスト領域が強調されていると認識できる。
【００６８】
図７−２は、指示領域に基づいて検出された注目領域に対して強調表示した第２の例を示した図である。本図で示す例では、ポインティング範囲が、単語「リアリング」上であり、参加者により発話が行われて、ペン入力が行われていないものとする。この場合、「Rule2」と「Rule3」の適用があり得る。そして、注目領域判定部２０７は、「Rule2」に応じて、指示領域に存在する単語「ヒアリング」を注目領域として判定する。また、注目領域判定部２０７は、「Rule3」に応じて、指示領域が存在するテキスト項目７０３を、注目領域として判定する。図７−２（ｂ）は、見出し情報生成部２０８が生成した見出し画面データの例を示した図である。図７−２（ｂ）に示すように、注目領域７０４に対する強調処理は２段階で行われている。すなわち、「事業部へのヒアリング（鈴木）」に対して表示倍率２．０で拡大され、さらに「ヒアリング」に対して表示倍率１．５で拡大されている。
【００６９】
また、図６には示さなかったが、注目領域判定ルールは、音声データ等から抽出された特徴量に基づいて、注目領域を判定する条件等も保持している。図７−３は、指示領域に基づいて判定された注目領域に対して強調表示した第３の例を示している。本図で示す例では、ポインティング範囲が、テキスト領域に存在せず、参加者により発話が行われ、発話の特徴量「ヒアリング」が抽出されているものとする。この場合、ポインティング範囲を含むテキスト項目に含まれる単語「ヒアリング」と、発話の特徴量「ヒアリング」とが一致するので、単語「ヒアリング」を注目領域として判定する。また、ポインティング範囲より、テキスト項目７０５も注目領域として判定する。図７−３（ｂ）は、見出し情報生成部２０８が生成した見出し画面データの例を示した図である。図７−３（ｂ）に示すように、注目領域７０６に対する強調処理は２段階で行われている。すなわち、「事業部へのヒアリング（鈴木）」に対して表示倍率２．０で拡大され、さらに「ヒアリング」に対して表示倍率１．５で拡大されている。
【００７０】
そして、見出し情報生成部２０８は、見出し画像データを生成した後、生成された見出し画像データのファイル名と、注目領域判定部２０７から入力された情報とを対応付けて、注目領域格納部２１０に格納する。
【００７１】
注目領域格納部２１０は、注目領域判定部２０７により判定された注目領域を格納する。図８は、注目領域格納部２１０が格納する注目領域管理テーブルのデータ構造の例を示した説明図である。図８に示すように、各注目領域は、注目領域ＩＤにより管理されている。また、各注目領域は、判定された時刻、注目内容（注目領域に記載されていた内容）、注目領域を構成する特徴量の種類、注目量、強調表示の種類、関連する注目領域ＩＤ及びサムネイル（見出し画像データのファイル名）により構成されている。なお、関連する注目領域については後述する。
【００７２】
このように、注目領域格納部２１０に格納された注目領域を含む見出し画像が、ホワイトボード１０３上のタイムラインにおける注目領域が抽出されたフレームに対応付けて表示される。また、この見出し画像は、見出し情報生成部２０８により行われた処理により、注目領域に含まれる内容が強調表示される。
【００７３】
注目領域関連生成部２０９は、注目領域格納部２１０に格納された注目領域と、見出し情報生成部２０８により生成された見出し情報と、見出し情報格納部２１１に格納された既存の見出し情報から、注目領域同士の関連を生成する。また、注目領域関連生成部２０９は、注目領域同士の関連を生成した後、見出し情報生成部２０８により生成された見出し情報を、見出し情報格納部２１１に格納する。なお、注目領域間の関連を生成する手順については、後述する。また、注目領域関連生成部２０９は、注目領域間の関連を生成した場合、図８で示した注目領域管理テーブルの「関連する注目領域ＩＤ」に、関連すると見なされた注目領域のＩＤを追加する。なお、この注目領域ＩＤは、図８に示した注目領域管理テーブルのＩＤと時刻の対応付けから取得できる。
【００７４】
見出し情報格納部２１１は、見出し情報生成部２０８により生成された見出し情報を格納する。見出し情報格納部２１１は、見出し画像データを格納すると共に、見出し画像データ以外の見出し情報を、見出し情報管理テーブルで管理する。
【００７５】
図９は、見出し情報管理テーブルのデータ構造の例を示した図である。図９に示すように、見出し情報管理テーブルは、見出し開始時刻と、見出し内容と、関連する見出し時刻とを対応付けて保持している。この見出し開始時刻を検索キーとして使用することで、レコードを特定することができる。また、関連する見出し時刻は、関連する見出し情報を特定するための検索キーとなる。また、関連する見出し情報及びその対応の取得手順については後述する。
【００７６】
なお、上述した見出し情報格納部２１１、注目領域格納部２１０、プレゼンテーションデータ格納部２５１、外部データ格納部２５２は、ＨＤＤ、光ディスク、メモリカード、ＲＡＭなどの一般的に利用されているあらゆる記憶手段により構成することができる。
【００７７】
次に、ミーティングサーバ１００における会議開催時における処理手順について説明する。図１０は、ミーティングサーバ１００の会議開催時における処理手順を示すフローチャートである。
【００７８】
まず、ミーティングサーバ１００のプレゼンテーションデータ入力部２０２は、資料ストレージ１０１や、利用者のＰＣ等から、会議に使用されるプレゼンテーションデータを入力する（ステップＳ１００１）。そして、会議が開始された場合、ミーティングサーバ１００のデータ制御部２０３が、特徴量の記録を開始する（ステップＳ１００２）。
【００７９】
次に、映像表示処理部２０４が、入力されたプレゼンテーションデータを表示処理する（ステップＳ１００３）。次に、外部データ入力部２０１が、接続された機器等からの外部データを入力処理する（ステップＳ１００４）。
【００８０】
次に、データ制御部２０３は、会議ログストレージ１０２に対して、会議情報を記録する（ステップＳ１００５）。会議情報には、ホワイトボード上に表示される画像情報や、カメラからの会議の様子を記録した動画、マイクから取得した音声などが含まれる。これらは、会議ログストレージ１０２の外部データ格納部２５２に格納される。
【００８１】
そして、データ制御部２０３は、入力された外部データから、図３で示された種類毎に特徴量を抽出し、種類毎に外部データ格納部２５２に記録する（ステップＳ１００６）。また、これら会議情報及び特徴量には、外部データが入力された時刻が対応付けて記録される。
【００８２】
次に、抽出された特徴量により、注目領域の特定と、見出し情報の特定を行う（ステップＳ１００７）。なお、詳細な処理手順については後述する。
【００８３】
そして、データ制御部２０３は、会議が終了したか否か判断する（ステップＳ１００８）。会議が終了していないと判断した場合（ステップＳ１００８：Ｎｏ）、プレゼンテーションデータの表示処理から再び行う（ステップＳ１００３）。
【００８４】
また、データ制御部２０３が、会議が終了したと判断した場合（ステップＳ１００６：Ｙｅｓ）、処理を終了する。
【００８５】
なお、最終的に、会議を通じて取得及び生成された全ての情報および全ての特徴量は、会議ログストレージ１０２、見出し情報格納部２１１、注目領域格納部２１０に格納されることになる。
【００８６】
次に、図１０のステップＳ１００５で示した注目領域の特定と見出し情報の生成における処理手順について説明する。図１１は、ミーティングサーバ１００の注目領域の特定と見出し情報の生成手順を示すフローチャートである。
【００８７】
まず、指示領域検出部２０６は、図１０のステップＳ１００４で抽出された特徴量から、表示されたプレゼンテーションデータ画面上の座標領域における、指示領域を検出する（ステップＳ１１０１）。
【００８８】
次に、注目領域判定部２０７は、検出された指示領域及び特徴量と、注目領域判定ルールに基づいて、注目領域を判定する（ステップＳ１１０２）。
【００８９】
そして、見出し情報生成部２０８は、判定された注目領域等に基づいて、見出し情報を生成する（ステップＳ１１０３）。次に、見出し情報生成部２０８は、見出し情報を生成した後、注目領域に関する情報を、注目領域格納部２１０に格納する（ステップＳ１１０４）。
【００９０】
そして、注目領域関連生成部２０９は、注目領域格納部２１０に格納された注目領域と、生成された見出し情報と、すでに格納された既存の見出し情報から、注目領域間の関連を生成する（ステップＳ１１０５）。なお、詳細な処理手順については後述する。
【００９１】
そして、注目領域関連生成部２０９は、見出し情報に関する情報を見だし情報格納部２１１に保存する（ステップＳ１１０６）。
【００９２】
次に、図１１のステップＳ１１０５に示す注目領域間の関連の生成手順について説明する。図１２は、注目領域関連生成部２０９の注目領域間の関連の生成手順を示すフローチャートである。
【００９３】
まず、注目領域関連生成部２０９は、判定された注目領域が以前判定された注目領域と一致するか否か判断する（ステップＳ１２０１）。
【００９４】
図１３は、判定された注目領域が、以前判定された注目領域と一致する場合の概念を示した説明図である。図１３（ａ）で示されたプレゼンテーションデータが最初に表示される。その後、参加者の操作により、図１３（ｂ）に示された報告書が表示される。さらにその後、利用者の操作により、図１３（ａ）に示されたプレゼンテーションデータが表示されたこととする。この場合に、利用者が、報告書を表示する前後の、図１３（ａ）で示したプレゼンテーションデータの表示時に、同じマウス操作を行った場合に、同じ注目領域が判定されることになる。
【００９５】
この場合、注目領域関連生成部２０９は、図１３（ａ）に示すプレゼンテーションデータと、図１３（ｂ）に示す報告書との間に関連があるとみなし、関連づけを行う。このような関連づけがなされた場合、ミーティングサーバ１００は、ホワイトボード１０３に図１３（ｃ）で示す画面を表示できる。図１３（ｃ）に示すように、ミーティングサーバ１００は、見出し画像データ１３０２に図１３（ａ）から生成された見出し画像データを表示する。また、見出し画像データ１３０１に図１３（ｂ）から生成された見出し画像データを表示する。つまり、関連付けされた見出し画像データを、タイムライン方向と垂直方向に表示することで、関連づけされていることを利用者に認識させることができる。
【００９６】
図１２に戻り、注目領域関連生成部２０９は、判定された注目領域が以前判定された注目領域と一致しないと判断した場合（ステップＳ１２０１：Ｎｏ）、判定された注目領域が、拡大縮小またはスクロール操作で移動しているか判断する（ステップＳ１２０２）。
【００９７】
図１４は、判定された注目領域が拡大縮小で移動している場合の概念を示した説明図である。図１４（ａ）で示されたプレゼンテーションデータが最初に表示される。その後、参加者の操作により、図１４（ｂ）に示されたようにプレゼンテーションデータの拡大表示が行われた。
【００９８】
この場合、注目領域関連生成部２０９は、拡大処理を行う前後のプレゼンテーションデータで、関連があるとみなし、関連づけを行う。なお、このような関連づけを行うために、注目領域判定ルールに拡大処理の前後のプレゼンテーションデータを注目領域として判定するためのルールが予め設定されている必要がある。つまり、プレゼンテーションデータが拡大された場合、注目すべき領域がこのプレゼンテーションデータ中に含まれるものみなす。
【００９９】
そして、注目領域関連生成部２０９が、このような関連づけを行った場合、ミーティングサーバ１００は、ホワイトボード１０３のタイムライン上に図１４（ｃ）に示す画面を表示する。図１４（ｃ）に示すように、ミーティングサーバ１００は、見出し画像データ１４０１に拡大前のプレゼンテーションデータから生成された見出し画像データを表示する。また、見出し画像データ１４０２に各第五のプレゼンテーションデータから生成された見出し画像データを表示する。また、見出し画像データ１４０１と見出し画像データ１４０２は、タイムライン方向と垂直方向に表示する。
【０１００】
図１２に戻り、注目領域関連生成部２０９は、判定された注目領域が、拡大縮小またはスクロール操作で移動していないと判断した場合（ステップＳ１２０２：Ｎｏ）、特に処理を行わずに終了する。
【０１０１】
そして、注目領域関連生成部２０９は、判定された注目領域が以前判定された注目領域と一致すると判断した場合（ステップＳ１２０１：Ｙｅｓ）、又は拡大縮小またはスクロール操作で移動していると判断した場合（ステップＳ１２０２：Ｙｅｓ）、これら注目領域間で関連づけを行う（ステップＳ１２０３）。例えば、判定された注目領域が以前判定された注目領域と一致すると判断した場合、既に判定された注目領域を示す「見出し開始時刻」を、見出し情報格納部２１１の見出し情報管理テーブルから取得する。そして、注目領域関連生成部２０９は、取得した時刻を、判定された注目領域と対応付けて、処理を終了する。
【０１０２】
そして、この後、図１１のステップＳ１１０６で示す処理が行われる。これにより、関連づけされた注目領域がある場合、図９に示した見出し情報管理テーブルに、関連する注目領域を表す「関連する見出し時刻」が格納される。
【０１０３】
つまり、注目領域が拡大縮小操作またはスクロール操作により抽出された場合、又は他の資料を閲覧するなど，注目領域が移動した後に元の注目領域に戻った場合、前後の注目領域はそれぞれ関係があると考えられる。そこで、注目領域関連生成部２０９は、これら注目領域間で、関連づけを行った。
【０１０４】
図１５は、ミーティングサーバ１００の映像表示処理部２０４が、関連づけされた見出し画像データの表示画面の例を示した図である。図１５に示すように、映像表示処理部２０４が、タイムラインの横に、関連づけされた見出し画像データを連結して表示する。利用者がこの見出しを参照することで、見出し間の関連を認識することができる。そして、映像表示処理部２０４が、表示した見出し画像データを、利用者がペンデバイス１０５で指示することで、見出し情報表示処理部２０５が、見出し画像データに対応するプレゼンテーションデータを表示処理する。
【０１０５】
また、本実施の形態では、関連する見出しを横に連結して表示しているが、このような表示に限らず、例えば、見出しを立てに連結したり、装飾して表示したり、タイムライン上に表示された見出しの選択時に関連する見出しをポップアップ表示するなど、注目領域間の関連が認識できる表示方法であればどのような表示手法を用いても良い。
【０１０６】
次に、映像表示処理部２０４が、見出し画像データをタイムライン上に表示するための処理手順について説明する。図１６は、映像表示処理部２０４における見出し画像データをタイムライン上に表示するための処理手順を示すフローチャートである。なお、この処理手順は図１０で示した会議開催時における会議情報及び特徴量の記録処理等と並行して行われる。つまり、会議の進行と共に格納される特徴量や生成される見出し情報に応じて、タイムライン上に表示される見出し情報が逐次変更されることになる。
【０１０７】
まず、映像表示処理部２０４は、ホワイトボード１０３上においてタイムラインを表示する範囲を設定する（ステップＳ１６０１）。
【０１０８】
次に、映像表示処理部２０４は、図４で示したイベント管理テーブルの特徴量の種類及び時刻に基づいて、タイムライン上に表示するフレーム幅を算出する（ステップＳ１６０２）。
【０１０９】
次に、映像表示処理部２０４は、タイムライン上の時間の粒度に応じて、表示する注目領域を特定する（ステップＳ１６０３）。例えば、ミーティングサーバ１００には、時間の粒度と対応付けて注目量の閾値が設定されているものとする。そこで、映像表示処理部２０４は、算出されたフレーム幅に応じて、表示する注目領域における注目量の閾値を特定することができる。そして、映像表示処理部２０４は、図８で示した注目領域管理テーブルから、レコードに格納された注目量が特定された閾値以上の注目領域を抽出する。この抽出された注目領域が、表示する対象となる。
【０１１０】
そして、映像表示処理部２０４は、注目領域管理テーブルから、抽出された注目領域に対応付けられた見出し情報を取得し、タイムライン上の時刻と対応付けを行う（ステップＳ１６０４）。なお、取得する見出し画像データは、当然に注目領域が強調されているものとする。なお、必要に応じて見出し情報として保持している説明文も、タイムライン上に表示するように対応付けを行っても良い。
【０１１１】
次に、映像表示処理部２０４は、タイムライン上のフレーム幅を更新した後、タイムライン上に対応付けられた見出し情報の表示処理を行う（ステップＳ１６０５）。このような処理を、会議の進行に応じて適宜行うこととする。
【０１１２】
このように、会議の進行に合わせてタイムライン上の見出し情報が、注目領域が強調表示された最新の見出し情報に更新される。これにより、会議の進行に応じて適宜、利用者は過去に表示したプレゼンテーションデータから、所望する見出し情報を容易に探し出すことができる。
【０１１３】
また、本実施の形態では、見出し画像データの注目領域を、拡大表示する場合について説明したが、当該注目領域に含まれるテキスト項目を太字で表示、テキスト項目に下線を引く又はテキスト項目のフォント色の変更など、利用者が見出しを参照することで、注目領域と認識できるような特殊な表示を行うのであれば、どのような表示手法を用いても良い。
【０１１４】
また、本実施の形態では、表示する前に予め見出し画像データを生成して、見出し情報格納部２１１に格納しておくことにしたが、このような手法に限らず、例えば注目領域の特定のみ行い、タイムラインに見出し情報を表示する際に必要に応じて、見出し画像データを生成することにしても良い。
【０１１５】
以上説明したように、本実施の形態にかかるミーティングサーバ１００が生成した見出し画像データは、会議時に参加者が注目したとみなされた注目領域に強調処理が施されているので、当該見出し画像データの表示時に、利用者は会議時に注目された部分を容易に特定することができる。
【０１１６】
また、本実施形態にかかるミーティングサーバ１００によれば、ホワイトボード１０３に表示されるタイムライン上に、注目領域に応じて強調表示された見出し情報を表示することができる。このような表示を行うことで、タイムライン上から、会議時における重要なプレゼンテーションデータを、再びホワイトボード１０３上に呼び出すことが容易になる。
【０１１７】
また、本実施の形態にかかるミーティングサーバ１００では、プレゼンテーションデータの注目領域を、外部データから抽出された複数の特徴量から算出している。つまり、利用者による注目領域を特定するための特殊な操作を行わなくとも、注目領域が強調された出し情報の生成及び表示が行われる。つまり、本実施の形態にかかる会議支援システムを利用するユーザ及び会議の状況に応じて、タイムライン上に適切な見出し情報を表示される。これにより、利用者は会議中に所望する見出し情報をタイムライン上から容易に見つけ出すことができる。
【０１１８】
また、本実施の形態にかかるミーティングサーバ１００では、時間の粒度に応じて注目量の閾値を変更することとした。タイムライン上の時間粒度の変化に応じて、適切な見出し情報を表示することができる。さらに、ホワイトボード１０３に表示されるタイムラインの時間範囲に応じて、表示される見出し情報を利用者が認識可能な数に抑えることができる。
【０１１９】
また、見出し情報として、見出し画像データの他に、特徴量の種類または注目量等に応じて重要と判断されたことを表す特徴アイコンや、特徴量の属性から取得した見出しの説明文を表示しても良い。これらを表示することで、表示された複数の見出し情報から、ユーザが必要としている会議中のプレゼンテーションデータを指定することが容易になる。
【０１２０】
また、本実施の形態にかかるミーティングサーバ１００では、特徴量に合わせてタイムライン上のフレーム幅を調節する。参加者が当該調節されたフレーム幅を参照することで、会議中の重要な部分を視覚的に判別することができる。また、タイムライン上のスライダを用いて過去の会議を参照する場合、会議中の重要な場面ほどより細かい時間粒度で参照することが可能になる。
【０１２１】
また、本実施の形態にかかるミーティングサーバ１００では、見出し画像データにおいて、プレゼンテーションデータの注目領域を強調表示している。これにより、利用者が、文字の多いスライド等の見出し画像データを参照して、すぐに当該スライドの重要だったポイントを特定できる。
【０１２２】
このように、本実施の形態にかかるミーティングサーバ１００では、プレゼンテーションデータの表示時に注目すべき領域の説明等が行われているときに、利用者が自然に行う動作を注目領域判定ルールとして設定した。これにより、ミーティングサーバ１００は、利用者が会議において注目領域を特定するための特別な操作を必要せずに、利用者の自然な動作により注目領域を判定して、利用者が閲覧時に容易に注目領域を理解することのできるダイジェストあるいは見出し画像の表示を可能とした。
【０１２３】
また、上述した各実施の形態に限定されるものではなく、以下に例示するような種々の変形が可能である。
【０１２４】
（変形例）
上述した第１の実施の形態においては、注目領域の強調方法が、ルール毎に固定されていたが、必要に応じて注目領域の強調方法を変更するものでも良い。そこで、変形例としてミーティングサーバが、必要に応じて注目領域の強調方法を変更する場合について説明する。
【０１２５】
本変形例において、ミーティングサーバは、表示する画面の解像度が変更されたり、一度に表示する見出し画像の数が変更された場合、個々の見出し画像データの表示領域が変更されるので、この変更に応じて強調方法も変更する。
【０１２６】
例えば、ミーティングサーバは、見出し画像データの表示領域が小さくなる場合、より強調する度合いを強くして表示する。これにより、見出し画像データの内容全体が把握できない場合でも、少なくとも注目領域に記載された内容は認識することができる。また、ミーティングサーバにおいて、見出し画像データの表示領域が変更されると判断した場合、適宜適切な強調方法を算出し、既に格納された注目領域管理テーブル等を用いて、動的に見出し画像情報の生成及び表示処理を行う。
【０１２７】
このような処理を行うことで、利用者は会議の進行と共に、見出し画像データの表示領域が縮小される場合でも、会議中に注目されたプレゼンテーションデータ及び注目領域を認識することができる。
【０１２８】
図１７は、上述した実施の形態にかかるミーティングサーバ１００のハードウェア構成を示す図である。ミーティングサーバ１００は、ハードウェア構成として、ミーティングサーバ１００における見出し画像データの生成処理を実行する情報表示プログラムなどが格納されているＲＯＭ１７０２と、ＲＯＭ１７０２内のプログラムに従ってミーティングサーバ１００の各部を制御するＣＰＵ１７０１と、ミーティングサーバ１００の制御に必要な種々のデータを記憶するＲＡＭ１７０３と、ネットワークに接続して通信を行う通信Ｉ／Ｆ１７０４と、ミーティングサーバ１００で処理した結果を表示する表示部１７０５と、利用者が入力するための入力Ｉ／Ｆと、各部を接続するバス１７０７とを備えている。また、ミーティングサーバ１００は、上述した構成を備えた、一般的なコンピュータに適用することができる。
【０１２９】
上述した実施の形態にかかるミーティングサーバ１００で実行される情報表示プログラムは、インストール可能な形式又は実行可能な形式のファイルでＣＤ−ＲＯＭ、フレキシブルディスク（ＦＤ）、ＣＤ−Ｒ、ＤＶＤ（Ｄｉｇｉｔａｌ  Ｖｅｒｓａｔｉｌｅ  Ｄｉｓｋ）等のコンピュータで読み取り可能な記録媒体に記録されて提供される。
【０１３０】
この場合には、情報表示プログラムは、ミーティングサーバ１００において上記記録媒体から読み出して実行することにより主記憶装置上にロードされ、上記ソフトウェア構成で説明した各部が主記憶装置上に生成されるようになっている。
【０１３１】
また、上述した実施の形態にかかるミーティングサーバ１００で実行される情報表示プログラムを、インターネット等のネットワークに接続されたコンピュータ上に格納し、ネットワーク経由でダウンロードさせることにより提供するように構成しても良い。また、上述した実施の形態にかかるミーティングサーバ１００で実行される情報表示プログラムをインターネット等のネットワーク経由で提供または配布するように構成しても良い。
【０１３２】
また、本実施形態の情報表示プログラムを、ＲＯＭ等に予め組み込んで提供するように構成してもよい。
【０１３３】
本実施の形態のミーティングサーバ１００で実行される情報表示プログラムは、上述した各部を含むモジュール構成となっており、実際のハードウェアとしてはＣＰＵ（プロセッサ）が上記記憶媒体から情報表示プログラムを読み出して実行することにより上記各部が主記憶装置上にロードされ、上記各部が主記憶装置上に生成されるようになっている。
【産業上の利用可能性】
【０１３４】
以上のように、本発明にかかる情報表示装置、情報表示方法及び情報表示プログラムは、会議時に表示されたプレゼンテーションデータを、利用者が再び参照する時に特定する技術として有用である。
【図面の簡単な説明】
【０１３５】
【図１】第１の実施の形態に係る会議支援システムを示す概要図である。
【図２】第１の実施の形態にかかるミーティングサーバと会議ログストレージの構成を示すブロック図である。
【図３】ミーティングサーバの外部データ格納部に記録される特徴量の種類の例を示した説明図である。
【図４】ミーティングサーバのプレゼンテーションデータ格納部が保持するイベント管理テーブルのデータ構造の例を示した図である。
【図５−１】ミーティングサーバの映像表示処理部によりホワイトボードに表示された画面例を示した図である。
【図５−２】第１の実施の形態と異なる変形例にかかるミーティングサーバの映像表示処理部によりホワイトボードに表示された画面例を示した図である。
【図６】第１の実施の形態にかかるミーティングサーバが使用する注目領域判定ルールのデータ構造の例を示した説明図である。
【図７−１】ミーティングサーバが、指示領域に基づいて判定された注目領域に対して強調表示した第１の例を示した図である。
【図７−２】ミーティングサーバが、指示領域に基づいて判定された注目領域に対して強調表示した第２の例を示した図である。
【図７−３】ミーティングサーバが、指示領域に基づいて判定された注目領域に対して強調表示した第３の例を示した図である。
【図８】ミーティングサーバの注目領域格納部が格納する注目領域管理テーブルのデータ構造の例を示した説明図である。
【図９】ミーティングサーバの見出し情報格納部が保持する見出し情報管理テーブルのデータ構造の例を示した図である。
【図１０】ミーティングサーバの会議開催時における処理手順を示すフローチャートである。
【図１１】ミーティングサーバにおける注目領域の特定と見出し情報の生成手順を示すフローチャートである。
【図１２】ミーティングサーバの注目領域関連生成部における注目領域間の関連の生成手順を示すフローチャートである。
【図１３】ミーティングサーバにより判定された注目領域が、以前判定された注目領域と一致する場合の概念を示した説明図である。
【図１４】ミーティングサーバにより判定された注目領域が拡大縮小で移動している場合の概念を示した説明図である。
【図１５】ミーティングサーバの映像表示処理部が表示する、関連づけが保持された見出し画像データの表示画面の例を示した図である。
【図１６】ミーティングサーバの映像表示処理部における見出し画像データをタイムライン上に表示するための処理手順を示すフローチャートである。
【図１７】ミーティングサーバのハードウェア構成を示す図である。
【符号の説明】
【０１３６】
１００  ミーティングサーバ
１０１  資料ストレージ
１０２  会議ログストレージ
１０３  ホワイトボード
１０３  電子ホワイトボード
１０３  当該ホワイトボード
１０４  カメラ
１０５  ペンデバイス
１０６ａ〜ｎ  マイク
２０１  外部データ入力部
２０２  プレゼンテーションデータ入力部
２０３  データ制御部
２０４  映像表示処理部
２０５  見出し情報表示処理部
２０６  指示領域検出部
２０７  注目領域判定部
２０８  見出し情報生成部
２０９  注目領域関連生成部
２１０  注目領域格納部
２１１  見出し情報格納部
２２１  操作入力受付部
２２２  音声取得部
２３１  マウス
２５１  プレゼンテーションデータ格納部
２５２  外部データ格納部
１７０１  ＣＰＵ
１７０２  ＲＯＭ
１７０３  ＲＡＭ
１７０４  通信Ｉ／Ｆ
１７０５  表示部
１７０６  入力Ｉ／Ｆ
１７０７  バス
【図１】
2008084110.tif 000003
【図２】
2008084110.tif 000004
【図３】
2008084110.tif 000005
【図４】
2008084110.tif 000006
【図５−１】
2008084110.tif 000007
【図５−２】
2008084110.tif 000008
【図６】
2008084110.tif 000009
【図７−１】
2008084110.tif 000010
【図７−２】
2008084110.tif 000011
【図７−３】
2008084110.tif 000012
【図８】
2008084110.tif 000013
【図９】
2008084110.tif 000014
【図１０】
2008084110.tif 000015
【図１１】
2008084110.tif 000016
【図１２】
2008084110.tif 000017
【図１３】
2008084110.tif 000018
【図１４】
2008084110.tif 000019
【図１５】
2008084110.tif 000020
【図１６】
2008084110.tif 000021
【図１７】
2008084110.tif 000022