(57)【要約】【課題】会議に関連するより多くの情報を容易に再現する。【解決手段】携帯情報装置は、参照情報を取得する参照情報取得部１２０と、複数の参照情報のうち追加情報の位置が発表データ中における所定範囲内にある複数の参照情報を同じグループに分類するグループ化部１３０と、選択されたグループに属する複数の参照情報のうち少なくとも１つを表示する参照情報表示部１５０とを備え、参照情報取得部１２０は、発表原稿を読み取った読取データを取得する読取データ取得部１２１と、読取データから発表データに存在しない画像を追加情報として抽出する追加情報抽出部１２２と、追加情報の位置に対応する発表データ中の位置を追加情報の追加された位置として決定する位置決定部１２３と、追加情報および決定された位置に基づいて、発表原稿に対応する参照情報を生成する記録媒体対応生成部１２４とを含む。【選択図】図４
2018006950.tif 000002
【特許請求の範囲】
【請求項１】
自装置および１以上の他装置のいずれかにより生成された参照情報を取得する参照情報取得手段と、
前記参照情報は、前記自装置および１以上の他装置それぞれがアクセス可能な発表データに追加された追加情報と、前記発表データ中で前記追加情報が追加された位置を示す位置情報とを含み、
前記参照情報取得手段により取得された複数の参照情報のうち、追加情報の位置が前記発表データ中における所定範囲内にある複数の参照情報を同じグループに分類するグループ化手段と、
前記１以上のグループのいずれか１つが選択されることに応じて、選択されたグループに属する複数の参照情報のうち少なくとも１つを表示する参照情報表示手段とを備え、
前記参照情報取得手段は、
前記発表データに基づく画像が形成された記録媒体を読み取った読取データを取得する読取データ取得手段と、
前記読取データ取得手段により取得された読取データから前記発表データに存在しない画像を前記追加情報として抽出する追加情報抽出手段と、
前記読取データ中における前記抽出された追加情報の位置に対応する前記発表データ中の位置を前記抽出された追加情報の追加された位置として決定する位置決定手段と、
前記追加情報抽出手段により抽出された追加情報および前記位置決定手段により決定された位置に基づいて、前記記録媒体に対応する参照情報を生成する記録媒体対応生成手段とを含む、会議関連情報再現装置。
【請求項２】
前記参照情報取得手段は、前記追加情報抽出手段により抽出された追加情報のサイズを、前記読取データおよび前記発表データのうち少なくとも一方に基づいて決定するサイズ決定手段をさらに備える、請求項１に記載の会議関連情報再現装置。
【請求項３】
前記参照情報取得手段は、前記追加情報抽出手段により抽出された追加情報のサイズを、自装置および１以上の他装置のいずれかにより前記発表データに追加された追加情報のサイズに基づいて決定するサイズ決定手段をさらに備える、請求項１に記載の会議関連情報再現装置。
【請求項４】
前記位置決定手段は、前記追加情報抽出手段により抽出された追加情報が前記発表データに含まれる複数ページの画像のいずれの内に存在しない場合、前記発表データに含まれる複数ページのうち前記抽出された追加情報が最も近い画像に対応するページと、前記対応するページに対する前記抽出された追加情報の相対的な位置と、を前記追加情報の位置として決定する、請求項１〜３のいずれかに記載の会議関連情報再現装置。
【請求項５】
前記参照情報取得手段は、前記追加情報抽出手段により抽出される追加情報に前記発表データに含まれる複数ページの画像のいずれからの内から外に延びる条件画像が存在するか否かを判定する条件画像判定手段をさらに含み、
前記位置決定手段は、前記追加情報に前記条件画像が存在する場合に、前記発表データに含まれる複数ページのうち前記条件画像と重なる画像のページ中で、当該ページの前記条件画像の端部の位置を当該追加情報の追加された位置に決定する、請求項１〜４のいずれかに記載の会議関連情報再現装置。
【請求項６】
会議の状態に関する情報を会議情報として取得する会議情報取得手段と、
前記会議情報のうち少なくとも一部を出力する会議情報出力手段と、
前記１以上のグループを選択可能に表示するグループリスト表示手段と、
前記グループリスト表示手段により表示された１以上のグループのいずれか１つを選択するグループ選択手段とをさらに備え、
前記会議情報出力手段は、
前記グループ選択手段により前記１以上のグループのいずれか１つが選択されることに応じて、前記選択されたグループに対応する前記発表データ中の発表部分を表示する発表データ部分表示手段とを含み、
前記参照情報表示手段は、
前記発表データ部分表示手段により表示された発表部分に、前記選択されたグループに属する１以上の参照情報にそれぞれ含まれる１以上の追加情報を重畳して表示する追加情報表示手段と、
前記追加情報抽出手段により抽出される追加情報のうち少なくとも一部が前記発表データに含まれる複数ページの画像のいずれの内に存在しない場合に、当該追加情報の存在を示す指標を当該追加情報に代えて前記発表部分上に重畳表示する指標表示手段と、
ユーザーによる前記指標の操作を受け付け、前記指標が操作された場合にその指標に対応する追加情報を表示する外側追加情報表示手段とを含む、請求項１〜５に記載の会議関連情報再現装置。
【請求項７】
前記発表データに追加された追加情報を含む前記発表データに対応する複数の参照情報の各々は、追加情報の入力の開始時刻と終了時刻とを定める入力期間を含み、
前記グループ化手段は、
前記参照情報取得手段により取得された前記発表データに対応する複数の参照情報を、追加情報の位置が前記発表データ中における所定範囲内にありかつ開始時刻が所定期間以内にある複数の参照情報が同じグループに属するように分類し、
前記参照情報取得手段により取得された前記記録媒体に対応する複数の参照情報の各々を、当該参照情報の追加情報の位置が、複数のグループのうちの１または複数のグループであって当該グループに含まれる複数の参照情報のいずれかの位置から所定範囲に含まれるグループに分類する、請求項６に記載の会議関連情報再現装置。
【請求項８】
前記会議情報は、時間の経過に伴って変化し、
前記１以上のグループそれぞれに対して、当該グループに属する１以上の参照情報それぞれの入力期間に基づいてグループ期間を決定するグループ期間決定手段と、
前記１以上のグループのいずれか１つが選択されることに応じて、前記選択されたグループに対して決定されたグループ期間を再生期間に決定する再生期間決定手段とをさらに備え、
前記会議情報出力手段は、前記会議情報のうち前記決定された再生期間に対応する部分を出力する、請求項７に記載の会議関連情報再現装置。
【請求項９】
前記参照情報は、追加情報を追加したユーザーを識別するためのユーザー識別情報をさらに含み、
前記参照情報取得手段は、前記読取データ取得手段により取得される読取データとともに当該読取データに含まれる追加情報を追加したユーザーのユーザー識別情報を取得するユーザー識別情報取得手段をさらに含み、
前記記録媒体対応生成手段は、前記ユーザー識別情報取得手段により取得されるユーザー識別情報に基づいて、前記記録媒体に対応する参照情報を生成し、
前記参照情報表示手段は、前記複数の参照情報のうち少なくとも１つを表示する際に、各参照情報に含まれる追加情報とその追加情報に対応するユーザー識別情報とを同時に表示する、請求項１〜８のいずれかに記載の会議関連情報再現装置。
【請求項１０】
自装置および１以上の他装置のいずれかにより生成された参照情報を取得する参照情報取得ステップと、
前記参照情報は、前記自装置および１以上の他装置それぞれがアクセス可能な発表データに追加された追加情報と、前記発表データ中で前記追加情報が追加された位置を示す位置情報とを含み、
前記参照情報取得手段により取得された複数の参照情報のうち、追加情報の位置が前記発表データ中における所定範囲内にある複数の参照情報を同じグループに分類するグループ化ステップと、
前記１以上のグループのいずれか１つが選択されることに応じて、選択されたグループに属する複数の参照情報のうち少なくとも１つを表示する参照情報表示ステップとを含み、
前記参照情報取得ステップは、
前記発表データに基づく画像が形成された記録媒体を読み取った読取データを取得する読取データ取得ステップと、
前記読取データ取得ステップにより取得された読取データから前記発表データに存在しない画像を前記追加情報として抽出する追加情報抽出ステップと、
前記読取データ中における前記抽出された追加情報の位置に対応する前記発表データ中の位置を前記抽出された追加情報の追加された位置を示す位置情報として決定する位置決定ステップと、
前記追加情報抽出ステップにより抽出された追加情報および前記位置決定ステップにより決定された位置に基づいて、前記記録媒体に対応する参照情報を生成する記録媒体対応生成ステップとを含む、会議関連情報再現方法。
【請求項１１】
自装置および１以上の他装置のいずれかにより生成された参照情報を取得する参照情報取得ステップと、
前記参照情報は、前記自装置および１以上の他装置それぞれがアクセス可能な発表データに追加された追加情報と、前記発表データ中で前記追加情報が追加された位置を示す位置情報とを含み、
前記参照情報取得手段により取得された複数の参照情報のうち、追加情報の位置が前記発表データ中における所定範囲内にある複数の参照情報を同じグループに分類するグループ化ステップと、
前記１以上のグループのいずれか１つが選択されることに応じて、選択されたグループに属する複数の参照情報のうち少なくとも１つを表示する参照情報表示ステップとを前記自装置および前記１以上の他装置を制御するコンピュータに実行させ、
前記参照情報取得ステップは、
前記発表データに基づく画像が形成された記録媒体を読み取った読取データを取得する読取データ取得ステップと、
前記読取データ取得ステップにより取得された読取データから前記発表データに存在しない画像を前記追加情報として抽出する追加情報抽出ステップと、
前記読取データ中における前記抽出された追加情報の位置に対応する前記発表データ中の位置を前記抽出された追加情報の追加された位置を示す位置情報として決定する位置決定ステップと、
前記追加情報抽出ステップにより抽出された追加情報および前記位置決定ステップにより決定された位置に基づいて、前記記録媒体に対応する参照情報を生成する記録媒体対応生成ステップとを含む、会議関連情報再現プログラム。
【発明の詳細な説明】
【技術分野】
【０００１】
この発明は、会議関連情報再現装置、会議関連情報再現方法および会議関連情報再現プログラムに関し、特に、複数のユーザーが参加した会議に関連する情報を再現する会議関連情報再現装置、会議関連情報再現方法および会議関連情報再現プログラムに関する。
【背景技術】
【０００２】
会議等において、発表用の資料として準備されたデータを参加者全員がそれぞれ携帯する携帯情報装置等の電子端末に表示する会議システムが知られている。例えば、特開２０１４−０９８９７２号公報には、画像表示装置と、１以上の電子端末とを有する電子会議システムであって、前記電子端末は、前記画像表示装置で表示された複数の画像を、当該複数の画像に対するユーザーの操作を示す操作情報と関連付けて記録媒体に記録する画像・操作記録手段を備え、前記画像表示装置は、前記電子端末と通信して、前記画像・操作記録手段により前記記録媒体に記録された複数の画像と、当該複数の画像に関連付けられた操作情報とに基づいて表示画像を生成する画像生成手段を備えることを特徴とする電子会議システムが記載されている。
【０００３】
上記の電子会議システムによれば、会議の参加者は、表示画像により会議に関連するユーザーの操作を再現して会議の内容を再確認することができる。一方、電子端末を携帯しないユーザーが会議に参加する場合などは、そのユーザーは、資料を印刷した用紙を参照しながら会議に参加する。この場合、特開２０１４−０９８９７２号公報に記載の電子会議システムにおいては、電子端末を携帯しないユーザーによる操作、例えば、用紙に手書きで記入する操作により生成される情報を収集することができないといった問題がある。
【特許文献１】特開２０１４−０９８９７２号公報
【発明の概要】
【発明が解決しようとする課題】
【０００４】
この発明は上述した問題点を解決するためになされたもので、この発明の目的の一つは、会議に関連するより多くの情報を容易に再現することが可能な会議関連情報再現装置を提供することである。
【０００５】
この発明の他の目的は、会議に関連するより多くの情報を容易に再現することが可能な会議関連情報再現方法を提供することである。
【０００６】
この発明のさらに他の目的は、会議に関連するより多くの情報を容易に再現することが可能な会議関連情報再現プログラムを提供することである。
【課題を解決するための手段】
【０００７】
上述した目的を達成するためにこの発明のある局面によれば、会議関連情報再現装置は、自装置および１以上の他装置のいずれかにより生成された参照情報を取得する参照情報取得手段と、参照情報は、自装置および１以上の他装置それぞれがアクセス可能な発表データに追加された追加情報と、発表データ中で追加情報が追加された位置を示す位置情報とを含み、参照情報取得手段により取得された複数の参照情報のうち、追加情報の位置が発表データ中における所定範囲内にある複数の参照情報を同じグループに分類するグループ化手段と、１以上のグループのいずれか１つが選択されることに応じて、選択されたグループに属する複数の参照情報のうち少なくとも１つを表示する参照情報表示手段とを備え、参照情報取得手段は、発表データに基づく画像が形成された記録媒体を読み取った読取データを取得する読取データ取得手段と、読取データ取得手段により取得された読取データから発表データに存在しない画像を追加情報として抽出する追加情報抽出手段と、読取データ中における抽出された追加情報の位置に対応する発表データ中の位置を抽出された追加情報の追加された位置として決定する位置決定手段と、追加情報抽出手段により抽出された追加情報および位置決定手段により決定された位置に基づいて、記録媒体に対応する参照情報を生成する記録媒体対応生成手段とを含む。
【０００８】
この局面に従えば、自装置および１以上の他装置のいずれかにより生成された参照情報が取得され、発表データに基づく画像が形成された記録媒体を読み取った読取データから発表データに存在しない画像が追加情報として抽出され、抽出された追加情報の位置に対応する発表データ中の位置が抽出された追加情報の追加された位置として決定され、抽出された追加情報および決定された位置に基づいて、記録媒体に対応する参照情報が生成される。そして、複数の参照情報のうち、追加情報の位置が発表データ中における所定範囲内にある複数の参照情報が同じグループに分類され、１以上のグループのいずれか１つが選択されることに応じて、選択されたグループに属する複数の参照情報のうち少なくとも１つが表示される。このため、発表データに基づく画像が形成された記録媒体を読み取った読取データから抽出される、発表データに存在しない画像を、追加情報として、自装置または他装置で発表データに追加された追加情報とともに再現することができる。その結果、会議に関連するより多くの情報を容易に再現することが可能になる。
【０００９】
好ましくは、参照情報取得手段は、追加情報抽出手段により抽出された追加情報のサイズを、読取データおよび発表データのうち少なくとも一方に基づいて決定するサイズ決定手段をさらに備える。
【００１０】
この局面に従えば、抽出された追加情報を、読取データおよび発表データのうち少なくとも一方に追加された追加情報のサイズに応じたサイズで表示するので、表示される追加情報のサイズのばらつきを低減することができる。
【００１１】
好ましくは、参照情報取得手段は、追加情報抽出手段により抽出された追加情報のサイズを、自装置および１以上の他装置のいずれかにより発表データに追加された追加情報のサイズに基づいて決定するサイズ決定手段をさらに備える。
【００１２】
この局面に従えば、抽出された追加情報を、自装置および１以上の他装置のいずれかにより発表データに追加された追加情報のサイズに応じたサイズで表示するので、追加情報のサイズのばらつきを低減することができる。
【００１３】
好ましくは、位置決定手段は、追加情報抽出手段により抽出された追加情報が発表データに含まれる複数ページの画像のいずれの内に存在しない場合、発表データに含まれる複数ページのうち抽出された追加情報が最も近い画像に対応するページと、対応するページに対する抽出された追加情報の相対的な位置と、を追加情報の位置として決定する。
【００１４】
この局面に従えば、発表データに基づく画像が形成された記録媒体を読み取った読取データから抽出される追加情報の発表データ中の位置が追加情報が最も近い画像に対応するページに対する抽出された追加情報の相対的な位置に決定されるので、読取データから抽出される追加情報を、１以上のグループのいずれかに分類することができる。このため、読取データから抽出される追加情報を、自装置または他装置で発表データに追加された追加情報とともに再現することができる。
【００１５】
好ましくは、参照情報取得手段は、追加情報抽出手段により抽出される追加情報に発表データに含まれる複数ページの画像のいずれからの内から外に延びる条件画像が存在するか否かを判定する条件画像判定手段をさらに含み、位置決定手段は、追加情報に条件画像が存在する場合に、発表データに含まれる複数ページのうち条件画像と重なる画像のページ中で、当該ページの条件画像の端部の位置を当該追加情報の追加された位置に決定する。
【００１６】
この局面に従えば、追加情報に条件画像が存在する場合に、条件画像と重なる画像のページ中で条件画像の端部の位置を追加情報の追加された位置に決定するので、追加情報の位置を発表データのページ内の適切な位置に決定することができる。
【００１７】
好ましくは、会議関連情報再現装置は、会議の状態に関する情報を会議情報として取得する会議情報取得手段と、会議情報のうち少なくとも一部を出力する会議情報出力手段と、１以上のグループを選択可能に表示するグループリスト表示手段と、グループリスト表示手段により表示された１以上のグループのいずれか１つを選択するグループ選択手段とをさらに備え、会議情報出力手段は、グループ選択手段により１以上のグループのいずれか１つが選択されることに応じて、選択されたグループに対応する発表データ中の発表部分を表示する発表データ部分表示手段とを含み、参照情報表示手段は、発表データ部分表示手段により表示された発表部分に、選択されたグループに属する１以上の参照情報にそれぞれ含まれる１以上の追加情報を重畳して表示する追加情報表示手段と、追加情報抽出手段により抽出される追加情報のうち少なくとも一部が発表データに含まれる複数ページの画像のいずれの内に存在しない場合に、当該追加情報の存在を示す指標を当該追加情報に代えて発表部分上に重畳表示する指標表示手段と、ユーザーによる指標の操作を受け付け、指標が操作された場合にその指標に対応する追加情報を表示する外側追加情報表示手段とを含む。
【００１８】
この局面に従えば、１以上のグループのいずれか１つが選択されることに応じて、選択されたグループに対応する発表データ中の発表部分に、選択されたグループに属する１以上の参照情報にそれぞれ含まれる１以上の追加情報が重畳して表示される。これにより、ユーザーは、発表データ中の発表部分を参照しつつ、その発表部分に追加された追加情報の存在を容易に認識することができる。また、発表データに含まれる複数ページの画像のいずれの内に存在しない追加情報に代えて、当該追加情報の存在を示す指標が発表部分上に重畳表示され、指標の操作があると、当該指標に対応する追加情報が表示される。これにより、複数ページの画像のいずれの内に存在しない追加情報を表示することができる。
【００１９】
好ましくは、発表データに追加された追加情報を含む発表データに対応する複数の参照情報の各々は、追加情報の入力の開始時刻と終了時刻とを定める入力期間を含み、グループ化手段は、参照情報取得手段により取得された発表データに対応する複数の参照情報を、追加情報の位置が発表データ中における所定範囲内にありかつ開始時刻が所定期間以内にある複数の参照情報が同じグループに属するように分類し、参照情報取得手段により取得された記録媒体に対応する複数の参照情報の各々を、当該参照情報の追加情報の位置が、複数のグループのうちの１または複数のグループであって当該グループに含まれる複数の参照情報のいずれかの位置から所定範囲に含まれるグループに分類する。
【００２０】
この局面に従えば、発表データに対応する複数の参照情報それぞれが追加情報の位置および入力期間に基づいて１以上のグループに分類される。また、記録媒体に対応する複数の参照情報それぞれが、当該参照情報の追加情報の位置が、複数のグループのうちの１または複数のグループであって当該グループに含まれる複数の参照情報のいずれかの位置から所定範囲に含まれるグループに分類される。これにより、発表データに対応する複数の参照情報と記録媒体に対応する複数の参照情報とを複数のグループに適切に分類することができる。
【００２１】
好ましくは、会議情報は、時間の経過に伴って変化し、会議関連情報再現装置は、１以上のグループそれぞれに対して、当該グループに属する１以上の参照情報それぞれの入力期間に基づいてグループ期間を決定するグループ期間決定手段と、１以上のグループのいずれか１つが選択されることに応じて、選択されたグループに対して決定されたグループ期間を再生期間に決定する再生期間決定手段とをさらに備え、会議情報出力手段は、会議情報のうち決定された再生期間に対応する部分を出力する。
【００２２】
この局面に従えば、１以上のグループそれぞれに対して、グループに属する１以上の参照情報それぞれの入力期間に基づいてグループ期間が決定され、１以上のグループのいずれか１つが選択されることに応じて、選択されたグループに対して決定されたグループ期間が再生期間に決定され、会議情報のうち決定された再生期間に対応する部分が出力される。このため、自装置および１以上の他装置のいずれかを操作するユーザーにより追加情報が入力された期間の会議の状態を限定して再現することができる。
【００２３】
好ましくは、参照情報は、追加情報を追加したユーザーを識別するためのユーザー識別情報をさらに含み、参照情報取得手段は、読取データ取得手段により取得される読取データとともに当該読取データに含まれる追加情報を追加したユーザーのユーザー識別情報を取得するユーザー識別情報取得手段をさらに含み、記録媒体対応生成手段は、ユーザー識別情報取得手段により取得されるユーザー識別情報に基づいて、記録媒体に対応する参照情報を生成し、参照情報表示手段は、複数の参照情報のうち少なくとも１つを表示する際に、各参照情報に含まれる追加情報とその追加情報に対応するユーザー識別情報とを同時に表示する。
【００２４】
この局面に従えば、記録媒体に追加情報を追加したユーザーを識別するためのユーザー識別情報が読取データとともに取得される。取得されたユーザー識別情報に基づいて、記録媒体に対応する参照情報が生成される。複数の参照情報のうち少なくとも１つが表示される際に、各参照情報に含まれる追加情報とその追加情報に対応するユーザー識別情報とが同時に表示される。それにより、記録媒体に対応する参照情報についても、追加情報を追加したユーザーが誰であるのかをユーザーに通知することができる。
【００２５】
この発明の他の局面によれば、会議関連情報再現方法は、自装置および１以上の他装置のいずれかにより生成された参照情報を取得する参照情報取得ステップと、参照情報は、自装置および１以上の他装置それぞれがアクセス可能な発表データに追加された追加情報と、発表データ中で追加情報が追加された位置を示す位置情報とを含み、参照情報取得手段により取得された複数の参照情報のうち、追加情報の位置が発表データ中における所定範囲内にある複数の参照情報を同じグループに分類するグループ化ステップと、１以上のグループのいずれか１つが選択されることに応じて、選択されたグループに属する複数の参照情報のうち少なくとも１つを表示する参照情報表示ステップとを含み、参照情報取得ステップは、発表データに基づく画像が形成された記録媒体を読み取った読取データを取得する読取データ取得ステップと、読取データ取得ステップにより取得された読取データから発表データに存在しない画像を追加情報として抽出する追加情報抽出ステップと、読取データ中における抽出された追加情報の位置に対応する発表データ中の位置を抽出された追加情報の追加された位置を示す位置情報として決定する位置決定ステップと、追加情報抽出ステップにより抽出された追加情報および位置決定ステップにより決定された位置に基づいて、記録媒体に対応する参照情報を生成する記録媒体対応生成ステップとを含む。
【００２６】
この局面に従えば、会議に関連するより多くの情報を容易に再現することが可能な会議関連情報再現方法を提供することができる。
【００２７】
この発明の他の局面によれば、会議関連情報再現プログラムは、自装置および１以上の他装置のいずれかにより生成された参照情報を取得する参照情報取得ステップと、参照情報は、自装置および１以上の他装置それぞれがアクセス可能な発表データに追加された追加情報と、発表データ中で追加情報が追加された位置を示す位置情報とを含み、参照情報取得手段により取得された複数の参照情報のうち、追加情報の位置が発表データ中における所定範囲内にある複数の参照情報を同じグループに分類するグループ化ステップと、１以上のグループのいずれか１つが選択されることに応じて、選択されたグループに属する複数の参照情報のうち少なくとも１つを表示する参照情報表示ステップとを自装置および１以上の他装置を制御するコンピュータに実行させ、参照情報取得ステップは、発表データに基づく画像が形成された記録媒体を読み取った読取データを取得する読取データ取得ステップと、読取データ取得ステップにより取得された読取データから発表データに存在しない画像を追加情報として抽出する追加情報抽出ステップと、読取データ中における抽出された追加情報の位置に対応する発表データ中の位置を抽出された追加情報の追加された位置を示す位置情報として決定する位置決定ステップと、追加情報抽出ステップにより抽出された追加情報および位置決定ステップにより決定された位置に基づいて、記録媒体に対応する参照情報を生成する記録媒体対応生成ステップとを含む。
【００２８】
この局面に従えば、会議に関連するより多くの情報を容易に再現することが可能な会議関連情報再現プログラムを提供することができる。
【図面の簡単な説明】
【００２９】
【図１】本発明の実施の形態に係る携帯情報装置を含む会議システムの全体概要の一例を示す図である。
【図２】本実施の形態におけるＭＦＰのハードウェア構成の概要を示すブロック図である。
【図３】本実施の形態における携帯情報装置のハードウェア構成の概要を示すブロック図である。
【図４】携帯情報装置が備えるＣＰＵが有する機能の一例を示すブロック図である。
【図５】音声関連情報のフォーマットの一例を示す図である。
【図６】発表画像関連情報のフォーマットの一例を示す図である。
【図７】ポインタ関連情報のフォーマットの一例を示す図である。
【図８】発表データに対応する参照情報のフォーマットの一例を示す図である。
【図９】記録媒体に対応する参照情報のフォーマットの一例を示す図である。
【図１０】ユーザーＡが携帯情報装置を操作して会議に参加するときの表示部の表示状態の一例を示す図である。
【図１１】ユーザーＡの携帯情報装置において生成される発表データに対応する参照情報の一例を示す図である。
【図１２】ユーザーＢの携帯情報装置において生成される発表データに対応する参照情報の一例を示す図である。
【図１３】ユーザーＣの携帯情報装置において生成される発表データに対応する参照情報の一例を示す図である。
【図１４】ユーザーＤの携帯情報装置において生成される発表データに対応する参照情報の一例を示す図である。
【図１５】ユーザーＥの携帯情報装置において生成される発表データに対応する参照情報の一例を示す図である。
【図１６】ユーザーＦの発表原稿に対応する参照情報の一例を説明するための模式図である。
【図１７】ユーザーＧの発表原稿に対応する参照情報の一例を説明するための模式図である。
【図１８】ユーザーＨの発表原稿に対応する参照情報の一例を説明するための模式図である。
【図１９】発表データに対応する参照情報のグループ化の例を示す模式図である。
【図２０】発表原稿に基づく参照情報のグループ化の例を示す模式図である。
【図２１】グループリストの一例を示す図である。
【図２２】グループリストの一例を示す図である。
【図２３】グループリストから１つのグループ識別情報が選択された場合の表示例を示す図である。
【図２４】ユーザーＦの参照画像が選択された場合の表示例である。
【図２５】ユーザーＧの参照画像が選択された場合の表示例である。
【図２６】図２４の表示状態で文字サイズボタンが操作された場合の表示例である。
【図２７】グループリストから１つのグループ識別情報が選択された場合の他の表示例を示す図である。
【図２８】ユーザーＨの参照画像が選択された場合の表示例である。
【図２９】会議情報取得処理の流れの一例を示すフローチャートである。
【図３０】発表画像関連処理の流れの一例を示すフローチャートである。
【図３１】発表データに対応する参照情報取得処理の流れの一例を示すフローチャートである。
【図３２】発表原稿に対応する参照情報取得処理の流れの一例を示すフローチャートである。
【図３３】グループ化処理の流れの一例を示すフローチャートである。
【図３４】再現処理の流れの一例を示すフローチャートである。
【図３５】第１の参照情報表示処理の流れの一例を示すフローチャートである。
【図３６】第２の参照情報表示処理の流れの一例を示すフローチャートである。
【発明を実施するための形態】
【００３０】
以下、本発明の実施の形態に係る会議関連情報再現装置について図面を参照して説明する。以下の説明では同一の部品には同一の符号を付してある。それらの名称および機能も同じである。したがってそれらについての詳細な説明は繰返さない。以下では、会議関連情報再現装置の一例として携帯情報装置を説明する。
【００３１】
図１は、本発明の実施の形態に係る携帯情報装置を含む会議システムの全体概要の一例を示す図である。図１を参照して、会議システム１は、複合機であるＭＦＰ（Ｍｕｌｔｉ  Ｆｕｎｃｔｉｏｎ  Ｐｅｒｉｐｈｅｒａｌ）４００と、複数（本例では５つ）の携帯情報装置２００Ａ，２００Ｂ，２００Ｃ，２００Ｄ，２００Ｅと、を含む。ＭＦＰ４００および携帯情報装置２００Ａ〜２００Ｅは、同じ拠点に配置されてもよいし、互いに異なる拠点に配置されてもよい。ＭＦＰ４００および携帯情報装置２００Ａ〜２００Ｅが複数の拠点に配置される場合、それらの複数の拠点の間の距離は特に限定されない。
【００３２】
ネットワーク２Ａに、ＭＦＰ４００および無線局３Ａが接続されている。携帯情報装置２００Ａ，２００Ｂは、無線局３Ａと通信することにより、ネットワーク２Ａに接続可能である。ネットワーク２Ｂに、無線局３Ｂが接続されている。携帯情報装置２００Ｃ，２００Ｄ，２００Ｅは、無線局３Ｂと通信することにより、ネットワーク２Ｂに接続可能である。ネットワーク２Ａ，２Ｂそれぞれは、インターネット５に接続される。このため、ＭＦＰ４００および携帯情報装置２００Ａ〜２００Ｅは、互いに通信可能である。
【００３３】
ネットワーク２Ａ，２Ｂは、ＬＡＮ（ローカルエリアネットワーク）であり、接続形態は有線または無線を問わない。また、ネットワーク２Ａ，２Ｂは、ＬＡＮに限らず、ＷＡＮ（ワイドエリアネットワーク）、ＰＳＴＮ（公衆交換電話網）、インターネット等であってもよい。
【００３４】
携帯情報装置２００Ａ〜２００Ｅそれぞれは、パーソナルコンピューターである。携帯情報装置２００Ａ〜２００Ｅのハードウェア構成および機能は同じなので、ここでは特に言及しない限り携帯情報装置２００Ａを例に説明する。なお、携帯情報装置２００Ａ〜２００Ｅそれぞれは、後述する図４の機能を有していればよい。したがって、携帯情報装置２００Ａ〜２００Ｅそれぞれは、後述する図４の機能と同様の機能を有する携帯情報端末であってもよい。このような携帯情報端末として、例えば、スマートフォン、タブレット端末、ＰＤＡ（Ｐｅｒｓｏｎａｌ  Ｄｉｇｉｔａｌ  Ａｓｓｉｓｔａｎｔｓ）等がある。
【００３５】
図２は、ＭＦＰ４００のハードウェア構成の概要の一例を示すブロック図である。図２を参照して、ＭＦＰ４００は、メイン回路４１０を含む。メイン回路４１０は、ＣＰＵ４１１と、通信インターフェース（Ｉ／Ｆ）部４１２と、ＲＯＭ（Ｒｅａｄ  Ｏｎｌｙ  Ｍｅｍｏｒｙ）４１３と、ＲＡＭ（Ｒａｎｄｏｍ  Ａｃｃｅｓｓ  Ｍｅｍｏｒｙ）４１４と、大容量記憶装置としてのハードディスクドライブ（ＨＤＤ）４１５と、ファクシミリ部４１６と、外部記憶装置４１７と、を含む。ＣＰＵ４１１は、自動原稿搬送装置４２０、原稿読取部４３０、画像形成部４４０、給紙部４５０および操作パネル４６０と接続され、ＭＦＰ４００の全体を制御する。
【００３６】
ＲＯＭ４１３は、ＣＰＵ４１１が実行するプログラム、またはそのプログラムを実行するために必要なデータを記憶する。ＲＡＭ４１４は、ＣＰＵ４１１がプログラムを実行する際の作業領域として用いられる。また、ＲＡＭ４１４は、原稿読取部４３０から連続的に送られてくる読取画像を一時的に記憶する。
【００３７】
ファクシミリ部４１６は、公衆交換電話網（ＰＳＴＮ）に接続され、ＰＳＴＮにファクシミリデータを送信する、またはＰＳＴＮからファクシミリデータを受信する。ファクシミリ部４１６は、受信したファクシミリデータを、ＨＤＤ４１５に記憶するか、または、画像形成部４４０でプリント可能なプリントデータに変換して、画像形成部４４０に出力する。これにより、画像形成部４４０は、ファクシミリ部４１６により受信されたファクシミリデータに基づく画像を給紙部４５０により供給される用紙上に形成する。また、ファクシミリ部４１６は、原稿読取部４３０によって読み取られたデータ、またはＨＤＤ４１５に記憶されたデータをファクシミリデータに変換して、ＰＳＴＮに接続されたファクシミリ装置に送信する。
【００３８】
通信Ｉ／Ｆ部４１２は、ネットワーク２ＡにＭＦＰ４００を接続するためのインターフェースである。通信Ｉ／Ｆ部４１２は、ＴＣＰ（Ｔｒａｎｓｍｉｓｓｉｏｎ  Ｃｏｎｔｒｏｌ  Ｐｒｏｔｏｃｏｌ）またはＦＴＰ（Ｆｉｌｅ  Ｔｒａｎｓｆｅｒ  Ｐｒｏｔｏｃｏｌ）等の通信プロトコルで、ネットワーク２Ａ，２Ｂに接続された携帯情報装置２００Ａ〜２００Ｅと通信する。
【００３９】
外部記憶装置４１７は、ＣＰＵ４１１により制御され、ＣＤ−ＲＯＭ（Ｃｏｍｐａｃｔ  Ｄｉｓｋ  Ｒｅａｄ  Ｏｎｌｙ  Ｍｅｍｏｒｙ）４１８、または半導体メモリが装着される。ＣＰＵ４１１は、外部記憶装置４１７を介してＣＤ−ＲＯＭ４１８または半導体メモリにアクセス可能である。ＣＰＵ４１１は、外部記憶装置４１７に装表されたＣＤ−ＲＯＭ４１８または半導体メモリに記録されたプログラムをＲＡＭ４１４にロードして実行する。なお、ＣＰＵ４１１が実行するプログラムは、ＣＤ−ＲＯＭ４１８に記録されたプログラムに限られず、ＨＤＤ４１５に記憶されたプログラムをＲＡＭ４１４にロードして実行するようにしてもよい。この場合、通信Ｉ／Ｆ部４１２に接続されるネットワークを介して、ネットワークに接続された他のコンピューターが、ＭＦＰ４００のＨＤＤ４１５に記憶されたプログラムを書換える、または、新たなプログラムを追加して書き込むようにしてもよい。さらに、ＭＦＰ４００が、ネットワークに接続された他のコンピューターからプログラムをダウンロードして、そのプログラムをＨＤＤ４１５に記憶するようにしてもよい。ここでいうプログラムは、ＣＰＵ４１１が直接実行可能なプログラムだけでなく、ソースプログラム、圧縮処理されたプログラム、暗号化されたプログラム等を含む。
【００４０】
なお、ＣＰＵ４１１が実行するプログラムを記憶する媒体としては、ＣＤ−ＲＯＭ４１８に限られず、光ディスク（ＭＯ（Ｍａｇｎｅｔｉｃ  Ｏｐｔｉｃａｌ  Ｄｉｓｃ）／ＭＤ（Ｍｉｎｉ  Ｄｉｓｃ）／ＤＶＤ（Ｄｉｇｉｔａｌ  Ｖｅｒｓａｔｉｌｅ  Ｄｉｓｃ））、ＩＣカード、光カード、マスクＲＯＭ、ＥＰＲＯＭ（Ｅｒａｓａｂｌｅ  Ｐｒｏｇｒａｍａｂｌｅ  ＲＯＭ）、ＥＥＰＲＯＭ（Ｅｌｅｃｔｒｉｃａｌｌｙ  ＥＰＲＯＭ）などの半導体メモリであってもよい。
【００４１】
操作パネル４６０は、表示部４６１と操作部４６３とを含む。表示部４６１は、液晶表示装置（ＬＣＤ）、有機ＥＬＤ（Ｅｌｅｃｔｒｏ−Ｌｕｍｉｎｅｓｃｅｎｃｅ  Ｄｉｓｐｌａｙ）等のディスプレイであり、ユーザーに対する指示メニューや取得した画像データに関する情報等を表示する。操作部４６３は、タッチパネル４６５と、複数のキーからなるハードキー部４６７と、を含む。ハードキー部４６７が含む複数のキーそれぞれは、接点スイッチを含み、ＣＰＵ４１１に接続される。
【００４２】
操作部４６３は、ハードキー部４６７が有する複数のキーが押下されると、押下されたキーに対応する指示、文字、数字などのデータの入力を受け付ける。タッチパネル４６５は、表示部４６１の上面または下面に設けられ、操作ユーザーにより指示された位置の座標をＣＰＵ４１１に出力する。タッチパネル４６５は、操作ユーザーが指またはスタイラスペンで指示した位置を検出し、検出した位置の座標をＣＰＵ４１１に出力する。
【００４３】
タッチパネル４６５は、表示部４６１の表示面と同じまたはそれ以上のサイズであるのが好ましい。タッチパネル４６５は、表示部４６１に重畳して設けられるので、タッチパネル４６５は、操作ユーザーが表示部４６１の表示面を指示すれば、表示部４６１の表示面中で操作ユーザーが指示した位置の座標をＣＰＵ４１１に出力する。タッチパネル４６５は、例えば、抵抗膜方式、表面弾性波方式、赤外線方式、電磁誘導方式、静電容量方式を用いることができ、その方式は限定されない。
【００４４】
操作部４６３が受け付け可能な操作は、ハードキー部４６７が有する複数のキーを押下する操作、タッチパネル４６５を指示するシングルタッチ操作およびマルチタッチ操作を含む。
【００４５】
ＨＤＤ４１５には、１以上の会議の日時が割り当てられたスケジュールおよび各会議で用いられる資料となる発表データが予め記憶されている。発表データは、会議に参加する１以上のユーザーによって共有されるデータであり、携帯情報装置２００Ａ〜２００Ｅそれぞれがアクセス可能となっている。また、ＣＰＵ４１１は、予め定められた会議ごとに、携帯情報装置２００Ａ〜２００Ｅを用いて会議に参加するユーザーを管理する。例えば、携帯情報装置２００Ａ〜２００Ｅの各ユーザーは、会議の開始時に、予め付与されたユーザーＩＤ（識別子）およびパスワードを用いてＣＰＵ４１１へ会議の参加を要求する。ＨＤＤ４１５には、予め複数のユーザーにそれぞれ対応するユーザーＩＤおよびパスワードが管理情報として記憶されている。ＣＰＵ４１１は、携帯情報装置２００Ａ〜２００Ｅから会議への参加要求があると、参加要求とともに入力されるユーザーＩＤおよびパスワードを管理情報と比較することにより、その参加要求を許可するか否かを判断する。
【００４６】
ＣＰＵ４１１は、携帯情報装置２００Ａ〜２００Ｅのいずれかからの会議への参加要求を許可する場合に、その参加要求に対応する会議の発表データを、当該携帯情報装置にダウンロードさせる。また、ＣＰＵ４１１は、携帯情報装置２００Ａ〜２００Ｅのうち参加要求を許可した１以上の携帯情報装置の動作を管理する。
【００４７】
本実施の形態に係る会議システム１においては、携帯情報装置２００Ａ〜２００Ｅを用いて会議に参加している複数のユーザーそれぞれは、ＣＰＵ４１１に自己が発表者となるべき旨を要求することができる。ＣＰＵ４１１は、あるユーザーから発表者となるべき旨の要求を受けた場合に、予め定められた条件に従ってそのユーザーからの要求を許可するか否かを判断する。
【００４８】
例えば、ＣＰＵ４１１は、携帯情報装置２００Ａ〜２００Ｅのいずれか、例えば、携帯情報装置２００Ａからの発表者となるべき旨の要求を許可する場合に、その携帯情報装置に発表権限を付与する。一方、ＣＰＵ４１１は、携帯情報装置２００Ａからの発表者となるべき旨の要求を許可しない場合に、その携帯情報装置２００Ａに発表権限を付与しない。発表権限とは、一の会議についての発表データのうちその会議に参加する全てのユーザーに提示すべき画像（以下、発表画像と呼ぶ。）を指定するとともに、自己の発言を全てのユーザーに出力する権限を意味する。
【００４９】
任意のユーザーは、ＭＦＰ４００にＨＤＤ４１５に記憶された発表データに基づく原稿（以下、発表原稿と呼ぶ。）の作成を指示することができる。例えば、帯情報装置２００Ａ〜２００Ｅを携帯しないユーザーが、発表データに基づく画像が形成された用紙を用いて会議に参加する場合である。ユーザーが、操作パネル４６０を操作することにより、発表データを指定する操作を入力する場合、ＣＰＵ４１１は、画像形成部４４０を制御して、発表データに基づく画像を用紙に形成させる。このようにして、ＭＦＰ４００により発表原稿が作成される。発表原稿は、発表データに基づく画像が形成された記録媒体の一例である。発表原稿のサイズは、発表原稿の作成を指示したユーザーが指定するサイズである。例えば、Ａ４の用紙サイズを指定する場合には、発表原稿のサイズはＡ４であり、Ａ３の用紙サイズを指定する場合には、発表原稿のサイズはＡ３である。また、発表データが複数ページからなる場合、発表原稿は、発表データに含まれる複数ページごとに用紙に形成する場合には、複数ページのページ数と同じ枚数の用紙からなる。また、発表原稿は、発表データに含まれる複数ページの２以上の画像を１枚の用紙に形成する場合には、複数ページのページ数より少ない枚数の用紙からなる。例えば、発表データに１０ページが含まれており、２ページを１枚の用紙に形成する場合は、発表原稿は、５枚の用紙からなり、４ページを１枚の用紙に形成する場合は、発表原稿は、３枚の用紙からなる。
【００５０】
発表原稿を入手したユーザーは、会議に参加している間に、発表原稿に手書きでメモを追加する場合がある。ここで、手書きのメモが追加された発表原稿の画像を発表原稿画像という。この場合、ユーザーは、例えば、会議の終了後に、操作パネル４６０を操作してＭＦＰ４００にログインし、ＭＦＰ４００にメモが追加された発表原稿を読み取らせることができる。具体的には、ユーザーが、発表原稿を自動原稿搬送装置４２０に載置し、操作パネル４６０に読み取りを指示する操作を入力すれば、ＣＰＵ４１１は、原稿読取部４３０を制御して、発表原稿画像を読み取り、読み取った読取データを、ログインしたユーザーのユーザー識別情報と対応付けてＨＤＤ４１５に記憶する。
【００５１】
さらに、ＭＦＰ４００に発表原稿画像を読み取らせたユーザーは、ＭＦＰ４００に、携帯情報装置２００Ａ〜２００Ｅのいずれかに読取データとユーザー識別情報との組を送信させることができる。例えば、ＭＦＰ４００に発表原稿画像を読み取らせたユーザーが操作パネル４６０を操作して、携帯情報装置２００Ａ〜２００Ｅのいずれかを指定するとともに、ＨＤＤ４１５に記憶された読取データの送信を指示する操作を入力すれば、ＣＰＵ４１１は、読取データおよびユーザー識別情報を指定された携帯情報装置に送信する。また、ＣＰＵ４１１は、携帯情報装置２００Ａ〜２００ＥのいずれかからＨＤＤ４１５に記憶された読取データの送信要求があった場合に、要求された読取データと、その読取データに対応付けられたユーザー識別情報とを、送信要求を送信してきた携帯情報装置に送信する。
【００５２】
図３は、本実施の形態における携帯情報装置２００Ａのハードウェア構成の概要を示すブロック図である。図３を参照して、本実施の形態における携帯情報装置２００Ａは、携帯情報装置２００Ａの全体を制御するための中央演算装置（以下「ＣＰＵ」という）２０１と、ＣＰＵ２０１が実行するプログラム等を記憶するＲＯＭ（Ｒｅａｄ  Ｏｎｌｙ  Ｍｅｍｏｒｙ）２０２と、ＣＰＵ２０１の作業領域として使用されるＲＡＭ（Ｒａｎｄｏｍ  Ａｃｃｅｓｓ  Ｍｅｍｏｒｙ）２０３と、データを不揮発的に記憶するフラッシュメモリ２０４と、情報を表示する表示部２０５と、ユーザーの操作を受け付ける操作部２０６と、携帯情報装置２００Ａの周辺の音声を受ける音声入力部２０７と、音声を出力する音声出力部２０８と、無線ＬＡＮＩ／Ｆ（無線ローカルエリアネットワークインターフェース）２０９と、外部記憶装置２１０と、を含む。
【００５３】
フラッシュメモリ２０４は、ＣＰＵ２０１が実行するプログラム、またはそのプログラムを実行するために必要なデータを記憶する。ＣＰＵ２０１は、フラッシュメモリ２０４に記録されたプログラムを、ＲＡＭ２０３にロードして実行する。ＣＰＵ２０１がフラッシュメモリ２０４に記録されたプログラムを実行することにより、後述する参照情報および会議情報が生成され、生成された参照情報および会議情報がフラッシュメモリ２０４に記憶される。
【００５４】
表示部２０５は、ＬＣＤ（液晶表示装置）、有機ＥＬＤ（有機エレクトロルミネッセンス表示装置）等である。操作部２０６は、メインキー２０６Ａと、タッチパネル２０６Ｂと、キーボード２０６Ｃと、マウス２０６Ｄと、を備える。メインキー２０６Ａは、例えば接点スイッチで構成されるハードキーである。タッチパネル２０６Ｂは、表示部２０５の上面または下面に表示部２０５に重畳して設けられる。タッチパネル２０６Ｂは、表示部２０５の表示面中でユーザーにより指示された位置を検出し、検出された表示面の位置をＣＰＵ２０１に出力する。
【００５５】
ＣＰＵ２０１は、表示部２０５に表示されている画面と、タッチパネル２０６Ｂにより検出された位置とに基づいて、ユーザーの操作による各種の指示、文字、数字等のデータの入力を受け付ける。例えば、表示部２０５にテンキーの画像を含む画面を表示する場合には、タッチパネル２０６Ｂによる検出された位置に表示されたキーに対応する数字を受け付ける。さらに、ＣＰＵ２０１は、タッチパネル２０６Ｂから入力される位置情報に基づいて、描画を検出することも可能である。具体的には、ＣＰＵ２０１は、タッチパネル２０６Ｂにより検出される位置の画素の画素値を「１」とし、他の画素の画素値を「０」とする手書き画像を示す描画データを生成する。
【００５６】
キーボード２０６Ｃは、複数の英数キーを含む。ＣＰＵ２０１は、ユーザーにより押下操作された英数キーを検出し、ユーザーの操作による各種の文字、数字等のデータの入力を受け付ける。マウス２０６Ｄは、表示部２０５に表示されるマウスポインタにより任意の位置を指示するための位置指示機構と、１以上のハードキーと、を含む。マウス２０６Ｄの位置指示機構は、ユーザーにより指示された位置情報をＣＰＵ２０１に出力する。マウス２０６Ｄのハードキーは、ユーザーの操作によるオン／オフ信号をＣＰＵ２０１に出力する。ＣＰＵ２０１は、マウス２０６Ｄから入力される位置情報に基づいて、表示部２０５の表示面中でユーザーにより指示された位置を検出する。また、ＣＰＵ２０１は、マウス２０６Ｄから入力されるオン／オフ信号に基づいてユーザーによるマウス２０６Ｄの操作状態（例えばクリック操作、ドラッグ操作等）を検出する。さらに、ＣＰＵ２０１は、マウス２０６Ｄから入力される位置情報およびオン／オフ信号により検出される、位置情報および操作状態に基づいて描画を検出することも可能である。具体的には、ＣＰＵ２０１は、マウス２０６Ｄにより指示される表示部２０５の表示面上の位置の画素の画素値を「１」とし、他の画素の画素値を「０」とする手書き画像を示す描画データを生成することもできる。
【００５７】
音声入力部２０７は例えばマイクロホンであり、音声出力部２０８は例えばスピーカである。音声入力部２０７は、携帯情報装置２００Ａ周辺のユーザーの音声を集音し、集音した音を音声データに変換し、音声データをＣＰＵ２０１に出力する。音声出力部２０８は、ＣＰＵ２０１により制御され、ＣＰＵ２０１から入力される音声データを再生し、音を発生する。
【００５８】
無線ＬＡＮＩ／Ｆ２０９は、無線局３Ａと通信し、携帯情報装置２００Ａをネットワーク２Ａに接続するためのインターフェースである。携帯情報装置２００Ａに、ＭＦＰ４００のＩＰ（Ｉｎｔｅｒｎｅｔ  Ｐｒｏｔｏｃｏｌ）アドレスを登録しておくことにより、携帯情報装置２００Ａは、ＭＦＰ４００と通信することができ、データの送受信が可能となる。なお、本実施の形態においては、携帯情報装置２００Ａが無線ＬＡＮＩ／Ｆ２０９を用いて、ＭＦＰ４００と通信する場合を例に説明するが、他の通信方法を用いて通信するようにしてもよい。具体的には、携帯情報装置２００ＡおよびＭＦＰ４００が、例えばＢｌｕｅｔｏｏｔｈ（登録商標）等の近距離無線装置を搭載する場合には、携帯情報装置２００Ａが、ＭＦＰ４００と、１対１で通信するようにしてもよい。
【００５９】
外部記憶装置２１０は、携帯情報装置２００Ａに着脱自在であり、会議関連情報再現プログラムが記憶されたＣＤ−ＲＯＭ２１０Ａを装着可能である。ＣＰＵ２０１は、外部記憶装置２１０を介してＣＤ−ＲＯＭ２１０Ａにアクセス可能である。ＣＰＵ２０１は、外部記憶装置２１０に装着されたＣＤ−ＲＯＭ２１０Ａに記録された会議関連情報再現プログラムを、ＲＡＭ２０３にロードして実行することが可能である。また、ＣＰＵ２０１は、ＣＤ−ＲＯＭ２１０Ａに記録された会議関連情報再現プログラムを、ＲＯＭ２０２またはフラッシュメモリ２０４に記憶させてもよい。この場合、ＣＰＵ２０１は、ＲＯＭ２０２またはフラッシュメモリ２０４に記憶された会議関連情報再現プログラムをＲＡＭ２０３にロードして実行することが可能である。
【００６０】
ＣＰＵ２０１が実行するプログラムは、ＲＯＭ２０２、フラッシュメモリ２０４およびＣＤ−ＲＯＭ２１０Ａに予め記憶されたプログラムに限られない。ＣＰＵ２０１は、例えばフラッシュメモリ２０４に記憶されたプログラムであって、ネットワーク２Ａ，２Ｂまたはインターネット５に接続された他のコンピューターにより書換えられたプログラムを実行してもよい。また、ＣＰＵ２０１は、ネットワーク２Ａ，２Ｂまたはインターネット５に接続された他のコンピューターによりフラッシュメモリ２０４に追加して書き込まれた新たなプログラムを実行してもよい。さらに、ＣＰＵ２０１は、ネットワーク２またはインターネット５に接続された他のコンピューターからダウンロードされたプログラムを実行してもよい。ここでいうプログラムは、ＣＰＵ２０１が直接実行可能なプログラムだけでなく、ソースプログラム、圧縮処理されたプログラム、または暗号化されたプログラム等を含む。
【００６１】
ＣＰＵ２０１が実行するプログラムを記憶する媒体は、ＣＤ−ＲＯＭ２１０Ａに限られず、ＭＯ（Ｍａｇｎｅｔｉｃ  Ｏｐｔｉｃａｌ  ｄｉｓｃ）、ＭＤ（Ｍｉｎｉ  Ｄｉｓｃ）、ＤＶＤ（Ｄｉｇｉｔａｌ  Ｖｅｒｓａｔｉｌｅ  Ｄｉｓｃ）等の光ディスクであってもよい。また、ＣＰＵ２０１が実行するプログラムを記憶する媒体は、ＩＣカード、光カード、マスクＲＯＭ、ＥＰＲＯＭ（Ｅｒａｓａｂｌｅ  Ｐｒｏｇｒａｍｍａｂｌｅ  ＲＯＭ）、ＥＥＰＲＯＭ（Ｅｌｅｃｔｒｉｃａｌｌｙ  ＥＰＲＯＭ）等の半導体メモリであってもよい。
【００６２】
図４は、携帯情報装置２００Ａが備えるＣＰＵ２０１が有する機能の一例を示すブロック図である。図４においては、携帯情報装置２００Ｂ〜２００Ｅが他装置として示される。
【００６３】
図４に示す機能は、携帯情報装置２００Ａ〜２００Ｅそれぞれが備えるＣＰＵ２０１が、ＲＯＭ２０２、フラッシュメモリ２０４、ＣＤ−ＲＯＭ２１０Ａに記憶された各種プログラムを実行することにより、ＣＰＵ２０１に形成される機能である。携帯情報装置２００Ａ〜２００Ｅそれぞれが備えるＣＰＵ２０１が有する機能は同じである。以下では、携帯情報装置２００Ａ〜２００ＥのＣＰＵ２０１を代表して、携帯情報装置２００ＡのＣＰＵ２０１が有する機能を説明する。
【００６４】
図４を参照して、ＣＰＵ２０１は、会議情報取得部１１０と、参照情報取得部１２０と、グループ化部１３０と、グループリスト表示部１３１と、グループ期間決定部１３３と、選択部１３４と、再生期間決定部１３８と、参照情報表示部１５０と、会議情報出力部１６０と、再生動作指示部１７０と、計時部１９０と、を含む。計時部１９０は、現時点の時刻情報を取得し、取得した時刻情報を会議情報取得部１１０および参照情報取得部１２０に出力する。
【００６５】
会議情報取得部１１０は、時間の経過に伴って変化する会議の状態に関する情報を会議情報として取得する。会議情報は、会議に参加するユーザーの携帯情報装置２００Ａ〜２００Ｅのいずれかで生成される。会議情報取得部１１０は、装置モードが発表モードにある状態で、会議情報を生成し、生成された会議情報を無線ＬＡＮＩ／Ｆ２０９を介して他の携帯情報装置２００Ｂ〜２００Ｅに送信する。一方、会議情報取得部１１０は、装置モードが参加モードにある状態で、他の携帯情報装置２００Ｂ〜２００Ｅのうち発表モードにある携帯情報装置から送信される会議情報を受信する。会議情報取得部１１０は、発表モードで会議情報を生成し、参加モードで会議情報を受信するので、携帯情報装置２００Ａのユーザーが参加する会議の期間中、会議情報を継続して取得する。
【００６６】
ここでは、会議に参加するユーザーの携帯情報装置２００Ａ〜２００Ｅのうち装置モードが発表モードにある携帯情報装置２００Ａで会議情報を生成する場合を説明する。この場合、携帯情報装置２００Ａが有する会議情報取得部１１０が会議情報を生成し、無線ＬＡＮＩ／Ｆ２０９を介して他の携帯情報装置２００Ｂ〜２００Ｅに会議情報を送信する。他の携帯情報装置２００Ｂ〜２００Ｅそれぞれが有する会議情報取得部１１０は、携帯情報装置２００Ａにより生成された会議情報を携帯情報装置２００Ａから受信することにより、会議情報を取得する。
【００６７】
会議情報は、音声関連情報、発表画像関連情報およびポインタ関連情報を含む。音声関連情報は、発表権限が付与された発表者の音声を、その音声が発生された時刻に関連付けた情報である。発表画像関連情報は、発表データのうち発表者により指定される発表部分を、その発表部分が指定された時刻に関連付けた情報である。ポインタ関連情報は、発表者により指示されるマウスポインタの位置を、その位置が指示された時刻に関連付けた情報である。
【００６８】
会議情報取得部１１０は、ユーザーが会議に参加している状態で、装置モードを発表モードと参加モードとのいずれかに切り換える。具体的には、会議情報取得部１１０は、デフォルトで装置モードを参加モードに設定する。会議情報取得部１１０は、装置モードが参加モードにある状態で操作部２０６により発表モードがユーザーにより選択されると、無線ＬＡＮＩ／Ｆ２０９を制御して自己が発表者となるべき旨の要求信号をＭＦＰ４００に送信する。会議情報取得部１１０は、ＭＦＰ４００によって発表者となるべき旨の要求が許可されることを条件に、すなわち携帯情報装置２００Ａのユーザーに発表権限が付与された場合に装置モードを発表モードに切り換える。一方、会議情報取得部１１０は、ＭＦＰ４００によって発表者となるべき旨の要求が許可されない場合、すなわち携帯情報装置２００Ａのユーザーに発表権限が付与されない場合、装置モードを発表者モードに切り換えることなく、参加モードを維持する。
【００６９】
携帯情報装置２００Ａは、装置モードが発表モードに切り換えられている状態で、発表部分を設定することが可能である。発表部分は、会議に用いられる発表データのうち会議に参加するユーザーの携帯情報装置２００Ａ〜２００Ｅそれぞれに表示される部分である。携帯情報装置２００Ａは、参加モードにある状態で、発表部分を設定することが不可能である。
【００７０】
会議情報取得部１１０は、音声入力部２０７から入力される音声データを取得する。会議情報取得部１１０は、発表モードにある状態で計時部１９０により取得される時刻情報に基づいて発表開始時刻および発表終了時刻を検出する。発表開始時刻は、装置モードが参加者モードから発表モードに切り換えられた時刻であり、携帯情報装置２００Ａのユーザーが発表者になった時刻である。発表終了時刻は、装置モードが発表モードから参加者モードに切り換えられた時刻であり、携帯情報装置２００Ａのユーザーが発表者でなくなった時刻である。会議情報取得部１１０は、発表開始時刻から発表終了時刻の間に音声データを取得する。会議情報取得部１１０は、音声データを、検出された発表開始時刻および発表終了時刻と関連付けることにより音声関連情報を生成する。
【００７１】
会議情報取得部１１０は、発表モードにある状態で、発表者がマウス２０６Ｄを操作することによるマウスポインタの位置を検出する。会議情報取得部１１０は、発表モードにある状態で、検出されたマウスポインタの位置を、計時部１９０により取得される時刻情報に関連付けることによりポインタ関連情報を生成する。
【００７２】
会議情報取得部１１０は発表部分設定部１１１を含む。発表部分設定部１１１は、発表モードにある状態で、発表者が操作部２０６を操作して発表ページを指定すると、指定された発表ページを抽出するとともに、発表ページの全体を発表部分に設定する。また、発表部分設定部１１１は、発表ページが抽出された状態で、発表者が操作部２０６を操作して発表ページを拡大または縮小すると、発表ページ中で拡大または縮小後の領域を発表部分に設定する。会議情報取得部１１０は、発表モードにある状態で発表部分設定部１１１により設定された発表部分を、計時部１９０により取得される時刻情報に関連付けることにより発表画像関連情報を生成する。
【００７３】
会議情報取得部１１０は、会議情報を取得することに応じて、会議情報に含まれる発表画像関連情報で特定される発表部分の画像を表示部２０５に表示するとともに、取得された会議情報を参照情報取得部１２０、グループリスト表示部１３１および会議情報出力部１６０に出力する。
【００７４】
図５は、音声関連情報のフォーマットの一例を示す図である。図５を参照して、音声関連情報は、音声データの項目と、発表開始時刻の項目と、発表終了時刻の項目と、を含む。音声データの項目には、発表者の音声を電子データに変換した音声データが設定される。発表開始時刻の項目には、装置モードが発表モードに切り換えられた時刻が設定され、発表終了時刻の項目には、装置モードが発表モードから参加者モードに切り換えられた時刻が設定される。
【００７５】
図６は、発表画像関連情報のフォーマットの一例を示す図である。図６を参照して、発表画像関連情報は、ページデータの項目と、部分データの項目と、時刻情報の項目と、を含む。ページデータの項目には、会議に用いられる発表データに含まれる複数ページのうち発表者により指定された発表ページを識別するためのページ識別情報が設定される。部分データの項目には、発表ページのうち発表者により指定された領域を識別するための領域識別情報が設定される。時刻情報の項目には、発表ページのうち発表者により領域が指定された時点の時刻が設定される。
【００７６】
図７は、ポインタ関連情報のフォーマットの一例を示す図である。図７を参照して、ポインタ関連情報は、位置の項目と、時刻情報の項目と、を含む。位置の項目には、発表者がマウスポインタで表示部２０５の画面上を指示した位置を示す位置データが設定され、時刻情報の項目には、位置データで示される位置が指示された時刻が設定される。
【００７７】
図４に戻って、参照情報取得部１２０は、参照情報を取得する。ここで、本実施の形態に係る参照情報には、発表データに対応する参照情報と、発表原稿に対応する参照情報とが含まれる。
【００７８】
まず、発表データに対応する参照情報について説明する。発表データに対応する参照情報は、会議に参加する携帯情報装置２００Ａ〜２００Ｅそれぞれのユーザーが入力する追加情報を、その追加情報が入力される発表データ中の位置およびその追加情報が入力される時刻と関連付けた情報である。具体的には、参照情報は、追加情報を入力したユーザーを識別するためのユーザー識別情報と、追加情報と、追加情報の発表データ中の位置を示す位置情報と、入力期間と、を含む。
【００７９】
参照情報取得部１２０は、操作部２０６が追加情報を受け付けると、発表データに対応する参照情報を生成するとともに、生成された参照情報を、無線ＬＡＮＩ／Ｆ２０９を介して、他の携帯情報装置２００Ｂ〜２００Ｅそれぞれに送信する。追加情報は、携帯情報装置２００Ａを操作するユーザーが操作部２０６を操作して、入力する情報を含む。参照情報取得部１２０は、例えばキーボード２０６Ｃまたはソフトキーボードが文字列を受け付けると受け付けられた文字列を追加情報として受け付ける。また、参照情報取得部１２０は、ユーザーが指またはスタイラスペン等で指示する表示部２０５の表面中の位置を、タッチパネル２０６Ｂが検出する場合、検出された位置に基づいて手書きの描画を追加情報として受け付ける。
【００８０】
参照情報取得部１２０は、追加情報を受け付ける場合、携帯情報装置２００Ａを操作するユーザー、追加情報が入力された発表データ中の位置、および入力期間を決定する。具体的には、参照情報取得部１２０は、携帯情報装置２００Ａにログインしたユーザーを携帯情報装置２００Ａを操作するユーザーに決定する。また、参照情報取得部１２０は、会議情報取得部１１０から入力される会議情報に含まれる発表画像関連情報で特定される発表部分と、表示部２０５に表示されている発表部分の画像中で追加情報が入力される領域の位置を位置情報に決定する。位置情報は、会議データに含まれる複数ページのうち発表部分が含まれるページを識別するためのページ識別情報と、そのページ中で追加情報が配置される領域の位置を示す領域位置情報と、を含む。さらに、参照情報取得部１２０は、計時部１９０により取得される時刻情報に基づいて、入力期間を決定する。入力期間は、追加情報の入力が開始された入力開始時刻から追加情報の入力が終了した入力終了時刻までの期間である。
【００８１】
参照情報取得部１２０は、無線ＬＡＮＩ／Ｆ２０９が他の携帯情報装置２００Ｂ〜２００Ｅのいずれかから発表データに対応する参照情報を受信すると、受信された参照情報を取得する。このため、参照情報取得部１２０は、携帯情報装置２００Ａを操作するユーザーが入力する追加情報に対応する参照情報を生成し、携帯情報装置２００Ｂ〜２００Ｅを操作するユーザーが入力する追加情報に対応する参照情報を受信するので、会議の期間中、会議に参加する全てのユーザーが入力する追加情報にそれぞれ対応する参照情報を継続して取得する。参照情報取得部１２０は、取得された発表データに対応する参照情報をグループ化部１３０および再生期間決定部１３８に出力する。
【００８２】
図８は、発表データに対応する参照情報のフォーマットの一例を示す図である。図８を参照して、発表データに対応する参照情報は、ユーザーＩＤの項目と、追加情報の項目と、位置情報の項目と、入力期間の項目と、を含む。ユーザーＩＤの項目には、ユーザーを識別するためのユーザー識別情報が設定される。追加情報の項目には、ユーザーＩＤの項目に設定されたユーザー識別情報で特定されるユーザーにより入力される追加情報が設定される。位置情報の項目には、会議データ中で追加情報が入力される領域の位置を示す位置情報が設定される。入力期間の項目は、開始時刻の項目と、終了時刻の項目と、を含む。開始時刻の項目は、追加情報の入力が開始された入力開始時刻が設定され、終了時刻の項目は、追加情報の入力が終了した入力終了時刻が設定される。
【００８３】
上記のように、発表データに対応する追加情報は、表示部２０５に表示される発表部分の画像上に入力される。ここで、発表データはページごとに当該ページの基準サイズを規定するための予め定められた基準画像（例えば、枠など）を含むものとする。この場合、基準サイズに対する追加情報の相対的なサイズは、基準サイズに対する発表部分のサイズの割合、表示部２０５に表示される発表部分の画像サイズおよび発表部分の画像上に入力された追加情報のサイズに基づいて一義的に定まる。
【００８４】
続いて、発表原稿に対応する参照情報について説明する。発表原稿に対応する参照情報は、基本的には、発表原稿を用いて会議に参加したユーザーが発表原稿に手書きで書き込んだメモをデータ化したものである。
【００８５】
図４を参照して、参照情報取得部１２０は、発表原稿の読取データに基づいて発表原稿に対応する参照情報を生成する。参照情報取得部１２０は、読取データ取得部１２１、追加情報抽出部１２２、位置決定部１２３、記録媒体対応生成部１２４、条件画像判定部１２５、ユーザー識別情報取得部１２６およびサイズ決定部１２７を含む。
【００８６】
例えば、ユーザーがＭＦＰ４００の操作パネル４６０を操作して、携帯情報装置２００Ａへの読取データの送信を指示すれば、上述したようにＭＦＰ４００は、ＨＤＤ４１５に記憶された読取データおよびその読取データに対応するユーザー識別情報を携帯情報装置２００Ａに送信する。読取データ取得部１２１は、ＭＦＰ４００から受信される読取データを取得する。また、ユーザー識別情報取得部１２６は、ＭＦＰ４００から読取データとともに受信されるユーザー識別情報を取得する。
【００８７】
上記のように、発表原稿のサイズは必ずしも一定の大きさであるとは限らない。また、発表原稿においては、１枚の用紙に形成されるページ数も一定であるとは限らない。そのため、読取データにおいては、基準サイズに対する１ページ当たりの画像サイズの割合が発表原稿ごとに異なる可能性が高い。
【００８８】
そこで、本実施の形態に係る追加情報抽出部１２２は、まず１枚の発表原稿に対応する読取データから、当該発表原稿に含まれる１以上のページを抽出する。この抽出処理は、例えば、パターンマッチング等を用いて発表原稿のページごとに設けられる基準画像を検出することにより実行される。
【００８９】
その後、追加情報抽出部１２２は、抽出されたページごとの読取データとページごとの発表データとを対比することにより、読取データから発表データに存在しない画像を追加情報として抽出する。すなわち、追加情報抽出部１２２は、発表原稿画像に存在するが発表画像に存在しない画像を発表原稿に対応する追加情報として抽出する。このとき、追加情報抽出部１２２は、抽出した追加情報をベクトル化してもよい。これにより、追加情報を表示する際の当該追加情報の画質が向上するとともに、追加情報のデータ量を低減することができる。
【００９０】
さらに、追加情報抽出部１２２は、抽出されたページごとの読取データに含まれる基準画像に基づいて、読取データの１ページ分の画像サイズを読取基準サイズとして定義した上で、読取基準サイズに対する追加情報のサイズの割合を拡大縮小率として算出する。
【００９１】
発表原稿には、発表画像が形成される発表画像領域に加えて、発表画像領域を取り囲む余白領域が含まれる。そのため、発表原稿を使用するユーザーは、発表画像領域から余白領域に延びる引き出し線を用いて余白領域にメモを記載する可能性がある。そこで、余白領域にメモがあることを示すと考えられる特定の形状を有する画像を条件画像として設定する。本実施の形態では、発表データに含まれる複数ページの画像のいずれからの内から外に延びる画像、例えば発表原稿画像のうち発表画像領域から余白領域に延びる線状の画像を、条件画像として設定する。
【００９２】
条件画像判定部１２５は、追加情報抽出部１２２により抽出される追加情報に条件画像が存在するか否かを判定する。
【００９３】
位置決定部１２３は、読取データ中における抽出された追加情報の位置に対応する発表データ中の位置を、抽出された追加情報の追加された位置として決定し、決定した位置を示す情報を当該追加情報に対応する位置情報とする。また、位置決定部１２３は、条件画像判定部１２５により条件画像が存在すると判定された場合、発表データに含まれる複数ページのうち条件画像と重なる発表画像のページ中で、当該ページの条件画像の発表画像領域内の端部の位置を当該追加情報の追加された位置に決定する。これにより、追加情報の位置を発表データのページ内の適切な位置に決定することができる。
【００９４】
さらに、位置決定部１２３は、追加情報抽出部１２２により抽出された追加情報が発表データに含まれる複数ページの画像のいずれの内に存在しない場合、発表データに含まれる複数ページのうち抽出された追加情報が最も近い画像に対応するページと、対応するページに対する抽出された追加情報の相対的な位置と、を追加情報の位置として決定する。
【００９５】
このように、発表データに基づく画像が形成された発表原稿を読み取った読取データから抽出される追加情報の発表データ中の位置が追加情報が最も近い画像に対応するページに対する抽出された追加情報の相対的な位置に決定されるので、読取データから抽出される追加情報を、１以上のグループのいずれかに分類することができる。このため、読取データから抽出される追加情報を、発表データに追加された追加情報とともに再現することができる。
【００９６】
ここで、発表画像または発表原稿上に書き込まれる追加情報の大きさは、ユーザーによって異なる。追加情報が文字である場合、複数のユーザーによってそれぞれ書き込まれる複数の追加情報の大きさにばらつきがあると、後述するように複数の追加情報を表示部２０５に表示する際に各追加情報を確認しにくい。
【００９７】
追加情報に含まれる複数の文字それぞれは、例えば追加情報を含む描画画像を表す画素値のヒストグラム等に基づいて検出することができ、１文字のサイズを検出することができる。そこで、サイズ決定部１２７は、複数の追加情報の各々を、文字のサイズが適切な大きさで表示部２０５に表示することができるように、読取データおよび発表データのうち少なくとも一方に基づいて、追加情報ごとに基準サイズに対する当該追加情報の理想的なサイズを適切文字サイズとして決定する。この場合、適切文字サイズは、例えば読取データに対応する発表原稿に記載された複数の文字の最大、最小または平均のサイズと同じ大きさであってもよいし、発表データ中の複数の文字の最大、最小または平均のサイズと同じ大きさであってもよい。これにより、抽出された追加情報が、発表データの各ページまたは文字等のサイズに応じたサイズで表示されるので、表示される追加情報のサイズのばらつきを低減することができる。
【００９８】
あるいは、サイズ決定部１２７は、複数の追加情報の各々を文字のサイズが適切な大きさで表示部２０５に表示することができるように、携帯情報装置２００Ａ〜２００Ｅのいずれかにおいて発表画像に追加された追加情報のサイズに基づいて、適切文字サイズを決定するようにしてもよい。この場合、適切文字サイズは、例えば携帯情報装置２００Ａ〜２００Ｅのいずれかにおいて発表画像に追加された複数の追加情報の最大、最小または平均のサイズと同じ大きさであってもよい。これにより、抽出された追加情報が、携帯情報装置２００Ａ〜２００Ｅのいずれかにより発表データに追加された追加情報のサイズに応じたサイズで表示されるので、追加情報のサイズのばらつきを低減することができる。
【００９９】
記録媒体対応生成部１２４は、ユーザー識別情報取得部１２６により取得されるユーザー識別情報、追加情報抽出部１２２により抽出された追加情報、追加情報抽出部１２２により算出された拡大縮小率、位置決定部１２３により決定される位置を示す位置情報、条件画像判定部１２５による判定結果、およびサイズ決定部１２７により決定された適切文字サイズに基づいて、発表原稿に対応する参照情報を生成する。
【０１００】
図９は、発表原稿に対応する参照情報のフォーマットの一例を示す図である。図９を参照して、発表原稿に対応する参照情報は、ユーザーＩＤの項目と、追加情報の項目と、位置情報の項目と、拡大縮小率の項目と、適切文字サイズの項目と、条件画像判定結果の項目と、を含む。ユーザーＩＤの項目には、ユーザー識別情報取得部１２６により取得されるユーザー識別情報が設定される。追加情報の項目には、追加情報抽出部１２２により抽出された追加情報が設定される。位置情報の項目には、位置決定部１２３により決定された追加情報の位置を示す位置情報が設定される。拡大縮小率の項目には、追加情報抽出部１２２により算出される拡大縮小率が設定される。適切文字サイズの項目には、サイズ決定部１２７により決定された適切文字サイズが設定される。条件画像判定結果の項目には、条件画像判定部１２５による判定結果が設定される。参照情報取得部１２０は、取得された発表原稿に対応する参照情報をグループ化部１３０に出力する。
【０１０１】
なお、発表原稿に対応する参照情報は、少なくとも追加情報および位置情報の項目を含んでいればよく、ユーザーＩＤ、拡大縮小率、適切文字サイズおよび条件画像判定結果の項目を含まなくてもよい。
【０１０２】
図４に戻って、グループ化部１３０は、参照情報取得部１２０から入力される複数の参照情報を、１以上のグループのいずれかに分類する。本実施の形態では、グループ化部１３０は、まず発表データに対応する複数の参照情報について、位置情報により示される位置が発表データ中の所定範囲内にありかつ入力開始時刻が所定期間以内である１以上の参照情報を同じグループに分類する。なお、入力開始時刻が所定期間以内の１以上の参照情報を同じグループに分類するようにしてもよい。ここで、所定範囲および所定期間は、携帯情報装置２００Ａを操作するユーザーにより設定されてもよいし、会議システム１において予め定められてもよい。会議システム１において予め定められる場合、所定範囲および所定期間は、携帯情報装置２００Ａ〜２００Ｄで同じ値となる。所定範囲および所定期間は、携帯情報装置２００Ａのユーザーにより設定される値である。所定範囲が短いほど、または所定期間が短いほど、グループ数が多くなる。反対に、所定範囲が長いほど、または所定期間が長いほど、グループ数が少なくなる。ここでは、グループ化部１３０が、位置情報により示される位置が発表データ中の所定範囲内にあり、かつ入力開始時間が所定期間以内である１以上の参照情報を同じグループに分類する場合を例に説明する。
【０１０３】
上記のように、発表画像に対応する参照情報には入力期間が含まれない。そこで、グループ化部１３０は、発表データに対応する複数の参照情報をグループ化した後、発表原稿に対応する複数の参照情報の各々を、発表データに対応する複数の参照情報が分類された複数のグループのうち、当該参照情報の追加情報の位置が、複数のグループのうちの１または複数のグループであって当該グループに含まれる複数の参照情報のいずれかの位置から所定範囲に含まれるグループのすべてに分類する。これにより、発表データに対応する複数の参照情報と記録媒体に対応する複数の参照情報とを複数のグループに適切に分類することができる。また、グループ化部１３０は、発表原稿に対応する参照情報の位置から所定範囲内に発表データに基づいて設定されたグループが存在しない場合に、その参照情報から最も近い位置にあるグループに当該参照情報を分類する。なお、グループ化部１３０は、参照情報取得部１２０からの入力が発表画像に対応する参照情報のみである場合、位置情報により示される位置が発表データ中の所定範囲内にある１以上の参照情報を同じグループに分類する。
【０１０４】
グループ化部１３０は、複数の参照情報を１以上のグループに分類した後、１以上のグループごとに１以上の参照情報を、グループリスト表示部１３１、グループ期間決定部１３３、参照情報表示部１５０に出力する。
【０１０５】
グループ期間決定部１３３には、グループ化部１３０から１以上のグループごとに発表データに対応する１以上の参照情報が入力される。グループ期間決定部１３３は、１以上のグループごとにグループ期間を決定する。グループ期間決定部１３３は、１以上のグループごとに、そのグループに属する１以上の参照情報にそれぞれ含まれる入力期間に基づいてグループ期間を決定する。具体的には、グループ期間決定部１３３は、処理対象とするグループに属する１以上の参照情報にそれぞれ含まれる１以上の入力開始時刻のうち最も前の時刻から処理対象とするグループに属する１以上の参照情報にそれぞれ含まれる１以上の入力終了時刻のうち最も後の時刻までの期間をグループ期間として決定する。グループ期間決定部１３３は、１以上のグループごとに決定されたグループ期間を再生期間決定部１３８に出力する。
【０１０６】
ここで、参照情報取得部１２０からグループ化部１３０に入力される参照情報が発表画像に対応する参照情報のみである場合、グループ期間決定部１３３に入力される参照情報には入力期間が存在しない。そこで、グループ期間決定部１３３は、入力される参照情報の全てに入力期間が存在しない場合に、例えば全てのグループのグループ期間を発表開始時刻から発表終了時刻までの期間に決定する。
【０１０７】
グループリスト表示部１３１は、グループ化部１３０から１以上のグループごとに１以上の参照情報が入力され、会議情報取得部１１０から会議情報が入力される。グループリスト表示部１３１は、１以上のグループそれぞれを識別するためのグループ識別情報を表示部２０５に選択可能に表示する。グループリスト表示部１３１は、グループ化部１３０から１以上のグループごとに１以上の参照情報に基づいて、１以上のグループそれぞれのグループ識別情報を生成する。グループ識別情報は、そのグループに属する１以上の参照情報にそれぞれ含まれる１以上の追加情報、そのグループに属する１以上の参照情報にそれぞれ含まれる１以上の位置情報で特定される領域の位置を示す情報およびそのグループのグループ期間のうち少なくとも１つである。
【０１０８】
ここでは、グループ識別情報を、グループに属する１以上の参照情報にそれぞれ含まれる１以上の追加情報およびそのグループに属する１以上の参照情報にそれぞれ含まれる１以上の位置情報とする場合を例に説明する。グループリスト表示部１３１は、グループに属する１以上の参照情報と、会議情報取得部１１０から入力される会議情報に含まれる発表画像関連情報とに基づいて、１以上の参照情報にそれぞれ対応する１以上の参照画像を生成する。参照画像は、参照情報に含まれるユーザー識別情報と、追加情報と、発表画像関連情報で特定される発表部分中で参照情報に含まれる位置情報で特定される領域の画像と、を含む。具体的には、グループリスト表示部１３１は、発表画像関連情報で特定される発表部分中で、参照情報に含まれる位置情報で特定される領域を含む部分の画像に、参照情報に含まれる追加情報の画像を参照情報に含まれる位置情報で特定される領域に合成した画像に、参照情報に含まれるユーザー識別情報の画像を付加することにより、参照画像を生成する。グループリスト表示部１３１は、グループに属する１以上の参照情報にそれぞれ対応する１以上の参照画像を生成し、生成された１以上の参照画像を配列した画像をグループ識別情報として生成する。グループリスト表示部１３１は、１以上のグループにそれぞれ対応して生成された１以上のグループ識別情報を配列したグループリストを表示部２０５に表示する。
【０１０９】
選択部１３４は、グループ選択部１３５、参照情報選択部１３６および指標選択部１３７を含む。グループ選択部１３５は、グループリスト表示部１３１により表示部２０５に選択可能に表示された１以上のグループ識別情報のうちから１つをユーザーが操作部２０６に入力する操作に基づいて選択する。具体的には、グループ選択部１３５は、例えば表示部２０５に表示される１以上のグループ識別情報のうちのいずれかの位置にマウスポインタが配置された状態でマウス２０６Ｄのクリック操作を受け付けることにより、マウスポインタが配置される位置に表示されたグループ識別情報で識別されるグループを選択する。これにより、ユーザーは所望のグループを容易に選択することができる。グループ選択部１３５は、ユーザーによりグループが選択されることに応じて、選択されたグループのグループ識別情報を再生期間決定部１３８および参照情報表示部１５０に出力する。
【０１１０】
参照情報選択部１３６は、グループ選択部１３５によりグループが選択された状態で、選択されたグループ識別情報に含まれる１以上の参照画像のうち１つをユーザーが操作部２０６に入力する操作に基づいて選択する。具体的には、参照情報選択部１３６は、グループ識別情報に含まれる１以上の参照画像のうちのいずれかの位置にマウスポインタが配置された状態で、マウス２０６Ｄのクリック操作を受け付けることにより、マウスポインタが配置される位置に表示された参照画像に対応する参照情報を選択する。参照情報選択部１３６は、ユーザーにより参照情報が選択されることに応じて、選択された参照情報を識別するための参照情報識別情報を再生期間決定部１３８および参照情報表示部１５０に出力する。
【０１１１】
後述するように、参照情報選択部１３６により参照情報が選択されると、参照情報表示部１５０により表示部２０５に選択された参照情報の追加情報が表示される。このとき、当該参照情報が条件画像の存在を示す判定結果を含む場合には、追加情報に代えて、当該参照情報の存在を示す指標が表示部２０５に表示される。
【０１１２】
指標選択部１３７は、参照情報選択部１３６により参照情報が選択されることにより表示部２０５に１以上の指標が表示された状態で、１以上の指標のうち１つをユーザーが操作部２０６に入力する操作に基づいて指標を選択する。具体的には、指標選択部１３７は、参照情報に含まれる１以上の指標のうちのいずれかの位置にマウスポインタが配置された状態で、マウス２０６Ｄのクリック操作を受け付けることにより、マウスポインタが配置される位置に表示された指標に対応する指標を選択する。指標選択部１３７は、ユーザーにより指標が選択されることに応じて、選択された指標を識別するための指標識別情報を参照情報表示部１５０に出力する。
【０１１３】
再生期間決定部１３８は、グループ期間決定部１３３から１以上のグループそれぞれのグループ期間が入力され、選択部１３４からグループ識別情報が入力される。再生期間決定部１３８は、グループ識別情報が入力されることに応じて、グループ期間決定部１３３から入力される１以上のグループそれぞれのグループ期間のうちからグループ識別情報で特定されるグループのグループ期間を決定し、決定したグループ期間を再生期間に決定する。再生期間は、再生開始時刻から再生終了時刻までの期間を示す。再生期間決定部１３８は、選択部１３４からグループ識別情報が与えられると、グループ期間決定部１３３から入力される１以上のグループそれぞれのグループ期間のうちからグループ識別情報が示すグループのグループ期間を再生期間に決定する。
【０１１４】
さらに、再生期間決定部１３８は、選択部１３４からグループ識別情報が入力された後に、参照情報識別情報が入力される場合がある。再生期間決定部１３８は、選択部１３４から参照情報識別情報が与えられると、参照情報取得部１２０から入力される複数の参照情報のうちから参照識別情報が示す参照情報を特定し、特定された参照情報に含まれる入力期間を再生期間に決定する。再生期間決定部１３８は、決定された再生期間を会議情報出力部１６０に出力する。
【０１１５】
会議情報出力部１６０は、会議情報取得部１１０から会議情報が入力され、再生期間決定部１３８から再生期間が入力される。会議情報出力部１６０は、会議情報のうち再生期間に対応する部分を出力する。これにより、追加情報が入力された期間の会議の状態を限定して再現することができる。会議情報出力部１６０は、発表データ部分表示部１６１を含むとともに、図示しない会議音声出力部、テキスト変換出力部、静的出力制御部および動的出力制御部を含む。
【０１１６】
発表データ部分表示部１６１は、会議情報取得部１１０により取得される会議情報の発表画像関連情報に基づいて、再生期間中に対応する発表部分を発表画像として表示部２０５の表示面中で予め定められた再現領域に表示する。具体的には、発表データ部分表示部１６１は、発表画像関連情報のうち時刻情報の項目に再生期間内の時刻が設定された発表画像関連情報を抽出する。発表データ部分表示部１６１は、抽出された発表画像関連情報のページデータの項目に設定されたページ識別情報および部分データの項目に設定された領域識別情報で特定される発表データ中の発表部分を特定する。
【０１１７】
会議音声出力部は、会議情報取得部１１０により取得される会議情報の音声関連情報に基づいて、再生期間中の発表者の音声を音声出力部２０８から出力する。具体的には、会議音声出力部は、音声データの項目に再生期間内の時刻が設定された音声関連情報をすべて抽出する。会議音声出力部は、抽出された音声関連情報の音声データの項目に設定された音声データを音声出力部２０８から出力する。それにより、ユーザーは会議における発表内容をより詳細に把握することができる。
【０１１８】
テキスト変換出力部は、音声認識することにより会議情報取得部１１０から取得される音声関連情報の音声データをテキストデータに変換する。また、テキスト変換出力部は、再生期間中の音声を文字認識したテキストデータの文字列を表示部２０５の表示面で予め定められた領域に表示する。具体的には、テキスト変換出力部は、音声データの項目に再生期間内の時刻が設定された音声関連情報をすべて抽出する。テキスト変換出力部は、抽出された音声関連情報の音声データをテキストデータに変換し、変換されたテキストデータの文字列を表示部２０５に表示する。それにより、会議中の発表者の音声をユーザーに視覚で認識させることができる。
【０１１９】
テキスト変換出力部は、再生期間中のテキストデータの文字列に限らず再生期間以外の期間におけるテキストデータの文字列を表示部２０５に表示してもよい。この場合、テキスト変換出力部は、例えば再生期間中のテキストデータの文字列を再生期間を除く期間中のテキストデータの文字列とは異なる表示態様で強調表示する。それにより、ユーザーは、再生期間における発表者の音声を容易に認識することができる。
【０１２０】
静的出力制御部は、会議情報取得部１１０により取得される会議情報のポインタ関連情報に基づいて、再生期間中のマウスポインタの軌跡を示す軌跡画像を、表示部２０５に発表データ部分表示部１６１により表示される発表画像上に重畳表示する。具体的には、静的出力制御部は、ポインタ関連情報のうち時刻情報の項目に再生期間内の時刻が設定されたポインタ関連情報をすべて抽出する。静的出力制御部は、再現領域中で、抽出されたポインタ関連情報の位置の項目に設定された位置データで特定される位置を含む軌跡画像を表示する。再現領域には、再現期間における発表部分の画像が表示されているので、ユーザーは、再生期間における発表者のマウスポインタの軌跡を発表部分とともに容易に認識することができる。静的出力制御部は、マウスポインタの軌跡画像の表示態様を時間の経過とともに変化させて表示する。それにより、ユーザーは再生期間における発表者のマウスポインタの移動方向、移動速度等の操作状態を認識することができる。
【０１２１】
動的出力制御部は、会議情報取得部１１０により取得される会議情報のポインタ関連情報に基づいて、再生期間中のマウスポインタの動きを示す動画を表示部２０５の再現領域に重畳表示する。具体的には、動的出力制御部は、ポインタ関連情報のうち時刻情報の項目に再生期間内の時刻が設定されたポインタ関連情報をすべて抽出する。動的出力制御部は、再現領域中で、抽出されたポインタ関連情報の位置の項目に設定された位置データで特定される位置にマウスポインタの画像を表示する。再現領域には、再現期間における発表部分の画像が表示されているので、ユーザーは、再生期間における発表者のマウスポインタの位置、移動方向および移動速度等の操作状態を容易に認識することができる。
【０１２２】
再生動作指示部１７０は、発表者が操作部２０６を操作して会議情報の再生に関する動作を指示すると、指示された動作を受け付ける。また、再生動作指示部１７０は、指示された動作に基づいて会議情報出力部１６０の動的出力制御部を制御する。例えば、再生動作指示部１７０は、会議情報の再生が指示されると、動的出力制御部に再生期間中のポインタの動きを示す動画を再生させる。また、再生動作指示部１７０は、会議情報の再生中に会議情報の再生の停止が指示されると、動的出力制御部に再生されている動画を停止させる。さらに、再生動作指示部１７０は、会議情報の逆再生が指示されると、動的出力制御部に再生期間中のポインタの動きを示す動画を逆再生する。また、再生動作指示部１７０は、会議情報の逆再生中に会議情報の逆再生の停止が指示されると、動的出力制御部に逆再生されている動画を停止させる。
【０１２３】
なお、再生動作指示部１７０は、指示された動作に基づいて動的出力制御部により会議音声出力部を制御してもよい。この場合、再生動作指示部１７０は、会議情報の再生が指示されると、動的出力制御部により会議音声出力部に再生期間中の発表者の音声を再生させる。また、再生動作指示部１７０は、会議情報の再生中に会議情報の再生の停止が指示されると、動的出力制御部により会議音声出力部に再生されている音声を停止させる。
【０１２４】
会議情報出力部１６０は、再生期間決定部１３８により決定された再生期間に対応する会議情報の部分を１回のみ再生してもよい。または、会議情報出力部１６０は、再生期間決定部１３８により決定された再生期間に対応する会議情報の部分を繰り返し再生してもよい。
【０１２５】
また、再生期間決定部１３８は、グループ選択部１３５により第１のグループが選択された後に第２のグループが選択される場合であって、第１のグループに対応する第１のグループ期間と第２のグループに対応する第２のグループ期間とが重なる場合に、第１のグループ期間を再生期間に決定した後、第２のグループ期間のうち第１のグループ期間と重ならない部分を再生期間に決定する。この場合、第１のグループ期間と第２のグループ期間とが重なる期間に対応する会議情報が繰り返し出力されない。したがって、会議情報の出力が冗長にならない。
【０１２６】
さらに、再生期間決定部１３８は、参照情報選択部１３６により第１の参照情報が選択された後に第２の参照情報が選択される場合であって、第１の参照情報に対応する第１の入力期間と第２の参照情報に対応する第２の入力期間とが重なる場合に、第１の入力期間を再生期間に決定した後、第２の入力期間のうち第１の入力期間と重ならない部分を再生期間に決定する。この場合においても、第１の入力期間と第２の入力期間とが重なる期間に対応する会議情報が繰り返し出力されない。したがって、会議情報の出力が冗長にならない。
【０１２７】
参照情報表示部１５０は、グループ化部１３０から１以上のグループごとの１以上の参照情報が入力され、選択部１３４からグループ識別情報が入力される。また、参照情報表示部１５０は、選択部１３４から指標識別情報が入力される場合がある。参照情報表示部１５０は、追加情報表示部１５１、指標表示部１５２および外側追加情報表示部１５３を含む。追加情報表示部１５１は、選択部１３４からグループ識別情報が入力されることに応じて、グループ識別情報で特定されるグループに属する１以上の参照情報に基づいて、表示部２０５の再現領域に１以上の参照情報にそれぞれ含まれる１以上の追加情報を表示する。具体的には、追加情報表示部１５１は、参照情報に含まれる追加情報の画像を、表示部２０５の再現領域中で参照情報に含まれる位置情報で特定される位置に表示する。表示部２０５の再現領域には、発表データ部分表示部１６１によって発表部分の画像が表示されているので、追加情報表示部１５１は、追加情報の画像を発表部分の画像に重畳表示する。追加情報表示部１５１は、条件画像の存在を示す判定結果を含む参照情報、または余白領域内に位置情報を含む参照情報については、その参照情報に含まれる追加情報を表示しない。そのような追加情報は、再現領域に位置しないからである。
【０１２８】
追加情報表示部１５１は、選択部１３４から参照情報識別情報が入力されることに応じて、参照情報識別情報で特定される参照情報に含まれる追加情報の画像を、他の追加情報の画像の表示態様と異なる表示態様で表示する。これにより、ユーザーにより選択された参照画像に対応する追加画像の発表部分の画像中の位置を、ユーザーに通知することができる。
【０１２９】
指標表示部１５２は、グループ識別情報で特定されるグループに属する１以上の参照情報のうち少なくとも一部が条件画像の存在を示す判定結果を含む場合、またはグループ識別情報で特定されるグループに属する１以上の参照情報のうち少なくとも一部が余白領域内に位置する追加情報を含む場合に、当該参照情報の存在を示す指標を表示部２０５に表示する。具体的には、指標表示部１５２は、表示部２０５の再現領域中で参照情報に含まれる位置情報により特定される位置、または位置情報により特定される位置の近傍でかつ再現領域（発表画像領域の発表部分）内の位置に参照情報の存在を示す指標を重畳表示する。これにより、ユーザーは、発表データ中の発表部分を参照しつつ、その発表部分に追加された追加情報の存在を容易に認識することができる。
【０１３０】
外側追加情報表示部１５３は、選択部１３４から指標識別情報が入力されることに応じて、指標識別情報で特定される指標に対応する追加情報を表示部２０５に表示する。この追加情報は、発表原稿の余白領域に書き込まれた画像を含む。このとき、外側追加情報表示部１５３は、当該追加情報を表示部２０５に表示される発表部分の画像上に重畳表示してもよいし、表示部２０５の画面上の発表部分の画像とは異なる位置に表示してもよい。このように、発表データにおける複数ページの画像のいずれの内に存在しない追加情報を表示することができる。
【０１３１】
以下の説明では、ある会議に参加した携帯情報装置２００Ａ，２００Ｂ，２００Ｃ，２００Ｄ，２００ＥそれぞれのユーザーをユーザーＡ、ユーザーＢ、ユーザーＣ、ユーザーＤおよびユーザーＥと呼ぶ。また、発表原稿を用いて会議に参加した３人のユーザーをユーザーＦ、ユーザーＧおよびユーザーＨと呼ぶ。
【０１３２】
図１０は、ユーザーＡが携帯情報装置２００Ａを操作して会議に参加するときの表示部２０５の表示状態の一例を示す図である。図１０を参照して、携帯情報装置２００Ａの表示部２０５の画面上には、参加ボタン２２１、発表ボタン２２２および一覧ボタン２２３が表示されるとともに、発表画像表示領域２３１が設けられる。ユーザーＡは、操作部２０６を用いて参加ボタン２２１、発表ボタン２２２および一覧ボタン２２３をそれぞれ操作することができる。
【０１３３】
参加ボタン２２１は、「参加中」の文字列および「個人モード」の文字列のいずれかが表示される。発表ボタン２２２は、デフォルトで「個人モード」の文字列が表示される。ユーザーＡが、「個人モード」の文字列が表示された参加ボタン２２１を操作すると、携帯情報装置２００Ａは、ユーザーＩＤおよびパスワードを用いてＭＦＰ４００へ会議の参加を要求する。ＭＦＰ４００により会議への参加の要求が許可されると、参加ボタン２２１には「参加中」の文字列が表示される。このとき、発表画像表示領域２３１には、発表画像が表示される。一方、ＭＦＰ４００により会議への参加の要求が許可されないと、参加ボタン２２１には「個人モード」の文字列が表示される。発表ボタン２２２に「個人モード」の文字列が表示される場合は、携帯情報装置２００ＡのユーザーＡが会議に参加していないことを示す。
【０１３４】
発表ボタン２２２は、「発表」の文字列と、「書込み」の文字列とのいずれかが表示される。発表ボタン２２２は、デフォルトで「書込み」の文字列が表示される。ユーザーＡが、「書込み」の文字列が表示された発表ボタン２２２を操作すると、ＣＰＵ２０１は、ＭＦＰ４００に自己が発表者となるべき旨を要求する。ＭＦＰ４００により発表者となるべき旨の要求が許可され、発表権限が付与されると、発表ボタン２２２には「発表」の文字列が表示される。ＭＦＰ４００により発表者となるべき旨の要求が許可されないことにより発表権限が付与されないと、発表ボタン２２２には「書込み」の文字列が表示されたままである。
【０１３５】
ＣＰＵ２０１により取得される発表データに対応する参照情報の具体例を説明する。図１１は、ユーザーＡの携帯情報装置２００Ａにおいて生成される発表データに対応する参照情報の一例を示す図である。図１１を参照して、発表画像表示領域２３１に発表画像が表示されるとともに、発表画像の左上の領域に、追加情報として手書きの描画画像ｐ１が配置されている。ここでは、追加情報の入力期間を、１３時００分００秒から１３時００分０７秒までとしている。
【０１３６】
図１２は、ユーザーＢの携帯情報装置２００Ｂにおいて生成される発表データに対応する参照情報の一例を示す図である。図１２を参照して、発表画像表示領域２３１に発表画像が表示されるとともに、発表画像の左上の領域に、追加情報として吹き出しおよび「誤記」という文字列を含む画像ｐ２が配置されている。ここでは、追加情報の入力期間を、１３時００分０５秒から１３時００分０９秒までとしている。
【０１３７】
図１３は、ユーザーＣの携帯情報装置２００Ｃにおいて生成される発表データに対応する参照情報の一例を示す図である。図１３を参照して、発表画像表示領域２３１に発表画像が表示されるとともに、発表画像の右上の領域に、追加情報として手書きの描画画像ｐ３が配置されている。ここでは、追加情報の入力期間を、１３時００分０８秒から１３時００分２８秒までとしている。
【０１３８】
図１４は、ユーザーＤの携帯情報装置２００Ｄにおいて生成される発表データに対応する参照情報の一例を示す図である。図１４を参照して、発表画像表示領域２３１に発表画像が表示されるとともに、発表画像の左下の領域に、追加情報として手書きの描画画像ｐ４が配置されている。ここでは、追加情報の入力期間を、１３時００分３０秒から１３時００分３８秒までとしている。
【０１３９】
図１５は、ユーザーＥの携帯情報装置２００Ｅにおいて生成される発表データに対応する参照情報の一例を示す図である。図１５を参照して、発表画像表示領域２３１に発表画像が表示されるとともに、発表画像の左下の領域に、追加情報として手書きの描画画像ｐ５が配置されている。ここでは、追加情報の入力期間は、１３時００分２５秒から１３時００分２９秒までとしている。
【０１４０】
会議終了後に生成される発表原稿に対応する参照情報の具体例を説明する。図１６は、ユーザーＦの発表原稿に対応する参照情報の一例を説明するための模式図である。図１６では、Ａ４サイズの用紙上に図１１〜図１５に示される発表画像が印字された発表原稿が示される。また、図１６の発表原稿においては、発表画像領域と余白領域との間の境界線が一点鎖線で示される。発表画像領域内の左上の領域に、追加情報として「誤記有り」という手書きの文字列からなる描画画像ｐ６が配置されている。
【０１４１】
図１７は、ユーザーＧの発表原稿に対応する参照情報の一例を説明するための模式図である。図１７では、Ａ３サイズの用紙上に図１１〜図１５に示される発表画像と次のページの発表画像とが印字された発表原稿が示される。また、図１７の発表原稿においては、発表画像領域と余白領域との間の境界線が一点鎖線で示される。さらに、この発表原稿においては、余白領域の左上の領域に、追加情報として「なおす」という手書きの文字列からなる描画画像ｐ７が配置されている。
【０１４２】
図１８は、ユーザーＨの発表原稿に対応する参照情報の一例を説明するための模式図である。図１８では、Ａ４サイズの用紙上に図１１〜図１５に示される発表画像が印字された発表原稿が示される。また、図１８の発表原稿においては、発表画像領域と余白領域との間の境界線が一点鎖線で示される。余白部分から発表画像領域内の左下の領域まで延びるように追加情報として引き出し線が配置されている。図１８の引き出し線は、上記の条件画像に相当する。余白領域内に位置する引き出し線の一端部近傍に、追加情報として「ポイント」という手書きの文字列が配置されている。引き出し線および手書きの文字列により描画画像ｐ８が形成されている。
【０１４３】
図１９は、発表データに対応する参照情報のグループ化の例を示す模式図である。図１９では、図１１〜図１５に示したユーザーＡ〜Ｅそれぞれの参照情報をグループ化する場合を例に示している。図１９を参照して、ユーザーＡ〜Ｅそれぞれの参照情報の入力期間が時間軸上に白抜きの線で示される。ユーザーＡ〜Ｅそれぞれの参照情報は、入力開始時刻が所定期間以内にあり、かつ、位置情報により示される位置が発表画像中の所定範囲内にある１以上の参照情報が同じグループに分類される。
【０１４４】
具体的には、所定期間として、例えばｎ（ｎは自然数）秒間が予め設定される。また、所定範囲として、例えば追加情報の入力された位置を中心としてｍ（ｍは自然数）画素の範囲が設定される。この場合、ユーザーＡ〜Ｅにそれぞれ対応する５つの参照情報それぞれは、当該参照情報に含まれる入力開始時刻からｎ秒間の間に入力開始時刻が存在し、かつ、当該参照情報に含まれる追加情報の位置からｍ画素の範囲内にある参照情報を、当該参照情報と同じグループに分類する。このように、所定期間は、処理対象とする参照情報の入力開始時刻を基準として相対的に定められる。また、所定範囲は、処理対象の参照情報に含まれる追加情報の位置を基準として相対的に定められる。なお、互いに異なる追加情報の少なくとも一部が重複することが、所定範囲内であることを満たす条件として予め設定されてもよい。
【０１４５】
図１１および図１２を参照して、ユーザーＡの追加情報の位置とユーザーＢの追加情報の位置とはほぼ等しく、ユーザーＢの追加情報はユーザーＡの追加情報から所定範囲内にあるものとする。また、ユーザーＡの参照情報に含まれる入力開始時刻とユーザーＢの参照情報に含まれる入力開始時刻との間の差分は１０秒以内であり、所定期間内であるものとする。この場合、図１９を参照して、ユーザーＡの参照情報とユーザーＢの参照情報とは第１グループに分類される。また、ユーザーＡの参照情報に含まれる入力開始時刻１３：００：００からユーザーＢの参照情報に含まれる入力終了時刻１３：００：０９までを第１グループのグループ期間αに決定する。
【０１４６】
図１３を参照して、ユーザーＣの参照情報の追加情報は、ユーザーＡ，Ｂ，Ｄ，Ｅの参照情報の追加情報から大きく離間しており、ユーザーＡ，Ｂ，Ｄ，Ｅの追加情報はユーザーＡの追加情報から所定範囲内にないものとする。この場合、図１９を参照して、ユーザーＣの参照情報のみを第２グループに分類する。また、ユーザーＣの参照情報に含まれる入力開始時刻１３：００：０８からユーザーＣの参照情報に含まれる入力終了時刻１３：００：２８までを第２グループのグループ期間βに決定する。
【０１４７】
図１４および図１５を参照して、ユーザーＤの追加情報の位置とユーザーＥの追加情報の位置とはほぼ等しく、ユーザーＥの追加情報はユーザーＤの追加情報から所定範囲内にあるものとする。また、ユーザーＤの参照情報に含まれる入力開始時刻とユーザーＥの参照情報に含まれる入力開始時刻との間の差分は１０秒以内であり、所定期間内であるものとする。この場合、図１９を参照して、ＣＰＵ２０１は、ユーザーＤの参照情報とユーザーＥの参照情報とを第３グループに分類する。また、ユーザーＥの参照情報に含まれる入力開始時刻１３：００：２５からユーザーＤの参照情報に含まれる入力終了時刻１３：００：３８までを第３グループのグループ期間γに決定する。
【０１４８】
図２０は、発表原稿に基づく参照情報のグループ化の例を示す模式図である。図２０では、図１６〜図１８に示したユーザーＦ〜Ｈそれぞれの参照情報をグループ化する場合を例に示している。図２０を参照して、図１９のグループ化によりユーザーＡ〜Ｆの参照情報が分類された第１〜第３グループに対応する画像上の占有領域がそれぞれ二点鎖線で示される。第１〜第３グループに対応する画像上の占有領域は、各グループに含まれる１以上の追加情報の位置から所定範囲内であることを示す領域である。この場合、発表原稿に基づくユーザーＦ〜Ｈの複数の参照情報の各々は、第１〜第３グループのうちいずれかに分類される。
【０１４９】
本例では、ユーザーＦに対応する描画画像ｐ６の一部が第１グループに対応する画像上の占有領域内に含まれる。これにより、ユーザーＦの参照情報が第１グループに分類される。
【０１５０】
また、本例では、ユーザＨに対応する描画画像ｐ８は、条件画像である引き出し線を含む。この場合、描画画像ｐ８に対応する位置情報は、発表画像領域内の「音声再現」という文字列の近傍に設定される。そのため、ユーザーＨに対応する描画画像ｐ８の一部が第３グループに対応する画像上の占有領域内に含まれる。これにより、ユーザーＨの参照情報が第３グループに分類される。
【０１５１】
ところで、本例では、ユーザーＧに対応する描画画像ｐ７は、第１〜第３グループのいずれのグループに対応する画像上の占有領域内にも含まれない。この場合、ユーザーＧの参照情報は、第１〜第３グループのうち描画画像ｐ７から最も近い位置にある第１グループに分類される。
【０１５２】
図１０を参照して、ユーザーＡが一覧ボタン２２３を操作すると、第１〜第３グループそれぞれのグループ識別情報を配列したグループリストが表示部２０５に表示される。図２１および図２２は、グループリストの一例を示す図である。図２１および図２２を参照して、発表画像表示領域２３１の側方にグループリスト表示領域２４１が設けられる。また、グループリスト表示領域２４１の上方に文字サイズボタン２９１および戻るボタン２９２が表示される。
【０１５３】
グループリスト表示領域２４１にはスライダ２４９が設けられる。スライダ２４９は、グループリスト表示領域２４１においてグループリストを表示可能な領域を拡張する。図２１では、スライダ２４９が画面の上方に位置することにより主として第１グループのグループリストが表示される。一方、図２２では、スライダ２４９が画面の下方に位置することにより主として第３グループのグループリストが表示される。
【０１５４】
グループリスト表示領域２４１には、第１、第２および第３のグループそれぞれを識別するためのグループ識別情報２４２が表示される。各グループ識別情報２４２においては、そのグループ識別情報２４２に対応するグループに属する参照情報の参照画像２４３が配列される。各参照画像２４３は、その参照情報に含まれるユーザー識別情報と、追加情報と、発表画像関連情報で特定される発表部分中で参照情報に含まれる位置情報で特定される領域の画像と、を含む。それにより、ユーザーＡは、１以上のグループを追加情報で識別することができる。なお、グループ識別情報２４２は、１以上のグループのグループ期間を含んでもよい。この場合、ユーザーＡは、１以上のグループをグループ期間で識別することができる。
【０１５５】
さらに、グループ識別情報２４２においては、各参照画像２４３の近傍に、当該参照画像２４３で表される参照情報が発表データおよび発表原稿のいずれに対応するのかを示す文字列が表示される。したがって、ユーザーＡは、各参照情報の種別を容易に識別することができる。
【０１５６】
ユーザーＡは、操作部２０６を操作することによりグループリスト表示領域２４１に表示される複数のグループ識別情報２４２のうち１つを選択することができる。図２３は、グループリストから１つのグループ識別情報２４２が選択された場合の表示例を示す図である。ユーザーＡが１つのグループ識別情報２４２を選択すると、発表画像表示領域２３１の下方に音声テキスト表示領域２５１および再生操作表示領域２６１が設けられる。このとき、選択されたグループ識別情報２４２に対応するグループ期間が再生期間に決定される。
【０１５７】
図２３を参照して、グループリスト表示領域２４１においては、ユーザーＡにより選択されたグループ識別情報２４２のうち配列された参照画像２４３を除く部分が、選択されていない他のグループ識別情報２４２とは異なる態様で表示される。図２３では、第１グループのグループ識別情報２４２のうち配列された参照画像２４３を除く部分がハッチングで示される。これにより、ユーザーＡは、自己が選択したグループ識別情報２４２を容易に識別することができる。
【０１５８】
発表画像表示領域２３１には、選択された第１グループのグループ期間中に対応する発表画像４０１が表示される。また、その発表画像４０１上には、選択された第１グループのグループ期間中のマウスポインタの軌跡を示す軌跡画像４０２が表示される。また、その発表画像４０１上には、選択された第１グループに属する１以上の参照情報に含まれる１以上の追加情報として、描画画像ｐ１，ｐ２，ｐ６が半透明の状態で表示される。
【０１５９】
このとき、発表データに対応する追加情報である描画画像ｐ１，ｐ２の発表画像上のサイズは、発表部分の画像上に入力された追加情報のサイズに基づいて一義的に定まる。一方、発表原稿に対応する追加情報である描画画像ｐ６の発表画像上のサイズは、その追加情報について追加情報抽出部１２２により算出された拡大縮小率に基づいて定まる。それにより、発表画像表示領域２３１上には、ユーザーＦの発表原稿が再現されるように、発表画像上にユーザーＦの描画画像ｐ６が表示される。
【０１６０】
ところで、第１グループに属するユーザーＧの描画画像ｐ７は、余白領域に位置する。図２３の例では、発表画像表示領域２３１には、表示画像領域しか表示されない。そこで、本例では、描画画像ｐ７に代えて、余白領域に追加情報（描画画像ｐ７）の少なくとも一部が存在することを示す付箋状の指標ｐ１１が当該追加情報の近傍でかつ表示画像領域内の位置に半透明の状態で表示される。
【０１６１】
音声テキスト表示領域２５１には、選択された第１グループのグループ期間中の音声を文字認識したテキストデータの文字列が表示される。さらに、再生操作表示領域２６１には、会議情報の再生の開始、再生の停止、逆再生の開始、および逆再生の停止を指示するための操作ボタンと、会議情報の再生時刻を示す時刻スライダが表示される。
【０１６２】
この状態で、ユーザーＡは、再生操作表示領域２６１に表示される操作ボタンを操作することにより、例えば選択された第１グループのグループ期間中のマウスポインタの動きを示す動画を発表画像表示領域２３１に表示される発表画像４０１上に重畳表示させることができる。また、選択された第１グループのグループ期間中の音声を音声出力部２０８から再生させることができる。
【０１６３】
なお、本例では、音声テキスト表示領域２５１には、選択された第１グループのグループ期間中の音声を文字認識したテキストデータの文字列が表示されるが、本発明はこれに限定されない。音声テキスト表示領域２５１には、第１グループのグループ期間を含みかつそのグループ期間の前後の期間を含む期間中の音声を文字認識したテキストデータの文字列が表示されてもよい。この場合、第１グループのグループ期間中のテキストデータの文字列は、そのグループ期間の前後の期間中のテキストデータの文字列とは異なる表示態様で強調表示される。それにより、ユーザーＡは、第１グループのグループ期間における発表者の音声を容易に識別することができる。
【０１６４】
ユーザーＡは、さらに操作部２０６を操作することにより選択された第１グループのグループ識別情報２４２に配列されたユーザーＡの参照画像２４３、ユーザーＢの参照画像２４３、ユーザーＦの参照画像２４３、ユーザーＥの参照画像２４３のうち１つを選択することにより、第１グループに属する複数の参照情報のうちの１つを選択することができる。あるいは、ユーザーＡは、さらに操作部２０６を操作することにより発表画像４０１上に表示された描画画像ｐ１，ｐ２，ｐ６および指標ｐ１１のいずれか１つを選択することにより、選択された画像または指標に対応する参照情報を選択することができる。このとき、選択された参照情報に含まれる入力期間が再生期間に決定される。
【０１６５】
図２４は、ユーザーＦの参照画像２４３が選択された場合の表示例である。図２４を参照して、ユーザーＡがユーザーＦの参照画像２４３または描画画像ｐ６を選択すると、選択されたユーザーＦの参照画像２４３が、選択されていないユーザーＡ，Ｂ，Ｇの参照画像２４３とは異なる態様で表示される。図２４では、ユーザーＦの参照画像２４３がハッチングで示される。これにより、ユーザーＡは、自己が選択した参照画像２４３を容易に識別することができる。
【０１６６】
ユーザーＦの参照情報は、発表原稿に対応するので入力期間を含まない。この場合、発表画像表示領域２３１には、選択されている第１のグループのグループ期間中に対応する発表画像４０１が表示される。また、その発表画像４０１上には、グループ期間中のマウスポインタの軌跡を示す軌跡画像４０２が表示される。また、その発表画像４０１上には、選択されたユーザーＦの参照情報に含まれる追加情報である描画画像ｐ６が強調された状態で表示される。このとき、発表画像４０１上では、図２３の例と同様に、選択されていないユーザーＡ，Ｂの描画画像ｐ１，ｐ２が半透明の状態で表示される。また、選択されていないユーザーＧの参照情報に対応する指標ｐ１１が半透明の状態で表示される。音声テキスト表示領域２５１には、先に選択された第１グループのグループ期間中の音声を文字認識したテキストデータの文字列が表示される。
【０１６７】
図２５は、ユーザーＧの参照画像２４３が選択された場合の表示例である。図２５を参照して、ユーザーＡがユーザーＧの参照画像２４３または指標ｐ１１を選択すると、選択されたユーザーＧの参照画像２４３が、選択されていないユーザーＡ，Ｂ，Ｆの参照画像２４３とは異なる態様で表示される。図２５では、ユーザーＧの参照画像２４３がハッチングで示される。これにより、ユーザーＡは、自己が選択した参照画像２４３を容易に識別することができる。
【０１６８】
ユーザーＧの参照情報は、ユーザーＦの参照情報と同様に、発表原稿に対応するので入力期間を含まない。この場合、発表画像表示領域２３１には、選択されている第１のグループのグループ期間中に対応する発表画像４０１が表示される。
【０１６９】
ここで、ユーザーＧの参照情報に含まれる追加情報は、発表原稿の余白領域上に位置する。このように、選択された参照情報の追加情報が余白領域上に位置する場合、発表画像表示領域２３１には、発表画像４０１に加えて発表画像４０１を取り囲む余白領域画像４０３が表示される。また、発表画像表示領域２３１上には、ユーザーＧの発表原稿が再現されるように、余白領域画像４０３上にユーザーＧの描画画像ｐ７が強調された状態で表示される。このとき、発表画像４０１上では、図２３の例と同様に、ユーザーＡ，Ｂ，Ｆの描画画像ｐ１，ｐ２，ｐ６が半透明の状態で表示されるとともにマウスポインタの軌跡画像４０２が表示される。なお、余白領域画像４０３が表示される際には、発表画像４０１上に表示される図２３および図２４の指標ｐ１１は消去される。音声テキスト表示領域２５１には、先に選択された第１グループのグループ期間中の音声を文字認識したテキストデータの文字列が表示される。
【０１７０】
図２５の表示状態で、ユーザーＡがユーザーＦの参照画像２４３を再選択した場合には、表示部２０５は図２４の表示状態に遷移する。それにより、発表画像表示領域２３１では、余白領域画像４０３が表示されなくなるとともに、ユーザーＧの描画画像ｐ６に代えて指標ｐ１１が表示される。
【０１７１】
ユーザーＡは、グループ識別情報２４２の選択後に文字サイズボタン２９１を操作することにより、選択されたグループに属しかつ発表原稿に対応する参照情報の追加情報のサイズをその追加情報の適切文字サイズに調整することができる。
【０１７２】
図２６は、図２４の表示状態で文字サイズボタン２９１が操作された場合の表示例である。図２６の例では、文字サイズボタン２９１が操作されることにより、ユーザーＦの追加情報である描画画像ｐ６に含まれる文字列のサイズが、発表画像４０１に含まれる発表データの文字列および発表データに基づく参照情報の描画画像ｐ１，ｐ２のサイズにほぼ一致する。それにより、描画画像ｐ６の視認性が向上している。
【０１７３】
図２７は、グループリストから１つのグループ識別情報２４２が選択された場合の他の表示例を示す図である。図２７の表示例が図２３の表示例と異なる点を説明する。
【０１７４】
図２７の表示例では、ユーザーＡが第３グループを選択することにより、第３グループのグループ識別情報２４２のうち配列された参照画像２４３を除く部分が、選択されていない他のグループ識別情報２４２とは異なる態様で表示される。図２７では、第３グループのグループ識別情報２４２のうち配列された参照画像２４３を除く部分がハッチングで示される。
【０１７５】
発表画像表示領域２３１には、選択された第３グループのグループ期間中に対応する発表画像４０１が表示される。また、その発表画像４０１上には、選択された第３グループのグループ期間中のマウスポインタの軌跡を示す軌跡画像４０２が表示される。また、その発表画像４０１上には、選択された第１グループに属する１以上の参照情報に含まれる１以上の追加情報として、描画画像ｐ４，ｐ５が半透明の状態で表示される。
【０１７６】
ところで、第３グループに属するユーザーＨの描画画像ｐ８は、条件画像である引き出し線を含み、発表画像領域と余白領域とを跨ぐように位置する。図２７の例では、発表画像表示領域２３１には、表示画像領域しか表示されない。そこで、本例では、描画画像ｐ８に代えて、余白領域に追加情報（描画画像ｐ８）の少なくとも一部が存在することを示す付箋状の指標ｐ１２が当該追加情報の位置情報で現される位置（引き出し線の端部位置）に半透明の状態で表示される。音声テキスト表示領域２５１には、第３グループのグループ期間中の音声を文字認識したテキストデータの文字列が表示される。
【０１７７】
図２７の例においても、ユーザーＡは、操作部２０６を操作することにより選択された第３グループのグループ識別情報２４２に配列されたユーザーＤの参照画像２４３、ユーザーＥの参照画像２４３、ユーザーＨの参照画像２４３のうち１つを選択することにより、第３グループに属する複数の参照情報のうちの１つを選択することができる。あるいは、ユーザーＡは、さらに操作部２０６を操作することにより発表画像４０１上に表示された描画画像ｐ４，ｐ５および指標ｐ１２のいずれか１つを選択することにより、選択された画像または指標に対応する参照情報を選択することができる。
【０１７８】
図２８は、ユーザーＨの参照画像２４３が選択された場合の表示例である。図２８を参照して、ユーザーＡがユーザーＨの参照画像２４３または指標ｐ１２を選択すると、選択されたユーザーＨの参照画像２４３が、選択されていないユーザーＤ，Ｅの参照画像２４３とは異なる態様で表示される。図２８では、ユーザーＨの参照画像２４３がハッチングで示される。
【０１７９】
ユーザーＨの参照情報は、発表原稿に対応するので入力期間を含まない。この場合、発表画像表示領域２３１には、選択されている第３のグループのグループ期間中に対応する発表画像４０１が表示される。
【０１８０】
上記のように、ユーザーＨの追加情報は条件画像を含み、その一部は発表原稿の余白領域上に位置する。この場合、発表画像表示領域２３１には、発表画像４０１に加えて発表画像４０１を取り囲む余白領域画像４０３が表示される。また、発表画像表示領域２３１上には、ユーザーＨの発表原稿が再現されるように、発表画像４０１および余白領域画像４０３上にユーザーＨの描画画像ｐ８が強調された状態で表示される。このとき、発表画像４０１上では、図２７の例と同様に、ユーザーＤ，Ｅの描画画像ｐ４，ｐ５が半透明の状態で表示されるとともにマウスポインタの軌跡画像４０２が表示される。なお、余白領域画像４０３が表示される際には、発表画像４０１上に表示される図２７の指標ｐ１２は消去される。音声テキスト表示領域２５１には、先に選択された第３グループのグループ期間中の音声を文字認識したテキストデータの文字列が表示される。
【０１８１】
上記の例では、少なくとも一部が余白領域に存在する追加情報をユーザーＡに提示するために、当該追加情報を含む参照情報が選択された場合に、発表画像表示領域２３１に発表画像４０１および余白領域画像４０３が表示され、それらの画像上に追加情報が重畳表示されるが、本発明はこれに限定されない。
【０１８２】
発表画像表示領域２３１に発表画像４０１のみが表示された状態で、少なくとも一部が余白領域に存在する追加情報を含む参照情報が選択された場合に、表示部２０５の画面上にその追加情報のみを示すポップアップウィンドウが発表画像表示領域２３１の表示とは別に表示されてもよい。
【０１８３】
あるいは、グループリストに表示される複数の参照情報のうち少なくとも１つの追加情報が余白領域に存在する場合には、発表画像表示領域２３１に発表画像４０１および余白領域画像４０３が表示され、それらの画像上に選択されたグループに属する全ての追加情報が重畳表示されてもよい。
【０１８４】
図２９は、会議情報取得処理の流れの一例を示すフローチャートである。会議情報取得処理は、各携帯情報装置２００Ａ〜２００Ｅが備えるＣＰＵ２０１が、ＲＯＭ２０２、ＲＡＭ２０３、フラッシュメモリ２０４またはＣＤ−ＲＯＭ２１０Ａに記憶された会議情報取得プログラムを実行することにより、ＣＰＵ２０１によって実行される処理である。会議情報取得プログラムは、会議関連情報再現プログラムの一部である。以下に説明する各種処理の初期状態において、携帯情報装置２００Ａには予めＭＦＰ４００から発表データがダウンロードされているものとする。また、携帯情報装置２００Ａのフラッシュメモリ２０４には、予めユーザーＡのユーザー識別情報が記憶されているものとする。
【０１８５】
図２９を参照して、ステップＳ０１においては、装置モードを参加モードに設定し、処理をステップＳ０２に進める。ステップＳ０２においては、発表モードが選択されたか否かを判断する。発表モードが選択されると処理をステップＳ０３に進めるが、そうでなければ処理をステップＳ１１に進める。
【０１８６】
ステップＳ０３においては、自己が発表者となるべき旨を要求するための発表者要求信号をＭＦＰ４００へ送信し、処理をステップＳ０４に進める。ステップＳ０４においては、ＭＦＰ４００から発表者となるべき旨の要求に対する許可信号を受信したか否かを判断する。ＭＦＰ４００から許可信号を受信すると処理をステップＳ０５に進めるが、そうでなければ処理をステップＳ０２に戻す。
【０１８７】
ステップＳ０５においては、装置モードを発表モードに設定する。ステップＳ０６においては、会議情報が生成されたか否かを判断する。具体的には、後述する発表画像関連処理、ポインタ関連処理および音声関連処理のうち少なくとも１つの処理により発表画像関連情報、ポインタ関連情報および音声関連情報のいずれかが生成されたか否かを判断する。会議情報が生成されると処理をステップＳ０７に進めるが、そうでなければ処理をステップＳ０８に進める。
【０１８８】
ステップＳ０７においては、生成された会議情報を会議に参加している全てのユーザーＢ〜Ｅの携帯情報装置２００Ｂ〜２００Ｅに送信し、処理をステップＳ０８に進める。ステップＳ０８においては、参加モードが選択されたか否かを判断する。参加モードが選択されると処理をステップＳ０９に進めるが、そうでなければ処理をステップＳ０６に進める。ステップＳ０９においては、装置モードを参加モードに設定し、処理をステップＳ０２に進める。
【０１８９】
ステップＳ１１においては、他の携帯情報装置２００Ｂ〜２００Ｅのいずれかから会議情報を受信したか否かを判断する。会議情報を受信すると処理をステップＳ１２に進めるが、そうでなければ処理をステップＳ０２に戻す。ステップＳ１２においては、受信された会議情報をＲＡＭ２０３またはフラッシュメモリ２０４に記憶し、処理をステップＳ０２に戻す。
【０１９０】
図３０は、発表画像関連処理の流れの一例を示すフローチャートである。発表画像関連処理は、各携帯情報装置２００Ａ〜２００Ｅが備えるＣＰＵ２０１が、ＲＯＭ２０２、ＲＡＭ２０３、フラッシュメモリ２０４またはＣＤ−ＲＯＭ２１０Ａに記憶された発表画像関連プログラムを実行することにより、ＣＰＵ２０１により実行される処理である。発表画像関連プログラムは、会議関連情報再現プログラムの一部である。ここでは、携帯情報装置２００Ａが備えるＣＰＵ２０１が発表画像関連プログラムを実行する場合を例に説明する。
【０１９１】
図３０を参照して、ステップＳ２１においては、装置モードが発表モードに設定されているか否かを判断する。装置モードが発表モードに設定されていると判断するまで待機状態となり（ステップＳ２１でＮＯ）、装置モードが発表モードに設定されていると判断するならば（ステップＳ２１でＹＥＳ）、処理をステップＳ２２に進める。ステップＳ２２においては、発表データ中に発表部分を設定し、設定された発表部分の画像を発表画像として表示部２０５に表示し、処理をステップＳ２３に進める。具体的には、発表者であるユーザーＡが操作部２０６を操作することにより指定された発表ページおよび領域で特定される領域を発表部分に設定する。さらに、発表データ中に設定された発表部分の画像を発表画像として表示部２０５に表示する。
【０１９２】
ステップＳ２３においては、発表画像関連情報を生成し、生成された発表画像関連情報をＲＡＭ２０３またはフラッシュメモリ２０４に記憶し、処理をステップＳ２４に進める。ステップＳ２２において設定された発表部分で特定される発表ページのページ識別情報をページデータの項目に設定し、発表部分で特定される領域の発表ページ中の位置を示す領域識別情報を部分データの項目に設定し、現時刻を時刻情報の項目に設定することにより発表画像関連情報を生成する。ステップＳ２４においては、ステップＳ２２で設定された発表部分を全てのユーザーＢ〜Ｅの携帯情報装置２００Ｂ〜２００Ｅに送信し、処理をステップＳ２５に進める。
【０１９３】
ステップＳ２５においては、発表部分が変更されたか否かを判断する。具体的には、ステップＳ２２で設定された発表部分とは異なる領域がユーザーＡにより新たに指定されたか否かを判断する。発表部分が変更されたと判断するならば処理をステップＳ２２に戻すが、そうでなければ処理をステップＳ２１に戻す。
【０１９４】
図３１は、発表データに対応する参照情報取得処理の流れの一例を示すフローチャートである。この参照情報取得処理は、各携帯情報装置２００Ａ〜２００Ｅが備えるＣＰＵ２０１が、ＲＯＭ２０２、ＲＡＭ２０３、フラッシュメモリ２０４またはＣＤ−ＲＯＭ２１０Ａに記憶された発表データに対応する参照情報取得プログラムを実行することにより、ＣＰＵ２０１により実行される処理である。発表データに対応する参照情報取得プログラムは、会議関連情報再現プログラムの一部である。ここでは、携帯情報装置２００Ａが備えるＣＰＵ２０１が発表データに対応する参照情報取得プログラムを実行する場合を例に説明する。
【０１９５】
図３１を参照して、ステップＳ３１においては、携帯情報装置２００を操作するユーザーを識別するためのユーザー識別情報を取得し、処理をステップＳ３２に進める。ここでは、フラッシュメモリ２０４に携帯情報装置２００Ａを操作するユーザーのユーザー識別情報が記憶されているので、フラッシュメモリ２０４に記憶されたユーザー識別情報を読み出す。なお、携帯情報装置２００Ａを操作するユーザーが操作部２０６に入力するユーザー識別情報を取得するようにしてもよい。次のステップＳ３２においては、ユーザーＡが操作部２０６を操作することにより発表画像上への追加情報の入力が開始されたか否かを判断する。追加情報の入力が開始されると処理をステップＳ３３に進めるが、そうでなければ処理をステップＳ３９に進める。
【０１９６】
ステップＳ３３においては、現時刻を入力開始時刻に設定し、処理をステップＳ３４に進める。ステップＳ３４においては、ユーザーＡによる発表画像上への追加情報の入力が終了されたか否かを判断する。ユーザーＡによる発表画像上への追加情報の入力が終了されたと判断されるまで待機状態となり（ステップＳ３４でＮＯ）、ユーザーＡによる発表画像上への追加情報の入力が終了されたと判断すると（ステップＳ３４でＹＥＳ）、処理をステップＳ３５に進める。
【０１９７】
ステップＳ３５においては、現時刻を入力終了時刻に設定し、処理をステップＳ３６に進める。ステップＳ３６においては、発表画像中で追加情報が入力された領域の位置を位置情報に決定し、処理をステップＳ３７に進める。ステップＳ３７においては、ユーザーＡの発表データに対応する参照情報を生成するとともに、生成された参照情報をＲＡＭ２０３またはフラッシュメモリ２０４に記憶し、処理をステップＳ３８に進める。具体的には、ステップＳ３１で取得されたユーザー識別情報をユーザーＩＤの項目に設定し、ステップＳ３３において入力開始時刻に設定された時刻を入力期間の項目の開始時刻の項目に設定し、ステップＳ３５において入力終了時刻に設定された時刻を入力期間の項目の終了時刻の項目に設定し、ステップＳ３２で入力が開始され、ステップＳ３４で入力が終了された追加情報を、追加情報の項目に設定し、ステップＳ３６において決定された位置情報を位置情報の項目に設定した参照情報を生成する。ステップＳ３８においては、生成されている発表データに対応する参照情報を会議に参加している全てのユーザーＢ〜Ｅの携帯情報装置２００Ｂ〜２００Ｅに送信し、処理をステップＳ３９に進める。
【０１９８】
ステップＳ３９においては、他の携帯情報装置２００Ｂ〜２００Ｅのいずれかから発表データに対応する参照情報を受信したか否かを判断する。無線ＬＡＮＩ／Ｆ２０９が、他の携帯情報装置２００Ｂ〜２００Ｅのいずれかから参照情報を受信すると処理をステップＳ４０に進めるが、そうでなければ処理をステップＳ３２に戻す。ステップＳ４０においては、受信された参照情報をＲＡＭ２０３またはフラッシュメモリ２０４に記憶し、処理をステップＳ３２に戻す。
【０１９９】
図３２は、発表原稿に対応する参照情報取得処理の流れの一例を示すフローチャートである。この参照情報取得処理は、各携帯情報装置２００Ａ〜２００Ｅが備えるＣＰＵ２０１が、ＲＯＭ２０２、ＲＡＭ２０３、フラッシュメモリ２０４またはＣＤ−ＲＯＭ２１０Ａに記憶された発表原稿に対応する参照情報取得プログラムを実行することにより、ＣＰＵ２０１により実行される処理である。発表原稿に対応する参照情報取得プログラムは、会議関連情報再現プログラムの一部である。ここでは、携帯情報装置２００Ａが備えるＣＰＵ２０１が発表データに対応する参照情報取得プログラムを実行する場合を例に説明する。
【０２００】
図３２を参照して、ステップＳ４１においては、ＭＦＰ４００から発表原稿の読取データおよびそれに対応するユーザー識別情報を受信したか否かを判断する。無線ＬＡＮＩ／Ｆ２０９がＭＦＰ４００から読取データおよびユーザー識別情報を受信したと判断するまで待機状態となり（ステップＳ４１でＮＯ）、無線ＬＡＮＩ／Ｆ２０９がＭＦＰ４００から読取データおよびユーザー識別情報を受信したと判断すると（ステップＳ４１でＹＥＳ）、処理をステップＳ４２に進める。
【０２０１】
本実施の形態に係る発表データには、ページごとに当該ページの基準サイズを規定するための予め定められた基準画像（例えば、枠など）が含まれる。そのため、発表原稿においても、発表データの１ページごとに基準画像が形成される。
【０２０２】
ステップＳ４２においては、パターンマッチング等を用いて、受信した読取データから発表データの１ページごとに形成される基準画像を検出することによりページを抽出し、処理をステップＳ４３に進める。それにより、１枚の発表原稿の用紙上に形成された発表データの１ページ分の画像サイズを読取基準サイズとして定義することができる。
【０２０３】
ステップＳ４３においては、読取基準サイズに対する追加情報のサイズの割合を拡大縮小率として算出し、処理をステップＳ４４に進める。ステップＳ４４においては、抽出されたページごとの読取データとページごとの発表データとを対比することにより、読取データから発表データに存在しない１以上の画像の各々を追加情報として抽出し、処理をステップＳ４５に進める。処理がステップＳ４５に進む場合、読取データに含まれる１以上の追加情報が抽出される。
【０２０４】
ステップＳ４５においては、抽出された１以上の追加情報から処理対象となる１つの追加情報を選択し、処理をステップＳ４６に進める。ステップＳ４６においては、処理対象である追加情報に予め定められた条件画像が存在するか否かを判定する。上記のように、本実施の形態では、条件画像は、発表原稿画像のうち発表画像領域から余白領域に延びる線状の画像として設定されている。条件画像が存在しないのであれば処理をステップＳ４７に進めるが、条件画像が存在するのであれば処理をステップＳ４８に進める。
【０２０５】
ステップＳ４７においては、発表原稿画像中で追加情報が入力された領域の位置を位置情報に決定し、処理をステップＳ４９に進める。ステップＳ４８においては、発表原稿画像中で条件画像の端部が入力された領域の位置を当該追加情報の位置情報に決定し、処理をステップＳ４９に進める。ステップＳ４９においては、読取データおよび発表データに基づいて当該追加情報の適切文字サイズを決定し、処理をステップＳ５０に進める。
【０２０６】
ステップＳ５０においては、発表原稿に対応する参照情報を生成するとともに、生成された参照情報をＲＡＭ２０３またはフラッシュメモリ２０４に記憶する。具体的には、ステップＳ４１で受信されたユーザー識別情報をユーザーＩＤの項目に設定し、ステップＳ４３で抽出されかつステップＳ４５で選択された追加情報を追加情報の項目に設定し、ステップＳ４７，Ｓ４８のいずれかで決定された位置情報を位置情報の項目に設定し、ステップＳ４３で算出された拡大縮小率を拡大縮小率の項目に設定し、ステップＳ４６の判定結果を条件画像判定結果の項目に設定し、ステップＳ４９で決定された適切文字サイズを適切文字サイズの項目に設定した参照情報を生成する。その後、処理をステップＳ５１に進める。
【０２０７】
ステップＳ５１においては、ステップＳ４４で抽出された１以上の追加情報について、ステップＳ４５において未だ選択されていない追加情報が存在するか否かを判断する。未選択の追加情報が存在するならば処理をステップＳ４５に戻すが、そうでなければ処理をステップＳ４１に戻す。
【０２０８】
なお、上記のステップＳ４４において追加情報が抽出されない場合には、追加情報が存在しないものとしてステップＳ４１の処理に戻ってもよい。
【０２０９】
本実施の形態においては、追加情報の少なくとも一部が余白領域にあるときに、当該追加情報の位置がページ番号のみで表されてもよい。例えば、上記のステップＳ４６においては、追加情報に条件画像が存在するか否かを判断する代わりに、追加情報の少なくとも一部が余白領域に存在するか否かを判断する。それにより、追加情報の少なくとも一部が余白領域に存在しない場合には、ステップＳ４７の処理に進む。一方、追加情報の少なくとも一部が余白領域に存在する場合には、当該追加情報を含むページをその参照情報の位置情報に決定し、ステップＳ４７の処理に進む。
【０２１０】
さらに、本実施の形態においては、追加情報に条件画像が存在せずかつ追加情報の全部が余白領域にあるときに、当該余白領域に隣り合う発表画像領域における当該追加情報に最も近い位置を当該追加情報の位置として決定してもよい。
【０２１１】
図３３は、グループ化処理の流れの一例を示すフローチャートである。グループ化処理は、各携帯情報装置２００Ａ〜２００Ｅが備えるＣＰＵ２０１が、ＲＯＭ２０２、ＲＡＭ２０３、フラッシュメモリ２０４またはＣＤ−ＲＯＭ２１０Ａに記憶されたグループ化プログラムを実行することにより、ＣＰＵ２０１により実行される処理である。グループ化プログラムは、会議関連情報再現プログラムの一部である。ここでは、携帯情報装置２００Ａが備えるＣＰＵ２０１がグループ化プログラムを実行する場合を例に説明する。
【０２１２】
図３３を参照して、ステップＳ６１においては、図３１に示した参照情報取得処理によりＲＡＭ２０３またはフラッシュメモリ２０４に記憶された発表データに対応する参照情報を読み出し、処理をステップＳ６２に進める。ステップＳ６２においては、読み出された１以上の参照情報から処理対象となる１つの参照情報を選択し、処理をステップＳ６３に進める。
【０２１３】
ステップＳ６３においては、ステップＳ６１において読みだされた１以上の参照情報のうちから入力開始時刻が、処理対象の参照情報の入力開始時刻から所定期間以内にある参照情報を抽出し、処理をステップＳ６４に進める。ステップＳ６４においては、ステップＳ６３において抽出された参照情報のうちから位置情報により示される位置が、処理対象の参照情報の位置情報により示される位置から所定範囲内にある参照情報を抽出し、処理をステップＳ６５に進める。
【０２１４】
ステップＳ６５においては、処理対象の参照情報とステップＳ６４で抽出された１以上の参照情報とを、同一のグループに分類し、ＲＡＭ２０３またはフラッシュメモリ２０４に記憶する。次のステップＳ６６においては、グループ期間を決定し、決定されたグループ期間をＲＡＭ２０３またはフラッシュメモリ２０４に記憶し、処理をステップＳ６７に進める。具体的には、ステップＳ６５において記憶された同一のグループに属する１以上の参照情報を処理対象とし、１以上の参照情報にそれぞれ含まれる１以上の入力開始時刻のうち最も前の時刻から１以上の参照情報にそれぞれ含まれる１以上の入力終了時刻のうち最も後の時刻までの期間をグループ期間として決定する。
【０２１５】
ステップＳ６７においては、ステップＳ６１で読み出された１以上の参照情報について、ステップＳ６２において未だ選択されていない参照情報が存在するか否かを判断する。未選択の参照情報が存在するならば処理をステップＳ６２に戻すが、そうでなければ処理をステップＳ６８に進める。
【０２１６】
ステップＳ６８においては、図３２に示した参照情報取得処理によりＲＡＭ２０３またはフラッシュメモリ２０４に記憶された発表原稿に対応する参照情報を読み出し、処理をステップＳ６９に進める。ステップＳ６９においては、読み出された１以上の参照情報から処理対象となる１つの参照情報を選択し、処理をステップＳ７０に進める。
【０２１７】
ステップＳ７０においては、選択された参照情報の位置情報に基づいて、ステップＳ６１〜Ｓ６７の処理で分類されたいずれかのグループが当該参照情報の追加情報の位置から所定範囲内にあるか否かを判断する。いずれかのグループが所定範囲内にあるのであれば処理をステップＳ７１に進めるが、そうでなければ処理をステップＳ７２に進める。
【０２１８】
ステップＳ７１においては、ステップＳ５９で選択された参照情報を当該参照情報の追加情報の位置から所定範囲内にあるグループに分類し、ＲＡＭ２０３またはフラッシュメモリ２０４に記憶し、処理をステップＳ６３に進める。一方、ステップＳ７２においては、ステップＳ６９で選択された参照情報を当該参照情報の追加情報の位置から最も近い位置にあるグループに分類し、ＲＡＭ２０３またはフラッシュメモリ２０４に記憶し、処理をステップＳ７３に進める。
【０２１９】
ステップＳ７３においては、ステップＳ６８で読み出された１以上の参照情報について、ステップＳ６９において未だ選択されていない参照情報が存在するか否かを判断する。未選択の参照情報が存在するならば処理をステップＳ６９に戻すが、そうでなければ処理を終了する。
【０２２０】
なお、追加情報の少なくとも一部が余白領域にあることにより当該追加情報の位置がページ番号のみで特定される場合（位置情報がページ番号のみで表される場合）には、選択された参照情報のページに複数のグループが含まれる可能性がある。この場合、選択された参照情報は、当該位置情報により示されるページに設定された複数のグループ全てに分類されてもよい。
【０２２１】
なお、グループ化処理の開始時点でＲＡＭ２０３またはフラッシュメモリ２０４に発表データに対応する参照情報のみが記憶され、発表原稿に対応する参照情報が記憶されていない可能性がある。この場合、図３３のグループ化処理のうちステップＳ６８〜Ｓ７３の処理を省略する。また、グループ化処理の開始時点でＲＡＭ２０３またはフラッシュメモリ２０４に発表原稿に対応する参照情報のみが記憶され、発表データに対応する参照情報が記憶されていない可能性がある。この場合、図３３のグループ化処理のうちステップＳ６１〜Ｓ６７の処理を省略するとともに、ステップＳ７０〜Ｓ７２の処理に代えて、選択された参照情報から所定範囲内にある参照情報を抽出し、抽出された参照情報を同一のグループに分類し、ＲＡＭ２０３またはフラッシュメモリ２０４に記憶する。さらに、各グループのグループ期間を発表開始時刻から発表終了時刻までの期間に決定し、記憶する。
【０２２２】
図３４は、再現処理の流れの一例を示すフローチャートである。再現処理は、各携帯情報装置２００Ａ〜２００Ｅが備えるＣＰＵ２０１が、ＲＯＭ２０２、ＲＡＭ２０３、フラッシュメモリ２０４またはＣＤ−ＲＯＭ２１０Ａに記憶された再現プログラムを実行することにより、ＣＰＵ２０１により実行される処理である。再現プログラムは、会議関連情報再現プログラムの一部である。ここでは、携帯情報装置２００Ａが備えるＣＰＵ２０１が再現プログラムを実行する場合を例に説明する。
【０２２３】
図３４を参照して、ステップＳ８１においては、グループリストを表示部２０５に表示し、処理をステップＳ８２に進める。具体的には、図３３に示したグループ化処理により１以上のグループごとに、当該グループに分類された１以上の参照情報がＲＡＭ２０３またはフラッシュメモリ２０４に記憶されている。ＣＰＵ２０１は、ＲＡＭ２０３またはフラッシュメモリ２０４に記憶された１以上のグループをそれぞれ識別するための１以上のグループ識別情報を配列したグループリストを表示部２０５に表示する。グループ識別情報は、そのグループに属する１以上の参照情報にそれぞれ対応する１以上の参照画像を配列した画像である。参照画像は、参照情報に含まれるユーザー識別情報と、追加情報と、発表画像関連情報で特定される発表部分中で参照情報に含まれる位置情報で特定される領域の画像と、を含む。具体的には、ＣＰＵ２０１は、発表データ中で参照情報の位置情報の項目に設定された位置情報で特定される領域を含む部分の画像に、参照情報に含まれる追加情報の画像を合成した画像に、参照情報に含まれるユーザー識別情報の画像を付加した参照画像を生成する。ＣＰＵ２０１は、グループに属する１以上の参照情報にそれぞれ対応する１以上の参照画像を配列した画像をグループ識別情報として生成する。
【０２２４】
ステップＳ８２においては、１以上のグループのうちいずれか１つが選択されたか否かを判断する。具体的には、グループリストで示される１以上のグループ識別情報のいずれか１つがユーザーＡにより選択された場合に、選択されたグループ識別情報に対応するグループが選択されたと判断する。また、１以上のグループ識別情報のいずれも選択されない場合に、グループが選択されていないと判断する。グループが選択されると処理をステップＳ８３に進めるが、そうでなければ処理を終了する。
【０２２５】
ステップＳ８３においては、選択されたグループに対応して図３３に示したグループ化処理により決定されたグループ期間を再生期間に決定し、処理をステップＳ８４に進める。ステップＳ８４においては、第１の参照情報表示処理を行い、処理をステップＳ８５に進める。第１の参照情報表示処理により、表示部２０５に再生期間中の発表画像を表示する。第１の参照情報表示処理の詳細は後述する。
【０２２６】
ステップＳ８５においては、静的出力制御処理を行い、処理をステップＳ８６に進める。この静的出力制御処理においては、表示部２０５に表示される再生期間中の発表画像上に再生期間中のマウスポインタの軌跡を示す軌跡画像を表示する。また、再生期間中の音声を表す文字列を表示部２０５に表示する。
【０２２７】
ステップＳ８６においては、再生動作の指示を受け付けたか否かを判断する。具体的には、ユーザーＡが再生操作表示領域２６１に表示される操作ボタンが指示されたことをタッチパネル２０６Ｂが検出すると、再生動作の指示を受け付ける。再生動作の指示を受け付けたならば処理をステップＳ８７に進めるが、そうでなければ処理をステップＳ８８に進める。ステップＳ８７においては、動的出力制御処理を行い、処理をステップＳ８８に進める。この動的出力制御処理においては、再生期間中の発表画像上で再生期間中のマウスポインタの動きが再現されるようにマウスポインタの動画を表示する。また、再生期間中の音声を再生する。
【０２２８】
ステップＳ８８においては、ステップＳ８２において選択されたグループに属する１以上の参照情報のうちいずれか１つが選択されたか否かを判断する。具体的には、ステップＳ８２で選択されたグループのグループ識別情報中に配列される１以上の参照画像のいずれか１つがユーザーＡにより選択された場合に、選択された参照画像に対応する参照情報が選択されたと判断する。ステップＳ８４の第１の参照情報表示処理では、表示部２０５に、ステップＳ８３で決定された再生期間中に対応する発表画像が表示されるとともにその再生期間中に対応する１以上の追加情報または指標が発表画像上に表示される。ステップＳ８８においては、発表画像上に表示された追加情報または指標が選択される場合に、その追加情報を含む参照情報または指標に対応する追加情報を含む参照情報が選択されたと判断する。また、１以上の参照画像のいずれも選択されない場合に、参照情報が選択されていないと判断する。参照情報が選択されると処理をステップＳ８９に進めるが、そうでなければ処理をステップＳ８２に戻す。参照情報は追加情報を含むので、参照情報の選択は、追加情報の選択と同じである。
【０２２９】
ステップＳ８９においては、第２の参照情報表示処理を行い、処理をステップＳ９０に進める。第２の参照情報表示処理により、表示部２０５に再生期間中の発表画像を表示するとともに、その発表画像中に、選択された追加情報を他の参照情報の追加情報よりも強調して表示する。あるいは、表示部２０５に再生期間中の発表画像および余白領域画像を表示するとともに、その発表画像および余白領域画像中に、選択された追加情報を他の参照情報の追加情報よりも強調して表示する。第２の参照情報表示処理の詳細は後述する。
【０２３０】
ステップＳ９０においては、ステップＳ８８または後述するステップＳ９９において選択された参照情報が発表データに対応するか否かを判断する。参照情報が発表データに対応するのであれば処理をステップＳ９１に進めるが、そうでなければ（参照情報が発表原稿に対応する場合）処理をステップＳ９２に進める。
【０２３１】
ステップＳ９１においては、ステップＳ８８または後述するステップＳ９９で選択される参照情報の入力期間を再生期間に決定し、処理をステップＳ９３に進める。一方、ステップＳ９２においては、ステップＳ８２および後述するステップＳ１００のうち直前のステップで選択されるグループのグループ期間を再生期間に決定し、処理をステップＳ９３に進める。ステップＳ９３においては、ステップＳ９１またはステップＳ９２のいずれかで決定された再生期間をＲＡＭ２０３またはフラッシュメモリ２０４に記憶し、処理をステップＳ９４に進める。
【０２３２】
ステップＳ８５の静的出力制御処理では、表示部２０５に、ステップＳ８３で決定された再生期間中に対応する音声の文字列、換言すれば、ステップＳ８２で選択されたグループのグループ期間中の音声の文字列が表示される。この場合、表示部２０５に表示される音声の文字列には、ステップＳ８８で選択された参照情報の入力期間中の音声の文字列が含まれる。
【０２３３】
ステップＳ９４においては、ステップＳ８４，Ｓ８９の処理で表示部２０５に表示される追加情報のうち発表原稿に対応する追加情報について、文字サイズを適切に調整すべき指示を受け付けたか否かを判断する。この指示は、例えばユーザーＡが図２３の文字サイズボタン２９１を操作することにより発生する。文字サイズを適切に調整すべき指示を受け付けたならば処理をステップＳ９５に進めるが、そうでなければ処理をステップＳ９６に進める。ステップＳ９５においては、表示部２０５に表示される追加情報のうち発表原稿に対応する追加情報の文字のサイズを適切文字サイズに調整する。
【０２３４】
ステップＳ９６においては、表示部２０５に表示される音声の文字列のうち、ステップＳ８８で選択された参照情報の入力期間中の音声の文字列を、選択された参照情報の入力期間以外の期間中の音声の文字列よりも強調して表示し、処理をステップＳ９７に進める。
【０２３５】
ステップＳ９７においては、ステップＳ８６と同様に、再生動作の指示を受け付けたか否かを判断する。再生動作の指示を受け付けたならば処理をステップＳ９８に進めるが、そうでなければ処理をステップＳ９９に進める。ステップＳ９８においては、ステップＳ８７と同様に、動的出力制御処理を行い、処理をステップＳ１００に進める。
【０２３６】
ステップＳ９９においては、ステップＳ８２において選択されたグループに属する１以上の参照情報のうちいずれか１つが新たに選択されたか否かを判断する。参照情報が選択されたならば処理をステップＳ８９に戻すが、そうでなければ処理をステップＳ１００に進める。
【０２３７】
ステップＳ１００においては、ステップＳ８２と同様に、１以上のグループのうちいずれか１つが選択されたか否かを判断する。グループが選択されたならば処理をステップＳ８３に戻すが、そうでなければ処理をステップＳ９７に戻す。
【０２３８】
図３５は、第１の参照情報表示処理の流れの一例を示すフローチャートである。第１の参照情報表示処理は、図３４に示した再現処理のステップＳ８４において実行される処理である。第１の参照情報表示処理が実行される前の段階で、ユーザーＡによりグループが選択されている。
【０２３９】
図３５を参照して、ステップＳ１０１においては、再生期間（本例では、図３４のステップＳ８２で選択されたグループのグループ期間）中に対応する発表画像関連情報を読み出し、処理をステップＳ１０２に進める。ＲＡＭ２０３またはフラッシュメモリ２０４に記憶された１以上の発表画像関連情報のうちから時刻情報の項目に設定された時刻が再生期間に含まれる発表画像関連情報を読み出す。ステップＳ１０２においては、読み出された発表画像関連情報に基づいて再生期間中の発表画像を表示部２０５に表示し、処理をステップＳ１０３に進める。具体的には、発表画像関連情報のページデータの項目に設定されたページ識別情報および部分データの項目に設定された位置情報に従って、発表データ中の発表部分を特定し、発表部分の画像を発表画像として、表示部２０５に表示する。
【０２４０】
ステップＳ１０３においては、ユーザーＡにより選択されたグループに分類された１以上の参照情報を読み出し、処理をステップＳ１０４に進める。ＲＡＭ２０３またはフラッシュメモリ２０４に記憶された１以上の参照情報のうちからユーザーＡにより選択されたグループに分類されたすべての参照情報を読み出す。
【０２４１】
ステップＳ１０４においては、読み出された１以上の参照情報から処理対象となる１つの参照情報を選択し、処理をステップＳ１０５に進める。ステップＳ１０５においては、選択した参照情報の追加情報に条件画像が存在するか否かを判定する。条件画像が存在しないのであれば処理をステップＳ１０７に進めるが、条件画像が存在するのであれば処理をステップＳ１０６に進める。ステップＳ１０６においては、発表画像上で当該追加情報の位置（位置情報で示される条件画像の端部の位置）に、余白領域に追加情報が存在することを示す指標を重畳表示し、処理をステップＳ１１０に進める。
【０２４２】
ステップＳ１０７においては、選択した参照情報の追加情報の少なくとも一部が余白領域に存在するか否かを判定する。追加情報が余白領域に存在しないのであれば処理をステップＳ１０９に進めるが、追加情報が余白領域に存在するのであれば処理をステップＳ１０８に進める。ステップＳ１０８においては、発表画像上で当該追加情報の近傍位置に、余白領域に追加情報が存在することを示す指標を重畳表示し、処理をステップＳ１１０に進める。
【０２４３】
ステップＳ１０９においては、読み出された１以上の参照情報に含まれる追加情報の画像を発表画像上に重畳表示し、処理をステップＳ１１０に進める。このとき、追加情報の表示と同時に、その追加情報に対応するユーザー識別情報を発表画像上に重畳表示してもよいし、その追加情報に対応するユーザー識別情報を表示部２０５の発表画像以外の位置に表示してもよい。それにより、発表データに対応する参照情報に限らず、発表原稿に対応する参照情報についても、追加情報を追加したユーザーが誰であるのかをユーザーに通知することができる。
【０２４４】
ステップＳ１１０においては、ステップＳ１０３で読み出された１以上の参照情報について、ステップＳ１０４において未だ選択されていない参照情報が存在するか否かを判断する。未選択の参照情報が存在するならば処理をステップＳ１０３に戻すが、そうでなければ図３４に示した再現処理のステップＳ７５の処理に進む。
【０２４５】
なお、追加情報の少なくとも一部が余白領域にあることにより当該追加情報の位置がページ番号のみで特定される場合（位置情報がページ番号のみで表される場合）には、ステップＳ１０６，Ｓ１０８においては、発表画像上の予め定められた位置に指標が表示されてもよい。
【０２４６】
図３６は、第２の参照情報表示処理の流れの一例を示すフローチャートである。第２の参照情報表示処理は、図３４に示した再現処理のステップＳ７９において実行される処理である。
【０２４７】
図３６を参照して、ステップＳ１１１においては、図３４のステップＳ７８で選択された参照情報を読み出し、処理をステップＳ１１２に進める。ステップＳ１１２においては、選択した参照情報の追加情報に条件画像が存在するか否かを判定する。条件画像が存在しないのであれば処理をステップＳ１１３に進めるが、条件画像が存在するのであれば処理をステップＳ１１４に進める。
【０２４８】
ステップＳ１１３においては、選択した参照情報の追加情報の少なくとも一部が余白領域に存在するか否かを判断する。追加情報が余白領域に存在しないのであれば処理をステップＳ１１３に進めるが、条件画像が存在するのであれば処理をステップＳ１１４に進める。
【０２４９】
ここで、上記の第１の参照情報表示処理では、追加情報に条件画像が存在する場合、および余白領域に追加情報が存在する場合に、発表画像上に指標が表示されている。ステップＳ１１４においては、図３５のステップＳ１０５，Ｓ１０７で表示される指標を消去するとともに表示部２０５に発表画像および余白領域画像を表示し、ステップＳ１１５の処理に進む。
【０２５０】
ステップＳ１１５においては、選択した参照情報の追加情報を、位置情報により示される位置で強調表示し、図３４に示した再現処理のステップＳ８０の処理に進む。このとき、追加情報の強調表示と同時に、その追加情報に対応するユーザー識別情報を強調表示してもよい。それにより、選択された参照情報に対応する参照情報について、追加情報を追加したユーザーが誰であるのかをユーザーに通知することができる。
【０２５１】
以上説明したように、本実施の形態における携帯情報装置２００Ａは、会議関連情報再現装置として機能し、自装置および他の携帯情報装置２００Ｂ〜２００Ｅのいずれかにより生成された参照情報であって、発表データに追加されたメモ等の追加情報と発表データ中で追加情報が追加された位置を示す位置情報とを含む参照情報を取得する。また、携帯情報装置２００Ａは、発表データに基づく画像が形成された発表原稿をＭＦＰ１００が読み取った読取データを取得し、取得された読取データから発表データに存在しない画像を追加情報として抽出する。発表データに基づく画像が形成された発表原稿に、ユーザーが手書きでメモを描画する場合、ユーザーにより描画されたメモの画像が追加情報として抽出される。携帯情報装置２００Ａは、抽出された追加情報の位置に対応する発表データ中の位置が抽出された追加情報の追加された位置として決定し、抽出された追加情報および決定された位置に基づいて、記録媒体に対応する参照情報を生成する。携帯情報装置２００Ａは、上記のようにして取得された複数の参照情報のうち、追加情報の位置が発表データ中における所定範囲内にある複数の参照情報を同じグループに分類し、１以上のグループのいずれか１つがユーザーにより選択されることに応じて、選択されたグループに属する複数の参照情報のうち少なくとも１つを表示する。
【０２５２】
したがって、携帯情報装置２００Ａは、ＭＦＰ１００が発表原稿を読み取って出力する読取データから抽出される、発表データに存在しないメモを、自装置または他の携帯情報装置２００Ｂ〜２００Ｅのいずかで発表データに追加されたメモとともに再現することができる。その結果、会議に関連するより多くの情報を容易に再現することが可能になる。
【０２５３】
上記の実施の形態においては、携帯情報装置２００ＡのＣＰＵ２０１は、ユーザーＡが発表者である間、すなわち発表開始時刻から発表終了時刻までの期間中会議情報を生成するが、本発明はこれに限定されない。ＣＰＵ２０１は、ユーザーＡが発表者でありかつ他のユーザーＢ〜Ｅの携帯情報装置２００Ｂ〜２００Ｅから参照情報を取得するときのみ会議情報を生成してもよい。それにより、各携帯情報装置２００Ａ〜２００Ｅで記憶される会議情報のデータ量を低減することができる。
【０２５４】
なお、上述した実施の形態においては、会議関連情報再現装置の一例として携帯情報装置２００Ａ〜２００Ｅを例に説明したが、図２９〜図３６に示した処理を、携帯情報装置２００Ａ〜２００Ｅそれぞれに実行させる会議関連情報再現方法、また、その会議関連情報再現方法を携帯情報装置２００Ａ〜２００Ｅそれぞれが備えるＣＰＵ２０１に実行させる会議関連情報再現プログラムとして発明を捉えることができるのは言うまでもない。
【０２５５】
今回開示された実施の形態はすべての点で例示であって制限的なものではないと考えられるべきである。本発明の範囲は上記した説明ではなくて特許請求の範囲によって示され、特許請求の範囲と均等の意味および範囲内でのすべての変更が含まれることが意図される。
【０２５６】
＜付記＞
（１）前記参照情報取得手段は、前記追加情報抽出手段により抽出された追加情報をベクトル化する、請求項１〜９のいずれかに記載の会議関連情報再現装置。この局面に従えば、追加情報を表示する際の画質が向上するとともに、追加情報を表すデータの量が低減される。
【０２５７】
（２）前記グループリスト表示手段は、前記１以上のグループごとに、当該グループに属する１以上の参照情報のいずれかの追加情報を表示する、請求項６に記載の会議関連情報再現装置。この局面に従えば、グループリストにグループに属する参照情報の追加情報が表示されるので、選択すべきグループを容易に識別することができる。
【０２５８】
（３）前記グループリスト表示手段は、１以上のグループにそれぞれ属する１以上の参照情報を選択可能に表示し、前記グループリスト表示手段により表示される１以上の参照情報のいずれか１つを選択する参照情報選択手段をさらに備え、前記グループリスト表示手段は、前記参照情報選択手段により選択された参照情報を他の参照情報の表示態様とは異なる表示態様で表示する、請求項６に記載の会議関連情報再現装置。この局面に従えば、選択された参照情報が他の参照情報の表示態様とは異なる表示態様で表示されるので、選択された参照情報を容易に識別することができる。
【０２５９】
（４）前記追加情報表示手段は、前記参照情報選択手段により１以上の参照情報のいずれか１つが選択された場合に、前記追加情報表示手段により表示される１以上の追加情報のうち選択された参照情報に含まれる追加情報を他の追加情報とは異なる表示態様で表示する、請求項６に記載の会議関連情報再現装置。この局面に従えば、選択された参照情報に含まれる追加情報が他の追加情報の表示態様とは異なる表示態様で表示されるので、選択された参照情報を容易に識別することができる。
【符号の説明】
【０２６０】
１  会議システム、２  ネットワーク、２Ａ，２Ｂ  ネットワーク、３Ａ，３Ｂ  無線局、５  インターネット、１００  ＭＦＰ、１１０  会議情報取得部、１１１  発表部分設定部、１２０  参照情報取得部、１２１  読取データ取得部、１２２  追加情報抽出部、１２３  位置決定部、１２４  記録媒体対応生成部、１２５  条件画像判定部、１２６  ユーザー識別情報取得部、１２７  サイズ決定部、１３０  グループ化部、１３１  グループリスト表示部、１３３  グループ期間決定部、１３４  選択部、１３５  グループ選択部、１３６  参照情報選択部、１３７  指標選択部、１３８  再生期間決定部、１５０  参照情報表示部、１５１  追加情報表示部、１５２  指標表示部、１５３  外側追加情報表示部、１６０  会議情報出力部、１６１  発表データ部分表示部、１７０  再生動作指示部、１９０  計時部、２００Ａ，２００Ｂ，２００Ｃ，２００Ｄ，２００Ｅ  携帯情報装置、２０１  ＣＰＵ、２０２  ＲＯＭ、２０３  ＲＡＭ、２０４  フラッシュメモリ、２０５，４６１  表示部、２０６，４６３  操作部、２０６Ａ  メインキー、２０６Ｂ，４６５  タッチパネル、２０６Ｃ  キーボード、２０６Ｄ  マウス、２０７  音声入力部、２０８  音声出力部、２０９  無線ＬＡＮＩ／Ｆ、２１０  外部記憶装置、２１０Ａ  ＣＤ−ＲＯＭ、２２１  参加ボタン、２２２  発表ボタン、２２３  一覧ボタン、２３１  発表画像表示領域、２４１  グループリスト表示領域、２４２  グループ識別情報、２４３  参照画像、２４９  スライダ、２５１  音声テキスト表示領域、２６１  再生操作表示領域、２９１  文字サイズボタン、２９２  戻るボタン、４００  ＭＦＰ、４０１  発表画像、４０２  軌跡画像、４０３  余白領域画像、４１０  メイン回路、４１１  ＣＰＵ、４１２  通信Ｉ／Ｆ部、４１３  ＲＯＭ、４１４  ＲＡＭ、４１５  ＨＤＤ、４１６  ファクシミリ部、４１７  外部記憶装置、４１８  ＣＤ−ＲＯＭ、４２０  自動原稿搬送装置、４３０  原稿読取部、４４０  画像形成部、４５０  給紙部、４６０  操作パネル、４６１  表示部、４６３  操作部、４６５  タッチパネル、４６７  ハードキー部、ｐ１，ｐ２，ｐ３，ｐ４，ｐ５，ｐ６，ｐ７，ｐ８  描画画像。
【図１】
2018006950.tif 000003
【図２】
2018006950.tif 000004
【図３】
2018006950.tif 000005
【図４】
2018006950.tif 000006
【図５】
2018006950.tif 000007
【図６】
2018006950.tif 000008
【図７】
2018006950.tif 000009
【図８】
2018006950.tif 000010
【図９】
2018006950.tif 000011
【図１０】
2018006950.tif 000012
【図１１】
2018006950.tif 000013
【図１２】
2018006950.tif 000014
【図１３】
2018006950.tif 000015
【図１４】
2018006950.tif 000016
【図１５】
2018006950.tif 000017
【図１６】
2018006950.tif 000018
【図１７】
2018006950.tif 000019
【図１８】
2018006950.tif 000020
【図１９】
2018006950.tif 000021
【図２０】
2018006950.tif 000022
【図２１】
2018006950.tif 000023
【図２２】
2018006950.tif 000024
【図２３】
2018006950.tif 000025
【図２４】
2018006950.tif 000026
【図２５】
2018006950.tif 000027
【図２６】
2018006950.tif 000028
【図２７】
2018006950.tif 000029
【図２８】
2018006950.tif 000030
【図２９】
2018006950.tif 000031
【図３０】
2018006950.tif 000032
【図３１】
2018006950.tif 000033
【図３２】
2018006950.tif 000034
【図３３】
2018006950.tif 000035
【図３４】
2018006950.tif 000036
【図３５】
2018006950.tif 000037
【図３６】
2018006950.tif 000038