(57)【要約】【課題】ボードに記述されたオブジェクトに関する発言を確認しやすくし、ファシリテーションを支援すること。【解決手段】ファシリテーション支援装置１２０は、ホワイトボード１１０を用いて行われた会議について、ホワイトボード１１０に記述されたオブジェクト＃０の指定を受け付けた場合に、オブジェクト＃０についての対応情報１３０を表示する。対応情報１３０は、オブジェクト＃０の記述前、記述中および記述後の各期間における会議の発言者をそれぞれ示している。ユーザは、この対応情報１３０を参照して、発言を確認したい参加者が発言者として含まれる期間を指示する。ファシリテーション支援装置１２０は、会議において録音された音声のうち、指定された期間における音声を再生する。【選択図】図１
2020034823.tif 000002
【特許請求の範囲】
【請求項１】
ディスカッションにおいてボードに記述されたオブジェクトと対応付けて、前記ディスカッションの参加者のうち前記オブジェクトの記述開始前、記述中および記述終了後の各期間のそれぞれにおける発言者を特定可能な情報を記憶する第１記憶部を参照して、前記ボードに記述されたオブジェクトの中から指定されたオブジェクトについての前記各期間のそれぞれにおける発言者を特定し、
前記指定されたオブジェクトについての前記各期間とそれぞれ対応付けて、特定した前記各期間のそれぞれにおける発言者を特定可能な情報を出力し、
前記指定されたオブジェクトについての前記各期間の中から期間の指定を受け付け、
録音された前記ディスカッションの音声のうち前記ボードに記述されたオブジェクトについての前記各期間における各音声を特定可能な情報を記憶する第２記憶部を参照して、前記指定されたオブジェクトについての指定された前記期間における音声を特定し、
特定した前記音声のデータを出力する、
処理をコンピュータに実行させることを特徴とするファシリテーション支援プログラム。
【請求項２】
前記ディスカッションにおける前記参加者が前記ボードに記述中か否かを監視し、
前記記述中か否かの監視結果と、前記ディスカッションにおいて得られた前記ボードの記述内容を示す画像と、に基づいて前記ボードに記述されたオブジェクトを抽出し、
前記録音された音声に基づいて、抽出した前記オブジェクトの前記各期間のそれぞれにおける発言者を検出し、
抽出した前記オブジェクトと対応付けて、抽出した前記オブジェクトについての前記各期間について検出した発言者をそれぞれ特定可能な情報を前記第１記憶部に記憶させる、
処理を前記コンピュータに実行させることを特徴とする請求項１に記載のファシリテーション支援プログラム。
【請求項３】
前記記述中か否かを監視する処理においては、前記ディスカッションにおける撮影により得られた撮影データから判定した、前記参加者の前記ディスカッションにおける頭と手との間の距離に基づいて、前記参加者が前記ボードに記述中か否かを監視する処理を前記コンピュータに実行させることを特徴とする請求項２に記載のファシリテーション支援プログラム。
【請求項４】
前記第１記憶部は、前記ディスカッションにおいて前記ボードに記述されたオブジェクトと対応付けて、前記オブジェクトの各期間のそれぞれにおける発言者を特定可能な情報と、前記オブジェクトの各期間における前記ディスカッションの状態を特定可能な情報と、を記憶し、
前記第１記憶部を参照して、前記指定されたオブジェクトについての前記各期間における前記ディスカッションの状態をそれぞれ特定し、
前記指定されたオブジェクトについての前記各期間とそれぞれ対応付けて、特定した前記各期間における前記ディスカッションの状態を特定可能な情報を出力する、
処理を前記コンピュータに実行させることを特徴とする請求項１〜３のいずれか一つに記載のファシリテーション支援プログラム。
【請求項５】
前記ディスカッションにおいて前記ボードに記述された各オブジェクトのうち、前記ディスカッションの状態が指定された状態となった期間が前記各期間の少なくともいずれかに含まれるオブジェクトを特定し、
特定した前記オブジェクトを特定可能な情報を出力し、
前記発言者をそれぞれ特定する処理においては、特定した前記オブジェクトの中から指定されたオブジェクトについての前記各期間のそれぞれにおける発言者を特定する、
処理を前記コンピュータに実行させることを特徴とする請求項１〜４のいずれか一つに記載のファシリテーション支援プログラム。
【請求項６】
前記ディスカッションにおいて前記ボードに記述された各オブジェクトのうち、指定された参加者が発言した期間が前記各期間の少なくともいずれかに含まれるオブジェクトを特定し、
特定した前記オブジェクトを特定可能な情報を出力し、
前記発言者をそれぞれ特定する処理においては、特定した前記オブジェクトの中から指定されたオブジェクトについての前記各期間のそれぞれにおける発言者を特定する、
処理を前記コンピュータに実行させることを特徴とする請求項１〜５のいずれか一つに記載のファシリテーション支援プログラム。
【請求項７】
前記ディスカッションにおいて前記ボードに記述された各オブジェクトの中から指定されたオブジェクトについて、前記各オブジェクトのうち、前記指定されたオブジェクトの直前に前記ボードに記述されたオブジェクトと、前記指定されたオブジェクトの直後に前記ボードに記述されたオブジェクトと、の少なくともいずれかを特定可能な情報を出力することを特徴とする請求項１〜６のいずれか一つに記載のファシリテーション支援プログラム。
【請求項８】
前記ディスカッションにおいて前記指定されたオブジェクトより前に記述されたオブジェクトがある場合、前記指定されたオブジェクトの前記記述開始前は、前記前に記述されたオブジェクトの記述終了から前記指定されたオブジェクトの記述開始までの期間であり、
前記ディスカッションにおいて前記指定されたオブジェクトより後に記述されたオブジェクトがある場合、前記指定されたオブジェクトの前記記述終了後は、前記指定されたオブジェクトの記述終了から前記後に記述されたオブジェクトの記述開始までの期間である、
ことを特徴とする請求項１〜７のいずれか一つに記載のファシリテーション支援プログラム。
【請求項９】
ディスカッションにおいてボードに記述されたオブジェクトと対応付けて、前記ディスカッションの参加者のうち前記オブジェクトの記述開始前、記述中および記述終了後の各期間のそれぞれにおける発言者を特定可能な情報を記憶する第１記憶部を参照して、前記ボードに記述されたオブジェクトの中から指定されたオブジェクトについての前記各期間のそれぞれにおける発言者を特定する第１特定部と、
前記指定されたオブジェクトについての前記各期間とそれぞれ対応付けて、前記第１特定部により特定された前記各期間のそれぞれにおける発言者を特定可能な情報を出力する第１出力部と、
前記指定されたオブジェクトについての前記各期間の中から期間の指定を受け付ける受付部と、
録音された前記ディスカッションの音声のうち前記ボードに記述されたオブジェクトについての前記各期間における各音声を特定可能な情報を記憶する第２記憶部を参照して、前記指定されたオブジェクトについての前記受付部により指定された前記期間における音声を特定する第２特定部と、
前記第２特定部により特定された前記音声のデータを出力する第２出力部と、
を備えることを特徴とするファシリテーション支援装置。
【請求項１０】
コンピュータが、
ディスカッションにおいてボードに記述されたオブジェクトと対応付けて、前記ディスカッションの参加者のうち前記オブジェクトの記述開始前、記述中および記述終了後の各期間のそれぞれにおける発言者を特定可能な情報を記憶する第１記憶部を参照して、前記ボードに記述されたオブジェクトの中から指定されたオブジェクトについての前記各期間のそれぞれにおける発言者を特定し、
前記指定されたオブジェクトについての前記各期間とそれぞれ対応付けて、特定した前記各期間のそれぞれにおける発言者を特定可能な情報を出力し、
前記指定されたオブジェクトについての前記各期間の中から期間の指定を受け付け、
録音された前記ディスカッションの音声のうち前記ボードに記述されたオブジェクトについての前記各期間における各音声を特定可能な情報を記憶する第２記憶部を参照して、前記指定されたオブジェクトについての指定された前記期間における音声を特定し、
特定した前記音声のデータを出力する、
ことを特徴とするファシリテーション支援方法。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、ファシリテーション支援プログラム、ファシリテーション支援装置およびファシリテーション支援方法に関する。
【背景技術】
【０００２】
従来、会議等のディスカッションにおいて情報の共有を支援する技術や、ディスカッションにおいて得られた情報の記録を支援する技術や、ディスカッションにおいて得られて記録された情報の利用を支援する技術などが知られている。たとえば、紙媒体を撮像装置への入力領域および画像投影領域として利用する技術が知られている（たとえば、下記特許文献１参照。）。また、入力された情報と手書きによる書き込みとの合成を行う技術が知られている（たとえば、下記特許文献２参照。）。
【０００３】
また、情報を記述した情報要素に対し、その情報要素が選択されている間に取得された映像や音声を関連づけて記録する技術が知られている（たとえば、下記特許文献３参照。）。また、プレゼンテーションで用いられる資料とこの資料を説明する音声等とを対応付けて記録することにより、資料と映像・音声とを同期させて再生する技術が知られている（たとえば、下記特許文献４参照。）。
【先行技術文献】
【特許文献】
【０００４】
【特許文献１】特開２００６−２０２０１６号公報
【特許文献２】特開２００７−２５７０５８号公報
【特許文献３】特開２００９−１９４７１８号公報
【特許文献４】特開２００２−１０９０９９号公報
【発明の概要】
【発明が解決しようとする課題】
【０００５】
しかしながら、上述した従来技術では、ディスカッションにおいてホワイトボード等のボードに記述された文章や説明図等のオブジェクトに関する、ディスカッションの参加者による発言を確認することが困難であるという問題がある。
【０００６】
たとえば、上述した従来技術では、音声が録音されるディスカッションにおいて、ボードに記述された特定のオブジェクトに関して特定の参加者がどのタイミングで発言したかをユーザが把握することができない。したがって、ユーザにとって、所望のオブジェクトについての所望の参加者による発言を会議の録音データから聞くための頭出しの作業が困難である。このため、所望のオブジェクトについての所望の参加者の発言を聞くまでに時間がかかる。
【０００７】
１つの側面では、本発明は、ボードに記述されたオブジェクトに関する発言を確認しやすくし、ファシリテーションを支援することができるファシリテーション支援プログラム、ファシリテーション支援装置およびファシリテーション支援方法を提供することを目的とする。
【課題を解決するための手段】
【０００８】
上述した課題を解決し、目的を達成するため、１つの実施態様では、ディスカッションにおいてボードに記述されたオブジェクトと対応付けて、前記ディスカッションの参加者のうち前記オブジェクトの記述開始前、記述中および記述終了後の各期間のそれぞれにおける発言者を特定可能な情報を記憶する第１記憶部を参照して、前記ボードに記述されたオブジェクトの中から指定されたオブジェクトについての前記各期間のそれぞれにおける発言者を特定し、前記指定されたオブジェクトについての前記各期間とそれぞれ対応付けて、特定した前記各期間のそれぞれにおける発言者を特定可能な情報を出力し、前記指定されたオブジェクトについての録音された前記ディスカッションの音声のうち前記ボードに記述されたオブジェクトについての前記各期間における各音声を特定可能な情報を記憶する第２記憶部を参照して、前記指定されたオブジェクトについての指定された前記期間における音声を特定し、特定した前記音声のデータを出力するファシリテーション支援プログラム、ファシリテーション支援装置およびファシリテーション支援方法が提案される。
【発明の効果】
【０００９】
本発明の一側面によれば、ボードに記述されたオブジェクトに関する発言を確認しやすくし、ファシリテーションを支援することができるという効果を奏する。
【図面の簡単な説明】
【００１０】
【図１】図１は、実施の形態にかかるファシリテーション支援装置によるファシリテーション支援の一例を示す図である。
【図２】図２は、実施の形態にかかるファシリテーション支援システムの一例を示す図である。
【図３】図３は、実施の形態にかかるファシリテーション支援装置のハードウェア構成の一例を示す図である。
【図４】図４は、実施の形態にかかるファシリテーション支援装置の一例を示す図である。
【図５Ａ】図５Ａは、実施の形態にかかるファシリテーション支援装置による情報記憶処理の一例を示すフローチャート（その１）である。
【図５Ｂ】図５Ｂは、実施の形態にかかるファシリテーション支援装置による情報記憶処理の一例を示すフローチャート（その２）である。
【図６】図６は、実施の形態にかかる会議状態の判定処理の一例を示す図である。
【図７】図７は、実施の形態にかかるファシリテーション支援装置による記述状態の判定処理の一例を示す図（その１）である。
【図８】図８は、実施の形態にかかるファシリテーション支援装置による記述状態の判定処理の一例を示す図（その２）である。
【図９】図９は、実施の形態にかかるファシリテーション支援装置による記述状態の判定処理の一例を示す図（その３）である。
【図１０】図１０は、実施の形態にかかるファシリテーション支援装置の対象の会議の一例における第１段階を示す図（その１）である。
【図１１】図１１は、実施の形態にかかるファシリテーション支援装置の対象の会議の一例における第１段階を示す図（その２）である。
【図１２】図１２は、図１０および図１１に示した第１段階におけるファシリテーション支援装置の処理のタイミングの一例を示す図である。
【図１３】図１３は、図１０および図１１に示した第１段階においてファシリテーション支援装置がオブジェクト情報記憶部に記憶させる情報の一例を示す図である。
【図１４】図１４は、実施の形態にかかるファシリテーション支援装置の対象の会議の一例における第２段階を示す図（その１）である。
【図１５】図１５は、実施の形態にかかるファシリテーション支援装置の対象の会議の一例における第２段階を示す図（その２）である。
【図１６】図１６は、図１４および図１５に示した第２段階におけるファシリテーション支援装置の処理のタイミングの一例を示す図である。
【図１７】図１７は、図１４および図１５に示した第２段階においてファシリテーション支援装置がオブジェクト情報記憶部に記憶させる情報の一例を示す図である。
【図１８】図１８は、実施の形態にかかるファシリテーション支援装置の対象の会議の一例における第３段階を示す図（その１）である。
【図１９】図１９は、実施の形態にかかるファシリテーション支援装置の対象の会議の一例における第３段階を示す図（その２）である。
【図２０】図２０は、図１８および図１９に示した第３段階におけるファシリテーション支援装置の処理のタイミングの一例を示す図である。
【図２１】図２１は、図１８および図１９に示した第３段階においてファシリテーション支援装置がオブジェクト情報記憶部に記憶させる情報の一例を示す図である。
【図２２】図２２は、実施の形態にかかるファシリテーション支援装置の対象の会議の一例における第４段階を示す図（その１）である。
【図２３】図２３は、実施の形態にかかるファシリテーション支援装置の対象の会議の一例における第４段階を示す図（その２）である。
【図２４】図２４は、図２２および図２３に示した第４段階におけるファシリテーション支援装置の処理のタイミングの一例を示す図である。
【図２５】図２５は、図２２および図２３に示した第４段階においてファシリテーション支援装置がオブジェクト情報記憶部に記憶させる情報の一例を示す図である。
【図２６】図２６は、実施の形態にかかるファシリテーション支援装置の対象の会議の一例における第５段階を示す図（その１）である。
【図２７】図２７は、実施の形態にかかるファシリテーション支援装置の対象の会議の一例における第５段階を示す図（その２）である。
【図２８】図２８は、図２６および図２７に示した第５段階におけるファシリテーション支援装置の処理のタイミングの一例を示す図である。
【図２９】図２９は、図２６および図２７に示した第５段階においてファシリテーション支援装置がオブジェクト情報記憶部に記憶させる情報の一例を示す図である。
【図３０】図３０は、実施の形態にかかるファシリテーション装置による情報出力処理の一例を示すフローチャートである。
【図３１】図３１は、実施の形態にかかるファシリテーション支援装置が表示するオブジェクト再生画面の一例を示す情報である。
【図３２】図３２は、実施の形態にかかるファシリテーション支援装置によるサブウィンドウの表示の一例を示す情報である。
【図３３】図３３は、実施の形態にかかるファシリテーション支援装置によるサブウィンドウの表示の他の一例を示す図（その１）である。
【図３４】図３４は、実施の形態にかかるファシリテーション支援装置によるサブウィンドウの表示の他の一例を示す図（その２）である。
【発明を実施するための形態】
【００１１】
以下に図面を参照して、本発明にかかるファシリテーション支援プログラム、ファシリテーション支援装置およびファシリテーション支援方法の実施の形態を詳細に説明する。
【００１２】
（実施の形態）
（実施の形態にかかるファシリテーション支援装置によるファシリテーション支援）
図１は、実施の形態にかかるファシリテーション支援装置によるファシリテーション支援の一例を示す図である。図１に示すファシリテーション支援装置１２０は、ホワイトボード１１０などのボードを用いて行われたディスカッションについてのファシリテーションを支援する。ここでいうファシリテーションとは、たとえば、実施済みのディスカッションの内容を示す情報の利用に関するものである。
【００１３】
ディスカッションとは、複数の参加者が発言するイベントである。たとえば、ディスカッションには、会議、打ち合わせ、討論、ミーティング、ヒアリング、設計レビューといった各種のイベントが含まれる。これらのディスカッションの目的は、アイディアソン、現状確認、手法検討など各種の目的とすることができる。また、ディスカッションには、複数の参加者がネットワークを介して会話を行う電子会議などが含まれてもよい。ここでは、会議室等の特定の場所に集まった複数の参加者が、その場所に設置されたホワイトボード１１０を用いて行う会議の例について説明する。
【００１４】
たとえば、図１に示すように、参加者にＡさんおよびＢさんを含み、ホワイトボード１１０を用いた会議が行われたとする。ホワイトボード１１０は、インクを用いたマーカ等により記述が可能な記述エリア１１１を有するボードである。この会議における音声は録音され、録音により得られた音声データは、ファシリテーション支援装置１２０がアクセス可能な記憶部（たとえば図４に示す音声データ記憶部４０５）に記憶される。
【００１５】
この会議において、Ａさんがホワイトボード１１０の記述エリア１１１にオブジェクト＃０を記述したとする。記述は、情報をかき表すことである。たとえば、記述は、文字（符号等を含む）を書くことや、図（絵等を含む）を描くことである。オブジェクトとは、ホワイトボード１１０の記述エリア１１１に記述された一連の情報である。一連の情報とは、たとえば、記述エリア１１１への記述の動作が開始されてから、その記述の動作が終了するまでに記述エリア１１１に記述された文字や図である。
【００１６】
図１に示す例では、Ａさんが、マーカを持った手を記述エリア１１１の高さまで上げてノート型のパーソナルコンピュータの図を描き始め、この図を描き終わるとマーカを持った手を下げたとする。この場合に、ファシリテーション支援装置１２０は、Ａさんが手を上げてから下げるまでの間に記述エリア１１１に追加されたノート型のパーソナルコンピュータの図を、１つのオブジェクト（オブジェクト＃０）として認識する。ただし、オブジェクトの認識方法はこれに限らず、各種の方法を用いることができる。
【００１７】
上述の会議において、Ａさんが、発言を行いながらオブジェクト＃０の記述を開始し、図１に示すようにオブジェクト＃０の記述中にも発言を続け、Ａさんがオブジェクト＃０の記述を終了した後にＡさんおよびＢさんが発言したとする。
【００１８】
この場合に、オブジェクト＃０と対応付けて、会議の参加者のうちオブジェクト＃０の記述開始前、記述中および記述終了後の各期間のそれぞれにおける発言者を特定可能な情報が第１記憶部に記憶される。第１記憶部は、ファシリテーション支援装置１２０がアクセス可能な記憶装置に含まれる。
【００１９】
たとえば、第１記憶部は、ファシリテーション支援装置１２０が備える記憶装置に含まれる記憶部（たとえば図４に示すオブジェクト情報記憶部４０７）である。または、第１記憶部は、ファシリテーション支援装置１２０がアクセス可能な外部の記憶装置に含まれてもよい。第１記憶部への上述の情報の記憶は、たとえばファシリテーション支援装置１２０の制御により行われてもよいし、ファシリテーション支援装置１２０とは異なる装置の制御により行われてもよい。以下、第１記憶部への上述の情報の記憶の制御をファシリテーション支援装置１２０が行う場合について説明する。
【００２０】
また、オブジェクト＃０と対応付けて、会議において録音された音声（会議全体の音声）のうち、オブジェクト＃０についての記述開始前、記述中および記述終了後における各音声を特定可能な情報が第２記憶部に記憶される。第２記憶部は、ファシリテーション支援装置１２０がアクセス可能な記憶装置に含まれる。また、第２記憶部は、第１記憶部を含む記憶装置に含まれてもよいし、第１記憶部を含む記憶装置とは異なる記憶装置に含まれてもよい。
【００２１】
たとえば、第２記憶部は、ファシリテーション支援装置１２０が備える記憶装置に含まれる記憶部（たとえば図４に示すオブジェクト情報記憶部４０７）である。または、第２記憶部は、ファシリテーション支援装置１２０がアクセス可能な外部の記憶装置に含まれてもよい。第２記憶部への上述の情報の記憶は、たとえばファシリテーション支援装置１２０の制御により行われてもよいし、ファシリテーション支援装置１２０とは異なる装置の制御により行われてもよい。以下、第２記憶部への上述の情報の記憶の制御をファシリテーション支援装置１２０が行う場合について説明する。
【００２２】
オブジェクト＃０の記述開始前は、オブジェクト＃０の記述が開始される前の期間である。たとえば、オブジェクト＃０が会議において最初に記述されたオブジェクトである場合、オブジェクト＃０の記述開始前は、会議の最初から、オブジェクト＃０の記述が開始されるまでの期間である。また、オブジェクト＃０が会議において２番目以降に記述されたオブジェクトである場合、オブジェクト＃０の記述開始前は、オブジェクト＃０の直前に記述されたオブジェクトの記述が終了してから、オブジェクト＃０の記述が開始されるまでの期間である。以下、記述開始前を記述前と称する。
【００２３】
オブジェクト＃０の記述中は、オブジェクト＃０の記述が開始されてから、オブジェクト＃０の記述が終了するまでの期間である。
【００２４】
オブジェクト＃０の記述終了後は、オブジェクト＃０の記述が終了した後の期間である。たとえば、オブジェクト＃０が会議において最後に記述されたオブジェクトである場合、オブジェクト＃０の記述終了後は、オブジェクト＃０の記述が終了してから、会議の終了までの期間である。オブジェクト＃０が会議において最後から２番目以前に記述されたオブジェクトである場合、オブジェクト＃０の記述終了後は、オブジェクト＃０の記述が終了してから、オブジェクト＃０の直後に記述されたオブジェクトの記述が開始されるまでの期間である。以下、記述終了後を記述後と称する。
【００２５】
図１に示す例では、上述の第１記憶部には、オブジェクト＃０と対応付けて、オブジェクト＃０の記述前における発言者としてＡさんを特定可能な情報（たとえばＡさんの識別情報）が記憶される。また、上述の第１記憶部には、オブジェクト＃０と対応付けて、オブジェクト＃０の記述中における発言者としてＡさんを特定可能な情報が記憶される。また、上述の第１記憶部には、オブジェクト＃０と対応付けて、オブジェクト＃０の記述後における発言者としてＡさんおよびＢさんを特定可能な情報（たとえばＡさんの識別情報およびＢさんの識別情報）が記憶される。
【００２６】
ファシリテーション支援装置１２０は、記述エリア１１１に記述されたオブジェクトの中から、オブジェクトの指定（選択）をユーザから受け付ける。オブジェクトの指定を受け付けると、ファシリテーション支援装置１２０は、上述の第１記憶部を参照して、指定されたオブジェクトについての上述の記述前、記述中および記述後における発言者をそれぞれ特定する。
【００２７】
たとえば、ユーザがファシリテーション支援装置１２０に対してオブジェクト＃０を指定する操作を行ったとする。この場合に、ファシリテーション支援装置１２０は、オブジェクト＃０について、記述前における発言者としてＡさんを特定し、記述中における発言者としてＡさんを特定し、記述後における発言者としてＡさんおよびＢさんを特定する。
【００２８】
そして、ファシリテーション支援装置１２０は、オブジェクト＃０についての記述前、記述中および記述後と対応付けて、特定した記述前、記述中および記述後における発言者を特定可能な情報を出力する。図１に示す例では、ファシリテーション支援装置１２０は、ディスプレイにより対応情報１３０を表示する。対応情報１３０は、オブジェクト＃０について、記述前とＡさんとを対応付け、記述中とＡさんとを対応付け、記述後とＡさんおよびＢさんとを対応付けている。
【００２９】
これにより、ユーザは、オブジェクト＃０に関して、オブジェクト＃０の記述前、記述中および記述後の各期間について、その期間における発言者を把握することができる。あるいは、ユーザは、オブジェクト＃０に関して特定の参加者が発言した期間が、オブジェクト＃０の記述前、記述中および記述後のいずれであるかを把握することができる。
【００３０】
ファシリテーション支援装置１２０は、指定されたオブジェクト＃０の記述前、記述中および記述後の各期間の中から、期間の指定をユーザから受け付ける。たとえば、対応情報１３０には、それぞれ記述前、記述中および記述後に対応付けて再生ボタン１３１〜１３３が設けられている。
【００３１】
たとえばユーザが再生ボタン１３１を指定する操作を行うと、ファシリテーション支援装置１２０は、記述前の指定を受け付けたと判断する。また、ユーザが再生ボタン１３２を指定する操作を行うと、ファシリテーション支援装置１２０は、記述中の指定を受け付けたと判断する。また、ユーザが再生ボタン１３３を指定する操作を行うと、ファシリテーション支援装置１２０は、記述後の指定を受け付けたと判断する。期間の指定を受け付けると、ファシリテーション支援装置１２０は、上述の第２記憶部を参照して、会議において録音された音声のうち、指定された期間における音声を特定する。
【００３２】
そして、ファシリテーション支援装置１２０は、特定した音声のデータを出力する。特定した音声のデータとは、特定した音声を再生するための音声データである。たとえば、ファシリテーション支援装置１２０は、特定した音声のデータをスピーカへ出力することにより、特定した音声を再生する。
【００３３】
たとえば、会議における全期間の音声が１つの音声データとして記憶されている場合、ファシリテーション支援装置１２０は、その音声データが示す会議における全期間の音声における、指定された期間に対応する再生位置を特定する。そして、ファシリテーション支援装置１２０は、記憶された音声データに基づいて、会議における全期間の音声のうち、特定した再生位置の音声を再生する。
【００３４】
また、会議における音声は、オブジェクトの記述開始および記述終了の各タイミングで分割された音声データとして記憶されてもよい。この場合に、ファシリテーション支援装置１２０は、分割された各音声データのうち、指定された期間に対応する音声データを特定する。そして、ファシリテーション支援装置１２０は、特定した音声データを先頭から再生する。
【００３５】
たとえば、ユーザは、記述エリア１１１に記述されたオブジェクト＃０に関するＢさんの発言を参照したいとする。この場合に、ユーザは、オブジェクト＃０を指定する操作を行い、それにより表示された対応情報１３０を参照して、Ｂさんがオブジェクト＃０の記述後に発言していることを把握する。そのため、ユーザは、オブジェクト＃０の記述後と対応付けられた再生ボタン１３３を指定する操作を行う。
【００３６】
これに対して、ファシリテーション支援装置１２０は、再生ボタン１３３を指定する操作を受け付けたことにより、オブジェクト＃０の記述後が指定されたと判断する。そして、ファシリテーション支援装置１２０は、上述の第２記憶部を参照して、オブジェクト＃０についての記述後における音声を特定する。そして、ファシリテーション支援装置１２０は、上述の記憶部に記憶された音声データを読み出し、特定した音声を再生する。
【００３７】
これにより、ユーザは、会議の全期間のうちオブジェクト＃０に関するＢさんの発言が含まれる部分的な期間における音声を聞くことができる。このため、ユーザは、オブジェクト＃０に関するＢさんの発言を効率よく把握することができる。たとえば、会議の全期間の音声を最初から聞いてオブジェクト＃０に関するＢさんの発言を参照するよりも、オブジェクト＃０に関するＢさんの発言を短時間で把握することができる。
【００３８】
また、オブジェクト＃０についての記述前、記述中および記述後の各期間は、オブジェクト＃０についての会話の各段階に対応している。すなわち、オブジェクト＃０の記述開始のタイミングと、オブジェクト＃０の記述終了のタイミングと、において、オブジェクト＃０に関する会話の段階が進んでいると考えることができる。このため、記述前、記述中および記述後の各期間において、発言者が異なる可能性が高い。
【００３９】
たとえば、Ｂさんは、オブジェクト＃０に関する会話において結論を出す立場の参加者であるとする。この場合、Ｂさんは、オブジェクト＃０についての記述前および記述中よりも、オブジェクト＃０の記述後において発言を行う可能性が高い。したがって、記述前、記述中および記述後のそれぞれについて発言者を特定することで、特定の参加者が発言した期間を、その参加者が発言していない期間と分けてユーザに提示することができる。このため、ユーザは、記述エリア１１１に記述された特定のオブジェクト（たとえばオブジェクト＃０）についての特定の参加者（たとえばＢさん）の発言を効率よく把握することができる。
【００４０】
このように、図１に示したファシリテーション支援装置１２０によれば、ホワイトボード１１０の記述エリア１１１に記述されたオブジェクトに関する会議の内容を把握しやすくし、ファシリテーションを支援することができる。
【００４１】
たとえば、ファシリテーション支援装置１２０によれば、ユーザによる頭出しの作業が容易になる。頭出しとは、録音された音声のうち所望の部分の先頭をさがし出すことである。たとえば、ユーザは、指定したオブジェクトについて提示された、記述前、記述中および記述後のそれぞれにおける発言者を参照して、所望の発言者を含む期間を指定することにより、その発言者の発言を聞くことができる。
【００４２】
たとえば、ユーザは、録音データを最初から再生し、所望のオブジェクトについての所望の参加者の発言が再生されるまで待つという作業を行わなくてもよい。あるいは、ユーザは、録音データのうち所望のオブジェクトについての所望の参加者の発言が含まれると予測した位置の音声を再生することを、所望のオブジェクトについての所望の参加者が見つかるまで繰り返すという作業を行わなくてもよい。したがって、ユーザは、所望のオブジェクトについての所望の参加者の発言を、簡単に早く聞くことができる。
【００４３】
（実施の形態にかかるファシリテーション支援システム）
図２は、実施の形態にかかるファシリテーション支援システムの一例を示す図である。図２において、図１に示した部分と同様の部分については同一の符号を付して説明を省略する。図２に示すファシリテーション支援システム２００は、ホワイトボード１１０と、ファシリテーション支援装置１２０と、ボード撮影用カメラ２０１と、参加者撮影用カメラ２０２と、マイク２０３と、を含む。
【００４４】
ホワイトボード１１０は、マーカ等を用いてオブジェクトの記述が可能な矩形の上述の記述エリア１１１と、記述エリア１１１を囲む枠１１２と、記述エリア１１１および枠１１２を所定の高さで立てた状態で保持する足部１１３と、を有する。
【００４５】
ボード撮影用カメラ２０１は、ホワイトボード１１０の記述エリア１１１に記述されたオブジェクトや、ボード撮影用カメラ２０１とホワイトボード１１０との間の人物を撮影するカメラである。たとえば、ボード撮影用カメラ２０１は、記述エリア１１１に対向し、ホワイトボード１１０の記述エリア１１１の全体を撮影する位置に設置される。また、ボード撮影用カメラ２０１は、ファシリテーション支援装置１２０と接続されており、撮影により得られた撮影データをファシリテーション支援装置１２０へ送信する。
【００４６】
参加者撮影用カメラ２０２は、ホワイトボード１１０を用いた会議への参加者を撮影するカメラである。たとえば、参加者撮影用カメラ２０２は、ホワイトボード１１０の前の位置であって、会議への参加者に囲まれる位置に設置される。また、参加者撮影用カメラ２０２は、ファシリテーション支援装置１２０と接続されており、撮影により得られた撮影データをファシリテーション支援装置１２０へ送信する。
【００４７】
マイク２０３は、ホワイトボード１１０を用いた会議における音声を録音する。たとえば、マイク２０３は、会議への各参加者の発言を録音可能な位置に設置される。また、マイク２０３は、ファシリテーション支援装置１２０と接続されており、録音により得られた音声データをファシリテーション支援装置１２０へ送信する。
【００４８】
ファシリテーション支援装置１２０は、記述エリア１１１に記述されたオブジェクトに関する情報や音声データの記憶を行う。また、ファシリテーション支援装置１２０は、記憶したオブジェクトに関する情報や音声データの再生を行う。図２に示す例では、ファシリテーション支援装置１２０はノート型のパーソナルコンピュータである。ただし、ファシリテーション支援装置１２０はこれに限らず、デスクトップ型のパーソナルコンピュータであってもよいし、タブレット型のパーソナルコンピュータなどであってもよい。
【００４９】
ファシリテーション支援装置１２０がオブジェクトに関する情報や音声データを記憶する記憶媒体（上述の各記憶部）は、たとえば、ファシリテーション支援装置１２０が内蔵する記憶媒体である。または、ファシリテーション支援装置１２０がオブジェクトに関する情報や音声データを記憶する記憶媒体は、ファシリテーション支援装置１２０がアクセス可能な外部の記憶媒体であってもよい。また、上述したオブジェクトに関する情報や音声データの再生は、ファシリテーション支援装置１２０とは異なるコンピュータが、上述の記憶媒体にアクセスすることによって行ってもよい。
【００５０】
（実施の形態にかかるファシリテーション支援装置のハードウェア構成）
図３は、実施の形態にかかるファシリテーション支援装置のハードウェア構成の一例を示す図である。図１に示したファシリテーション支援装置１２０は、たとえば図３に示すコンピュータ３００により実現することができる。コンピュータ３００は、プロセッサ３０１と、メモリ３０２と、カメラインタフェース３０３と、マイクインタフェース３０４と、ユーザインタフェース３０５と、を備える。プロセッサ３０１、メモリ３０２、カメラインタフェース３０３、マイクインタフェース３０４およびユーザインタフェース３０５は、たとえばバス３０９によって接続される。
【００５１】
プロセッサ３０１は、信号処理を行う回路であり、たとえばコンピュータ３００の全体の制御を司るＣＰＵ（Ｃｅｎｔｒａｌ  Ｐｒｏｃｅｓｓｉｎｇ  Ｕｎｉｔ）である。メモリ３０２には、たとえばメインメモリおよび補助メモリが含まれる。メインメモリは、たとえばＲＡＭ（Ｒａｎｄｏｍ  Ａｃｃｅｓｓ  Ｍｅｍｏｒｙ）である。メインメモリは、プロセッサ３０１のワークエリアとして使用される。
【００５２】
補助メモリは、たとえば磁気ディスク、光ディスク、フラッシュメモリなどの不揮発性メモリである。補助メモリには、コンピュータ３００を動作させる各種のプログラムが記憶されている。補助メモリに記憶されたプログラムは、メインメモリにロードされてプロセッサ３０１によって実行される。
【００５３】
また、補助メモリは、コンピュータ３００から取り外し可能な可搬型のメモリを含んでもよい。可搬型のメモリには、ＵＳＢフラッシュドライブやＳＤメモリカードなどのメモリカードや、外付けハードディスクドライブなどがある。ＵＳＢはＵｎｉｖｅｒｓａｌ  Ｓｅｒｉａｌ  Ｂｕｓの略語である。ＳＤはたとえばＳｅｃｕｒｅ  Ｄｉｇｉｔａｌの略語である。
【００５４】
カメラインタフェース３０３は、図２に示したボード撮影用カメラ２０１および参加者撮影用カメラ２０２との間で有線や無線による通信を行うインタフェースである。カメラインタフェース３０３は、プロセッサ３０１によって制御される。マイクインタフェース３０４は、図２に示したマイク２０３との間で有線や無線による通信を行うインタフェースである。マイクインタフェース３０４は、プロセッサ３０１によって制御される。
【００５５】
ユーザインタフェース３０５は、たとえば、ユーザからの操作入力を受け付ける入力デバイスや、ユーザへ情報を出力する出力デバイスなどを含む。入力デバイスは、たとえばポインティングデバイス（たとえばマウス）、キー（たとえばキーボード）やリモコンなどにより実現することができる。出力デバイスは、たとえばディスプレイやスピーカなどにより実現することができる。また、タッチパネルなどによって入力デバイスおよび出力デバイスを実現してもよい。ユーザインタフェース３０５は、プロセッサ３０１によって制御される。
【００５６】
（実施の形態にかかるファシリテーション支援装置）
図４は、実施の形態にかかるファシリテーション支援装置の一例を示す図である。実施の形態にかかるファシリテーション支援装置１２０は、たとえば、図４に示すように、操作受付部４０１と、ボード撮影用カメラデータ取得部４０２と、参加者撮影用カメラデータ取得部４０３と、マイクデータ取得部４０４と、を備える。また、ファシリテーション支援装置１２０は、音声データ記憶部４０５と、記憶制御部４０６と、オブジェクト情報記憶部４０７と、出力制御部４０８と、出力部４０９と、を備える。これらのファシリテーション支援装置１２０の各部の処理結果は、たとえば図３に示したメモリ３０２などの記憶装置に記憶される。
【００５７】
操作受付部４０１は、ファシリテーション支援装置１２０のユーザからの操作を受け付ける。そして、操作受付部４０１は、情報の記憶に関する操作を受け付けた場合は、受け付けた操作に応じた指示情報を記憶制御部４０６へ出力する。また、操作受付部４０１は、情報の再生に関する操作を受け付けた場合は、受け付けた操作に応じた指示情報を出力制御部４０８へ出力する。
【００５８】
ボード撮影用カメラデータ取得部４０２は、図２に示したボード撮影用カメラ２０１から送信される撮影データを取得し、取得した音声データを記憶制御部４０６へ出力する。ボード撮影用カメラデータ取得部４０２により取得される撮影データは、周期的なタイミングで撮影された画像のデータであってもよいし、時系列的に連続して撮影された画像のデータに基づく動画データであってもよい。
【００５９】
参加者撮影用カメラデータ取得部４０３は、図２に示した参加者撮影用カメラ２０２から送信される撮影データを取得し、取得した音声データを記憶制御部４０６へ出力する。参加者撮影用カメラデータ取得部４０３により取得される撮影データは、周期的なタイミングで撮影された画像のデータであってもよいし、時系列的に連続して撮影された画像のデータに基づく動画データであってもよい。
【００６０】
マイクデータ取得部４０４は、図２に示したマイク２０３から送信される音声データを取得し、取得した音声データを記憶制御部４０６および音声データ記憶部４０５へ出力する。音声データ記憶部４０５は、マイクデータ取得部４０４から出力された音声データを記憶する。
【００６１】
記憶制御部４０６は、オブジェクト情報記憶部４０７によるオブジェクトに関する情報の記憶を制御する。出力制御部４０８による制御は、たとえば操作受付部４０１から出力された指示情報に基づいて行われる。この指示情報は、たとえば、会議の開始とともに操作受付部４０１によって受け付けられる、会議の情報の記憶の開始を指示する情報である。たとえば、記憶制御部４０６は、音声データの記憶処理、発言者の検出処理、参加者状態の判定処理および記述状態の判定処理を行う。以下、これらの処理についてそれぞれ説明する。
【００６２】
音声データの記憶処理は、マイク２０３から出力される音声データをメモリ３０２に順次記憶させる処理である。このとき、記憶制御部４０６は、たとえば会議中にマイク２０３から出力された音声データを１つの音声データとして音声データ記憶部４０５に順次記憶させる。または、記憶制御部４０６は、会議中にマイク２０３から出力された音声データを、後述の記述状態の判定処理によって判定される記述開始および記述終了の各タイミングで分割し、分割した各音声データを音声データ記憶部４０５に記憶させてもよい。
【００６３】
発言者の検出処理は、現在時点での会議における発言の有無を判定し、発言があったと判定した場合は、その発言を行った発言者を会議の参加者の中から特定する処理である。発言者の検出処理は、たとえばマイクデータ取得部４０４から出力された音声データが示す音声から検出される声紋や声の方向に基づいて行われる。また、発言者の検出処理は、参加者撮影用カメラデータ取得部４０３から出力される撮影データから検出される参加者の状態等に基づいて行われてもよい。
【００６４】
一例としては、発言者の検出処理は、マイクデータ取得部４０４から出力された音声データと、音声データから話者識別を行うＳｐｅａｋｅｒ  Ｒｅｃｏｇｎｉｔｉｏｎ  ＡＰＩなどのＡＰＩと、を用いて行うことができる。ＡＰＩはＡｐｐｌｉｃａｔｉｏｎ  Ｐｒｏｇｒａｍｍｉｎｇ  Ｉｎｔｅｒｆａｃｅの略語である。発言者の検出処理には、さらに、特定した発言者の状態を判定する処理が含まれてもよい。
【００６５】
発言者の状態を判定する処理は、たとえば、参加者撮影用カメラ２０２から出力される撮影データと、ＦａｃｅＡＰＩやＨａａｒ−ＣａｓｃａｄｅなどのＡＰＩと、を用いて行うことができる。ＦａｃｅＡＰＩは、人物の顔画像からその人物の感情を判定（各感情の信頼度を算出）するＡＰＩである。ＦａｃｅＡＰＩにより判定可能な感情には、たとえば「怒り」、「軽蔑」、「嫌悪」、「恐怖」、「喜び」、「中立」、「哀しみ」、「驚き」などが含まれる。Ｈａａｒ−Ｃａｓｃａｄｅは、笑顔検出を行うＡＰＩである。また、発言者の状態を判定する処理は、脳波測定装置によって測定された発言者の脳波の情報や、マイクデータ取得部４０４から出力された音声データから判定された発言者の精神状態なども用いて行われてもよい。
【００６６】
参加者状態の判定処理は、現在時点での会議の参加者状態を判定する処理である。参加者状態は、たとえば、会議の各参加者についての感情に関する状態である。たとえば、参加者状態は、上述のＦａｃｅＡＰＩなどを用いて判定される、会議の各参加者についての感情である。この場合に、記憶制御部４０６は、参加者状態の判定処理において、参加者撮影用カメラデータ取得部４０３から出力された撮影データと、上述のＦａｃｅＡＰＩと、に基づいて、会議の各参加者の感情を参加者状態として判定する。
【００６７】
また、参加者状態は、上述のＨａａｒ−Ｃａｓｃａｄｅなどを用いて判定される、会議の各参加者についての笑顔か否かの状態であってもよい。この場合に、記憶制御部４０６は、参加者状態の判定処理において、参加者撮影用カメラデータ取得部４０３から出力された撮影データと、上述のＨａａｒ−Ｃａｓｃａｄｅと、に基づいて、会議の各参加者が笑顔か否かを参加者状態として判定する。
【００６８】
また、参加者状態は、上述の会議の各参加者についての笑顔か否かの状態に基づく、会議の各参加者のうちの笑顔と判定された参加者の割合を示す笑顔指数であってもよい。この場合に、記憶制御部４０６は、参加者状態の判定処理において、上述の会議の各参加者が笑顔か否かの判定結果に基づいて、笑顔と判定した参加者の数を会議の各参加者の数で除算することにより得た笑顔指数を、参加者状態の判定結果とする。
【００６９】
また、記憶制御部４０６は、参加者状態の判定処理において、たとえばマイクデータ取得部４０４から出力された音声データに基づく声認識や、参加者の脳波を測定する脳波測定装置の測定結果などを用いて参加者状態を判定してもよい。
【００７０】
記述状態の判定処理は、記述エリア１１１への記述状態を判定する処理である。記述エリア１１１への記述状態は、記述エリア１１１に対する記述が行われているか否か（記述中か非記述中か）の状態である。記述状態の判定処理は、たとえばボード撮影用カメラ２０１から得られた撮影データに基づいて行われる。記述状態の判定処理の例については後述する（たとえば図７〜図９参照）。
【００７１】
オブジェクト情報記憶部４０７は、記憶制御部４０６からの制御にしたがって、記述エリア１１１に記述されたオブジェクトに関する情報を記憶する。オブジェクト情報記憶部４０７が記憶する各情報の例については後述する。
【００７２】
出力制御部４０８は、操作受付部４０１から出力された指示情報に基づいて、オブジェクト情報記憶部４０７に記憶されたオブジェクトに関する情報と、音声データ記憶部４０５に記憶された音声データと、の出力部４０９による出力を制御する。出力制御部４０８による制御は、たとえば、会議の終了後に操作受付部４０１によって受け付けられた操作に基づく指示情報に基づいて行われる。この指示情報には、たとえば、会議中に記述エリア１１１に記述された各オブジェクトの表示を指示する情報や、その中からオブジェクトを指示する情報や、そのオブジェクトの記述前、記述中および記述後のいずれの音声を再生するかを指示する情報が含まれる。
【００７３】
出力部４０９は、出力制御部４０８からの制御にしたがって、オブジェクト情報記憶部４０７に記憶されたオブジェクトに関する情報を出力する。また、出力部４０９は、出力制御部４０８からの制御にしたがって、音声データ記憶部４０５に記憶された音声を再生する。出力部４０９による情報の出力の例については後述する（たとえば図３１〜図３４参照）。
【００７４】
図１を用いて説明した第１記憶部および第２記憶部は、たとえばオブジェクト情報記憶部４０７により実現することができる。また、図１を用いて説明した参加者の特定を行う第１特定部および音声の特定を行う第２特定部は、たとえば出力制御部４０８により実現することができる。また、図１を用いて説明した参加者を特定可能な情報を出力する第１出力部および音声のデータの出力を行う第２出力部は、たとえば出力部４０９により実現することができる。
【００７５】
図４に示した操作受付部４０１および出力部４０９は、たとえば図３に示したユーザインタフェース３０５により実現することができる。図４に示したボード撮影用カメラデータ取得部４０２および参加者撮影用カメラデータ取得部４０３は、たとえば図３に示したカメラインタフェース３０３により実現することができる。図４に示したマイクデータ取得部４０４は、たとえば図３に示したマイクインタフェース３０４により実現することができる。
【００７６】
図４に示した記憶制御部４０６および出力制御部４０８は、たとえば図３に示したプロセッサ３０１およびメモリ３０２により実現することができる。図４に示した音声データ記憶部４０５およびオブジェクト情報記憶部４０７は、たとえば図３に示したメモリ３０２に含まれる補助メモリにより実現することができる。
【００７７】
（実施の形態にかかるファシリテーション支援装置による情報記憶処理）
図５Ａおよび図５Ｂは、実施の形態にかかるファシリテーション支援装置による情報記憶処理の一例を示すフローチャートである。実施の形態にかかるファシリテーション支援装置１２０は、ホワイトボード１１０を用いた会議の開始時に、情報の記憶を指示する操作を受け付けると、たとえば図５Ａ，図５Ｂに示す情報記憶処理を開始する。図５Ａ，図５Ｂに示す情報記憶処理は、たとえば図４に示した記憶制御部４０６により実行される。
【００７８】
まず、図５Ａに示すように、ファシリテーション支援装置１２０は、上述の音声データの記憶処理、発言者の検出処理、参加者状態の判定処理および記述状態の判定処理を開始する（ステップＳ５０１）。ステップＳ５０１により開始されるこれらの処理は、たとえば図５Ａ，図５Ｂに示す情報記憶処理が終了するまで繰り返し行われる。
【００７９】
つぎに、ファシリテーション支援装置１２０は、ステップＳ５０１により開始した発言者の検出処理の結果に基づいて、現在時点の発言者をオブジェクト情報記憶部４０７に仮記憶させる（ステップＳ５０２）。仮記憶とは、たとえば後述のステップＳ５１１によって作成する記述オブジェクトに関連付けて記憶させる情報とは別に、一時的に記憶させることである。ステップＳ５０２において、たとえば現在時点で発言者がいない場合は、発言者がいないことを示す情報が仮記憶される。現在時点で発言者が１人いる場合は、その１人の発言者の識別情報が仮記憶される。現在時点で発言者が２人以上いる場合は、その２人以上の発言者のそれぞれの識別情報が仮記憶される。
【００８０】
また、ファシリテーション支援装置１２０は、ステップＳ５０１により開始した参加者状態の判定処理の結果に基づいて、現在時点の上述の参加者状態をオブジェクト情報記憶部４０７に仮記憶させる（ステップＳ５０３）。参加者状態は、上述のように、たとえば笑顔の参加者の割合を示す笑顔指数などである。ステップＳ５０２，Ｓ５０３は互いに順序を入れ替えてもよい。
【００８１】
つぎに、ファシリテーション支援装置１２０は、ステップＳ５０１により開始した記述状態の判定処理の結果に基づいて、記述エリア１１１への記述状態に変化があったか否かを判断する（ステップＳ５０４）。記述状態の変化には、非記述中から記述中への変化（記述の開始）と、記述中から非記述中への変化（記述の終了）と、がある。
【００８２】
ステップＳ５０４において、記述状態に変化がなかった場合（ステップＳ５０４：Ｎｏ）は、ファシリテーション支援装置１２０は、ステップＳ５０２へ戻る。記述状態に変化があった場合（ステップＳ５０４：Ｙｅｓ）は、ファシリテーション支援装置１２０は、ステップＳ５０５へ移行する。すなわち、ファシリテーション支援装置１２０は、ステップＳ５０１により開始した音声データの記憶処理によって音声データ記憶部４０５に記憶中の音声データの現在時点に対応する位置にチャプタを設定する。そして、ファシリテーション支援装置１２０は、設定したチャプタを示すチャプタ番号をオブジェクト情報記憶部４０７に仮記憶させる（ステップＳ５０５）。
【００８３】
また、ファシリテーション支援装置１２０は、ステップＳ５０３により仮記憶した参加者状態等に基づく会議状態を判定し、判定した会議状態をオブジェクト情報記憶部４０７に仮記憶させる（ステップＳ５０６）。ステップＳ５０６における会議状態の判定処理については後述する。ステップＳ５０５，Ｓ５０６は互いに順序を入れ替えてもよい。
【００８４】
つぎに、図５Ｂに示すように（符号Ａ）、ファシリテーション支援装置１２０は、ステップＳ５０１により開始した記述状態の判定処理の結果に基づいて、記述エリア１１１への記述中であるか否かを判断する（ステップＳ５０７）。記述中である場合（ステップＳ５０７：Ｙｅｓ）は、ステップＳ５０４においてあったと判断した記述状態の変化が、記述の開始であることを意味する。この場合に、ファシリテーション支援装置１２０は、現在時点で記述中のオブジェクトより前に記述エリア１１１へ記述されたオブジェクトを示す前の記述オブジェクトがオブジェクト情報記憶部４０７に存在するか否かを判断する（ステップＳ５０８）。
【００８５】
ステップＳ５０８において、前の記述オブジェクトが存在しない場合（ステップＳ５０８：Ｎｏ）は、現在時点で記述中のオブジェクトが記述エリア１１１に最初に記述されたオブジェクトであることを意味する。この場合に、ファシリテーション支援装置１２０は、オブジェクト情報記憶部４０７に仮記憶している発言者、チャプタ番号および会議状態を含む一時情報をオブジェクト情報記憶部４０７に記憶させる（ステップＳ５０９）。一時情報は、たとえば後述のステップＳ５１１によって作成する記述オブジェクトに関連付けて記憶させる情報とは別に、一時的に記憶される情報である。
【００８６】
つぎに、ファシリテーション支援装置１２０は、オブジェクト情報記憶部４０７に仮記憶している各情報をクリアし（ステップＳ５１０）、図５Ａに示したステップＳ５０２へ戻る（符号Ｂ）。ステップＳ５１０においてクリアされる各情報は、たとえば、ステップＳ５０２，Ｓ５０３，Ｓ５０５，Ｓ５０６により仮記憶された発言者、参加者状態、チャプタ番号および会議状態である。すなわち、ステップＳ５０９により記憶された一時情報はこの時点でクリアされない。
【００８７】
ステップＳ５０７において、記述中でない場合（ステップＳ５０７：Ｎｏ）は、ステップＳ５０４においてあったと判断した記述状態の変化が記述の終了であることを意味する。この場合に、ファシリテーション支援装置１２０は、記述が終了したオブジェクトを示す記述オブジェクトを作成する（ステップＳ５１１）。記述オブジェクトは、オブジェクトを示す画像データである。画像データは、画像の画素ごとの情報を含むビットマップデータや、画像を数式や式（解析幾何的な図形の集まり）として表現するベクタデータなど各種の画像データとすることができる。
【００８８】
つぎに、ファシリテーション支援装置１２０は、記憶している一時情報に含まれる各情報を、記述前の属性情報として、ステップＳ５１１により作成した記述オブジェクトに関連付けてオブジェクト情報記憶部４０７に記憶させる（ステップＳ５１２）。ステップＳ５１２において用いる一時情報は、ステップＳ５０９によりオブジェクト情報記憶部４０７に記憶したものである。この一時情報に含まれる各情報とは、発言者、チャプタ番号および会議状態の情報である。つぎに、ファシリテーション支援装置１２０は、ステップＳ５０９によりオブジェクト情報記憶部４０７に記憶した一時情報をクリアする（ステップＳ５１３）。
【００８９】
また、ファシリテーション支援装置１２０は、現在時点で仮記憶している各情報を、記述中の属性情報として、ステップＳ５１１により作成した記述オブジェクトに関連付けてオブジェクト情報記憶部４０７に記憶させる（ステップＳ５１４）。この仮記憶している各情報は、ステップＳ５０２，Ｓ５０５，Ｓ５０６により仮記憶した発言者、チャプタ番号および会議状態である。ステップＳ５１２，Ｓ５１３と、ステップＳ５１４と、は互いに順序を入れ替えてもよい。
【００９０】
つぎに、ファシリテーション支援装置１２０は、会議が終了したか否かを判断する（ステップＳ５１５）。会議が終了したか否かの判断は、たとえば、操作受付部４０１が会議の終了を示す操作を受け付けたか否かの判断や、会議の終了を示す音声が検出されたか否かの判断などにより行うことができる。会議が終了していない場合（ステップＳ５１５：Ｎｏ）は、ファシリテーション支援装置１２０は、ステップＳ５１０へ移行する。
【００９１】
ステップＳ５０８において、前の記述オブジェクトが存在すると判断した場合（ステップＳ５０８：Ｙｅｓ）は、ファシリテーション支援装置１２０は、ステップＳ５１６へ移行する。すなわち、ファシリテーション支援装置１２０は、ステップＳ５０２，Ｓ５０５，Ｓ５０６により仮記憶した各情報を、記述後の属性情報として、その前の記述オブジェクトに関連付けてオブジェクト情報記憶部４０７に記憶させる（ステップＳ５１６）。そして、ファシリテーション支援装置１２０は、ステップＳ５０９へ移行する。この仮記憶した各情報は、発言者、チャプタ番号および会議状態である。
【００９２】
ステップＳ５１５において、会議が終了した場合（ステップＳ５１５：Ｙｅｓ）は、ファシリテーション支援装置１２０は、一連の情報記憶処理を終了する。
【００９３】
（実施の形態にかかる会議状態の判定処理）
図６は、実施の形態にかかる会議状態の判定処理の一例を示す図である。ファシリテーション支援装置１２０のメモリ３０２には、たとえば図６に示す会議状態判定テーブル６００が記憶されている。会議状態判定テーブル６００においては、発言者状態の評価値、発言者数、時間単位の発言数、参加者状態の評価値および記述エリアへの記述間隔の組み合わせごとに会議状態が対応付けられている。
【００９４】
たとえば図５Ａに示したステップＳ５０６において、ファシリテーション支援装置１２０は、直前の期間について、発言者状態の評価値、発言者数、時間単位の発言数、参加者状態の評価値および記述エリアへの記述間隔の組み合わせを判定する。直前の期間とは、記述エリア１１１への記述開始および記述終了の各タイミングで区切られる会議中の各期間のうち、現在時点の期間の直前の期間である。
【００９５】
ファシリテーション支援装置１２０は、その直前の期間を対象として、判定した組み合わせと会議状態判定テーブル６００とに基づいて会議状態を判定する。これにより、ファシリテーション支援装置１２０は、記述エリア１１１への記述開始および記述終了の各タイミングで区切られる会議中の各期間について会議状態を判定することができる。
【００９６】
会議状態判定テーブル６００の会議状態には、「発散」、「解明」、「選択／定義」、「共有」および「コンフリクト」がある。「発散」は、たとえば各参加者から様々な発言が出る状態である。「解明」は、たとえば「発散」において出た発言をまとめて議論を収束させる状態である。「選択／定義」は、たとえば議論する内容を選択したり曖昧な事項を定義したりする状態である。「共有」は、たとえば参加者の間で会議の前提事項や会議の結論を共有する状態である。「コンフリクト」は、たとえば参加者の間で意見が合わずに議論になる状態である。
【００９７】
会議状態判定テーブル６００の発言者状態の評価値は、対象の期間において検出された発言者状態の評価値であり、上述の発言者の検出処理により判定される。図６に示す例では、発言者状態の評価値には、たとえば「中立・喜び・驚き」、「怒り・嫌悪」の２通りの状態がある。たとえば、対象の期間において、発言者から１度でも怒りまたは嫌悪の感情が検出された場合は、その対象の期間についての発言者状態の評価値は「怒り・嫌悪」と判定される。それ以外の場合はその対象の期間についての発言者状態の評価値は「中立・喜び・驚き」と判定される。
【００９８】
会議状態判定テーブル６００の発言者数は、対象の期間において検出された発言者の数である。たとえば、発言者数は、対象の期間において上述の発言者の検出処理（たとえばＳｐｅａｋｅｒ  Ｒｅｃｏｇｎｉｔｉｏｎ  ＡＰＩ）により検出された発言者を計数することにより判定される。
【００９９】
一例として、対象の期間において、まずＡさんが発言し、つぎにＢさんが発言し、つぎにＡさんが発言した場合は、その期間の発言者数は２と判定される。図６に示す例では、発言者数は、「多い」および「少ない」の２通りとなっている。たとえば、発言者数が所定の閾値以上であれば「多い」と判定され、発言者数がその閾値未満であれば「少ない」と判定される。
【０１００】
会議状態判定テーブル６００の時間単位の発言数は、対象の期間において検出された時間あたりの発言の数である。たとえば、時間単位の発言数は、対象の期間において上述の発言者の検出処理（たとえばＳｐｅａｋｅｒ  Ｒｅｃｏｇｎｉｔｉｏｎ  ＡＰＩ）により検出された発言を計数し、計数した発言の数を対象の期間の時間長により除算することにより判定される。発言の計数は、たとえば、Ｓｐｅａｋｅｒ  Ｒｅｃｏｇｎｉｔｉｏｎ  ＡＰＩなどを用いて、発言者が切り替わるごとに発言数をカウントアップすることにより行うことができる。
【０１０１】
一例として、対象の期間において、まずＡさんが発言し、つぎにＢさんが発言し、最後にＡさんが発言し、その期間が２分であった場合は、その期間の時間単位の発言数は３÷２＝１．５と判定される。図６に示す例では、時間単位の発言数は、「多い」および「少ない」の２通りとなっている。たとえば、時間単位の発言数が所定の閾値以上であれば「多い」と判定され、時間単位の発言数がその閾値未満であれば「少ない」と判定される。
【０１０２】
会議状態判定テーブル６００の参加者状態の評価値は、対象の期間において、図５Ａ，図５Ｂに示したステップＳ５０３の参加者状態の判定処理により判定された参加者状態に基づく評価値である。たとえば、参加者状態が、上述のＨａａｒ−Ｃａｓｃａｄｅなどを用いて判定される、上述の笑顔指数（笑顔の参加者の割合）であるとする。
【０１０３】
この場合に、参加者状態の評価値は、たとえば対象の期間において判定された笑顔指数の代表値とすることができる。代表値は、たとえば平均値、中央値または最頻値などである。たとえば、対象の期間において、図５Ａ，図５Ｂに示したステップＳ５０３が１００回実行され、１００回のステップＳ５０３により判定された１００個の笑顔指数の平均値が７５％であったとする。この場合は、参加者状態の評価値は７５％と判定される。
【０１０４】
図６に示す例では、参加者状態の評価値は、「◎」（良い）、「○」（普通）および「△」（悪い）の３通りとなっている。たとえば、第１の閾値（一例としては８０％）と、第１の閾値より低い第２の閾値（一例としては２０％）と、を用いる。そして、参加者状態の評価値が第１の閾値以上であれば「◎」と判定され、参加者状態の評価値が第１の閾値未満かつ第２閾値以上である場合は「○」と判定され、参加者状態の評価値が第２閾値未満である場合は「△」と判定される。
【０１０５】
または、参加者状態は、上述のように、ＦａｃｅＡＰＩなどを用いて判定される、会議の各参加者についての感情であってもよい。この場合に、参加者状態の評価値は、たとえば、対象の期間において、「喜び」が検出された回数に基づいて判定される。「喜び」が検出された回数は、たとえば同時に２人の参加者の感情が「喜び」と判定された場合は、２回分カウントアップされる。
【０１０６】
また、第１の閾値（一例としては１０）と、第１の閾値より低い第２の閾値（一例としては５）と、を用いる。そして、「喜び」が検出された回数が第１の閾値以上であれば参加者状態の評価値は「◎」と判定される。また、「喜び」が検出された回数が第１の閾値未満かつ第２閾値以上である場合は参加者状態の評価値は「○」と判定される。また、「喜び」が検出された回数が第２閾値未満である場合は参加者状態の評価値は「△」と判定される。
【０１０７】
または、対象の期間において、会議の参加者の少なくともいずれかから１度でも「怒り」または「嫌悪」の感情が検出された場合は、参加者状態の評価値は「△」と判定され、それ以外の場合は、発言者状態の評価値は「○」と判定されてもよい。
【０１０８】
または、参加者状態は、上述のように、Ｈａａｒ−Ｃａｓｃａｄｅなどを用いて判定される、会議の各参加者についての笑顔か否かの状態であってもよい。この場合に、参加者状態の評価値は、たとえば、対象の期間において、参加者の笑顔が検出された回数に基づいて判定される。参加者の笑顔が検出された回数は、たとえば同時に２人の参加者が笑顔と判定された場合は、２回分カウントアップされる。
【０１０９】
また、第１の閾値（一例としては１０）と、第１の閾値より低い第２の閾値（一例としては５）と、を用いる。そして、参加者の笑顔が検出された回数が第１の閾値以上であれば参加者状態の評価値は「◎」と判定される。また、参加者の笑顔が検出された回数が第１の閾値未満かつ第２閾値以上である場合は参加者状態の評価値は「○」と判定される。また、参加者の笑顔が検出された回数が第２閾値未満である場合は参加者状態の評価値は「△」と判定される。
【０１１０】
会議状態判定テーブル６００の記述エリアへの記述間隔は、記述エリア１１１に対して前のオブジェクトを記述してから次のオブジェクトを記述するまでの時間である。記述エリアへの記述間隔が短い場合は、記述エリア１１１への記述の頻度が高く、会議の状態が「発散」等に近いことを意味する。記述エリアへの記述間隔が長い場合は、記述エリア１１１への記述の頻度が低く、会議の状態が「発散」等に近くないことを意味する。
【０１１１】
上述のように、対象の期間は記述エリア１１１への記述開始および記述終了の各タイミングで区切られる。したがって、対象の期間が記述エリア１１１への非記述中の期間である場合は、対象の期間の記述エリアへの記述間隔は、対象の期間の時間長である。また、対象の期間が記述エリア１１１への記述中の期間である場合は、対象の期間の記述エリアへの記述間隔は、対象の期間の直前の期間（非記述中の期間）の時間長である。
【０１１２】
または、記述中の期間においては会議が発散しにくいことから、対象の期間が記述エリア１１１への記述中の期間である場合は、記述エリアへの記述間隔については判定しなくてもよい。この場合に、会議状態判定テーブル６００に基づく会議状態の判定処理は、発言者状態の評価値、発言者数、時間単位の発言数および参加者状態の評価値の組み合わせにより行われる。また、この場合に、たとえば、「選択／定義」と「共有」は、区別されず、たとえば「選択／定義または共有」と判定される。
【０１１３】
図６に示す例では、記述エリアへの記述間隔は、「長い」および「短い」の２通りとなっている。たとえば、記述エリアへの記述間隔が所定の閾値以上であれば「長い」と判定され、記述エリアへの記述間隔がその閾値未満であれば「短い」と判定される。
【０１１４】
一例として、発言者状態の評価値が「中立・喜び・驚き」、発言者数が「多い」、時間単位の発言数が「多い」、参加者状態の評価値が「◎」、記述エリアへの記述間隔が「短い」である期間については、会議状態が「発散」と判定される。また、発言者状態の評価値が「怒り・嫌悪」、発言者数が「少ない」、時間単位の発言数が「多い」、参加者状態の評価値が「△」、記述エリアへの記述間隔が「長い」である期間については、会議状態が「コンフリクト」と判定される。
【０１１５】
（実施の形態にかかるファシリテーション支援装置による記述状態の判定処理）
図７〜図９は、実施の形態にかかるファシリテーション支援装置による記述状態の判定処理の一例を示す図である。ファシリテーション支援装置１２０は、たとえばボード撮影用カメラ２０１により得られる撮影データが示す画像の中から、記述エリア１１１と、記述エリア１１１に対して記述を行う参加者１０１と、を抽出する。記述エリア１１１の抽出は、たとえば記述エリア１１１の形状や色に基づく画像マッチングにより行うことができる。
【０１１６】
参加者１０１の抽出は、たとえば人物の形状や色に基づく画像マッチングにより行うことができる。また、画像から複数の人物が抽出された場合、たとえば、ファシリテーション支援装置１２０は、記述エリア１１１に最も近い人物を、記述エリア１１１に対して記述を行う参加者１０１として抽出してもよい。
【０１１７】
たとえば、ファシリテーション支援装置１２０は、画像に含まれる人物のうち、記述エリア１１１により隠れていない人物を特定することにより、記述エリア１１１の手前（ボード撮影用カメラ２０１側）にいる人物を特定する。そして、ファシリテーション支援装置１２０は、特定した人物のうち、最も記述エリア１１１に近い人物を特定することにより、記述エリア１１１に対して記述を行う参加者１０１を抽出することができる。
【０１１８】
記述エリア１１１と、記述エリア１１１の手前にいる人物と、の間の近さは、たとえば、画像上の人物の大きさに基づいて比較することができる。すなわち、画像上の大きさが小さい人物ほど奥側（記述エリア１１１側）に位置すると判断することができる。
【０１１９】
また、ボード撮影用カメラ２０１が被写体との距離を測定可能なカメラである場合は、記述エリア１１１と人物との間の近さは、画像上の人物とボード撮影用カメラ２０１との間の距離に基づいて比較することができる。すなわち、ボード撮影用カメラ２０１との間の距離が長い人物ほど奥側に位置すると判断することができる。
【０１２０】
また、人物間で重なりがある場合は、記述エリア１１１と人物との間の近さは、たとえば、人物間の重なりに基づいて比較することができる。すなわち、たとえば記述エリア１１１の手前にＡさんとＢさんがいて、ＢさんによってＡさんの一部が隠れている場合は、ＡさんはＢさんより奥側に位置すると判断することができる。
【０１２１】
ファシリテーション支援装置１２０は、特定した参加者１０１の頭と手を抽出する。頭と手の抽出は、たとえば人物の頭と手の形状や色に基づく画像マッチングにより行うことができる。そして、ファシリテーション支援装置１２０は、抽出した参加者１０１の頭と手との間の距離を算出し、算出した距離に基づいて、参加者１０１が記述エリア１１１への記述中か否かを判定する。たとえば、ファシリテーション支援装置１２０は、算出した距離が閾値以上であれば、参加者１０１が記述エリア１１１への記述中であると判定する。また、ファシリテーション支援装置１２０は、算出した距離が閾値未満であれば、参加者１０１が記述エリア１１１への記述中でない（非記述中）と判定する。
【０１２２】
また、ボード撮影用カメラ２０１が被写体との距離を測定可能なカメラである場合に、ファシリテーション支援装置１２０は、記述エリア１１１との間の距離と、記述エリア１１１に最も近い人物との間の距離と、の差分を算出してもよい。これにより、記述エリア１１１と、記述エリア１１１に最も近い人物と、の間の距離を算出することができる。そして、ファシリテーション支援装置１２０は、算出した距離が閾値以上である場合は、記述エリア１１１への記述を行う参加者はいないと判断し、参加者１０１が記述エリア１１１への記述中でないと判定してもよい。
【０１２３】
図７〜図９に示す抽出領域７０１は、ファシリテーション支援装置１２０により抽出された参加者１０１の頭の領域である。図７〜図９に示す抽出領域７０２は、ファシリテーション支援装置１２０により抽出された参加者１０１の手の領域である。図７，図８に示す例では、抽出領域７０１，７０２の間の距離が短いため、ファシリテーション支援装置１２０は参加者１０１が記述エリア１１１への記述中であると判定する。一方、図９に示す例では、抽出領域７０１，７０２の間の距離が長いため、ファシリテーション支援装置１２０は参加者１０１が記述エリア１１１への記述中でないと判定する。
【０１２４】
図７または図８の状態から図９の状態になった場合に、ファシリテーション支援装置１２０は、記述が終了したと判断する。そして、ファシリテーション支援装置１２０は、ボード撮影用カメラ２０１により得られた撮影データが示す画像から、それ以前と比べて更新された領域を抽出することにより、今回記述が終了したオブジェクト＃１を抽出する。
【０１２５】
たとえば、現在時点までに記述オブジェクトが作成されていない場合、ファシリテーション支援装置１２０は、会議の初期状態における記述エリア１１１の画像と、現在時点における記述エリア１１１の画像と、の差分を抽出する。これにより、オブジェクト＃１を抽出することができる。記述エリア１１１の画像は、ボード撮影用カメラ２０１により得られた撮影データに基づく画像である。
【０１２６】
また、現在時点までに記述オブジェクトが作成されている場合、ファシリテーション支援装置１２０は、会議の初期状態における記述エリア１１１の画像と、現在時点における記述エリア１１１の画像と、の差分の画像を抽出する。そして、ファシリテーション支援装置１２０は、抽出した差分の画像から、作成済みの記述オブジェクトに対応するオブジェクトを除外する。これにより、オブジェクト＃１を抽出することができる。
【０１２７】
このオブジェクト＃１を抽出する処理において、ファシリテーション支援装置１２０は、ボード撮影用カメラ２０１により得られた撮影データが示す画像のうち、参加者１０１などの人物の領域については除外して各判断を行う。
【０１２８】
（実施の形態にかかるファシリテーション支援装置の会議の進行に伴う処理）
つぎに、図１０〜図２９を用いて、会議の進行の一例と、その一例におけるファシリテーション支援装置１２０の処理について説明する。この例においては、会議の参加者は、Ａさん、Ｂさん、Ｃさん、ＤさんおよびＥさんの５名であるとする。また、この例においては、会議の開始時には記述エリア１１１に何も記述されておらず、会議中にＡさんが記述エリア１１１に少なくとも３つのオブジェクト（後述のオブジェクト＃１〜＃３）を記述するとする。
【０１２９】
図１０および図１１は、実施の形態にかかるファシリテーション支援装置の対象の会議の一例における第１段階を示す図である。図１２は、図１０および図１１に示した第１段階におけるファシリテーション支援装置の処理のタイミングの一例を示す図である。図１３は、図１０および図１１に示した第１段階においてファシリテーション支援装置がオブジェクト情報記憶部に記憶させる情報の一例を示す図である。
【０１３０】
図１２において、横軸は時刻を示す。記述状態１２０１は、図５Ａ，図５Ｂに示したステップＳ５０１において開始される上述の記述状態の判定処理により判定される記述エリア１１１への記述状態であり、非記述中および記述中のいずれかである。発言者１２０２は、記述状態１２０１の変化（記述開始および記述終了）により区切られる各期間について、図５Ａ，図５Ｂに示したステップＳ５０１において開始される上述の発言者の検出処理により検出された発言者である。
【０１３１】
会議状態１２０３は、図５Ａ，図５Ｂに示したステップＳ５０６において上述の会議状態の判定処理により判定される会議状態である。記憶音声データ１２０４は、マイク２０３により得られ、図５Ａ，図５Ｂに示したステップＳ５０１において開始される上述の音声データの記憶処理により音声データ記憶部４０５に記憶される音声データである。チャプタ番号１２０５は、図５Ａ，図５Ｂに示したステップＳ５０５により設定される音声データに設定されたチャプタを示す番号である。
【０１３２】
記述状態変化タイミング１２０６は、図５Ａ，図５Ｂに示したステップＳ５０４において有無が判定される、記述状態１２０１の変化のタイミングである。記述状態変化タイミング１２０６には上述のように記述の開始および記述の終了がある。記述終了タイミング１２０７は、記述状態変化タイミング１２０６のうち記述の終了のタイミングである。記述オブジェクト作成タイミング１２０８は、図５Ａ，図５Ｂに示したステップＳ５１１により記述オブジェクトが作成されるタイミングである。
【０１３３】
まず、図１０に示すように、時刻ｔ０において、ファシリテーション支援装置１２０による図５Ａ，図５Ｂに示した情報記憶処理が開始されるとともに会議が開始され、Ａさん、ＢさんおよびＣさんが発言したとする。このとき、ファシリテーション支援装置１２０は、図１２の記憶音声データ１２０４に示すように、マイク２０３により得られた音声データである「Ｖｏｉｃｅ＿１」の記憶を開始する。このとき、図１２のチャプタ番号１２０５に示すように、ファシリテーション支援装置１２０は、「Ｖｏｉｃｅ＿１」における時刻ｔ０に対応する位置にチャプタ番号「０」を設定する。
【０１３４】
つぎに、図１１に示すように、時刻ｔ１において、Ａさんが記述エリア１１１へのオブジェクト＃１（棒グラフ）の記述を開始したとする。この場合に、図１２の記述状態１２０１に示すように、時刻ｔ０から時刻ｔ１までの期間は非記述中となる。このとき、図１２の記述状態変化タイミング１２０６に示すように、ファシリテーション支援装置１２０は、図５Ａ，図５Ｂに示したステップＳ５０４において、記述エリア１１１への記述状態に変化があったと判断する。
【０１３５】
また、図１２の発言者１２０２に示すように、ファシリテーション支援装置１２０は、時刻ｔ０から時刻ｔ１までの期間における発言者としてＡさん、ＢさんおよびＣさんを検出する。また、図１２の会議状態１２０３に示すように、ファシリテーション支援装置１２０は、時刻ｔ０から時刻ｔ１までの期間における会議状態を判定する。ここではファシリテーション支援装置１２０が会議状態を「会議状態＿１」と判定したとする。また、図１２のチャプタ番号１２０５に示すように、ファシリテーション支援装置１２０は、「Ｖｏｉｃｅ＿１」における時刻ｔ１に対応する位置にチャプタ番号「１」を設定する。
【０１３６】
また、ファシリテーション支援装置１２０は、図１３に示すように、一時情報１３１０を生成してオブジェクト情報記憶部４０７に記憶させる。一時情報１３１０は、時刻ｔ０から時刻ｔ１までの期間における情報である。たとえば、一時情報１３１０は、発言者としてＡさん、ＢさんおよびＣさんを示し、会議状態として「会議状態＿１」を示し、チャプタ番号として「０」を示す。
【０１３７】
図１４および図１５は、実施の形態にかかるファシリテーション支援装置の対象の会議の一例における第２段階を示す図である。図１６は、図１４および図１５に示した第２段階におけるファシリテーション支援装置の処理のタイミングの一例を示す図である。図１７は、図１４および図１５に示した第２段階においてファシリテーション支援装置がオブジェクト情報記憶部に記憶させる情報の一例を示す図である。
【０１３８】
図１０，図１１に示した第１段階の後、図１４に示すように、Ａさんが記述エリア１１１へオブジェクト＃１を記述中に、Ｂさんが発言したとする。つぎに、図１５に示すように、時刻ｔ２において、Ａさんが記述エリア１１１へのオブジェクト＃１の記述を終了したとする。この場合に、図１６の記述状態１２０１に示すように、時刻ｔ１から時刻ｔ２までの期間は記述中となる。
【０１３９】
このとき、ファシリテーション支援装置１２０は、図１６の記憶音声データ１２０４に示すように、第１段階から開始した「Ｖｏｉｃｅ＿１」の記憶を継続している。また、図１６の発言者１２０２に示すように、ファシリテーション支援装置１２０は、時刻ｔ１から時刻ｔ２までの期間における発言者としてＢさんを検出する。
【０１４０】
また、図１６の会議状態１２０３に示すように、ファシリテーション支援装置１２０は、時刻ｔ１から時刻ｔ２までの期間における会議状態を判定する。ここではファシリテーション支援装置１２０が会議状態を「会議状態＿２」と判定したとする。また、図１６のチャプタ番号１２０５に示すように、ファシリテーション支援装置１２０は、「Ｖｏｉｃｅ＿１」における時刻ｔ２に対応する位置にチャプタ番号「２」を設定する。
【０１４１】
また、ファシリテーション支援装置１２０は、図１７に示すように、記述オブジェクト１７１０と、オブジェクト管理情報１７２０と、属性情報１７３０と、を生成してオブジェクト情報記憶部４０７に記憶させる。記述オブジェクト１７１０は、時刻ｔ２において記述が終了したオブジェクト＃１を示す画像データである。
【０１４２】
オブジェクト管理情報１７２０は、対象の１回の会議において記述エリア１１１に記述されたオブジェクトのそれぞれを対象として、記述位置および格納アドレスを示す情報である。記述位置とは、対象のオブジェクトが記述された記述エリア１１１における記述位置（たとえばＸＹ座標）である。格納アドレスは、対象のオブジェクトを示す記述オブジェクトが格納されたオブジェクト情報記憶部４０７（メモリ３０２）におけるアドレスである。図１７に示すように、第１段階においては、オブジェクト管理情報１７２０は、時刻ｔ２において記述が終了したオブジェクト＃１の記述位置「ｘ１，ｙ１」および格納アドレス「ａｄｄｒｅｓｓ＿１」を示している。
【０１４３】
また、オブジェクト管理情報１７２０は、各オブジェクトの情報を、各オブジェクトが記述された順番に格納することで、各オブジェクトが記述された順番を特定可能な情報でもある。ここではオブジェクト＃１の情報がオブジェクト管理情報１７２０の先頭に格納されることにより、最初に記述されたオブジェクトがオブジェクト＃１であると特定することができる。
【０１４４】
属性情報１７３０は、オブジェクト＃１の記述前（時刻ｔ０〜ｔ１）、オブジェクト＃１の記述中（時刻ｔ１〜ｔ２）およびオブジェクト＃１の記述後の各期間について、発言者と、会議状態と、チャプタ番号と、を示す情報である。図１７に示すように、第１段階において、属性情報１７３０は、記述前の発言者としてＡさん、ＢさんおよびＣさんを示し、記述前の会議状態として「会議状態＿１」を示し、記述前のチャプタ番号として「０」を示す。この記述前の各情報については、図１３に示した一時情報１３１０に基づいて生成される。
【０１４５】
また、第１段階において、属性情報１７３０は、記述中の発言者としてＢさんを示し、記述中の会議状態として「会議状態＿２」を示し、記述中のチャプタ番号として「１」を示す。この記述中の各情報については、時刻ｔ１から時刻ｔ２までの期間において判定されて仮記憶された各情報に基づいて生成される。
【０１４６】
また、第１段階においては、オブジェクト＃１の記述後の期間、すなわちオブジェクト＃１の記述終了からオブジェクト＃２の記述開始までの期間が確定していない。このため、属性情報１７３０における記述後の情報は空欄になっている。また、ファシリテーション支援装置１２０は、図１７に示すように、図１３に示した一時情報１３１０をオブジェクト情報記憶部４０７からクリアする。
【０１４７】
図１８および図１９は、実施の形態にかかるファシリテーション支援装置の対象の会議の一例における第３段階を示す図である。図２０は、図１８および図１９に示した第３段階におけるファシリテーション支援装置の処理のタイミングの一例を示す図である。図２１は、図１８および図１９に示した第３段階においてファシリテーション支援装置がオブジェクト情報記憶部に記憶させる情報の一例を示す図である。
【０１４８】
図１４，図１５に示した第２段階の後、図１８に示すように、Ａさん、Ｂさん、ＣさんおよびＤさんが発言したとする。つぎに、図１９に示すように、時刻ｔ３において、Ａさんが記述エリア１１１へのオブジェクト＃２（ノート型のパーソナルコンピュータの図）の記述を開始したとする。この場合に、図２０の記述状態１２０１に示すように、時刻ｔ２から時刻ｔ３までの期間は非記述中となる。
【０１４９】
このとき、ファシリテーション支援装置１２０は、図２０の記憶音声データ１２０４に示すように、第１段階から開始した「Ｖｏｉｃｅ＿１」の記憶を継続している。また、図２０の発言者１２０２に示すように、ファシリテーション支援装置１２０は、時刻ｔ２から時刻ｔ３までの期間における発言者としてＡさん、Ｂさん、ＣさんおよびＤさんを検出する。
【０１５０】
また、図２０の会議状態１２０３に示すように、ファシリテーション支援装置１２０は、時刻ｔ２から時刻ｔ３までの期間における会議状態を判定する。ここではファシリテーション支援装置１２０が会議状態を「会議状態＿３」と判定したとする。また、図２０のチャプタ番号１２０５に示すように、ファシリテーション支援装置１２０は、「Ｖｏｉｃｅ＿１」における時刻ｔ３に対応する位置にチャプタ番号「３」を設定する。
【０１５１】
また、ファシリテーション支援装置１２０は、図２１に示すように、一時情報２１１０を生成してオブジェクト情報記憶部４０７に記憶させる。一時情報２１１０は、時刻ｔ２から時刻ｔ３までの期間における情報である。たとえば、一時情報２１１０は、発言者としてＡさん、Ｂさん、ＣさんおよびＤさんを示し、会議状態として「会議状態＿３」を示し、チャプタ番号として「２」を示す。
【０１５２】
また、ファシリテーション支援装置１２０は、図２１に示すように、一時情報２１１０と同じ内容を、オブジェクト＃１の記述後（時刻ｔ２〜ｔ３）の情報として属性情報１７３０に追加する。これにより、オブジェクト＃１に関する属性情報１７３０が完成する。
【０１５３】
図２２および図２３は、実施の形態にかかるファシリテーション支援装置の対象の会議の一例における第４段階を示す図である。図２４は、図２２および図２３に示した第４段階におけるファシリテーション支援装置の処理のタイミングの一例を示す図である。図２５は、図２２および図２３に示した第４段階においてファシリテーション支援装置がオブジェクト情報記憶部に記憶させる情報の一例を示す図である。
【０１５４】
図１８，図１９に示した第３段階の後、図２２に示すように、Ａさんが記述エリア１１１へオブジェクト＃２を記述中に、Ｂさんが発言したとする。つぎに、図２３に示すように、時刻ｔ４において、Ａさんが記述エリア１１１へのオブジェクト＃２の記述を終了したとする。この場合に、図２４の記述状態１２０１に示すように、時刻ｔ３から時刻ｔ４までの期間は記述中となる。
【０１５５】
このとき、ファシリテーション支援装置１２０は、図２４の記憶音声データ１２０４に示すように、第１段階から開始した「Ｖｏｉｃｅ＿１」の記憶を継続している。また、図２４の発言者１２０２に示すように、ファシリテーション支援装置１２０は、時刻ｔ３から時刻ｔ４までの期間における発言者としてＢさんを検出する。
【０１５６】
また、図２４の会議状態１２０３に示すように、ファシリテーション支援装置１２０は、時刻ｔ３から時刻ｔ４までの期間における会議状態を判定する。ここではファシリテーション支援装置１２０が会議状態を「会議状態＿４」と判定したとする。また、図２４のチャプタ番号１２０５に示すように、ファシリテーション支援装置１２０は、「Ｖｏｉｃｅ＿１」における時刻ｔ４に対応する位置にチャプタ番号「４」を設定する。
【０１５７】
また、ファシリテーション支援装置１２０は、図２５に示すように、記述オブジェクト２５１０と、属性情報２５３０と、を生成してオブジェクト情報記憶部４０７に記憶させる。記述オブジェクト２５１０は、時刻ｔ４において記述が終了したオブジェクト＃２を示す画像データである。
【０１５８】
属性情報２５３０は、オブジェクト＃２の記述前（時刻ｔ２〜ｔ３）、オブジェクト＃２の記述中（時刻ｔ３〜ｔ４）およびオブジェクト＃２の記述後の各期間について、発言者と、会議状態と、チャプタ番号と、を示す情報である。図２５に示すように、第４段階において、属性情報２５３０は、記述前の発言者としてＡさん、Ｂさん、ＣさんおよびＤさんを示し、記述前の会議状態として「会議状態＿３」を示し、記述前のチャプタ番号として「２」を示す。この記述前の各情報については、図２１に示した一時情報２１１０に基づいて生成される。
【０１５９】
また、第４段階において、属性情報２５３０は、記述中の発言者としてＢさんを示し、記述中の会議状態として「会議状態＿４」を示し、記述中のチャプタ番号として「３」を示す。この記述中の各情報については、時刻ｔ３から時刻ｔ４までの期間において判定されて仮記憶された各情報に基づいて生成される。
【０１６０】
また、第４段階においては、オブジェクト＃２の記述後の期間、すなわちオブジェクト＃２の記述終了からオブジェクト＃３の記述開始までの期間が確定していない。このため、属性情報２５３０における記述後の情報は空欄になっている。また、ファシリテーション支援装置１２０は、図２５に示すように、図２１に示した一時情報２１１０をオブジェクト情報記憶部４０７からクリアする。
【０１６１】
また、ファシリテーション支援装置１２０は、図２５に示すように、オブジェクト情報記憶部４０７のオブジェクト管理情報１７２０にオブジェクト＃２の情報を追加する。図２５に示すように、第４段階においては、オブジェクト管理情報１７２０は、上述したオブジェクト＃１の情報に加えて、時刻ｔ４において記述が終了したオブジェクト＃２の記述位置「ｘ２，ｙ２」および格納アドレス「ａｄｄｒｅｓｓ＿２」を示している。格納アドレス「ａｄｄｒｅｓｓ＿２」は、オブジェクト＃２を示す記述オブジェクト２５１０が格納されたオブジェクト情報記憶部４０７（メモリ３０２）におけるアドレスである。
【０１６２】
図２６および図２７は、実施の形態にかかるファシリテーション支援装置の対象の会議の一例における第５段階を示す図である。図２８は、図２６および図２７に示した第５段階におけるファシリテーション支援装置の処理のタイミングの一例を示す図である。図２９は、図２６および図２７に示した第５段階においてファシリテーション支援装置がオブジェクト情報記憶部に記憶させる情報の一例を示す図である。
【０１６３】
図２２，図２３に示した第４段階の後、図２６に示すように、ＡさんおよびＤさんが発言したとする。つぎに、図２７に示すように、時刻ｔ５において、Ａさんが記述エリア１１１へのオブジェクト＃３の記述を開始したとする。この場合に、図２８の記述状態１２０１に示すように、時刻ｔ４から時刻ｔ５までの期間は非記述中となる。
【０１６４】
このとき、ファシリテーション支援装置１２０は、図２８の記憶音声データ１２０４に示すように、第１段階から開始した「Ｖｏｉｃｅ＿１」の記憶を継続している。また、図２８の発言者１２０２に示すように、ファシリテーション支援装置１２０は、時刻ｔ４から時刻ｔ５までの期間における発言者としてＡさんおよびＤさんを検出する。
【０１６５】
また、図２８の会議状態１２０３に示すように、ファシリテーション支援装置１２０は、時刻ｔ４から時刻ｔ５までの期間における会議状態を判定する。ここではファシリテーション支援装置１２０が会議状態を「会議状態＿５」と判定したとする。また、図２８のチャプタ番号１２０５に示すように、ファシリテーション支援装置１２０は、「Ｖｏｉｃｅ＿１」における時刻ｔ５に対応する位置にチャプタ番号「５」を設定する。
【０１６６】
また、ファシリテーション支援装置１２０は、図２９に示すように、一時情報２９１０を生成してオブジェクト情報記憶部４０７に記憶させる。一時情報２９１０は、時刻ｔ４から時刻ｔ５までの期間における情報である。たとえば、一時情報２９１０は、発言者としてＡさんおよびＤさんを示し、会議状態として「会議状態＿５」を示し、チャプタ番号として「４」を示す。
【０１６７】
また、ファシリテーション支援装置１２０は、図２９に示すように、一時情報２９１０と同じ内容を、オブジェクト＃２の記述後（時刻ｔ４〜ｔ５）の情報として属性情報２５３０に追加する。これにより、オブジェクト＃２に関する属性情報２５３０が完成する。
【０１６８】
図５Ａ，図５Ｂおよび図１０〜図２９に示した例では、会議の進行中、すなわち録音データの記憶中にオブジェクトに関する各情報を生成する例について説明したが、このような処理に限らない。たとえば、ボード撮影用カメラ２０１および参加者撮影用カメラ２０２により得られる各撮影データと、マイク２０３により得られる音声データと、を会議の全期間について記憶していてもよい。この場合、ファシリテーション支援装置１２０は、会議の終了後に、記憶しておいた各撮影データおよび音声データに基づいて上述の情報出力処理により生成するオブジェクトに関する各情報と同様の各情報を生成する。
【０１６９】
（実施の形態にかかるファシリテーション装置による情報出力処理）
図３０は、実施の形態にかかるファシリテーション装置による情報出力処理の一例を示すフローチャートである。実施の形態にかかるファシリテーション支援装置１２０は、ホワイトボード１１０を用いた会議の終了後に、その会議についての情報の出力を指示する操作を受け付けると、たとえば図３０に示す情報出力処理を開始する。図３０に示す情報出力処理は、たとえば図４に示した出力制御部４０８により実行される。
【０１７０】
まず、ファシリテーション支援装置１２０は、対象の会議において記述エリア１１１に記述された各オブジェクトを表示する（ステップＳ３００１）。たとえば、ファシリテーション支援装置１２０は、オブジェクト情報記憶部４０７に記憶されたオブジェクト管理情報１７２０および各記述オブジェクトに基づいて、記述エリア１１１に記述された各オブジェクトを表示する（たとえば図３１参照）。また、たとえば、ファシリテーション支援装置１２０は、上述のユーザインタフェース３０５に含まれるディスプレイへ表示情報を出力することによりステップＳ３００１の表示を行う。
【０１７１】
つぎに、ファシリテーション支援装置１２０は、ステップＳ３００１により表示した各オブジェクトの中から、いずれかのオブジェクトの指定をユーザから受け付ける（ステップＳ３００２）。オブジェクトの指定の受け付け方法の例については後述する（たとえば図３２〜図３４参照）。
【０１７２】
つぎに、ファシリテーション支援装置１２０は、ステップＳ３００２により指定を受け付けたオブジェクトの記述前、記述中および記述後の各期間における発言者および会議状態をそれぞれ特定する（ステップＳ３００３）。たとえば、ファシリテーション支援装置１２０は、指定を受け付けたオブジェクトについてオブジェクト情報記憶部４０７に記憶された属性情報に基づいてステップＳ３００３の特定を行う。この属性情報は、上述のように、対象のオブジェクトの記述前、記述中および記述後の各期間における発言者と会議状態の情報を含む。
【０１７３】
つぎに、ファシリテーション支援装置１２０は、上述の指定を受け付けたオブジェクトの記述前、記述中および記述後の各期間と、ステップＳ３００３により特定した発言者および会議状態と、をそれぞれ対応付けて表示する（ステップＳ３００４）。たとえば、ファシリテーション支援装置１２０は、上述のユーザインタフェース３０５に含まれるディスプレイへ表示情報を出力することによりステップＳ３００３の表示を行う（たとえば図３２〜図３４参照）。
【０１７４】
つぎに、ファシリテーション支援装置１２０は、ステップＳ３００４により表示した記述前、記述中および記述後の各期間の中から、いずれかの期間の指定をユーザから受け付ける（ステップＳ３００５）。期間の指定の受け付け方法の例については後述する（たとえば図３１〜図３４参照）。
【０１７５】
つぎに、ファシリテーション支援装置１２０は、音声データ記憶部４０５に記憶された音声データが示す音声のうち、ステップＳ３００５により指定を受け付けた期間における音声を特定する（ステップＳ３００６）。たとえば、ファシリテーション支援装置１２０は、オブジェクト情報記憶部４０７に記憶された属性情報に基づいて、音声データ記憶部４０５に記憶された音声データに設定されたチャプタ番号のうち、指定を受け付けた期間に対応するチャプタ番号を特定する。この属性情報は、上述のように、対象のオブジェクトの記述前、記述中および記述後の各期間における音声データのチャプタ番号を含む。
【０１７６】
つぎに、ファシリテーション支援装置１２０は、音声データ記憶部４０５に記憶された音声データに基づいて、ステップＳ３００６により特定した音声を再生し（ステップＳ３００７）、一連の情報出力処理を終了する。たとえば、ファシリテーション支援装置１２０は、音声データ記憶部４０５に記憶された音声データが示す音声を、ステップＳ３００６において特定したチャプタ番号が示すチャプタから再生する。また、たとえば、ファシリテーション支援装置１２０は、上述のユーザインタフェース３０５に含まれるスピーカへ情報を出力することによりステップＳ３００７の再生を行う。
【０１７７】
（実施の形態にかかるファシリテーション支援装置が表示するオブジェクト再生画面）
図３１は、実施の形態にかかるファシリテーション支援装置が表示するオブジェクト再生画面の一例を示す情報である。ここでは、過去に行われた１回の会議において、オブジェクト＃１１〜＃１４が、オブジェクト＃１１、オブジェクト＃１２、オブジェクト＃１３、オブジェクト＃１４の順に記述エリア１１１へ記述されたとする。
【０１７８】
ファシリテーション支援装置１２０は、この会議について図５Ａ，図５Ｂに示した情報記憶処理を行っており、その結果、この会議において録音された音声を示す音声データを音声データ記憶部４０５に記憶している。
【０１７９】
また、ファシリテーション支援装置１２０は、オブジェクト＃１１〜＃１４に関する各情報をオブジェクト情報記憶部４０７に記憶している。ここで、ファシリテーション支援装置１２０は、オブジェクト＃１１〜＃１４が記述された順番を特定可能な情報も記憶していてもよい。たとえば、上述のオブジェクト管理情報１７２０には、オブジェクト＃１１〜＃１４に関する情報が、オブジェクト＃１１に関する情報、オブジェクト＃１２に関する情報、オブジェクト＃１３に関する情報、オブジェクト＃１４に関する情報の順に格納されている。
【０１８０】
ファシリテーション支援装置１２０は、たとえばこの会議についてのオブジェクト再生画面３１００の表示の指示を受け付けると、オブジェクト情報記憶部４０７に記憶したオブジェクト＃１１〜＃１４の各情報を取得する。そして、ファシリテーション支援装置１２０は、取得した各情報に基づいて、オブジェクト＃１１〜＃１４を含むオブジェクト再生画面３１００を表示する。オブジェクト再生画面３１００は、たとえば図３に示したユーザインタフェース３０５に含まれるディスプレイなどにより表示される。
【０１８１】
たとえば、ファシリテーション支援装置１２０は、オブジェクト管理情報１７２０に含まれるオブジェクト＃１１〜＃１４のそれぞれについて、オブジェクト管理情報１７２０における上述の格納アドレスを参照して対象の記述オブジェクトを読み出す。そして、ファシリテーション支援装置１２０は、読み出した記述オブジェクトが示すオブジェクトを、オブジェクト管理情報１７２０における上述の記述位置が示す位置に描写する。これにより、オブジェクト＃１１〜＃１４を含むオブジェクト再生画面３１００が表示され、対象の会議における記述エリア１１１への記述内容が再現される。
【０１８２】
カーソル３１１１は、オブジェクト再生画面３１００に重ねて表示され、ユーザが操作可能なポインタである。たとえば、カーソル３１１１は、図３に示したユーザインタフェース３０５に含まれるマウスなどによりユーザが操作可能である。
【０１８３】
（実施の形態にかかるファシリテーション支援装置によるサブウィンドウの表示）
図３２は、実施の形態にかかるファシリテーション支援装置によるサブウィンドウの表示の一例を示す情報である。図３２において、図３１に示した部分と同様の部分については同一の符号を付して説明を省略する。たとえば、図３１に示した状態から、ユーザが、図３２に示すように、マウスなどによりカーソル３１１１を操作し、カーソル３１１１をオブジェクト＃１３に合わせた（マウスオーバした）とする。または、ユーザが、カーソル３１１１をオブジェクト＃１３に合わせた状態で指示操作（たとえばマウスのボタンのクリック）を行ったとする。
【０１８４】
この場合、ファシリテーション支援装置１２０は、オブジェクト＃１３の指示を受け付けたと判断する。そして、ファシリテーション支援装置１２０は、オブジェクト＃１３についての属性情報をオブジェクト情報記憶部４０７から取得し、取得した属性情報に基づくサブウィンドウ３２１０をポップアップにより表示する。
【０１８５】
サブウィンドウ３２１０は、オブジェクト＃１３の表示領域と重ならない位置に表示される。図３２に示す例では、サブウィンドウ３２１０はオブジェクト＃１３の右下に表示されている。サブウィンドウ３２１０は、オブジェクト＃１３の記述前、記述中および記述後の各期間について、発言者３２１２および会議状態３２１３を示している。また、図３２に示す例では、サブウィンドウ３２１０は、会議状態３２１３とともに上述の参加者状態も表示している。
【０１８６】
サブウィンドウ３２１０により、ユーザは、オブジェクト＃１３に関して、特定の参加者が発言したのがオブジェクト＃１３の記述前、記述中および記述後のいずれの期間であるかを把握することができる。また、ユーザは、オブジェクト＃１３に関して、特定の会議状態や参加者状態となったのがオブジェクト＃１３の記述前、記述中および記述後のいずれの期間であるかを把握することができる。
【０１８７】
また、サブウィンドウ３２１０は、再生ボタン３２１１ａ〜３２１１ｃを含む。再生ボタン３２１１ａ〜３２１１ｃは、それぞれオブジェクト＃１３の記述前、記述中、記述後の各期間における音声データを再生するためのボタンである。音声データの再生は、たとえば図３に示したユーザインタフェース３０５に含まれるスピーカにより行われる。
【０１８８】
たとえば、記述前に対応する再生ボタン３２１１ａがカーソル３１１１で指示（クリック等）されると、ファシリテーション支援装置１２０は、オブジェクト情報記憶部４０７におけるオブジェクト＃１３についての属性情報から記述前のチャプタ番号を取得する。そして、ファシリテーション支援装置１２０は、音声データ記憶部４０５の音声データを、取得したチャプタ番号が示す位置（チャプタ）から再生する。
【０１８９】
また、記述中に対応する再生ボタン３２１１ｂがカーソル３１１１で指示されると、ファシリテーション支援装置１２０は、オブジェクト情報記憶部４０７におけるオブジェクト＃１３についての属性情報から記述中のチャプタ番号を取得する。そして、ファシリテーション支援装置１２０は、音声データ記憶部４０５の音声データを、取得したチャプタ番号が示す位置から再生する。
【０１９０】
また、記述後に対応する再生ボタン３２１１ｃがカーソル３１１１で指示されると、ファシリテーション支援装置１２０は、オブジェクト情報記憶部４０７におけるオブジェクト＃１３についての属性情報から記述後のチャプタ番号を取得する。そして、ファシリテーション支援装置１２０は、音声データ記憶部４０５の音声データを、取得したチャプタ番号が示す位置から再生する。
【０１９１】
ファシリテーション支援装置１２０は、取得したチャプタ番号が示す位置から音声データを再生した場合に、たとえば、次のチャプタ番号が設定された位置で音声データの再生を停止する。または、ファシリテーション支援装置１２０は、取得したチャプタ番号が示す位置から音声データを再生した場合に、音声データの最後まで再生を行うようにしてもよい。
【０１９２】
たとえば、ユーザは、オブジェクト＃１３に関するＡさんの発言を確認したい場合に、カーソル３１１１をオブジェクト＃１３に合わせてサブウィンドウ３２１０を表示させる。これにより、ユーザは、サブウィンドウ３２１０から、オブジェクト＃１３の記述前の期間の発言者にＡさんが含まれることを把握することができる。この場合に、ユーザは、記述前に対応する再生ボタン３２１１ａをカーソル３１１１により指示する。これにより、音声データ記憶部４０５の音声データが示す音声のうち、オブジェクト＃１３に関するＡさんの発言があった期間の音声が再生される。
【０１９３】
または、ユーザは、オブジェクト＃１３に関して会議でコンフリクトが生じた際の会議の音声を確認したい場合に、カーソル３１１１をオブジェクト＃１３に合わせてサブウィンドウ３２１０を表示させる。これにより、ユーザは、サブウィンドウ３２１０から、オブジェクト＃１３の記述後の期間の会議状態がコンフリクトであることを把握することができる。この場合に、ユーザは、記述後に対応する再生ボタン３２１１ｃをカーソル３１１１により指示する。これにより、音声データ記憶部４０５の音声データが示す音声のうち、オブジェクト＃１３に関して会議でコンフリクトが生じた期間の音声が再生される。
【０１９４】
また、サブウィンドウ３２１０は、クローズボタン３２１４を含む。カーソル３１１１によりクローズボタン３２１４を指示すると、サブウィンドウ３２１０が非表示になる。
【０１９５】
カーソル３１１１がオブジェクト＃１３に合わされた場合に、ファシリテーション支援装置１２０は、オブジェクト＃１３を囲む枠３２２３（図３２に示す例では実線の矩形枠）を表示してもよい。これにより、オブジェクト＃１３が選択され、オブジェクト＃１３に関するサブウィンドウ３２１０が表示されていることをユーザが容易に把握することができる。
【０１９６】
また、カーソル３１１１がオブジェクト＃１３に合わされた場合に、ファシリテーション支援装置１２０は、オブジェクト＃１３の前に記述されたオブジェクト＃１２を囲む枠３２２２（図３２に示す例では点線の矩形枠）を表示してもよい。また、オブジェクト＃１２を囲む枠３２２２から、オブジェクト＃１３を囲む枠３２２３へ向かう矢印３２３１（図３２に示す例では点線の矢印）を表示してもよい。これにより、カーソル３１１１を合わせたオブジェクト＃１３の前に記述されたオブジェクトがオブジェクト＃１２であることをユーザが容易に把握することができる。このため、会議の流れをユーザが容易に把握することができる。
【０１９７】
また、カーソル３１１１がオブジェクト＃１３に合わされた場合に、ファシリテーション支援装置１２０は、オブジェクト＃１３の後に記述されたオブジェクト＃１４を囲む枠３２２４（図３２に示す例では点線の矩形枠）を表示してもよい。また、オブジェクト＃１３を囲む枠３２２３から、オブジェクト＃１４を囲む枠３２２４へ向かう矢印３２３２（図３２に示す例では実線の矢印）を表示してもよい。これにより、カーソル３１１１を合わせたオブジェクト＃１３の後に記述されたオブジェクトがオブジェクト＃１４であることをユーザが容易に把握することができる。
【０１９８】
オブジェクト＃１２〜＃１３の強調表示に枠３２２２〜３２２３を用いる場合について説明したが、オブジェクト＃１２〜＃１３の強調表示はこれらに限らず、背景色の変更や反転表示など各種の強調表示とすることができる。
【０１９９】
図３３は、実施の形態にかかるファシリテーション支援装置によるサブウィンドウの表示の他の一例を示す図（その１）である。図３３において、図３２に示した部分と同様の部分については同一の符号を付して説明を省略する。ファシリテーション支援装置１２０は、オブジェクト再生画面３１００の表示の指示を受け付けると、図３３に示すようにリストウィンドウ３３１０を含むオブジェクト再生画面３１００を表示してもよい。
【０２００】
リストウィンドウ３３１０は、会議状態や発言者からオブジェクトを選択して指示可能なウィンドウである。たとえば、リストウィンドウ３３１０は、初期状態において「▽会議状態」および「▽発言者」を示している。ここで、たとえば「▽会議状態」をカーソル３１１１で指示すると、図３３に示すように、「▽発散」、「▽解明」、「▽選択／定義」、「▽共有」および「▽コンフリクト」が表示される。
【０２０１】
そして、たとえば「▽発散」をカーソル３１１１で指示すると、記述前、記述中および記述後の少なくともいずれかの会議状態が「発散」である各オブジェクトが表示される。図３３に示す例では、オブジェクト＃１２，＃１３がリストウィンドウ３３１０に表示されている。そして、たとえばリストウィンドウ３３１０に表示されたオブジェクト＃１３にカーソル３１１１が合わせられると、ファシリテーション支援装置１２０は、オブジェクト＃１３についての上述のサブウィンドウ３２１０をポップアップにより表示する。
【０２０２】
これにより、ユーザは、記述の際に特定の会議状態を含むオブジェクトを容易に選択し、そのオブジェクトの記述前、記述中および記述後のそれぞれにおける発言者および会議状態を示す情報（たとえばサブウィンドウ３２１０）を表示させることができる。
【０２０３】
図３４は、実施の形態にかかるファシリテーション支援装置によるサブウィンドウの表示の他の一例を示す図（その２）である。図３４において、図３３に示した部分と同様の部分については同一の符号を付して説明を省略する。上述のように、リストウィンドウ３３１０は、初期状態において「▽会議状態」および「▽発言者」を示している。
【０２０４】
ここで、たとえば「▽発言者」をカーソル３１１１で指示すると、図３４に示すように、オブジェクト＃１１〜＃１４に対応する会議の参加者である「Ａさん」、「Ｂさん」、「Ｃさん」および「Ｄさん」がリストウィンドウ３３１０に表示される。
【０２０５】
そして、たとえば「Ｃさん」をカーソル３１１１で指示すると、記述前、記述中および記述後の少なくともいずれかの発言者にＣさんを含む各オブジェクトが表示される。図３４に示す例では、オブジェクト＃１１〜＃１３がリストウィンドウ３３１０に表示されている。そして、たとえばリストウィンドウ３３１０に表示されたオブジェクト＃１３にカーソル３１１１が合わせられると、ファシリテーション支援装置１２０は、オブジェクト＃１３についての上述のサブウィンドウ３２１０をポップアップにより表示する。
【０２０６】
これにより、ユーザは、特定の発言者の発言があったオブジェクトを容易に選択し、そのオブジェクトの記述前、記述中および記述後のそれぞれにおける発言者および会議状態を示す情報（たとえばサブウィンドウ３２１０）を表示させることができる。
【０２０７】
このように、実施の形態にかかるファシリテーション支援装置１２０は、ディスカッションにおいてボードに記述されたオブジェクトの中から指定されたオブジェクトについての記述前、記述中および記述後の各期間における発言者を特定可能な情報を出力する。そして、ファシリテーション支援装置１２０は、上述のディスカッションにおいて録音された音声のうち、上述の各期間のうち指定された期間における音声を出力する。
【０２０８】
これにより、ユーザは、指定したオブジェクトの記述前、記述中および記述後のそれぞれにおける発言者を把握し、把握した発言者に基づいて指定した期間における音声を参照することができる。したがって、ユーザは、ディスカッションにおいてボードに記述された所望のオブジェクトについての所望の参加者（たとえば会議のステークホルダ等）による発言を、そのディスカッションにおいて録音された音声の中から容易に探して参照することができる。すなわち、ユーザは、所望のオブジェクトについての所望の参加者による発言を早く聞くことができる。このため、ボードに記述された所望のオブジェクトに関する所望の参加者による発言を確認しやすくし、ファシリテーションを支援することができる。発言の確認には、発言の内容や、発言のニュアンス（口調等）が含まれる。
【０２０９】
また、ファシリテーション支援装置１２０は、オブジェクトの記述前、記述中および記述後の各期間のそれぞれにおける発言者を特定可能な情報を上述の第１記憶部に記憶させる処理を行ってもよい。たとえば、ファシリテーション支援装置１２０は、ディスカッションにおける参加者がボードに記述中か否かを監視する。そして、ファシリテーション支援装置１２０は、その監視結果と、そのディスカッションにおいて得られたボードの記述内容を示す画像と、に基づいてボードに記述されたオブジェクトを抽出する。また、ファシリテーション支援装置１２０は、ディスカッションにおいて録音された音声に基づいて、抽出したオブジェクトの記述前、記述中および記述後の各期間のそれぞれにおける発言者を検出する。そして、ファシリテーション支援装置１２０は、検出した発言者に基づいて、抽出したオブジェクトの記述前、記述中および記述後の各期間のそれぞれにおける発言者を特定可能な情報を第１記憶部に記憶させる。
【０２１０】
また、ファシリテーション支援装置１２０は、ディスカッションにおける各時点について参加者がボードに記述中か否かの監視を、たとえば、撮影データから判定した、参加者のディスカッションにおける頭と手との間の距離に基づいて行うことができる。一例としては、ファシリテーション支援装置１２０は、参加者の頭と手との間の距離が所定の閾値以上である場合は、参加者がボードに記述中であると判定する。また、ファシリテーション支援装置１２０は、参加者の頭と手との間の距離がその閾値未満である場合は、参加者がボードに記述中でないと判定する。
【０２１１】
上述したオブジェクトの記述前、記述中および記述後の各期間は、たとえば、上述の記述中か否かの監視結果に基づいて、会議の期間を、そのオブジェクトの記述の開始および終了の各タイミングにより区切った各期間とすることができる。
【０２１２】
また、上述の第１記憶部は、ディスカッションにおいてボードに記述されたオブジェクトと対応付けて、そのオブジェクトの記述前、記述中および記述後の各期間におけるディスカッションの状態を特定可能な情報をさらに記憶していてもよい。ディスカッションの状態とは、たとえば上述の会議状態（たとえば「発散」、「解明」、「選択／定義」、「共有」および「コンフリクト」）である。ファシリテーション支援装置１２０は、この第１記憶部を参照して、指定されたオブジェクトについての記述前、記述中および記述後の各期間におけるディスカッションの状態をそれぞれ特定な情報を出力する。
【０２１３】
これにより、ユーザは、指定したオブジェクトの記述前、記述中および記述後のそれぞれにおけるディスカッションの状態を把握し、把握したディスカッションの状態に基づいて指定した期間における音声を参照することができる。したがって、ユーザは、ディスカッションにおいてボードに記述された特定のオブジェクトについての特定のディスカッションの状態における音声を、そのディスカッションにおいて録音された音声の中から容易に探して参照することができる。このため、ボードに記述されたオブジェクトに関する発言を確認しやすくし、ファシリテーションを支援することができる。
【０２１４】
ある期間におけるディスカッションの状態は、たとえば、ディスカッションのその期間における発言者の感情に関する状態（たとえば図６において説明した発言者状態の評価値）を指標として判定される状態である。また、ある期間におけるディスカッションの状態は、ディスカッションのその期間における発言者の数（たとえば図６において説明した発言者数）を指標として判定される状態であってもよい。
【０２１５】
また、ある期間におけるディスカッションの状態は、ディスカッションのその期間における時間あたりの発言の数（たとえば図６において説明した時間単位の発言数）を指標として判定される状態であってもよい。また、ある期間におけるディスカッションの状態は、ディスカッションの参加者のその期間における感情に関する状態（たとえば図６において説明した参加者状態の評価値）を指標として判定される状態であってもよい。
【０２１６】
また、ある期間におけるディスカッションの状態は、その期間の時間長（たとえば図６において説明した記述エリアへの記述間隔）を指標として判定される状態であってもよい。また、ある期間におけるディスカッションの状態は、上述の各指標の情報を組み合わせて判定される状態であってもよい。
【０２１７】
また、ファシリテーション支援装置１２０は、オブジェクトの指定を受け付ける前に、上述のディスカッションの状態の指定を受け付けてもよい（たとえば図３３参照）。この場合に、ファシリテーション支援装置１２０は、ディスカッションにおいてボードに記述された各オブジェクトのうち、指定された状態となった期間が、記述前、記述中および記述後の各期間の少なくともいずれかに含まれるオブジェクトを特定する。そして、ファシリテーション支援装置１２０は、特定したオブジェクトを特定可能な情報を出力する。これにより、ユーザは、記述の際にディスカッションが特定の状態になったオブジェクトを容易に指定することができる。
【０２１８】
また、ファシリテーション支援装置１２０は、オブジェクトの指定を受け付ける前に、ディスカッションの発言者の指定を受け付けてもよい（たとえば図３４参照）。この場合に、ファシリテーション支援装置１２０は、ディスカッションにおいてボードに記述された各オブジェクトのうち、指定された参加者が発言した期間が、記述前、記述中および記述後の各期間の少なくともいずれかに含まれるオブジェクトを特定する。そして、ファシリテーション支援装置１２０は、特定したオブジェクトを特定可能な情報を出力する。これにより、ユーザは、記述の際に特定の参加者が発言したオブジェクトを容易に指定することができる。
【０２１９】
また、ファシリテーション支援装置１２０は、ディスカッションにおいてボードに記述された各オブジェクトの中からオブジェクトが指定された場合に、つぎのような処理を行ってもよい。すなわち、ファシリテーション支援装置１２０は、指定されたオブジェクトについて、指定されたオブジェクトの直前にボードに記述されたオブジェクトと、指定されたオブジェクトの直後にボードに記述されたオブジェクトと、の少なくともいずれかを特定する。そして、ファシリテーション支援装置１２０は、特定したオブジェクトを特定可能な情報（たとえば図３２〜図３４に示した枠３２２２，３２２４や矢印３２３１，３２３２）を出力する（たとえば図３２〜図３４参照）。
【０２２０】
これにより、ユーザは、指定したオブジェクトの前後に記述されたオブジェクトを容易に把握することができる。このため、ユーザは、オブジェクトが記述された順序を容易に把握することができる。
【０２２１】
上述した実施の形態においては、会議に用いられるボードの例としてホワイトボード１１０を挙げて説明したが、ボードはホワイトボード１１０に限らない。たとえば、会議に用いられるボードは、記述の有無や記述された内容を電気的に検出可能な電子黒板（インタラクティブホワイトボード）であってもよい。この場合に、上述の記述状態の監視や記述オブジェクトの取得は、ボード撮影用カメラ２０１ではなく電子黒板を用いた情報処理によって行うことも可能である。
【０２２２】
たとえば、ペンによる接触を検知可能な電子黒板において、上述の記述状態の監視は、初期状態を含む非記述状態においてペンが接触すると記述中と判定し、記述中においてペンが接触しない状態が一定時間継続すると非記述中と判定することにより実現できる。また、ボードに記述されたオブジェクトの画像を電子黒板により取得し、上述の記述オブジェクトとして記憶することもできる。
【０２２３】
また、会議に用いられるボードは、たとえば会議の参加者がそれぞれ所有する情報端末において画面共有している仮想的なボードであってもよい。
【０２２４】
また、オブジェクトの記述前、記述中および記述後の各期間について会議状態を表示する場合について説明したが、会議状態はオブジェクトごとに表示する処理としてもよい。
【０２２５】
また、オブジェクトの抽出を、記述中か否かの監視結果や、電子黒板に対する接触時間に基づいて行う処理について説明したが、このような処理に限らない。たとえば、記述エリア１１１等のボードに入力枠（区画）を設けておき、入力枠の内側に記述された内容を１個のオブジェクトとして抽出する処理としてもよい。
【０２２６】
また、あるオブジェクトの記述後の期間の各情報と、そのオブジェクトの次に記述されたオブジェクトの記述前の期間の各情報と、をそれぞれ記憶する構成について説明したが、このような構成に限らない。たとえば、これらの各期間は同じ期間であるため、いずれか一方の各情報を記憶しておいてもよい。
【０２２７】
たとえば、図２９に示した例において、属性情報１７３０が示すオブジェクト＃１の記述後の各情報と、属性情報２５３０が示すオブジェクト＃２の記述前の各情報と、は同一である。このため、たとえば、属性情報２５３０から記述前の各情報を省いてもよい。この場合に、オブジェクト＃２の記述前がユーザから指定された場合は、属性情報１７３０の記述後の各情報を、オブジェクト＃２の記述前の各情報として参照することができる。
【０２２８】
以上説明したように、ファシリテーション支援プログラム、ファシリテーション支援装置およびファシリテーション支援方法によれば、ボードに記述されたオブジェクトに関する発言を確認しやすくし、ファシリテーションを支援することができる。
【０２２９】
たとえば、会議内容の詳細を記録する方法として、議事録等の文字情報を記録する方法の他に、音声レコーダやビデオレコーダで記録する方法や、これらで記録した音声データに資料データや情報要素（文字や図等）を関連付けて保存するものがある。しかしながら、たとえばアイデア発想、現状確認、手法分析など多数の意見を取り纏めながら進める会議では、後から会議の詳細を確認するとき、要約された議事録では会議当時のイメージが湧きにくい。また、会議の録音データでは、必要な録音箇所を探すのに手間がかかり、全て聞いて時間を要したり、部分的に聞いて聞き漏らしたりするといった問題がある。
【０２３０】
これに対して、上述の実施の形態によれば、たとえば逐次更新されるホワイトボード（議事の可視化）の議論内容と、録音により得られた音声データと、を記憶し、その時の発言者や会議状態なども音声データと一緒に記憶する。そして、これらの情報を再現するときには、ホワイトボードに記述した文字や図において、会議の流れを可視化することができる。また、発言者やオブジェクト単位で音声を素早く探し出し、会議の詳細な確認を短い時間で実現することができる。
【０２３１】
一例としては、開発者の設計レビューを実施する際、開発製品についての懸念事項、指摘事項などを議論する場においてホワイトボードに記述された図と、その時の音声、発言者、会議状態等を関連付けて記憶することができる。そして、記憶したそれらの情報を可視化することにより、後日、設計修正を行う時に、設計レビューで懸念された箇所や指摘された箇所の音声について素早く正確に確認することができる。
【０２３２】
なお、本実施の形態で説明したファシリテーション支援方法は、たとえば、予め用意されたプログラムをパーソナルコンピュータやワークステーション等のコンピュータで実行することにより実現することができる。このプログラムは、ハードディスク、フレキシブルディスク、ＣＤ−ＲＯＭ、ＭＯ、ＤＶＤ等のコンピュータで読み取り可能な記憶媒体に記録され、コンピュータによって記憶媒体から読み出されることによって実行される。ＣＤ−ＲＯＭはＣｏｍｐａｃｔ  Ｄｉｓｃ−Ｒｅａｄ  Ｏｎｌｙ  Ｍｅｍｏｒｙの略である。ＭＯはＭａｇｎｅｔｏ  Ｏｐｔｉｃａｌ  ｄｉｓｋの略である。ＤＶＤはＤｉｇｉｔａｌ  Ｖｅｒｓａｔｉｌｅ  Ｄｉｓｃの略である。またこのプログラムは、インターネット等のネットワークを介して配布されてもよい。
【０２３３】
上述した各実施の形態に関し、さらに以下の付記を開示する。
【０２３４】
（付記１）ディスカッションにおいてボードに記述されたオブジェクトと対応付けて、前記ディスカッションの参加者のうち前記オブジェクトの記述開始前、記述中および記述終了後の各期間のそれぞれにおける発言者を特定可能な情報を記憶する第１記憶部を参照して、前記ボードに記述されたオブジェクトの中から指定されたオブジェクトについての前記各期間のそれぞれにおける発言者を特定し、
前記指定されたオブジェクトについての前記各期間とそれぞれ対応付けて、特定した前記各期間のそれぞれにおける発言者を特定可能な情報を出力し、
前記指定されたオブジェクトについての前記各期間の中から期間の指定を受け付け、
録音された前記ディスカッションの音声のうち前記ボードに記述されたオブジェクトについての前記各期間における各音声を特定可能な情報を記憶する第２記憶部を参照して、前記指定されたオブジェクトについての指定された前記期間における音声を特定し、
特定した前記音声のデータを出力する、
処理をコンピュータに実行させることを特徴とするファシリテーション支援プログラム。
【０２３５】
（付記２）前記ディスカッションにおける前記参加者が前記ボードに記述中か否かを監視し、
前記記述中か否かの監視結果と、前記ディスカッションにおいて得られた前記ボードの記述内容を示す画像と、に基づいて前記ボードに記述されたオブジェクトを抽出し、
前記録音された音声に基づいて、抽出した前記オブジェクトの前記各期間のそれぞれにおける発言者を検出し、
抽出した前記オブジェクトと対応付けて、抽出した前記オブジェクトについての前記各期間について検出した発言者をそれぞれ特定可能な情報を前記第１記憶部に記憶させる、
処理を前記コンピュータに実行させることを特徴とする付記１に記載のファシリテーション支援プログラム。
【０２３６】
（付記３）前記記述中か否かを監視する処理においては、前記ディスカッションにおける撮影により得られた撮影データから判定した、前記参加者の前記ディスカッションにおける頭と手との間の距離に基づいて、前記参加者が前記ボードに記述中か否かを監視する処理を前記コンピュータに実行させることを特徴とする付記２に記載のファシリテーション支援プログラム。
【０２３７】
（付記４）前記記述中か否かを監視する処理においては、前記距離が閾値以上である場合は前記参加者が前記ボードに記述中であると判定し、前記距離が前記閾値未満である場合は前記参加者が前記ボードに記述中でないと判定する処理を前記コンピュータに実行させることを特徴とする付記３に記載のファシリテーション支援プログラム。
【０２３８】
（付記５）抽出した前記オブジェクトの前記各期間は、前記記述中か否かの監視結果に基づく、抽出した前記オブジェクトの記述の開始および終了の各タイミングにより区切られた各期間であることを特徴とする付記２〜４のいずれか一つに記載のファシリテーション支援プログラム。
【０２３９】
（付記６）前記第１記憶部は、前記ディスカッションにおいて前記ボードに記述されたオブジェクトと対応付けて、前記オブジェクトの各期間のそれぞれにおける発言者を特定可能な情報と、前記オブジェクトの各期間における前記ディスカッションの状態を特定可能な情報と、を記憶し、
前記第１記憶部を参照して、前記指定されたオブジェクトについての前記各期間における前記ディスカッションの状態をそれぞれ特定し、
前記指定されたオブジェクトについての前記各期間とそれぞれ対応付けて、特定した前記各期間における前記ディスカッションの状態を特定可能な情報を出力する、
処理を前記コンピュータに実行させることを特徴とする付記１〜５のいずれか一つに記載のファシリテーション支援プログラム。
【０２４０】
（付記７）前記ディスカッションにおいて前記ボードに記述された各オブジェクトのうち、前記ディスカッションの状態が指定された状態となった期間が前記各期間の少なくともいずれかに含まれるオブジェクトを特定し、
特定した前記オブジェクトを特定可能な情報を出力し、
前記発言者をそれぞれ特定する処理においては、特定した前記オブジェクトの中から指定されたオブジェクトについての前記各期間のそれぞれにおける発言者を特定する、
処理を前記コンピュータに実行させることを特徴とする付記１〜６のいずれか一つに記載のファシリテーション支援プログラム。
【０２４１】
（付記８）前記各期間のうちの特定の期間における前記ディスカッションの状態は、前記ディスカッションの前記特定の期間における発言者の感情に関する状態と、前記ディスカッションの前記特定の期間における発言者の数と、前記ディスカッションの前記特定の期間における時間あたりの発言の数と、前記ディスカッションの参加者の前記特定の期間における感情に関する状態と、前記特定の期間の時間長と、の少なくともいずれかに基づいて判定される状態であることを特徴とする付記６または７に記載のファシリテーション支援プログラム。
【０２４２】
（付記９）前記ディスカッションにおいて前記ボードに記述された各オブジェクトのうち、指定された参加者が発言した期間が前記各期間の少なくともいずれかに含まれるオブジェクトを特定し、
特定した前記オブジェクトを特定可能な情報を出力し、
前記発言者をそれぞれ特定する処理においては、特定した前記オブジェクトの中から指定されたオブジェクトについての前記各期間のそれぞれにおける発言者を特定する、
処理を前記コンピュータに実行させることを特徴とする付記１〜７のいずれか一つに記載のファシリテーション支援プログラム。
【０２４３】
（付記１０）前記ディスカッションにおいて前記ボードに記述された各オブジェクトの中から指定されたオブジェクトについて、前記各オブジェクトのうち、前記指定されたオブジェクトの直前に前記ボードに記述されたオブジェクトと、前記指定されたオブジェクトの直後に前記ボードに記述されたオブジェクトと、の少なくともいずれかを特定可能な情報を出力することを特徴とする付記１〜９のいずれか一つに記載のファシリテーション支援プログラム。
【０２４４】
（付記１１）前記オブジェクトは、書かれた文字および描かれた図の少なくともいずれかを含む情報であることを特徴とする付記１〜１０のいずれか一つに記載のファシリテーション支援プログラム。
【０２４５】
（付記１２）前記ディスカッションにおいて前記指定されたオブジェクトより前に記述されたオブジェクトがある場合、前記指定されたオブジェクトの前記記述開始前は、前記前に記述されたオブジェクトの記述終了から前記指定されたオブジェクトの記述開始までの期間であり、
前記ディスカッションにおいて前記指定されたオブジェクトより後に記述されたオブジェクトがある場合、前記指定されたオブジェクトの前記記述終了後は、前記指定されたオブジェクトの記述終了から前記後に記述されたオブジェクトの記述開始までの期間である、
ことを特徴とする付記１〜１１のいずれか一つに記載のファシリテーション支援プログラム。
【０２４６】
（付記１３）ディスカッションにおいてボードに記述されたオブジェクトと対応付けて、前記ディスカッションの参加者のうち前記オブジェクトの記述開始前、記述中および記述終了後の各期間のそれぞれにおける発言者を特定可能な情報を記憶する第１記憶部を参照して、前記ボードに記述されたオブジェクトの中から指定されたオブジェクトについての前記各期間のそれぞれにおける発言者を特定する第１特定部と、
前記指定されたオブジェクトについての前記各期間とそれぞれ対応付けて、前記第１特定部により特定された前記各期間のそれぞれにおける発言者を特定可能な情報を出力する第１出力部と、
前記指定されたオブジェクトについての前記各期間の中から期間の指定を受け付ける受付部と、
録音された前記ディスカッションの音声のうち前記ボードに記述されたオブジェクトについての前記各期間における各音声を特定可能な情報を記憶する第２記憶部を参照して、前記指定されたオブジェクトについての前記受付部により指定された前記期間における音声を特定する第２特定部と、
前記第２特定部により特定された前記音声のデータを出力する第２出力部と、
を備えることを特徴とするファシリテーション支援装置。
【０２４７】
（付記１４）コンピュータが、
ディスカッションにおいてボードに記述されたオブジェクトと対応付けて、前記ディスカッションの参加者のうち前記オブジェクトの記述開始前、記述中および記述終了後の各期間のそれぞれにおける発言者を特定可能な情報を記憶する第１記憶部を参照して、前記ボードに記述されたオブジェクトの中から指定されたオブジェクトについての前記各期間のそれぞれにおける発言者を特定し、
前記指定されたオブジェクトについての前記各期間とそれぞれ対応付けて、特定した前記各期間のそれぞれにおける発言者を特定可能な情報を出力し、
前記指定されたオブジェクトについての前記各期間の中から期間の指定を受け付け、
録音された前記ディスカッションの音声のうち前記ボードに記述されたオブジェクトについての前記各期間における各音声を特定可能な情報を記憶する第２記憶部を参照して、前記指定されたオブジェクトについての指定された前記期間における音声を特定し、
特定した前記音声のデータを出力する、
ことを特徴とするファシリテーション支援方法。
【符号の説明】
【０２４８】
１０１  参加者
１１０  ホワイトボード
１１１  記述エリア
１１２，３２２２〜３２２４  枠
１１３  足部
１２０  ファシリテーション支援装置
１３０  対応情報
１３１〜１３３，３２１１ａ，３２１１ｂ，３２１１ｃ  再生ボタン
２００  ファシリテーション支援システム
２０１  ボード撮影用カメラ
２０２  参加者撮影用カメラ
２０３  マイク
３００  コンピュータ
３０１  プロセッサ
３０２  メモリ
３０３  カメラインタフェース
３０４  マイクインタフェース
３０５  ユーザインタフェース
３０９  バス
４０１  操作受付部
４０２  ボード撮影用カメラデータ取得部
４０３  参加者撮影用カメラデータ取得部
４０４  マイクデータ取得部
４０５  音声データ記憶部
４０６  記憶制御部
４０７  オブジェクト情報記憶部
４０８  出力制御部
４０９  出力部
６００  会議状態判定テーブル
７０１，７０２  抽出領域
１２０１  記述状態
１２０２，３２１２  発言者
１２０３，３２１３  会議状態
１２０４  記憶音声データ
１２０５  チャプタ番号
１２０６  記述状態変化タイミング
１２０７  記述終了タイミング
１２０８  記述オブジェクト作成タイミング
１３１０，２１１０，２９１０  一時情報
１７１０，２５１０  記述オブジェクト
１７２０  オブジェクト管理情報
１７３０，２５３０  属性情報
３１００  オブジェクト再生画面
３１１１  カーソル
３２１０  サブウィンドウ
３２１４  クローズボタン
３２３１，３２３２  矢印
３３１０  リストウィンドウ
【図１】
2020034823.tif 000003
【図２】
2020034823.tif 000004
【図３】
2020034823.tif 000005
【図４】
2020034823.tif 000006
【図５Ａ】
2020034823.tif 000007
【図５Ｂ】
2020034823.tif 000008
【図６】
2020034823.tif 000009
【図７】
2020034823.tif 000010
【図８】
2020034823.tif 000011
【図９】
2020034823.tif 000012
【図１０】
2020034823.tif 000013
【図１１】
2020034823.tif 000014
【図１２】
2020034823.tif 000015
【図１３】
2020034823.tif 000016
【図１４】
2020034823.tif 000017
【図１５】
2020034823.tif 000018
【図１６】
2020034823.tif 000019
【図１７】
2020034823.tif 000020
【図１８】
2020034823.tif 000021
【図１９】
2020034823.tif 000022
【図２０】
2020034823.tif 000023
【図２１】
2020034823.tif 000024
【図２２】
2020034823.tif 000025
【図２３】
2020034823.tif 000026
【図２４】
2020034823.tif 000027
【図２５】
2020034823.tif 000028
【図２６】
2020034823.tif 000029
【図２７】
2020034823.tif 000030
【図２８】
2020034823.tif 000031
【図２９】
2020034823.tif 000032
【図３０】
2020034823.tif 000033
【図３１】
2020034823.tif 000034
【図３２】
2020034823.tif 000035
【図３３】
2020034823.tif 000036
【図３４】
2020034823.tif 000037