(57)【要約】【課題】ブレインストーミングなどにおいて出てきたオブジェクトおよびそれに関する音声を従来よりも取り扱いやすくできるようにする。【解決手段】複数のオブジェクト６の個々と対応付けて１つまたは複数の音声を音声記憶手段に記憶させておき、複数のオブジェクトのうちの一部を複数のグループのうちのいずれかにグループ化し、いずれかのグループが選択された場合に、音声記憶手段に記憶されている、選択されたグループに属するオブジェクトそれぞれの音声を再生する。【選択図】図４
2016009270.tif 000002
【特許請求の範囲】
【請求項１】
表示装置によって表示する複数のオブジェクトを管理するオブジェクト管理装置であって、
前記複数のオブジェクトの個々と対応付けて１つまたは複数の音声を記憶する音声記憶手段と、
前記複数のオブジェクトのうちの一部を複数のグループのうちのいずれかにグループ化するグループ化手段と、
前記複数のグループのうちのいずれかを選択する第一の操作が行われた場合に、前記音声記憶手段に記憶されている、前記複数のオブジェクトのうちの当該選択されたグループに属するオブジェクトそれぞれの音声を再生する、音声再生手段と、
を有することを特徴とするオブジェクト管理装置。
【請求項２】
前記音声記憶手段は、さらに、前記複数のグループのうちのいずれかと対応付けて１つまたは複数の音声を記憶し、
前記音声再生手段は、前記第一の操作が行われた場合に、さらに、前記音声記憶手段に記憶されている、前記複数のグループのうちの選択されたグループの音声を再生する、
請求項１に記載のオブジェクト管理装置。
【請求項３】
音声を録音する録音手段、を有し、
前記表示装置は、前記複数のオブジェクトを、同一のグループに属するもの同士が同一の枠に収まるように表示し、
前記音声記憶手段は、前記複数のオブジェクトが前記表示装置によって表示されているときに当該複数のオブジェクトのいずれかを選択する第二の操作がなされた場合は、前記録音手段によって録音された音声を、当該選択されたオブジェクトと対応付けて記憶し、いずれかの枠の内側のいずれのオブジェクトも配置されていない部分を選択する第三の操作がなされた場合は、当該音声を、当該枠に係るグループと対応付けて記憶する、
請求項２に記載のオブジェクト管理装置。
【請求項４】
前記音声記憶手段に記憶されている音声ごとに、再生するか否かを示す第一のフラグを記憶する、第一のフラグ記憶手段と、
前記複数のグループごとに、再生するか否かを示す第二のフラグを記憶する、第二のフラグ記憶手段と、を有し、
前記音声再生手段は、前記複数のオブジェクトそれぞれの音声のうち、前記第一のフラグが再生する旨を示しかつ前記複数のグループのうち対応するオブジェクトの属するグループの前記第二のフラグが再生する旨を示す音声のみ、再生する、
請求項１ないし請求項３のいずれかに記載のオブジェクト管理装置。
【請求項５】
前記音声再生手段は、各音声を、前記音声記憶手段に記憶された順に再生する、
請求項１ないし請求項４のいずれかに記載のオブジェクト管理装置。
【請求項６】
前記複数のオブジェクトのうちのいずれかの所属先を前記複数のグループのうちの一方のグループから他方のグループへ変更するグループ変更手段、を有し、
前記表示装置は、前記複数のオブジェクトのうちの前記所属先が変わったオブジェクトの音声が再生される際に、当該オブジェクトを前記一方のグループと対応付けて表示する、
請求項１ないし請求項５のいずれかに記載のオブジェクト管理装置。
【請求項７】
表示装置によって表示する複数のオブジェクトを管理するオブジェクト管理方法であって、
前記複数のオブジェクトの個々と対応付けて１つまたは複数の音声を音声記憶手段に記憶させ、
前記複数のオブジェクトのうちの一部を複数のグループのうちのいずれかにグループ化し、
前記複数のグループのうちのいずれかを選択する第一の操作が行われた場合に、前記音声記憶手段に記憶されている、前記複数のオブジェクトのうちの当該選択されたグループに属するオブジェクトそれぞれの音声を再生する、
ことを特徴とするオブジェクト管理方法。
【請求項８】
表示装置によって表示する複数のオブジェクトを管理するコンピュータに用いられるコンピュータプログラムであって、
前記コンピュータに、
前記複数のオブジェクトの個々と対応付けて１つまたは複数の音声を音声記憶手段に記憶させる処理を実行させ、
前記複数のオブジェクトのうちの一部を複数のグループのうちのいずれかにグループ化する処理を実行させ、
前記複数のグループのうちのいずれかを選択する第一の操作が行われた場合に、前記音声記憶手段に記憶されている、前記複数のオブジェクトのうちの当該選択されたグループに属するオブジェクトそれぞれの音声を再生する処理を実行させる、
ことを特徴とするコンピュータプログラム。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、テキストまたは写真などのオブジェクトを音声とともに取り扱う技術に関する。
【背景技術】
【０００２】
従来、表示装置によって表示するテキストまたは写真などのオブジェクトに、音声を対応付けて記録する技術が提案されている。
【０００３】
特許文献１に記載される電子フォトアルバムは、元画像を表示したり、元画像を縮小したサムネイル画像を表示したりする。サムネイル画像は、元画像を選択するために用いられる。さらに、元画像に対応付けて音声データを記憶する。そして、元画像が選択されると、これに対応する音声データから音声を再生する。
【０００４】
特許文献２に記載される装置によると、ユーザ操作によりＰＣからネットワークを介して同期再生データ生成サーバに対して資料群の配信要求があると、ユーザ操作にしたがって資料群に含まれる複数の資料画像表示データが順次ＰＣに送信されて資料画像が順次切り替えられながら表示される。このような資料画像の表示が行われている間にかかる資料群に関連する音声データ（ユーザによる資料朗読など）がＰＣから同期再生データ生成サーバに送信され、かかる音声データの再生と資料画像の表示とを同期させることができる同期再生データが生成される。
【先行技術文献】
【特許文献】
【０００５】
【特許文献１】特開２００６−１８０２０号公報
【特許文献２】特開２００４−２８２６１４号公報
【発明の概要】
【発明が解決しようとする課題】
【０００６】
上述の技術は、ブレインストーミングにおいて出てきたキーワード（テキスト）または画像などをオブジェクトとして取り扱い、それに関連する事項を音声として記録するためにも、応用することができる。これらのオブジェクトおよび音声を、より好適に取り扱うことが求められている。
【０００７】
本願発明は、このような課題に鑑み、ブレインストーミングなどにおいて出てきたオブジェクトおよびそれに関する音声を従来よりも取り扱いやすくできるように支援することを、目的とする。
【課題を解決するための手段】
【０００８】
本発明の一形態に係るオブジェクト管理装置は、表示装置によって表示する複数のオブジェクトを管理するオブジェクト管理装置であって、前記複数のオブジェクトの個々と対応付けて１つまたは複数の音声を記憶する音声記憶手段と、前記複数のオブジェクトのうちの一部を複数のグループのうちのいずれかにグループ化するグループ化手段と、前記複数のグループのうちのいずれかを選択する第一の操作が行われた場合に、前記音声記憶手段に記憶されている、前記複数のオブジェクトのうちの当該選択されたグループに属するオブジェクトそれぞれの音声を再生する、音声再生手段と、を有する。
【０００９】
好ましくは、前記音声記憶手段は、さらに、前記複数のグループのうちのいずれかと対応付けて１つまたは複数の音声を記憶し、前記音声再生手段は、前記第一の操作が行われた場合に、さらに、前記音声記憶手段に記憶されている、前記複数のグループのうちの選択されたグループの音声を再生する。
【００１０】
または、音声を録音する録音手段、を有し、前記表示装置は、前記複数のオブジェクトを、同一のグループに属するもの同士が同一の枠に収まるように表示し、前記音声記憶手段は、前記複数のオブジェクトが前記表示装置によって表示されているときに当該複数のオブジェクトのいずれかを選択する第二の操作がなされた場合は、前記録音手段によって録音された音声を、当該選択されたオブジェクトと対応付けて記憶し、いずれかの枠の内側のいずれのオブジェクトも配置されていない部分を選択する第三の操作がなされた場合は、当該音声を、当該枠に係るグループと対応付けて記憶する。
【００１１】
または、前記音声記憶手段に記憶されている音声ごとに、再生するか否かを示す第一のフラグを記憶する、第一のフラグ記憶手段と、前記複数のグループごとに、再生するか否かを示す第二のフラグを記憶する、第二のフラグ記憶手段と、を有し、前記音声再生手段は、前記複数のオブジェクトそれぞれの音声のうち、前記第一のフラグが再生する旨を示しかつ前記複数のグループのうち対応するオブジェクトの属するグループの前記第二のフラグが再生する旨を示す音声のみ、再生する。
【発明の効果】
【００１２】
本発明によると、ブレインストーミングなどにおいて出てきたオブジェクトおよびそれに関する音声を従来よりも取り扱いやすくできるように支援することができる。
【図面の簡単な説明】
【００１３】
【図１】ミーティング支援システムの全体的な構成の例を示す図である。
【図２】記録再生装置のハードウェア構成の例を示す図である。
【図３】記録再生装置の機能的構成の例を示す図である。
【図４】マッピング画面の例を示す図である。
【図５】オブジェクトテーブルの例を示す図である。
【図６】グループテーブルの例を示す図である。
【図７】音声テーブルの例を示す図である。
【図８】ダイアログ画面の例を示す図である。
【図９】音声付加処理の流れの例を説明するフローチャートである。
【図１０】再生設定処理の流れの例を説明するフローチャートである。
【図１１】タイムライン画面の例を示す図である。
【図１２】単位別再生処理の流れの例を説明するフローチャートである。
【図１３】タイムライン再生処理の流れの例を説明するフローチャートである。
【図１４】オブジェクトが移動する様子の例を示す図である。
【図１５】記録再生装置の全体的な処理の流れの例を説明するフローチャートである。
【図１６】記録再生装置の全体的な処理の流れの例を説明するフローチャートである。
【発明を実施するための形態】
【００１４】
図１は、ミーティング支援システム３の全体的な構成の例を示す図である。図２は、記録再生装置１のハードウェア構成の例を示す図である。図３は、記録再生装置１の機能的構成の例を示す図である。
【００１５】
図１に示すように、ミーティング支援システム３は、オブジェクト管理装置１、プロジェクタ２Ａ、および表示パネル２Ｃなどによって構成される。
【００１６】
ミーティング支援システム３は、企業、役所、または学校などに所属するメンバが複数人集まってミーティングを行う際に用いられる。特に、ミーティング支援システム３によると、出席者が発言した様々なキーワードをマッピングするとともに、複数のキーワードを１つのグループにグループ化したり、キーワードまたはグループごとにメモを音声によって記録して再生したりすることができる。
【００１７】
記録再生装置１は、上述のオブジェクトおよび音声を記録し、音声を再生する。記録再生装置１として、パーソナルコンピュータ、タブレットコンピュータ、またはスマートフォンなどが用いられる。以下、記録再生装置１としてノート型のパーソナルコンピュータが用いられる場合を例に説明する。
【００１８】
記録再生装置１は、図２に示すように、ＣＰＵ（Central Processing Unit）１０ａ、ＲＡＭ（Random Access Memory）１０ｂ、ＲＯＭ（Read Only Memory）１０ｃ、大容量記憶装置１０ｄ、タッチパネルディスプレイ１０ｅ、ＮＩＣ（Network Interface Card）１０ｆ、キーボード１０ｇ、ポインティングデバイス１０ｈ、画像出力インタフェース１０ｉ、録音ユニット１０ｊ、および音声再生ユニット１０ｋなどによって構成される。
【００１９】
タッチパネルディスプレイ１０ｅは、ユーザに対してメッセージを与えるための画面、処理の結果を示す画面、またはユーザが指令を入力するための画面などを表示する。また、タッチパネルディスプレイ１０ｅは、タッチされた位置を示す信号をＣＰＵ１０ａへ送る。
【００２０】
ＮＩＣ１０ｆは、ＴＣＰ／ＩＰなどのプロトコルでウェブサーバなどの装置と通信を行う。
【００２１】
キーボード１０ｇおよびポインティングデバイス１０ｈは、指令およびデータなどをユーザが入力するために用いられる。
【００２２】
画像出力インタフェース１０ｉは、プロジェクタ２Ａへの画像信号を出力する。画像出力インタフェース１０ｉとして、Ｄ−ＳＵＢ（D-Subminiature）、ＨＤＭＩ（High-Definition Multimedia Interface）、またはＵＳＢ（Universal Serial Bus）などが用いられる。ＨＤＭＩは、登録商標である。
【００２３】
録音ユニット１０ｊは、音声を集音して電子データに変換し、これを音声ファイルとして所定の保存場所に保存する。音声再生ユニット１０ｋは、音声ファイルに基づいて音声を再生する。
【００２４】
ＲＯＭ１０ｃまたは大容量記憶装置１０ｄには、オペレーティングシステムのほか、記録再生プログラム１Ｐが記憶されている。記録再生プログラム１Ｐは、必要に応じてＲＡＭ１０ｂにロードされ、ＣＰＵ１０ａによって実行される。大容量記憶装置１０ｄとして、ＨＤＤ（Hard Disk Drive）またはＳＳＤ（Solid State Drive）などが用いられる。
【００２５】
記録再生プログラム１Ｐによると、図３に示すマッピング画面制御部１０１、タイムライン画面制御部１０２、オブジェクト追加部１２１、グループ作成部１２２、音声付加部１２３、所属グループ変更部１２４、再生設定部１２５、音声再生処理部１２６、ファイル記憶部１３１、およびテーブル記憶部１３２などの機能が実現される。
【００２６】
プロジェクタ２Ａは、記録再生装置１から入力された画像信号に基づいて画面を表示パネル２Ｃへ投影する。
【００２７】
表示パネル２Ｃは、画像を投影するためのパネルである。プロジェクタ専用のパネルであってもよいし、ホワイトボードまたは壁面を表示パネル２Ｃとして用いてもよい。
【００２８】
図４は、マッピング画面５１の例を示す図である。図５は、オブジェクトテーブルＴＬ１の例を示す図である。図６は、グループテーブルＴＬ２の例を示す図である。図７は、音声テーブルＴＬ３の例を示す図である。図８は、ダイアログ画面５４の例を示す図である。図９は、音声付加処理の流れの例を説明するフローチャートである。図１０は、再生設定処理の流れの例を説明するフローチャートである。図１１は、タイムライン画面５２の例を示す図である。図１２は、単位別再生処理の流れの例を説明するフローチャートである。図１３は、タイムライン再生処理の流れの例を説明するフローチャートである。図１４は、オブジェクト６が移動する様子の例を示す図である。
【００２９】
次に、図３に示す記録再生装置１の各部の処理を、図４〜図１４を参照しながら説明する。
【００３０】
マッピング画面制御部１０１は、マッピング画面５１をタッチパネルディスプレイ１０ｅに表示させる。また、マッピング画面５１を適宜、更新する。マッピング画面５１は、画像出力インタフェース１０ｉおよびプロジェクタ２Ａを介して表示パネル２Ｃにも表示される。後述するタイムライン画面５２（図１１参照）も同様に、タッチパネルディスプレイ１０ｅおよび表示パネル２Ｃに表示される。
【００３１】
なお、タイムライン画面制御部１０２が、タイムライン画面５２をタッチパネルディスプレイ１０ｅに表示させたり更新したりする。
【００３２】
マッピング画面５１は、図４に示すように、マッピング領域５１Ａおよび操作領域５１Ｂによって構成される。
【００３３】
マッピング領域５１Ａには、テキスト（文字列）がオブジェクト６として配置される。オブジェクト６の背景に画像を配置することもできる。なお、初期のマッピング領域５１Ａには、オブジェクト６、グループ名、およびこれらを囲む枠が１つも配置されていない。オブジェクト６などの配置の仕方は、後に順次説明する。
【００３４】
操作領域５１Ｂには、新たなオブジェクト６をマッピング領域５１Ａに追加したり、オブジェクト６に音声を付加したり、タイムライン画面５２を呼び出したりするためのボタン５１ｐ〜５１ｔが配置されている。各ボタン５１ｐ〜５１ｔの使い方は、後に順次、説明する。
【００３５】
ファイル記憶部１３１は、音声ファイルおよび画像ファイルが記憶される。音声ファイルは、録音ユニット１０ｊによって得られる。画像ファイルは、オブジェクト６の背景の画像を再現するために用いられる。
【００３６】
テーブル記憶部１３２は、オブジェクトテーブルＴＬ１、グループテーブルＴＬ２、および音声テーブルＴＬ３を記憶している。
【００３７】
オブジェクトテーブルＴＬ１には、図５に示すように、オブジェクト６ごとのオブジェクトデータ７１が格納される。グループテーブルＴＬ２には、図６に示すように、グループごとのグループデータ７２が格納される。音声テーブルＴＬ３には、図７に示すように、音声ファイルごとの音声属性データ７３が格納される。
【００３８】
初期のオブジェクトテーブルＴＬ１および音声テーブルＴＬ３には、オブジェクトデータ７１および音声属性データ７３が１つも格納されていない。初期のグループテーブルＴＬ２には、後述する、いずれのオブジェクト６にもグループにも対応付けない音声を取り扱うための、グループコードが「Ｇ９９９」でありグループ名が「その他」である音声属性データ７３だけが、予め格納されている。この音声属性データ７３の再生要否フラグのデフォルト値は「オン」である。各データの内容、生成、および使用方法などについては、後に順次、説明する。
【００３９】
オブジェクト追加部１２１は、新たにオブジェクト６をマッピング領域５１Ａに追加する際に、このオブジェクト６のオブジェクトデータ７１を生成しオブジェクトテーブルＴＬ１に追加する処理を行う。オブジェクト追加部１２１による処理およびユーザの作業は、次の手順で行われる。
【００４０】
ユーザは、マッピング領域５１Ａの中の、オブジェクト６を追加する位置をタップ（１回、タッチ）するなどして選択し、ボタン５１ｐをタップする。
【００４１】
すると、オブジェクト追加部１２１は、図８のようなダイアログ画面５４をマッピング画面５１の上に表示させる。ここで、ユーザは、オブジェクト６として追加するテキストおよび背景の画像のファイル名をダイアログ画面５４に対して指定し、「追加」ボタンをタップする。なお、背景の画像が不要である場合は、ファイル名を空欄にしておけばよい。
【００４２】
オブジェクト追加部１２１は、指定された内容を受け付け、ユニークなオブジェクトコードを発行する。指定された内容、発行したオブジェクトコード、およびユーザがマッピング領域５１Ａで指定した位置の座標を示すデータをオブジェクトデータ７１として生成し、オブジェクトテーブルＴＬ１に記憶させる。そして、ダイアログ画面５４を閉じる。これにより、マッピング画面５１が再び最前面に表われる。なお、この時点において、「現在グループコード」は、空欄である。
【００４３】
さらに、ファイル名が指定された場合は、このファイル名の画像ファイル７６がファイル記憶部１３１に記憶される。
【００４４】
マッピング画面制御部１０１は、ダイアログ画面５４が閉じてマッピング画面５１が最前面に表われると、マッピング領域５１Ａのユーザが指定した位置に、ユーザが指定したテキストをオブジェクト６として新たに配置する。ファイル名が指定された場合は、さらに、このファイル名の画像ファイル７６をファイル記憶部１３１から読み出し、この画像ファイル７６に基づいて画像をオブジェクト６の背景として配置する。
【００４５】
５つのテキストについて上述の処理および作業を行うと、図４のようにマッピング領域５１Ａに５つのオブジェクト６が配置され、図５のように５つのオブジェクトデータ７１が格納される。
【００４６】
グループ作成部１２２は、複数のオブジェクト６を１つのグループにグループ化する処理を行う。グループ作成部１０５による処理およびユーザの作業は、次の手順で行われる。
【００４７】
ユーザは、マッピング領域５１Ａの中の、グループ化したい複数のオブジェクト６をタップするなどして選択し、ボタン５１ｑをタップする。
【００４８】
すると、グループ作成部１２２は、グループ名を入力するためのダイアログ画面をマッピング画面５１の上に表示させる。ユーザは、このダイアログ画面にグループ名を入力する。
【００４９】
グループ作成部１２２は、ユニークなグループコードを発行し、このグループコード、入力されたグループ名、および再生要否フラグを示すデータを生成し、グループデータ７２としてグループテーブルＴＬ２（図６参照）に記憶させる。再生要否フラグは、このグループに対応付けられた（付加された）音声を再生するか否かを示す。初期値は、再生しない旨を示す「オフ」である。
【００５０】
さらに、グループ作成部１２２は、選択されたオブジェクト６それぞれのオブジェクトデータ７１の「現在グループコード」に、このグループのグループコードを書き込む。現在グループコードは、オブジェクト６が現在所属しているグループのグループコードである。所属するグループが変わると、現在グループコードが後述の所属グループ変更部１２４によって書き換えられる。
【００５１】
グループが生成されると、マッピング画面制御部１０１は、このグループに所属するオブジェクト６が枠で囲まれ、このグループのグループ名が枠の中に配置されるように、マッピング領域５１Ａを更新する（図４参照）。
【００５２】
音声付加部１２３は、オブジェクト６またはグループに音声を付加する（対応付ける）処理を行う。オブジェクト６およびグループのいずれにも対応付けずに音声を記録することも、できる。音声付加部１２３による処理は、図９に示す手順で行われる。
【００５３】
ユーザは、音声をオブジェクト６に対応付けて記録したい場合は、マッピング領域５１Ａにおいてオブジェクト６をタップするなどして選択する。グループに対応付けて記録したい場合は、グループの枠の内側の、オブジェクト６が配置されていない部分をタップするなどして選択する。オブジェクト６およびグループのいずれにも対応付けたくない場合は、マッピング領域５１Ａの、上記以外の部分をタップすることによって、対応付けないことを選択する。いずれかを選択した後、ボタン５１ｒをタップする。
【００５４】
すると、音声付加部１２３は、録音を開始するように録音ユニット１０ｊを制御し（図９の＃８０１）、停止ボタンを配置したダイアログ画面をマッピング画面５１の上に表示させる（＃８０２）。ユーザは、記録再生装置１へ向かって喋る。停止ボタンがタップされるまで、録音ユニット１０ｊによってユーザの声が集音される。ユーザは、喋り終えたら、停止ボタンをタップする。
【００５５】
音声付加部１２３は、停止ボタンがタップされたことを検知すると（＃８０３）、録音ユニット１０ｊに集音を停止させ、これまでに集音された音声の電子データ（音声データ）を音声ファイル７７としてファイル記憶部１３１に記憶させる（＃８０４）。この際に、ユニークなファイル名を発行し、音声ファイル７７に対応付ける。
【００５６】
さらに、音声付加部１２３は、マッピング領域５１Ａにおけるユーザの選択に応じて、音声属性データ７３を次のように生成し、音声テーブルＴＬ３（図７参照）に格納する。
【００５７】
オブジェクト６が選択された場合は（＃８０５でＹｅｓ）、音声付加部１２３は、このオブジェクト６のオブジェクトコードを対応先コードとして示し、この音声ファイル７７を生成した時点でこのオブジェクト６が所属するグループのグループコードを録音時グループコードとして示す音声属性データ７３を生成し、音声テーブルＴＬ３に格納する（＃８０６）。
【００５８】
そのほか、この音声属性データ７３には、この音声ファイル７７のファイル名、録音を開始した時刻（録音時刻）、および再生要否フラグが含まれる。再生要否フラグは、この音声ファイル７７を用いて音声を再生するか否かを示す。初期値は、再生しない旨を示す「オフ」である。ステップ＃８０８およびステップ＃８０９それぞれにおいて生成する音声属性データ７３も、同様である。
【００５９】
なお、録音時刻は、録音の作業を開始する際にユーザが所定のコマンドを入力した時点を基準とする。
【００６０】
または、グループが選択された場合は（＃８０５でＮｏ、＃８０７でＹｅｓ）、音声付加部１２３は、このグループのグループコードを対応先コードとして示す音声属性データ７３を生成し、音声テーブルＴＬ３に格納する（＃８０８）。録音時グループコードは、何も示されない。
【００６１】
または、対応付けないことが選択された場合は（＃８０５でＮｏ、＃８０７でＮｏ）、音声付加部１２３は、対応先コードとして「Ｇ９９９」を示すが録音時グループコードに何も示さない音声属性データ７３を生成し、音声テーブルＴＬ３に格納する（＃８０９）。
【００６２】
そして、音声付加部１２３は、ダイアログ画面を閉じる（＃８１０）。これにより、マッピング画面５１が最前面に再び表われる。
【００６３】
所属グループ変更部１２４は、オブジェクト６の所属先をあるグループから他のグループへ変更する処理を行う。所属グループ変更部１２４による処理およびユーザの作業は、次の手順で行われる。
【００６４】
ユーザは、マッピング領域５１Ａにおいて、オブジェクト６を、現在所属するグループの枠の内側から新たに所属させるグループの枠の内側へドラッグアンドドロップする。
【００６５】
すると、所属グループ変更部１２４は、このオブジェクト６のオブジェクトデータ７１（図５参照）の「現在グループコード」を新たに所属させるグループのグループコードに書き換える。
【００６６】
マッピング画面制御部１０１は、ドラッグアンドドロップに応じて、このオブジェクト６を、背景の画像がある場合はそれとともに、新たに所属させるグループの枠の内側へ移動させる。
【００６７】
再生設定部１２５は、記録した音声の再生に関する設定の処理を、図１０に示す手順で行う。
【００６８】
ユーザは、マッピング画面５１においてボタン５１ｔをタップする。すると、タイムライン画面制御部１０２によって、マッピング画面５１の上に、図１１に示すタイムライン画面５２が表示される（図１０の＃８２１）。
【００６９】
タイムライン画面５２には、タイムライン５２ＴＡ、５２ＴＢ、５２ＴＣおよびボタン５２ａ、５２ｂなどが設けられている。
【００７０】
タイムライン５２ＴＡには、オブジェクト６に対応付けられた音声それぞれの録音時刻の位置に、アイコン５２Ｐが配置されている。
【００７１】
タイムライン５２ＴＢには、グループに対応付けられた音声それぞれの録音時刻の位置に、アイコン５２Ｐが配置されている。
【００７２】
オブジェクト６が複数ある場合は、タイムライン５２ＴＡがオブジェクト６ごとに設けられている。また、グループが複数ある場合は、タイムライン５２ＴＢがグループごとに設けられている。よって、図４に示したようにオブジェクト６が５つありグループが２つある場合は、タイムライン５２ＴＡが５つ設けられ、タイムライン５２ＴＢが２つ設けられる。
【００７３】
タイムライン５２ＴＣには、オブジェクト６にもグループにも対応付けられていない音声それぞれの録音時刻の位置に、アイコン５２Ｐが配置されている。
【００７４】
各アイコン５２Ｐの位置は、音声テーブルＴＬ３（図７参照）に格納されている各音声属性データ７３の対応先モードおよび録音時刻に基づいている。
【００７５】
ところで、対応付けられているオブジェクト６の所属先が録音時と現在とで異なる音声が、存在し得る。再生設定部１２５は、このような音声のアイコン５２Ｐに星形のマークを付す（＃８２２）。ある音声がこのような音声であるか否かは、その音声が対応付けられているオブジェクト６のオブジェクトデータ７１の現在グループコードとその音声の音声属性データ７３の録音時グループコードとが一致するか否かをチェックすることによって検知することができる。
【００７６】
ユーザは、音声ごとに、それを再生するか否かを設定することができる。アイコン５２Ｐは、それに対応する音声を再生するか否かに応じて態様が変わる。再生するように（以下、「オン」に、と記載する。）設定されている場合は、アイコン５２Ｐの中が有色になり、再生しないように（以下、「オフ」に、と記載する。）設定されている場合は、アイコン５２Ｐの中が白色になる。再生するか否かは、音声属性データ７３の再生要否フラグに示されている。再生するか否かの設定の仕方は、次の通りである。
【００７７】
ユーザは、再生させるか否かを個々の音声ごとに行う場合は、対象の音声に対応するアイコン５２Ｐにタップする。
【００７８】
すると（＃８２３でＹｅｓ）、再生設定部１２５は、その音声の音声属性データ７３の再生要否フラグを、現在の値と反対の値に変更するとともに（＃８２４）、そのアイコン５２Ｐの形態を現在の形態と反対の形態に変更する（＃８２５）。
【００７９】
例えば、その音声が現在、オフに設定されている場合は、タップに伴い、再生要否フラグを「オン」に設定し、アイコン５２Ｐを有色に変更する。一方、オンに設定されている場合は、タップに伴い、再生要否フラグを「オフ」に設定し、アイコン５２Ｐを白色に変更する。
【００８０】
または、ユーザは、あるオブジェクト６の音声をすべて纏めて設定したい場合は、そのオブジェクト６のタイムライン５２ＴＡの左方のテキストをタップする。
【００８１】
すると（＃８２６でＹｅｓ）、再生設定部１２５は、一括して、そのオブジェクト６に対応付けられているすべての音声それぞれの音声属性データ７３（そのオブジェクト６のオブジェクトコードが対応先コードとして設定されている音声属性データ７３）の再生要否フラグを「オン」または「オフ」に設定するとともに（＃８２７）、これらのアイコン５２Ｐがタイムライン画面制御部１０２によって有色または白色になるようにタイムライン画面５２を更新される（＃８２８）。
【００８２】
具体的には、タップが奇数回目であれば、再生要否フラグを「オン」に設定し、アイコン５２Ｐを有色にする。タップが偶数回目であれば、再生要否フラグを「オフ」に設定し、アイコン５２Ｐを無色に変更する。後述するステップ＃８３０〜＃８３１およびステップ＃８３３〜＃８３４においても、同様である。
【００８３】
または、ユーザは、あるグループの音声をすべて纏めて設定したい場合は、そのグループのタイムライン５２ＴＢの左方のテキストをタップする。
【００８４】
すると（＃８２９でＹｅｓ）、再生設定部１２５は、一括して、そのグループに対応付けられているすべての音声それぞれの音声属性データ７３（そのグループのグループコードが対応先コードとして設定されている音声属性データ７３）の再生要否フラグおよびそのグループのグループデータ７２の再生要否フラグを「オン」または「オフ」に設定するとともに（＃８３０）、これらの音声のアイコン５２Ｐが有色または白色になるようにタイムライン画面５２が更新される（＃８３１）。
【００８５】
または、ユーザは、あるグループの音声だけでなく、そのグループに属するすべてのオブジェクト６のすべての音声をも、一括して設定したい場合は、そのグループのタイムライン５２ＴＢの左方の、そのグループのグループ名をダブルタップする。
【００８６】
すると（＃８３２でＹｅｓ）、再生設定部１２５は、これらすべての音声それぞれの音声属性データ７３の再生要否フラグを「オン」または「オフ」に設定するとともに（＃８３３）、これらの音声のアイコン５２Ｐが有色または白色になるようにタイムライン画面５２が更新される（＃８３４）。
【００８７】
ユーザは、音声の再生を開始するには、ボタン５２ａをタップする。すると（＃８３５でＹｅｓ）、タイムラインに基づいて音声の再生が音声再生処理部１２６によって行われる（＃８３６）。これについては、後述する。
【００８８】
設定が完了したら、ユーザは、ボタン５２ｂをタップする。すると（＃８３７でＹｅｓ）、タイムライン画面５２がタイムライン画面制御部１０２によって閉じられる（＃８３８）。これにより、マッピング画面５１（図４参照）が最前面に表示される。
【００８９】
音声再生処理部１２６は、記録された音声を再生する処理を実行する。ユーザは、マッピング画面５１またはタイムライン画面５２を操作することによって、再生の指令を与えることができる。
【００９０】
マッピング画面５１に対してユーザが操作を行った場合は、音声再生処理部１２６は、図１２に示す手順で再生の処理を実行する。
【００９１】
ユーザは、マッピング領域５１Ａにおいて、オブジェクト６をタップすることによって選択し、ボタン５１ｓをタップすることによって、そのオブジェクト６の音声の再生を指令することができる。また、もう一度、そのオブジェクト６をタップすることによって、再生の終了を指令することができる。
【００９２】
音声再生処理部１２６は、そのオブジェクト６の音声の再生を指令されると（＃８６１でＹｅｓ）、そのオブジェクト６のオブジェクトコードを対応先コードとして示す音声属性データ７３を音声テーブルＴＬ３（図７参照）から検索する。検索したそれぞれの音声属性データ７３に示される音声ファイル７７をファイル記憶部１３１から読み出す。そして、録音時刻の早い順に、読み出した音声ファイル７７に基づいて音声を音声再生ユニット１０ｋによって再生させる（＃８６２）。
【００９３】
例えば、「楓」というオブジェクト６が選択されボタン５１ｓがタップされた場合は、音声再生処理部１２６は、「Ｍ００１」を対応先コードとして示す音声属性データ７３を検索する。図７の例によると、３つの音声属性データ７３が検索される。そして、音声再生処理部１２６は、録音時刻の早い順に、これらの音声属性データ７３に基づいて、３つの音声を再生させる。
【００９４】
または、指令された時点を基準に、録音時刻に従って再生させてもよい。すなわち、上述の３つの音声属性データ７３の例の場合は、ボタン５１ｓがタップされてから２分後に１つ目の音声を再生し、５分後に２つ目の音声を再生し、８分３０秒後に３つ目の音声を再生してもよい。
【００９５】
再生の指令を受けた際に、検索した音声属性データ７３の再生要否フラグをすべて「オン」に設定してもよい。以下に説明する、グループに対応付けられている音声を再生する場合、および、いずれのグループにもオブジェクト６にも対応付けられていない音声を再生する場合においても、同様である。
【００９６】
または、ユーザは、マッピング領域５１Ａにおいて、グループの枠の内側の、オブジェクト６が配置されていない部分をタップすることによって選択し、ボタン５１ｓをタップすることによって、そのグループの音声の再生を指令することができる。また、もう一度、その部分をタップすることによって、再生の終了を指令することができる。
【００９７】
音声再生処理部１２６は、そのグループの音声の再生を指令されると（＃８６３でＹｅｓ）、そのグループのグループコードを対応先コードとして示す音声属性データ７３を検索する。検索したそれぞれの音声属性データ７３に示される音声ファイル７７をファイル記憶部１３１から読み出す。そして、録音時刻の早い順にまたは録音時刻に従って、読み出した音声ファイル７７に基づいて音声を音声再生ユニット１０ｋによって再生させる（＃８６４）。
【００９８】
例えば、「Ｂグループ」というグループが選択されボタン５１ｓがタップされた場合は、音声再生処理部１２６は、「Ｇ００２」を対応先コードとして示す音声属性データ７３を検索する。図７の例によると、３つの音声属性データ７３が検索される。そして、音声再生処理部１２６は、録音時刻の早い順にまたは録音時刻に従って、これらの音声属性データ７３に基づいて、３つの音声を再生させる。
【００９９】
または、グループの選択後、ボタン５１ｓがダブルタップされた場合は（＃８６５でＹｅｓ）、音声再生処理部１２６は、そのグループの音声だけでなく、そのグループに現在属するすべてのオブジェクト６の音声をも、再生させてもよい（＃８６６）。このようなオブジェクト６は、オブジェクトデータ７１の現在グループコードによって検索することができる。
【０１００】
または、ユーザは、マッピング領域５１Ａにおいて、いずれのグループの枠の内側でもなく、いずれのオブジェクト６も配置されていない部分をタップし、ボタン５１ｓをタップすることによって、いずれのグループにもオブジェクト６にも対応付けられていない音声の再生を指令することができる。また、もう一度、その部分をタップすることによって、再生の終了を指令することができる。
【０１０１】
音声再生処理部１２６は、このような音声の再生を指令されると（＃８６７でＹｅｓ）、対応先コードが「Ｇ９９９」である音声属性データ７３を検索する。検索したそれぞれの音声属性データ７３に示される音声ファイル７７をファイル記憶部１３１から読み出す。そして、録音時刻の早い順にまたは録音時刻に従って、読み出した音声ファイル７７に基づいて音声を音声再生ユニット１０ｋによって再生させる（＃８６８）。
【０１０２】
ユーザは、タイムライン画面５２においてボタン５２ａをタップすることによって、再生を指示することができる。
【０１０３】
すると、音声再生処理部１２６は、音声を再生する処理を、図１３に示す手順で実行する。
【０１０４】
音声再生処理部１２６は、音声テーブルＴＬ３（図７参照）の、録音時刻が１番早い音声に注目する（＃８５１、＃８５２）。
【０１０５】
注目した音声の音声属性データ７３の再生要否フラグが「オン」であり（＃８５３でＹｅｓ）、かつ、この音声に対応付けられているグループ（ただし、この音声にオブジェクト６が対応付けられている場合は（＃８５４でＹｅｓ）、このオブジェクト６が属するグループ）のグループデータ７２（図６参照）の再生要否フラグが「オン」であれば、この音声を音声再生ユニット１０ｋに再生させる（＃８５５）。なお、再生のタイミングは、上述と同様に、録音時刻に従ってもよい。
【０１０６】
この音声に対応付けられているオブジェクト６の現在属するグループと録音時に属していたグループとが異なる場合は（＃８５６でＹｅｓ）、マッピング画面制御部１０１は、この音声が再生され始める前に、マッピング画面５１を最前面に表示させ、図１４のように、アニメーションの効果を適用して、録音時に属していたグループへオブジェクト６を移動させる（＃８５７）。そして、この音声の再生が終了したら、現在属するグループへ戻す。
【０１０７】
音声再生処理部１２６およびマッピング画面制御部１０１は、未だ注目していない音声が残っている場合は（＃８５８でＹｅｓ）、録音時刻が次に早い音声に注目し（＃８５９、＃８５２）、上記の処理を適宜、実行する。
【０１０８】
図１５および図１６は、記録再生装置１の全体的な処理の流れの例を説明するフローチャートである。
【０１０９】
次に、記録再生装置１におけるオブジェクトおよび音声の取扱いの全体的な処理の流れを、図１５および図１６のフローチャートを参照しながら説明する。
【０１１０】
記録再生装置１は、記録再生プログラム１Ｐに基づいて次の通り処理を実行する。記録再生プログラム１Ｐの起動後、メイン画面としてマッピング画面５１（図４参照）を表示する（図１５の＃１１）。
【０１１１】
ボタン５１ｐがタップされると（＃１２でＹｅｓ）、記録再生装置１は、オブジェクト６を追加する（＃１３）。すなわち、オブジェクト６をマッピング領域５１Ａに配置し、このオブジェクト６のオブジェクトデータ７１を生成してオブジェクトテーブルＴＬ１（図５参照）に格納する。
【０１１２】
または、複数のオブジェクト６の選択後、ボタン５１ｑがタップされると（＃１４でＹｅｓ）、記録再生装置１は、選択されたオブジェクト６を１つのグループにグループ化する（＃１５）。すなわち、マッピング領域５１Ａにおいて、これらのオブジェクト６を枠で囲むとともに、このグループのグループデータ７２を生成してグループテーブルＴＬ２（図６参照）に格納する。
【０１１３】
または、オブジェクト６またはグループなどの選択後、ボタン５１ｒがタップされると（＃１６でＹｅｓ）、記録再生装置１は、選択に応じて音声を録音する処理を実行する（＃１７）。この処理の手順は、前に図９で説明した通りである。
【０１１４】
または、オブジェクト６またはグループなどの選択後、ボタン５１ｓがタップされまたはダブルタップされると（＃１８でＹｅｓ）、記録再生装置１は、選択に応じて音声を再生する処理を実行する（＃１９）。この処理の手順は、前に図１２で説明した通りである。
【０１１５】
または、ボタン５１ｔがタッチされると（＃２０でＹｅｓ）、タイムライン画面５２（図１１参照）を表示する（図１６の＃２１）。この際に、対応するオブジェクト６が現在と録音時とで所属するグループが異なる音声のアイコン５２Ｐに、星のマークを付す。
【０１１６】
ここで、再生の要否の設定の操作が行われると（＃２２でＹｅｓ）、記録再生装置１は、これに応じて設定の処理を実行する（＃２３）。この処理の手順は、前に図１０で説明した通りである。
【０１１７】
ボタン５２ａがタップされると（＃２４でＹｅｓ）、記録再生装置１は、音声テーブルＴＬ３およびグループテーブルＴＬ２に基づいて音声の再生の処理を行う（＃２５）。この処理の手順は、前に図１３に示した通りである。
【０１１８】
ボタン５２ｂがタップされると（＃２６でＹｅｓ）、記録再生装置１は、タイムライン画面５２を閉じる（＃２７）。これにより、マッピング画面５１が最前面に表示される。
【０１１９】
記録再生プログラム１Ｐが閉じられるまでの間、記録再生装置１は、ステップ＃１２に戻って（＃２８でＮｏ）、上述の処理を適宜、実行する。
【０１２０】
本実施形態によると、ブレインストーミングなどにおいて出てきたオブジェクトおよびそれに関する音声を従来よりも取り扱いやすくすることができる。
【０１２１】
本実施形態では、１つのオブジェクト６が１つのグループにしか所属しなかったが、複数のグループに所属してもよい。
【０１２２】
本実施形態では、マッピング画面５１において、ユーザは、録音または再生のオブジェクト６またはグループなどを選択してからボタン５１ｒまたはボタン５１ｓをタップしたが、先にボタン５１ｒまたはボタン５１ｓをタップすることによって処理（録音モードか再生モードか）を選択し、その後、オブジェクト６またはグループなどを選択するように構成してもよい。
【０１２３】
その他、ミーティング支援システム３、記録再生装置１の全体または各部の構成、処理内容、処理順序、画面の構成、テーブルの構成などは、本発明の趣旨に沿って適宜変更することができる。
【符号の説明】
【０１２４】
１  記録再生装置（オブジェクト管理装置）
１０ｅ  タッチパネルディスプレイ（表示装置）
１０ｊ  録音ユニット（録音手段）
１０ｋ  音声再生ユニット（音声再生手段）
１２２  グループ作成部（グループ化手段）
１２３  音声付加部（録音手段）
１２４  所属グループ変更部（グループ変更手段）
１２６  音声再生処理部（音声再生手段）
１３１  ファイル記憶部（音声記憶手段）
２Ａ  プロジェクタ（表示装置）
６  オブジェクト
７７  音声ファイル
ＴＬ２  グループテーブル（第二のフラグ記憶手段）
ＴＬ３  音声テーブル（第一のフラグ記憶手段）
【図１】
2016009270.tif 000003
【図２】
2016009270.tif 000004
【図３】
2016009270.tif 000005
【図４】
2016009270.tif 000006
【図５】
2016009270.tif 000007
【図６】
2016009270.tif 000008
【図７】
2016009270.tif 000009
【図８】
2016009270.tif 000010
【図９】
2016009270.tif 000011
【図１０】
2016009270.tif 000012
【図１１】
2016009270.tif 000013
【図１２】
2016009270.tif 000014
【図１３】
2016009270.tif 000015
【図１４】
2016009270.tif 000016
【図１５】
2016009270.tif 000017
【図１６】
2016009270.tif 000018