(57)【要約】【課題】脳機能計測結果と被験者の動作映像との照合作業における参照用機器の制約を少なくして、ユーザにとっての利便性を向上させることが可能な脳機能計測用動画生成装置を提供する。【解決手段】この動画生成装置４（脳機能計測用動画生成装置）は、脳機能計測装置１により計測された被験者の脳機能に関する計測結果を示す時系列の計測結果データ（５１、５２）と、計測時の被験者のカメラ映像５４との入力を受け付ける入出力部４４と、計測結果の計測タイミングと、計測タイミングにおける被験者のカメラ映像５４とが同期された単一の画面映像データ６０となるように、計測結果データとカメラ映像５４とを編集する制御部４１と、制御部４１により編集された単一の画面映像データ６０を動画データ６１として記録する記憶部４２とを備える。【選択図】図１
2014233458.tif 000002
【特許請求の範囲】
【請求項１】
脳機能計測装置により計測された被験者の脳機能に関する計測結果を示す時系列の計測結果データと、計測時の被験者の第１映像との入力を受け付ける入力部と、
前記計測結果の計測タイミングと、前記計測タイミングにおける前記被験者の第１映像とが同期された単一の画面映像データとなるように、前記計測結果データと前記第１映像とを編集する映像処理部と、
前記映像処理部により編集された単一の前記画面映像データを動画データとして記録する映像記録部とを備える、脳機能計測用動画生成装置。
【請求項２】
前記入力部は、脳機能計測時のタスクに関する第２映像の入力をさらに受け付けるように構成され、
前記映像処理部は、前記計測結果の計測タイミングと、前記計測タイミングにおける前記第１映像および前記第２映像とが互いに対応した状態で単一の画面映像データとなるように、前記計測結果データ、前記第１映像および前記第２映像を編集するように構成されている、請求項１に記載の脳機能計測用動画生成装置。
【請求項３】
脳機能計測時のタスクに関する前記第２映像は、前記脳機能計測装置による計測中に被験者に対して呈示されるタスクの内容を表示するタスク表示画面の映像を含む、請求項２に記載の脳機能計測用動画生成装置。
【請求項４】
前記映像処理部は、前記計測結果の表示画像と、前記第１映像に含まれるとともに前記計測結果の表示画像の計測タイミングに時系列的に対応する１フレーム分の画像データとを画面内に並べて、単一のフレーム画像データとして編集するとともに、フレーム毎の前記フレーム画像データにより前記画面映像データを作成するように構成されている、請求項１〜３のいずれか１項に記載の脳機能計測用動画生成装置。
【請求項５】
前記映像処理部は、前記脳機能計測装置による計測に伴い前記入力部を介して取得される前記計測結果データと前記第１映像とを、リアルタイムで単一の画面映像データとなるように編集するように構成されている、請求項１〜４のいずれか１項に記載の脳機能計測用動画生成装置。
【請求項６】
前記映像処理部は、それぞれ予め取得された前記計測結果データと前記第１映像のデータとから、それぞれ時系列的に対応する画像データを抽出して単一の画面映像データとなるように編集するように構成されている、請求項１〜５のいずれか１項に記載の脳機能計測用動画生成装置。
【請求項７】
被験者の脳機能に関する生体信号を計測して時系列の計測結果データを生成する脳機能計測装置と、
計測時に被験者を撮像して第１映像を生成する撮像装置と、
前記計測結果データおよび前記第１映像を取得し、前記計測結果の計測タイミングと、前記計測タイミングにおける前記第１映像とが同期された単一の画面映像データとなるように、前記計測結果データと前記第１映像とを編集し、編集された単一の前記画面映像データを動画データとして記録する動画生成装置とを備える、脳機能計測用動画生成システム。
【請求項８】
計測中にタスクの内容を表示する第２映像を被験者に対して呈示するタスク呈示装置をさらに備え、
前記動画生成装置は、前記計測結果の計測タイミングと、前記計測タイミングにおける前記第１映像および前記第２映像とが互いに対応した状態で単一の画面映像データとなるように、前記計測結果データ、前記第１映像および前記第２映像を編集するように構成されている、請求項７に記載の脳機能計測用動画生成システム。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、脳機能計測用動画生成装置および脳機能計測用動画生成システムに関し、特に、脳機能計測装置を用いた計測結果の確認のための脳機能計測用動画生成装置および脳機能計測用動画生成システムに関する。
【背景技術】
【０００２】
従来、脳機能計測装置を用いた計測結果の確認のために脳機能計測と同時に計測中の被験者の映像などを撮像し、計測結果と被験者の動作とを照合することが行われている。（たとえば、特許文献１参照）。
【０００３】
上記特許文献１には、脳機能計測と同時にビデオカメラで計測中の被験者の映像を撮像し、脳機能計測の終了後に、得られた計測データと撮像映像とを同期させて表示する脳機能計測装置が開示されている。脳機能計測装置は、被験者の頭部に装着されたホルダに送光用端子および受光用端子を取り付け、脳内で反射（散乱）された計測光を受光用端子から受光する光計測装置である。光計測装置の計測データは、複数の測定点における検出信号（計測光強度）の時系列データである。脳機能計測は、通常、被験者に対する刺激呈示などを行うタスク期間と、刺激呈示を行わないレスト期間とを繰り返し、各期間における計測結果の相違に基づいて測定結果の解析が行われる。ここで、たとえば計測中に被験者に瞬間的な動きがあると、計測装置の端子位置が瞬間的にずれたり、端子が頭部から浮いたりすることによって、計測データにノイズが混入する。そのため、上記特許文献１の脳機能計測装置は、脳機能計測の終了後に、得られた計測データと映像データとを表示画面上で並べて、両データの時系列を同期させて再生するように構成されている。これにより、計測結果（計測データ）と被験者の動作（撮像映像）とを照合し、計測データ中に異常値が現われた場合に、その異常値が計測中の被験者の動作に起因するノイズであるのか、被験者の脳活動を反映した正常な計測値であるのかを検証することが可能となる。
【先行技術文献】
【特許文献】
【０００４】
【特許文献１】特開２００５−３２８８５５号公報
【発明の概要】
【発明が解決しようとする課題】
【０００５】
しかしながら、被験者の撮像映像は、動画データのファイル保存形式で保存されるため、汎用の参照用機器（情報処理装置（ＰＣ）など）でも再生可能である一方、脳機能の計測データは、脳機能計測装置のメーカー毎に異なる独自形式の専用のファイル保存形式で保存されるものであるため、上記特許文献１のように計測データと映像データとを同期させて参照するためには、参照用機器として、動画データおよび計測データの両方のファイル保存形式に対応した装置が必要となる。そのため、脳機能計測結果と被験者の動作映像との照合作業において両方のデータを参照するためには、データ参照用の専用ソフトウェア（プログラム）をインストールした情報処理装置や脳機能計測装置を用意する必要があるという制約があり、ユーザにとって利便性が低いという問題点がある。
【０００６】
この発明は、上記のような課題を解決するためになされたものであり、この発明の１つの目的は、脳機能計測結果と被験者の動作映像との照合作業における参照用機器の制約を少なくして、ユーザにとっての利便性を向上させることが可能な脳機能計測用動画生成装置および脳機能計測用動画生成システムを提供することである。
【課題を解決するための手段】
【０００７】
上記目的を達成するために、この発明の第１の局面における脳機能計測用動画生成装置は、脳機能計測装置により計測された被験者の脳機能に関する計測結果を示す時系列の計測結果データと、計測時の被験者の第１映像との入力を受け付ける入力部と、計測結果の計測タイミングと、その計測タイミングにおける被験者の第１映像とが同期された単一の画面映像データとなるように、計測結果データと第１映像とを編集する映像処理部と、映像処理部により編集された単一の画面映像データを動画データとして記録する映像記録部とを備える。なお、本発明における「同期」とは、時間的に厳密に一致する場合のみならず、実質的に同期している場合も含む概念であり、たとえばハードウェア構成および情報処理に起因する遅延などの不可避的に発生する同期のずれなどを許容する概念である。
【０００８】
この発明の第１の局面による脳機能計測用動画生成装置では、上記のように、計測結果の計測タイミングと、その計測タイミングにおける被験者の第１映像とが同期された単一の画面映像データとなるように、計測結果データと第１映像とを編集する映像処理部と、映像処理部により作成された単一の画面映像データを動画データとして記録する映像記録部とを設けることによって、計測結果データと被験者の第１映像とをまとめて単一の画面映像データにして、一般的に普及している動画データのファイル保存形式で記録することができる。この結果、従来それぞれのファイル保存形式のデータを読み込んで同期再生することにより参照する必要があった計測データと第１映像とを、専用のソフトウェアがインストールされていない汎用の情報処理装置や、他の参照用機器（たとえばタブレット型端末や、ＤＶＤプレーヤーなど、一般的な動画ファイル形式に対応した再生機器）でも動画データとして再生（参照）することができるようになる。これにより、脳機能計測結果と被験者の動作映像との照合作業における参照用機器の制約を少なくすることができるので、ユーザにとっての利便性を向上させることができる。また、参照用機器は単一の動画データだけを扱えばよいため、従来のように計測データと映像データとを個別に用意する場合と比較して、データの総容量を削減することもできる。
【０００９】
上記第１の局面による脳機能計測用動画生成装置において、好ましくは、入力部は、脳機能計測時のタスクに関する第２映像の入力をさらに受け付けるように構成され、映像処理部は、計測結果の計測タイミングと、その計測タイミングにおける第１映像および第２映像とが互いに対応した状態で単一の画面映像データとなるように、計測結果データ、第１映像および第２映像を編集するように構成されている。このように構成すれば、動画データを再生することによって、脳機能計測結果と被験者の動作映像だけでなく、現在の参照時点がタスク期間にあるのか、レスト期間にあるのかといったタスクの情報も同時に参照することができるので、脳機能計測結果と被験者の動作映像との照合作業における利便性をさらに向上させることができる。
【００１０】
この場合において、好ましくは、脳機能計測時のタスクに関する第２映像は、脳機能計測装置による計測中に被験者に対して呈示されるタスクの内容を表示するタスク表示画面の映像を含む。このように構成すれば、動画データを再生するだけで、脳機能計測結果と被験者の動作映像とに加えて、計測中にどのようなタスクをどのような態様で呈示していたのかといったタスクの内容についても同時に参照することができる。これにより、脳機能計測結果と被験者の動作映像との照合作業において、別途タスクの内容を確認する必要がないとともに、タスクの内容も含めたより綿密な照合作業を行うことができる。
【００１１】
上記第１の局面による脳機能計測用動画生成装置において、好ましくは、映像処理部は、計測結果の表示画像と、第１映像に含まれるとともに計測結果の表示画像の計測タイミングに時系列的に対応する１フレーム分の画像データとを画面内に並べて、単一のフレーム画像データとして編集するとともに、フレーム毎のフレーム画像データにより画面映像データを作成するように構成されている。このように構成すれば、映像データに含まれるフレーム単位で計測結果と第１映像とを同期させることができるとともに、フレーム毎のフレーム画像データにより容易に画面映像データを作成することができる。
【００１２】
上記第１の局面による脳機能計測用動画生成装置において、好ましくは、映像処理部は、脳機能計測装置による計測に伴い入力部を介して取得される計測結果データと第１映像とを、リアルタイムで単一の画面映像データとなるように編集するように構成されている。このように構成すれば、脳機能計測装置による計測と同時に動画データの記録を行うことができ、計測終了後に、速やかに動画データを用いた脳機能計測結果と被験者の動作映像との照合作業を行うことができる。
【００１３】
上記第１の局面による脳機能計測用動画生成装置において、好ましくは、映像処理部は、それぞれ予め取得された計測結果データと第１映像のデータとから、それぞれ時系列的に対応する画像データを抽出して単一の画面映像データとなるように編集するように構成されている。このように構成すれば、過去に実施された計測結果および第１映像のデータに対しても、単一の画面映像データとして編集して動画データとして記録することができる。そのため、たとえば脳機能計測を行う現場に脳機能計測用動画生成装置を用意することができない場合などでも、事後的に動画データを作成して、動画データを用いた脳機能計測結果と被験者の動作映像との照合作業を行うことができる。
【００１４】
この発明の第２の局面における脳機能計測用動画生成システムは、被験者の脳機能に関する生体信号を計測して時系列の計測結果データを生成する脳機能計測装置と、計測時に被験者を撮像して第１映像を生成する撮像装置と、計測結果データおよび第１映像を取得し、計測結果の計測タイミングと、その計測タイミングにおける第１映像とが同期された単一の画面映像データとなるように、計測結果データと第１映像とを編集し、編集された単一の画面映像データを動画データとして記録する動画生成装置とを備える。
【００１５】
この発明の第２の局面による脳機能計測用動画生成システムでは、上記のように、計測結果データおよび第１映像を取得し、計測結果の計測タイミングと、その計測タイミングにおける第１映像とが同期された単一の画面映像データとなるように、計測結果データと第１映像とを編集し、編集された単一の画面映像データを動画データとして記録する動画生成装置を設けることによって、計測結果データと被験者の第１映像とをまとめて単一の画面映像データにして、一般的に普及している動画データのファイル保存形式で記録することができる。この結果、従来それぞれのファイル保存形式のデータを読み込んで同期再生することにより参照する必要があった計測データと第１映像とを、専用のソフトウェアがインストールされていない汎用の情報処理装置や、他の参照用機器でも動画データとして再生（参照）することができるようになる。これにより、脳機能計測結果と被験者の動作映像との照合作業における参照用機器の制約を少なくすることができるので、ユーザにとっての利便性を向上させることができる。また、参照用機器は単一の動画データだけを扱えばよいため、従来のように計測データと映像データとを個別に用意する場合と比較して、データの総容量を削減することもできる。
【００１６】
上記第２の局面による脳機能計測用動画生成システムにおいて、好ましくは、計測中にタスクの内容を表示する第２映像を被験者に対して呈示するタスク呈示装置をさらに備え、動画生成装置は、計測結果の計測タイミングと、その計測タイミングにおける第１映像および第２映像とが互いに対応した状態で単一の画面映像データとなるように、計測結果データ、第１映像および第２映像を編集するように構成されている。このように構成すれば、動画データを再生するだけで、脳機能計測結果と被験者の動作映像に加えて、計測中に被験者に呈示されるタスクの内容についても同時に参照することができる。これにより、脳機能計測結果と被験者の動作映像との照合作業において、別途タスクの内容を確認する必要がないとともに、タスクの内容も含めたより綿密な照合作業を行うことができる。
【発明の効果】
【００１７】
本発明によれば、上記のように、脳機能計測結果と被験者の動作映像との照合作業における参照用機器の制約を少なくして、ユーザにとっての利便性を向上させることができる。
【図面の簡単な説明】
【００１８】
【図１】本発明の一実施形態による動画生成システムの全体構成を示したブロック図である。
【図２】動画生成システムが生成する画面映像データの一例を示した模式図である。
【図３】動画生成システムが生成する画面映像データの他の一例を示した模式図である。
【図４】脳機能計測装置の計測結果画面の一例を示した模式図である。
【図５】動画生成装置による動画生成処理の内容を説明するための模式図である。
【図６】動画生成装置による動画生成処理（オンライン処理）を説明するためのフロー図である。
【図７】動画生成装置による動画生成処理（オフライン処理）を説明するためのフロー図である。
【図８】プローブの配置位置を示す配置画像を示した模式図である。
【発明を実施するための形態】
【００１９】
以下、本発明を具体化した実施形態を図面に基づいて説明する。
【００２０】
まず、図１〜図５を参照して、本発明の一実施形態による脳機能計測用の動画生成システム１００の全体構成について説明する。動画生成システム１００は、本発明の「脳機能計測用動画生成システム」の一例である。
【００２１】
図１に示すように、本実施形態による脳機能計測用の動画生成システム１００は、脳機能計測装置１と、撮像装置２と、タスク呈示装置３と、動画生成装置４とを備えている。動画生成装置４は、本発明の「脳機能計測用動画生成装置」の一例である。
【００２２】
まず、脳機能計測装置１による脳機能計測の概要について説明する。脳機能計測装置１は、計測光を用いて被験者の脳機能に関する生体信号（計測光強度）を計測して時系列の計測結果データを生成する装置（光計測装置）である。脳機能計測装置１は、近赤外光の波長領域の計測光を被験体（被験者）の頭部表面上に配置した送光プローブ１ａから照射する。そして、被験体を透過（完全に透過すること）および／または反射（体内で反射されること）した計測光を頭部表面上に配置した受光プローブ１ｂに入射させて検出することにより、計測光の強度（受光量）を取得する。
【００２３】
ここで、脳活動を反映して、脳内のヘモグロビン量が活性化部位で増大すると、ヘモグロビンによる計測光の吸収量が増大する。このため、取得した計測光の強度に基づいて脳活動に伴うヘモグロビン量の変化を取得することが可能である。なお、ヘモグロビンは酸素と結合したオキシヘモグロビンと、酸素と結合していないデオキシヘモグロビンとに分けられ、互いに吸光特性が異なる。このため、吸光特性の相違を考慮した複数波長（たとえば、７８０ｎｍ、８０３ｎｍおよび８３０ｎｍの３波長）の計測光を用いて計測を行い、得られたそれぞれの波長の計測光の強度（受光量）に基づいて、各ヘモグロビン量およびヘモグロビン総量の算出が行われる。
【００２４】
この結果、受光プローブ１ｂに入射した計測光の強度（受光量）に基づいて脳活動に伴うヘモグロビン量の変化、すなわち血流量の変化や酸素代謝の活性化状態を非侵襲で取得することが可能である。光計測装置は、複数の送光プローブ１ａおよび複数の受光プローブ１ｂを用いて広い脳領域を複数点（計測チャンネル）で計測することにより、脳のどの領域がどのように活動しているかの２次元分布（マップ）を取得することが可能となっている。
【００２５】
図１に示すように、送光プローブ１ａおよび受光プローブ１ｂには、光ファイバケーブル（以下、光ファイバという）１ｃが接続されており、先端部で計測光を出射または入射させることが可能なように構成されている。送光プローブ１ａおよび受光プローブ１ｂは、頭部表面上の所定位置に固定するためのホルダ５に取り付けられる。使用者は、計測したい部位（前頭部、頭頂部、側頭部、後頭部など）に応じてプローブの配置を決定し、プローブをホルダ５に取り付ける。送光プローブ１ａと受光プローブ１ｂとは、ホルダ５において、行および列の各方向に交互に並ぶように配置される。これにより、隣接する送光プローブ１ａと受光プローブ１ｂとの間に計測チャンネル（計測点）が形成される。
【００２６】
脳機能計測は、通常、計測目的（計測対象）に応じたタスクを実施するタスク期間と、タスクを実施しないレスト期間とを交互に繰り返しながら行われる。両期間での計測結果を比較し、脳活動の変化（計測値の相違）から脳機能に関する知見を得ることができる。タスクは被験者に何らかの行動を行わせるものや、被験者に対して何らかの刺激を与えるものなど、計測目的に応じて様々である。タスクの呈示は、たとえば図２に示すように、課題内容を示す画像（「か」から始まる単語を言って下さい）を被験者に呈示することにより、行われる。一方、レスト期間では、図３に示すように、表示画面に注視点（十字マーク）のみを示した画像を呈示し、被験者の視線のみを固定するような手法が一般的に採用される。
【００２７】
次に、動画生成システム１００の装置構成について説明する。
【００２８】
図１に示すように、脳機能計測装置１は、光出力部１１と、光検出部１２と、計測制御部１３と、本体制御部１４と、通信部１５と、主記憶部１６とを備えている。また、脳機能計測装置１は、表示部１７および操作部１８と接続されているとともに、光ファイバ１ｃを介して送光プローブ１ａおよび受光プローブ１ｂと接続されている。
【００２９】
光出力部１１は、光ファイバ１ｃを介して送光プローブ１ａに計測光を出力するように構成されている。光出力部１１は、半導体レーザーを光源として備え、近赤外光の波長領域で複数波長（たとえば、７８０ｎｍ、８０３ｎｍおよび８３０ｎｍの３波長）の計測光を出力する。光検出部１２は、光電子増倍管を検出器として備え、受光プローブ１ｂに入射した計測光を光ファイバ１ｃを介して取得し、検出するように構成されている。
【００３０】
計測制御部１３は、本体制御部１４により設定される計測パラメータに従って、光出力部１１および光検出部１２の動作制御を行い、光出力部１１の点灯および消灯のタイミングを制御するとともに、光検出部１２から受光量信号を取得する。
【００３１】
本体制御部１４は、ＣＰＵやメモリなどから構成されるコンピュータであり、主記憶部１６に格納された各種プログラムを実行することにより、脳機能計測装置１の計測動作を制御するように構成されている。本体制御部１４は、通信部１５を介してタスク呈示装置３と制御信号のやりとりを行い、タスク呈示装置３のタスク呈示動作と、脳機能計測装置１の計測動作とを同期させる。
【００３２】
また、本体制御部１４は、データ解析用ソフトウェア（プログラム）を実行することにより、得られた計測データ５１を測定チャンネル毎の波形（測定値の時間変化）として表示するチャート表示や、各測定チャンネルの２次元分布（配置位置）に対応させて計測データ５１を表示するマップ表示の表示形式で、表示部１７への計測結果画面５３（図４参照）の映像（結果画面データ５２）を出力する。計測データ５１は、測定チャンネル毎の測定時間（測定タイミング）情報と計測値情報とを含む時系列データであり、専用のファイル保存形式により主記憶部１６に記録されるように構成されている。本実施形態では、本体制御部１４は、計測データ５１または結果画面データ５２を動画生成装置４にも出力する。なお、計測データ５１および結果画面データ５２は、共に、本発明の「計測結果データ」の一例である。
【００３３】
図４に示すように、計測結果画面５３は、測定結果表示領域５３ａの他に、画面上で操作入力を行うための各種アイコン領域５３ｂ、および、計測データのファイル名や、各種設定情報、測定値情報などの情報表示領域５３ｃを含む。図４では、測定結果表示領域５３ａに、測定チャンネル（１〜２４）毎の計測波形を示すチャート表示で計測結果が表示されている。マップ表示は、図３に示すように、２次元分布する各測定チャンネルの計測値を色相（図３では、ハッチングの濃淡で示している）によって表すものである。これらの測定結果表示領域５３ａの表示は、時々刻々の計測データの取得に伴って時間的に変化して表示される。
【００３４】
図１に示すように、通信部１５は、有線または無線の通信モジュールからなり、タスク呈示装置３を含む外部機器との間でデータ通信を行うことが可能である。主記憶部１６は、たとえばＨＤＤ（ハードディスクドライブ）からなり、本体制御部１４が実行する各種プログラムを格納するととともに、計測の結果得られた計測データを記憶することが可能である。表示部１７は、たとえば液晶モニタなどの表示装置であり、操作部１８は、たとえばキーボードおよびマウスなどからなる入力機器である。
【００３５】
撮像装置２は、脳機能計測装置１による計測時に被験者を撮像してカメラ映像５４を生成する機能を有する。撮像装置２は、たとえばデジタルビデオカメラであり、撮像部２１とマイク２２とを備えている。撮像装置２は、撮像した被験者のカメラ映像５４のデータ（映像および音声）を、動画生成装置４に出力するように構成されている。なお、カメラ映像５４は、本発明の「第１映像」の一例である。
【００３６】
タスク呈示装置３は、脳機能計測時のタスクに関するタスク映像５５を表示部３５に表示させることにより、計測中にタスクの内容を表示するタスク映像５５を被験者に呈示する機能を有する。具体的には、タスク映像５５は、脳機能計測装置１による計測中に被験者に対して呈示されるタスクの内容を表示するタスク表示画面の映像であり、図２に示すタスク（「か」から始まる単語を言って下さい）の画像と、注視点（十字マーク）のみを示したレストの画像とを、交互に表示する映像である。なお、タスク映像５５は、本発明の「第２映像」の一例である。
【００３７】
タスク呈示装置３は、情報処理装置（ＰＣ）により構成されており、図１に示すように、制御部３１、記憶部３２、通信部３３および入出力部（Ｉ／Ｏインターフェース）３４を備えているとともに、表示部３５および操作部３６と接続されている。
【００３８】
制御部３１は、ＣＰＵやメモリなどから構成され、記憶部３２にインストールされたタスク呈示制御用のソフトウェア（プログラム）を実行することにより、情報処理装置をタスク呈示装置３として機能するように制御する。これにより、制御部３１は、予め設定されたタスク期間とレスト期間とでタスク表示画面とレスト画面とが交互に表示されるタスク映像５５を、表示部３５に出力するように構成されている。本実施形態では、制御部３１は、表示部３５へ出力するタスク映像５５の映像データを、動画生成装置４にも出力するように構成されている。
【００３９】
記憶部３２は、たとえばＨＤＤからなり、制御部３１が実行するプログラムを格納するととともに、タスク映像５５を表示するための設定情報や画像データなどを記憶している。通信部３３は、有線または無線の通信モジュールからなり、制御部３１は、通信部３３を介して脳機能計測装置１と制御信号をやりとりする。表示部３５および操作部３６はそれぞれ、液晶モニタなどの表示装置およびキーボードやマウスなどからなる入力機器である。
【００４０】
動画生成装置４は、脳機能計測装置１の計測結果を示す時系列の計測結果データ、撮像装置２のカメラ映像５４のデータ、および、タスク呈示装置３のタスク映像５５のデータをそれぞれ取得して、計測結果の計測タイミングと、その計測タイミングにおけるカメラ映像５４およびタスク映像５５とが同期された単一の画面映像データ６０（図２参照）となるように、取得した各データを編集し、編集された単一の画面映像データ６０を動画データ６１として記録するように構成されている。なお、動画生成装置４は、脳機能計測装置１の計測結果を示す計測結果データとして、計測結果画面５３の映像データ（結果画面データ５２）と、脳機能計測装置１の計測データ５１（測定チャンネル毎の測定時間（測定タイミング）情報と計測値情報とを含む時系列データ）との両方を取り扱うことが可能である。
【００４１】
動画生成装置４は、情報処理装置（ＰＣ）により構成されており、制御部４１、記憶部４２、通信部４３および入出力部（Ｉ／Ｏインターフェース）４４を備えているとともに、表示部４５および操作部４６と接続されている。制御部４１は、ＣＰＵやメモリなどから構成され、記憶部４２にインストールされた各種ソフトウェア（プログラム）を実行することにより、情報処理装置を動画生成装置４として機能するように制御する。なお、制御部４１および記憶部４２は、それぞれ、本発明の「映像処理部」および「映像記録部」の一例である。また、入出力部４４は、本発明の「入力部」の一例である。
【００４２】
また、制御部４１は、動画生成（編集）用のソフトウェア（プログラム）を実行することにより、計測結果の結果画面データ５２、撮像装置２のカメラ映像５４のデータ、および、タスク呈示装置３のタスク映像５５のデータを編集する映像処理部として機能する。すなわち、制御部４１は、計測結果の計測タイミングと、その計測タイミングにおけるカメラ映像５４およびタスク映像５５とが互いに対応（同期）した状態で単一の画面映像データ６０となるように、結果画面データ５２、カメラ映像５４およびタスク映像５５の各データを編集するように構成されている。計測データ５１を扱う場合には、制御部４１は計測データ５１から結果画面データ５２を生成（再生）して、結果画面データ５２を編集する。
【００４３】
ここで、図５に示すように、計測結果の結果画面データ５２、撮像装置２のカメラ映像５４のデータ、および、タスク呈示装置３のタスク映像５５のデータの各映像データは、１秒あたり所定のフレーム数（フレームレート、たとえば３０フレーム／秒など）の画像（静止画）データ（５２ａ、５４ａおよび５５ａ）と、フレーム毎の時間情報（図示せず）とを含んでいる。画像データ（５２ａ、５４ａおよび５５ａ）は、それぞれ所定の解像度（たとえば、６４０×４８０ピクセルなど）で、所定の画素情報（２バイトのカラーなど）を有している。また、音声を含むカメラ映像５４のデータは、さらに音声データ５４ｂを含んでいる。したがって、動画生成装置４には、各映像データを構成する画像データ（５２ａ、５４ａおよび５５ａ）が、それぞれ１秒につきフレームレートの数だけ入力される。
【００４４】
制御部４１は、結果画面データ５２の映像と、カメラ映像５４およびタスク映像５５とについて、計測結果の計測タイミングに時系列的に対応する１フレーム分の画像データ（５２ａ、５４ａおよび５５ａ）を画面内に並べて、単一のフレーム画像データ６２として編集するように構成されている。制御部４１は、単一のフレーム画像データ６２を、計測時間分の映像データに含まれるフレーム数分だけ作成し、これらのフレーム毎のフレーム画像データ６２により、単一の画面映像データ６０を作成するように構成されている。
【００４５】
映像データの編集は、単一の画面内に結果画面データ５２と、カメラ映像５４と、タスク映像５５との各画像が並ぶように、画像データ（５２ａ、５４ａおよび５５ａ）のサイズ調整（縮小または拡大）、画面内の所定領域のトリミング（切り抜き）、および、所定位置への配置などの処理を含む。具体的には、ある計測タイミングにおいて、結果画面データ５２として、図４に示した計測結果画面５３の画像データ５２ａ（１フレーム分）が得られたとする。制御部４１は、計測結果画面５３の画像データ５２ａから、測定結果表示領域５３ａ（図４参照）をトリミングし、予め設定された配置位置に設定寸法で納まるように、サイズ調整を行う。これにより、図２に示す画面映像データ６０（フレーム画像データ６２）の例では、画面内の左側領域に、測定結果表示領域５３ａの画像（画像データ５２ａ）が大きく表示される。
【００４６】
同様に、制御部４１は、カメラ映像５４およびタスク映像５５の対応する画像データ５４ａおよび５５ａ（１フレーム分）について、予め設定された配置位置に設定された寸法で納まるように、サイズ調整を行う。これにより、図２に示す画面映像データ６０（フレーム画像データ６２）の例では、カメラ映像５４の画像（画像データ５４ａ）が画面内の右上領域に、タスク映像５５の画像（画像データ５５ａ）が画面内の右下領域に、それぞれ測定結果表示領域５３ａより小さい略同サイズで表示される。また、カメラ映像５４の音声データ５４ｂは、そのまま画面映像データ６０の音声データ（図示せず）となる。このようにして、フレーム画像データ６２が生成される。なお、画面映像データ６０における各映像の画面内での配置やサイズは任意であり、ユーザの操作入力によって設定することが可能となっている。
【００４７】
制御部４１は、脳機能計測装置１による計測に伴い入出力部４４を介して取得される計測結果データ（結果画面データ５２）とカメラ映像５４およびタスク映像５５とを、リアルタイム（オンライン）で単一の画面映像データ６０となるように編集するように構成されている。また、制御部４１は、それぞれ予め取得された計測結果データ（計測データ５１）とカメラ映像５４およびタスク映像５５のデータとから、それぞれ時系列的に対応するフレームの画像データ（５２ａ、５４ａおよび５５ａ）を事後的に抽出して、オフライン（非リアルタイム）で単一の画面映像データ６０となるように編集することも可能なように構成されている。
【００４８】
図１に示すように、記憶部４２は、たとえばＨＤＤからなり、制御部４１が実行するプログラムや、制御部４１が各映像データを編集して画面映像データ６０を作成するための設定情報などを記憶している。また、記憶部４２は、制御部４１により編集された単一の画面映像データ６０を動画データ６１として記録（保存）するように構成されている。動画データ６１は、汎用の再生機器によって再生可能なファイル保存形式（たとえば、ＡＶＩ形式やＭＰ４形式など）で記録される。この動画データ６１を通信部４３を介して送信したり、図示しないリーダ／ライタにより記録した情報記録媒体（ＤＶＤなど）の形態で提供したりすることにより、他の参照用機器（たとえばＰＣ、タブレット型端末、ＤＶＤプレーヤーなど、一般的な動画ファイル形式に対応した再生機器）で画面映像データ６０を参照することが可能となる。通信部４３は、有線または無線の通信モジュールからなり、外部機器との間でデータ通信を行うことが可能である。制御部４１は、通信部４３を介して計測データ５１を取得することも可能である。
【００４９】
入出力部４４は、脳機能計測装置１により計測された被験者の脳機能に関する計測結果を示す時系列の計測結果データ（結果画面データ５２または計測データ５１）と、計測時の被験者のカメラ映像５４のデータと、タスク呈示装置３のタスク映像５５のデータと、の入力をそれぞれ受け付ける機能を有する。入出力部４４は、たとえばＵＳＢ（Ｕｎｉｖｅｒｓａｌ  Ｓｅｒｉａｌ  Ｂｕｓ）やＩＥＥＥ１３９４などのインターフェースである。表示部４５および操作部４６はそれぞれ、液晶モニタなどの表示装置およびキーボードやマウスなどからなる入力機器である。
【００５０】
以上により、本実施形態による動画生成システム１００が構成されている。本実施形態では、動画生成システム１００は、入出力部４４を介して取得される計測結果データ（結果画面データ５２）とカメラ映像５４およびタスク映像５５とを、リアルタイム（オンライン）で単一の画面映像データ６０となるように編集するオンライン処理と、予め取得された計測結果データ（計測データ５１）とカメラ映像５４およびタスク映像５５のデータとを、それぞれオフライン（非リアルタイム）で単一の画面映像データ６０となるように編集するオフライン処理との双方により、画面映像データ６０の動画データ６１を作成することが可能である。
【００５１】
次に、図２、図３、図６および図７を参照して、オンライン処理およびオフライン処理のそれぞれでの動画生成装置４の動画生成処理動作の概略を説明する。
【００５２】
脳機能計測の際には、撮像装置２はカメラ映像５４のデータを動画生成装置４に常時出力する。脳機能計測装置１とタスク呈示装置３とは、測定開始および測定終了のトリガ信号（制御信号）をやりとりして、測定動作の開始および終了タイミングを同期させる。測定中は、タスク呈示装置３からのタスク期間およびレスト期間の各開始点を示すトリガ信号を脳機能計測装置１が取得して、測定データ中に時刻情報を記録する。脳機能計測装置１の計測結果画面５３の映像データとタスク呈示装置３のタスク映像５５のデータとは、互いに同期した状態で計測開始と同時に動画生成装置４に出力される。脳機能計測装置１とタスク呈示装置３との協働による脳機能計測の動作処理自体は公知であるので、説明を省略する。
【００５３】
まず、オンライン処理の動作について説明する。図６に示すように、ステップＳ１において、動画データ６１の記録のためのパラメータ設定が行われる。制御部４１は、記憶部４２に記憶された設定情報を読み込み、作成する画面映像データ６０の解像度、画素情報、フレームレート、画面映像データ６０における各映像（結果画面データ５２、カメラ映像５４およびタスク映像５５）の配置位置情報、保存する動画データ６１のファイル名などを設定する。また、制御部４１は、計測データの通信条件（入力ポート番号やＩＰアドレスなど）、計測データの計測条件（サンプリング間隔など）などについても設定する。
【００５４】
続いて、制御部４１は、ステップＳ２において、入出力部４４を介したデータ受信を待機するとともに、ステップＳ３において、データを受信したか否かを判断する。データを受信できない場合、制御部４１は、ステップＳ２に戻りデータ受信を待ち受ける。ユーザの操作に応じて脳機能計測装置１とタスク呈示装置３とが同期して計測を開始すると、計測結果画面５３の映像（結果画面データ５２）およびタスク映像５５のデータが同時に受信され、処理がステップＳ４に進む。
【００５５】
ステップＳ４では、制御部４１は、結果画面データ５２、カメラ映像５４およびタスク映像５５のデータのそれぞれについて、今回受信したフレームの時間（時刻）情報が一致していることをチェックする。これにより、測定データの測定タイミングに同期した結果画面データ５２、カメラ映像５４およびタスク映像５５のそれぞれの画像データ（５２ａ、５４ａおよび５５ａ）が得られたことが確認される。ステップＳ５では、制御部４１は、今回受信した各データについての受信バイト長をチェックする。すなわち、制御部４１は、受信したフレーム画像データの大きさ（バイト長）を確認し、１フレーム分の画像データ（５２ａ、５４ａおよび５５ａ）が得られていることを確認する。
【００５６】
ステップＳ６では、制御部４１は、ステップＳ４およびＳ５のチェック結果から、同一時間のフレーム（同一の測定タイミング）の画像データ（５２ａ、５４ａおよび５５ａ）が結果画面データ５２、カメラ映像５４およびタスク映像５５のそれぞれについて得られたか否かを確認する。ハードウェア構成や情報処理に起因して発生する遅延などによりデータが不足する場合、制御部４１は、ステップＳ３に戻り、必要なデータが揃うまでステップＳ３〜Ｓ６を繰り返す。
【００５７】
必要なデータが揃っている場合、ステップＳ７において、制御部４１は、結果画面データ５２、カメラ映像５４およびタスク映像５５のそれぞれの画像データ（５２ａ、５４ａおよび５５ａ）を編集して、１フレーム分の単一の画面映像データ６０を作成する。すなわち、制御部４１は、各画像データ（５２ａ、５４ａおよび５５ａ）のサイズ調整（縮小または拡大）、画面内の所定領域のトリミング（切り抜き）、および、所定位置へ配置などの処理を行い、１画面のフレーム画像データ６２を作成する。そして、ステップＳ８において、制御部４１は、作成した１フレーム分の単一のフレーム画像データ６２をメモリ上または記憶部４２に保存する。なお、結果画面データ５２における計測結果画面５３がチャート表示の場合には、図２のフレーム画像データ６２に示す表示（チャート表示）となり、計測結果画面５３がマップ表示の場合には、図３のフレーム画像データ６２に示す表示（マップ表示）となる。同様に、タスク映像５５の画像データ５５ａがタスクの表示映像の場合、図２に示す表示（タスク表示画面）となり、タスク映像５５の画像データ５５ａがレストの表示映像の場合、図３に示すフレーム画像データ６２の表示（レスト画面）となる。
【００５８】
続いて、制御部４１は、ステップＳ９において、脳機能計測が終了したか否かを判断する。脳機能計測が終了しない場合、ステップＳ２〜Ｓ８が繰り返されることにより、次の１フレーム分の画像データ（５２ａ、５４ａおよび５５ａ）が取得され、１フレーム分の単一のフレーム画像データ６２が作成される。脳機能計測が終了すると、計測結果画面５３の映像およびタスク映像５５のデータの出力が停止され、これに基づいて制御部４１は計測終了を判断する。その場合、ステップＳ１０において、制御部４１は、作成した１フレーム分の単一のフレーム画像データ６２の集合（計測時間（秒）×フレームレート分の数のフレーム画像データ６２）からなる画面映像データ６０を、汎用の動画ファイル保存形式で１つの動画データ６１として記憶部４２に記録する。これにより、オンライン（リアルタイム）での動画データ作成が終了する。
【００５９】
次に、オフライン処理の動作について説明する。オフライン処理では、オンライン処理で結果画面データ５２（計測結果画面５３の映像データ）を動画データ化していないため、脳機能計測装置１の計測データ５１と、カメラ映像５４およびタスク映像５５のそれぞれの映像データとから、単一の画面映像データ６０を作成して動画データ６１として記録する。
【００６０】
図７に示すように、制御部４１は、ステップＳ２１において、ユーザの操作を受け付け、予め記憶部４２に記憶されたファイルの選択を受け付ける。ここでは、カメラ映像５４およびタスク映像５５の映像データ（動画ファイル）と、脳機能計測装置１の計測データ（データファイル）とが選択される。続いて、制御部４１は、ステップＳ２２において、動画データ６１の記録のためのパラメータ設定を行う。パラメータ設定の内容は上記図６のステップＳ１と同様である。ステップＳ２３において、制御部４１は、選択されたファイルのデータ属性（映像データまたは計測データのファイルの種別）を読み込む。脳機能計測装置１の計測データについては、計測データのファイル形式に対応するプログラムを実行し、計測結果画面５３の映像（結果画面データ５２）を生成して、１フレーム分の画像データ（５２ａ、５４ａおよび５５ａ）を抽出する。また、映像データ（動画ファイル）については、動画編集用のプログラムによって、１フレーム分の画像データ（５２ａ、５４ａおよび５５ａ）を抽出することになる。
【００６１】
ステップＳ２４では、制御部４１は、選択された映像データ（動画ファイル）から１フレーム分の画像データ（５２ａ、５４ａおよび５５ａ）を読み込む。また、ステップＳ２５では、制御部４１は、選択された計測データ５１のファイルから、ステップＳ２４で読み込んだフレームと同一時刻の計測データを読み込む。
【００６２】
続いて、ステップＳ２６において、制御部４１は、計測データ５１から計測結果画面５３の測定結果表示領域５３ａの映像を生成して編集するとともに、カメラ映像５４およびタスク映像５５のそれぞれのフレーム画像データを編集して、１フレーム分の画面映像データ６０を作成する。編集内容は、上記図６のステップＳ７と同様である。そして、ステップＳ２７において、制御部４１は、作成した１フレーム分の単一のフレーム画像データ６２をメモリ上または記憶部４２に保存する。
【００６３】
続いて、制御部４１は、ステップＳ２８において、選択したファイル（映像データ）の総フレーム数分のフレーム画像データ６２の作成および保存が完了したか否かを判断する。ステップＳ２４〜Ｓ２８を繰り返すことにより、画面映像データ６０が作成される。画面映像データ６０の作成および保存が完了すると、ステップＳ２９において、制御部４１は、作成した画面映像データ６０を、汎用の動画ファイル保存形式で１つの動画データ６１として記憶部４２に記録する。これにより、オフラインでの動画データ作成が終了する。
【００６４】
本実施形態では、上記のように、計測結果の計測タイミングと、その計測タイミングにおける被験者のカメラ映像５４とが同期された単一の画面映像データ６０となるように、計測結果データとカメラ映像５４とを編集する制御部４１と、制御部４１により作成された単一の画面映像データ６０を動画データ６１として記録する記憶部４２とを設けることによって、計測結果を示す時系列の計測結果データ（計測データ５１または結果画面データ５２）と被験者のカメラ映像５４とをまとめて単一の画面映像データ６０にして、一般的に普及している動画データ６１のファイル保存形式で記録することができる。この結果、計測結果とカメラ映像５４とを、専用のソフトウェアがインストールされていない汎用の情報処理装置や、他の参照用機器でも動画データ６１として再生（参照）することができるようになる。これにより、脳機能計測結果と被験者の動作映像との照合作業における参照用機器の制約を少なくすることができるので、ユーザにとっての利便性を向上させることができる。また、参照用機器は単一の動画データ６１だけを扱えばよいため、従来のように計測データと映像データとを個別に用意する場合と比較して、データの総容量を削減することもできる。
【００６５】
また、本実施形態では、上記のように、計測結果の計測タイミングと、その計測タイミングにおけるカメラ映像５４およびタスク映像５５とが互いに対応した状態で単一の画面映像データ６０となるように、計測結果データ、カメラ映像５４およびタスク映像５５を編集するように制御部４１を構成する。これにより、動画データ６１を再生するだけで、脳機能計測結果と被験者の動作映像だけでなく、現在の参照時点がタスク期間にあるのか、レスト期間にあるのかといったタスクの情報も同時に参照することができるので、脳機能計測結果と被験者の動作映像との照合作業における利便性をさらに向上させることができる。
【００６６】
また、本実施形態では、上記のように、脳機能計測時のタスクに関するタスク映像５５を、脳機能計測装置１による計測中に被験者に対して呈示されるタスクの内容を表示するタスク表示画面の映像とする。これにより、動画データ６１を再生すれば、脳機能計測結果と被験者の動作映像とに加えて、タスクの内容についても同時に参照することができるので、脳機能計測結果と被験者の動作映像との照合作業において、別途タスクの内容を確認する必要がないとともに、タスクの内容も含めたより綿密な照合作業を行うことができる。
【００６７】
また、本実施形態では、上記のように、制御部４１を、計測結果画面５３の画像データ５２ａ（結果画面データ５２）と、カメラ映像５４に含まれるとともに計測結果画面５３の画像データ５２ａの計測タイミング（フレーム）に時系列的に対応する１フレーム分の画像データ５４ａとを画面内に並べて、単一のフレーム画像データ６２として編集するとともに、フレーム毎のフレーム画像データ６２により画面映像データ６０を作成するように構成する。これにより、映像データに含まれるフレーム単位で結果画面データ５２とカメラ映像５４とを同期させることができ、容易に画面映像データ６０を作成することができる。
【００６８】
また、本実施形態では、上記のように、制御部４１を、脳機能計測装置１による計測に伴い入出力部４４を介して取得される計測結果データとカメラ映像５４とを、リアルタイムで単一の画面映像データ６０となるように編集するように構成する。これにより、脳機能計測装置１による計測と同時に動画データ６１の記録を行うことができ、計測終了後に、速やかに動画データ６１を用いた脳機能計測結果と被験者の動作映像との照合作業を行うことができる。
【００６９】
また、本実施形態では、上記のように、制御部４１を、それぞれ予め取得された計測データ５１とカメラ映像５４のデータとから、それぞれ時系列的に対応する画像データ５２ａと５４ａとを抽出して単一の画面映像データ６０となるように編集するように構成する。これにより、たとえば脳機能計測を行う現場に動画生成装置４を用意することができない場合などでも、事後的に動画データ６１を作成して、動画データ６１を用いた脳機能計測結果と被験者の動作映像との照合作業を行うことができる。
【００７０】
なお、今回開示された実施形態は、すべての点で例示であって制限的なものではないと考えられるべきである。本発明の範囲は、上記した実施形態の説明ではなく特許請求の範囲によって示され、さらに特許請求の範囲と均等の意味および範囲内でのすべての変更が含まれる。
【００７１】
たとえば、上記実施形態では、動画生成装置４を情報処理装置（ＰＣ）により構成した例を示したが、本発明はこれに限られない。本発明では、脳機能計測装置１により動画生成装置を構成してもよい。すなわち、脳機能計測装置１の主記憶部１６に動画生成装置として機能させるためのプログラムをインストールして、本体制御部１４にプログラムを実行させることにより、脳機能計測装置１を動画生成装置として機能させるように構成してもよい。この場合、動画生成装置４としての情報処理装置を別途設ける必要がなく、動画生成装置としても機能する脳機能計測装置１、撮像装置２およびタスク呈示装置３によって動画生成システム１００を構成することができる。また、同様にして、タスク呈示装置３により動画生成装置を構成してもよい。
【００７２】
また、上記実施形態では、図２や図３に示したように、結果画面データ５２（測定結果表示領域５３ａ）と、カメラ映像５４と、タスク映像５５との各画像をそれぞれ１つずつ並べて、単一の画面映像データ６０（フレーム画像データ６２）を構成した例を示したが、本発明はこれに限られない。本発明では、たとえば結果画面データ５２（測定結果表示領域５３ａ）と、カメラ映像５４との２つの画像だけで、単一の画面映像データを構成してもよい。また、たとえば撮像装置を複数台用いて、複数の方向から被験者を撮像したカメラ映像をそれぞれ取得し、結果画面データおよびタスク映像に加えて、これらの複数のカメラ映像を単一の画面映像データに含めてもよい。
【００７３】
この他、結果画面データ５２、カメラ映像５４およびタスク映像５５以外の映像または画像を単一の画面映像データに含めてもよい。たとえば、図８に示すように、被験者の頭部（ホルダ５）に対する送光プローブ１ａおよび受光プローブ１ｂの配置位置を示す配置画像１５６を単一の画面映像データに含めてもよい。配置画像１５６において、番号の付された円環状のマークは、送光点（送光プローブ１ａ）を示し、番号の付された円状のマークは、受光点（受光プローブ１ｂ）を示している。そして、送光点および受光点の間をつなぐ柱状のマークが計測チャンネルＣを表す。図８の配置画像１５６では、それぞれ８個の送光プローブ１ａおよび受光プローブ１ｂによって２４個の計測チャンネルＣが形成されており、これが被験者の頭頂部を中心に全体として矩形状に配置されていることが表示されている。配置画像１５６は、プローブの配置位置に合わせて表示される。たとえば左右の側頭部にそれぞれプローブが配置される場合、配置画像１５６ではプローブ配置位置を示す表示領域が左右の側頭部付近に２カ所表示されることになる。このように配置画像１５６を画面映像データに含めることにより、結果画面データ５２の表示がどの部位の計測結果を示しているのかを、画面映像データ上で一見して把握可能とすることができる。
【００７４】
また、上記実施形態では、光計測装置からなる脳機能計測装置１を用いる例を示したが、本発明はこれに限られない。脳機能計測装置としては、光計測装置以外に脳波計を用いてもよい。脳波計も被験者の頭部に電極を取り付けるため、計測中に被験者に瞬間的な動きがあると、計測データにノイズが混入するため、計測結果（計測データ）と被験者の動作（撮像映像）とを照合する必要がある。そのため、脳機能計測装置として脳波計を用いる場合にも、脳機能計測結果と被験者の動作映像との照合作業における参照用機器の制約を少なくすることができるので、ユーザにとっての利便性を向上させることができる。
【００７５】
また、上記実施形態では、タスク映像５５の一例として、発語を指示する映像（「か」から始まる単語を言って下さい）を表示させる例について説明したが、本発明はこれに限られない。タスクは計測の目的に応じて様々なものが設定されるので、タスク映像として表示されるタスクの内容は、どのようなものであってもよい。
【００７６】
また、上記実施形態では、映像データや結果画面データをリアルタイム（オンライン）で単一の画面映像データ６０となるように編集するオンライン処理と、予め取得された映像データや計測データをオフライン（非リアルタイム）で単一の画面映像データ６０となるように編集するオフライン処理との両方が可能なように、動画生成装置４を構成した例を示したが、本発明はこれに限られない。本発明では、オンライン処理およびオフライン処理のいずれか一方のみを行うように、動画生成装置４を構成してもよい。
【００７７】
また、上記実施形態では、結果画面データ５２、カメラ映像５４およびタスク映像５５の各映像データの入力を、ＵＳＢやＩＥＥＥ１３９４などのインターフェースを備えた入出力部４４により受け付けるように構成した例を示したが、本発明はこれに限られない。たとえば、各映像データの入力を、通信部４３を介した無線通信などにより受け付けてもよい。また、入出力部４４は、ＵＳＢやＩＥＥＥ１３９４以外でも、ＨＤＭＩ（登録商標）などの他のインターフェースであってもよい。
【００７８】
また、上記実施形態では、脳機能計測装置１とタスク呈示装置３との間で制御信号のやりとりを行い、同期して動作するように構成した例を示したが、本発明はこれに限られない。本発明では、脳機能計測装置１およびタスク呈示装置３に加えて撮像装置２や動画生成装置４も制御信号（トリガ信号）のやりとりを行うように構成してもよい。この場合、動画データ６１の作成のための測定タイミングの同期を容易で、かつ高精度に行うことができる。
【符号の説明】
【００７９】
１  脳機能計測装置
２  撮像装置
３  タスク呈示装置
４  動画生成装置（脳機能計測用動画生成装置）
４１  制御部（映像処理部）
４２  記憶部（映像記録部）
４４  入出力部（入力部）
５１  計測データ（計測結果データ）
５２  結果画面データ（計測結果データ）
５４  カメラ映像（第１映像）
５５  タスク映像（第２映像）
６０  画面映像データ
６１  動画データ
６２  フレーム画像データ
１００  動画生成システム（脳機能計測用動画生成システム）
【図１】
2014233458.tif 000003
【図２】
2014233458.tif 000004
【図３】
2014233458.tif 000005
【図４】
2014233458.tif 000006
【図５】
2014233458.tif 000007
【図６】
2014233458.tif 000008
【図７】
2014233458.tif 000009
【図８】
2014233458.tif 000010