(57)【要約】【課題】ユーザがマインドフルネス状態になることに熟達しているかを判定する。【解決手段】  本開示の一態様に係る生体計測方法は、ユーザの頭部に照射光を照射することによって生じた前記頭部からの反射光のうち、前記ユーザの脳内を伝播した光の成分を検出することによって生成され、前記脳の活動状態を示す少なくとも１つの脳活動信号を取得することと、前記少なくとも１つの脳活動信号に基づき、マインドフルネス状態になることについての前記ユーザの熟達度を示す信号を生成して出力することと、を含む。【選択図】図１Ａ
2020103879.tif 000002
【特許請求の範囲】
【請求項１】
ユーザの頭部に照射光を照射することによって生じた前記頭部からの反射光のうち、前記ユーザの脳内を伝播した光の成分を検出することによって生成され、前記脳の活動状態を示す少なくとも１つの脳活動信号を取得することと、
前記少なくとも１つの脳活動信号に基づき、マインドフルネス状態になることについての前記ユーザの熟達度を示す信号を生成して出力することと、
を含む、生体計測方法。
【請求項２】
前記少なくとも１つの脳活動信号を取得することは、音声および映像からなる群から選択される少なくとも１つを含む刺激が前記ユーザに与えられている状態で行われる、
請求項１に記載の生体計測方法。
【請求項３】
前記音声および前記映像からなる群から選択される前記少なくとも１つは、前記ユーザを前記マインドフルネス状態に誘導する、
請求項２に記載の生体計測方法。
【請求項４】
前記照射光は光パルスであり、
前記反射光は反射光パルスであり、
前記光の成分は、前記反射光パルスの光強度が減少を開始してから減少が終了するまでの期間の少なくとも一部において検出される、
請求項１から３のいずれかに記載の生体計測方法。
【請求項５】
前記少なくとも１つの脳活動信号は、
前記ユーザに前記刺激が与えられる直前の第１の期間、
前記ユーザに前記刺激が与えられている第２の期間、
前記ユーザに前記刺激が与えられた直後の第３の期間
のうち、前記第２の期間を含む少なくとも２つの期間のそれぞれについて取得される、
請求項２から４のいずれかに記載の生体計測方法。
【請求項６】
前記少なくとも１つの脳活動信号は、複数の脳活動信号を含み、
前記複数の脳活動信号は、
前記ユーザに前記刺激が与えられる直前の第１の期間、
前記ユーザに前記刺激が与えられている第２の期間、および
前記ユーザに前記刺激が与えられた直後の第３の期間
のそれぞれにおいて、前記光の成分を複数回検出することによって取得される、
請求項２から４のいずれかに記載の生体計測方法。
【請求項７】
前記熟達度を示す前記信号は、前記複数の脳活動信号のばらつき度合に基づいて生成される、
請求項６に記載の生体計測方法。
【請求項８】
前記少なくとも１つの脳活動信号は、前記脳内の血液中の脱酸素化ヘモグロビンの濃度に依存する、
請求項１から７のいずれかに記載の生体計測方法。
【請求項９】
前記照射光は、８０５ｎｍよりも長い第１の波長の第１の光パルス、および８０５ｎｍよりも短い第２の波長の第２の光パルスを含み、
前記反射光は、前記頭部に前記第１の光パルスを照射することによって生じた第１の反射光パルス、および前記頭部に前記第２の光パルスを照射することによって生じた第２の反射光パルスを含み、
前記少なくとも１つの脳活動信号は、
前記第１の反射光パルスのうち、前記第１の反射光パルスの光強度が減少を開始してから減少が終了するまでの期間に含まれる成分の少なくとも一部を検出することによって生成された第１の信号と、
前記第２の反射光パルスのうち、前記第２の反射光パルスの光強度が減少を開始してから減少が終了するまでの期間に含まれる成分の少なくとも一部を検出することによって生成された第２の信号と、
を用いた演算によって生成される、
請求項１から８のいずれかに記載の生体計測方法。
【請求項１０】
複数のユーザのコンピュータから、請求項１から９のいずれかに記載の生体計測方法によって生成された前記複数のユーザの各々の前記熟達度を示す信号と、前記複数のユーザの各々の位置情報とを、ネットワークを介して取得することと、
前記位置情報に基づき、前記複数のユーザの各々の前記熟達度と地図とを関連付けた地図データを生成して出力することと、
を含む、地図データ生成方法。
【請求項１１】
刺激装置と、光源と、光検出器とを備える生体計測装置に搭載されるコンピュータによって実行されるプログラムであって、
前記刺激装置に、刺激をユーザに与えさせることと、
前記刺激が前記ユーザに与えられている状態で、前記光源に、前記ユーザの頭部に向けて光を出射させることと、
前記光検出器に、前記頭部からの反射光のうち、前記ユーザの脳内を伝播した光の成分を検出させることにより、前記成分の強度に応じた、前記脳の活動状態を示す脳活動信号を出力させることと、
前記脳活動信号に基づき、マインドフルネス状態になることについての前記ユーザの熟達度を示す信号を生成して出力することと、
を前記コンピュータに実行させる、プログラム。
【請求項１２】
刺激装置と、光源と、光検出器とを備える生体計測装置に搭載されるコンピュータによって実行されるプログラムを格納したコンピュータ読み取り可能な記録媒体であって、
前記プログラムが前記コンピュータによって実行されるときに、
前記刺激装置に、刺激をユーザに与えさせることと、
前記刺激が前記ユーザに与えられている状態で、前記光源に、前記ユーザの頭部に向けて光を出射させることと、
前記光検出器に、前記頭部からの反射光のうち、前記ユーザの脳内を伝播した光の成分を検出させることにより、前記成分の強度に応じた、前記脳の活動状態を示す脳活動信号を出力させることと、
前記脳活動信号に基づき、マインドフルネス状態になることについての前記ユーザの熟達度を示す信号を生成して出力することと、
が実行される、コンピュータ読み取り可能な記録媒体。
【請求項１３】
刺激をユーザに与える刺激装置と、
前記刺激が前記ユーザに与えられている状態で、前記ユーザの頭部に向けて光を出射する光源と、
前記頭部からの反射光のうち、前記ユーザの脳内を伝播した光の成分を検出し、前記成分の強度に応じた、前記脳の活動状態を示す脳活動信号を出力する光検出器と、
前記脳活動信号に基づき、マインドフルネス状態になることについての前記ユーザの熟達度を示す信号を生成して出力する信号処理回路と、
を備える、生体計測装置。
【発明の詳細な説明】
【技術分野】
【０００１】
本開示は、生体計測方法、地図データ作成方法、プログラム、コンピュータ読み取り可能な記録媒体、および生体計測装置に関する。
【背景技術】
【０００２】
近年、マインドフルネスに関する研究が、心理学、医学、産業、スポーツ、福祉、教育等の様々な分野において進められている。日本マインドフルネス学会によれば、マインドフルネスは、「今、この瞬間に意図的に意識を向け、評価をせずに、とらわれのない状態で、ただ観ること」と定義される。例えば、非特許文献１に開示されているように、マインドフルネスを実践することにより、ストレスの低減、疾病のリスクの低減、および集中力の向上等の様々な効果があると言われている。マインドフルネスの技法は、例えば、鬱病の治療に取り入られることがある。産業界においても、マインドフルネスは、例えばリーダーシップの涵養に効果的であると言われ、近年注目されている。マインドフルネス状態になるためのエクササイズとして、マインドフルネス瞑想が広く知られている。マインドフルネス瞑想を実践するための音声または映像などのコンテンツが、例えばインターネットで広く公開されている。
【０００３】
一方で、光を用いて対象者の生体内部の情報を取得する種々の方法が知られている。
【０００４】
特許文献１は、光源と光検出器とを所定の間隔で離した状態で、それらを対象部に密着させて生体情報を取得する方法を開示している。
【０００５】
特許文献２は、対象者の脳血流に関する情報を非接触で取得し、対象者の集中度または感情などの心理状態を推定する技術を開示している。
【０００６】
特許文献３は、複数の対象者の脳活動信号を計測し、複数の対象者の位置関係に基づいて、各対象者の生体情報の解析結果と位置情報とを関連付けて表示するシステムを開示している。
【先行技術文献】
【特許文献】
【０００７】
【特許文献１】特開平１１−１６４８２６号公報
【特許文献２】特開２０１７−１２４１５３号公報
【特許文献３】特開２０１３−１７７３４号公報
【非特許文献】
【０００８】
【非特許文献１】Janssen M, Heerkens Y, Kuijer W, van der Heijden B, Engels J (2018) Effects of MindfulnessBased Stress Reduction on employees’ mental health: A systematic review. PLoS ONE 13(1): e0191332.
【発明の概要】
【発明が解決しようとする課題】
【０００９】
従来、ユーザがマインドフルネス状態に熟達しているかを判定する技術は存在しなかった。本開示は、ユーザがマインドフルネス状態になることに熟達しているか否かを判定することを可能にする新規な技術を提供する。
【課題を解決するための手段】
【００１０】
本開示の一態様に係る生体計測方法は、ユーザの頭部に照射光を照射することによって生じた前記頭部からの反射光のうち、前記ユーザの脳内を伝播した光の成分を検出することによって生成され、前記脳の活動状態を示す少なくとも１つの脳活動信号を取得することと、前記少なくとも１つの脳活動信号に基づき、マインドフルネス状態になることについての前記ユーザの熟達度を示す信号を生成して出力することと、を含む。
【００１１】
本開示の包括的または具体的な態様は、システム、装置、方法、集積回路、コンピュータプログラムまたはコンピュータ読み取り可能な記録ディスク等の記録媒体で実現されてもよく、システム、装置、方法、集積回路、コンピュータプログラムおよび記録媒体の任意な組み合わせで実現されてもよい。コンピュータ読み取り可能な記録媒体は、例えばＣＤ−ＲＯＭ（Ｃｏｍｐａｃｔ  Ｄｉｓｃ‐Ｒｅａｄ  Ｏｎｌｙ  Ｍｅｍｏｒｙ）等の不揮発性の記録媒体を含み得る。装置は、１つ以上の装置で構成されてもよい。装置が２つ以上の装置で構成される場合、当該２つ以上の装置は、１つの機器内に配置されてもよく、分離した２つ以上の機器内に分かれて配置されてもよい。本明細書および特許請求の範囲では、「装置」とは、１つの装置を意味し得るだけでなく、複数の装置からなるシステムも意味し得る。
【発明の効果】
【００１２】
本開示の一態様によれば、ユーザがマインドフルネス状態になることに熟達しているか否かを判定することができる。
【図面の簡単な説明】
【００１３】
【図１Ａ】図１Ａは、生体計測装置の例を模式的に示す図である。
【図１Ｂ】図１Ｂは、光検出器に到達する光の強度の時間変化の例を示す図である。
【図１Ｃ】図１Ｃは、入力光パルスの幅を横軸に、光検出器での検出光量を縦軸に表した図である。
【図１Ｄ】図１Ｄは、光検出器の１つの画素の概略的な構成の例を示す図である。
【図１Ｅ】図１Ｅは、光検出器の構成の一例を示す図である。
【図１Ｆ】図１Ｆは、１フレーム内の動作の例を示す図である。
【図１Ｇ】図１Ｇは、制御回路による動作の概略を示すフローチャートである。
【図２】図２は、光パルスの内部散乱成分の検出方法を説明するための図である。
【図３Ａ】図３Ａは、表面反射成分を検出する場合のタイミングチャートの一例を模式的に示す図である。
【図３Ｂ】図３Ｂは、内部散乱成分を検出する場合のタイミングチャートの一例を模式的に示す図である。
【図４Ａ】図４Ａは、脳血流量の変化を検出する方法の例を模式的に示す図である。
【図４Ｂ】図４Ｂは、ユーザの対象部内の複数箇所での計測を同時に行う方法の一例を模式的に示す図である。
【図５Ａ】図５Ａは、光の照射領域の一例を模式的に示す図である。
【図５Ｂ】図５Ｂは、ユーザの頭部の横方向の動きに起因する計測結果の変化を模式的に示す図である。
【図６】図６は、マインドフルネスの熟達度の１回の判定動作の流れを時間軸上に表した図である。
【図７】図７は、熟達度の判定動作の流れを示すフローチャートである。
【図８Ａ】図８Ａは、非熟達者について得られた３つのヒストグラムの例を示す図である。
【図８Ｂ】図８Ｂは、熟達者について得られた３つのヒストグラムの例を示す図である。
【図９】図９は、複数のユーザの携帯機器から脳活動信号および位置データを収集して活用するシステムの概念図である。
【図１０】図１０は、サーバおよび複数の携帯機器の概略的な構成を示す図である。
【図１１】図１１は、地図データに基づいて携帯機器のディスプレイが表示する画像の一例を示す図である。
【図１２】図１２は、ヘッドマウント装置の例を模式的に示す図である。
【発明を実施するための形態】
【００１４】
以下で説明される実施形態は、いずれも包括的または具体的な例を示すものである。以下の実施形態で示される数値、形状、材料、構成要素、構成要素の配置位置および接続形態、ステップ、およびステップの順序は、一例であり、本開示の技術を限定する趣旨ではない。以下の実施形態における構成要素のうち、最上位概念を示す独立請求項に記載されていない構成要素については、任意の構成要素として説明される。各図は模式図であり、必ずしも厳密に図示されたものではない。さらに、各図において、実質的に同一または類似の構成要素には同一の符号を付している。重複する説明は省略または簡略化されることがある。
【００１５】
本開示において、回路、ユニット、装置、部材または部の全部または一部、またはブロック図における機能ブロックの全部または一部は、例えば、半導体装置、半導体集積回路（ＩＣ）、またはＬＳＩ（ｌａｒｇｅ  ｓｃａｌｅ  ｉｎｔｅｇｒａｔｉｏｎ）を含む１つまたは複数の電子回路によって実行され得る。ＬＳＩまたはＩＣは、１つのチップに集積されてもよいし、複数のチップを組み合わせて構成されてもよい。例えば、記憶素子以外の機能ブロックは、１つのチップに集積されてもよい。ここでは、ＬＳＩまたはＩＣと呼んでいるが、集積の度合いによって呼び方が変わり、システムＬＳＩ、ＶＬＳＩ（ｖｅｒｙ  ｌａｒｇｅ  ｓｃａｌｅ  ｉｎｔｅｇｒａｔｉｏｎ）、もしくはＵＬＳＩ（ｕｌｔｒａ  ｌａｒｇｅ  ｓｃａｌｅ  ｉｎｔｅｇｒａｔｉｏｎ）と呼ばれるものであってもよい。ＬＳＩの製造後にプログラムされる、Ｆｉｅｌｄ  Ｐｒｏｇｒａｍｍａｂｌｅ  Ｇａｔｅ  Ａｒｒａｙ（ＦＰＧＡ）、またはＬＳＩ内部の接合関係の再構成またはＬＳＩ内部の回路区画のセットアップができるｒｅｃｏｎｆｉｇｕｒａｂｌｅ  ｌｏｇｉｃ  ｄｅｖｉｃｅも同じ目的で使うことができる。
【００１６】
さらに、回路、ユニット、装置、部材または部の全部または一部の機能または操作は、ソフトウェア処理によって実行することが可能である。この場合、ソフトウェアは１つまたは複数のＲＯＭ、光学ディスク、ハードディスクドライブなどの非一時的記録媒体に記録され、ソフトウェアが処理装置（ｐｒｏｃｅｓｓｏｒ）によって実行されたときに、そのソフトウェアで特定された機能が処理装置（ｐｒｏｃｅｓｓｏｒ）および周辺装置によって実行される。システムまたは装置は、ソフトウェアが記録されている１つまたは複数の非一時的記録媒体、処理装置（ｐｒｏｃｅｓｓｏｒ）、および必要とされるハードウェアデバイス、例えばインターフェースを備えていてもよい。
【００１７】
本開示の実施形態を説明する前に、本開示の基礎となった知見を説明する。
【００１８】
前述のように、マインドフルネスを実践するための各種のコンテンツが、例えばインターネットに公開されている。そのようなコンテンツは、スマートフォンまたはタブレットコンピュータなどの携帯機器用のアプリケーションとしても提供されている。そのようなアプリケーションは、ユーザに、マインドフルネス状態に誘導する音声および／または映像を提供する。ユーザは、例えばガイダンスに従って瞑想することにより、高いリラックス効果を得ることができる。
【００１９】
マインドフルネス状態へのなり易さは、ユーザによって様々である。あるユーザは、マインドフルネスに熟達しており、比較的容易にマインドフルネス状態に移行できる。しかし、他のユーザは、マインドフルネスに熟達しておらず、マインドフルネス状態に移行することが比較的難しい。
【００２０】
マインドフルネス状態へのなり易さは、周囲の環境にも依存する。例えば、自然を体感できる場所、または荘厳な寺社、仏閣、もしくは神殿などの歴史的建造物の中では、人々はマインドフルネス状態になり易いといえる。他にも、優れた芸術作品が設置されている場所、または心地よい音楽が流れている場所など、居心地の良い場所では、人々はマインドフルネス状態になり易いといえる。そのような場所には、マインドフルネスに熟達した人々が集まり易いともいえる。
【００２１】
マインドフルネスの熟達者と非熟達者とを判別することができれば、その判別結果を様々な用途に応用できる可能性がある。しかし、従来、熟達者と非熟達者とを判別する有効な方法は知られていなかった。そこで、本発明者らは、熟達者と非熟達者とを判別する方法を検討し、本開示の実施形態の構成に想到した。
【００２２】
以下、本開示の実施形態の概要を説明する。
【００２３】
本開示の一態様に係る生体計測方法は、以下の（ａ）および（ｂ）のステップを含む。
（ａ）ユーザの頭部に照射光を照射することによって生じた前記頭部からの反射光のうち、前記ユーザの脳内を伝播した光の成分を検出することによって生成され、前記脳の活動状態を示す少なくとも１つの脳活動信号を取得する。
（ｂ）少なくとも１つの脳活動信号に基づき、マインドフルネス状態になることについてのユーザの熟達度を示す信号を生成して出力する。
【００２４】
少なくとも１つの脳活動信号を取得することは、音声および映像からなる群から選択される少なくとも１つを含む刺激が前記ユーザに与えられている状態で行われてもよい。
【００２５】
前記音声および前記映像からなる群から選択される前記少なくとも１つは、前記ユーザを前記マインドフルネス状態に誘導してもよい。
【００２６】
ここで、「ユーザをマインドフルネス状態に誘導する、音声および映像からなる群から選択される少なくとも１つを含む刺激」は、例えば、一般に公開されている、マインドフルネス瞑想のための音声および映像の少なくとも一方を含むコンテンツであり得る。また、「マインドフルネス瞑想のための音声および映像」とは、マインドフルネス瞑想のための使用を意図していることが明記された音声および映像に限らず、実質的にユーザをマインドフルネス瞑想へと誘導する効果が期待できる音声および映像を含む。そのような音声および映像は、例えば、リラックス効果のある音声および映像として提供される場合もあり得る。ユーザがそのような音声および映像のコンテンツを視聴することにより、上記刺激がユーザに提示され得る。
【００２７】
「ユーザの脳内を伝播した光の成分」は、ユーザの脳活動の状態に依存する。当該光の成分を検出することにより、ユーザの脳活動状態を推定することができる。ここで、「光」は、可視光に限らず、例えば赤外線であってもよい。本明細書では、可視光のみならず、赤外線についても「光」の用語を使用する。
【００２８】
「マインドフルネス状態になることについてのユーザの熟達度」は、後に詳しく説明するように、取得された脳活動信号を解析することによって決定することができる。
【００２９】
「脳活動信号」とは、ユーザまたは対象者の脳活動に依存して変化する生体信号を意味する。例えば、脳血液中の酸素化ヘモグロビン濃度、脳血液中の脱酸素化ヘモグロビン濃度、および脳血液中の酸素飽和度のいずれかを示す信号は、脳活動信号に該当する。
【００３０】
脳活動信号は、例えば、ユーザの頭部に光パルスを照射することによって生じた頭部からの反射光パルスのうち、反射光パルスの光強度が減少を開始してから減少が終了するまでの期間（以下、「立ち下がり期間」と称する。）に含まれる反射光パルスの成分の少なくとも一部を検出することによって生成され得る。後述するように、反射光パルスの立ち下がり期間に含まれる光の成分は、ユーザの脳活動を反映する。当該光の成分を検出することにより、ユーザの脳活動の状態を推定することができる。さらには、ユーザがマインドフルネスに熟達しているか否かを判定することができる。
【００３１】
刺激は、例えば、マインドフルネス状態に誘導するために作成された音声または映像などのコンテンツをユーザが視聴することによってユーザに提示され得る。刺激は、視覚および聴覚の刺激に限定されず、他の種類の刺激、例えば嗅覚、触覚、または味覚などの刺激であってもよい。少なくとも１つの脳活動信号は、ユーザに刺激が与えられる直前の第１の期間、ユーザに刺激が与えられている第２の期間、ユーザに刺激が与えられた直後の第３の期間のうち、第２の期間を含む少なくとも２つの期間のそれぞれについて、１回以上生成され得る。熟達度を示す信号は、当該少なくとも２つの期間のそれぞれについて取得された脳活動信号に基づいて生成され得る。
【００３２】
後述するように、マインドフルネスになることに熟達している者（以下、「熟達者」と称する。）と熟達していない者（以下、「非熟達者」と称する。）とでは、映像または音声などの刺激が与えられている最中、およびその前後における脳活動信号の傾向が異なる。刺激が与えられている最中の脳活動信号だけでなく、刺激が与えられる前および後の少なくとも一方における脳活動信号も利用して解析することにより、マインドフルネスの熟達度をより正確に推定することができる。
【００３３】
少なくとも１つの脳活動信号は、複数の脳活動信号を含み、複数の脳活動信号は、上記第１から第３の期間のそれぞれにおいて、前記光の成分を複数回検出することによって取得されてもよい。例えば、一定時間毎に、繰り返し脳活動信号が取得されていてもよい。その場合、熟達度を示す信号は、上記第１から第３の期間のそれぞれについて取得された複数の脳活動信号に基づいて生成され得る。このように、映像または音声などの刺激が与えられている最中と、その前後の各々の期間で、複数の脳活動信号を取得することにより、マインドフルネスの熟達度をより正確に推定することができる。
【００３４】
熟達度を示す信号は、例えば、上記第１から第３の期間のそれぞれについて取得された複数の脳活動信号のばらつき度合に基づいて生成され得る。
【００３５】
少なくとも１つの脳活動信号は、例えば、脳内の血液中の脱酸素化ヘモグロビンの濃度に依存する信号であり得る。本発明者らの実験によれば、熟達者と非熟達者とで、刺激の有無による脱酸素化ヘモグロビンの濃度変化の傾向が顕著に異なることがわかった。脳内の血液中の脱酸素化ヘモグロビンの濃度に依存する信号を解析することにより、熟達度をより正確に推定することができる。
【００３６】
脳活動信号は、波長の異なる２種類の光を利用して取得された２つの信号に基づいて生成されてもよい。例えば、脳活動信号は、ユーザの頭部に、８０５ｎｍよりも長い第１の波長の光パルスを照射することによって生じた頭部からの第１の反射光パルスのうち、第１の反射光パルスの立ち下がり期間に含まれる成分の少なくとも一部を検出することによって生成された第１の信号と、８０５ｎｍよりも短い第２の波長の光パルスを照射することによって生じた頭部からの第２の反射光パルスの立ち下がり期間に含まれる成分の少なくとも一部を検出することによって生成された第２の信号とを用いた演算によって生成され得る。
【００３７】
酸素化ヘモグロビンは約８０５ｎｍを超える波長の近赤外線を比較的よく吸収する。これに対し、脱酸素化ヘモグロビンは、８０５ｎｍよりも短い波長の近赤外線または赤色光を比較的よく吸収する。第１の信号は、脳血液中の酸素化ヘモグロビンの濃度に依存する信号であり得る。第２の信号は、脳血液中の脱酸素化ヘモグロビンの濃度に依存する信号であり得る。これらの２つの信号を用いて脳血液中の酸素飽和度を求めることもできる。これらの２つの信号を組み合わせることにより、熟達度をより正確に推定することができる。
【００３８】
本開示の他の態様による生体計測装置は、刺激装置と、光源と、光検出器と、信号処理回路とを備える。刺激装置は、刺激をユーザに与える。光源は、刺激がユーザに与えられている状態で、ユーザの頭部に向けて光を出射するように構成される。光検出器は、頭部からの反射光のうち、ユーザの脳内を伝播した光の成分を検出し、当該成分の強度に応じた脳活動信号を出力するように構成される。信号処理回路は、当該脳活動信号に基づき、マインドフルネス状態になることについてのユーザの熟達度を示す信号を生成して出力するように構成される。
【００３９】
本開示は、刺激装置と、光源と、光検出器とを備える生体計測装置に搭載されるコンピュータによって実行されるプログラムも含む。当該プログラムは、以下の（ａ）から（ｄ）の動作をコンピュータに実行させる。
（ａ）刺激装置に、刺激をユーザに与えさせる。
（ｂ）刺激がユーザに提示されている状態で、光源に、ユーザの頭部に向けて光を出射させる。
（ｃ）光検出器に、前記頭部からの反射光のうち、前記ユーザの脳内を伝播した光の成分を検出させ、前記成分の強度に応じた脳活動信号を出力させる。
（ｄ）脳活動信号に基づき、マインドフルネス状態になることについてのユーザの熟達度を示す信号を生成して出力する。
【００４０】
本開示の一態様に係るコンピュータ読み取り可能な記録媒体は、刺激装置と、光源と、光検出器とを備える生体計測装置に搭載されるコンピュータによって実行されるプログラムを格納したコンピュータ読み取り可能な記録媒体であって、前記プログラムが前記コンピュータによって実行されるときに、前記刺激装置に、刺激をユーザに与えさせることと、前記刺激が前記ユーザに与えられている状態で、前記光源に、前記ユーザの頭部に向けて光を出射させることと、前記光検出器に、前記頭部からの反射光のうち、前記ユーザの脳内を伝播した光の成分を検出させることにより、前記成分の強度に応じた、前記脳の活動状態を示す脳活動信号を出力させることと、前記脳活動信号に基づき、マインドフルネス状態になることについての前記ユーザの熟達度を示す信号を生成して出力することと、が実行される。
【００４１】
本開示の技術は、例えば、スマートフォンまたはタブレットコンピュータなどの携帯機器用のアプリケーションに適用することができる。インターネットなどのネットワークを介して複数の携帯機器に接続されたサーバコンピュータに、上記の方法を実行させてもよい。当該サーバコンピュータは、各ユーザの脳活動信号を、ネットワークを介して収集し、マインドフルネスになることについての各ユーザの熟達度を示す信号を生成して出力してもよい。各ユーザの熟達度を示す信号は、そのユーザの携帯機器に送信され、当該機器のディスプレイに判定結果が表示され得る。
【００４２】
本開示の一態様に係る地図データ生成方法は、複数のユーザのコンピュータから、上記のいずれかに記載の生体計測方法によって生成された前記複数のユーザの各々の前記熟達度を示す信号と、前記複数のユーザの各々の位置情報とを、ネットワークを介して取得することと、前記位置情報に基づき、前記複数のユーザの各々の前記熟達度と地図とを関連付けた地図データを生成して出力することと、を含む。
【００４３】
あるいは、サーバコンピュータは、各ユーザの携帯機器が生成した熟達度を示す信号と、位置情報とを、ネットワークを介して複数のユーザのコンピュータから取得してもよい。さらに、サーバコンピュータは、当該位置情報に基づき、各ユーザのマインドフルネスの熟達度の判定結果と地図とを関連付けた地図データを生成して出力してもよい。そのような地図データは、マインドフルネスの熟達者の分布を示すヒートマップを表していてもよい。例えば、熟達者の多い場所が赤色で示され、熟達者の少ない場所が青色で示され、熟達者の人数が中程度の場所が緑色で示されたヒートマップを生成してもよい。地図データは、各ユーザの携帯機器に送信され、当該機器のディスプレイにヒートマップが表示され得る。
【００４４】
このような構成によれば、各ユーザは、どの場所に多くの熟達者が集まっているかを知ることができる。多くの熟達者が集まる場所は、マインドフルネス状態になり易い場所、言い替えれば、居心地が良くリラックスできる場所である可能性が高い。上記のアプリケーションを利用することにより、ユーザは、居心地が良くリラックスできる場所を知ることができる。さらに、後述するように、複数のユーザの携帯機器から収集した情報をマーケティングに活用することにより、新たなビジネス機会の創出につなげることも可能になる。
【００４５】
以下、添付の図面を参照して、本開示の実施形態をより具体的に説明する。
【００４６】
（実施形態）
［１．生体計測装置１００］
図１Ａは、本開示の例示的な実施形態における生体計測装置１００を示す模式図である。生体計測装置１００は、刺激装置１０と、光源２０と、光検出器３０と、制御回路６０と、信号処理回路７０とを備える。図１Ａは、生体計測装置１００を使用するユーザ５００も示されている。
【００４７】
刺激装置１０は、ユーザ５００にマインドフルネス状態へと誘導する刺激を与えるする装置である。光源２０は、ユーザ５００の頭部に照射されるパルス光を出射する装置である。光源２０は、単一の発光装置に限らず、複数の発光装置の組み合わせによって実現されていてもよい。光検出器３０は、ユーザ５００の頭部から戻ってきた反射パルス光の少なくとも一部を検出する装置である。光検出器３０は、例えば、２次元的に配列された複数の光検出セルを含むイメージセンサであり得る。制御回路６０は、刺激装置１０、光源２０、光検出器３０を制御する回路である。信号処理回路７０は、光検出器３０から出力された信号を処理する回路である。
【００４８】
本実施形態における制御回路６０は、刺激装置１０を制御する刺激制御部６１と、光源２０を制御する光源制御部６２と、光検出器３０を制御する検出器制御部６３とを含む。刺激制御部６１、光源制御部６２、および検出器制御部６３は、分離された３つの回路によって実現されていてもよいし、単一の回路によって実現されていてもよい。刺激制御部６１、光源制御部６２、および検出器制御部６３は、制御回路６０が不図示のメモリに格納された制御用のプログラムを実行することによって実現されてもよい。制御回路６０と信号処理回路７０の機能が、単一の回路によって実現されていてもよい。
【００４９】
刺激制御部６１は、例えば、刺激として与えられる映像の色相、彩度、および輝度の少なくとも１つ、または音声の音質および大きさの少なくとも１つを制御する。光源制御部６２は、例えば、光源２０から出射されるパルス光の強度、パルス幅、出射タイミング、および／または波長を制御する。検出器制御部６３は、光検出器３０の各光検出セルにおける信号蓄積のタイミングを制御する。
【００５０】
本明細書において、「生体情報」とは、刺激によって変化する生体の計測可能な量を意味する。生体情報には、例えば、血流量、血圧、心拍数、脈拍数、呼吸数、体温、脳波、血液中の酸素化ヘモグロビン濃度、血液中の脱酸素化ヘモグロビン濃度、血中酸素飽和度、皮膚の反射スペクトルなどの、種々の量が含まれる。生体情報の一部は、バイタルサインと呼ばれることがある。
【００５１】
以下に、生体計測装置１００の各構成要素をより具体的に説明する。
【００５２】
［１−１．刺激装置１０］
刺激装置１０は、ユーザ５００に刺激を提示する。刺激は、ユーザ５００の生体反応を引き起こす。刺激装置１０は、ディスプレイおよびスピーカの少なくとも一方を含み得る。刺激装置１０は、ユーザ５００をマインドフルネス状態に誘導する音声および映像の少なくとも一方を含む刺激を、ユーザ５００に与える。
【００５３】
マインドフルネス状態へと誘導する刺激は、例えば、マインドフルネス瞑想のために公開されている音声および／または映像などの刺激であり得る。
【００５４】
刺激装置１０は、例えば、スマートフォンまたはタブレットコンピュータなどの携帯機器であってもよい。その場合、マインドフルネス状態へと誘導する刺激は、当該携帯機器にインストールされるアプリケーションによって提供されてもよい。刺激装置１０は、ヘッドマウント装置のような装置であってもよい。
【００５５】
本実施形態では視覚および／または聴覚に対する刺激が使用される。しかし、これらに限定されず、触覚、嗅覚、または味覚に対する刺激が使用されてもよい。刺激装置１０は、ユーザ５００に与える刺激の種類に応じて異なる構造および機能を有する。例えば、ユーザ５００に触覚刺激を与える場合、刺激装置１０は、振動または熱を発生させる装置を含み得る。ユーザ５００に嗅覚を与える場合、刺激装置１０は、匂いを発生させる装置を含み得る。
【００５６】
［１−２．光源２０］
光源２０は、ユーザ５００の対象部に向けて光を出射する。対象部は、例えば、ユーザ５００の頭部であり、より具体的にはユーザ５００の額であり得る。光源２０から出射されてユーザ５００に到達した光は、ユーザ５００の表面で反射される表面反射成分Ｉ１と、ユーザ５００の内部で散乱される内部散乱成分Ｉ２とに分かれる。内部散乱成分Ｉ２は、生体内部で１回反射もしくは散乱、または多重散乱する成分である。ユーザ５００の頭部に向けて光を出射する場合、内部散乱成分Ｉ２は、ユーザ５００の頭部の表面から奥に８ｍｍから１６ｍｍほどの部位、例えば脳に到達し、再び生体計測装置１００に戻る成分を指す。表面反射成分Ｉ１は、直接反射成分、拡散反射成分、および散乱反射成分の３つの成分を含む。直接反射成分は、入射角と反射角とが等しい反射成分である。拡散反射成分は、表面の凹凸形状によって拡散して反射する成分である。散乱反射成分は、表面近傍の内部組織によって散乱して反射する成分である。ユーザ５００の頭部に向けて光を出射する場合、散乱反射成分は、表皮内部で散乱して反射する成分である。ユーザ５００の表面で反射する表面反射成分Ｉ１は、これら３つの成分を含み得る。表面反射成分Ｉ１および内部散乱成分Ｉ２は、反射または散乱によって進行方向が変化し、その一部が光検出器３０に到達する。
【００５７】
本実施形態では、ユーザ５００の頭部から戻って来る光である反射光のうち、少なくとも内部散乱成分Ｉ２の少なくとも一部が検出される。内部散乱成分Ｉ２は、ユーザ５００の脳活動を反映してその強度が変動する。このため、内部散乱成分Ｉ２の経時変化を解析することによってユーザ５００の脳活動の状態を推定することができる。
【００５８】
以下、内部散乱成分Ｉ２の検出方法の例を説明する。光源２０は、制御回路６０からの指示に従い、光パルスを所定の時間間隔または所定のタイミングで複数回繰り返し出射する。光源２０から出射される光パルスは、例えば立ち下がり期間がゼロに近い矩形波であり得る。本明細書において、「立ち下がり期間」とは、光パルスの強度が減少を開始してから減少が終了するまでの期間を意味する。一般に、ユーザ５００に入射した光は、様々な経路でユーザ５００内を伝播し、時間差を伴ってユーザ５００の表面から出射する。このため、光パルスの内部散乱成分Ｉ２の後端は、広がりを有する。ユーザ５００の対象部が額である場合、内部散乱成分Ｉ２の後端の広がりは、４ｎｓ程度である。このことを考慮すると、光パルスの立ち下がり期間は、例えばその半分以下である２ｎｓ以下に設定され得る。立ち下がり期間は、さらにその半分の１ｎｓ以下であってもよい。光源２０から出射される光パルスの立ち上がり期間の長さは任意である。本明細書において、「立ち上がり期間」とは、光パルスの強度が増加を開始してから増加が終了するまでの期間である。本実施形態における内部散乱成分Ｉ２の検出では、光パルスの立ち下がり部分が使用され、立ち上がり部分は使用されない。光パルスの立ち上がり部分は、表面反射成分Ｉ１の検出に用いられ得る。光源２０は、例えば、ＬＤなどのレーザであり得る。レーザから出射される光は、光パルスの立ち下がり部分が時間軸に略直角である、急峻な時間応答特性を有する。
【００５９】
光源２０から出射される光の波長は、例えば６５０ｎｍ以上９５０ｎｍ以下の波長範囲に含まれる任意の波長であり得る。この波長範囲は、赤色から近赤外線の波長範囲に含まれる。上記の波長範囲は、「生体の窓」と呼ばれており、光が生体内の水分および皮膚に比較的吸収されにくいという性質を有する。生体を検出対象にする場合、上記の波長範囲の光を使用することにより、検出感度を高くすることができる。本実施形態のように、ユーザ５００の脳の血流変化を検出する場合、使用される光は、主に酸素化ヘモグロビン（ＨｂＯ２）および脱酸素化ヘモグロビン（Ｈｂ）に吸収されると考えられる。酸素化ヘモグロビンと脱酸素化ヘモグロビンとでは、光吸収の波長依存性が異なる。一般に、血流に変化が生じると、酸素化ヘモグロビンおよび脱酸素化ヘモグロビンの濃度が変化する。この変化に伴い、光の吸収度合いも変化する。したがって、血流が変化すると、検出される光量も時間的に変化する。
【００６０】
光源２０は、上記の波長範囲に含まれる単一の波長の光を出射してもよいし、２つ以上の波長の光を出射してもよい。複数の波長の光は、複数の光源からそれぞれ出射されてもよい。２つの光源から異なる２つの波長の光がそれぞれ出射される場合、ユーザ５００の対象部を経由して光検出器３０に戻った２つの波長の光の光路長は、ほぼ等しくなるように設計され得る。この設計では、例えば、光検出器３０と一方の光源との距離、および光検出器３０と他方の光源との距離が一致しており、かつ、２つの光源が、光検出器３０を中心として回転対称になる位置に配置され得る。
【００６１】
本実施形態における生体計測装置１００では、非接触でユーザ５００の脳血流が計測される。このため、網膜への影響を考慮して設計された光源２０が用いられ得る。例えば、各国で策定されているレーザ安全基準のクラス１を満足する光源２０が用いられ得る。クラス１が満足されている場合、被爆放出限界（ＡＥＬ）が１ｍＷを下回るほどの低照度の光が、ユーザ５００に照射される。なお、光源２０自体はクラス１を満たしていなくてもよい。例えば、拡散板またはＮＤフィルタを光源２０の前に設置して光を拡散または減衰することにより、レーザ安全基準のクラス１が満たされていてもよい。
【００６２】
脳血流を計測するためにユーザ５００の頭部を光で照射する場合、内部散乱成分Ｉ２の光量は、表面反射成分Ｉ１の光量の数千分の１から数万分の１程度の非常に小さい値になり得る。さらに、レーザの安全基準を考慮すると、照射できる光の光量は、極めて小さくなる。したがって、内部散乱成分Ｉ２の検出は非常に難しい。その場合でも、光源２０が、比較的パルス幅の大きい光パルスを出射すれば、時間遅れを伴う内部散乱成分Ｉ２の積算量を増加させることができる。それにより、検出光量を増やし、ＳＮ比を向上させることができる。
【００６３】
光源２０は、例えばパルス幅が３ｎｓ以上の光パルスを出射する。一般に、脳などの生体組織内で散乱された光の時間的な広がりは４ｎｓ程度である。図１Ｂは、光検出器３０に到達する光の強度の時間変化の例を示す図である。図１Ｂには、光源２０から出射される入力光パルスの幅が、０ｎｓ、３ｎｓ、および１０ｎｓである３つの場合の例が示されている。図１Ｂに示すように、光源２０からの光パルスの幅を広げるにつれて、ユーザ５００から戻った光パルスの後端部に現れる内部散乱成分Ｉ２の光量が増加する。
【００６４】
図１Ｃは、入力光パルスの幅を横軸に、光検出器３０での検出光量を縦軸に表した図である。光検出器３０は、電子シャッタを備える。図１Ｃの結果は、光パルスの後端がユーザ５００の表面で反射されて光検出器３０に到達した時刻から１ｎｓ経過した後に電子シャッタを開いた条件で得られた。この条件を選択した理由は、光パルスの後端が到達した直後は、内部散乱成分Ｉ２と比較して、表面反射成分Ｉ１の比率が高いためである。図１Ｃに示すように、光源２０から出射される光パルスのパルス幅を３ｎｓ以上にすると、検出光量を最大化することができる。
【００６５】
光源２０は、パルス幅５ｎｓ以上、さらには１０ｎｓ以上の光パルスを出射してもよい。一方、パルス幅が大きすぎても使用しない光が増えて無駄となる。このため、光源２０は、例えば、パルス幅５０ｎｓ以下の光パルスを出射する。あるいは、光源２０は、パルス幅３０ｎｓ以下、さらには２０ｎｓ以下の光パルスを出射してもよい。
【００６６】
光源２０の照射パターンは、例えば、照射領域内において、均一な強度分布をもつパターンであってもよい。この点で、本実施形態は、特許文献１に開示された従来の生体計測装置とは異なる。特許文献１に開示された装置では、検出器と光源とを３ｃｍ程度離し、表面反射成分が、空間的に内部散乱成分から分離される。このため、離散的な光照射とせざるを得ない。これに対し、本実施形態における生体計測装置１００は、表面反射成分Ｉ１を時間的に内部散乱成分Ｉ２から分離して低減することができる。このため、均一な強度分布を有する照射パターンの光源２０を用いることができる。均一な強度分布を有する照射パターンは、光源２０から出射される光を拡散板で拡散することによって形成してもよい。
【００６７】
本実施形態では、ユーザ５００の照射点直下でも、内部散乱成分Ｉ２を検出することができる。ユーザ５００を空間的に広い範囲にわたって光で照射することにより、計測解像度を高めることもできる。
【００６８】
［１−３．光検出器３０］
光検出器３０は、光源２０から出射され、ユーザ５００の対象部から戻ってきた光の一部の光量を示す信号を出力する。当該信号は、反射光パルスのうち、立ち下がり期間の少なくとも一部に含まれる強度に応じた信号であり得る。
【００６９】
光検出器３０は、複数の光電変換素子３２と、複数の電荷蓄積部３４とを含み得る。具体的には、光検出器３０は、２次元的に配置された複数の光検出セルを備え得る。そのような光検出器３０は、ユーザ５００の２次元的な生体情報を一度に取得し得る。本明細書において、光検出セルを「画素」と称することがある。光検出器３０は、例えば、ＣＣＤイメージセンサまたはＣＭＯＳイメージセンサなどの任意の撮像素子であり得る。より一般的には、光検出器３０は、少なくとも１つの光電変換素子３２と、少なくとも１つの電荷蓄積部３４とを含む。
【００７０】
光検出器３０は、電子シャッタを備え得る。電子シャッタは、撮像のタイミングを制御する回路である。本実施形態では、制御回路６０における検出器制御部６３が、電子シャッタの機能を有する。電子シャッタは、受光した光を有効な電気信号に変換して蓄積する１回の信号蓄積の期間と、信号蓄積を停止する期間とを制御する。信号蓄積期間は、「露光期間」と称することもできる。以下の説明では、露光期間の幅を、「シャッタ幅」と称することがある。１回の露光期間が終了し次の露光期間が開始するまでの時間を、「非露光期間」と称することがある。以下、露光している状態を「ＯＰＥＮ」、露光を停止している状態を「ＣＬＯＳＥ」と称することがある。
【００７１】
光検出器３０は、電子シャッタにより、露光期間および非露光期間を、サブナノ秒、例えば３０ｐｓから１ｎｓの範囲で調整することができる。距離の計測が目的である従来のＴＯＦカメラは、光源２０から出射され被写体で反射されて戻ってきた光の全てを検出する。従来のＴＯＦカメラでは、シャッタ幅が光のパルス幅よりも大きい必要があった。これに対し、本実施形態における生体計測装置１００では、被写体の光量を補正する必要がない。このため、シャッタ幅がパルス幅よりも大きい必要はない。シャッタ幅を、例えば、１ｎｓ以上３０ｎｓ以下の値に設定することができる。本実施形態における生体計測装置１００によれば、シャッタ幅を縮小できるため、検出信号に含まれる暗電流の影響を低減することができる。
【００７２】
ユーザ５００の頭部を光で照射して脳血流などの情報を検出する場合、生体内部での光の減衰率が非常に大きい。例えば、入射光に対して出射光が、１００万分の１程度にまで減衰し得る。このため、内部散乱成分Ｉ２を検出するには、１パルスの照射だけでは光量が不足する場合がある。レーザ安全性基準のクラス１での照射では、特に光量が微弱である。この場合、光源２０が光パルスを複数回出射し、それに応じて光検出器３０も電子シャッタによって複数回露光することにより、検出信号を積算して感度を向上することができる。
【００７３】
以下、光検出器３０の構成例を説明する。
【００７４】
光検出器３０は、撮像面上に２次元的に配列された複数の画素を備え得る。各画素は、例えばフォトダイオードなどの光電変換素子と、１つまたは複数の電荷蓄積部とを備え得る。以下、各画素が、光電変換によって受光量に応じた信号電荷を発生させる光電変換素子と、光パルスの表面反射成分Ｉ１によって生じた信号電荷を蓄積する電荷蓄積部と、光パルスの内部散乱成分Ｉ２によって生じた信号電荷を蓄積する電荷蓄積部とを備える例を説明する。以下の例では、制御回路６０は、光検出器３０に、ユーザ５００の頭部から戻ってきた光パルス中の立ち下がり開始前の部分を検出させることにより、表面反射成分Ｉ１を検出させる。制御回路６０はまた、光検出器３０に、ユーザ５００の頭部から戻ってきた光パルス中の立ち下がり開始後の部分を検出させることにより、内部散乱成分Ｉ２を検出させる。この例における光源２０は２種類の波長の光を出射する。
【００７５】
図１Ｄは、光検出器３０の１つの画素２０１の概略的な構成の例を示す図である。なお、図１Ｄは、１つの画素２０１の構成を模式的に示しており、実際の構造を必ずしも反映していない。この例における画素２０１は、光電変換を行うフォトダイオード２０３と、電荷蓄積部である第１の浮遊拡散層（Ｆｌｏａｔｉｎｇ  Ｄｉｆｆｕｓｉｏｎ）２０４、第２の浮遊拡散層２０５、第３の浮遊拡散層２０６、および第４の浮遊拡散層２０７と、信号電荷を排出するドレイン２０２とを含む。
【００７６】
１回の光パルスの出射に起因して各画素に入射したフォトンは、フォトダイオード２０３によって信号電荷である信号エレクトロンに変換される。変換された信号エレクトロンは、制御回路６０から入力される制御信号に従って、ドレイン２０２に排出されるか、第１の浮遊拡散層２０４から第４の浮遊拡散層２０７のいずれかに振り分けられる。
【００７７】
光源２０からの光パルスの出射と、第１の浮遊拡散層２０４、第２の浮遊拡散層２０５、第３の浮遊拡散層２０６、および第４の浮遊拡散層２０７への信号電荷の蓄積と、ドレイン２０２への信号電荷の排出が、この順序で繰り返し行われる。この繰り返し動作は高速であり、例えば動画像の１フレームの時間内に数万回から数億回繰り返され得る。１フレームの時間は、例えば約１／３０秒である。画素２０１は、最終的に、第１の浮遊拡散層２０４から第４の浮遊拡散層２０７に蓄積された信号電荷に基づく４つの画像信号を生成して出力する。
【００７８】
この例における制御回路６０は、光源２０に、第１の波長を有する第１の光パルスと、第２の波長を有する第２の光パルスとを、順に繰り返し出射させる。第１の波長および第２の波長として、ユーザ５００の内部組織での吸収率が異なる２波長を選択することにより、ユーザ５００の状態を分析することができる。例えば、第１の波長として８０５ｎｍよりも長い波長を選択し、第２の波長として８０５ｎｍよりも短い波長を選択してもよい。これにより、ユーザ５００の血液中の酸素化ヘモグロビン濃度および脱酸素化ヘモグロビン濃度のそれぞれの変化を検出することが可能になる。
【００７９】
制御回路６０は、まず、光源２０に、第１の光パルスを出射させる。制御回路６０は、第１の光パルスの表面反射成分Ｉ１がフォトダイオード２０３に入射している第１の期間に、第１の浮遊拡散層２０４に信号電荷を蓄積させる。続いて、制御回路６０は、第１の光パルスの内部散乱成分Ｉ２がフォトダイオード２０３に入射している第２の期間に、第２の浮遊拡散層２０５に信号電荷を蓄積させる。次に、制御回路６０は、光源２０に、第２の光パルスを出射させる。制御回路６０は、第２の光パルスの表面反射成分Ｉ１がフォトダイオード２０３に入射している第３の期間に、第３の浮遊拡散層２０６に信号電荷を蓄積させる。続いて、制御回路６０は、第２の光パルスの内部散乱成分Ｉ２がフォトダイオード２０３に入射している第４の期間に、第４の浮遊拡散層２０７に信号電荷を蓄積させる。
【００８０】
このように、制御回路６０は、第１の光パルスの出射を開始した後、所定の時間差を空けて、第１の浮遊拡散層２０４および第２の浮遊拡散層２０５に、フォトダイオード２０３からの信号電荷を順次蓄積させる。その後、制御回路６０は、第２の光パルスの出射を開始した後、上記所定の時間差を空けて、第３の浮遊拡散層２０６および第４の浮遊拡散層２０７に、フォトダイオード２０３からの信号電荷を順次蓄積させる。以上の動作が、複数回繰り返される。外乱光および環境光の光量を推定するために、光源２０を消灯した状態で、不図示の他の浮遊拡散層に信号電荷を蓄積する期間を設けてもよい。第１の浮遊拡散層２０４から第４の浮遊拡散層２０７の信号電荷量から、上記他の浮遊拡散層の信号電荷量を差し引くことにより、外乱光および環境光成分を除去した信号を得ることができる。
【００８１】
なお、本実施形態では、電荷蓄積部の数を４としているが、目的に応じて２以上の複数の数に設計してよい。例えば、１種類の波長のみを用いて、表面反射成分Ｉ１と内部散乱成分Ｉ２とを検出する場合には、電荷蓄積部の数は２であってよい。また、使用する波長が１種類であり、表面反射成分Ｉ１が検出されない場合には、画素ごとの電荷蓄積部の数は１であってもよい。また、２種類以上の波長を用いる場合であっても、それぞれの波長を用いた撮像を別のフレームで行えば、電荷蓄積部の数は１であってもよい。同様に、表面反射成分Ｉ１および内部散乱成分Ｉ２の両方の検出を行う場合であっても、両者をそれぞれ別のフレームで検出する構成では、電荷蓄積部の数は１であってもよい。
【００８２】
図１Ｅは、光検出器３０の構成の一例を示す図である。図１Ｅにおいて、二点鎖線の枠によって囲まれた領域が１つの画素２０１に相当する。画素２０１には１つのフォトダイオードが含まれる。図１Ｅでは２行２列に配列された４画素のみを示しているが、実際にはさらに多数の画素が配置され得る。画素２０１は、第１の浮遊拡散層２０４から第４の浮遊拡散層２０７を含む。第１の浮遊拡散層２０４から第４の浮遊拡散層２０７に蓄積される信号は、あたかも一般的なＣＭＯＳイメージセンサの４画素の信号のように取り扱われ、光検出器３０から出力される。
【００８３】
各画素２０１は、４つの信号検出回路を有する。各信号検出回路は、ソースフォロワトランジスタ３０９と、行選択トランジスタ３０８と、リセットトランジスタ３１０とを含む。この例では、リセットトランジスタ３１０が図１Ｄに示すドレイン２０２に対応し、リセットトランジスタ３１０のゲートに入力されるパルスがドレイン排出パルスに対応する。各トランジスタは、例えば半導体基板に形成された電界効果トランジスタであるが、これに限定されない。図示されるように、ソースフォロワトランジスタ３０９の入力端子および出力端子の一方と、行選択トランジスタ３０８の入力端子および出力端子のうちの一方とが接続されている。ソースフォロワトランジスタ３０９の入力端子および出力端子の上記一方は、典型的にはソースである。行選択トランジスタ３０８の入力端子および出力端子の上記一方は、典型的にはドレインである。ソースフォロワトランジスタ３０９の制御端子であるゲートは、フォトダイオード２０３に接続されている。フォトダイオード２０３によって生成された正孔または電子の信号電荷は、フォトダイオード２０３とソースフォロワトランジスタ３０９との間の電荷蓄積部である浮遊拡散層に蓄積される。
【００８４】
図１Ｅには示されていないが、第１の浮遊拡散層２０４から第４の浮遊拡散層２０７はフォトダイオード２０３に接続される。フォトダイオード２０３と、第１の浮遊拡散層２０４から第４の浮遊拡散層２０７の各々との間には、スイッチが設けられ得る。このスイッチは、制御回路６０からの信号蓄積パルスに応じて、フォトダイオード２０３と第１の浮遊拡散層２０４から第４の浮遊拡散層２０７の各々との間の導通状態を切り替える。これにより、第１の浮遊拡散層２０４から第４の浮遊拡散層２０７の各々への信号電荷の蓄積の開始と停止とが制御される。本実施形態における電子シャッタは、このような露光制御のための機構を有する。
【００８５】
第１の浮遊拡散層２０４から第４の浮遊拡散層２０７に蓄積された信号電荷は、行選択回路３０２によって行選択トランジスタ３０８のゲートがＯＮにされることにより、読み出される。この際、第１の浮遊拡散層２０４から第４の浮遊拡散層２０７の信号電位に応じて、ソースフォロワ電源３０５からソースフォロワトランジスタ３０９およびソースフォロワ負荷３０６へ流入する電流が増幅される。垂直信号線３０４から読み出されるこの電流によるアナログ信号は、列ごとに接続されたアナログ−デジタル（ＡＤ）変換回路３０７によってデジタル信号データに変換される。このデジタル信号データは、列選択回路３０３によって列ごとに読み出され、光検出器３０から出力される。行選択回路３０２および列選択回路３０３は、１つの行の読出しを行った後、次の行の読み出しを行い、以下同様に、全ての行の浮遊拡散層の信号電荷の情報を読み出す。制御回路６０は、全ての信号電荷を読み出した後、リセットトランジスタ３１０のゲートをオンにすることにより、全ての浮遊拡散層をリセットする。これにより、１つのフレームの撮像が完了する。以下同様に、フレームの高速撮像を繰り返すことにより、光検出器３０による一連のフレームの撮像が完結する。
【００８６】
本実施形態では、ＣＭＯＳ型の光検出器３０の例を説明したが、光検出器３０は他の種類の撮像素子であってもよい。光検出器３０は、例えば、ＣＣＤ型であっても、単一光子計数型素子であっても、ＥＭＣＣＤまたはＩＣＣＤなどの増幅型イメージセンサであってもよい。
【００８７】
図１Ｆは、本実施形態における１フレーム内の動作の例を示す図である。図１Ｆに示すように、１フレーム内で、第１の光パルスの出射と第２の光パルスの出射とを交互に複数回切り替えてもよい。このようにすると、２種類の波長による検出画像の取得タイミングの時間差を低減でき、動きがあるユーザであっても、ほぼ同時に第１の光パルスおよび第２の光パルスによる撮影が可能である。
【００８８】
本実施形態では、光検出器３０は、光パルスの表面反射成分Ｉ１および／または内部散乱成分Ｉ２を検出することができる。表面反射成分Ｉ１の時間的または空間的な変化から、ユーザ５００の第１の生体情報を取得することができる。第１の生体情報は、例えば、ユーザ５００の脈拍であり得る。一方、内部散乱成分Ｉ２の時間的または空間的な変化から、ユーザ５００の第２の生体情報である脳活動情報を取得することができる。
【００８９】
第１の生体情報は、表面反射成分Ｉ１を検出する方法とは異なる方法によって取得してもよいし、そもそも取得されなくてもよい。例えば、光検出器３０とは異なる他の種類の検出器を利用して、第１の生体情報を取得してもよい。その場合、光検出器３０は、内部散乱成分Ｉ２のみを検出する。他の種類の検出器は、例えばレーダまたはサーモグラフィであってもよい。第１の生体情報は、例えば、ユーザ５００の脈拍、発汗、呼吸、および体温からなる群から選択される少なくとも１つであり得る。第１の生体情報は、ユーザ５００の頭部に照射された光パルスの内部散乱成分Ｉ２を検出することにより得られる脳活動情報以外の生体情報である。ここで、「脳活動情報以外」とは、第１の生体情報中に脳活動に起因する情報が一切含まれないことを意味するものではない。第１の生体情報は、脳活動とは別の生体活動に起因する生体情報が含まれている。第１の生体情報は、例えば、自律的または反射的な生体活動に起因する生体情報であり得る。
【００９０】
［１−４．制御回路６０および信号処理回路７０］
制御回路６０は、光源２０の光パルスの出射タイミングと、光検出器３０のシャッタタイミングとの時間差を調整する。本明細書では、当該時間差を「位相差」と称することがある。光源２０の「出射タイミング」とは、光源２０から出射される光パルスが立ち上がりを開始するタイミングである。「シャッタタイミング」とは、露光を開始するタイミングである。制御回路６０は、出射タイミングを変化させて位相差を調整してもよいし、シャッタタイミングを変化させて位相差を調整してもよい。
【００９１】
制御回路６０は、光検出器３０の各画素によって検出された信号からオフセット成分を取り除くように構成されてもよい。オフセット成分は、太陽光もしくは蛍光灯などの環境光、または外乱光による信号成分である。光源２０の駆動をＯＦＦにして光源２０から光が出射されない状態で、光検出器３０によって信号を検出することにより、環境光または外乱光によるオフセット成分が見積もられる。
【００９２】
制御回路６０は、例えばプロセッサおよびメモリの組み合わせ、またはプロセッサおよびメモリを内蔵するマイクロコントローラなどの集積回路であり得る。制御回路６０は、例えばプロセッサがメモリに記録されたプログラムを実行することにより、例えば出射タイミングとシャッタタイミングとの調整を行う。
【００９３】
信号処理回路７０は、光検出器３０から出力された画像信号を処理する回路である。信号処理回路７０は、画像処理などの演算処理を行う。信号処理回路７０は、例えばデジタルシグナルプロセッサ（ＤＳＰ）、フィールドプログラマブルゲートアレイ（ＦＰＧＡ）などのプログラマブルロジックデバイス（ＰＬＤ）、または中央演算処理装置（ＣＰＵ）もしくは画像処理用演算プロセッサ（ＧＰＵ）とコンピュータプログラムとの組み合わせによって実現され得る。制御回路６０および信号処理回路７０は、統合された１つの回路であってもよいし、分離された個別の回路であってもよい。信号処理回路７０は、例えば遠隔地に設けられたサーバなどの外部の装置の構成要素であってもよい。この場合、サーバなどの外部の装置は、無線通信または有線通信により、光源２０、光検出器３０、および制御回路６０と相互にデータの送受信を行う。
【００９４】
本実施形態における信号処理回路７０は、光検出器３０から出力された信号に基づき、皮膚表面の血流および脳血流の時間変化を示す動画像データを生成することができる。信号処理回路７０は、そのような動画像データに限らず、他の情報を生成してもよい。例えば、他の機器と同期させることにより、脳における血流量、血圧、血中酸素飽和度、または心拍数などの生体情報を生成してもよい。信号処理回路７０は、外乱光によるオフセット成分の見積り、およびオフセット成分の除去を行ってもよい。
【００９５】
脳血流量またはヘモグロビンなどの血液内成分の変化と、人間の神経活動との間には密接な関係があることが知られている。例えば、人間の感情の変化に応じて神経細胞の活動が変化することにより、脳血流量または血液内の成分が変化する。したがって、脳血流量または血液内成分の変化などの生体情報を計測できれば、ユーザ５００の心理状態を推定することができる。ユーザ５００の心理状態は、例えば、気分、感情、健康状態、または温度感覚を意味する。気分は、例えば、快、または不快といった気分を含み得る。感情は、例えば、安心、不安、悲しみ、または憤りといった感情を含み得る。健康状態は、例えば、元気、または倦怠といった状態を含み得る。温度感覚は、例えば、暑い、寒い、または蒸し暑いといった感覚を含み得る。これらに派生して、脳活動の程度を表す指標、例えば熟練度、習熟度、および集中度も、心理状態に含まれ得る。信号処理回路７０は、例えば脳血流量の変化に基づいて、ユーザ５００の集中度などの心理状態を推定することができる。特に、脳の前頭前野領域に相当する額部の脳血流は、集中の状態を反映していると考えられる。マインドフルネスは、集中の状態と密接に関連する。額部の脳血流量またはその成分を計測することにより、ユーザ５００の集中度あるいはマインドフルネスの度合いを推定することができる。
【００９６】
図１Ｇは、制御回路６０による光源２０および光検出器３０に関する動作の概略を示すフローチャートである。制御回路６０は、概略的には図１Ｇに示す動作を実行する。なお、ここでは内部散乱成分Ｉ２の検出のみを行う場合の動作を説明する。
【００９７】
ステップＳ１０１では、制御回路６０は、まず、光源２０に所定時間だけ光パルスを出射させる。このとき、光検出器３０の電子シャッタは露光を停止した状態にある。制御回路６０は、光パルスの一部がユーザ５００の表面で反射されて光検出器３０に到達する期間が完了するまで、電子シャッタに露光を停止させる。次に、ステップＳ１０２では、制御回路６０は、当該光パルスの他の一部がユーザ５００の内部で散乱されて光検出器３０に到達するタイミングで、電子シャッタに露光を開始させる。所定時間経過後、ステップＳ１０３において、制御回路６０は、電子シャッタに露光を停止させる。続いて、ステップＳ１０４では、制御回路６０は、上記の信号蓄積を実行した回数が所定の回数に達したか否かを判定する。ステップＳ１０４での判定がＮｏの場合、Ｙｅｓと判定するまで、ステップＳ１０１からステップＳ１０３が繰り返される。ステップＳ１０４での判定がＹｅｓの場合、ステップＳ１０５では、制御回路６０は、各浮遊拡散層に蓄積された信号電荷に基づく画像を示す信号を光検出器３０に生成させて出力させる。
【００９８】
以上の動作により、計測対象の内部で散乱された光の成分を高い感度で検出することができる。なお、複数回の光出射および露光は必須ではなく、必要に応じて行われる。
【００９９】
［１−５．その他］
生体計測装置１００は、ユーザ５００の２次元像を光検出器３０の受光面上に形成する結像光学系を備えてもよい。結像光学系の光軸は、光検出器３０の受光面に略直交する。結像光学系は、ズームレンズを含んでいてもよい。ズームレンズの位置が変化するとユーザ５００の２次元像の拡大率が変化し、光検出器３０上の２次元像の解像度が変化する。したがって、ユーザ５００までの距離が遠くても、所望の計測領域を拡大して詳細に観察することが可能である。
【０１００】
生体計測装置１００は、ユーザ５００と光検出器３０との間に、光源２０から出射される波長帯域の光、またはその近傍の光のみを通過させる帯域通過フィルタを備えていてもよい。これにより、環境光などの外乱成分の影響を低減することができる。帯域通過フィルタは、例えば多層膜フィルタまたは吸収フィルタによって構成され得る。光源２０の温度変化およびフィルタへの斜入射に伴う帯域シフトを考慮して、帯域通過フィルタの帯域幅は、２０から１００ｎｍ程度の幅を持たせてもよい。
【０１０１】
生体計測装置１００は、光源２０とユーザ５００との間、および光検出器３０とユーザ５００との間に、それぞれ偏光板を備えてもよい。この場合、光源２０側に配置される偏光板と、光検出器３０側に配置される偏光板との偏光方向は、直交ニコルの関係であり得る。これにより、ユーザ５００の表面反射成分Ｉ１のうち正反射成分、すなわち入射角と反射角が同じ成分が光検出器３０に到達することを防ぐことができる。つまり、表面反射成分Ｉ１が光検出器３０に到達する光量を低減させることができる。
【０１０２】
［２．光源および光検出器の動作］
本実施形態における生体計測装置１００は、表面反射成分Ｉ１と内部散乱成分Ｉ２とを区別して検出することができる。ユーザ５００の対象部が額である場合、検出したい内部散乱成分Ｉ２による信号強度は、非常に小さくなる。前述のように、レーザ安全基準を満たす非常に小さな光量の光が照射されることに加えて、頭皮、脳髄液、頭蓋骨、灰白質、白質および血流による光の散乱および吸収が大きいためである。さらに、脳活動時の血流量または血流内成分の変化による信号強度の変化は、さらに数十分の１の大きさに相当し非常に小さくなる。したがって、内部散乱成分Ｉ２を検出する場合、撮像の際、検出したい信号成分の数千倍から数万倍である表面反射成分Ｉ１は、可能な限り除去される。
【０１０３】
以下、内部散乱成分Ｉ２を検出する生体計測装置１００における光源２０および光検出器３０の動作の例を説明する。
【０１０４】
図１Ａに示すように、光源２０がユーザ５００の対象部を光パルスで照射すると、表面反射成分Ｉ１および内部散乱成分Ｉ２が発生する。表面反射成分Ｉ１および内部散乱成分Ｉ２は各々の一部が光検出器３０に到達する。内部散乱成分Ｉ２は、光源２０から出射して、光検出器３０に到達するまでにユーザ５００の対象部の内部を通過する。このため、内部散乱成分Ｉ２の光路長は、表面反射成分Ｉ１の光路長よりも長くなる。したがって、内部散乱成分Ｉ２が光検出器３０に到達する時間は、表面反射成分Ｉ１が光検出器３０に到達する時間よりも平均的に遅れる。
【０１０５】
図２は、光源２０から矩形波の光パルスが出射された場合において、ユーザ５００の頭部から戻ってきた反射光パルスの光強度の波形を模式的に示す図である。横軸は、図２の波形（ａ）から波形（ｄ）ではいずれも時間（ｔ）を表す。縦軸は、図２の波形（ａ）から波形（ｃ）では強度を表し、波形（ｄ）では電子シャッタのＯＰＥＮまたはＣＬＯＳＥの状態を表す。図２の波形（ａ）は、表面反射成分Ｉ１を示す。図２の波形（ｂ）は、内部散乱成分Ｉ２を示す。図２の波形（ｃ）は、表面反射成分Ｉ１および内部散乱成分Ｉ２の合算成分を示す。図２の波形（ａ）に示すように、表面反射成分Ｉ１の波形は、ほぼ矩形を維持する。一方、内部散乱成分Ｉ２は、さまざまな光路長の光の合算である。このため、図２の波形（ｂ）に示すように、内部散乱成分Ｉ２は、光パルスの後端が尾を引いたような特性を示す。言い換えれば、内部散乱成分Ｉ２の立ち下がり期間は、表面反射成分Ｉ１の立ち下がり期間よりも長くなる。図２の波形（ｃ）に示す光信号から内部散乱成分Ｉ２の割合を高めて抽出するために、図２の波形（ｄ）に示す通り、表面反射成分Ｉ１の後端が到達する時点以降に、電子シャッタの露光が開始される。言い換えれば、表面反射成分Ｉ１の波形が立ち下がった時またはその後に露光が開始される。このシャッタタイミングは、制御回路６０によって調整される。
【０１０６】
測定対象物が平面的でない場合、光検出器３０の画素によって光が到達するタイミングが異なる。この場合、画素ごとに図２の波形（ｄ）に示すシャッタタイミングを個別に決定してもよい。例えば、光検出器３０の受光面に垂直な方向をｚ方向とする。制御回路６０は、対象部の表面におけるｚ座標の２次元分布を示すデータを予め取得し、このデータに基づいてシャッタタイミングを画素ごとに変化させてもよい。これにより、対象部の表面が湾曲している場合でも、それぞれの位置で最適なシャッタタイミングを決定することができる。
【０１０７】
図２の波形（ａ）に示す例では、表面反射成分Ｉ１の後端が垂直に立ち下がっている。言い換えると、表面反射成分Ｉ１が立ち下がりを開始してから終了するまでの時間がゼロである。しかし、現実には、表面反射成分Ｉ１の後端が垂直に立ち下がらない場合がある。例えば、光源２０から出射される光パルスの波形の立下りが完全に垂直でない場合、対象部の表面に微細な凹凸がある場合、または表皮内で散乱が生じる場合には、表面反射成分Ｉ１の後端が垂直に立ち下がらない。また、ユーザ５００は不透明な物体であることから、表面反射成分Ｉ１の光量は、内部散乱成分Ｉ２の光量よりも非常に大きい。したがって、表面反射成分Ｉ１の後端が垂直な立ち下がりの時点からわずかにはみ出した場合であっても、内部散乱成分Ｉ２が埋もれてしまう可能性がある。さらに、電子シャッタの読み出し期間中に、電子の移動に伴う時間遅れが発生する場合もある。以上のことから、図２の波形（ｄ）に示すような理想的なバイナリの読み出しを実現できないことがある。その場合には、制御回路６０は、電子シャッタのシャッタ開始のタイミングを表面反射成分Ｉ１の立ち下がり直後よりやや遅らせてもよい。例えば、０．５ｎｓから５ｎｓ程度遅らせてもよい。電子シャッタのシャッタタイミングを調整する代わりに、制御回路６０は、光源２０の出射タイミングを調整してもよい。言い換えれば、制御回路６０は、電子シャッタのシャッタタイミングと光源２０の出射タイミングとの時間差を調整してもよい。非接触で脳内の血流量または血流内成分の変化を計測する場合、あまりにもシャッタタイミングを遅らせすぎると、もともと小さい内部散乱成分Ｉ２がさらに減少してしまう。このため、表面反射成分Ｉ１の後端近傍にシャッタタイミングを留めておいてもよい。前述のように、額内部の散乱による時間遅れは、４ｎｓ程度である。この場合、シャッタタイミングの最大の遅らせ量は、４ｎｓ程度であり得る。
【０１０８】
光源２０から出射された複数の光パルスの各々を、同じ時間差のシャッタタイミングで露光して信号を蓄積してもよい。これにより、内部散乱成分Ｉ２の検出光量が増幅される。
【０１０９】
ユーザ５００と光検出器３０の間に帯域通過フィルタを配置することに替えて、またはそれに加えて、光源２０に光を出射させない状態で、同じ露光期間で撮影することによってオフセット成分を見積もってもよい。見積もったオフセット成分は、光検出器３０の各画素によって検出された信号から差分によって除去される。これにより、光検出器３０上で発生する暗電流成分を除去することができる。
【０１１０】
内部散乱成分Ｉ２には、ユーザ５００の内部特性情報、例えば、脳血流情報が含まれる。ユーザ５００の脳血流量の時間的な変動に応じて、血液に吸収される光の量が変化する。その結果、光検出器３０による検出光量も、相応に増減する。したがって、内部散乱成分Ｉ２をモニタリングすることにより、ユーザ５００の脳血流量の変化から脳活動状態を推定することが可能になる。
【０１１１】
次に、表面反射成分Ｉ１の検出方法の例を説明する。表面反射成分Ｉ１には、ユーザ５００の表面特性情報、例えば、顔および頭皮の血流情報が含まれる。なお、表面反射成分Ｉ１の情報は、必ずしも取得される必要はなく、必要に応じて取得される。
【０１１２】
図３Ａは、表面反射成分Ｉ１を検出する場合のタイミングチャートの一例を模式的に示す図である。表面反射成分Ｉ１の検出のために、例えば、図３Ａに示すように、光パルスが光検出器３０に到達する前にシャッタをＯＰＥＮにし、光パルスの後端が到達するよりも前にシャッタをＣＬＯＳＥにしてもよい。このようにシャッタを制御することにより、内部散乱成分Ｉ２の混入を少なくすることができる。その結果、ユーザ５００の表面近傍を通過した光の割合を大きくすることができる。シャッタＣＬＯＳＥのタイミングを、光検出器３０への光の到達直後にしてもよい。これにより、光路長が比較的短い表面反射成分Ｉ１の割合を高めた信号検出が可能になる。表面反射成分Ｉ１の信号を取得することにより、ユーザ５００の脈拍、または顔血流の酸素化度を検出することも可能になる。表面反射成分Ｉ１の他の取得方法として、光検出器３０が光パルス全体を検出したり、光源２０から出射された連続光を検出したりしてもよい。
【０１１３】
図３Ｂは、内部散乱成分Ｉ２を検出する場合のタイミングチャートの一例を模式的に示す図である。パルスの後端部分が光検出器３０に到達する期間にシャッタをＯＰＥＮにすることにより、内部散乱成分Ｉ２の信号を取得することができる。
【０１１４】
図３Ｂに示す動作をまとめると、制御回路６０は、以下の動作を行う。制御回路６０は、光源２０に、１つ以上の光パルスを出射させる。制御回路６０は、光検出器３０に、ユーザ５００の対象部から戻ってきた各光パルスのうち、各光パルスの立ち下がり期間に含まれる成分を検出させる。当該成分は、内部散乱成分Ｉ２を含む。制御回路６０は、光検出器３０に、当該検出によって得られる信号を出力させる。信号処理回路７０は、当該信号に基づいて、ユーザ５００の脳活動の状態を示す信号を生成する。
【０１１５】
表面反射成分Ｉ１を、内部散乱成分Ｉ２を取得する生体計測装置１００以外の装置によって検出してもよい。内部散乱成分Ｉ２を取得する装置とは別の装置、または脈波計もしくはドップラ血流計といった別デバイスを用いてもよい。その場合、当該別デバイスは、デバイス間のタイミング同期、光の干渉、および検出箇所の合わせこみを考慮して使用される。本実施形態のように、同一カメラまたは同一センサによる時分割撮像を行えば、時間的および空間的なずれが発生しにくい。同一のセンサによって表面反射成分Ｉ１および内部散乱成分Ｉ２の両方の信号を取得する場合、図３Ａおよび図３Ｂに示すように、１フレームごとに取得する成分を切り替えてもよい。あるいは、図１Ｄから図１Ｆを参照して説明したように、１フレーム内で高速に取得する成分を交互に切り替えてもよい。その場合、表面反射成分Ｉ１と内部散乱成分Ｉ２との検出時間差を低減することができる。
【０１１６】
さらに、表面反射成分Ｉ１および内部散乱成分Ｉ２のそれぞれの信号を、２つの波長の光を用いて取得してもよい。例えば、７５０ｎｍおよび８５０ｎｍの２波長の光パルスを利用してもよい。これにより、それぞれの波長での検出光量の変化から、酸素化ヘモグロビンの濃度変化および脱酸素化ヘモグロビンの濃度変化を算出することができる。表面反射成分Ｉ１および内部散乱成分Ｉ２を、それぞれ２波長で取得する場合、例えば図１Ｄから図１Ｆを参照して説明したように、４種類の電荷蓄積を１フレーム内で高速に切り替える方法が利用され得る。そのような方法により、検出信号の時間的なずれを低減することができる。
【０１１７】
ここで、脳血流情報の取得方法のより具体的な例を説明する。
【０１１８】
血液の大きな役割は、酸素を肺から受け取って組織へと運び、組織からは二酸化炭素を受け取ってこれを肺に循環させることである。血液１００ｍｌの中には約１５ｇのヘモグロビンが存在している。酸素と結合したヘモグロビンが酸素化ヘモグロビンであり、酸素と結合していないヘモグロビンが脱酸素化ヘモグロビンである。前述のように、酸素化ヘモグロビンおよび脱酸素化ヘモグロビンの光吸収特性は異なる。酸素化ヘモグロビンは約８０５ｎｍを超える波長の近赤外線を比較的よく吸収する。これに対し、脱酸素化ヘモグロビンは、８０５ｎｍよりも短い波長の近赤外線または赤色光を比較的よく吸収する。８０５ｎｍの波長の近赤外線については、両者の吸収率は同程度である。そこで、６００ｎｍよりも長く８０５ｎｍよりも短い第１の波長と、８０５ｎｍよりも長く１０００ｎｍよりも短い第２の波長とが用いられ得る。例えば、上記の７５０ｎｍおよび８５０ｎｍの２波長の光が用いられ得る。これらの光の検出光量に基づいて、血液中の酸素化ヘモグロビンおよび脱酸素化ヘモグロビンのそれぞれの濃度の時間変化を検出することができる。さらに、ヘモグロビンの酸素飽和度を求めることもできる。酸素飽和度とは、血液中のヘモグロビンのうち、どれだけの割合が酸素と結びついているかを示す値である。酸素飽和度は、脱酸素化ヘモグロビンの濃度をＣ（Ｈｂ）、酸素化ヘモグロビンの濃度をＣ（ＨｂＯ２）として、以下の数式で定義される。
酸素飽和度＝Ｃ（ＨｂＯ２）／［Ｃ（ＨｂＯ２）＋Ｃ（Ｈｂ）］×１００（％）
【０１１９】
生体内には、血液以外にも赤色光および近赤外光を吸収する成分が含まれている。しかし、光の吸収率が時間的に変動するのは、主に動脈血中のヘモグロビンに起因する。よって、吸収率の変動に基づいて、高い精度で血中酸素飽和度を測定することができる。
【０１２０】
脳まで到達した光は、頭皮および顔表面も通過する。このため、頭皮および顔の血流の変動も重畳されて検出される。その影響を除去または低減するために、信号処理回路７０は、光検出器３０によって検出された内部散乱成分Ｉ２から表面反射成分Ｉ１を減算する処理を行ってもよい。これにより、頭皮および顔の血流情報を除いた純粋な脳血流情報を取得することができる。減算方法には、例えば、内部散乱成分Ｉ２の信号から、光路長差を考慮して決定された１以上のある係数を表面反射成分Ｉ１の信号に掛けた値を減算する方法が用いられ得る。この係数は、例えば、一般的な人の頭部光学定数の平均値に基づいて、シミュレーションまたは実験によって算出され得る。このような減算処理は、同一のカメラまたはセンサにより、同一の波長の光を用いて計測する場合に容易に行うことができる。時間的および空間的なずれを低減しやすく、内部散乱成分Ｉ２に含まれる頭皮血流成分と、表面反射成分Ｉ１の特性とを一致させやすいからである。
【０１２１】
脳と頭皮との間には頭蓋骨が存在する。このため、脳血流の２次元分布と、頭皮および顔の血流の２次元分布とは独立である。したがって、光検出器３０によって検出される信号に基づいて、内部散乱成分Ｉ２の２次元分布と表面反射成分Ｉ１の２次元分布とを、独立成分分析または主成分分析などの統計手法を用いて分離してもよい。
【０１２２】
［３．脳血流量の変化の検出例］
次に、ユーザ５００の脳血流量の変化を検出する方法の例を説明する。
【０１２３】
図４Ａは、脳血流量の時間変化の一例を模式的に示す図である。図４Ａに示すように、ユーザ５００の対象部５００ｔが光源２０からの光で照射され、その戻り光が検出される。この場合、表面反射成分Ｉ１は、内部散乱成分Ｉ２に比べ非常に大きい。しかし、前述したシャッタ調整により、内部散乱成分Ｉ２のみを抽出することができる。図４Ａに示すグラフは、脳血液中の酸素化ヘモグロビン（ＨｂＯ２）および脱酸素化ヘモグロビン（Ｈｂ）のそれぞれの濃度の経時変化の例を示している。この例における内部散乱成分Ｉ２は、２波長の光を用いて取得される。図４Ａに示す濃度は、平常時における量を基準とする変化量を示している。この変化量は、光の強度信号に基づいて、信号処理回路７０によって算出される。平常状態、集中状態、またはリラックス状態などの脳活動状態に応じて、脳血流量に変化が見られる。対象部の場所ごとに、例えば、脳活動の違い、または吸収係数もしくは散乱係数の違いがある。このため、ユーザ５００の対象部５００ｔ内の同じ位置で脳血流の経時変化が計測される。脳活動の経時変化を見る場合、脳血流の絶対量がわからなくても、脳血流の時間的な相対変化から、対象者の状態を推定することが可能である。
【０１２４】
図４Ｂは、ユーザ５００の対象部５００ｔ内の複数箇所で計測を同時に行う場合の例を模式的に示す図である。この例では、２次元照射または２次元撮像のため、脳血流量の２次元分布を取得することが可能である。この場合、光源２０の照射パターンは、例えば、均一強度の一様な分布、ドット状の分布、またはドーナツ状の分布であってもよい。均一強度の一様な分布の照射であれば、対象部５００ｔ上の照射位置の調整が不要、または簡便にできる。一様な分布の照射であれば、広範囲からユーザ５００の対象部に光が入射する。このため、光検出器３０によって検出される信号を増強することができる。さらに、照射領域内であれば任意の位置で計測できる。ドット状の分布、またはドーナツ状の分布のような部分的な照射であれば、対象部５００ｔをその照射領域から外すだけで表面反射成分Ｉ１の影響を低減できる。
【０１２５】
図５Ａは、光の照射領域２２の例を模式的に示す図である。非接触での脳血流測定では、装置から対象部までの距離の２乗に反比例して検出光量が減衰する。そこで、光検出器３０によって検出される各画素の信号を近傍の複数の画素の信号を積算することによって増強してもよい。このようにすることでＳＮ比を維持したまま積算パルス数を低減できる。これにより、フレームレートを向上させることができる。
【０１２６】
図５Ｂは、ユーザ５００の対象部５００ｔが横方向にシフトした場合における信号の変化を模式的に示す図である。前述のように、平常状態から脳活動状態が変化したときの脳血流量と、平常状態における脳血流量との差分を検出することにより、脳活動の変化が読み取られる。２次元的に配列された複数の光電変換素子を備える光検出器３０を使用する場合、図５Ｂの上の図に示すように、２次元の脳活動分布を取得することができる。この場合、平常状態における信号を事前に取得しなくても、２次元分布内での相対的な強度分布から脳活動が活発な部位を検出することができる。本実施形態では非接触で計測が行われるため、図５Ｂの下の図に示すように、対象部５００ｔの位置が計測中に変化してしまうことがある。これは、例えばユーザ５００が呼吸のために僅かに動いた場合に生じ得る。一般に、脳血流量の２次元分布は微小時間内で急激に変化しない。このため、例えば、検出された２次元分布のフレーム間でのパターンマッチングにより、対象部５００ｔの位置ずれを補正することができる。あるいは、呼吸のような周期的な動きであれば、その周波数成分のみを抽出し補正または除去してもよい。対象部５００ｔは、単一の領域である必要はなく、複数の領域であってもよい。当該複数の領域は、例えば、左右１個ずつ、あるいは、２×６のマトリックス状のドット分布であってもよい。
【０１２７】
［４．マインドフルネスの熟達度の判定］
次に、生体計測装置１００を用いてマインドフルネス状態になることについてのユーザ５００の熟達度を判定する方法の例を説明する。
【０１２８】
前述のように、反射光の内部散乱成分Ｉ２に基づいて、ユーザ５００の脳活動を推定することができる。この特性を利用して、ユーザ５００がマインドフルネス状態になることについてどの程度熟達しているかを推定することができる。
【０１２９】
本実施形態では、ユーザ５００をマインドフルネス状態に誘導する刺激の一例として、マインドフルネス瞑想のための音声ガイドが使用される。ユーザ５００は、刺激装置１０のスピーカから出力される音声ガイドに従って瞑想を行う。音声ガイドが再生されている間、光源２０は、ユーザ５００の頭部に向けて光パルスを一定の時間間隔で繰り返し出射し、光検出器３０は、反射光パルスの内部散乱成分の信号を画素ごとに蓄積する。本実施形態では、同様の動作が、音声ガイドが再生される直前および直後の各期間においても行われる。
【０１３０】
図６は、本実施形態におけるマインドフルネスの熟達度の１回の判定動作の流れを時間軸上に表した図である。本実施形態における１回の判定動作は、３つの期間から構成される。第１の期間は、音声ガイドが再生される直前の所定の時間長の期間である。第１の期間を「レストＡ期間」と称する。第２の期間は、音声ガイドが再生される期間である。第２の期間を「タスク期間」と称する。「タスク」とは、ユーザ５００に提示されるマインドフルネス瞑想などの課題を指す。第３の期間は、音声ガイドの再生が終了した直後の所定の時間長の期間である。第３の期間を「レストＢ期間」と称する。第１から第３の期間にわたって、生体計測装置１００は、ユーザ５００の脳活動信号を繰り返し生成する。タスク期間中、ユーザ５００は、音声ガイドに従い、瞑想を行う。図６に示す例では、レストＡ期間およびレストＢ期間の各々の長さは１２０秒であり、タスク期間の期間の長さは３９２秒である。この例に限定されず、各期間の長さは適宜調整可能である。レストＡ期間とレストＢ期間の長さが異なっていてもよい。
【０１３１】
図７は、生体計測装置１００による判定動作の流れを示すフローチャートである。ユーザ５００が計測開始の操作を行うと、生体計測装置１００は、ユーザ５００の脳活動信号の計測を開始する（ステップＳ７０１）。この段階では、マインドフルネスのための音声ガイドはまだ再生されない。ユーザ５００が何もしていない状態で、所定時間（例えば１２０秒）にわたって、脳活動信号が繰り返し取得される。これは、ユーザ５００の平常時の脳活動信号を取得するために行われる。この期間は、前述のレストＡ期間である。計測は、前述のように、光源２０がユーザ５００の頭部に向けて光パルスを出射し、光検出器３０が反射光パルスの後端部分を検出する動作を繰り返すことによって行われる。これにより、反射光パルスの内部散乱成分Ｉ２が繰り返し検出される。光検出器３０は、画素ごとに、反射光パルスの蓄積量に応じた信号を出力する。信号処理回路７０は、光検出器３０から出力された信号に基づいて、脳活動信号を繰り返し生成する。脳活動信号は、例えば画素ごとに、または画素群ごとに生成され得る。
【０１３２】
計測を開始してから所定時間が経過すると、制御回路６０は、刺激装置１０に、音声ガイドの再生を開始させる（ステップＳ７０２）。以後、ユーザ５００は、音声ガイドに従って、マインドフルネス瞑想、すなわちタスクを実践する。タスクの間も、脳活動信号の計測はそのまま継続される。信号処理回路７０は、ユーザ５００がタスクを行っている間、光検出器３０から出力された信号に基づいて、脳活動信号を繰り返し生成する。
【０１３３】
音声ガイドの開始から一定の時間（図６の例では３９２秒）が経過すると、音声ガイドが終了する（ステップＳ７０３）。音声ガイドが終了した後も、一定の時間（例えば、１２０秒）にわたって、計測がそのまま継続される。これにより、タスク終了後も脳活動信号が繰り返し取得される。この期間は、前述のレストＢ期間である。
【０１３４】
音声ガイドの終了から上記一定の時間が経過すると、信号処理回路７０は、脳活動信号の計測を終了する（ステップＳ７０４）。次に信号処理回路７０は、レストＡ期間、タスク期間、レストＢ期間のそれぞれの期間で取得した複数の脳活動信号を解析し、ユーザ５００の熟達度を判定する。まず、信号処理回路７０は、レストＡ、タスク、レストＢのそれぞれについて、取得した脳活動信号の値と、その平均値との差のヒストグラムを作成する（ステップＳ７０５）。具体的には、信号処理回路７０は、以下の処理を行う。
（１）レストＡ、タスク、レストＢの全ての期間で取得した脳活動信号の値の平均値を計算する。
（２）脳活動信号のそれぞれの値と平均値との差を計算する。
（３）計算した差の階級ごとに度数を求める。
【０１３５】
これにより、３つのヒストグラムのデータが作成される。信号処理回路７０は、既存の検定方法を用いて、３つのヒストグラムの間の有意差を検定する（ステップＳ７０６）。有意差がある場合、信号処理回路７０は、そのユーザ５００を非熟達者と判定する（ステップＳ７０８）。逆に、有意差がない場合、信号処理回路７０は、そのユーザ５００を熟達者と判定する（ステップＳ７０９）。判定結果は、例えば刺激装置１０のディスプレイに表示され得る。
【０１３６】
図８Ａおよび図８Ｂは、ステップＳ７０５において作成される３つのヒストグラムの例を示している。図８Ａは、非熟達者について得られたヒストグラムの一例を示している。図８Ｂは、熟達者について得られたヒストグラムの一例を示している。図８Ａおよび図８Ｂにおける"before"、"mindfulness"、"after"の表記は、それぞれ、レストＡ、タスク、レストＢに対応している。図示されるヒストグラムは、それぞれの期間において、５秒ごとに脳活動信号を平均化した値を用いて作成された。
【０１３７】
図８Ａに示すように、非熟達者では、マインドフルネスタスクの前後のレスト期間とタスク期間とで、脳活動信号のばらつきの度合いが異なる。これは、非熟達者は、タスクの実施によって脳活動状態が大きく変化するからであると考えられる。これに対し、図８Ｂに示すように、熟達者では、タスク前後のレスト期間とタスク期間とで、脳活動信号のばらつきの度合いに有意差が見られない。これは、熟達者は、タスクの有無に関わらず、マインドフルネス状態が維持されており、脳活動状態が安定しているからであると考えられる。
【０１３８】
以上のことから、レストＡ期間またはレストＢ期間と、タスク期間との間で、脳活動信号のばらつきの度合いに有意差があるか否かに基づいて、熟達者と非熟達者とを判別することができる。本実施形態では、レストＡ期間およびレストＢ期間の両方で脳活動信号が取得されるが、レストＡ期間またはレストＢ期間の一方を省略してもよい。レスト期間とタスク期間のヒストグラムの有意差の検定は、例えばｔ検定などの公知の検定手法を用いて行うことができる。
【０１３９】
図７に示す判定方法は、一例に過ぎず、取得した脳活動信号から熟達度を判定する方法は様々である。例えば、機械学習アルゴリズムによって予め訓練された学習済みモデルを、取得した複数の脳活動信号に適用することによって熟達度を判定してもよい。本実施形態では、ユーザがマインドフルネスに熟達しているか否かという２段階の評価が行われるが、熟達度に応じて３段階以上の評価が行われてもよい。
【０１４０】
また、本実施形態においては、マインドフルネス状態に誘導する音声に従って、ユーザがタスクを実践し、熟達度の判定が行われるが、本開示はこのような判定方法に限られない。例えば、音声はマインドフルネス状態を阻害する刺激であってもよい。あるいは、音声などの刺激がない状態において、ユーザにタスクを実践させ、熟達度の判定を行ってもよい。
【０１４１】
［５．複数の携帯機器からデータを収集するシステム］
次に、複数のユーザの携帯機器から脳活動信号および位置データを収集して活用するシステムの例を説明する。
【０１４２】
図９は、複数のユーザの携帯機器４００から脳活動信号および位置データを収集して活用するシステムの概念図である。このシステムは、複数の携帯機器４００と、サーバコンピュータ２００とを含む。サーバコンピュータ２００は、複数の携帯機器４００にインターネットなどのネットワークを介して接続されている。図９には３つの携帯機器４００が例示されているが、さらに多数の携帯機器４００がサーバコンピュータ２００に接続されていてもよい。サーバコンピュータ２００は、例えば事業者が管理するクラウドサーバであり得る。
【０１４３】
図１０は、サーバコンピュータ２００、および複数の携帯機器４００の概略的な構成を示す図である。
【０１４４】
各携帯機器４００は、例えばスマートフォン、タブレットコンピュータ、またはラップトップＰＣなどの携帯情報機器であり得る。各携帯機器４００は、刺激装置４１０と、光源４２０と、光検出器４３０と、メモリ４５０と、プロセッサ４６０と、通信回路４８０とを備える。刺激装置４１０、光源４２０、および光検出器４３０は、それぞれ、図１Ａに示す刺激装置１０、光源２０、および光検出器３０と同様の機能を備える。プロセッサ４６０は、図１Ａに示す制御回路６０および信号処理回路７０と同様の機能を備える。メモリ４５０は、ＲＡＭおよびＲＯＭを含み、プロセッサ４６０によって実行される各種のプログラムおよび生成されたデータを格納する。刺激装置４１０は、例えば携帯機器４００が備えるディスプレイおよびスピーカの組み合わせによって実現され得る。
【０１４５】
光源４２０は、携帯機器４００に内蔵されていてもよいし、携帯機器４００に外付けされる機器であってもよい。光検出器４３０は、携帯機器４００に内蔵されたイメージセンサであってもよいし、携帯機器４００に外付けされる機器であってもよい。
【０１４６】
通信回路４８０は、サーバコンピュータ２００との間で無線通信を行う。通信回路４８０は、ＧＰＳ衛星から位置信号を受信することができる。ＧＰＳ衛星から取得した位置信号に基づき、プロセッサ４６０は、現在地の緯度および経度を計算することができる。
【０１４７】
各携帯機器４００は、前述のマインドフルネスのためのアプリケーションをサーバコンピュータ２００からダウンロードしてインストールすることができる。当該アプリケーションのプログラムは、メモリ４５０に記録され、プロセッサ４６０によって実行される。
【０１４８】
各携帯機器４００のユーザは、アプリケーションを起動し、再生されるガイダンスに従ってマインドフルネス瞑想を行うことができる。その間、プロセッサ４６０は、光源４２０および光検出器４３０を制御して、前述の方法で脳活動の計測を行う。計測は、例えば一定の時間間隔で繰り返し行われ得る。この時間間隔は、例えば数マイクロ秒から数秒の範囲で任意に設定され得る。プロセッサ４６０は、光検出器４３０から繰り返し出力される信号に基づき、ユーザの対象部の所定の領域における脳活動信号を生成する。脳活動信号は、例えば、脳血液中の脱酸素化ヘモグロビンの濃度に依存する信号であり得る。プロセッサ４６０は、例えば図７に示す処理を実行することにより、マインドフルネスになることについてのユーザの熟達度を判定する。携帯機器４００は、熟達度の判定結果と位置情報とを関連付けたデータを、ネットワークを介してサーバコンピュータ２００に送信する。このデータには、例えば、携帯機器４００のＩＤまたはユーザのコメントなどの他の情報が含まれていてもよい。そのようなデータが、多数のユーザの端末からビッグデータとして収集され得る。
【０１４９】
サーバコンピュータ２００は、信号処理回路２１０と、記録媒体２２０とを備える。記録媒体２２０は、信号処理回路２１０が実行するプログラム、および生成されたデータを格納する。記録媒体２２０は、例えばメモリおよびハードディスクを含み得る。信号処理回路２１０は、複数の携帯機器４００から、上記のデータを収集し、当該データに含まれる各ユーザの熟達度の判定結果を示す情報と、記録媒体２２０に予め記録された地図情報とを関連付けた地図データを生成する。信号処理回路２１０は、生成した地図データを、各携帯機器４００に送信する。
【０１５０】
図１１は、地図データに基づいて携帯機器４００のディスプレイが表示する画像の一例を示す図である。この例における地図データは、マインドフルネスの熟達者の多寡が、異なる複数の色で表現されたヒートマップを表す。例えば、熟達者が多い場所は赤（Ｒ）で表示され、熟達者の数が中程度の場所は緑（Ｇ）で表示され、熟達者が少ない場所は青（Ｂ）で表示され、熟達者が全くいない場所は着色されずに表示される。このような地図データにより、ユーザは、どの場所にマインドフルネスの熟達者が多く集まっているかを視覚的に知ることができる。可視化の方法は、ヒートマップに限らず、例えば熟達者が多いことを示すマークまたは文字などの情報を地図に重ねて表示するような方法でもよい。前述のように、熟達者が多く集まる場所は、マインドフルネス状態になり易い場所である可能性が高い。本実施形態のように、熟達者の集積度を可視化するアプリケーションを利用することにより、ユーザは、マインドフルネスに適した場所を容易に知ることができる。ユーザは、表示された地図情報を参考に、熟達者が多く集まる場所に実際に赴き、感想、コメント、レコメンデーションなどを、携帯機器４００を介してサーバコンピュータ２００に提供することができる。複数のユーザから収集した情報をマーケティングに活用することにより、新たなビジネス機会の創出につなげられる可能性がある。
【０１５１】
生体計測装置は、スマートフォンなどの携帯型のコンピュータに限らず、他の装置、例えばヘッドマウント装置に搭載されていてもよい。図１２は、ヘッドマウント装置３００の例を模式的に示す図である。ヘッドマウント装置３００は、刺激装置として機能するディスプレイおよびスピーカと、光源と、光検出器とを備える。このようなヘッドマウント装置３００を用いた場合であっても、上記と同様の効果を得ることができる。
【産業上の利用可能性】
【０１５２】
本開示の技術は、非接触でユーザの脳活動の情報を取得することができる。本開示の技術は、カメラ、計測機器、スマートフォン、タブレットコンピュータ、ヘッドマウント装置などの、種々の装置に利用することができる。
【符号の説明】
【０１５３】
１０      刺激装置
２０      光源
３０      光検出器
６０      制御回路
６２      光源制御部
６３      検出器制御部
７０      信号処理回路
１００    生体計測装置
２００    サーバコンピュータ
２０１    画素
２０２    ドレイン
２０３    フォトダイオード
２０４    第１の浮遊拡散層
２０５    第２の浮遊拡散層
２０６    第３の浮遊拡散層
２０７    第４の浮遊拡散層
２１０    信号処理回路
２２０    記録媒体
３００    ヘッドマウント装置
３０２    行選択回路
３０３    列選択回路
３０４    垂直信号線
３０５    ソースフォロワ電源
３０６    ソースフォロワ負荷
３０７    アナログ−デジタル変換回路
３０８    行選択トランジスタ
３０９    ソースフォロワトランジスタ
３１０    リセットトランジスタ
４００    携帯機器
４１０    刺激装置
４２０    光源
４３０    光検出器
４５０    メモリ
４６０    プロセッサ
４８０    通信回路
【図１Ａ】
2020103879.tif 000003
【図１Ｂ】
2020103879.tif 000004
【図１Ｃ】
2020103879.tif 000005
【図１Ｄ】
2020103879.tif 000006
【図１Ｅ】
2020103879.tif 000007
【図１Ｆ】
2020103879.tif 000008
【図１Ｇ】
2020103879.tif 000009
【図２】
2020103879.tif 000010
【図３Ａ】
2020103879.tif 000011
【図３Ｂ】
2020103879.tif 000012
【図４Ａ】
2020103879.tif 000013
【図４Ｂ】
2020103879.tif 000014
【図５Ａ】
2020103879.tif 000015
【図５Ｂ】
2020103879.tif 000016
【図６】
2020103879.tif 000017
【図７】
2020103879.tif 000018
【図８Ａ】
2020103879.tif 000019
【図８Ｂ】
2020103879.tif 000020
【図９】
2020103879.tif 000021
【図１０】
2020103879.tif 000022
【図１１】
2020103879.tif 000023
【図１２】
2020103879.tif 000024