(57)【要約】【課題】携帯端末装置において、ストレスとの相関関係のある他覚症状によって、ストレスの状態を測定するための技術を提供する。【解決手段】本発明は、前記課題を解決するため、携帯端末の動画撮影機能をONにする動画ONステップと、携帯端末の撮影側面に備えられているライトをONにするライトONステップと、撮影中の像の中から人を含む動物の目の瞳孔を認識する瞳孔認識ステップと、認識した瞳孔の開き具合の時間変化である瞳孔変化を演算する瞳孔変化演算ステップと、を携帯端末装置に読取実行可能に記録したプログラムを開発した。【選択図】図４９
2020072901.tif 000002
【特許請求の範囲】
【請求項１】
携帯端末の動画撮影機能をONにする動画ONステップと、
携帯端末の撮影側面に備えられているライトをONにするライトONステップと、
撮影中の像の中から人を含む動物の目の瞳孔を認識する瞳孔認識ステップと、
認識した瞳孔の開き具合の時間変化である瞳孔変化を演算する瞳孔変化演算ステップと、
を携帯端末装置に読取実行可能に記録したプログラム。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、携帯端末を用いてストレスを評価するためのプログラムに関するものである。
【背景技術】
【０００２】
ストレスは、様々な病気の原因となるものである。しかし、一般的には、ストレスは、視覚的に認識できるものではなく、装置等を用いて測定することは容易ではない。
【０００３】
そこで、ストレスとの相関関係のある他覚症状によって、ストレスの状態を測定するための技術が望まれている。
【０００４】
その技術としては、例えば、特許文献１のような技術が存在する。
【先行技術文献】
【特許文献】
【０００５】
【特許文献１】特開２００５−１４３６８４
【発明の概要】
【発明が解決しようとする課題】
【０００６】
この特許文献は、ストレスやリラックスの程度が、瞳孔対光反応の度合いとの関係において相関関係を有するという点を生かして、眼球に対して光を当てた際の瞳孔反応を撮影及び解析することで、ストレスの程度を測定するという発想である。この発想により、ストレスとの相関関係のある他覚症状によって、ストレスの状態を測定するという目的は一応達成させる。
【０００７】
しかし、特許文献においては、目の部分を覆って顔に装着される立体マスクを装着しての撮影が前提となっている。そのため、専用の立体マスクを必要とする点において、利用者が気軽に使えるものではなかった。
【０００８】
現代社会においては、スマートフォンなどの携帯端末装置の普及率は高いので、携帯端末装置を用いて客観的なストレス測定を実施できれば、利用者が、気軽に使えるものとなる。このような携帯端末装置において、例えばスマートフォンなどによる撮影の場合には、瞳孔を認識するための工夫が存在せず、瞳孔の大きさの変化を把握できないという点が課題となる。
【０００９】
そこで、本発明は、携帯端末装置において、ストレスとの相関関係のある他覚症状によって、ストレスの状態を測定するための技術を提供することを課題とするものである。
【課題を解決するための手段】
【００１０】
本発明は、前記課題を解決するため、携帯端末の動画撮影機能をＯＮにする動画ＯＮステップと、携帯端末の撮影側面に備えられているライトをＯＮにするライトＯＮステップと、撮影中の像の中から人を含む動物の目の瞳孔を認識する瞳孔認識ステップと、認識した瞳孔の開き具合の時間変化である瞳孔変化を演算する瞳孔変化演算ステップと、を携帯端末装置に読取実行可能に記録したプログラムを開発した。
【００１１】
また、本発明は、さらに前記の特徴に加えて、ライトＯＮステップにてＯＮにされたライトの照度を時間経過とともに変化させる照度変化ステップをさらに有するプログラムを開発した。
【００１２】
また、本発明は、さらに前記の特徴に加えて、体組成計から受信した体組成データを取得する体組成データ取得ステップをさらに有するプログラムを開発した。
【００１３】
また、本発明は、さらに前記の特徴に加えて、瞳孔変化演算ステップにて演算されて得られた瞳孔変化に基づいてストレス度合いを評価してストレス評価結果を得るストレス評価ステップを有するプログラムを開発した。
【００１４】
また、本発明は、さらに前記の特徴に加えて、瞳孔変化演算ステップにて演算されて得られた瞳孔変化を所定のアドレスに対して送信する瞳孔変化送信ステップをさらに有するプログラムを開発した。そして、そのプログラムを実行した結果として送信された瞳孔変化を受信する瞳孔変化受信ステップと、受信した瞳孔変化を蓄積する瞳孔変化蓄積ステップと、蓄積された瞳孔変化を統計処理する瞳孔変化統計処理ステップと、を計算機に読取実行可能に記載したプログラムを開発した。
【００１５】
また、本発明は、さらに前記の特徴に加えて、ストレス評価ステップにて得られたストレス評価結果を所定のアドレスに対して送信するストレス評価結果送信ステップをさらに有するプログラムを開発した。また、前記瞳孔変化送信ステップを有するプログラムを実行した結果として送信された瞳孔変化を受信する瞳孔変化受信ステップと、受信した瞳孔変化を蓄積する瞳孔変化蓄積ステップと、ストレス評価結果送信ステップを有するプログラムを実行した結果として送信されたストレス評価結果を受信するストレス評価結果受信ステップと、受信したストレス評価結果を蓄積するストレス評価結果蓄積ステップと、蓄積されたストレス評価結果及び瞳孔変化を統計処理するストレス統計処理ステップと、を計算機に読取実行可能に記載したプログラムを開発した。
【００１６】
また、本発明は、さらに前記の特徴に加えて、携帯端末の動画撮影機能をＯＮにする動画ＯＮステップに代えて、携帯端末の連続静止画撮影機能をＯＮにする連続ＯＮステップとしたプログラムを開発した。
【００１７】
また、本発明は、携帯端末の動画撮影機能をＯＮにする動画ＯＮステップと、携帯端末の撮影側面に備えられているライトをＯＮにするライトＯＮステップと、撮影中の像の中から人を含む動物の目の瞳孔を認識する瞳孔認識ステップと、動画ＯＮステップにて撮影された動画を保持する動画保持ステップと、保持された動画を所定のアドレスに送信する動画送信ステップと、を携帯端末装置に読取実行可能に記録したプログラムを開発した。そして、その特徴に加えて、携帯端末の動画撮影機能をＯＮにする動画ＯＮステップに代えて、携帯端末の連続静止画撮影機能をＯＮにする連続ＯＮステップとし、動画ＯＮステップにて撮影された動画を保持する動画保持ステップに代えて、携帯端末にて撮影された連続静止画を保持する連続静止画保持ステップとし、保持された動画を所定のアドレスに送信する動画送信ステップに代えて、連続静止画保持ステップにて保持されている連続静止画を送信する連続静止画送信ステップを、携帯端末装置に読取実行可能に記録したプログラムを開発した。
【００１８】
また、本発明は、携帯端末から人を含む動物の目を含む動画を受信する動画受信ステップと、受信した動画の中から人を含む動物の目の瞳孔を認識する瞳孔認識ステップと、認識した瞳孔の開き具合の時間変化である瞳孔変化を演算する瞳孔変化演算ステップとを計算機に読取実行可能に記録したプログラムを開発した。そして、携帯端末から人を含む動物の目を含む連続静止画を受信する連続静止画受信ステップと、受信した連続静止画の中から人を含む動物の目の瞳孔を認識する瞳孔認識ステップと、認識した瞳孔の開き具合の時間変化である瞳孔変化を演算する瞳孔変化演算ステップとを計算機に読取実行可能に記録したプログラムを開発した。
【００１９】
また、本発明は、以上のプログラムが読取実行可能に記録された携帯端末装置あるいは統計処理装置を開発した。
【発明の効果】
【００２０】
以上の発明により、携帯端末装置において、ストレスとの相関関係のある他覚症状によって、ストレスの状態を測定するための技術を提供することができる。
【図面の簡単な説明】
【００２１】
【図１】実施例１の携帯端末装置の機能ブロックの一例を示す図
【図２】実施例１の携帯端末装置のハードウェア構成の一例を示す図
【図３】実施例１の処理の流れの一例を示すフローチャート
【図４】実施例２の携帯端末装置の機能ブロックの一例を示す図
【図５】実施例２の携帯端末装置のハードウェア構成の一例を示す図
【図６】実施例２の処理の流れの一例を示すフローチャート
【図７】実施例３の携帯端末装置の機能ブロックの一例を示す図
【図８】実施例３の携帯端末装置のハードウェア構成の一例を示す図
【図９】実施例３の処理の流れの一例を示すフローチャート
【図１０】実施例４の携帯端末装置の機能ブロックの一例を示す図
【図１１】実施例４の携帯端末装置のハードウェア構成の一例を示す図
【図１２】実施例４の処理の流れの一例を示すフローチャート
【図１３】実施例５の携帯端末装置の機能ブロックの一例を示す図
【図１４】実施例５の携帯端末装置のハードウェア構成の一例を示す図
【図１５】実施例５の処理の流れの一例を示すフローチャート
【図１６】実施例６の携帯端末装置の機能ブロックの一例を示す図
【図１７】実施例６の携帯端末装置のハードウェア構成の一例を示す図
【図１８】実施例６の処理の流れの一例を示すフローチャート
【図１９】実施例７の携帯端末装置の機能ブロックの一例を示す図
【図２０】実施例７の携帯端末装置のハードウェア構成の一例を示す図
【図２１】実施例７の処理の流れの一例を示すフローチャート
【図２２】実施例８の携帯端末装置の機能ブロックの一例を示す図
【図２３】実施例８の携帯端末装置のハードウェア構成の一例を示す図
【図２４】実施例８の処理の流れの一例を示すフローチャート
【図２５】実施例９の携帯端末装置の機能ブロックの一例を示す図
【図２６】実施例９の携帯端末装置のハードウェア構成の一例を示す図
【図２７】実施例９の処理の流れの一例を示すフローチャート
【図２８】実施例１０の携帯端末装置の機能ブロックの一例を示す図
【図２９】実施例１０の携帯端末装置のハードウェア構成の一例を示す図
【図３０】実施例１０の処理の流れの一例を示すフローチャート
【図３１】携帯端末装置の一例を示す図１
【図３２】携帯端末装置の一例を示す図２
【図３３】携帯端末装置の一例を示す図３
【図３４】本発明を実施した場合の携帯端末装置の画面の一例を示す図
【図３５】統計処理の内容を示す図１
【図３６】統計処理の内容を示す図２
【図３７】統計処理の内容を示す図３
【図３８】瞳孔認識の内容を説明するための図
【図３９】瞳孔変化演算の内容を説明するための図
【図４０】実施例１の処理の流れをタイムチャートにした場合の一例を示す図
【図４１】縮瞳速度を横軸にとりストレス度合いを縦軸にとった場合の図
【図４２】縮瞳速度を横軸にとりストレス度合いを縦軸にとった場合の特定の作業中の時間毎のストレス変化を示す図
【図４３】実施例２の処理の流れをタイムチャートにした場合の一例を示す図
【図４４】瞳孔演算の態様を説明するための図
【図４５】人の目の部分を輪郭線のみで示した図
【図４６】画面の一部を照度の強い白色光映像とする場合の携帯端末装置の図
【図４７】縦軸をストレス評価値として横軸を瞳孔変化速度としたグラフ
【図４８】縦軸をストレス評価値として横軸を体組成量としたグラフ
【図４９】ストレス評価の方法を示した図
【図５０】瞳孔部分に微動が生じたとしてもトレースして識別を継続するための仕組みを説明するための図
【図５１】演算終了後のリプレイ画像を示す図
【図５２】画面中に瞳孔収縮に関するデータを表示した一例を示す図
【図５３】ライトＯＦＦステップを有する場合の処理の流れを示す図
【図５４】認識時の瞳孔の大きさに戻ったときに処理を終了するという構成を可能とするためのタイムチャートを示す図
【図５５】実施例１１の携帯端末装置の機能ブロックの一例を示す図
【図５６】実施例１１の携帯端末装置のハードウェア構成の一例を示す図
【図５７】実施例１１の処理の流れの一例を示すフローチャート
【図５８】実施例１２の携帯端末装置の機能ブロックの一例を示す図
【図５９】実施例１２の携帯端末装置のハードウェア構成の一例を示す図
【図６０】実施例１２の処理の流れの一例を示すフローチャート
【発明を実施するための形態】
【００２２】
以下、本発明の実施形態について、図を用いて説明する。以下の説明は、実施例１は請求項１、１３及び２５に、実施例２は請求項２及び１４に、実施例３は請求項３及び１５に、実施例４は請求項４及び１６に、実施例５は請求項５及び１７に、実施例６は請求項８及び１８に、実施例７は請求項６及び１９に、実施例８は請求項７及び２０に、実施例８は請求項９及び２１に、実施例９は請求項１０及び２２に、実施例１１は請求項１１及び２３に、実施例１２は請求項１２及び２４に、それぞれ対応する。なお、本発明の内容は、以下の実施例にのみ限定されるものではなく、本発明の要旨を逸脱しない範囲内において種々変更を加え得る。
【実施例１】
【００２３】
＜概要＞
本実施例の発明は、光を当てた際の瞳孔の変化を動画撮影して、撮影画像の瞳孔変化を時間単位で演算するための機能を携帯端末装置に読取実行可能に記録したプログラムである。また、そのプログラムが読取実行可能に記録された携帯端末装置である。これらは、携帯端末に限らず、デスクトップパソコンなどの端末によっても実現され得るが、以下では、一例として携帯端末を用いた場合について説明する。
【００２４】
以下、本実施例の携帯端末装置の機能及びハードウェアの内容、並びに、処理の流れについて、詳細に説明する。
【００２５】
＜機能的構成＞
図１は、本実施例の携帯端末装置の機能ブロックの一例である。この図にあるように、本実施例の携帯端末装置（０１０１）は、カメラ部（０１０２）と動画ＯＮ部（０１０３）とライト部（０１０４）とライトＯＮ部（０１０５）と瞳孔認識部（０１０６）と瞳孔変化演算部（０１０７）とを有する。
【００２６】
なお、以下に記載する本携帯端末装置を構成する機能ブロックは、ハードウェア、ソフトウェア、又はハードウェア及びソフトウェアの両方として実現され得る。具体的には、コンピュータを利用するものであれば、ＣＰＵや主メモリ、バス、あるいは二次記憶装置（ハードディスクや不揮発性メモリ、ＣＤ−ＲＯＭやＤＶＤ−ＲＯＭなどの記憶メディアとそれらメディアの読取ドライブなど）、印刷機器や表示装置、その他の外部周辺装置などのハードウェア構成部やその外部周辺機器用のＩ／Ｏポート、それらハードウェアを制御するためのドライバプログラムやその他アプリケーションプログラム、情報入力に利用されるユーザーインターフェースなどが挙げられる。
【００２７】
また、これらハードウェアやソフトウェアは、主メモリ上に展開したプログラムをＣＰＵで演算処理したり、メモリやハードディスク上に保持されているデータや、インターフェースを介して入力されたデータなどを加工、蓄積、出力処理したり、あるいは各ハードウェア構成部の制御を行ったりするために利用される。また、この発明は装置として実現できるのみでなく、方法としても実現可能である。また、このような発明の一部をソフトウェアとして構成することができる。さらに、そのようなソフトウェアをコンピュータに実行させるために用いるソフトウェア製品、及び同製品を記録媒体に固定した記録媒体も、当然にこの発明の技術的な範囲に含まれる（本明細書の全体を通じて同様である）。
【００２８】
≪カメラ部、ライト部の働き≫
「カメラ部」は、動画又は／及び静止画の撮影のための機能を有する。また、「ライト部」は、携帯端末の撮影側面に備えられているライトの機能を有する。「カメラ部」及び「ライト」部は、表面と裏面に存在する場合があるが、いずれであっても本発明の目的は達成し得る。
【００２９】
図３１から図３３は、携帯端末装置のうちいわゆるスマートフォンの概略図である。（ａ）が表面、（ｂ）が裏面であり、実際には図示しないマイクが存在する。
【００３０】
図３１の携帯端末装置（４６０１）の表面には、操作ボタン（４６０２）と受話部（４６０３）の他に、カメラ（４６０４）及びライト（４６０５）並びに画面（４６０６）が存在するが裏面にはカメラもライトも存在しない。
【００３１】
図３２の携帯端末装置（４７０１）の表面には、操作ボタン（４７０２）と受話部（４７０３）と画面（４７０６）が存在するもののカメラもライトも存在しないが、裏面にはカメラ（４７０４）及びライト（４７０５）が存在する。
【００３２】
図３３の携帯端末装置（４８０１）の表面には、操作ボタン（４８０２）と受話部（４８０３）の他に、カメラ（４８０４）及びライト（４８０５）並びに画面（４８０６）が存在し、裏面にもカメラ（４８０４）もライト（４８０５）が存在する。
【００３３】
例えば、図３１又は図３３のような携帯端末を用いた場合、ユーザは、画面を見ながら動画撮影をすることができる。そのため、携帯端末は、図３１のように、画面のある表側にカメラとライトが存在しているものを使用することが望ましい。
【００３４】
これに対して、図３２のような携帯端末を用いた場合、ライトを瞳孔に当てるためには、ユーザの側には画面の裏側がくることになる。そうすると、ユーザは、自分の目や瞳孔が、画面のいずれの部分に存在するかを把握することができずに、操作の容易性に問題を抱えることとなる。そのため、例えば、瞳孔が画面の中央付近にない場合には「右」「左」などと指示音声で知らせる、他方、瞳孔が画面の中心付近にきた場合には「ピー」という音でユーザに知らせる等の瞳孔位置把握手段を備えていても良い。瞳孔位置把握手段は、音以外でも、例えば、ライトの照度変化によってユーザに瞳孔が画面の中心付近にきていることを知らせることでも良い。
【００３５】
瞳孔の大きさは、赤外線を用いることで容易に認識することができる。そのため、カメラは、赤外線カメラ機能が付いていることが望ましい。
【００３６】
また、ユーザ側に画面が向いている場合において、画面の面にカメラのみが存在する携帯端末装置の場合、画面の一部を照度の強い白色光映像とすることにより、ライトに代えることもできる。照度の強い白色光映像については、画面の上半分であっても良いし、下半分であっても良いし、さらに上と下の４分の１ずつであっても良い。また、撮影画像が表示される部分と照度の強い白色光映像の部分の比率は、１：１に限られず、瞳孔対光反応を測定することができるのに十分な割合であれば良い。
【００３７】
図４６は、画面の一部を照度の強い白色光映像とする場合の携帯端末装置の図である。携帯端末装置（６１０１）は、カメラ（６１０２）があるもののライトがないので、画面（６１０３）の下半分が照度の強い白色光映像（６１０４）となっている。これにより、ライトに代替することができる。
【００３８】
≪動画ＯＮ部、ライトＯＮ部の働き≫
「動画ＯＮ部」は、携帯端末の動画撮影機能をＯＮにする働きをする。また、「ライトＯＮ部」は、携帯端末の撮影側面に備えられているライトを含むライト部をＯＮにする働きをする。本発明の最も基本的な構成として、光を当てた際の瞳孔を動画撮影する必要がある。ユーザは、動画ＯＮ部の働きによって、瞳孔部分を動画撮影することができるようになる。また、ユーザは、ライトＯＮ部の働きによって、瞳孔に対して光を当てることができる。
【００３９】
この動画ＯＮ部における「撮影」とは、同時に録画する場合を含むが、録画を必須としない。例えば、動画ＯＮ部においては動画を撮影するだけで、その撮影中の動画を後述する「瞳孔認識部」及び「瞳孔変化演算部」にてリアルタイムで演算するという態様も本実施例に含まれるものである。
【００４０】
また、撮影されている動画には、ライトを当てている最中の動画のみではなく、ライトを当てる前、及びライトを当てた後の動画も含まれていることが望ましい。このようにライトで照射している前後の動画も含むことにより、瞳孔対光反応を精度よく測定することができる。
【００４１】
ここにおける撮影中の動画には、瞳孔が含まれていることが前提になるが、瞳孔のみではなく、瞳孔以外の瞳孔周辺の身体の部分も含まれていることが望ましい。人間の眼球には、その者の健康状態が様々な形で現れる。例えば、アレルギー性結膜炎や感染性結膜炎やぶどう膜炎あるいはドライアイなどにおいては、目の充血を引き起こすがある。そのため、結膜に生じた例えば目の充血の事実によって、上記の症状を知ることができるという作用がある。
【００４２】
次に、「携帯端末」は、例えば、スマートフォンや携帯電話、ノートパソコン、タブレットＰＣ、時計型コンピュータ、ウェアラブルコンピュータ、デジタルカメラ、ＰＤＡ、ＰｏｃｋｅｔＰＣ、Ｐａｌｍ、ライトとカメラが付いている専用端末などを広く含むものである。通常であれば、カメラ機能及びライト機能付の機器を前提とするが、本発明では、販売されている単位としてはカメラ機能やライト機能を有しない機器であっても、外付けでカメラを搭載した場合や外付けでライトを搭載した場合には、当該機器と外付けカメラないし外付けライトを一体として「携帯端末」と捉えるものとする。
【００４３】
ライトＯＮ部によって照射するライトの強度は、瞳孔が対光反応を起こすに足りる強度であれば良い。それに加えて、眼底検査が瞳孔に光を当てて行うものであることに鑑み、例えば眼底検査を行うに適した光の強度とすることも考えられる。そうすることによって、ストレス強度の測定と同時に眼底検査をも行うことができる。
【００４４】
さらに、携帯端末装置は、動画撮影機能とライトのＯＮ・ＯＦＦを制御するための制御部を備えていても良い。この制御部によって、ユーザがスウィッチをＯＮにするだけで、自動的に適切なタイミングで動画撮影機能とライトのＯＮ・ＯＦＦの制御が行われる。
【００４５】
また、その制御部においては、予め設定してある所定の時間になると自動的に動画撮影機能とライトをＯＮにするようにしても良い。そうすることによって、特定の時間の瞳孔対光反応を計測することができるし、例えば、作業中に自動的に測定することも可能となる。
【００４６】
これらにより、光を当てた際の瞳孔を動画撮影することができる。
【００４７】
≪瞳孔認識部≫
「瞳孔認識部」は、撮影中の像の中から人を含む動物の目の瞳孔を認識する働きをする。本発明の課題のポイントは、例えばスマートフォンなどの携帯端末装置による撮影の場合、瞳孔の大きさの変化を把握することができないという点にある。具体的には、携帯端末の動画撮影機能において、例えば顔認識機能については浸透しているものの、眼球のうち瞳孔の部分を認識するための機能は一般的ではない。本発明の課題を解決するためには、瞳孔の大きさを動画情報をもとに演算する必要があるところ、瞳孔の大きさを認識できなければ、そのような演算も不可能である。瞳孔認識部は、瞳孔の大きさを認識することを可能にするものであり、本発明の課題を解決する上で重要な機能である。
【００４８】
瞳孔を認識するための機能としては、瞳孔を撮影した上、瞳孔の動画又は静止画情報をもとに瞳孔の色彩又は明度を登録しておき、登録されている色彩又は明度と同じ色彩又は明度をもつ部分を特定することによって、瞳孔を認識することが考えられる。
【００４９】
また、携帯端末装置は、瞳孔の色彩又は明度を登録していなくとも自動的に瞳孔部分を認識するための手段を備えていても良い。具体的に図３８を用いて説明すると、まず眼球の濃色部分（Ａ）薄色部分（Ｂ）白色部分（Ｃ）及び肌部分（Ｄ）を色彩又は明度によって認識する色彩明度認識手段を有し、次に眼球の薄色部分（Ｂ）と白色部分（Ｃ）の境界Ｅを発見する虹彩認識手段、最後に眼球の濃色部分（Ａ）と薄色部分（Ｂ）の境界である境界Ｆを発見する瞳孔発見手段を有するという方法であっても良い。
【００５０】
そして、瞳孔部分に微動が生じたとしても、トレースして識別を継続することが望ましい。また、瞳孔部分の微動を防止するため、例えば、図５０のように、携帯端末装置（６８０１）を横向きにして、かつ、カメラ（６８０２）やライト（６８０３）に近い場所の画面（６８０４）上に動画などの画像（６８０５）を表示させることによって、１点を見させることで瞳孔部分を固定するという工夫が考えられる。この場合、画面（６８０４）に白色光を表示させれば、ライトの光に代えることができる。動画などの画像を表示させる場所は、カメラ（６８０２）の中心線上に動画の中心線がくるように位置付けることが望ましい。また、画像中に注目しておくべき注目点（６８０６）を明示しても良い。
【００５１】
瞳孔部分については、その円周が一層濃い色となっている場合もある。そのような場合、その一層濃い色となっている部分の内側を境界Ｆとしても良いし、外側を境界Ｆとしても良いし、中間点を境界Ｆとしても良い。もっとも、情報の精度を上げるため、計測毎に異なるのは望ましくなく、統一した設定であることが望ましい。
【００５２】
この点につき、図４５を用いて説明する。図４５は、人の目の部分を輪郭線のみで示した図である。人の目（６００１）には、虹彩境界部分（６００２）と瞳孔境界部分（６００３）が存在し、瞳孔の内側に点線で示した箇所まで一層濃い色となっている部分（６００４）が存在する場合がある。そのような場合、一層濃い色となっている部分（６００４）を境界Ｆとしても良いし、瞳孔境界部分（６００３）を境界Ｆとしても良いし、中間点を境界Ｆとしても良い。
【００５３】
図３４は、瞳孔を認識した場合の画面を示す図である。携帯端末装置（４９０１）を用いて左図のように瞳孔を含んだ目の部分を撮影して、瞳孔部分の認識に成功した場合、右図のように、瞳孔を認識済みであることを示すように瞳孔部分（４９０２）を浮き上がらせる構成としても良い。これにより、瞳孔認識に成功したことをユーザに伝えることができる。その他にも、瞳孔認識に成功したことを伝える手段としては、例えば「ピー」という通知音や照度の変化などを通して伝えるという方法であっても良いし、それらに限らない。
【００５４】
自動で瞳孔を認識するため、カメラは、焦点を自動で合わせるためのオートフォーカス機能が付いていることが望ましい。また、ユーザが操作する上で手ぶれが生ずる可能性があるので、手ぶれ防止機能を有することが望ましい。これにより、正確な瞳孔認識をすることができる。
【００５５】
また、動画撮影中は、基本的に瞬きをしないことから、ユーザは、目が乾くなどの症状に襲われる。そこで、ユーザとしては、経過秒数又は残り秒数などを把握できれば便利である。そこで、動画撮影中においても、撮影の残り時間を音などで知らせる工夫があることが望ましい。
【００５６】
また、瞬きをした場合には演算の精度が下がってしまうものの、瞬きをしたことをユーザが気付かない場合がある。そのため、瞬きを認識した場合には、動画撮影をやり直すため、通知音ないしライトのＯＮ・ＯＦＦや色や照度などで知らせる機能を備えていても良い。また、瞬きを認識した場合には、動画撮影を最初からやり直すのではなく、撮影時間（計測時間）を延長するための延長機能を有していても良い。
【００５７】
≪瞳孔変化演算部≫
「瞳孔変化演算部」は、認識した瞳孔の開き具合の時間変化である瞳孔変化を演算する働きをする。前述のとおり、ストレスやリラックスの程度は、瞳孔対光反応の度合いとの関係において相関関係を有する。したがって、瞳孔変化演算部は、瞳孔対光反応を演算するものである。そして、その瞳孔対光反応とは、具体的には、瞳孔に光を当てたことによる瞳孔の大きさの時間変化である。
【００５８】
演算の対象となる瞳孔のデータは、瞳孔の直径である場合や瞳孔の面積である場合などが考えられる。例えば、瞳孔の直径であれば、まつ毛などで瞳孔の全体像が遮られていたり、瞼が完全に開いていないなどのときであっても、より正確に測定することが可能であるという点では望ましい。他方、瞳孔の面積であれば、上記のような事情がなければ瞳孔の大きさを精度よく捉えることができるという点で望ましい。
【００５９】
また、演算内容については、直径値や面積値に加えて、瞳孔が最小になるまでに要した時間、縮瞳率や縮瞳速度及び縮瞳加速度などを求めることが考えられる。ユーザは、この演算によって求められた値などによって、自己の瞳孔対光反応の情報を得ることができる。そうすれば、それとストレスやリラックスの度合いとの相関関係を踏まえた分析をユーザが行うことによって、ユーザは、自己のストレスやリラックスの度合いを客観的に知ることができる。
【００６０】
また、さらに演算の内容として、縮瞳した瞳孔が正常（元の状態）になるまでに要した時間、散瞳率や散瞳速度及び散瞳加速度など求めることが考えられる。そのためには、さらに携帯端末の撮影側面に備えられているライトをＯＦＦにする「ライトＯＦＦ部」を有していても良い。これによれば、さらに正確なストレス度合いを知ることができる。
【００６１】
瞳孔演算の具体的内容については、撮影部分との距離が一定ではないことを考えると、動画中の瞳孔部分の大きさを漫然と測定しても正確な瞳孔変化を測定することができない。正確な測定を実現するためには、撮影部分との距離や角度などによる影響が小さい構成があることが望ましい。具体的には、たとえば図３９を用いて説明すると、虹彩部分（５４０１）の直径αと瞳孔部分（５４０２）の直径βとを除算により比較することで値を求めれば、撮影部分との距離や角度などによって左右されない。例えば、図３９の例でいえば、演算結果は、「α／β」又は「β／α」である。そのため、虹彩部分の直径αと瞳孔部分の直径βとを比較する構成であることが望ましい。
【００６２】
このような比較を実現するためには、前記図３８において説明した虹彩発見手段と瞳孔発見手段を踏まえた上で、虹彩部分及び瞳孔部分の直径を動画上で測定する直径測定手段、及び測定した直径について除算を実施する除算手段を有することで実現可能である。
【００６３】
≪その他≫
その他にも、ユーザを特定するための識別情報として、氏名、年齢及び生年月日、食事傾向などの登録情報を受け付ける登録情報受付部を有していても良い。そして、この登録情報と関連付けて、ユーザの虹彩情報を受け付けると良い。それにより、携帯端末装置のカメラにより虹彩認識をすることにより、ユーザＩＤなどによらずに、確実なユーザ管理を行うことができる。
【００６４】
また、携帯端末装置に外付けのファンを付けることにより、ファンを起動させて同時に眼圧検査をすることもできる。眼圧検査においては、瞬きをすると眼圧が高く測定されてしまう傾向があるため、前記の瞬きした場合の通知機能が眼底検査に役立つものである。眼底検査により、緑内障、網膜剥離、脈絡剥離、虹彩毛様体炎などの病気が判明する。
【００６５】
また、瞳孔変化の情報の価値を高めるためにも、氏名、性別、生年月日、出身地、計測時刻、計測場所（例えば、住居、大学、職場、居酒屋、電車内、公園など）、食前・食後の別、食後の場合には食品成分、職業、計測日の仕事の有無及び強度、及び体組成データや治療履歴などの付加情報を合わせて保持することが望ましい。特に、生年月日については、ストレス評価をするにあたってノイズとなり得るバイオリズムについて、それを加味したストレス評価を実現するために必要なものである。また、携帯端末装置にＧＰＳが搭載されている場合には、そのＧＰＳ機能を用いて、測定場所の経度・緯度を認識し、その情報から高度を割り出す機能を備えていても良い。ストレスは、酸素の濃度でも影響を受け得ることから、付加情報としての意味をもつ。
【００６６】
さらに、瞳孔変化を一覧で出力する瞳孔変化一覧出力部を有していることが望ましい。一覧表示の方法としては、グラフや表やカレンダーなどが考えられる。
【００６７】
図３５は、瞳孔変化一覧出力部において処理される統計情報の内容を示す図である。ユーザＡについて、日付ごとに瞳孔変化が一覧で示されている。これに加えて、例えば、日付欄の部分に測定条件などの情報が記されていても良い。例えば、測定した場所の明るさ、測定時刻、食前・食後の別、前日の睡眠時間、計測日の仕事の有無及び強度などの情報と一緒に示されていれば、ユーザは、自己のストレスの原因を知ることができ、ストレスを減らすための生活を考えることに役立つ。
【００６８】
また、瞳孔の境界が分かりにくい場合には、図３６のように、瞳孔認識部で認識した瞳孔部分を目立たせる工夫をしても良い。図３６では、瞳孔の輪郭が明確になる工夫がされている。
【００６９】
加えて、携帯端末装置は、演算終了後、撮影した動画をリプレイするためのリプレイ部を備えていることが望ましい。このリプレイにおいては、瞳孔認識部における瞳孔認識が正確か否かを確認できるよう、瞳孔と認識した部分について白抜きなどするか、又は、図５１にあるように径として測定に用いた部分を明示する構成にすることが望ましい。
【００７０】
さらには、撮影直後に瞳孔変化を確認できるように、画面中に瞳孔収縮に関するデータを表示しても良い。図５２は、画面中に瞳孔収縮に関するデータを表示した一例である。ライトが明るくなったタイミング、ライトの照度、瞳孔の変化の推移などが一覧になっており、ユーザが一目して演算結果がわかるようになっている。
【００７１】
≪まとめ≫
以上のような機能を有することによって、携帯端末装置において、ストレスとの相関関係のある他覚症状によって、ストレスの状態を測定するための技術を提供することができる。
【００７２】
＜ハードウェア的構成＞
図２は、上記機能的な各構成要件をハードウェアとして実現した際の携帯端末装置における構成の一例を示す図である。この図を利用して本装置での各処理におけるそれぞれのハードウェア構成部の働きについて説明する。
【００７３】
この図にあるように、本実施例の携帯端末装置は、各種演算処理を行う「ＣＰＵ（中央演算装置）」（０２０１）と、「主メモリ」（０２０２）と、を備えている。また、「ＨＤＤ」（０２０３）や、外部機器（０２０６）の「Ｉ／Ｆ（インターフェイス）」（０２０７）と情報の送受信を行うための「ネットワークＩ／Ｆ（ネットワークインターフェイス）」（０２０４）や、カメラやライトやディスプレイなどとの間で情報の送受信を行うための「Ｉ／Ｏ（インプット・アウトプット）」（０２０８）も備えている。そして、それらが「システムバス」（０２０５）などのデータ通信経路によって相互に接続され、情報の送受信や処理を行う。ここにおける「外部機器」とは、通常は、管理者端末又は統計処理装置などを指すが、例えばユーザ端末や医療機関の端末を含むものである。
【００７４】
また、「主メモリ」は、各種処理を行うプログラムを「ＣＰＵ」に実行させるために読み出すと同時にそのプログラムの作業領域でもあるワーク領域を提供する。また、この「主メモリ」や「ＨＤＤ」、図示しない「フラッシュメモリ」にはそれぞれ複数のアドレスが割り当てられており、「ＣＰＵ」で実行されるプログラムは、そのアドレスを特定しアクセスすることで相互にデータのやりとりを行い、処理を行うことが可能になっている。本実施例において格納されているプログラムは、携帯端末の動画撮影機能をＯＮにする動画ＯＮプログラムと、携帯端末の撮影側面に備えられているライトをＯＮにするライトＯＮプログラムと、撮影中の像の中から人を含む動物の目の瞳孔を認識する瞳孔認識プログラムと、認識した瞳孔の開き具合の時間変化である瞳孔変化を演算する瞳孔変化演算プログラムなどである。
【００７５】
携帯端末装置の動画ＯＮプログラムによって取得されたユーザの瞳孔画像は、「主メモリ」及び「ＨＤＤ」のアドレスに格納する。そして、携帯端末装置の「ＣＰＵ」において、「主メモリ」に格納されている動画情報を用いて、論理演算処理によって認識した瞳孔の時間変化を演算するという具合である。なお、撮影した動画を録画する場合には、このように動画情報を「ＨＤＤ」に格納するが、他方、撮影した録画をリアルタイムで瞳孔を認識・演算する場合には動画情報を「ＨＤＤ」に格納しないこととなる。
【００７６】
＜処理の流れ＞
図３は、本実施例の携帯端末装置における処理の流れの一例を示すフローチャートである。以下に示すステップは、媒体に記録された計算機（携帯端末）を制御するためのプログラムを構成する処理ステップであっても構わない。
【００７７】
この図の（ａ）にあるように、まず、携帯端末の動画撮影機能をＯＮにする（Ｓ０３０１）。次に、携帯端末の撮影側面に備えられているライトをＯＮにする（Ｓ０３０２）。そして、撮影中の像の中から人を含む動物の目の瞳孔を認識する（Ｓ０３０３）。最後に、認識した瞳孔の開き具合の時間変化である瞳孔変化を演算する（Ｓ０３０４）。
【００７８】
図の（ｂ）にあるように、携帯端末の動画撮影機能をＯＮにする動画ＯＮステップ（Ｓ０３０１）と携帯端末の撮影側面に備えられているライトをＯＮにするライトＯＮステップ（Ｓ０３０２）は、順番が逆であっても良い。つまり、まず携帯端末の撮影側面に備えられているライトをＯＮにする。次に、携帯端末の動画撮影機能をＯＮにする。そして、撮影中の像の中から人を含む動物の目の瞳孔を認識する。最後に、認識した瞳孔の開き具合の時間変化である瞳孔変化を演算するという処理の流れでも良い。
【００７９】
また、図（ｃ）にあるように、携帯端末の撮影側面に備えられているライトをＯＮにするライトＯＮステップ（Ｓ０３０２）と撮影中の像の中から人を含む動物の目の瞳孔を認識する瞳孔認識ステップ（Ｓ０３０３）は、順番が逆であっても良い。つまり、まず携帯端末の動画撮影機能をＯＮにする。次に、撮影中の像の中から人を含む動物の目の瞳孔を認識する。そして、携帯端末の撮影側面に備えられているライトをＯＮにする。最後に、認識した瞳孔の開き具合の時間変化である瞳孔変化を演算するという処理の流れでも良い。
【００８０】
なお、以上のような処理の流れの順番については、本実施例以外の実施例についても同様である。
【００８１】
また、さらに縮瞳した瞳孔が正常（元の状態）になるまでに要した時間、散瞳率や散瞳速度及び散瞳加速度など求めるため、携帯端末の撮影側面に備えられているライトをＯＦＦにする「ライトＯＦＦステップ」を有していても良い。これによれば、さらに正確なストレス度合いを知ることができる。
【００８２】
図５３は、ライトＯＦＦステップを有する場合の処理の流れを示す図である。まず、動画ＯＮステップ（Ｓ７１０１）、ライトＯＮステップ（Ｓ７１０２）が存在する。次に、瞳孔認識ステップ（Ｓ７１０３）として認識がスタートし、瞳孔認識に成功したか否かを確認し（Ｓ７１０４）、瞳孔認識に成功するまで認識ステップが繰り返される。この瞳孔認識は、全体の処理が終了するまで継続する。次に、瞳孔変化演算ステップ（Ｓ７１０５）が存在する。この瞳孔変化演算は、全体の処理が終了するまで継続する。次に、ライトＯＦＦステップの内容として、ライトをＯＦＦにするかの確認があり（Ｓ７１０６）、ＹＥＳであればライトをＯＦＦにし（Ｓ７１０８）、ＮＯであればＹＥＳになるまで処理を継続する。ここでのライトをＯＦＦにするかの確認は、予め定められた時間の経過時、あるいは縮動停止時又は一定以下の速度となった時にライトをＯＦＦにするということが考えられる。縮瞳速度などの生体反応に個人差があることを考えると、ライトをＯＦＦにするタイミングは、一律ではなく、縮動停止時又は一定以下の速度となった時とすることが望ましい。最後に、全体の処理が終了か否かの確認があり、ＮＯであれば処理を継続し、ＹＥＳであれば全体の処理を終える。全体の処理が終了か否かの確認は、予め定められた時間の経過時、散動停止時又は一定以下の速度となった時、あるいは認識時の瞳孔の大きさに戻った時にＹＥＳにするということが考えられる。
【００８３】
図４０は、以上のステップをタイムチャートにした場合の一例を示す図である。ユーザがスウィッチ（ＳＷ）をＯＮにすることにより、動画撮影及び瞳孔認識が開始する。その上で、認識が完了して瞳孔認識機能がＯＮ（ｈｉｇｈ）になると同時に又は若干遅れて、瞳孔演算が開始する。その後、予め定められた時間の経過時、あるいは縮動停止時又は一定以下の速度（図面のαで示されている範囲）となった時にライトがＯＦＦになる。そして、更に予め定められた時間の経過時、あるいは散動停止時又は一定以下の速度（図面のβで示されている範囲）となった時、あるいは認識時の瞳孔の大きさに戻った時に全体の処理が終了する。
【００８４】
図４０を用いて縮瞳の推移を検討すれば、ライトがＯＮになっている間に縮瞳し、ＯＦＦになってから散瞳を始め、一定程度散瞳したところで散瞳が止まるということが分かる。
【００８５】
このタイムチャートにおいて、例えば、動画撮影について、瞳孔演算において重要な部分である虹彩部分及び瞳孔部分だけを自動追尾する段階（Ｈｉｇｈ）があってもいい。これにより、瞳孔演算を精度よく実施することができる。
【００８６】
図４４は、瞳孔演算の態様を説明するための図である。モデルデータとして、Ａ及びＢのデータがあったとして、Ａの線のライトを当てた際の縮瞳速度（ａ１）、最も縮瞳した時の縮瞳率（ｈａ）、ライトを切った後の散瞳速度（ａ２）、ライトをＯＦＦにしてから散瞳が止まるまでの時間（ｔａ）などを測定することになる。Ｂの線についても、同じく、ライトを当てた際の縮瞳速度（ｂ１）、最も縮瞳した時の縮瞳率（ｈｂ）、ライトを切った後の散瞳速度（ｂ２）、ライトをＯＦＦにしてから散瞳が止まるまでの時間（ｔｂ）などを測定することになる。このように、ライトをＯＮにしてから縮瞳が始まり、ライトをＯＦＦにしてから散瞳が始まる。そして、この２つのモデルデータについて、縮瞳及び散瞳のいずれも速度が速い方がストレスが弱いという前提で分析をすれば、モデルデータＡよりもモデルデータＢの方がストレスが弱いということが分かる。
【００８７】
以上のステップにより、携帯端末装置を用いて、ストレスとの相関関係のある他覚症状によって、ストレスの状態を測定することができる。
【実施例２】
【００８８】
＜概要＞
本実施例は、より望ましい実施形態として、実施例１の構成に加えて、ライトの照度を時間経過とともに変化させる機能を有する携帯端末装置を提供する。
【００８９】
以下、本実施例における装置の機能及びハードウェアの内容、並びに、処理の流れについて、詳細に説明する。
【００９０】
＜機能的構成＞
図４は、本実施例の携帯端末装置の機能ブロックの一例を示す図である。この図にあるように、本実施例の携帯端末装置（０４０１）は、カメラ部（０４０２）、動画ＯＮ部（０４０３）とライト部（０４０４）とライトＯＮ部（０４０５）と瞳孔認識部（０４０６）と瞳孔変化演算部（０４０７）と照度変化部（０４０８）とを有する。本実施例の特徴は、照度変化部の内容にある。そのため、照度変化部の機能的構成を中心に説明する。なお、その他の機能については、既述の説明と同様であるので、説明を省略する。
【００９１】
「照度変化部」（０４０６）は、ライトＯＮ部にてＯＮにされたライトの照度を時間経過とともに変化させる働きをする。例えば、瞳孔を認識するためには瞳孔に光を当てる必要があるものの、他方で、光の照度が強すぎると瞳孔対光反応を起こしてしまう。そうすると、瞳孔認識部で瞳孔を認識する前に変化が開始してしまい、演算の精度が損なわれる。そこで、照度変化部の働きによって、例えば、瞳孔認識までは弱い照度の光を当てて、それにより瞳孔を認識した時点から、瞳孔対光反応を起こす程度の照度の光を当てることとで、精度の高い演算結果を得ることができる。
【００９２】
さらに、瞳孔変化は、暗室で行うことが望ましいところ、照度変化部の働きによって、最小限の光を利用した操作が可能となり、携帯端末を用いての暗室での利用が可能になる。
【００９３】
＜ハードウェア的構成＞
図５は、上記機能的な各構成要件をハードウェアとして実現した際の携帯端末装置における構成の一例を示す図である。携帯端末装置は、「ＣＰＵ（中央演算装置）」（０５０１）、「主メモリ」（０５０２）、「ＨＤＤ」（０５０３）、「ネットワークＩ／Ｆ」（０５０４）、「Ｉ／Ｏ」（０５０８）、「システムバス」（０５０５）を有しており、外部機器（０５０６）は、「Ｉ／Ｆ」（０５０７）を有している。
【００９４】
これらの図を利用して、本装置での各処理におけるそれぞれのハードウェア構成部のうち本実施例の特徴的な部分について説明し、その他の部分については既述の実施例の説明と同様である。
【００９５】
本実施例における携帯端末装置においては、「主メモリ」に格納されているプログラムの内容として、照度変化プログラムが追加されている。
【００９６】
そのため、「ＣＰＵ」での働きにおいて、ライトＯＮプログラムを用いてＯＮにされたライトの照度は、時間経過とともに変化することになる。
【００９７】
＜処理の流れ＞
図６は、本実施例の携帯端末装置における処理の流れの一例を示すフローチャートである。以下に示すステップは、媒体に記録された計算機（携帯端末）を制御するためのプログラムを構成する処理ステップであっても構わない。
【００９８】
まず、動画ＯＮステップ（Ｓ０６０１）、ライトｌｏｗ  ＯＮステップ（Ｓ０６０２）が存在する。次に、瞳孔認識ステップ（Ｓ０６０３）として認識がスタートし、瞳孔認識に成功したか否かを確認し（Ｓ０６０４）、瞳孔認識に成功するまで認識ステップが繰り返される。この瞳孔認識は、全体の処理が終了するまで継続する。
【００９９】
次に、瞳孔変化演算ステップ（Ｓ０６０５）が存在する。この瞳孔変化演算は、全体の処理が終了するまで継続する。次に、照度変化ステップの内容として、ライトを「ｈｉｇｈ」にするか「ｌｏｗ」にするかの確認があり（Ｓ０６０６）、「ｈｉｇｈ」であればライトをｈｉｇｈにする処理（Ｓ０６０７）をし、「ｌｏｗ」であればライトをｌｏｗにする処理（Ｓ０６０８）をする。ここでのライトを「ｈｉｇｈ」にするか「ｌｏｗ」にするかの確認は、例えば、１回目はライトをｈｉｇｈにし、その後、予め定められた時間の経過時、あるいは縮動停止時又は一定以下の速度となった時にライトをｌｏｗにするということが考えられる。縮瞳速度などの生体反応に個人差があることを考えると、ライトをｌｏｗにするタイミングは、一律ではなく、縮動停止時又は一定以下の速度となった時とすることが望ましい。
【０１００】
最後に、全体の処理が終了か否かの確認があり、全体の処理が終了でなければ、ライトを「ｈｉｇｈ」にするか「ｌｏｗ」にするかの確認（Ｓ０６０６）に戻り、全体が終了であれば、全体の処理を終える。全体の処理が終了か否かの確認は、予め定められた時間の経過時、散動停止時又は一定以下の速度となった時、あるいは認識時の瞳孔の大きさに戻った時にＹＥＳにするということが考えられる。
【０１０１】
本実施例における処理においては、照度変化ステップを有している。「照度変化ステップ」とは、ライトＯＮ部にてＯＮにされたライトの照度を時間経過とともに変化させる段階である。
【０１０２】
図４３は、以上のステップをタイムチャートにした場合の一例を示す図である。ユーザがスウィッチ（ＳＷ）をＯＮにすることにより、動画撮影、ライト及び瞳孔認識が開始する。その上で、認識が完了して瞳孔認識状態がＨｉｇｈになると同時に又は若干遅れて、瞳孔演算が開始し、ライトの照度が上がる。その後、予め定められた時間の経過時、あるいは縮動停止時又は一定以下の速度（図面のαで示されている範囲）となった時にライトがｌｏｗになる。そして、更に予め定められた時間の経過時、あるいは散動停止時又は一定以下の速度（図面のβで示されている範囲）となった時に全体の処理が終了する。
【０１０３】
次に、図５４は、認識時の瞳孔の大きさに戻ったときに処理を終了するという構成を可能とするためのタイムチャートを示す図である。ユーザがスウィッチ（ＳＷ）をＯＮにすることにより、動画撮影、ライト及び瞳孔認識が開始する。その上で、認識が完了して瞳孔認識状態がＨｉｇｈになると同時に又は若干遅れて、瞳孔演算が開始し、元の状態の瞳孔の演算をした後、ライトの照度が上がる。その後、予め定められた時間の経過時、あるいは縮動停止時又は一定以下の速度（図面のαで示されている範囲）となった時にライトがｌｏｗになる。そして、更に予め定められた時間の経過時、あるいは散動停止時又は一定以下の速度（図面のβで示されている範囲）となった時、あるいは認識時の瞳孔の大きさに戻った時に全体の処理が終了する。このように、ライトの照度がｈｉｇｈになる前に演算を実施することにより、元の状態の瞳孔を演算して、その演算結果との一致をもって、全体の処理を終了するという構成をとることができる。
【０１０４】
図４３を用いて縮瞳の推移を検討すれば、ライトがｌｏｗでＯＮになっている間に縮瞳が緩やかに始まり、ライトがｈｉｇｈになると縮動速度が加速し、ライトが再びｌｏｗになると散瞳が始まり、一定程度散瞳したところで散瞳が止まるということが分かる。
【０１０５】
機能的構成でも述べたように、このような処理の流れにより、精度の高い演算結果を得ることができ、かつ、携帯端末を用いての暗室での利用が可能になる。
【実施例３】
【０１０６】
＜概要＞
本実施例は、より望ましい実施形態として、実施例１から２のいずれか一の構成に加えて、ストレスの度合いを評価する機能を有する携帯端末装置を提供する。
【０１０７】
以下、本実施例における装置の機能及びハードウェアの内容、並びに、処理の流れについて、詳細に説明する。
【０１０８】
＜機能的構成＞
図７は、本実施例の携帯端末装置の機能ブロックの一例を示す図である。この図にあるように、本実施例の携帯端末装置（１００１）は、カメラ部（１００２）と動画ＯＮ部（１００３）とライト部（１００４）とライトＯＮ部（１００５）と瞳孔認識部（１００６）と瞳孔変化演算部（１００７）とストレス評価部（１００８）とを有する。本実施例の特徴は、ストレス評価部の内容にある。そのため、ストレス評価部の機能的構成を中心に説明する。なお、その他の機能については、既述の説明と同様であるので、説明を省略する。
【０１０９】
「ストレス評価部」は、瞳孔変化演算部にて演算されて得られた瞳孔変化に基づいてストレス度合いを評価してストレス評価結果を得る働きをする。例えば、瞳孔変化演算部にて演算されて得られた直径値、面積値、瞳孔が最小になるまでに要した時間、縮瞳率、縮瞳速度、縮瞳加速度などのデータをもとに、ストレス度合いを算出する。
【０１１０】
ストレス度合いは、％などでの数値であっても良いし、大・中・小などの段階方式でも良い。また、前日比や最大値・最小値との比較値などもしても良い。さらに、睡眠時間や仕事の強度との相関が見て取れる場合には、その相関をもとに、ストレスの原因を導き出しても良い。
【０１１１】
図４９は、ストレス評価の方法を示した図である。２０００人の統計データが図面のような曲線になる場合、縮瞳後散瞳までの時間について、中央値ｔからの距離を測定することにより、ストレス評価を示すという方法が考えられる。例えば、図４９では、「＋１σ」よりも中央側については「正常」、「＋１σ」のうち中央値ｔよりも反対側のゾーンの場合には「弱いストレスあり」、「＋２σ」のうち中央値ｔよりの場合には「中度のストレスあり」、「＋２σ」のうち中央値ｔよりも反対側のゾーンの場合には「強いストレスあり」などと判断することが考えられる。さらには「＋２σ」よりも中央値ｔと離れた「ｏｖｅｒ」部分の場合には、「とても強いストレスあり」と判断することが考えられる。
【０１１２】
さらに、ストレスの度合いが一定程度を超えた場合には、アラーム音などで知らせる等の機能を備えていても良い。また、親子間や仕事の使用者・労働者間での情報共有を図り、例えば子どもや従業員がストレスを一定程度抱えている場合には、その旨の通知が親や使用者（会社など）に届くというシステムがあれば望ましい。
【０１１３】
さらに、ストレス評価結果を一覧で出力するストレス評価一覧出力部が存在することが望ましい。一覧表示の方法としては、グラフや表やカレンダーなどが考えられる。
【０１１４】
図３７は、ストレス評価結果出力部において出力される統計情報の内容を示す図である。日付ごとのストレス評価結果がカレンダー方式で一覧になって示されている。これにより、ユーザのストレス度合いを一覧することができ、曜日毎のストレス度合いの特徴等を知ることができる。これに加えて、例えば、日付欄の部分に瞳孔変化情報や測定条件などの情報が記されていても良い。例えば、測定した場所の明るさ、測定時刻、食前・食後の別、前日の睡眠時間、計測日の仕事の有無及び強度などの情報と一緒に示されていれば、ユーザは、自己のストレスの原因を知ることができ、ストレスを減らすための生活を考えることに役立つ。
【０１１５】
この機能により、ユーザは、ストレス度合いを数値やマークなどによって一目で分かるようになる。また、原因を導くことができれば、それを普段の生活などに生かすことができる。加えて、アラーム機能を備えたり、他者への通知機能を備えていることにより、ストレスが原因の１つとなるような交通事故などを未然に防ぐことに繋がる。
【０１１６】
さらに、実施例３に追加した構成であれば、取得した体組成データとストレス評価結果とを一覧で出力する一覧出力部が存在することが望ましい。このように一覧で表示することにより、体組成データの中で、ストレスに影響を与えている要素が何かを瞳孔変化である場合よりも一見して知ることができる。
【０１１７】
＜ハードウェア的構成＞
図８は、上記機能的な各構成要件をハードウェアとして実現した際の携帯端末装置における構成の一例を示す図である。携帯端末装置は、「ＣＰＵ（中央演算装置）」（１１０１）、「主メモリ」（１１０２）、「ＨＤＤ」（１１０３）、「ネットワークＩ／Ｆ」（１１０４）、「Ｉ／Ｏ」（１１０８）、「システムバス」（１１０５）を有しており、外部機器（１１０６）は、「Ｉ／Ｆ」（１１０７）を有している。
【０１１８】
これらの図を利用して、本装置での各処理におけるそれぞれのハードウェア構成部のうち本実施例の特徴的な部分について説明し、その他の部分については既述の実施例の説明と同様である。
【０１１９】
本実施例における携帯端末装置においては、「主メモリ」に格納されているプログラムの内容として、ストレス評価プログラムが追加されている。
【０１２０】
そのため、「ＣＰＵ」での働きにおいて、瞳孔変化演算プログラムによって得られた瞳孔変化に基づいて、ストレス度合いを評価することになる。
【０１２１】
＜処理の流れ＞
図９は、本実施例の携帯端末装置における処理の流れの一例を示すフローチャートである。以下に示すステップは、媒体に記録された計算機（携帯端末）を制御するためのプログラムを構成する処理ステップであっても構わない。
【０１２２】
動画ＯＮステップ（Ｓ１２０１）、ライトＯＮステップ（Ｓ１２０２）、瞳孔認識ステップ（Ｓ１２０３）、瞳孔変化演算ステップ（Ｓ１２０４）、ストレス評価ステップ（Ｓ１２０５）を有している。これらの図を利用して、本装置での各処理の流れのうち本実施例の特徴的な部分について説明し、その他の部分については、既述の実施例の説明と同様である。
【０１２３】
本実施例における処理においては、ストレス評価ステップを有している。「ストレス評価ステップ」とは、瞳孔変化演算ステップにて演算されて得られた瞳孔変化に基づいてストレス度合いを評価してストレス評価結果を得る段階である。
【０１２４】
機能的構成でも述べたように、ストレス度合いは、％などでの数値であっても良いし、大・中・小などの段階方式でも良い。また、前日比や最大値・最小値との比較値などもしても良い。さらに、睡眠時間や仕事の強度との相関が見て取れる場合には、その相関をもとに、ストレスの原因を導き出しても良い。
【０１２５】
さらに、ストレスの度合いが一定程度を超えた場合には、アラーム音などで知らせる等のアラームステップを備えていても良い。また、親子間や仕事の使用者・労働者間での情報共有を図り、例えば子どもや従業員がストレスを一定程度抱えている場合には、その旨のアラームが親や使用者（会社など）に届くというシステムがあれば更に望ましい。
【０１２６】
さらに、ストレス評価結果を一覧で出力するストレス評価一覧出力ステップが存在することが望ましい。一覧表示の方法としては、グラフや表やカレンダーなどが考えられる。
【０１２７】
このような処理の流れにより、ユーザは、ストレス度合いを数値やマークなどによって一目で分かるようになる。また、原因を導くことができれば、それを普段の生活などに生かすことができる。加えて、アラーム機能を備えたり、他者への通知機能を備えていることにより、ストレスが原因の１つとなるような交通事故などを未然に防ぐことに繋がる。
【０１２８】
さらに、実施例３に追加した構成であれば、取得した体組成データとストレス評価結果とを一覧で出力する一覧出力ステップが存在することが望ましい。このように一覧で表示することにより、体組成データの中で、ストレスに影響を与えている要素が何かを瞳孔変化である場合よりも一見して知ることができる。
【実施例４】
【０１２９】
＜概要＞
本実施例は、より望ましい実施形態として、実施例１から３のいずれか一の構成に加えて、瞳孔変化を所定のアドレスに対して送信する機能を有する携帯端末装置を提供する。
【０１３０】
以下、本実施例における装置の機能及びハードウェアの内容、並びに、処理の流れについて、詳細に説明する。
【０１３１】
＜機能的構成＞
図１０は、本実施例の携帯端末装置の機能ブロックの一例を示す図である。この図にあるように、本実施例の携帯端末装置（１３０１）は、カメラ部（１３０２）と動画ＯＮ部（１３０３）とライト部（１３０４）とライトＯＮ部（１３０５）と瞳孔認識部（１３０６）と瞳孔変化演算部（１３０７）と瞳孔変化送信部（１３０８）とを有する。本実施例の特徴は、瞳孔変化送信部の内容にある。そのため、瞳孔変化送信部の機能的構成を中心に説明する。なお、その他の機能については、既述の説明と同様であるので、説明を省略する。
【０１３２】
「瞳孔変化送信部」は、瞳孔変化演算部にて演算されて得られた瞳孔変化を所定のアドレスに対して送信する働きをする。例えば、外部機器の一例である統計処理のための統計処理装置の格納領域であるＨＤＤや主メモリに対して瞳孔変化情報を送信する。
【０１３３】
また、これらに加えて、外部機器においてストレス評価がなされた場合には、その外部機器からストレス評価結果が送信されてくるという構成にしておくことが望ましい。そうすると、携帯端末装置においては、ストレス評価結果受信部を備えていることが望ましい。
【０１３４】
また、外部機器においてストレス評価値と関連付けて対策紹介情報を保持しておき、ストレス評価値が高い場合には、例えばストレス原因となっている要素を解消するような提案や病院・店舗の紹介などの紹介情報を共に受信しても良い。
【０１３５】
＜ハードウェア的構成＞
図１１は、上記機能的な各構成要件をハードウェアとして実現した際の携帯端末装置における構成の一例を示す図である。携帯端末装置は、「ＣＰＵ（中央演算装置）」（１４０１）、「主メモリ」（１４０２）、「ＨＤＤ」（１４０３）、「ネットワークＩ／Ｆ」（１４０４）、「Ｉ／Ｏ」（１４０８）、「システムバス」（１４０５）を有しており、外部機器（１４０６）は、「Ｉ／Ｆ」（１４０７）を有している。
【０１３６】
これらの図を利用して、本装置での各処理におけるそれぞれのハードウェア構成部のうち本実施例の特徴的な部分について説明し、その他の部分については既述の実施例の説明と同様である。
【０１３７】
本実施例における携帯端末装置においては、「主メモリ」に格納されているプログラムの内容として、瞳孔変化送信プログラムが追加されている。
【０１３８】
そのため、「ＣＰＵ」での働きにおいて、瞳孔変化演算プログラムによって得られた瞳孔変化情報について、例えば携帯端末装置の「ＨＤＤ」や「主メモリ」に格納したり、あるいは外部機器又は図示しない統計処理装置の主メモリまたはＨＤＤに送信することになる。
【０１３９】
＜処理の流れ＞
図１２は、本実施例の携帯端末装置における処理の流れの一例を示すフローチャートである。以下に示すステップは、媒体に記録された計算機（携帯端末）を制御するためのプログラムを構成する処理ステップであっても構わない。
【０１４０】
動画ＯＮステップ（Ｓ１５０１）、ライトＯＮステップ（Ｓ１５０２）、瞳孔認識ステップ（Ｓ１５０３）、瞳孔変化演算ステップ（Ｓ１５０４）、瞳孔変化送信ステップ（Ｓ１５０５）を有している。これらの図を利用して、本装置での各処理の流れのうち本実施例の特徴的な部分について説明し、その他の部分については、既述の実施例の説明と同様である。
【０１４１】
本実施例における処理においては、瞳孔変化送信ステップを有している。「瞳孔変化送信ステップ」とは、瞳孔変化演算ステップにて演算されて得られた瞳孔変化を所定のアドレスに対して送信する段階である。機能的構成でも述べたように、送信先は、当該携帯端末装置であっても良いし、統計処理装置であっても良い。
【０１４２】
以上により、瞳孔変化情報を蓄積するために必要な携帯端末装置の記憶領域を節約することができる。また、統計処理を携帯端末以外で実施することにより、携帯端末装置の負荷を軽減することができる。
【実施例５】
【０１４３】
＜概要＞
本実施例は、より望ましい実施形態として、実施例３又は３に追加された実施例４の構成に加えて、ストレス評価結果を所定のアドレスに対して送信する機能を有する携帯端末装置を提供する。
【０１４４】
以下、本実施例における装置の機能及びハードウェアの内容、並びに、処理の流れについて、詳細に説明する。
【０１４５】
＜機能的構成＞
図１３は、本実施例の携帯端末装置の機能ブロックの一例を示す図である。この図にあるように、本実施例の携帯端末装置（１９０１）は、カメラ部（１９０２）と動画ＯＮ部（１９０３）とライト部（１９０４）とライトＯＮ部（１９０５）と瞳孔認識部（１９０６）と瞳孔変化演算部（１９０７）とストレス評価部（１９０８）とストレス評価結果送信部（１９０９）を有する。本実施例の特徴は、ストレス評価結果送信部の内容にある。そのため、ストレス評価結果送信部の機能的構成を中心に説明する。なお、その他の機能については、既述の説明と同様であるので、説明を省略する。
【０１４６】
「ストレス評価結果送信部」は、ストレス評価部にて得られたストレス評価結果を所定のアドレスに対して送信する働きをする。例えば、携帯端末装置のＨＤＤや主メモリの所定のアドレスに対してストレス評価を送信する。あるいは、統計処理のための統計処理装置の格納領域であるＨＤＤや主メモリに対してストレス評価情報を送信する。それにより、ストレス評価情報の蓄積が可能となる。
【０１４７】
＜ハードウェア的構成＞
図１４は、上記機能的な各構成要件をハードウェアとして実現した際の携帯端末装置における構成の一例を示す図である。携帯端末装置は、「ＣＰＵ（中央演算装置）」（２００１）、「主メモリ」（２００２）、「ＨＤＤ」（２００３）、「ネットワークＩ／Ｆ」（２００４）、「Ｉ／Ｏ」（２００８）、「システムバス」（２００５）を有しており、外部機器（２００６）は、「Ｉ／Ｆ」（２００７）を有している。
【０１４８】
これらの図を利用して、本装置での各処理におけるそれぞれのハードウェア構成部のうち本実施例の特徴的な部分について説明し、その他の部分については既述の実施例の説明と同様である。
【０１４９】
本実施例における携帯端末装置においては、「主メモリ」に格納されているプログラムの内容として、ストレス評価結果送信プログラムが追加されている。
【０１５０】
そのため、「ＣＰＵ」での働きにおいて、ストレス評価プログラムにより生成されたストレス評価情報について、例えば外部機器又は図示しない統計処理装置の主メモリまたはＨＤＤに送信することになる。
【０１５１】
＜処理の流れ＞
図１５は、本実施例の携帯端末装置における処理の流れの一例を示すフローチャートである。以下に示すステップは、媒体に記録された計算機（携帯端末）を制御するためのプログラムを構成する処理ステップであっても構わない。
【０１５２】
動画ＯＮステップ（Ｓ２１０１）、ライトＯＮステップ（Ｓ２１０２）、瞳孔認識ステップ（Ｓ２１０３）、瞳孔変化演算ステップ（Ｓ２１０４）、ストレス評価ステップ（Ｓ２１０５）、ストレス評価結果送信ステップ（Ｓ２１０６）を有している。これらの図を利用して、本装置での各処理の流れのうち本実施例の特徴的な部分について説明し、その他の部分については、既述の実施例の説明と同様である。
【０１５３】
本実施例における処理においては、ストレス評価結果送信ステップを有している。「ストレス評価結果送信ステップ」とは、ストレス評価ステップにて得られたストレス評価結果を所定のアドレスに対して送信する段階である。送信先としては、例えば、統計処理のために設けられた統計処理装置であっても良い。
【０１５４】
以上により、ストレス評価結果を蓄積するために必要な携帯端末装置の記憶領域を節約することができる。また、統計処理を携帯端末以外で実施することにより、携帯端末装置の負荷を軽減することができる。
【実施例６】
【０１５５】
＜概要＞
本実施例の発明は、光を当てた際の瞳孔の変化を連続静止画撮影して、撮影画像の瞳孔変化を時間単位で演算するための機能を携帯端末装置に読取実行可能に記録したプログラムである。また、そのプログラムが読取実行可能に記録された携帯端末装置である。なお、本実施例の構成に実施例２から５のいずれか一の構成を追加したものも、本発明に含まれる。
【０１５６】
通常、動画よりも静止画の方が解像度が高い。そのため、動画に代えて連続静止画とすることにより、解像度が上がり、瞳孔の境界部分の認識が正確になる。
【０１５７】
以下、本実施例の携帯端末装置の機能及びハードウェアの内容、並びに、処理の流れについて、詳細に説明する。
【０１５８】
＜機能的構成＞
図１６は、本実施例の携帯端末装置の機能ブロックの一例である。この図にあるように、本実施例の携帯端末装置（２５０１）は、カメラ部（２５０２）と連続ＯＮ部（２５０３）とライト部（２５０４）とライトＯＮ部（２５０５）と瞳孔認識部（２５０６）と瞳孔変化演算部（２５０７）とを有する。本実施例の特徴的な機能は、連続ＯＮ部にある。そのため、本実施例では、連続ＯＮ部の機能を中心に説明する。
【０１５９】
「連続ＯＮ部」は、携帯端末の連続静止画撮影機能をＯＮにする働きをする。この場合でも、瞳孔対光反応を調べるためには連続静止画を撮影していない時にもライトを瞳孔に充てておくことが必要なので、「ライトＯＮ部」は、前述の実施例と同じように、「ライト部」を継続的にＯＮにするものである。
【０１６０】
この連続ＯＮ部における「撮影」とは、同時に撮影した静止画を保存する場合を含むが、保存を必須としない。例えば、連続ＯＮ部においては連続静止画を撮影するだけで、その撮影中の連続静止画を後述する「瞳孔認識部」及び「瞳孔変化演算部」にてリアルタイムで演算するという態様も本実施例に含まれるものである。
【０１６１】
ここにおける撮影中の連続静止画には、瞳孔が含まれていることが前提になるが、瞳孔のみではなく、瞳孔以外の瞳孔周辺の身体の部分も含まれていることが望ましい。人間の眼球には、その者の健康状態が様々な形で現れる。例えば、アレルギー性結膜炎や感染性結膜炎やぶどう膜炎あるいはドライアイなどにおいては、目の充血を引き起こすがある。そのため、結膜に生じた例えば目の充血の事実によって、上記の症状を知ることができるという作用がある。
【０１６２】
この連続静止画の撮影間隔については、短い間隔である方が望ましい。短ければ、動画に近い情報を得ることができ、正確な瞳孔が最小になるまでに要した時間、縮瞳率や縮瞳速度及び縮瞳加速度を求めることができるからである。短い間隔とは、例えば、２秒間に１枚、更には１秒間に１枚の静止画を撮影するなどである。
【０１６３】
さらに、この撮影間隔については、瞳孔変化演算部での演算に影響するので、瞳孔変化情報と関連付けた情報として存在することが望ましい。例えば、１秒間に１枚の静止画を撮影するのであれば、静止画により、１秒間ごとの瞳孔変化が明らかになっていることになる。
【０１６４】
＜ハードウェア的構成＞
図１７は、上記機能的な各構成要件をハードウェアとして実現した際の携帯端末装置における構成の一例を示す図である。この図を利用して本装置での各処理におけるそれぞれのハードウェア構成部の働きについて説明する。
【０１６５】
この図にあるように、本実施例の携帯端末装置は、各種演算処理を行う「ＣＰＵ」（２６０１）と、「主メモリ」（２６０２）と、を備えている。また、「ＨＤＤ」（２６０３）や、外部機器（２６０６）の「Ｉ／Ｆ」（２６０７）と情報の送受信を行うための「ネットワークＩ／Ｆ」（２６０４）や、カメラやライトやディスプレイなどとの間で情報の送受信を行うための「Ｉ／Ｏ」（２６０８）も備えている。そして、それらが「システムバス」（２６０５）などのデータ通信経路によって相互に接続され、情報の送受信や処理を行う。
【０１６６】
本実施例において格納されているプログラムは、携帯端末の動画撮影機能をＯＮにする連続ＯＮプログラムと、携帯端末の撮影側面に備えられているライトをＯＮにするライトＯＮプログラムと、撮影中の像の中から人を含む動物の目の瞳孔を認識する瞳孔認識プログラムと、認識した瞳孔の開き具合の時間変化である瞳孔変化を演算する瞳孔変化演算プログラムなどである。本実施例における特徴的なプログラムは、連続ＯＮプログラムである。その他のプログラムについては、既述の説明と同様である。
【０１６７】
携帯端末装置の連続ＯＮプログラムによって取得されたユーザの瞳孔画像は、「主メモリ」及び「ＨＤＤ」のアドレスに格納する。そして、携帯端末装置の「ＣＰＵ」において、「主メモリ」に格納されている連続静止画情報を用いて、論理演算処理によって認識した瞳孔の時間変化を演算するという具合である。なお、撮影した連続静止画を保存する場合には、このように連続静止画情報を「ＨＤＤ」に格納するが、他方、撮影した連続静止画をリアルタイムで瞳孔を認識・演算する場合には連続静止画情報を「ＨＤＤ」に格納しないこととなる。
【０１６８】
＜処理の流れ＞
図１８は、本実施例の携帯端末装置における処理の流れの一例を示すフローチャートである。なお、以下に示すステップは、媒体に記録された計算機（携帯端末）を制御するためのプログラムを構成する処理ステップであっても構わない。
【０１６９】
この図にあるように、まず、携帯端末の連続静止画撮影機能をＯＮにする（Ｓ２７０１）。次に、携帯端末の撮影側面に備えられているライトをＯＮにする（Ｓ２７０２）。そして、撮影中の像の中から人を含む動物の目の瞳孔を認識する（Ｓ２７０３）。最後に、認識した瞳孔の開き具合の時間変化である瞳孔変化を演算する（Ｓ２７０４）。
【０１７０】
ここにおける携帯端末の連続静止画撮影機能をＯＮにする連続ＯＮステップ（Ｓ２７０１）と携帯端末の撮影側面に備えられているライトをＯＮにするライトＯＮステップ（Ｓ２７０２）は、順番が逆であっても良い。つまり、まず携帯端末の撮影側面に備えられているライトをＯＮにする。次に、携帯端末の連続静止画撮影機能をＯＮにする。そして、撮影中の像の中から人を含む動物の目の瞳孔を認識する。最後に、認識した瞳孔の開き具合の時間変化である瞳孔変化を演算するという処理の流れでも良い。
【０１７１】
以上のステップにより、携帯端末装置を用いて、ストレスとの相関関係のある他覚症状によって、ストレスの状態を測定することができる。
【実施例７】
【０１７２】
＜概要＞
本実施例は、より望ましい実施形態として、実施例４又は瞳孔変化送信部を有する実施例６の構成を備えた携帯端末装置と繋がれている統計処理装置を提供する。統計処理装置の構成の概要としては、携帯端末装置から瞳孔変化情報を受信して、瞳孔変化情報を蓄積して、統計処理を行うというものである。
【０１７３】
このような統計処理をすることにより、例えば、ユーザからすれば、適切な診断を得られる点、及び適切な将来予測を立てられるという点にメリットがある。また、提供者からすれば、膨大なユーザ情報を獲得して診断の精度を上げる、有料の情報提供サービスをする、サプリメント・薬や癒し音楽などの商品又は役務の提供及び開発に生かす、医学的研究に生かすというメリットがある。このことは、本実施例に限らず、他の実施例における統計処理についても妥当する。
【０１７４】
以下、本実施例における装置の機能及びハードウェアの内容、並びに、処理の流れについて、詳細に説明する。
【０１７５】
＜機能的構成＞
図１９は、本実施例の携帯端末装置及び統計処理装置の機能ブロックの一例を示す図である。この図にあるように、本実施例の携帯端末装置（２８０１）は、カメラ部（２８０１）と動画ＯＮ部（２８０３）とライト部（２８０４）とライトＯＮ部（２８０５）と瞳孔認識部（２８０６）と瞳孔変化演算部（２８０７）と瞳孔変化送信部（２８０８）とを有する。そして、本実施例における統計処理装置（２８０９）は、瞳孔変化受信部（２８１０）、瞳孔変化蓄積部（２８１１）、瞳孔変化統計処理部（２８１２）とを有する。そして、瞳孔変化統計処理部は、ユーザ（２８１３）や管理者（２８１４）や医療機関などの第三者（２８１５）と繋がっている。このユーザ（２８１３）は、瞳孔変化送信部から瞳孔変化を統計処理装置に送信した当該携帯端末装置を含むものである。本実施例の特徴は、統計処理装置の各部の内容にある。そのため、統計処理装置の各部の機能的構成を中心に説明する。なお、その他の機能については、既述の説明と同様であるので、説明を省略
する。
【０１７６】
「瞳孔変化受信部」は、携帯端末装置から送信された瞳孔変化を受信する働きをする。そのため、例えば、直径値や面積値に加えて、瞳孔が最小になるまでに要した時間、縮瞳率や縮瞳速度及び縮瞳加速度などの情報を統計処理装置が受信することとなる。また、これに合わせて、氏名、性別、生年月日、出身地、計測時刻、計測場所（例えば、住居、大学、職場、居酒屋、電車内、公園など）、食前・食後の別、食後の場合には食品成分、職業、計測日の仕事の有無及び強度、及び体温・心拍・血圧・皮膚電気抵抗・体動・呼吸とその変動などの生体データ、並びに体組成データや治療履歴などの付加情報についても受信することが望ましい。そして、この付加情報については、後の統計処理に用いやすいように、瞳孔変化情報と関連付けて保持することが望ましい。
【０１７７】
「瞳孔変化蓄積部」は、受信した瞳孔変化を蓄積する働きをする。蓄積の態様については、まずは、ユーザごとに蓄積する態様が考えられる。そうすれば、ユーザのストレス状態の変化を、蓄積された瞳孔変化情報の比較という形で把握することができる。また、次に、ユーザでは分けることなく、日にちごとに分けるという方法がある。この方法によれば、例えば天候がストレスに与える影響などを分析するための蓄積が可能となる。
【０１７８】
「瞳孔変化統計処理部」は、蓄積された瞳孔変化を統計処理する働きをする。統計処理としては、前記のように、ユーザごとに統計処理する方法、日付ごとに統計処理する方法、付加情報ごとに統計処理する方法等が考えられる。
【０１７９】
前記のように、統計処理をすることのメリットとしては、ユーザからすれば、適切な診断を得られる点、及び適切な将来予測を立てられるという点にあり、また、提供者からすれば、膨大なユーザ情報を獲得して診断の精度を上げる、有料の情報提供サービスをする、サプリメント・薬や癒し音楽などの商品又は役務の提供及び開発に生かす、医学的研究に生かすという点にある。そこで、統計処理装置は、統計処理した結果をユーザ等に開示するための機能を備えていても良い。開示するための機能としては、例えば、統計処理装置において、ユーザ等の端末に対して統計情報を送信するための統計情報送信部を有し、かつ、ユーザ等の端末において、統計処理装置から送信された統計情報を受信するための統計情報受信部を備えている構成が考えられる。その上で、ユーザ等の端末において、統計情報を出力するための統計情報出力部を有していれば、例えば、ユーザは、携帯端末装置のディスプレイ等を通して統計情報を認識することができる。
【０１８０】
例えば、ユーザから自覚しているストレス度合いを入力してもらい、そのストレス度合いと瞳孔変化によって導かれるストレス度合いを比較するという方法が考えられる。図４１は、縮瞳速度を横軸にとり、ストレス度合いを縦軸にとった場合の図である。統計値としてのデータが曲線（５６０１）のようになったとき、ユーザの自覚症状としてのストレス度合いがＹ１の部分（５６０２）であったとしても、縮瞳速度からすればストレス度合いがＹ２の部分（５６０３）である場合には、統計処理及び実際の縮瞳速度に基づいて、Ｙ２の部分に相当するストレス度合いであると診断し、その旨を出力することができるという具合である。このようにすることで、ユーザは、適切な診断を得ることができる。
【０１８１】
次に、図４２は、縮瞳速度を横軸にとり、ストレス度合いを縦軸にとった場合の特定の作業中の時間毎のストレス変化を示す図である。統計処理の結果導き出された曲線（５７０１）は、例えば、Ｚ０の部分から１時間後にはＺ１の部分に、その１時間後にはＺ２の部分に、という具合に時間毎のストレス変化を表している。この図において、例えば、当該特定の作業の現時点でのストレス状態がＺ２の部分であるとすれば、その３時間後に対応する部分はＺ５の部分であり、ストレス強度としてはＹ３の部分（５７０２）であることが予測できる。このように、時間毎のストレス変化を統計処理することによって、適切な将来予測をすることができる。
【０１８２】
これらの統計処理は、前記のように付加情報についても同時に受信していれば、時間毎の変化に限らず、天候、食事、仕事環境、趣味等ごとに統計処理をすることができる。そうすれば、これらを総合的に組み合わせることによって、精度の高いストレス診断をすることができるし、ストレス原因を特定するための情報を得ることもできる。また、そのストレス原因は、個人ごとのストレス原因であっても良いし、全ユーザに共通する事項の場合には一般に妥当するストレス原因であると考えることもできる。このように一般的に妥当するストレス原因の場合には、その事実を物語る情報の価値は社会的に高くなるので、有料での情報提供をすることにも繋がる。さらに、ストレス原因の特定に加えて、ストレスを軽くする要素を発見できれば、その要素を提示したり、ストレス原因を解消するような解決案を提示したりする機能を備えていても良い。これらの統計処理の意義や使い道については、本実施例に限らず、本発明における統計処理の全般に妥当するものである。
【０１８３】
＜ハードウェア的構成＞
図２０は、上記機能的な各構成要件をハードウェアとして実現した際の携帯端末装置及び統計処理装置における構成の一例を示す図である。携帯端末装置は、「ＣＰＵ（中央演算装置）」（２９０１）、「主メモリ」（２９０２）、「ＨＤＤ」（２９０３）、「ネットワークＩ／Ｆ」（２９０４）、「Ｉ／Ｏ」（２９１２）、「システムバス」（２９０５）を有しており、統計処理装置（２９０６）は、「Ｉ／Ｆ」（２９０７）、「ディスプレイ」（２９０８）、「主メモリ」（２９０９）、「ＣＰＵ」（２９１０）、「フレームメモリ」（２９１１）を有している。
【０１８４】
これらの図を利用して、本装置での各処理におけるそれぞれのハードウェア構成部のうち本実施例の特徴的な部分について説明し、その他の部分については既述の実施例の説明と同様である。
【０１８５】
本実施例における特徴は、統計処理装置にある。携帯端末装置においては、携帯端末装置の「主メモリ」に格納されている動画情報と瞳孔変化情報が「瞳孔変化送信プログラム」によって「ネットワークＩ／Ｆ」を通じて統計処理装置に送信され、統計処理装置においては、それらの情報が「瞳孔変化受信プログラム」によって「Ｉ／Ｆ」を通じて受信され、それが統計処理装置上の「主メモリ」ないし図示しない「ＨＤＤ」に格納され、「瞳孔変化蓄積プログラム」によって瞳孔変化情報が「主メモリ」ないし図示しない「ＨＤＤ」に蓄積される。その蓄積された瞳孔変化情報が、統計処理装置の「ＣＰＵ」の働きによって、「瞳孔変化統計処理プログラム」を用いて統計処理を行う、という具合である。
【０１８６】
さらに、機能的構成で述べたように、統計処理装置の「主メモリ」には、統計処理結果を携帯端末に送信するための統計情報送信プログラムを格納していても良いし、携帯端末装置の「主メモリ」には、送信された統計処理結果を統計処理装置から受信するための統計情報受信プログラム、及びその統計情報を出力するための統計情報出力プログラムを格納していても良い。
【０１８７】
＜処理の流れ＞
図２１は、本実施例の携帯端末装置及び統計処理装置における処理の流れの一例を示すフローチャートである。以下に示すステップは、媒体に記録された計算機（携帯端末及び統計処理端末）を制御するためのプログラムを構成する処理ステップであっても構わない。
【０１８８】
携帯端末装置は、動画ＯＮステップ（Ｓ３００１）、ライトＯＮステップ（Ｓ３００２）、瞳孔認識ステップ（Ｓ３００３）、瞳孔変化演算ステップ（Ｓ３００４）、瞳孔変化送信ステップ（Ｓ３００５）を有している。そして、統計処理装置は、瞳孔変化受信ステップ（Ｓ３００６）、瞳孔変化蓄積ステップ（Ｓ３００７）、瞳孔変化統計処理ステップ（Ｓ３００８）を有している。これらの図を利用して、本装置での各処理の流れのうち本実施例の特徴的な部分について説明し、その他の部分については、既述の実施例の説明と同様である。
【０１８９】
本実施例における処理においては、統計処理装置内での処理ステップが加わる。統計処理装置における「瞳孔変化受信ステップ」とは、携帯端末装置における瞳孔変化送信ステップを実行した結果として送信された瞳孔変化を受信する段階である。また、統計処理装置における「瞳孔変化蓄積ステップ」とは、受信した瞳孔変化を蓄積する段階である。そして、統計処理装置における「瞳孔変化統計処理ステップ」とは、蓄積された瞳孔変化を統計処理する段階である。
【０１９０】
機能的構成でも述べたように、統計処理の態様としてはユーザごとに限定されない。また、例えば、測定した場所の明るさ、測定時刻、食前・食後の別、前日の睡眠時間、計測日の仕事の有無及び強度などの情報と関連付けることにより、ユーザに開示される際には、ユーザのストレス原因の分析などに資する。
【０１９１】
ユーザに統計情報を開示するための工夫として、さらに、統計処理装置において、携帯端末に対して統計情報を送信するための統計情報送信ステップを有し、かつ、携帯端末装置において、統計処理装置から送信された統計情報を受信するための統計情報受信ステップと、受信した統計情報を出力するための統計情報出力ステップとを有する処理の流れとすることも考えられる。
【０１９２】
このような処理の流れにより、瞳孔対光反応の統計処理を行うことができ、もって、ユーザが自己のストレス原因の特徴等を知るための情報を生成することができる。
【実施例８】
【０１９３】
＜概要＞
本実施例は、より望ましい実施形態として、実施例４に実施例５の構成が追加された携帯端末装置と繋がれている統計処理装置を提供する。統計処理装置の構成の概要としては、携帯端末装置からストレス評価結果と瞳孔変化を受信して、それらを蓄積して、統計処理を行うというものである。
【０１９４】
以下、本実施例における装置の機能及びハードウェアの内容、並びに、処理の流れについて、詳細に説明する。
【０１９５】
＜機能的構成＞
図２２は、本実施例の携帯端末装置及び統計処理装置の機能ブロックの一例を示す図である。この図にあるように、本実施例の携帯端末装置（３４０１）は、カメラ部（３４０２）と動画ＯＮ部（３４０３）とライト部（３４０４）とライトＯＮ部（３４０５）と瞳孔認識部（３４０６）と瞳孔変化演算部（３４０７）とストレス評価部（３４０８）と、ストレス評価結果送信部（３４０９）と瞳孔変化送信部（３４１４）を有する。そして、本実施例における統計処理装置（３４１０）は、ストレス評価結果受信部（３４１１）、ストレス評価結果蓄積部（３４１２）、ストレス評価統計処理部（３４１３）と瞳孔変化受信部（３４１５）と瞳孔変化蓄積部（３４１６）を有する。そして、ストレス評価統計処理部は、ユーザ（３４１７）や管理者（３４１８）や医療機関などの第三者（３４１９）と繋がっている。本実施例の特徴は、統計処理装置の各部の内容にある。そのため、統計処理装置の各部の機能的構成を中心に説明する。なお、その他の機能については、既述の説明と同様であるので、説明を省略する。
【０１９６】
「ストレス評価結果受信部」は、携帯端末装置から送信されたストレス評価結果を受信する働きをする。そのため、例えば、ストレスの度合いを％などでの数値、大・中・小などの段階、前日比や最大値・最小値との比較値などで示したストレス評価を統計処理装置が受信することとなる。
【０１９７】
「ストレス評価結果蓄積部」は、受信したストレス評価結果を蓄積する働きをする。蓄積の態様については、ユーザごとに蓄積する態様が考えられる。そうすれば、ユーザのストレス評価結果の変化を、蓄積されたストレス評価結果の変化という形で把握することができる。また、次に、ユーザでは分けることなく、日にちごとに分けるという方法がある。この方法によれば、例えば天候がストレス評価結果に与える影響などを分析するための蓄積が可能となる。
【０１９８】
「ストレス評価統計処理部」は、蓄積されたストレス評価結果及び瞳孔変化を統計処理する働きをする。統計処理としては、前記のように、ユーザごとに統計処理する方法、日付ごとに統計処理する方法等が考えられる。
【０１９９】
さらに、前記の実施例でも述べたように、統計処理装置は、統計処理した結果をユーザ等に開示するための機能を備えていても良い。開示するための機能としては、例えば、統計処理装置において、ユーザ等の端末に対して統計情報を送信するための統計情報送信部を有し、かつ、ユーザ等の端末において、統計処理装置から送信された統計情報を受信するための統計情報受信部を備えている構成が考えられる。
【０２００】
図４７は、ユーザ側での出力の態様を示す図である。縦軸をストレス評価値として、横軸を瞳孔変化速度としたグラフである。瞳孔変化速度が高ければ高いほどストレス評価値が小さくなるということが分かる。
【０２０１】
さらに、図４８は、ユーザ側での出力の態様を示す図である。縦軸をストレス評価値として、横軸を体組成量としたグラフである。体脂肪率、体重、ＢＭＩ、脈拍については、体組成量が高ければ高いほどストレス評価値が高くなるということが分かる。他方、基礎代謝については、体組成量が高ければ高いほどストレス評価値が低くなるということが分かる。このような統計情報が得られれば、ユーザ等は、ストレスの原因を客観的に分析することができるようになる。しかも、瞳孔変化との比較より、ストレス評価値の方がストレスとの相関が明確なので、一見して分かり易い。
【０２０２】
以上により、統計処理装置においてすべきストレス評価の処理を欠くユーザの携帯端末装置で行ってから受信することができ、サーバでの負担を軽減するという効果がある。
【０２０３】
＜ハードウェア的構成＞
図２３は、上記機能的な各構成要件をハードウェアとして実現した際の携帯端末装置及び統計処理装置における構成の一例を示す図である。携帯端末装置は、「ＣＰＵ（中央演算装置）」（３５０１）、「主メモリ」（３５０２）、「ＨＤＤ」（３５０３）、「ネットワークＩ／Ｆ」（３５０４）、「Ｉ／Ｏ」（３５１２）、「システムバス」（３５０５）を有しており、統計処理装置（３５０６）は、「Ｉ／Ｆ」（３５０７）、「ディスプレイ」（３５０８）、「主メモリ」（３５０９）、「ＣＰＵ」（３５１０）、「フレームメモリ」（３５１１）を有している。
【０２０４】
これらの図を利用して、本装置での各処理におけるそれぞれのハードウェア構成部のうち本実施例の特徴的な部分について説明し、その他の部分については既述の実施例の説明と同様である。
【０２０５】
本実施例における特徴は、統計処理装置にある。携帯端末装置においては、携帯端末装置の「主メモリ」に格納されているストレス評価情報が「ストレス評価結果送信プログラム」によって「ネットワークＩ／Ｆ」を通じて統計処理装置に送信され、統計処理装置においては、それらの情報が「ストレス評価結果受信プログラム」によって「Ｉ／Ｆ」を通じて受信され、それが統計処理装置上の「主メモリ」ないし図示しない「ＨＤＤ」に格納され、「ストレス評価結果蓄積プログラム」によってストレス評価情報が「主メモリ」ないし図示しない「ＨＤＤ」に蓄積される。その蓄積されたストレス評価情報が、統計処理装置の「ＣＰＵ」の働きによって、「ストレス評価統計処理プログラム」を用いて統計処理を行う、という具合である。
【０２０６】
さらに、統計処理装置の「主メモリ」には、統計処理結果を携帯端末に送信するための統計情報送信プログラムを格納していても良いし、携帯端末装置の「主メモリ」には、送信された統計処理結果を統計処理装置から受信するための統計情報受信プログラム、及びその統計情報を出力するための統計情報出力プログラムを格納していても良い。
【０２０７】
＜処理の流れ＞
図２４は、本実施例の携帯端末装置及び統計処理装置における処理の流れの一例を示すフローチャートである。以下に示すステップは、媒体に記録された計算機（携帯端末、統計処理端末）を制御するためのプログラムを構成する処理ステップであっても構わない。
【０２０８】
携帯端末装置は、動画ＯＮステップ（Ｓ３６０１）、ライトＯＮステップ（Ｓ３６０２）、瞳孔認識ステップ（Ｓ３６０３）、瞳孔変化演算ステップ（Ｓ３６０３）、ストレス評価ステップ（Ｓ３６０４）、ストレス評価結果送信ステップ（Ｓ３６０５）、瞳孔変化送信ステップ（Ｓ３６０６）を有している。そして、統計処理装置は、瞳孔変化受信ステップ（Ｓ３６０７）、瞳孔変化蓄積ステップ（Ｓ３６０８）、ストレス評価結果受信ステップ（Ｓ３６０９）、ストレス評価結果蓄積ステップ（Ｓ３６１０）、ストレス評価統計処理ステップ（Ｓ３６１１）を有している。これらの図を利用して、本装置での各処理の流れのうち本実施例の特徴的な部分について説明し、その他の部分については、既述の実施例の説明と同様である。
【０２０９】
本実施例における処理においては、統計処理装置内での処理ステップが加わる。統計処理装置における「ストレス評価結果受信ステップ」とは、携帯端末装置におけるストレス評価結果送信ステップを実行した結果として送信されたストレス評価結果を受信する段階である。このストレス評価結果は、瞳孔変化と関連付けて送られることになる。それにより、統計処理装置内でストレス評価をする負担を軽減することができる。また、統計処理装置におけるストレス評価結果蓄積ステップ」とは、受信したストレス評価結果を蓄積する段階である。そして、統計処理装置における「ストレス評価統計処理ステップ」とは、蓄積されたストレス評価結果を統計処理する段階である。
【０２１０】
「ストレス評価結果受信ステップ」は、携帯端末装置でのストレス評価結果送信ステップの後であれば、統計処理装置内での先後関係を問わない。例えば、瞳孔変化受信ステップよりも先であっても良い。次に、「ストレス評価結果蓄積部」は、統計処理装置内での体組成データ受信ステップの後であれば、他の処理との先後関係を問わない。同様に、「瞳孔変化受信ステップ」と「瞳孔変化蓄積ステップ」についても、ストレス評価結果受信ステップ及びストレス評価結果蓄積ステップとの先後関係を問わない。もっとも、「ストレス評価統計処理ステップ」は、蓄積した瞳孔変化とストレス評価結果を用いたものになるので、ストレス評価結果蓄積ステップと瞳孔変化蓄積ステップのいずれもが終了した後になされる。
【０２１１】
統計処理の態様としてはユーザごとに限定されない。また、例えば、測定した場所の明るさ、測定時刻、食前・食後の別、前日の睡眠時間、計測日の仕事の有無及び強度などの情報と関連付けることにより、ユーザに開示される際には、ユーザの体組成データの分析などに資する。
【０２１２】
ユーザに統計情報を開示するための工夫として、さらに、統計処理装置において、携帯端末に対して統計情報を送信するための統計情報送信ステップを有し、かつ、携帯端末装置において、統計処理装置から送信された統計情報を受信するための統計情報受信ステップと、受信した統計情報を出力するための統計情報出力ステップとを有する処理の流れとすることも考えられる。
【実施例９】
【０２１３】
＜概要＞
本実施例の発明は、光を当てた際の瞳孔の変化を動画撮影して、瞳孔変化を時間単位で演算するための動画情報を保持し、外部機器に送信するための機能を携帯端末装置に読取実行可能に記録したプログラムである。また、そのプログラムが読取実行可能に記録された携帯端末装置である。
【０２１４】
以下、本実施例の携帯端末装置の機能及びハードウェアの内容、並びに、処理の流れについて、詳細に説明する。
【０２１５】
＜機能的構成＞
図２５は、本実施例の携帯端末装置の機能ブロックの一例である。この図にあるように、本実施例の携帯端末装置（４００１）は、カメラ部（４００２）と動画ＯＮ部（４００３）とライト部（４００４）とライトＯＮ部（４００５）と瞳孔認識部（４００６）と動画保持部（４００７）と動画送信部（４００８）とを有する。本実施例の特徴は、動画保持部及び動画送信部の内容にある。そのため、以下では、動画保持部及び動画送信部の内容を中心に説明する。
【０２１６】
既述の実施例は、いずれも、携帯端末装置において瞳孔変化の演算を実施するという内容である。これは、携帯端末装置において演算を完了することができる点で優れているものであるが、本発明の課題を達成するためには、必ずしも、瞳孔変化の演算については、携帯端末装置内で完了している必要はない。そのため、本実施例における携帯端末装置は、外部機器において瞳孔変化の演算が行われることを前提として、携帯端末装置においては瞳孔認識部において瞳孔が認識された動画を保持し、外部機器に送信するという機能を備えることで、本発明の課題を達成しようとするものである。すなわち、外部機器は、実施例１における瞳孔変化演算部に相当する機能を有することが前提となり、さらには実施例３におけるストレス評価部に相当する機能を有していれば望ましい。
【０２１７】
「動画保持部」とは、動画ＯＮ部にて撮影された動画を保持する働きをする。この保持される動画は、瞳孔部分が非瞳孔部分と区別されている状態であっても良い。
【０２１８】
「動画送信部」とは、保持された動画を所定のアドレスに送信する働きをする。これにより、外部機器に対して、ユーザの瞳孔を撮影した動画情報を送信することができる。
【０２１９】
これらにより、携帯端末装置内で瞳孔変化演算をすることなく、ストレスとの相関関係のある他覚症状によって、外部機器においてストレスの状態を測定することができる。そして、この動画情報は、外部機器のフレームメモリに蓄積され、所定のフレーム毎に外部機器のディスプレイなどで出力されることになる。また、ストレス評価された情報などは、他の実施例と同様に、携帯端末装置を含むユーザ端末などに一覧表示されることが望ましい。
【０２２０】
以上により、携帯端末装置での処理を軽減し、携帯端末装置の負荷を軽減することができる。
【０２２１】
＜ハードウェア的構成＞
図２６は、上記機能的な各構成要件をハードウェアとして実現した際の携帯端末装置における構成の一例を示す図である。この図を利用して本装置での各処理におけるそれぞれのハードウェア構成部の働きについて説明する。
【０２２２】
この図にあるように、本実施例の携帯端末装置は、各種演算処理を行う「ＣＰＵ」（４１０１）と、「主メモリ」（４１０２）と、を備えている。また、「ＨＤＤ」（４１０３）や、外部機器（４１０６）の「Ｉ／Ｆ」（４１０７）と情報の送受信を行うための「ネットワークＩ／Ｆ」（４１０４）や、カメラやライトやディスプレイなどとの間で情報の送受信を行うための「Ｉ／Ｏ」（４１０８）も備えている。そして、それらが「システムバス」（４１０５）などのデータ通信経路によって相互に接続され、情報の送受信や処理を行う。外部機器は、「フレームメモリ」（４１０９）と「ディスプレイ」（４１１０）と「ＣＰＵ」（４１１１）を備えている。
【０２２３】
また、本実施例において「主メモリ」に格納されているプログラムは、携帯端末の動画撮影機能をＯＮにする動画ＯＮプログラムと、携帯端末の撮影側面に備えられているライトをＯＮにするライトＯＮプログラムと、撮影中の像の中から人を含む動物の目の瞳孔を認識する瞳孔認識プログラムと、保持された動画を所定のアドレスに送信する動画送信プログラムなどである。
【０２２４】
携帯端末装置の動画ＯＮプログラムによって取得されたユーザの瞳孔画像は、「主メモリ」及び「ＨＤＤ」のアドレスに格納する。そして、携帯端末装置の「ＣＰＵ」において、「主メモリ」に格納されている動画情報を、「ネットワークＩ／Ｆ」を通じて外部機器の「Ｉ／Ｆ」に向けて送信する、という具合である。
【０２２５】
＜処理の流れ＞
図２７は、本実施例の携帯端末装置における処理の流れの一例を示すフローチャートである。なお、以下に示すステップは、媒体に記録された計算機（携帯端末）を制御するためのプログラムを構成する処理ステップであっても構わない。
【０２２６】
この図にあるように、まず、携帯端末の動画撮影機能をＯＮにする（Ｓ４２０１）。次に、携帯端末の撮影側面に備えられているライトをＯＮにする（Ｓ４２０２）。次に、撮影中の像の中から人を含む動物の目の瞳孔を認識する（Ｓ４２０３）。そして、動画ＯＮステップにて撮影された動画を保持する。最後に、保持された動画を所定のアドレスに送信する（Ｓ４２０４）。
【０２２７】
ここにおける携帯端末の動画撮影機能をＯＮにする動画ＯＮステップ（Ｓ４２０１）と携帯端末の撮影側面に備えられているライトをＯＮにするライトＯＮステップ（Ｓ４２０２）は、順番が逆であっても良い。つまり、まず携帯端末の撮影側面に備えられているライトをＯＮにする。次に、携帯端末の動画撮影機能をＯＮにする。次に、撮影中の像の中から人を含む動物の目の瞳孔を認識する。そして、動画ＯＮステップにて撮影された動画を保持する。最後に、保持された動画を所定のアドレスに送信するという処理の流れでも良い。
【０２２８】
以上のステップにより、携帯端末装置内で瞳孔変化演算をすることなく、ストレスとの相関関係のある他覚症状によって、ストレスの状態を測定することができる。
【実施例１０】
【０２２９】
＜概要＞
本実施例の発明は、光を当てた際の瞳孔の変化を連続静止画撮影して、瞳孔変化を時間単位で演算するための連続静止画情報を保持し、外部機器に送信するための機能を携帯端末装置に読取実行可能に記録したプログラムである。また、そのプログラムが読取実行可能に記録された携帯端末装置である。
【０２３０】
以下、本実施例の携帯端末装置の機能及びハードウェアの内容、並びに、処理の流れについて、詳細に説明する。
【０２３１】
＜機能的構成＞
図２８は、本実施例の携帯端末装置の機能ブロックの一例である。この図にあるように、本実施例の携帯端末装置（４３０１）は、カメラ部（４３０２）と連続ＯＮ部（４３０３）とライト部（４３０４）とライトＯＮ部（４３０５）と瞳孔認識部（４３０６）と連続静止画保持部（４３０７）と連続静止画送信部（４３０８）とを有する。本実施例の特徴は、連続静止画保持部及び連続静止画送信部の内容にある。そのため、以下では、動画保持部及び動画送信部の内容を中心に説明する。
【０２３２】
本実施例は、実施例９と同じく、外部機器において瞳孔変化の演算が行われることを前提として、携帯端末装置においては瞳孔認識部において瞳孔が認識された連続静止画を保持し、外部機器に送信するという機能を備えることで、本発明の課題を達成しようとするものである。実施例９と異なる点は、撮影する画像が連続静止画であるため、保持して送信する画像が連続静止画である点である。連続静止画を撮影する点については、既述の実施例で説明済みであるので、以下では、連続静止画保持部と連続静止画送信部について説明する。
【０２３３】
「連続静止画保持部」とは、携帯端末にて撮影された連続静止画を保持する働きをする。この保持される動画は、瞳孔部分が非瞳孔部分と区別されている状態であっても良い。
【０２３４】
「連続静止画送信部」とは、保持された連続静止画を所定のアドレスに送信する働きをする。これにより、外部機器に対して、ユーザの瞳孔を撮影した連続静止画情報を送信することができる。
【０２３５】
これらにより、携帯端末装置内で瞳孔変化演算をすることなく、ストレスとの相関関係のある他覚症状によって、ストレスの状態を測定することができる。
【０２３６】
＜ハードウェア的構成＞
図２９は、上記機能的な各構成要件をハードウェアとして実現した際の携帯端末装置における構成の一例を示す図である。この図を利用して本装置での各処理におけるそれぞれのハードウェア構成部の働きについて説明する。
【０２３７】
この図にあるように、本実施例の携帯端末装置は、各種演算処理を行う「ＣＰＵ」（４４０１）と、「主メモリ」（４４０２）と、を備えている。また、「ＨＤＤ」（４４０３）や、外部機器（４４０６）の「Ｉ／Ｆ」（４４０７）と情報の送受信を行うための「ネットワークＩ／Ｆ」（４４０４）や、カメラやライトやディスプレイなどとの間で情報の送受信を行うための「Ｉ／Ｏ」（４４０８）も備えている。そして、それらが「システムバス」（４４０５）などのデータ通信経路によって相互に接続され、情報の送受信や処理を行う。
【０２３８】
また、「主メモリ」は、各種処理を行うプログラムを「ＣＰＵ」に実行させるために読み出すと同時にそのプログラムの作業領域でもあるワーク領域を提供する。また、この「主メモリ」や「ＨＤＤ」、図示しない「フラッシュメモリ」にはそれぞれ複数のアドレスが割り当てられており、「ＣＰＵ」で実行されるプログラムは、そのアドレスを特定しアクセスすることで相互にデータのやりとりを行い、処理を行うことが可能になっている。本実施例において格納されているプログラムは、携帯端末の連続静止画撮影機能をＯＮにする連続ＯＮプログラムと、携帯端末の撮影側面に備えられているライトをＯＮにするライトＯＮプログラムと、撮影中の像の中から人を含む動物の目の瞳孔を認識する瞳孔認識プログラムと、保持された連続静止画を所定のアドレスに送信する連続静止画送信プログラムなどである。
【０２３９】
携帯端末装置の連続ＯＮプログラムによって取得されたユーザの瞳孔画像は、「主メモリ」及び「ＨＤＤ」のアドレスに格納する。そして、携帯端末装置の「ＣＰＵ」において、「主メモリ」に格納されている連続静止画情報を、「ネットワークＩ／Ｆ」を通じて外部機器の「Ｉ／Ｆ」に向けて送信する、という具合である。
【０２４０】
＜処理の流れ＞
図３０は、本実施例の携帯端末装置における処理の流れの一例を示すフローチャートである。なお、以下に示すステップは、媒体に記録された計算機（携帯端末）を制御するためのプログラムを構成する処理ステップであっても構わない。
【０２４１】
この図にあるように、まず、携帯端末の連続静止画撮影機能をＯＮにする（Ｓ４５０１）。次に、携帯端末の撮影側面に備えられているライトをＯＮにする（Ｓ４５０２）。次に、撮影中の像の中から人を含む動物の目の瞳孔を認識する（Ｓ４５０３）。そして、連続ＯＮステップにて撮影された連続静止画を保持する。最後に、保持された連続静止画を所定のアドレスに送信する（Ｓ４５０４）。
【０２４２】
ここにおける携帯端末の連続静止画撮影機能をＯＮにする連続ＯＮステップ（Ｓ４５０１）と携帯端末の撮影側面に備えられているライトをＯＮにするライトＯＮステップ（Ｓ４５０２）は、順番が逆であっても良い。つまり、まず携帯端末の撮影側面に備えられているライトをＯＮにする。次に、携帯端末の連続静止画撮影機能をＯＮにする。次に、撮影中の像の中から人を含む動物の目の瞳孔を認識する。そして、連続ＯＮステップにて撮影された連続静止画を保持する。最後に、保持された連続静止画を所定のアドレスに送信するという処理の流れでも良い。
【０２４３】
以上のステップにより、携帯端末装置内で瞳孔変化演算をすることなく、ストレスとの相関関係のある他覚症状によって、ストレスの状態を測定することができる。
【実施例１１】
【０２４４】
＜概要＞
本実施例は、携帯端末装置から受信した動画をもとに瞳孔対光反応を演算するための機能を有する演算装置を提供する。
【０２４５】
以下、本実施例における装置の機能及びハードウェアの内容、並びに、処理の流れについて、詳細に説明する。
【０２４６】
＜機能的構成＞
図５５は、本実施例の演算装置の機能ブロックの一例を示す図である。この図にあるように、本実施例の演算装置（７３０１）は、動画受信部（７３０２）、瞳孔認識部（７３０３）と瞳孔変化演算部（７３０４）を有する。また、本実施例において、携帯端末は、通常、実施例１におけるカメラ部とライト部と動画ＯＮ部とライトＯＮ部を有している。その場合の携帯端末のカメラ部とライト部と動画ＯＮ部とライトＯＮ部の特徴は、実施例１と同様である。また、さらに携帯端末は、通常、動画を本実施例における演算装置に送信するための動画送信部を有している。
【０２４７】
「動画受信部」は、携帯端末（７３０５）から人を含む動物の目を含む動画を受信する働きをする。これにより、ユーザから、人を含む動物の目を含む動画を受信することができる。
【０２４８】
さらに、瞳孔認識部は、受信した動画の中から人を含む動物の目の瞳孔を認識する機能を有する。また、瞳孔変化演算部は、認識した瞳孔の開き具合の時間変化である瞳孔変化を演算する機能を有する。
瞳孔認識部と瞳孔変化演算部の機能の詳細は、実施例１における携帯端末装置の瞳孔認識部及び瞳孔変化演算部の詳細と同様である。
【０２４９】
さらに、演算装置は、受信した動画について瞳孔を認識することができなかった場合にユーザに対して通知を発信する通知発信部を有していても良い。そうすれば、ユーザが、通知を受信することで再度動画を撮影して送信することができるので、演算装置の側で瞳孔変化の演算ができないという事態を改善することができる。このような効果をより一層高めるためにも、通知には、認識できなかった理由を付記する理由付記手段を備えていても良い。
【０２５０】
さらに、ユーザに対して演算結果である瞳孔変化情報を送信すれば、ユーザは、自己のストレス状態を知ることができる。また、ユーザ以外の第三者に提供すれば、第三者がストレスを客観的に把握することができるので、例えば医療機関であれば診察の際の有意義な情報になるし、ユーザの勤務先であればストレスによる病気や事故を防ぐことにも繋がる。このように、瞳孔変化情報について、例えば、管理者（７３０６）、ユーザ（７３０７）、第三者（７３０８）に対して送信するための機能を備えていることが望ましい。そのため、演算装置は、所定のアドレスに対して瞳孔変化を送信する瞳孔変化送信部を有していても良い。
【０２５１】
これにより、携帯端末装置に必要な機能としては、カメラ部とライト部と動画ＯＮ部とライトＯＮ部と動画送信部があれば良いことになるから、スマートフォンなどの携帯端末で特別な機能を有しなくとも演算を実施することができる。そのため、ユーザは、必ずしも専用端末や専用アプリを用意する必要がないので、本発明を気軽に利用できることになる。
【０２５２】
＜ハードウェア的構成＞
図５６は、上記機能的な各構成要件をハードウェアとして実現した際の演算装置における構成の一例を示す図である。演算装置は、「ＣＰＵ」（７４０１）、「主メモリ」（７４０２）、「ＨＤＤ」（７４０３）、「ネットワークＩ／Ｆ」（７４０４）、「Ｉ／Ｏ」（７４０８）、「システムバス」（７４０５）を有しており、携帯端末装置（７４０６）と「ネットワークＩ／Ｆ」を通じて繋がっている。
【０２５３】
これらの図を利用して、本装置での各処理におけるそれぞれのハードウェア構成部について説明する。
【０２５４】
本実施例における演算装置においては、「主メモリ」に格納されているプログラムの内容は、動画受信プログラム、瞳孔認識プログラム、瞳孔変化演算プログラムである。
【０２５５】
「ＣＰＵ」での働きにおいて、動画受信プログラムを実行して、携帯端末装置から送信されてくる人を含む動物の目を含む動画を、「ネットワークＩ／Ｆ」を通じて受信し、その受信した動画は、「ＨＤＤ」及び「主メモリ」に格納される。その上で、瞳孔認識プログラムを実行して、受信した動画の中から人を含む動物の目の瞳孔を認識し、瞳孔変化演算プログラムを実行して、認識した瞳孔の開き具合の時間変化である瞳孔変化を演算するという具合である。演算結果は、瞳孔変化情報として、「ＨＤＤ」及び「主メモリ」に格納される。
【０２５６】
＜処理の流れ＞
図５７は、本実施例の演算装置における処理の流れの一例を示すフローチャートである。なお、以下に示すステップは、媒体に記録された計算機（携帯端末、演算端末）を制御するためのプログラムを構成する処理ステップであっても構わない。
【０２５７】
この図にあるように、まず、携帯端末から人を含む動物の目を含む動画を受信する（Ｓ７５０１）。次に、受信した動画の中から人を含む動物の目の瞳孔を認識する（Ｓ７５０２）。次に、認識した瞳孔の開き具合の時間変化である瞳孔変化を演算する（Ｓ７５０３）。
【０２５８】
瞳孔認識ステップ（Ｓ７５０２）と瞳孔変化演算ステップ（Ｓ７５０３）の機能の詳細は、実施例１における携帯端末装置の瞳孔認識ステップ及び瞳孔変化演算ステップの詳細と同様である。
【０２５９】
さらに、演算装置は、受信した動画について瞳孔を認識することができなかった場合にユーザに対して通知を発信する通知発信ステップを有していても良い。また、通知には、認識できなかった理由を付記する理由付記サブステップを備えていても良い。
【０２６０】
また、所定のアドレスに対して瞳孔変化を送信する瞳孔変化送信ステップを有していても良い。
【０２６１】
これにより、スマートフォンなどの携帯端末で特別な機能を有しなくとも演算を実施することができる。そのため、ユーザは、必ずしも専用端末や専用アプリを用意する必要がないので、本発明を気軽に利用できることになる。
【実施例１２】
【０２６２】
＜概要＞
本実施例は、携帯端末装置から受信した連続静止画をもとに瞳孔対光反応を演算するための機能を有する演算装置を提供する。
【０２６３】
以下、本実施例における装置の機能及びハードウェアの内容、並びに、処理の流れについて、詳細に説明する。
【０２６４】
＜機能的構成＞
図５８は、本実施例の演算装置の機能ブロックの一例を示す図である。この図にあるように、本実施例の演算装置（７６０１）は、連続静止画受信部（７６０２）、瞳孔認識部（７６０３）と瞳孔変化演算部（７６０４）を有する。また、本実施例において、携帯端末は、通常、実施例６におけるカメラ部とライト部と連続ＯＮ部とライトＯＮ部を有している。その場合の携帯端末のカメラ部とライト部と連続ＯＮ部とライトＯＮ部の特徴は、実施例６と同様である。また、さらに携帯端末は、通常、連続静止画を本実施例における演算装置に送信するための連続静止画送信部を有している。
【０２６５】
「連続静止画受信部」は、携帯端末（７６０５）から人を含む動物の目を含む連続静止画を受信する働きをする。これにより、ユーザから、人を含む動物の目を含む連続静止画を受信することができる。
【０２６６】
さらに、瞳孔認識部は、受信した連続静止画の中から人を含む動物の目の瞳孔を認識する機能を有する。また、瞳孔変化演算部は、認識した瞳孔の開き具合の時間変化である瞳孔変化を演算する機能を有する。瞳孔認識部と瞳孔変化演算部の機能の詳細は、実施例１における携帯端末装置の瞳孔認識部及び瞳孔変化演算部の詳細と同様である。
【０２６７】
さらに、実施例１１と同様に、演算装置は、受信した連続静止画について瞳孔を認識することができなかった場合にユーザに対して通知を発信する通知発信部を有していても良い。また、通知には、認識できなかった理由を付記する理由付記手段を備えていても良い。
【０２６８】
さらに、瞳孔変化情報について、例えば、管理者（７６０６）、ユーザ（７６０７）、第三者（７６０８）に対して送信するための機能を備えていることが望ましい。そのため、演算装置は、所定のアドレスに対して瞳孔変化を送信する瞳孔変化送信部を有していても良い。
【０２６９】
これにより、携帯端末装置に必要な機能としては、カメラ部とライト部と連続ＯＮ部とライトＯＮ部と連続静止画送信部があれば良いことになるから、スマートフォンなどの携帯端末で特別な機能を有しなくとも演算を実施することができる。そのため、ユーザは、必ずしも専用端末や専用アプリを用意する必要がないので、本発明を気軽に利用できることになる。
【０２７０】
＜ハードウェア的構成＞
図５９は、上記機能的な各構成要件をハードウェアとして実現した際の演算装置における構成の一例を示す図である。演算装置は、「ＣＰＵ」（７７０１）、「主メモリ」（７７０２）、「ＨＤＤ」（７７０３）、「ネットワークＩ／Ｆ」（７７０４）、「Ｉ／Ｏ」（７７０８）、「システムバス」（７７０５）を有しており、携帯端末装置（７７０６）と「ネットワークＩ／Ｆ」を通じて繋がっている。
【０２７１】
これらの図を利用して、本装置での各処理におけるそれぞれのハードウェア構成部について説明する。
【０２７２】
本実施例における演算装置においては、「主メモリ」に格納されているプログラムの内容は、連続静止画受信プログラム、瞳孔認識プログラム、瞳孔変化演算プログラムである。
【０２７３】
「ＣＰＵ」での働きにおいて、連続静止画受信プログラムを実行して、携帯端末装置から送信されてくる人を含む動物の目を含む連続静止画を、「ネットワークＩ／Ｆ」を通じて受信し、その受信した連続静止画は、「ＨＤＤ」及び「主メモリ」に格納される。その上で、瞳孔認識プログラムを実行して、受信した連続静止画の中から人を含む動物の目の瞳孔を認識し、瞳孔変化演算プログラムを実行して、認識した瞳孔の開き具合の時間変化である瞳孔変化を演算するという具合である。演算結果は、瞳孔変化情報として、「ＨＤＤ」及び「主メモリ」に格納される。
【０２７４】
＜処理の流れ＞
図６０は、本実施例の演算装置における処理の流れの一例を示すフローチャートである。なお、以下に示すステップは、媒体に記録された計算機（携帯端末、演算端末）を制御するためのプログラムを構成する処理ステップであっても構わない。
【０２７５】
この図にあるように、まず、携帯端末から人を含む動物の目を含む連続静止画を受信する（Ｓ７８０１）。次に、受信した連続静止画の中から人を含む動物の目の瞳孔を認識する（Ｓ７８０２）。次に、認識した瞳孔の開き具合の時間変化である瞳孔変化を演算する（Ｓ７８０３）。
【０２７６】
瞳孔認識ステップ（Ｓ７８０２）と瞳孔変化演算ステップ（Ｓ７８０３）の機能の詳細は、実施例１における携帯端末装置の瞳孔認識ステップ及び瞳孔変化演算ステップの詳細と同様である。
【０２７７】
さらに、演算装置は、受信した連続静止画について瞳孔を認識することができなかった場合にユーザに対して通知を発信する通知発信ステップを有していても良い。また、通知には、認識できなかった理由を付記する理由付記サブステップを備えていても良い。
【０２７８】
また、所定のアドレスに対して瞳孔変化を送信する瞳孔変化送信ステップを有していても良い。
【０２７９】
これにより、スマートフォンなどの携帯端末で特別な機能を有しなくとも演算を実施することができる。そのため、ユーザは、必ずしも専用端末や専用アプリを用意する必要がないので、本発明を気軽に利用できることになる。
【符号の説明】
【０２８０】
４６０１、４７０１、４８０１、４９０１：携帯端末装置
４６０２、４７０２、４８０２：操作ボタン
４６０３、４７０３、４８０３：受話部
４６０４、４７０４、４８０４：カメラ
４６０５、４７０５、４８０５：ライト
４６０６、４７０６、４８０６：画面
４９０２：瞳孔部分
【図１】
2020072901.tif 000003
【図２】
2020072901.tif 000004
【図３】
2020072901.tif 000005
【図４】
2020072901.tif 000006
【図５】
2020072901.tif 000007
【図６】
2020072901.tif 000008
【図７】
2020072901.tif 000009
【図８】
2020072901.tif 000010
【図９】
2020072901.tif 000011
【図１０】
2020072901.tif 000012
【図１１】
2020072901.tif 000013
【図１２】
2020072901.tif 000014
【図１３】
2020072901.tif 000015
【図１４】
2020072901.tif 000016
【図１５】
2020072901.tif 000017
【図１６】
2020072901.tif 000018
【図１７】
2020072901.tif 000019
【図１８】
2020072901.tif 000020
【図１９】
2020072901.tif 000021
【図２０】
2020072901.tif 000022
【図２１】
2020072901.tif 000023
【図２２】
2020072901.tif 000024
【図２３】
2020072901.tif 000025
【図２４】
2020072901.tif 000026
【図２５】
2020072901.tif 000027
【図２６】
2020072901.tif 000028
【図２７】
2020072901.tif 000029
【図２８】
2020072901.tif 000030
【図２９】
2020072901.tif 000031
【図３０】
2020072901.tif 000032
【図３１】
2020072901.tif 000033
【図３２】
2020072901.tif 000034
【図３３】
2020072901.tif 000035
【図３４】
2020072901.tif 000036
【図３５】
2020072901.tif 000037
【図３６】
2020072901.tif 000038
【図３７】
2020072901.tif 000039
【図３８】
2020072901.tif 000040
【図３９】
2020072901.tif 000041
【図４０】
2020072901.tif 000042
【図４１】
2020072901.tif 000043
【図４２】
2020072901.tif 000044
【図４３】
2020072901.tif 000045
【図４４】
2020072901.tif 000046
【図４５】
2020072901.tif 000047
【図４６】
2020072901.tif 000048
【図４７】
2020072901.tif 000049
【図４８】
2020072901.tif 000050
【図４９】
2020072901.tif 000051
【図５０】
2020072901.tif 000052
【図５１】
2020072901.tif 000053
【図５２】
2020072901.tif 000054
【図５３】
2020072901.tif 000055
【図５４】
2020072901.tif 000056
【図５５】
2020072901.tif 000057
【図５６】
2020072901.tif 000058
【図５７】
2020072901.tif 000059
【図５８】
2020072901.tif 000060
【図５９】
2020072901.tif 000061
【図６０】
2020072901.tif 000062
【手続補正書】
【提出日】令和1年11月18日(2019.11.18)
【手続補正１】
【補正対象書類名】明細書
【補正対象項目名】００１０
【補正方法】変更
【補正の内容】
【００１０】
本発明は、前記課題を解決するため、携帯端末の動画撮影機能をＯＮにする動画ＯＮステップと、携帯端末の撮影側面に備えられているライトをＯＮにするライトＯＮステップと、撮影中の像の中から人を含む動物の目の瞳孔を認識する瞳孔認識ステップと、瞳孔を認識するまでライトの照度を低くし、瞳孔の認識が完了したときに、認識するまでよりもライトの照度を高く変化させ、縮瞳速度が一定の速度以下となったときに、ライトの照度を低くする照度変化ステップと、認識した瞳孔の開き具合の時間変化である瞳孔変化を演算する瞳孔変化演算ステップと、を携帯端末装置に読取実行可能に記録したプログラムを開発した。
【手続補正２】
【補正対象書類名】特許請求の範囲
【補正対象項目名】全文
【補正方法】変更
【補正の内容】
【特許請求の範囲】
【請求項１】
携帯端末の動画撮影機能をＯＮにする動画ＯＮステップと、
携帯端末の撮影側面に備えられているライトをＯＮにするライトＯＮステップと、
撮影中の像の中から人を含む動物の目の瞳孔を認識する瞳孔認識ステップと、
瞳孔を認識するまでライトの照度を低くし、瞳孔の認識が完了したときに、認識するまでよりもライトの照度を高く変化させ、縮瞳速度が一定の速度以下となったときに、ライトの照度を低くする照度変化ステップと、
認識した瞳孔の開き具合の時間変化である瞳孔変化を演算する瞳孔変化演算ステップと、
を携帯端末装置に読取実行可能に記録したプログラム。