(57)【要約】【課題】教育や保育を受ける対象者の心的状態や発達特性を適切に推定すること。【解決手段】観察結果取得部１１３は、所定時間帯における所定場所を１単位として、複数の単位毎の人物の行動観察結果を、複数の人物毎に抽出する。関心対象推定部１１４は、複数の人物及び複数の単位毎に、夫々取得された行動観察結果に基づいて、個人の関心対象を推定する。場分類部１１５は、複数の人物及び複数の単位毎の前記関心対象推定手段の推定結果に基づいて、集団により形成される１種類以上の場及び特定個人により形成される１種類以上の場の中から、複数の単位の夫々を１種類以上の場に分類する。心的特性推定部１１６は、関心対象推定手段により所定単位における所定人物の関心対象が推定されたときに、所定人物の行動観察結果と、所定単位における他の人物の行動観察結果の平均値との差異に基づいて、所定人物の心的特性を推定する。【選択図】図４
2019153303.tif 000002
【特許請求の範囲】
【請求項１】
所定時間帯における所定場所を１単位として、複数の単位毎の人物の行動観察結果を、複数の人物毎に取得する取得手段と、
前記複数の人物及び前記複数の単位毎に、夫々取得された前記行動観察結果に基づいて、個人の関心対象を推定する関心対象推定手段と、
前記複数の人物及び前記複数の単位毎の前記関心対象推定手段の推定結果に基づいて、集団により形成される１種類以上の場及び特定個人により形成される１種類以上の場の中から、前記複数の単位の夫々を１種類以上の場に分類する場分類手段と、
を備える情報処理装置。
【請求項２】
前記関心対象推定手段は、ひと、もの、及びことの３要素のうち１以上の要素から、所定単位における所定人物の関心対象を推定する、
請求項１に記載の情報処理装置。
【請求項３】
前記関心対象推定手段により所定単位における所定人物の関心対象が推定されたときに、当該所定人物の行動観察結果と、当該所定単位における他の人物の行動観察結果の平均値との差異に基づいて、当該所定人物の心的特性を推定する心的特性推定手段をさらに備える、
請求項２に記載の情報処理装置。
【請求項４】
前記心的特性は、開放性、積極性、勤勉性、安定性、適応性、およびリーダーシップの６つの要因から成る、
請求項３に記載の情報処理装置。
【請求項５】
前記心的特性推定手段により推定された所定人物の心的特性の長期的な推移の特徴と、標準的な心的特性の長期的な推移の特徴との差異に基づいて、所定人物の発達特性を推定する発達特性推定手段をさらに備える、
請求項４に記載の情報処理装置。
【請求項６】
前記取得手段は、
複数の単位毎の人物の、位置と向きとのうち少なくとも一方に関する情報を含む行動観察結果を、複数の人物毎に取得する、
請求項１乃至５のうちいずれか１項に記載の情報処理装置。
【請求項７】
情報処理装置が実行する情報処理方法であって、
所定時間帯における所定場所を１単位として、複数の単位毎の人物の行動観察結果を、複数の人物毎に取得する取得ステップと、
前記複数の人物及び前記複数の単位毎に、夫々取得された前記行動観察結果に基づいて、個人の関心対象を推定する関心対象推定ステップと、
前記複数の人物及び前記複数の単位毎の前記関心対象推定手段の推定結果に基づいて、集団により形成される１種類以上の場及び特定個人により形成される１種類以上の場の中から、前記複数の単位の夫々を１種類以上の場に分類する場分類ステップと、
を含む情報処理方法。
【請求項８】
情報処理装置を制御するコンピュータに、
所定時間帯における所定場所を１単位として、複数の単位毎の人物の行動観察結果を、複数の人物毎に取得する取得ステップと、
前記複数の人物及び前記複数の単位毎に、夫々取得された前記行動観察結果に基づいて、個人の関心対象を推定する関心対象推定ステップと、
前記複数の人物及び前記複数の単位毎の前記関心対象推定手段の推定結果に基づいて、集団により形成される１種類以上の場及び特定個人により形成される１種類以上の場の中から、前記複数の単位の夫々を１種類以上の場に分類する場分類ステップと、
を含む制御処理を実行させるプログラム。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、情報処理装置、情報処理方法、及びプログラムに関する。
【背景技術】
【０００２】
従来から、教育や保育の現場において、教育や保育を受ける対象者に対して、学習レベルに応じた難易度や重要度の問題コンテンツを提示するという技術が提案されている（例えば、特許文献１参照）。
【先行技術文献】
【特許文献】
【０００３】
【特許文献１】特開２０１５−１０２５５６号公報
【発明の概要】
【発明が解決しようとする課題】
【０００４】
しかしながら、現在では、教育や保育を受ける対象者に対して、最適な教育や保育を施すためには、単に学習レベルだけではなく、対象者の心的状態や発達特性が考慮されることが要求されている。特許文献１を含む従来の技術では、このような要求に十分に応えられていない状況である。
【０００５】
本発明は、このような状況に鑑みてなされたものであり、教育や保育を受ける対象者の心的状態や発達特性を適切に推定することを目的とする。
【課題を解決するための手段】
【０００６】
上記目的を達成するため、本発明の一態様の情報処理装置は、
所定時間帯における所定場所を１単位として、複数の単位毎の人物の行動観察結果を、複数の人物毎に取得する取得手段と、
前記複数の人物及び前記複数の単位毎に、夫々取得された前記行動観察結果に基づいて、個人の関心対象を推定する関心対象推定手段と、
前記複数の人物及び前記複数の単位毎の前記関心対象推定手段の推定結果に基づいて、集団により形成される１種類以上の場及び特定個人により形成される１種類以上の場の中から、前記複数の単位の夫々を１種類以上の場に分類する場分類手段と、
を備える。
【発明の効果】
【０００７】
本発明によれば、教育や保育を受ける対象者の心的状態や発達特性を適切に推定することができる。
【図面の簡単な説明】
【０００８】
【図１】本発明の一実施形態に係る情報処理システムの構成を示すブロック図である。
【図２】本発明の一実施形態に係るサービスの概要を説明するための説明図である。
【図３】図１の情報処理システムのうち、本発明の一実施形態のサーバのハードウェア構成を示すブロック図である。
【図４】図３のサーバ、クライアント端末の機能的構成例を示す機能ブロック図である。
【図５】図４のサーバが実行する特性情報推定処理の流れを説明するフローチャートである。
【図６】関心対象の一例を示すための説明図である。
【図７】場の分類の一例を示すための説明図である。
【図８】場の分類の一例を示すための説明図である。
【図９】心的特性の推定の一例を示すための説明図である。
【図１０】心的特性の推定の一例を示すための説明図である。
【図１１】発達特性の推定の一例を示すための説明図である。
【図１２】本サービスの具体例として、教育施設におけるクライアント（保育者）が、対象者（子ども）に絵本の読み聞かせを行った場合の例を示す図である。
【図１３】本サービスの具体例として、対象となる教育施設が自由時間になった場合の例を示す図である。
【図１４】関心推定の原理を裏付けるための根拠となる尤度距離を算出する手法の一例を示す図である。
【図１５】関心推定の正答率を示す表である。
【図１６】尤度距離を利用した解析の手法の一例を示す図である。
【発明を実施するための形態】
【０００９】
以下、本発明の実施形態について、図面を用いて説明する。
【００１０】
（情報処理システムの概要）
図１は、本発明の一実施形態に係る情報処理システムの構成を示している。
【００１１】
図１に示す情報処理システムは、以下に示すサービス（以下、「本サービス」と呼ぶ）を提供する際に適用される。
本サービスでは、観察の対象となる人物（以下、「対象者」と呼ぶ）についての心的特性や発達特性が推定される。
本サービスは、種々の領域（場面）において適用可能であるが、本実施形態では、保育・教育領域において適用される例について説明する。具体的には、本サービスは、教育施設、教育研究機関、教育行政機関等（以下、単に「教育施設」と呼ぶ）において適用されることで、保育や教育を受ける者（以下、「対象者」と呼ぶ）の心的特性や発達特性といった特性が適切に推定される。
なお、以降の説明では、教育施設の管理者等を「クライアント」と呼び、説明を行う。教育施設の管理者等とは、学校の運営を行う職員のほか、教室で対象者を指導、教育する教師（先生）、即ち、保育者等を含む。
【００１２】
図１の情報処理システムは、サーバ１と、クライアント端末２と、撮像装置３とを含むように構成される。サーバ１と、クライアント端末２とはインターネット等の所定のネットワークＮを介して相互に接続されている。
サーバ１は、本サービスの提供者により管理される。クライアント端末２は、クライアントにより管理される。撮像装置３は、例えばビデオカメラ等で構成され、教育施設に配置される。
【００１３】
（本サービスの概要）
次に、図２を参照して、本サービスの概要について説明する。
図２は、本発明の一実施形態に係るサービスの概要を説明するための説明図である。
図２の例では、図示はしないが、教育施設の所定場所、例えば「教室」において、複数の児童等が対象者として存在し、複数の対象者（例えば、対象者Ａ〜Ｄ）の各種行動が、撮像装置３により撮像されて観察されるものとする。
即ち、撮像装置３は、図２の例では「教室」に配置されており、所定時間帯における撮像画像のデータを出力する。撮像画像のデータは、クライアント端末２を介してサーバ１に送信される。
ここで、撮像画像のデータとは、例えば、撮像装置３で撮像された画像に関する各種データと、当該撮像画像が撮像された時間に関する各種データを含むものである。
即ち、サーバ１は、撮像画像のデータを、所定時間帯における所定場所を１単位として取得する。ここで、１単位は、図２においては「計測場面」として、複数の長方形で区分されて表示されている。そこで、このような１単位を、以下「場面」とも呼ぶ。
即ち、図２の例では、第１場面は、時間帯「００（分）：１０（秒）〜００（分）：２９（秒）」及び場所「教室」により特定される。第１場面の撮像画像のデータがサーバ１に取得される。
同様に、第２場面は、時間帯「００（分）：３０（秒）〜００（分）：５９（秒）」及び場所「教室」により特定される。第２場面の撮像画像のデータがサーバ１に取得される。
第３場面は、時間帯「０１（分）：００（秒）〜０１（分）：２９（秒）」及び場所「教室」により特定される。第３場面の撮像画像のデータがサーバ１に取得される。
第４場面は、時間帯「０１（分）：３０（秒）〜０１（分）：５９（秒）」及び場所「教室」により特定される。第４場面の撮像画像のデータがサーバ１に取得される。
【００１４】
次に、サーバ１は、各「場面」の撮像画像のデータに基づいて、各「場面」毎の対象者の行動観察結果を、複数の対象者Ａ〜Ｄ毎に取得する。
そして、サーバ１は、複数の対象者Ａ〜Ｄ及び各「場面」毎に、夫々取得された行動観察結果に基づいて、個人の関心対象を推定する。
ここで、個人の関心対象は、ひと（例えば「教室」にいる保育者）、もの（例えば教室に存在するおもちゃ）、及びこと（ひとともの以外の事象）の３要素のうち１以上の要素から推定される。
即ち、対象者Ａについて、第１場面〜第４場面の夫々について、個人の関心対象が推定される。同様に、対象者Ｂについて、第１場面〜第４場面の夫々について、個人の関心対象が推定される。対象者Ｃについて、第１場面〜第４場面の夫々について、個人の関心対象が推定される。対象者Ｄについて、第１場面〜第４場面の夫々について、個人の関心対象が推定される。
【００１５】
より具体的には例えば、サーバ１は、複数の対象者Ａ〜Ｄ及び各「場面」毎に、夫々の撮像画像のデータに基づいて、行動特徴量と環境情報とを抽出する。つまり、行動観察結果とは、少なくとも複数の対象者Ａ〜Ｄの行動特徴量と環境情報を含んでいる。
ここで、行動特徴量とは、対象者の行動に関する特徴量である。位置、向き、姿勢、加速度、表情、発話（音声）、応答時間等が、行動特徴量として取得可能である。
また、環境情報とは、「ひと」、「もの」、「こと」の３つに分類される情報であり、対象者が各「場面」において置かれている外部環境を示す情報である。
即ち、対象者Ａについて、第１場面〜第４場面の夫々について、行動特徴量と環境情報が抽出される。同様に、対象者Ｂについて、第１場面〜第４場面の夫々について、行動特徴量と環境情報象が抽出される。対象者Ｃについて、第１場面〜第４場面の夫々について、行動特徴量と環境情報が抽出される。対象者Ｄについて、第１場面〜第４場面の夫々について、行動特徴量と環境情報が抽出される。
【００１６】
そして、サーバ１は、複数の対象者Ａ〜Ｄ及び各「場面」毎に、行動特徴量と環境情報とに基づいて、個人の関心対象を推定する。
具体的には例えば、環境情報として、第１場面の対象者Ａについて、環境情報として保育者（「ひと」）とおもちゃ（「もの」）が抽出され、対象者Ａの行動特徴量に含まれる姿勢が保育者に対して向いている場合、個人の関心対象は、保育者（「ひと」）であると推定される。
【００１７】
なお、どのような期間とどのような場所を場面（１単位）として採用してもよいが、期間については短期間（数秒〜数時間）を設定することにより、より詳細な関心対象の推定を実現することができる。
また、複数の対象者の夫々の関心対象を推定する詳細については、図６を参照して後述する。
【００１８】
次に、サーバ１は、複数の対象者Ａ〜Ｄ及び各「場面」毎の「個人の関心対象の推定」の結果に基づいて、集団により形成される１種類以上の「場」及び特定個人により形成される１種類以上の「場」の中から、各「場面」の夫々を１種類以上の「場」に分類する。
具体的には例えば本実施形態では、複数の対象者Ａ〜Ｄ毎に推定された個人の関心対象の発生頻度と分布から、各「場面」は、６つの類型（第１分類〜第６分類）の「場」のうち１類型以上に分類される。
第１分類〜第３分類の「場」は、集団により形成される「場」の類型である。第１分類の「場」は、「ひと」に複数の対象者の関心が集まる類型である。第２分類の「場」は、「もの」に複数の対象者の関心が集まる類型である。第３分類の「場」は、「こと」に複数の対象者の関心が集まる類型である。
第４分類〜第６分類の「場」は、特定個人により形成される「場」の類型である。第４分類の「場」は、「ひと」に特定個人（特定の対象者）の関心が向く類型である。第５分類の「場」は「もの」に特定個人（特定の対象者）の関心が向く類型である。第６分類の「場」は「こと」に特定個人（特定の対象者）の関心が向く類型である。
例えば、第１場面において、対象者Ａ〜Ｄのうち、３人の対象者Ａ，Ｂ，Ｃの関心対象が保育者（「ひと」）であると推定された場合、第１場面は、第１分類の「場」に分類される。さらに、第１場面において、対象者Ｄの関心対象が像（「もの」）である場合、第１場面は、第５分類の「場」にも分類される。
即ち、「場面」は、１つの「場」のみならず、複数の「場」にも分類され得るものである。
このように、サーバ１は、個人から大集団までの幅広い関心対象を推定し、また、所定の「場面」を単一又は複数の「場」に分類することを可能とする。ここで、このような所定の「場面」毎に単一又は複数の「場（第１分類〜第６分類）」に分類する一連の処理を合わせて、「場の分類」と呼ぶ。
なお、この「場面」の分類には、例えば、ディープラーニングや深層学習等の機械学習に係る各種手法を利用することができる。また、「場面」の分類の詳細については、図７、図８を参照して後述する。
【００１９】
次に、サーバ１は、複数の対象者Ａ〜Ｄ及び各「場面」毎の「場の分類」の結果に基づいて、各対象者の心的特性を推定する。
具体的に例えば、本実施形態では、複数の対象者Ａ〜Ｄ毎に推定された個人の関心対象及び推定時における複数の対象者Ａ〜Ｄ毎に個人の行動特徴量と、夫々の「場」における行動特徴量の平均値からのズレを分析することで、複数の対象者Ａ〜Ｄ毎に心的特性が確率的に推定される。
さらに言えば本実施形態では、複数の対象者Ａ〜Ｄ毎に個人の行動特徴量と、夫々の「場」における、行動特徴量の平均値からのズレを分析することで、心的特性の推定がなされる。
したがって心的特性の推定には、例えば数日〜数か月の中期的な情報の蓄積が望ましく、このようなデータの蓄積により推定精度の向上が期待される。なお、心的特性の推定とは、例えば、発達障害、いじめ、ストレス耐性等の推定を含む。
なお、この心的特性の推定においても、例えば、ディープラーニングや深層学習等の機械学習に係る各種手法を利用することができる。
また、心的特性の推定及び発達特性の詳細については、図９乃至図１１を参照して後述する。
【００２０】
以上が、本サービスの概要である。次に、上記した本サービスを実現するための本実施形態における情報処理システムのハードウェア構成および機能ブロック図について説明する。
【００２１】
（情報処理システムのハードウェア構成）
図３は、図１の情報処理システムのうちサーバ１のハードウェア構成を示すブロック図である。
【００２２】
サーバ１は、ＣＰＵ（Ｃｅｎｔｒａｌ  Ｐｒｏｃｅｓｓｉｎｇ  Ｕｎｉｔ）１１と、ＲＯＭ（Ｒｅａｄ  Ｏｎｌｙ  Ｍｅｍｏｒｙ）１２と、ＲＡＭ（Ｒａｎｄｏｍ  Ａｃｃｅｓｓ  Ｍｅｍｏｒｙ）１３と、バス１４と、入出力インターフェース１５と、出力部１６と、入力部１７と、記憶部１８と、通信部１９と、ドライブ２０とを備えている。
【００２３】
ＣＰＵ１１は、ＲＯＭ１２に記録されているプログラム、又は、記憶部１８からＲＡＭ１３にロードされたプログラムに従って各種の処理を実行する。
ＲＡＭ１３には、ＣＰＵ１１が各種の処理を実行する上において必要なデータ等も適宜記憶される。
【００２４】
ＣＰＵ１１、ＲＯＭ１２及びＲＡＭ１３は、バス１４を介して相互に接続されている。このバス１４にはまた、入出力インターフェース１５も接続されている。入出力インターフェース１５には、出力部１６、入力部１７、記憶部１８、通信部１９及びドライブ２０が接続されている。
【００２５】
出力部１６は、各種液晶ディスプレイ等で構成され、各種情報を出力する。
入力部１７は、各種ハードウェア等で構成され、各種情報を入力する。
記憶部１８は、ハードディスクやＤＲＡＭ（Ｄｙｎａｍｉｃ  Ｒａｎｄｏｍ  Ａｃｃｅｓｓ  Ｍｅｍｏｒｙ）等で構成され、各種データを記憶する。
通信部１９は、インターネットを含むネットワークＮを介して他の装置（図１の例では、クライアント端末２）との間で行う通信を制御する。
【００２６】
ドライブ２０は、必要に応じて設けられる。ドライブ２０には磁気ディスク、光ディスク、光磁気ディスク、或いは半導体メモリ等よりなる、リムーバブルメディア２１が適宜装着される。ドライブ２０によってリムーバブルメディア２１から読み出されたプログラムは、必要に応じて記憶部１８にインストールされる。またリムーバブルメディア２１は、記憶部１８に記憶されている各種データも、記憶部１８と同様に記憶することが出来る。
【００２７】
クライアント端末２の構成は、サーバ１の構成と基本的に同様であるので、ここではそれらの説明は省略する。
【００２８】
このような図３のサーバ１、クライアント端末２の各種ハードウェアと各種ソフトウェアとの協働により、一連の処理が実行されることで上記した本サービスの提供が可能となる。
【００２９】
すなわち、クライアント端末２は、クライアントにより撮影された撮像画像のデータをサーバ１に送信する。
なお、サーバ１への撮像画像のデータの送信タイミングは、任意でよいが、所定のタイミング（例えば、１日毎）に自動で送信されるものとしてもよい。
【００３０】
サーバ１は、クライアント端末２から送信された撮像画像のデータを取得すると、当該撮像画像のデータを解析する。そして、上述したように、サーバ１は、撮像画像のデータに基づいて、複数の「場面」の夫々において各対象者の関心対象を推定し、当該「場面」を６つの類型の「場」に分類し、各対象者の心的特性、発達特性を推定する。そして、サーバ１は、推定したこれらの各種推定情報をクライアント端末２に送信する。
【００３１】
クライアント端末２は、サーバ１からの各種推定情報を受信すると、当該情報をクライアントに提示する。
【００３２】
（情報処理システムの機能ブロック図）
以上説明したような一連の処理を実現すべく、サーバ１、クライアント端末２を含む情報処理システムは、図４に示すような機能的構成を有している。
図４は、図１のサーバ１、クライアント端末２、撮像装置３の機能的構成例を示す機能ブロック図である。
【００３３】
クライアント端末２のＣＰＵ２１においては、撮像画像管理部２１１と、出力情報取得部２１２とが機能する。
【００３４】
クライアント端末２の撮像画像管理部２１１は、撮像装置３によって撮像された撮像画像のデータを、通信部２２を介してサーバ１へ送信するための制御を実行する。
なお、撮像装置３によって撮像された撮像画像のデータは、撮像装置３からクライアント端末２に対して、有線又は無線の通信方式により、送信されてくる。
【００３５】
クライアント端末２の出力情報取得部２１２は、通信部２２を介してサーバ１から送信されてくる対象者の心的特性や発達特性に関する各種情報等（以下、「出力情報」と呼ぶ）を取得する。
また、出力情報取得部２１２は、取得した出力情報を、表示部２４に表示させる制御を実行する。
【００３６】
サーバ１のＣＰＵ１１においては、撮像画像取得部１１１と、撮像画像解析部１１２と観察結果取得部１１３と、関心対象推定部１１４と、場分類部１１５と、心的特性推定部１１６と、発達特性推定部１１７と、出力データ生成部１１８と、出力データ提示部１１９とが機能する。
【００３７】
サーバ１の撮像画像取得部１１１は、所定時間帯における所定場所を１単位として、クライアント端末２から送信されてくる撮像画像のデータを通信部１９を介して取得する。
【００３８】
サーバ１の撮像画像解析部１１２は、撮像画像取得部１１１により取得された撮像画像のデータを解析する。
具体的には、撮像画像解析部１１２は、撮像画像取得部１１１により取得された撮像画像のデータに基づいて、取得された画像のデータと「場面（例えば第１場面）」との紐づけを行う。
【００３９】
サーバ１の観察結果取得部１１３は、所定時間帯における所定場所を１単位として、複数の単位毎の人物の行動観察結果を、複数の人物毎に抽出する。
即ち、観察結果取得部１１３は、各「場面（例えば、第１場面〜第４場面）」の撮像画像のデータに基づいて、各「場面」毎の、対象者の行動観察結果を、複数の対象者Ａ〜Ｄ毎に抽出する。
【００４０】
サーバ１の関心対象推定部１１４は、前記複数の人物及び前記複数の単位毎に、夫々取得された前記行動観察結果に基づいて、個人の関心対象を推定する。
即ち、関心対象推定部１１４は、複数の対象者Ａ〜Ｄ及び、各「場面（例えば第１場面〜第４場面）」毎に、観察結果取得部１１３により抽出された行動特徴量と環境情報とに基づいて、複数の対象者の夫々について個人の関心対象を推定する。なお、関心対象を推定する方法の詳細については、図６等を用いて後述する。
【００４１】
サーバ１の場分類部１１５は、前記複数の人物及び前記複数の単位毎の前記関心対象推定手段の推定結果に基づいて、集団により形成される１種類以上の場及び特定個人により形成される１種類以上の場の中から、前記複数の単位の夫々を１種類以上の場に分類する。
即ち、場分類部１１５は、関心対象推定部１１４により推定された複数の対象者（例えば、対象者Ａ〜Ｄ）及び各「場面（例えば、第１場面〜第４場面）」毎の「個人の関心対象の推定」の結果に基づいて、集団により形成される１種類以上の場及び特定個人により形成される１種類以上の場の中から、各「場面」を１種類以上の「場」に分類する。
具体的には、場分類部１１５は、複数の対象者毎に推定された個人の関心対象の発生頻度と分布から、各「場面」を、６つの類型（第１分類〜第６分類）の「場」のうち１類型以上に分類する。
さらに、場分類部１１５は、この「場の分類」の結果を、分類ＤＢ５００に格納する。なお、「場の分類」の方法の詳細については、図８等を用いて後述する。
【００４２】
サーバ１の心的特性推定部１１６は、前記関心対象推定手段により所定単位における所定人物の関心対象が推定されたときに、当該所定人物の行動観察結果と、当該所定単位における他の人物の行動観察結果の平均値との差異に基づいて、当該所定人物の心的特性を推定する。
即ち、心的特性推定部１１６は、複数の対象者Ａ〜Ｄ及び各「場面」との「場の分類の結果」に基づいて、各対象者の心的特性を推定する。
具体的に例えば本実施形態では、複数の対象者Ａ〜Ｄ毎に推定された個人の関心対象及び推定時における複数の対象者Ａ〜Ｄ毎に個人の行動特徴量と、夫々の「場」における行動特徴量の平均値からのズレを分析することで、複数の対象者Ａ〜Ｄ毎に心的特性が確率的に推定される。
また、心的特性推定部１１６は、複数の対象者Ａ〜Ｄ毎に推定した心的特性の推定の結果を心的特性ＤＢ６００に格納する。
ここで、心的特性推定部１１６により推定される心的特性とは、例えば、「開放性」、「積極性」、「勤勉性」、「安定性」、「適応性」、「リーダーシップ」の６つの性質が含まれる。この心的特性の推定の方法の詳細は、図９等を用いて後述する。
【００４３】
サーバ１の発達特性推定部１１７は、前記心的特性推定手段により推定された所定人物の心的特性の長期的な推移の特徴と、標準的な心的特性の長期的な推移の特徴との差異に基づいて、所定人物の発達特性を推定する。
具体的に例えば本実施形態では、発達特性推定部１１７は、複数の対象者Ａ〜Ｄ毎に推定された各対象者の心的特性の長期的な推移の傾向と、夫々の「場」における平均的な心的特性の長期的な推移傾向との差異に基づいて、複数の対象者Ａ〜Ｄの夫々の発達特性を推定する。
【００４４】
サーバ１の出力データ生成部１１８は、関心対象推定部１１４で推定された各対象者の関心対象の推定の結果、場分類部１１５で分類された「場の分類」の結果、心的特性推定部１１６で推定された各対象者の心的特性の推定の結果、発達特性推定部１１７で推定された各対象者の発達特性の推定の結果等に基づいて、出力データを生成する。
さらに、出力データ生成部１１８は、生成した出力データを記憶部１８に設置された図示せぬデータベースに、その情報を格納する。
【００４５】
サーバ１の出力データ提示部１１９は、出力データ生成部１１８で生成された出力データを通信部１９を介してクライアント端末２へ送信する制御を実行する。
【００４６】
（特性情報推定処理）
次に、図５を参照して、図４の機能的構成を有するサーバ１が実行する特性情報推定処理について説明する。
図５は、サーバ１が実行する特性情報推定処理の流れを説明するフローチャートである。
【００４７】
ステップＳ１において、撮像画像取得部１１１は、所定時間帯における所定場所を１単位として、クライアント端末２から送信されてくる撮像画像のデータを通信部１９を介して取得する。
【００４８】
ステップＳ２において、ステップＳ１で取得された撮像画像のデータを解析する。
具体的には、撮像画像解析部１１２は、撮像画像取得部１１１により取得された撮像画像のデータに基づいて、取得された画像のデータと「場面（例えば第１場面）」との紐づけを行う。
【００４９】
ステップＳ３において、観察結果取得部１１３は、所定時間帯における所定場所を１単位として、複数の単位毎の人物の行動観察結果を、複数の人物毎に抽出する。
即ち、観察結果取得部１１３は、各「場面（例えば、第１場面〜第４場面）」の撮像画像のデータに基づいて、各「場面」毎の、対象者の行動観察結果を、複数の対象者Ａ〜Ｄ毎に抽出する。
【００５０】
ステップＳ４において、関心対象推定部１１４は、前記複数の人物及び前記複数の単位毎に、夫々取得された前記行動観察結果に基づいて、個人の関心対象を推定する。
即ち、関心対象推定部１１４は、複数の対象者Ａ〜Ｄ及び、各「場面（例えば第１場面〜第４場面）」毎に、ステップＳ３で抽出された行動特徴量と環境情報とに基づいて、複数の対象者の夫々について個人の関心対象を推定する。
【００５１】
（関心対象の推定）
ここで、上記したステップＳ４における関心対象の推定の詳細について図６を参照して説明する。
図６は、関心対象の一例を説明するための図である。
【００５２】
図６は、子どもが幼稚園などで活動するシーン（保育のシーン）における各対象者の関心対象の推定の一例を示す。
図６の例では、場面Ｋ１（計測時間１、教室）における、ある子供（対象者）の関心対象が、ひと「４３％」、もの「２６％」、こと「３１％」であったことを示されている。また、関心対象の詳細としては、「友達Ａ」、「友達Ｂ」、「友達Ｃ」、「担任」であることが示されている。
この関心対象の推定は、具体的に例えば、環境情報により識別された「ひと」、「もの」、「こと」への対象者の「位置」、「向き」、「距離」、「時間（関わる対象を注視している時間等）」等により行われる。
さらに具体的には、例えば、担任の保育者へ親しみをもつ場合や仲の良い友達である場合には、対象者と保育者や友達との距離が近く、保育者や友達に視線が向くため、随伴する頭、肩などの対象者の姿勢や、視線の持続時間の長さから、関心対象であることを推定可能となる。また、関心対象の近くでは、対象者の滞在時間も長くなる。
これらをまとめると、即ち、対象者が自身の意思でかかわりの対象へ注意を向けるときに生じる行動特徴量によって関心対象が推定される。また、このような関心対象の推定は、数秒から数時間程度の短期的な情報の取得によって実現が可能である。
【００５３】
説明は図５に戻り、ステップＳ５において、場分類部１１５は、前記複数の人物及び前記複数の単位毎の前記関心対象推定手段の推定結果に基づいて、集団により形成される１種類以上の場及び特定個人により形成される１種類以上の場の中から、前記複数の単位の夫々を１種類以上の場に分類する。
即ち、場分類部１１５は、ステップＳ４で推定された複数の対象者（例えば、対象者Ａ〜Ｄ）及び各「場面（例えば、第１場面〜第４場面）」毎の「個人の関心対象の推定」の結果に基づいて、集団により形成される１種類以上の場及び特定個人により形成される１種類以上の場の中から、各「場面」を１種類以上の「場」に分類する。
【００５４】
（「場」の分類）
ここで、上記したステップＳ４における「場の分類」の方法の詳細について、図７及び図８等を参照しつつ、説明する。図７、図８は、「場の分類」の方法の一例を説明するための図である。
【００５５】
図７は、実際に所定の「場面Ｋ（時間：００３０（秒）〜００５９（秒）、場所：教室）」を類型（第１分類〜第６分類）の「場」へ分類する場合の例を示している。
ここで、「場」の類型への分類は、各対象者の関心対象の推定と同時に得られた行動特徴（例えば、位置や向き）、環境情報（例えば、物体や人物の配置等）から行われる。
また、この「場」の類型への分類は、複数人の関心対象が収束する集団の「場」の類型（第１分類〜第３分類）であるか、個人の「場」の類型（第４分類〜第６分類）であるかを、物体認識等で判別することもできる。
【００５６】
続いて、図８を参照しつつ、幼稚園での紙芝居の読み聞かせのシーン（保育のシーン）を例に、「場の分類」の具体的な方法について説明していく。
【００５７】
「場の分類」では、まず集団により形成される関心の「場」（第１分類〜第３分類）と個人により形成される関心の「場」（第４分類〜第６分類）のいずれであるかが判別される。
例えば、図８の例では、保育者Ｔは紙芝居の読み聞かせを行っているため、多くの対象者（子供Ｃ１〜Ｃ４）の関心は、保育者Ｔに向いていると推定される。
具体的には、子供Ｃ１〜Ｃ４は、視線を保育者Ｔへと向けて、紙芝居の見やすい位置に座る等の行動特徴を示しており、子供Ｃ１〜Ｃ４の関心対象は、「ひと」（保育者Ｔ）であると推定される。このような場合、子供Ｃ１〜Ｃ４が参加する当該「場面Ｇ（時間：００３０（秒）〜００５９（秒）、場所：教室）」は、第１分類に分類される。
一方で、同様の場面Ｇであっても、紙芝居の中の象へ関心を向け、立ち歩き大きな声で「象だよ！」と叫ぶ子供Ｃ５がいるとする。
この時、図８に示す通り、子供Ｃ５の姿勢は、直立し、紙芝居へと向き、関心対象（紙芝居の中の象）との距離が近くなる。
このため、これらの行動特徴量から、この「場面」においては、子供Ｃ５（一人の対象者）の関心対象が「もの」（紙芝居の中の象）であると識別できる。したがって、子供Ｃ５が参加する当該「場面Ｇ（時間：００３０（秒）〜００５９（秒）、場所：教室）」は、第５分類に分類される。
このように、子供Ｃ１〜Ｃ５が参加する同一の「場面Ｇ（時間：００３０（秒）〜００５９（秒）、場所：教室）」であっても、複数の分類（例えば、第１分類と第５分類）の「場」に分類され得る。
また、この「場面」は、所定時間（時間単位）と所定場所により決定される。そのため、同一のシーン（保育のシーン）であっても、時間経過によって「場面」の分類も変遷していくことになる。
このように、本サービスでは、複数の「場面」の夫々に対して、個人から大集団までの関心対象の推定と当該「場面」の分類（「場の分類」）とが可能となる。
ここで、上述の通り、このような「場」の分類では、例えば、ディープラーニングや深層学習等の機械学習に係る各種手法を利用することができる。
【００５８】
説明は図５に戻り、ステップＳ６において、心的特性推定部１１６は、前記関心対象推定手段により所定単位における所定人物の関心対象が推定されたときに、当該所定人物の行動観察結果と、当該所定単位における他の人物の行動観察結果の平均値との差異に基づいて、当該所定人物の心的特性を推定する。
即ち、心的特性推定部１１６は、複数の対象者Ａ〜Ｄ及び各「場面」との「場の分類の結果」に基づいて、各対象者の心的特性を推定する。
【００５９】
（心的特性の推定）
ここで、上記したステップＳ６における関心対象の推定の詳細について図９、図１０を参照しつつ、説明する。
図９、図１０は、心的特性の推定の方法の一例を説明するための図である。図９及び図１０を見ると、心的特性は、例えば、６つの要因（開放性、積極性、勤勉性、安定性、適応性、リーダーシップ）から構成される。
【００６０】
開放性とは、心的特性の要因の一つであり、好奇心を持ち行動する性質である。例えば、何にでもすぐに気がつき見に行くなど、様々な「ひと」、「もの」、「こと」が幅広く関心対象として推定される場合に対象となり得る。
この関心対象の幅広さは、各対象者の関心対象の頻度分布の均一／集中の関係と、各「場」における関心対象の平均との差から推定される。即ち、開放性の特徴は、関心対象のバラつき（幅広さ）が大きい点である（各「場」における関心対象の頻度分布）。
なお、バラつきが大きすぎる場合には注意散漫傾向であるとも考えられるため、必ずしもバラつきが大きいほど良いということにはならない。
【００６１】
積極性とは、心的特性の要因の一つであり、自信を持ち行動する性質である。例えば、質問に対してすぐに答える、直ぐに保育者の動きをまねる、並ぶのが早い、朝すぐにロッカーに向かい身仕度をする等の積極的な行動がみられるような場合に対象となり得る。
この積極性は、例えば、関心対象へと向かう速度や姿勢により推定される。例えば、積極性が推定される場合とは、関心対象へ向かう速度は上がり、姿勢は前のめり、胸を張る、歩幅が大きいというような場合である。
また、積極性があると推定される場合には、関心対象からの働きかけ（問いかけ：動きの模倣や質問）に対する反応時間は早くなる。この関心対象へと向かう速度や姿勢（レスポンス）は、対象者のレスポンスと、各「場」におけるレスポンスの平均との差から推定される。
即ち、積極性の特徴は、関心対象との応答が早い、レスポンス（加速度、姿勢、発話、行動に対する反応速度）が早い点である。
【００６２】
勤勉性とは、心的特性の要因の一つであり、集中したり、我慢をしたりする性質である。
具体的には、紙芝居を見る、お絵かきの時間に絵を描く、保育者の話を聞く、座って待つ、机で勉強するなどの持続時間により、勤勉性が推定される。勤勉性が有る場合には、関心対象に対して集中したり、我慢したりすることで、関心対象に対する頭や体の向き、位置は一定時間持続する。この関心対象への持続時間は、各対象者の持続時間と、「場面」における持続時間の平均との差から推定される。即ち、勤勉性の特徴は、「場」における平均的な関心対象に収束する位置、視線、姿勢とその持続時間が長い点である。
【００６３】
安定性とは、心的特性の要因の一つであり、安心して落ち着いている性質である。例えば、笑顔で活動に参加する、泣く・喧嘩する、保育者の手や服を握り続ける、突然歩き回る、大声を出す等の基準を基に対象となるか否かが判断される。
この安定性は、各「場」における対象者の行動の各「場」における平均との差（ズレ）が大きい程、低くなる。一方で、各「場」における対象者の行動が各「場」における平均に近く分散が小さい場合、より安定性は高いと言える。即ち、安定性の特徴は、「場」における行動特徴量（位置、向き、距離、加速度、表情等）の分散（ハズレ値）が少ない点である。
なお、不安度が高い場合のように安定性が低い場合には、対象者は、特定の「ひと」や「もの」に愛着行動を示す。また、待つことが苦手な場合には、対象者は、立ち歩いたり、ケンカをすれば特定の「ひと」に治する運動量（加速度）や発声（大声）が生じ、行動特徴量の分散が大きくなる。反対に、安定性が高い場合には、行動特徴量は平均に近く分散が小さくなる。この行動特徴量の分散は、各対象者の参加する「場（分類された）場」における全対象者の行動特徴量の平均との差（ズレ）から推定される。
【００６４】
適応性とは、心的特性の要因の一つであり、周りの空気を読もうとする（その場の雰囲気方から状況を推察する）性質である。例えば、紙芝居や絵本を見る、集団で授業を受ける、並んで待つ、片付けをはじめる等のその場の雰囲気から状況を推察する等の行動がみられるような場合に対象となり得る。
この適応性は、例えば、集団の「場」において、主となる特徴（紙芝居を読む「場」での姿勢、向き等の平均）からの尤度距離の近さ等から推定される。
即ち、適応性の特徴は、個人の特徴ベクトルと集団の「場」における特徴ベクトルの平均との間の尤度距離（位置、向き、距離）が小さいという点である。
なお、適応性は、安定性と類似した特性を持つが、集団（社会）の「場」に対する適応のしやすさを推定することに主眼を置いている。
【００６５】
リーダーシップとは、心的特性の要因の一つであり、状況を作ろうとする性質である。例えば、リレーのチーム決めなど、グループをとりまとめる、困った子が助けを求める（わからないことを聞きにくる）等の行動がみられるような場合に対象となり得る。
このリーダーシップは、集団の「場」において、他者の関心対象となる頻度から推定される。つまり、リーダーシップを有する対象者は、集団に語りかけたり意見を提案したりすることで、周囲から頼られ、他者からの関心対象となる頻度が高い（つまり、他者の位置、向き、などの行動特徴量が対象者に向く傾向が高い）。
即ち、リーダーシップの特徴は、集団の「場」において他者からの関心対象となる頻度（他者の位置、向き、発話）が高い点である。
なお、心的特性推定部１１６は、推定した各対象者の心的特性に関するデータ（以下、「心的特性データ」と呼ぶ）を心的特性ＤＢ６００に格納する。
【００６６】
以上のように、心的特性として６つの要因が推定されるが、この推定は、数日から数か月の中期的なデータ分析に基づいて行われることが特に望ましい。このような、心的特性の推定データが蓄積されることにより、推定精度の向上が期待される。
さらに、上述のとおり、サーバ１では、ディープラーニングや深層学習等の機械学習に係る各種手法を利用することができ、これにより推定精度の更なる向上が期待される。
【００６７】
説明は図５に戻り、ステップＳ７において、発達特性推定部１１７は、前記心的特性推定手段により推定された所定人物の心的特性の長期的な推移の特徴と、標準的な心的特性の長期的な推移の特徴との差異に基づいて、所定人物の発達特性を推定する。
具体的に例えば、本実施形態では、発達特性推定部１１７は、複数の対象者Ａ〜Ｄ毎に推定された各対象者の心的特性の長期的な推移の傾向と、夫々の「場」における平均的な心的特性の長期的な推移傾向との差異に基づいて、複数の対象者Ａ〜Ｄの夫々の発達特性を推定する。
【００６８】
（発達特性の推定）
ここで、上記したステップＳ７における発達特性の推定の詳細について図１１を参照して説明する。
図１１は、発達特性の推定の一例を説明するための図である。
【００６９】
図１１に示すように、発達特性は、例えば、３つの側面（心情的発達特性側面、身体的発達特性側面、知能的発達特性側面）に分類される。
ここで、特に図１１を参照しつつ、発達特性の推定について説明する。
発達特性の推定を行うには、数年の長期的計測より蓄積された心的特性のビックデータから標準発達モデルの構築を行うことが特に好ましい。このため、大量のデータの収集に基づいて、全体平均による標準発達モデルの構築が行われ、さらにその標準発達モデルからの個人（対象者）のズレの推定が行われてもよい。
具体的に例えば、図１１の例では、子どもの出生から７年間（保育園入園から小学校入学まで）の発達特性を模した例であり、「心情的発達特性側面」、「身体的発達側面」、「知能的発達側面」の三側面を描いている。換言すれば、「こころ」「からだ」「あたま」の育ちの可視化である。
即ち、発達特性推定部１１７により推定される発達特性は、従来の発達指標とは異なり、心的特性の長期的計測により個々人の個性の発達の特性の推定が期待できる。
なお、ここでは、心情的発達特性側面を非認知能力、社会情動的スキルといった人間性（パーソナリティ）に関する能力を表すものとする。
このような発達特性は、例えば、知能テストや体力テストへの応用等が期待され、また、知能テストや体力テスト以外にも既存の医療カルテ、成績表、ＳＮＳ情報等の外部データとの同期により包括的な人の発達指標の導出等も期待される。
また、発達特性を推定する対象は、必ずしも子供に限られるものではなく、成人から高齢者までといった非常に長期的な個人の発達特性の推移の変化を出力するといった応用も可能である。
【００７０】
説明は図５に戻り、ステップＳ８において、出力データ生成部１１８は、ステップＳ４で推定された各対象者の関心対象の推定の結果、ステップＳ５で分類された「場の分類」の結果、ステップＳ６で推定された各対象者の心的特性の推定の結果、ステップＳ７で推定された各対象者の発達特性の推定の結果等に基づいて、出力データを生成する。
さらに、出力データ生成部１１８は、生成した出力データを記憶部１８に設置された図示せぬデータベースに、その情報を格納する。
【００７１】
ステップＳ９において、サーバ１は、処理の終了指示があったか否かを判断する。ここで、処理の終了指示は、特に限定されないが、本実施形態ではサーバ１のいわゆる電源等の遮断指示が採用されている。つまり、サーバ１において電源の遮断指示がなされない限り、ステップＳ９においてＮＯであると判断されて処理はステップＳ１に戻され、それ以降の処理が繰り返される。
これに対して、サーバ１においてスリープ状態等への移行指示がなされると、ステップＳ９においてＹＥＳであると判断されて、サーバ１の実行する特性情報推定処理は終了になる。
【００７２】
以上、本発明の実施形態について説明したが、本発明は上述した実施形態に限るものではない。
また、本実施形態に記載された効果は、本発明から生じる最も好適な効果を列挙したに過ぎず、本発明による効果は、本実施形態に記載されたものに限定されるものではない。
【００７３】
ここで、図示はしないが、本サービスにおいて、実行されるアノテーション処理は、必ずしも手動で行われる必要はなく、半自動で実行されてもよい。
具体的に例えば、対象者の氏名や性別等の属性、撮像画像、追跡データ、行動観察結果等の情報を、半自動的に付加し、行動特徴量を編集可能なダイアログが表示されるような仕様としてもよい。また、例えば、このダイアログには、行動特徴量として、例えば「興味・関心の対象」、「視線」、「身体の向き」、「表情」等を登録可能とする入力フォームを設けてもよい。
【００７４】
（本サービスの具体例）
次に、図１２を参照しつつ、上述の実施形態におけるデータ処理について、具体的な事例について、説明する。
図１２は、本サービスの具体例として、教育施設におけるクライアント（保育者）が、対象者（子ども）に絵本の読み聞かせを行った場合のデータ処理の一例を示す図である。
【００７５】
図１２の破線で囲まれた領域１２−１には、本サービスが適用される教育施設の平面図が描画されている。
図１２の例では、クライアント（保育者）が１８人の対象者（子ども）に対して、読み聞かせを行った場合の、１８人の対象者（子ども）の位置や視線の方向が、画像処理の結果の情報として、示されている。
即ち、１８人の対象者（子ども）の夫々の位置を示す複数の点Ｃ（１乃至１８）と、夫々の対象者（子ども）の視線の向きを示す線Ｄ（１乃至１８）とが示されている。なお、点Ｂは、複数の線Ｄの延長線上の交点を示している。
また、線Ｄが示されていない点については、例えば、クライアント（保育者）等であり、対象者（子ども）以外の者の位置を示している。
図１２の例では、領域ＥＡに枠Ｅが密集しており、点Ｂのバラつきを示す領域Ｆの面積も小さい。また、点Ｃも一定の対象の周辺に収束している。つまり、図１２の例では、１８人の対象者（子ども）の視線が読み聞かせをしているクライアント（保育者）に向いており、夫々の子供のほとんどすべての関心対象が、読み聞かせをしているクライアント（保育者）になっていることが推測される。
【００７６】
図１２の破線で囲まれた領域１２−２には、対象となる教育施設を複数の角度から撮像した撮像画像が示されている。
図１２の破線で囲まれた領域１２−３には、１８人の対象者（子ども）の関心対象を示すグラフが表示されている。
【００７７】
図１３は、本サービスの具体例として、対象となる教育施設が自由時間になった場合の例を示す図である。
【００７８】
図１３の破線で囲まれた領域１３−１には、図１２の領域１２−１と同様に、対象となる教育施設の平面図に、点Ｃと、線Ｄと、点Ｂと、枠Ｅとが表示されている。
図１３の例では、１８人の対象者（子ども）の夫々の位置を示す点Ｃが離散しており、点Ｂのバラつきを示す領域Ｆの面積も大きい。また、枠Ｅも離散している。
つまり、図１３の例では、１８人の対象者（子ども）の夫々は、自由時間を過ごしているため、夫々が異なる方向に視線を向けており、関心対象にもバラツキが生じていることが推測される。
【００７９】
図１３の破線で囲まれた領域１３−２には、図１２の領域１２−２と同様に、対象となる教育施設を複数の角度から撮像した撮像画像が示されている。
破線で囲まれた領域１２−３には、図１２の領域１２−３と同様に、１８人の対象者（子ども）の関心対象を示すグラフが表示されており、１８人の対象者（子ども）の夫々の関心対象として、「保育者との関わり」、「子ども（友達）との関わり」、「全体（ことがら）との関わり」、「集団の保育活動に関連しない「ひと」の関わり」、「「もの」との関わり」、「飽きている」が項目として挙げられている。このグラフによると、１８人の対象者（子ども）の関心対象にバラつきが生じていることがわかる。
【００８０】
ここで、上述の通り、対象者（子ども）が視線を向けているということが、その子供の関心対象であるという点について、図１４及び図１５を参照しつつ、簡単に補足する。
【００８１】
図１４は、関心推定の原理を裏付けるための根拠となる尤度距離を算出する手法の一例を示す図である。
【００８２】
尤度距離は、図１４の左側に示すように、クライアント（保育者）により記録（記述）された対象者（子ども）の関心対象と、行動観察結果（例えば２０，７３６秒にわたる撮像画像のデータに基づく行動観察結果）から作成された関心対象間の角度の確率分布とに基づいて算出することができる。
なお、図１４で示している「角度」とは、二次元平面上の「角度」を意味しているが、これはあくまでも例示であり、例えば、「角度」とは、三次元空間上の「角度」を意味していてもよい。
関心対象間の角度の確率分布は、例えば図１４の右側に示すように、関心対象に対する頭の角度（ｆ（ｘＨｅａｄ））の分布を表すグラフで示すことができる。
即ち、図１４のグラフに示すように、ある瞬間の対象者（子ども）の頭の角度（ｆ（ｘＨｅａｄ））が「０（ゼロ）」又はその付近の角度のときに、対象者（子ども）の視線の先に関心対象があることがわかる。
【００８３】
図１５は、関心推定の正答率を示す表である。
【００８４】
上述したように、図１４に示すグラフは、ある瞬間における対象者（子ども）の、関心対象に対する頭の角度（ｆ（ｘＨｅａｄ））の分布を表している。これに対し、図１５の表に示すように、「瞬間」ではなく「連続する時間（例えば１秒、２秒等）」で捉えた場合には、関心対象の推定の正答率（信頼性）に違いが生じる。
例えば、ある「瞬間」における対象者（子ども）の頭の角度に基づいて関心対象を推定すると、図１５に示すように、第１候補として推定された関心対象の正答率（信頼性）は、平均で「２４．１％」となる。また、第３候補まで含めた場合の正答率（信頼性）は、平均で「４８．８％」となる。
また、対象者（子ども）の頭の角度が所定の角度で連続して１秒間維持された場合の関心対象を推定すると、第１候補として推定された関心対象の正答率（信頼性）は、平均で「３０．７％」となる。また、第３候補まで含めた場合の正答率（信頼性）は、平均で「６１．２％」となる。
また、対象者（子ども）の頭の角度が所定の角度で連続して２秒間維持された場合の関心対象を推定すると、第１候補として推定された関心対象の正答率（信頼性）は、平均で「３２．７％」となり、１秒間維持された場合よりも２ポイント上昇する。また、第３候補まで含めた場合の正答率（信頼性）は、平均で「６５．１％」となり、１秒間維持された場合よりも約４ポイント上昇する。
また、対象者（子ども）の頭の角度が所定の角度で連続して３秒間維持された場合の関心対象を推定すると、第１候補として推定された関心対象の正答率（信頼性）は、平均で「３３．５％」となり、２秒間維持された場合よりも約１ポイント上昇する。また、第３候補まで含めた場合の正答率（信頼性）は、平均で「６７．０％」となり、２秒間維持された場合よりも約２ポイント上昇する。
このように、対象者（子ども）の頭の角度が所定の角度で連続して１秒間以上維持された場合には、「瞬間」の場合よりも飛躍的に正答率（信頼性）が向上することがわかる。
【００８５】
図１６は、尤度距離を利用した解析の手法の一例を示す図である。
【００８６】
図１６の破線で示された領域１６−１には、「人による分類」、即ち、クライアント（保育者）等の熟練したスキルを持つ者によって、対象者（子ども）の関心対象の全体の平均からの尤度距離を示すグラフが示されている。
他方、図１６の破線で示された領域１６−２には、「自動分類」、即ち、行動観察結果に基づいて作成された、各瞬間の行動発生確率の平均からの尤度距離を表すグラフが示されている。
図１６の例では、縦軸に夫々の対象者（子ども）、横軸に抽出された状況毎の時系列的な変化が示されている。また、図１６の例では、白と黒の濃淡によって、夫々の対象者（子ども）の関心対象の平均からの距離が示されている。
【００８７】
具体的に例えば、領域１６−１の下段の１番の対象者（子ども）の例を見ると、特に白い点線で囲っている場面（２０番：「エリカ読み聞かせ」、２３番：「自由時間」、２５番：「次の活動を待つ」）において、他の子供とは大きく異なる（尤度距離の遠い）関心対象を示していることが分かる。
このような１番の対象者（子ども）の傾向は、領域１６−２示す「自動分類」においても同様である。
即ち、図１６例では、熟練したスキルを持つ者による「人による分類」と、上述の実施形態を含む、本サービスに関連する各種手法を用いた「自動分類」とが、例えば、１番の対象者が（子ども）が、他とは異なる関心対象を示しているという点において、同様の結果を示しているということを意味しており、本サービスに関連する各種手法を用いた「自動分類」の妥当性を支持するものである。
換言すれば、これらのデータは、対象者（子ども）の関心対象は、対象者（子ども）の位置と向きとに基づいて推定することができるということを示唆するものである。
【００８８】
図１６の破線で示された領域１６−２には、「自動分類」、即ち、行動観察結果に基づいて自動作成された、各瞬間の行動発生確率の平均からの尤度距離を表すグラフが示されている。
図１６の破線で示された領域１６−３には、行動観察結果に基づいて自動的に分類される、対象者（子ども）の状況の具体例が示されている。具体的には、「保育者の説明を聞く」、「保育者とおはようの歌を歌う」、「次の活動を待つ」、「保育者と歌をうたう」、といった状況が示されている。
【００８９】
さらに、本サービスによる自動分類の結果に基づいて、対象者（子ども）の個々の特性を推定することもできる。
【００９０】
これにより、例えばクライアント（保育者）として注意しなければならない対象者（子ども）や集団（例えば学級）を効率よく把握することができる。
集団（例えば学級）から外れがちな対象者（子ども）がいる場合、その「外れ方」はいろいろあり、その原因も様々であるが、本サービスによる自動分類によれば、クライアント（保育者）は場面に応じた行動分布を把握することが可能となる。これにより、クライアント（保育者）は、行動分布から算出された行動の尤度距離に基づいて、注意すべき対象者（子ども）や集団（例えば学級）を判断することができる。また、注意すべき対象者（子ども）や集団（例えば学級）の保護者と協調していくことが可能となる。
【００９１】
具体的には、クライアント（保育者）は、対象者（子ども）の特性の推定結果から、対象者（子ども）の友達関係を把握して、集団に属する対象者（子ども）の要注意度を推定することができる。
また、クライアント（保育者）は、複数の対象者（子ども）の特性の推定結果から、集団（例えば学級）全体のざわつき度や集中度を把握することができる。換言すると、集団（例えば学級）全体の空気（雰囲気）を定量化して、他の集団と比較することができる。
また、クライアント（保育者）は、集団（例えば学級）をリードする複数の対象者（子ども）が属する母集団を形成させることもできる。これにより、集団（例えば学級）の品質をコントロールすることも可能となる。
【００９２】
さらに、本サービスによれば、次に掲げることを実現させることもできる。
即ち、対象者（子ども）の夫々の運動量、及び滞在している位置に基づいて、関心対象を推定することもできる。
また、クライアント（保育者）を注目しない対象者（子ども）や、注目しすぎる対象者（子ども）を推定することができる。
また、対象者（子ども）同士、又は対象者（子ども）と先生との間における、物理的・心的な近さを推定することもできる。
また、対象者（子ども）同士、又は対象者（子ども）と先生との間で動作の同期を測ることで、対象者の活動への参加の度合いを推定することもできる。
また、対象者（子ども）の分類と、集団行動の分類とを組合せることにより、どんな活動に熱心又は不熱心になっているか、何を得意又は不得意とするかといった見地を含む、多元的な個性の把握を可能とすることができる。
【００９３】
ここで、本発明の一実施形態に係る情報処理システムの応用例について、簡単に説明する。
上述した実施形態のように、本サービスが保育・教育領域において適用される場面においては、「子供の発達障害の早期発見（縦段的な発達研究）」、「学習への意欲の推定（教育効果の検証等）」、「教育活動のリスク要因の推定（事故、いじめの予防等）」、「適切な職業タスクの推定（教育適性の推定等）」等に応用が期待される。
なお、これらの応用例は、例えば、「保育、教育施設」、「教育研究機関」、「教育行政機関」等で実行され得る。
【００９４】
また、上述の実施形態では、本サービスが保育・教育領域において適用される例について説明したが、本サービスは、他の領域においても適用することができる。具体的には、本サービスは、医療・介護領域、マーケティング領域、あるいはロボットサービス領域に適用してもよい。
例えば、本サービスが医療・介護領域において適用される場合においては、「認知症推定判断（認知症の早期発見、進行度推定）」、「精神健康度推定（患者、職員のストレスマネジメント）」等に応用が期待される。
なお、これらの応用例は、例えば、「医療施設」、「介護施設」、「企業人事」等で実行され得る。
また、同様に、例えば、本サービスがマーケティング領域において適用される場面においては、「顧客の心的状態の評価（顧客のニーズの抽出）」、「関心を反映した設計提案（設備配置等の最適化推定）」等に応用が期待される。
なお、これらの応用例は、例えば、「商業施設」、「設計事業」等で実行され得る。
また、同様に、例えば、本サービスがロボットサービス領域において、適用される場面においては、「家庭、介護、職場ロボットによる人の感情推定」、即ち、ロボットによる接客、生活支援、ストレス緩和等に応用が期待される。
なお、これらの応用例は、ロボットを開発する企業やロボットが利用される現場（例えば、個人、法人等）等で実行され得る。
【００９５】
例えば、上述の実施形態において、６つの類型（第１分類〜第６分類）の「場」に分類する方法を採用して説明を行ったが、特にこれに限定されない。
即ち、サーバ１では、上述の６つの類型の「場」に分類する以外のあらゆる方法を採用してもよい。例えば、８つの類型の「場」に分類してもよいし、上述の６つの類型の「場」の概念を適宜変更してもよい。
また、上述の実施形態では、６つの類型を大きく、第１分類〜第３分類の「場」を、集団により形成される「場」の類型として、第４分類〜第６分類の「場」を、特定個人により形成される「場」の類型として規定したが、特にこれに限定されない。
即ち、サーバ１では、他のあらゆる概念を用いて「場」の類型を規定して、「場」の分類を行うことができる。
【００９６】
さらに言えば、上述の実施形態では、特許請求の範囲に記載された「１単位」を、「場面」として説明したが、特にこれに限定されず、サーバ１は、「１単位」として、上述の「場面」を含む、あらゆる概念を採用することができる。例えば、サーバ１は、「１単位」として、「１秒程度の短い時間」という概念を採用してもよい。
具体的には、サーバ１は、個人の関心対象の分類を１秒程度の短い時間ごとに行い、それを合わせて集団の関心対象を、１秒程度、あるいはもう少し長い１０秒程度で推定する。そして、そこから推定される集団で構成される「場」を決め、その変化点を持って、連続して撮像された画像を「１単位」毎に区切るという手法を採ることもできる。
即ち、特許請求の範囲に記載された「１単位」とは、必ずしも一定期間という幅があって固定されている訳ではなく、集団の関心対象、ひいてはそこで行われている活動が続いている間を意味し、その変化する点をもって当該「１単位」の区切りとしてもよい。
【００９７】
上述の実施形態では、サーバ１にインストールされたプログラムが実行されることにより、図５に示す特性情報推定処理が実行され、本サービスが実現するものとした。しかし、本サービスを実現するためのプログラムは、サーバ１にインストールされて実行されるものではなく、例えばクライアント端末２にインストールされて実行されるものとしてもよい。
【００９８】
また、上述の実施形態では、撮像画像のデータ（動画像データ）に基づいて、画像解析処理により、複数の対象者の夫々の行動観察結果が取得されるものとしたが、行動観察結果の取得方法はこれに限るものではない。例えば、各対象者に直接、視覚センサ（カメラ）や加速度センサ等のセンサを取り付けることにより、各対象者に取り付けられたセンサの検知情報に基づいて各対象者の行動観察結果が取得されるものとしてもよい。
【００９９】
また、尤度距離を算出する手法は、上述の実施形態に限定されない。例えばＴｏｐｉｃ（トピック）モデルを用いて、場面の自動分類と対象者（子ども）の尤度距離を算出することもできる。
ここで、「Ｔｏｐｉｃモデル」とは、複数の潜在的なＴｏｐｉｃに基づいて文書が生成されると仮定したモデルのことをいう。また、Ｔｏｐｉｃモデルにおいて、文書を構成する各単語は、所定のＴｏｐｉｃが持つ確率分布に従って出現すると仮定される。即ち、Ｔｏｐｉｃモデルでは、文書を構成する単語の出現頻度の分布を想定することで、Ｔｏｐｉｃ間の類似性やその意味を解析することができる。
このＴｏｐｉｃモデルを、本サービスにおける場面の自動分類と尤度距離の算出とに用いる。具体的には例えば、対象者（子ども）が属する集団が「英語のクラス」である場合には、まず、Ｔｏｐｉｃとして分布している「英語の歌」、「人への関心」、及び「物への関心」と、対象者（子ども）の各行動とを対応付ける。次に、行動観察結果から得られる対象者（子ども）の夫々の位置と速度に基づいて、対象者（子ども）夫々の行動を分類する。なお、対象者（子ども）夫々の位置と速度に基づく行動の分類の具体的手法は特に限定されない。例えばＨＤＰ−ＨＭＭ（階層ディリクレ過程隠れマルコフモデル）による教師なしのクラスタリングによる手法を用いることができる。そして、例えばＬＤＡ（潜在的ディリクレ配分法）による教師なしのクラスタリングを用いたクラス毎の行動の確率分布に基づいて、対象者（子ども）の行動の尤度距離を算出することができる。
【０１００】
また、上述の実施形態では、対象者（子ども）の「向き」として、俯角のみが例示されているが、これに限定されず、仰角が含まれてもよい。即ち、対象者（子ども）が頭や体を、水平方向に左右に傾ける動作のみならず、垂直方向に上下に傾ける動作が含まれてもよい。
【０１０１】
また、上述の実施形態では、本発明の情報処理システムは、サーバ１、クライアント端末２により構成されていたが、本発明の目的を達成するための例示に過ぎず、特に限定されない。
即ち、図１の例では、説明の便宜上、クライアント端末２を１つしか記載していないが、本サービスの提供を受けるクライアント数に応じて、クライアント端末２の数を適宜設定することができる。
また、上述の実施形態では、クライアント端末２を介して所定のネットワークＮによって撮像画像のデータがサーバ１に送信されるものとしたが、撮像画像のデータは、撮像装置３からサーバ１へ有線で直接入力されてもよい。
また、上述の実施形態では、クライアント端末２と、撮像装置３が別々に設けられるものとしたが、クライアント端末２が撮像部（例えば、ビデオカメラ部）を備える（クライアント端末２と撮像部３とが一体に構成される）ものとしてもよい。
さらに言えば、上述の実施形態では、１つのクライアント端末２に対して、１つの撮像装置３が接続されるものとしたが、特にこれに限定されない。即ち、本サービスでは、一つのクライアント端末２に対して複数の撮像装置３が接続されてもよいし、複数のクライアント端末２に対して１つの撮像装置３が接続されてもよい。
したがって、例えば、クライアント端末２が複数の撮像装置から同時に画像（動画）を受けることも可能である。
【０１０２】
また、図３に示す各ハードウェア構成は、本発明の目的を達成するための例示に過ぎず、特に限定されない。
【０１０３】
また、図４に示す機能ブロック図は、例示に過ぎず、特に限定されない。即ち、上述した一連の処理を全体として実行できる機能が情報処理システムに備えられていれば足り、この機能を実現するためにどのような機能ブロックを用いるのかは、特に図４の例に限定されない。すなわち、図５に示す特性情報推定処理は、単一の情報処理装置（例えばサーバ１）によって実現されてもよいし、複数の情報処理装置（サーバ１、クライアント端末２）からなる情報処理システムによって実現されてもよい。また、図５に示す特性情報推定処理は、クライアント端末２にインストールされるアプリケーションプログラムの一部として実行されるものであってもよい。
【０１０４】
また、機能ブロックの存在場所も、図４に限定されず、任意で良い。例えばサーバ１側の機能ブロックの少なくとも一部をクライアント端末２の側に設けても良いし、その逆でも良い。
そして、１つの機能ブロックは、ハードウェア単体で構成しても良いし、ソフトウェア単体との組み合わせで構成しても良い。
【０１０５】
各機能ブロックの処理をソフトウェアにより実行させる場合には、そのソフトウェアを構成するプログラムが、コンピュータ等にネットワークや記録媒体からインストールされる。
コンピュータは、専用のハードウェアに組み込まれているコンピュータであっても良い。また、コンピュータは、各種のプログラムをインストールすることで、各種の機能を実行することが可能なコンピュータ、例えばサーバの他汎用のスマートフォンやパーソナルコンピュータであっても良い。
【０１０６】
このようなプログラムを含む記録媒体は、各クライアントにプログラムを提供するために装置本体とは別に配布される、リムーバブルメディアにより構成されるだけではなく、装置本体に予め組み込まれた状態で各クライアントに提供される記録媒体等で構成される。
【０１０７】
なお、本明細書において、記録媒体に記録されるプログラムを記述するステップは、その順序に添って時系列的に行われる処理はもちろん、必ずしも時系列的に処理されなくとも、並列的或いは個別に実行される処理をも含むものである。
【０１０８】
以上を換言すると、本発明が適用される情報処理装置は、次のような構成を有する各種各様の実施形態を取ることができる。
即ち、本発明が適用される情報処理装置は、
所定時間帯における所定場所を１単位として、複数の単位毎の人物の行動観察結果を、複数の人物毎に取得する取得手段（例えば、図４の観察結果取得部１１３）と、
前記複数の人物及び前記複数の単位毎に、夫々取得された前記行動観察結果に基づいて、個人の関心対象を推定する関心対象推定手段（例えば、図４の関心対象推定部１１４）と、
前記複数の人物及び前記複数の単位毎の前記関心対象推定手段の推定結果に基づいて、集団により形成される１種類以上の場及び特定個人により形成される１種類以上の場の中から、前記複数の単位の夫々を１種類以上の場に分類する場分類手段（例えば、図４の場分類部１１５）と、
を備えれば足りる。
これにより、対象者（人物）に関心対象が生じたときの場面がどのような場面であるのか（集団により形成される場面か、特定個人により形成される場面か）を適切に推定することができる。
【０１０９】
また、前記関心対象推定手段は、ひと、もの、及びことの３要素のうち１以上の要素から、所定単位における所定人物の関心対象を推定する、ことができる。
これにより、対象者（人物）の関心対象の種類を推定することができる。
【０１１０】
また、前記関心対象推定手段により所定単位における所定人物の関心対象が推定されたときに、当該所定人物の行動観察結果と、当該所定単位における他の人物の行動観察結果の平均値との差異に基づいて、当該所定人物の心的特性を推定する心的特性推定手段（例えば、図４の心的特性推定部１１６）をさらに備える、ことができる。
これにより、対象者（人物）の心的特性を適切に推定することができる。
【０１１１】
また、前記心的特性は、開放性、積極性、勤勉性、安定性、適応性、およびリーダーシップの６つの要因から成るものとする、ことができる。
これにより、対象者（人物）の心的特性を多角的に分析することができる。
【０１１２】
また、前記心的特性推定手段により推定された所定人物の心的特性の長期的な推移の特徴と、標準的な心的特性の長期的な推移の特徴との差異に基づいて、所定人物の発達特性を推定する発達特性推定手段（例えば、図４の発達特性推定部１１７）をさらに備える、ことができる。
これにより、対象者（人物）の発達特性を適切に推定することができる。
【０１１３】
また、前記取得手段は、
複数の単位毎の人物の、位置と向きとのうち少なくとも一方に関する情報を含む行動観察結果を、複数の人物毎に取得することができる。
これにより、対象者（人物）に関心対象が生じたときの場面がどのような場面であるのか（集団により形成される場面か、特定個人により形成される場面か）を、対象者（人物）の位置又は向き、あるいは位置及び向きに基づいて適切に推定することができる。
【０１１４】
また、本発明は、情報処理方法や、プログラムに適用することもできる。
【符号の説明】
【０１１５】
１・・・サーバ、２・・・クライアント端末、３・・・撮像装置、１１・・・ＣＰＵ、２１・・・ＣＰＵ、２４・・・表示部、１１１・・・撮像画像取得部、１１２・・・撮像画像解析部、１１３・・・観察結果取得部、１１４・・・関心対象推定部、１１５・・・場分類部、１１６・・・心的特性推定部、１１７・・・発達特性推定部、１１８・・・出力データ生成部、１１９・・・情報送信部、２１１・・・撮像画像管理部、２１２・・・出力情報取得部、５００・・・分類ＤＢ、６００・・・心的特性ＤＢ、１２−１〜１２−３，１３−１〜１３−３，１６−１〜１６−３・・・領域、Ｂ・・・対象者の向きを示す線の交点、Ｃ・・・対象者の位置を示す点、Ｄ・・・対象者の向きを示す線、Ｅ・・・対象者の関心対象を示す枠、ＥＡ・・・領域、Ｆ・・・対象者の向きを示す線の交点のバラつきを示す領域
【図１】
2019153303.tif 000003
【図２】
2019153303.tif 000004
【図３】
2019153303.tif 000005
【図４】
2019153303.tif 000006
【図５】
2019153303.tif 000007
【図６】
2019153303.tif 000008
【図７】
2019153303.tif 000009
【図８】
2019153303.tif 000010
【図９】
2019153303.tif 000011
【図１０】
2019153303.tif 000012
【図１１】
2019153303.tif 000013
【図１２】
2019153303.tif 000014
【図１３】
2019153303.tif 000015
【図１４】
2019153303.tif 000016
【図１５】
2019153303.tif 000017
【図１６】
2019153303.tif 000018