(57)【特許請求の範囲】
【請求項１】
画像データと該画像データによる再生画像を説明するフレーズ音声データとが紐づけられた組合せを複数有する対応テーブルが予め記憶された対応テーブル記憶部と、
前記画像データと該画像データに紐づけられたフレーズ音声データとの同時再生を、前記対応テーブルが有する複数の組合せの一部又は全部について順次実行することを指令する第１再生指令部と、
前記第１再生指令部の指令によって再生された複数の前記画像データの中から任意に選択される複数の選択画像データとこれら複数の選択画像データのいずれかの選択画像データに紐づけられた特定のフレーズ音声データとの同時再生を実行することを指令する第２再生指令部と、
前記第２再生指令部の指令による同時再生が行われている間、前記第２再生指令部の指令によって再生される複数の選択画像データのうち、これら複数の選択画像データと共に再生されている前記特定のフレーズ音声データに紐づけられた選択画像データがどれであるか、ユーザーへの選択操作を促すことを指令する選択操作指令部と、
前記第２再生指令部による同時再生の指令と前記選択操作指令部による前記選択操作を促すことの指令とを繰り返し実行する繰り返し部とを備え、
前記第１再生指令部の指令によって実行される前記画像データの再生時間は、前記フレーズ音声データにおけるフレーズの読み上げ時間と略同一の時間に設定されており、
前記対応テーブル記憶部には、前記第１再生指令部の指令によって実行される同時再生の時間が複数の前記組合せのそれぞれについて記憶され、
前記第１再生指令部の指令によって実行される前記画像データ及び前記フレーズ音声データの同時再生は、再生速度を上げることなく前記対応テーブル記憶部に記憶された同時再生の時間が長い順に実行可能である、
教育支援装置。
【請求項２】
前記対応テーブル記憶部には、前記画像データ及び前記フレーズ音声データが属する分類情報が複数の前記組合せのそれぞれについて記憶され、
前記第１再生指令部の指令によって実行される前記画像データ及び前記フレーズ音声データの同時再生は、前記分類情報に基づき、互いに同一又は類似する組合せを優先して順次実行可能である、請求項１に記載の教育支援装置。
【請求項３】
前記分類情報は、前記画像データ及び前記フレーズ音声データの組合せを含んで構成される学習コンテンツの上位概念に相当し、
前記第１再生指令部の指令によって同時再生された一部又は全部の組合せに共通する前記上位概念が何であるかをユーザーに発問することを指令する発問指令部をさらに備える、請求項２に記載の教育支援装置。
【請求項４】
前記選択操作を行うユーザーの年齢を入力することを指令する年齢入力指令部をさらに備え、
前記対応テーブル記憶部には、前記画像データ及び前記フレーズ音声データの対象年齢情報が複数の前記組合せのそれぞれについて記憶され、
前記第１再生指令部の指令によって実行される前記画像データ及び前記フレーズ音声データの同時再生は、前記年齢入力指令部の指令によって入力された年齢及び前記対象年齢情報に基づいて順次実行可能である、請求項１から３のいずれか１項に記載の教育支援装置。
【請求項５】
コンピュータに実行させることの可能な教育支援プログラムであって、  前記コンピュータに、  画像データと該画像データによる再生画像を説明するフレーズ音声データとが紐づけられた組合せを複数有する対応テーブルが予め記憶された対応テーブル記憶部を参照し、前記画像データと該画像データに紐づけられたフレーズ音声データとの同時再生を、前記対応テーブルが有する複数の組合せの一部又は全部について順次実行させる第１再生ステップと、  前記第１再生ステップによる同時再生が終了したことに応じて、前記第１再生ステップにおいて再生された複数の前記画像データの中から任意に選択される複数の選択画像データとこれら複数の選択画像データのいずれかの選択画像データに紐づけられた特定のフレーズ音声データとの同時再生を実行させる第２再生ステップと、  前記第２再生ステップにおける同時再生が行われている間、前記第２再生ステップにおいて再生される複数の選択画像データのうち、これら複数の選択画像データと共に再生されている前記特定のフレーズ音声データに紐づけられた選択画像データがどれであるか、ユーザーに選択操作させる選択操作ステップと、  前記第２再生ステップと前記選択操作ステップとを繰り返す繰返しステップを実行させ、  前記第１再生ステップにおける前記画像データの再生時間が、前記フレーズ音声データにおけるフレーズの読み上げ時間と略同一の時間に設定されており、  前記対応テーブル記憶部には、第１再生指令部の指令によって実行される同時再生の時間が複数の前記組合せのそれぞれについて記憶され、  前記第１再生指令部の指令によって実行される前記画像データ及び前記フレーズ音声データの同時再生は、再生速度を上げることなく前記対応テーブル記憶部に記憶された同時再生の時間が長い順に実行可能である、プログラム。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、教育支援装置及び教育支援プログラムに関し、より詳しくは、画像と音声との同時再生を反復することで幼児・児童等の子供に知識の習得を促し、かつ、子供の知識習得状況を容易に把握可能な装置及びプログラムに関する。
【背景技術】
【０００２】
近年の少子化及び核家族化に伴い、子供により良い教育を与えたいという要望が高まっている。それに伴い、特に幼少期の教育を重視する傾向も強まっている。
【０００３】
その中でも未就学児に対して行われる幼児教育はその後の発育に与える影響が大きく、また、投資額に対して将来的に高い効果が見込まれることから、近年ますます注目されている。しかしながら、幼児教育を重視する幼稚園や保育所はまだ限られており、地域的な事情もあって、全ての幼児の教育に利用できるものではない。また、幼稚園への入園は満３歳からと定められていることから、満３歳未満の幼児に対する教育においてはこうした幼稚園を利用できない。こうした事情から、幼児教育を進めるにおいて、家庭内での教育と、それを支援するシステムとが必要とされている。
【０００４】
幼児教育を支援するシステムとして、音声と画像とが一組になった学習情報を連続的に再生する速聴読による学習装置が開発されている（特許文献１、特許文献２等）。こうした装置では、画像とそれに対応するフレーズを発声した音声とを同時に、かつ、連続的に繰り返し再生することにより、フレーズを記憶させ、幼児期における言語能力の発達を促す効果が期待できる。
【先行技術文献】
【特許文献】
【０００５】
【特許文献１】特開平０８―１２３３０９号公報
【特許文献２】特開２０１３―２２８４４６号公報
【発明の概要】
【発明が解決しようとする課題】
【０００６】
しかしながら、こうした従来の装置においては、再生速度の変化や再生順序の工夫が重視される一方、子供にどのようなフレーズの学習情報を与えるかについての検討に改善の余地がある。また、再生速度についても、個々のフレーズの再生時間等の性質を考慮することに改善の余地がある。
【０００７】
また、学習効率について考えると、幼児が学習対象としたフレーズを習得した時点で学習対象に新たなフレーズを加えて学習内容を発展させることが望ましい。こうした習得状況の把握について、就学後の児童であればプリントを用いた確認テスト等が用いられる。しかし、筆記能力が発達段階にある幼児の習得状況をプリントのみで把握するのは容易ではない。
【０００８】
習熟の把握を行うために、指導者は幼児の反応を見て理解の進捗を判断しようとする。この習熟方法を取った場合、幼児は言語能力が発達段階にあることから、指導者は理解の進捗を判断することに時間を要する。指導者の確認に頼ると、確認に要する時間によって、（１）幼児が新しいフレーズを吸収する機会が損失される。また、幼児自身に判断を迫る機会を多く与えれば、幼児自身の判断能力を磨けるにも関わらず、判断の機会を与えないことは、（２）幼児が情報処理能力を向上させる機会の損失に繋がる。
【０００９】
再生項目数を数千単位に増加させたフレーズの習熟状況の把握を可能とする装置があれば、上記（１）は回避され、プリント学習前に幼児の頭にインプットされる言葉や物事の数は大幅な増加が見込める。また、再生速度についてその高速化や変化を与え、指導者との対話によってではなく装置を用いて習熟状況を把握できれば、上記（２）についても改善が行われ、幼児の理解と判断の速度が向上し、今後の全般的な学習効率は向上することになる。したがって、より効果的な幼児教育を行うためには、幼児の習得能力を十分に把握し、（１）と（２）のような状況を避けて学習効率を高める手段を備えることが必要となる。
【００１０】
本発明は、このような考えに基いてなされたものであり、画像とフレーズとを連続的に視聴する学習を行うことができ、筆記能力が発達段階にある子供（特に幼児）においてもこの学習によるフレーズの習得状況を把握でき、子供の学習効率を高めることが可能な教育支援装置及び教育支援プログラムを提供することを目的とする。
【課題を解決するための手段】
【００１１】
本発明者らは、上記課題を解決するために鋭意検討した結果、画像データとフレーズ音声データとの連続的な同時再生に続けて、フレーズ音声データを再生し、提示した複数の画像からの選択操作を学習者に促すことで、上記の目的を達成できることを見出し、本発明を完成させるに至った。具体的に、本発明は以下のものを提供する。
【００１２】
第１の特徴に係る発明は、画像データと該画像データによる再生画像を説明するフレーズ音声データとが紐づけられた組合せを複数有する対応テーブルが予め記憶された対応テーブル記憶部と、前記画像データと該画像データに紐づけられたフレーズ音声データとの同時再生を、前記対応テーブルが有する複数の組合せの一部又は全部について順次実行することを指令する第１再生指令部と、前記第１再生指令部の指令によって再生された複数の画像データの中から任意に選択される複数の選択画像データとこれら複数の選択画像データのいずれかの選択画像データに紐づけられた特定のフレーズ音声データとの同時再生を実行することを指令する第２再生指令部と、前記第２再生指令部の指令による同時再生が行われている間、前記第２再生指令部の指令によって再生される複数の選択画像データのうち、これら複数の選択画像データと共に再生されている前記特定のフレーズ音声データに紐づけられた選択画像データがどれであるか、ユーザーに選択操作を促すことを指令する選択操作指令部と、前記第２再生指令部による同時再生の指令と前記選択操作指令部による前記選択操作を促すことの指令とを繰り返し実行する繰り返し部とを備え、前記第１再生指令部における画像データの再生時間は、フレーズ音声データにおけるフレーズの読み上げ時間と略同一の時間に設定されている、教育支援装置である。
【００１３】
第１の特徴に係る発明によれば、画像データと画像データに紐づけられたフレーズ音声データとを順次同時再生し、それによりユーザーは学習を行うことができる。特に、画像データの再生時間がフレーズ音声データにおけるフレーズの読み上げ時間と略同一の時間に設定されている。そのため、ユーザーは同時再生された画像データと音声データとを互いに関連するものとして学習できることに加え、最小限の時間でできるだけ多くの画像及びフレーズ音声の関連づけを、フレーズ音声の再生速度を上げることなく、自然な発話スピードで実行することが可能である。
【００１４】
さらに選択操作指令部がフレーズ音声データに紐づけられた選択画像データがどれであるかユーザーに選択操作を促すことを指令する。そのため、発話能力や筆記能力が発達段階にある子供（特に幼児）であっても、プリントを用いた確認テスト等を行うことなく、あるいは確認テスト等を行う前段階として子供のフレーズ習得状況を容易かつ正確に把握することが可能である。そして、結果として、（１）既に十分に習得してこれ以上の学習効果が望めないフレーズを繰り返し再生し続ける事態や、（２）子供が学習範囲のフレーズを十分に習得しないうちに学習内容を発展させようとして新しいフレーズを数多く加えて再生してしまうといった事態を回避できる。これら（１）と（２）のような事態を回避することにより、子供の学習効率を高められる。また、指導者との対話によらず、第２再生指令部と選択操作指令部との繰り返しにより習得状況を把握するので、再生項目が数千単位に増加しても、習得状況を容易に把握できる。
【００１５】
また、プリント学習に先立って順次同時再生による学習を行い、さらに、子供のフレーズ習得状況を把握することにより、ユーザーは、子供が十分な学習を行った後に適切なプリントを選択して子供に学習を行わせることができる。したがって、その後のプリント学習の効果が上がり、プリントを効率的に処理することができる。
【００１６】
よって、第１の特徴に係る発明によると、画像とフレーズとを連続的に視聴する学習を行うことができ、発話能力が発達段階にある子供（特に幼児）においてもこの学習によるフレーズの習得状況を把握でき、子供の学習効率を高めることが可能な教育支援装置を提供できる。
【００１７】
第２の特徴に係る発明は、第１の特徴に係る発明であって、前記対応テーブル記憶部には、前記第１再生指令部の指令によって実行される同時再生の時間が複数の組合せのそれぞれについて記憶され、前記第１再生指令部の指令によって実行される前記画像データ及び前記フレーズ音声データの同時再生は、前記対応テーブル記憶部に記憶された同時再生の時間が長い順に実行可能である、教育支援装置を提供する。
【００１８】
第２の特徴に係る発明によれば、同時再生の時間が長い順に同時再生を実行することで、同時再生の開始直後は、１つの画像が次の画像に切り替わるまでの表示時間が比較的長く、画像とフレーズとの紐づけを比較的長い時間をかけて行うことができる。そして、同時再生の経過時間が進み、ユーザーにとって紐づけ作業が慣れてくるにつれて、画像が切り替わるテンポが速くなり、短時間でより多くの紐づけ作業を進めることができる。第２の特徴に係る発明によると、このテンポの変化によりユーザーの学習意欲が向上し、また、脳が刺激されてその発達が促され、学習効率が高まる。
【００１９】
第３の特徴に係る発明は、第１又は第２の特徴に係る発明であって、前記対応テーブル記憶部には、前記画像データ及び前記フレーズ音声データが属する分類情報が複数の組合せのそれぞれについて記憶され、前記第１再生指令部の指令によって実行される前記画像データ及び前記フレーズ音声データの同時再生は、前記分類情報に基づき、互いに同一又は類似する組合せを優先して順次実行可能である、教育支援装置を提供する。
【００２０】
第３の特徴に係る発明によれば、分類が同一の組合せを優先して順次同時再生を実行するため、ユーザーはフレーズを分類する法則にたどり着くことが容易となる。また、分類が類似する組み合わせを優先して順次同時再生を実行することで、ユーザーは類似する分類間を区別する法則に気づくことが可能となる。
【００２１】
第４の特徴に係る発明は、第３の特徴に係る発明であって、前記分類情報は、前記画像データ及び前記フレーズ音声データの組合せを含んで構成される学習コンテンツの上位概念に相当し、前記第１再生指令部の指令によって同時再生された一部又は全部の組合せに共通する前記上位概念が何であるかをユーザーに発問することを指令する発問指令部をさらに備える、教育支援装置を提供する。
【００２２】
従来より、フレーズを「動物」「家畜」等の上位概念によるカテゴリー毎に分けて学習範囲を選択する装置が提案されている。しかしながら、カテゴリー毎に分けて学習範囲を選択するものであっても、幼児をはじめとした低年齢期のユーザーがそのカテゴリーを定義する上位概念そのものを把握できるような工夫を施すことについては、なおいっそうの改良の余地がある。例えば、イヌという概念は「ある特定の秋田犬」にのみ対応するものではなく、「秋田犬」「マルチーズ」「シベリアンハスキー」といった共通の特徴を有するグループ全体を指すものである。従来の装置では、低年齢期のユーザーがこうした共通性を学び、イヌに該当しないネコやウサギとの違いを学べるような工夫が十分であるとはいえない。
【００２３】
第４の特徴に係る発明によれば、分類情報が学習コンテンツの上位概念に相当するため、ユーザーはフレーズそのものを学習しつつ、さらにそれを分類する上位概念をも学習することが可能となる。さらに発問指令部が上位概念について発問することを指令することで、幼児が上位概念を理解しているかどうか把握することが可能となる。
【００２４】
第５の特徴に係る発明は、第１から第４のいずれかの特徴に係る発明であって、前記選択操作を行うユーザーの年齢を入力することを指令する年齢入力指令部をさらに備え、前記対応テーブル記憶部には、前記画像データ及び前記フレーズ音声データの対象年齢情報が複数の組合せのそれぞれについて記憶され、前記第１再生指令部の指令によって実行される前記画像データ及び前記フレーズ音声データの同時再生は、前記年齢入力指令部の指令によって入力された年齢及び前記対象年齢情報に基づいて順次実行可能である、教育支援装置を提供する。
【００２５】
上述の通り、従来より、上位概念によるカテゴリーごとにフレーズを分けて学習範囲を選択する装置が提案されている。しかしながら、同じ家畜でも、イヌやネコ等の幼児の身近にいる家畜と、アルパカやラマなどのユーザーの身近にあることが少ない家畜とではユーザーにとっての馴染みやすさが異なり、習得に至るまでの学習時間にも差が生じる。そして、学習時間の差は、ユーザーの年齢によってより顕著に現れ、ユーザーの身近なものに対応するフレーズから学習させることができれば、より高い学習効果を期待できる。
【００２６】
第５の特徴に係る発明によれば、画像データ及びフレーズ音声データの同時再生を、年齢入力部に入力された年齢及び対象年齢情報に基づいて順次実行するため、ユーザーの年齢に合わせた学習コンテンツの提供が可能となる。これにより、ユーザー（特に、幼児）の学習効率が向上する。
【００２７】
第６の特徴に係る発明は、第１の特徴に係る発明のカテゴリー違いに相当する。
【発明の効果】
【００２８】
本発明によれば、画像とフレーズとを連続的に視聴する学習を行うことができ、発話能力が発達段階にある子供（特に幼児）においてもこの学習によるフレーズの習得状況を把握でき、子供の学習効率を高めることが可能な教育支援装置及び教育支援プログラムを提供できる。
【図面の簡単な説明】
【００２９】
【図１】図１は、本実施形態における教育支援システム１のハードウェア構成とソフトウェア構成を示すブロック図である。
【図２】図２は、本実施形態における教育支援システム１を使用した教育方法の流れを示すフローチャートである。
【図３】図３は、本実施形態における対応テーブル１２１の一例を示す図である。
【図４】図４は、画像データから生成される画像と、音声データから生成される音声とを再生するタイミングチャートの一例である。
【図５】図５は、本実施形態における選択結果テーブル１２２の一例を示す図である。
【図６】図６は、第１再生指令部１１１の指令によって実行される同時再生時の表示部２５及びスピーカー２６の例である。
【図７】図７は、第２再生指令部１１２の指令によって実行される同時再生時の表示部２５及びスピーカー２６の例である。
【図８】図８は、選択操作指令部１１３の指令によって促される選択操作においてユーザーが正答図を選んだ場合の表示部２５の画面例である。
【図９】図９は、選択操作指令部１１３の指令によって促される選択操作においてユーザーが誤答図を選んだ場合の表示部２５の画面例である。
【図１０】図１０は、変形例２に係る教育支援システム１において、使用言語の選択を促す表示部２５の画面例である。
【図１１】図１１は、変形例３に係る教育支援システム１において、数学分野の学習を行う表示部２５の画面及びスピーカー２６の例である。
【図１２】図１２は、変形例４に係る教育支援システム１において、文字の書き順学習を行う表示部２５の画面及びスピーカー２６の例である。
【図１３】図１３は、変形例５に係る教育支援システム１において、再生と選択のいずれを行うかの選択を促す表示部２５の画面例である。
【図１４】図１４は、変形例５に係る教育支援システム１において、選択結果を日別に一覧にして表示する表示部２５の画面の例である。
【図１５】図１５は、変形例５に係る教育支援システム１において、ユーザーが指定した複数のＩＤの範囲について、これら複数のＩＤそれぞれについての代表的な選択結果を表示する表示部２５の画面の例である。
【図１６】図１６は、変形例５に係る教育支援システム１において、ユーザーが指定した単一のＩＤについて、その単一のＩＤでの選択結果を表示する表示部２５の画面の例である。
【発明を実施するための形態】
【００３０】
以下、本発明を実施するための好適な形態の一例について図を参照しながら説明する。なお、これはあくまでも一例であって、本発明の技術的範囲はこれに限られるものではない。
【００３１】
＜教育支援システム１＞
図１は、本実施形態における教育支援システム１のハードウェア構成とソフトウェア構成を概略的に示すブロック図である。
【００３２】
教育支援システム１は、教育支援システム１を運用するためにデータ管理やデータ処理、画像データと音声データの配信等を行う教育支援装置としてのサーバ１０と、ユーザーによって使用されるユーザー端末２０とを含んで構成される。
【００３３】
以下では、サーバ１０とユーザー端末２０とを別体とし、サーバ１０とユーザー端末２０が通信を行うことで学習を行えるようにしたシステム例として説明するが、これに限ったものではない。サーバ１０が備える機能（プログラム）をユーザー端末２０にインストールし、ユーザー端末２０においてアプリケーションを介して使用できる装置として構築することもできる。このインストールは、ＩＣカード、ＳＤカード、ＤＶＤ等の記憶媒体を用いて提供されたプログラムによって行われる態様であっても良く、また、インターネット等の通信路を介して提供されたプログラムによって行われる態様であっても良く、サーバ１０が備える機能を予めインストールしたユーザー端末２０が提供される態様であっても良い。また、サーバ１０が備える機能の一部を前述の手段その他によりユーザー端末２０にインストールして、その機能を、ユーザー端末２０においてサーバ１０との通信を行うことなく使用できるよう構築しても良い。
【００３４】
〔サーバ１０〕
サーバ１０は、サーバ１０の動作を制御する制御部１１と、制御部１１のマイクロコンピューターで実行される制御プログラム等や、ユーザー端末２０に配信する配信データが予め格納されるとともに、ユーザーによる操作情報を記憶する記憶部１２と、ユーザー端末２０と通信を行う通信部１３とを備える。配信データには、画像データや、該画像データによる再生画像を説明するフレーズ音声データ等が含まれる。
【００３５】
制御部１１は、ＣＰＵ（Ｃｅｎｔｒａｌ  Ｐｒｏｃｅｓｓｉｎｇ  Ｕｎｉｔ）、ＲＡＭ（Ｒａｎｄｏｍ  Ａｃｃｅｓｓ  Ｍｅｍｏｒｙ）、ＲＯＭ（Ｒｅａｄ  Ｏｎｌｙ  Ｍｅｍｏｒｙ）等を備える。
【００３６】
記憶部１２は、データやファイルが記憶される装置であって、ハードディスクや半導体メモリ、記録媒体、メモリカード等による、データのストレージ部を有する。記憶部１２には、制御部１１のマイクロコンピューターで実行される制御プログラム等が記憶されている。また、記憶部１２には、上記画像データと上記フレーズ音声データとが紐づけられた組合せを複数有する対応テーブル１２１が記憶されている。加えて、記憶部１２は、ユーザー端末２０から受信したユーザーの入力情報をセット可能に構成されている。
【００３７】
通信部１３は、ユーザー端末２０その他の機器と通信可能にするためのデバイス、例えばイーサネット（登録商標）規格に対応したネットワークカードを有する。
【００３８】
制御部１１は、所定のプログラムを読み込み、必要に応じて記憶部１２及び／又は通信部１３と協働することで、教育支援システム１におけるソフトウェア構成の要素である第１再生指令部１１１、第２再生指令部１１２、選択操作指令部１１３、繰り返し部１１４、発問指令部１１５及び年齢入力指令部１１６を実現する。
【００３９】
〔ユーザー端末２０〕
ユーザー端末２０は、ユーザー端末２０の動作を制御する制御部２１と、制御部２１のマイクロコンピューターで実行される制御プログラム等が記憶される記憶部２２と、サーバ１０その他の機器と通信を行う通信部２３と、ユーザーからの情報の入力を受け付ける入力部２４と、サーバ１０から配信された画像データを用いて制御部２１が生成した画像を出力可能な表示部２５と、サーバ１０から配信されたフレーズ音声データを用いて制御部２１が生成した音声を出力可能なスピーカー２６とを備える。
【００４０】
ユーザーの対象年齢は特に限定されないが、学習効率を考えると、言語能力が発達途上にある０才〜１２才の乳児、幼児、児童であることが好ましい。中でも、筆記能力が発達段階にあり、習得状況をプリントのみで把握することが困難であっても、プリントでの確認テストを行うことなく習得状況を把握できることから、ユーザーの対象年齢は、１才〜６才の未就学児童（乳児、幼児）であることがより好ましい。
【００４１】
制御部２１、記憶部２２、通信部２３のハードウェア構成は、それぞれ制御部１１、記憶部１２、通信部１３のハードウェア構成と同様である。
【００４２】
入力部２４の種類は、特に限定されない。入力部２４として、例えば、キーボード、マウス、タッチパネル等が挙げられる。
【００４３】
表示部２５の種類は、特に限定されない。表示部２５として、例えば、モニタ、タッチパネル等が挙げられる。
【００４４】
スピーカー２６の種類は、特に限定されない。また、ユーザー端末２０がスピーカーを備える構成だけでなく、ユーザー端末２０がスピーカーやヘッドホン等を外部機器として接続可能に構成された態様も可能である。
【００４５】
＜教育支援システム１を用いた教育の手順＞
図２は、教育支援システム１を用いた教育の手順を示すフローチャートの一例である。以下では、図２を参照しながら、教育支援システム１の好ましいソフトウェア構成についてより詳しく説明する。
【００４６】
〔ステップＳ１１：年齢入力指令の生成〕
まず、サーバ１０の制御部１１は、通信部１３を介してユーザー端末２０にユーザーからの年齢入力を実行させるための年齢入力指令を生成する。
【００４７】
〔ステップＳ１２：年齢入力指令の送信〕
続いて、通信部１３は、ステップＳ１１で生成されたユーザーからの年齢入力を実行させるための年齢入力指令をユーザー端末２０に送信する。
【００４８】
本実施形態に係る教育支援システム１によると、上記ステップＳ１１及びステップＳ１２に係る段階を経ることで、選択操作を行うユーザーの年齢を入力することを指令する年齢入力指令部１１６を実現できる。
【００４９】
〔ステップＳ１３：年齢入力〕
ユーザー端末２０の制御部２１は、通信部２３を介してサーバ１０からユーザーからの年齢入力を実行させるための年齢入力指令を受け取り、表示部２５にユーザーに年齢入力を促す画面を表示させる。これを見たユーザーが入力部２４を介して年齢を入力する。
【００５０】
〔ステップＳ１４：年齢情報の送信〕
通信部２３は、ステップＳ１３で入力された年齢情報をサーバ１０に送信する。当該年齢情報は、記憶部１２に設けられた所定の記憶領域にセット可能である。
【００５１】
〔ステップＳ１５：学習データセットの生成〕
続いて、制御部１１は、記憶部１２に記憶されている対応テーブル１２１を参照して、画像データとフレーズ音声データとの組を複数選択する。また、制御部１１は、選択された組のそれぞれについて音声再生時間を取得し、選択された組のそれぞれについて、インターバル時間を音声再生時間と略同一の時間となるよう算出し、ユーザー端末２０で再生するための学習データセットを生成する。
【００５２】
図３は、対応テーブル１２１の一例を示す図である。対応テーブル１２１には、画像データと、それに対応するフレーズ音声データ（以下、単に「音声データ」ともいう。）とが紐付けられたフレーズＩＤの組合せを複数有する。対応テーブル１２１に記憶される画像データの形式としては、ＪＰＥＧ形式やＧＩＦ形式、ＰＮＧ形式など、周知の形式のものが使用される。対応テーブル１２１に記憶される音声データの形式としては、ＭＰ３形式やＷＡＶＥ形式、ＦＬＡＣ形式など、周知の形式のものが使用される。
【００５３】
制御部１１は、学習データセットを生成するにあたり、まず第１のフレーズ音声データと画像データの組を配置し、算出したインターバル期間を配置し、インターバル期間の後に第２のフレーズ音声データと画像データの組を配置する。このように、制御部１１は、画像データと音声データの組と対応するインターバル期間とを交互に配置する。また、学習データセットは、ユーザー端末２０にこの学習データセットに含まれる画像データとフレーズ音声データとの同時再生を指令する同時再生指令を含む。
【００５４】
このようにして生成された学習データセットにより、ユーザー端末２０は、学習データセットに含まれる画像データと画像データに紐づけられたフレーズ音声データとの組を、学習データセットに含まれるインターバル期間をおいて、順次同時再生できる。
【００５５】
ところで、対応テーブル１２１のフレーズＩＤは、音声データの再生時間と紐づけられている。
【００５６】
ここで、図４は、画像データから生成される画像及び音声データから生成される音声を再生するタイミングチャートの一例である。図４の横軸は、再生開始から経過する時間を示し、横軸の上は、画像の再生の状態を示し、横軸の下は、音声の再生の状態を示す。
【００５７】
対応テーブル１２１のフレーズＩＤが音声データの再生時間と紐づけられていることから、図４に示すように、画像データの再生時間を、フレーズ音声データにおけるフレーズの読み上げ時間と略同一の時間に設定することが可能となる。そのため、ユーザーは同時再生された画像データと音声データとを互いに関連するものとして学習できることに加え、最小限の時間でできるだけ多くの画像及びフレーズ音声の関連づけを、フレーズ音声の再生速度を上げることなく、自然な発話スピードで実行することが可能である。
【００５８】
また、必須の態様ではないが、フレーズＩＤは、画像データ及び音声データが属する１つ又は複数の分類情報とも紐づけられていることが好ましい。これにより、分類情報が同一の組合せを優先して順次同時再生を実行することが可能となり、ユーザーは、フレーズを分類する法則にたどり着くことが容易となる。また、分類が類似する組み合わせを優先して順次同時再生を実行することで、ユーザーは類似する分類間を区別する法則に気づくことが可能となる。
【００５９】
また、必須ではないが、フレーズＩＤは、画像データに対応する音声データを複数有し、これら音声データのそれぞれについて音声データの再生時間と紐づけられていることが好ましい。これにより、読み上げ速度が異なる複数の音声データを利用することが可能となり、ユーザーは、学習の状況に応じて、自然な発話スピードより速く読み上げた音声や、遅く読み上げた音声を利用できる。自然な発話スピードより速く読み上げた音声を用いる学習では、短時間でより多くの紐づけ作業を行うことができる。自然な発話スピードより遅く読み上げた音声を用いる学習では、１つの紐づけ作業により多くの時間を使うことができる。
【００６０】
〔ステップＳ１６：学習データセット及び同時再生指令の送信〕
図２に戻る。続いて、通信部１３は、ステップＳ１５で生成された学習データセットをユーザー端末２０に送信する。
【００６１】
〔ステップＳ１８：学習データセットを再生〕
ステップＳ１６で学習データセットが送信されると、ユーザー端末２０の通信部２３がその学習データセットを受信する。ユーザー端末２０は、音声データを再生するアプリケーションと、画像データを再生するアプリケーションとを使用し、受信したデータセットに含まれる複数の画像とフレーズ音声との組を、このデータセットに含まれるインターバル期間をおいて、図４に示すタイミングで、順次同時再生する。これにより、ユーザーは、表示部２５に表示された画像と、スピーカー２６から再生されるフレーズ音声とにしたがって、学習を行うことができる。
【００６２】
ところで、必須の構成ではないが、再生順序に関し、図３に示したフレーズＩＤに紐づけられている再生時間の長い順にソートし、第１再生指令部１１１の指令によって実行される画像データ及びフレーズ音声データの同時再生を、対応テーブル１２１に記憶された同時再生の時間が長い順に実行することが好ましい。
【００６３】
同時再生の時間が長い順に同時再生を実行することで、同時再生の開始直後は、１つの画像が次の画像に切り替わるまでの表示時間が比較的長く、画像とフレーズとの紐づけを比較的長い時間をかけて行うことができる。そして、同時再生の経過時間が進み、ユーザーにとって紐づけ作業が慣れてくるにつれて、画像が切り替わるテンポが速くなり、短時間でより多くの紐づけ作業を進めることができる。本実施形態に記載の発明によると、このテンポの変化によりユーザーの学習意欲が向上し、また、脳が刺激されてその発達が促され、学習効率が高まる。
【００６４】
〔ステップＳ１９：所定期間まで繰り返し〕
図２に戻る。続いて、制御部１１は、所定の学習期間が過ぎたか判定する。ステップＳ１９で所定の学習期間を過ぎていないと判定された場合は、ステップＳ１５に戻り、再び入力された年齢に対応する画像データとフレーズ音声データとの組を複数選択し、以下、ステップＳ１６及びステップＳ１８の処理を実行し、再びステップＳ１９に至る。これを学習期間が終了するまで繰り返す。一方、ステップＳ１９において、学習期間が終了したと判定された場合は、ステップＳ２１に進む。
【００６５】
本実施形態に係る教育支援システム１によると、上記ステップＳ１５〜ステップＳ１９に係る段階を経ることで、画像データと該画像データに紐づけられたフレーズ音声データとの同時再生を、対応テーブル１２１が有する複数の組合せの一部又は全部について順次実行することを指令する第１再生指令部１１１を実現できる。
【００６６】
〔ステップＳ２１：選択肢データセットの生成〕
ステップＳ２１において、制御部１１は、記憶部１２に記憶されている対応テーブル１２１を参照して、画像データを複数選択する。また、制御部１１は、これら複数の画像データのいずれかと紐付けられた特定のフレーズ音声データを選択し、ユーザー端末２０で再生するための選択肢データセットを生成する。
【００６７】
選択肢データセットには、選択された複数の画像を表示するための画像データと、選択された特定のフレーズ音声を再生するための音声データと、特定のフレーズ音声データと紐づけられた画像データを識別するための情報と、ユーザー端末２０にこの選択肢データセットに含まれるこれら複数の画像データと特定のフレーズ音声データとの同時再生を実行させる、同時再生指令とが含まれる。
【００６８】
〔ステップＳ２２：選択肢データセットの送信〕
通信部１３が、ステップＳ２１で生成された選択肢データセットをユーザー端末２０に送信する。
【００６９】
本実施形態に係る教育支援システム１によると、上記ステップＳ２１〜ステップＳ２２に係る段階を経ることで、第１再生指令部１１１の指令によって再生された複数の画像データの中から任意に選択される複数の選択画像データとこれら複数の選択画像データのいずれかの選択画像データに紐づけられた特定のフレーズ音声データとの同時再生を実行することを指令する第２再生指令部１１２を実現できる。
【００７０】
〔ステップＳ２４：選択肢データセットの再生〕
ステップＳ２２で選択肢データセットが送信されると、通信部２３がその選択肢データセットを受信する。ユーザー端末２０は、音声データを再生するアプリケーションと、画像データを再生するアプリケーションとを使用し、選択肢データセットに含まれるフレーズ音声をスピーカー２６から再生する。そして、ユーザー端末２０は、この再生と同時に、フレーズ音声に対応する正答図の画像と、フレーズ音声に対応しない誤答図の画像とを含む画像を表示部２５に表示する。
【００７１】
本実施形態に係る教育支援システム１によると、上記ステップＳ２１〜ステップＳ２４に係る段階を経ることで、第１再生指令部１１１の指令によって再生された複数の前記画像データの中から任意に選択される複数の選択画像データとこれら複数の選択画像データのいずれかの選択画像データに紐づけられた特定のフレーズ音声データとの同時再生を実行することを指令する第２再生指令部１１２を実現できる。
【００７２】
〔ステップＳ２５：選択操作指令処理〕
図２に戻る。制御部１１は、記憶部１２と協働して選択操作指令部１１３を実行し、ユーザー端末２０に、ユーザーに表示された画像から１つを選択するよう促す動作を実行させる選択操作指令を生成する。
【００７３】
〔ステップＳ２６：選択操作指令の送信〕
通信部１３が、ステップＳ２５で生成された選択操作指令をユーザー端末２０に送信する。
【００７４】
〔ステップＳ２７：選択操作〕
ステップＳ２６で選択操作指令が送信されると、通信部２３がその選択操作指令を受信する。選択操作指令を受信すると、制御部２１は入力部２４と協働してユーザーに表示された複数の画像から１つを選択するよう促し、ユーザーが入力部２４を介していずれの画像を選択したかの情報を入力するまで待機する。
【００７５】
このユーザーによる選択操作は、ユーザーがタッチパネルを用いて選択する方式、ユーザーがマウスを用いて選択する方式、ユーザーがキーボードから入力する方式など、周知の方式によって行われる。
【００７６】
本実施形態に係る教育支援システム１によると、上記ステップＳ２５〜ステップＳ２７に係る段階を経ることで、第２再生指令部１１２の指令による同時再生が行われている間、第２再生指令部１１２の指令によって再生される複数の選択画像データ（正解画像データと不正解画像データとの両方）のうち、これら複数の選択画像データと共に再生されている特定のフレーズ音声データに紐づけられた選択画像データ（正解画像データ）がどれであるか、ユーザーへの選択操作を促すことを指令する選択操作指令部１１３を実現できる。
【００７７】
〔ステップＳ２８：正解の判定〕
ユーザーが特定のフレーズ音声と紐付けられた正答図の画像を選択する入力を行うと、制御部２１は、ステップＳ２９を実行する。ユーザーが特定のフレーズ音声と紐付けられていない誤答図の画像を選択する入力を行うと、制御部２１は、ステップＳ３０を実行する。
【００７８】
〔ステップＳ２９：正解表示〕
ユーザーが特定のフレーズ音声と紐付けられた正答図の画像を選択する入力を行うと、制御部２１は、ユーザーの選択が正解であることを示す画像処理を行い、表示部２５に表示する。
【００７９】
〔ステップＳ３０：不正解表示〕
ユーザーが特定のフレーズ音声と紐付けられていない誤答図の画像を選択する入力を行うと、制御部２１は、ユーザーの選択が不正解であることを示す画像処理を行い、表示部２５に表示する。
【００８０】
〔ステップＳ３１：選択完了〕
その後、制御部２１はユーザーの選択が完了したことをサーバ１０に通知する選択完了通知を生成する。必須の態様ではないが、選択完了通知にはユーザーが選択した画像を示す情報が含まれていることが好ましい。選択完了通知にユーザーが選択した画像を示す情報が含まれていることにより、サーバ１０がユーザーの学習の状況を記憶部１２に記憶できる。これにより、記憶された学習の状況をユーザーに対して表示することができる。また、記憶された学習の状況は、学習データセットの生成や選択肢データセットの生成に利用できる。必須の態様ではないが、選択完了通知には表示からユーザーの選択までに要した時間を示す情報が含まれていることが好ましい。選択までに要した時間が含まれていることにより、この時間の長短を記憶部１２に記憶できる。記憶された時間は、ユーザーがその選択を苦手としているか得意としているかの判断や、学習データセットの生成や選択肢データセットの生成等に利用できる。
【００８１】
〔ステップＳ３２：選択完了通知の送信〕
通信部２３が、ステップＳ３１で生成された選択完了通知をサーバ１０に送信する。
【００８２】
〔ステップＳ３３：所定期間まで繰り返し〕
ステップＳ３２で選択完了通知が送信されると、通信部１３がその選択完了通知を受信する。選択完了通知を受信すると、制御部１１は、記憶部１２と協働して繰り返し部１１４を実行し、所定の確認期間が過ぎたか判定する。ステップＳ３３で所定の選択期間を過ぎていないと判定された場合は、ステップＳ２１に戻る。サーバ１０は、ステップＳ２１の処理を実行して再び選択肢データを生成し、以下、教育支援システム１は、ステップＳ２２、ステップＳ２４、ステップＳ２５、ステップＳ２６、ステップＳ２７、ステップＳ２８、ステップＳ２９、ステップＳ３０、ステップＳ３１及びステップＳ３２の処理を実行し、再びステップＳ３３に至る。これを確認期間が終了するまで繰り返す。一方、ステップＳ３３において、確認期間が終了したと判定された場合は、教育支援システム１は、教育を終了する。
【００８３】
必須の構成ではないが、繰り返し部１１４は、選択完了通知に含まれるユーザーが選択した画像を示す情報及び／又は選択までに要した時間を、選択結果テーブル１２２に記憶できる。図５は選択結果テーブル１２２の一例である。選択結果テーブル１２２には、選択操作に使用されたフレーズ音声と画像との組み合わせを示すＩＤ、使用されたフレーズ音声のＩＤ、使用された各画像のＩＤに加え、選択された画像のＩＤと選択操作が行われた日時と選択までに要した時間との組み合わせが複数記憶される。選択された画像を示す情報を選択結果テーブル１２２に記憶することにより、記憶された学習の状況を表示することや、記憶された学習の状況を学習データセットの生成や選択肢データセットの生成に利用することなどが可能となる。
【００８４】
本実施形態に係る教育支援システム１によると、上記ステップＳ３３に係る段階を経ることで、第２再生指令部１１２による同時再生の指令と選択操作指令部１１３による選択操作を促すことの指令とを繰り返し実行する繰り返し部１１４を実現できる。
【００８５】
このようにすることで、ユーザーは、入力された年齢に対応する画像とフレーズとをユーザー端末２０で連続的に視聴する学習を行うことができ、発話能力が発達段階にある子供（特に幼児）においてもこの学習によるフレーズの習得状況を容易かつ正確に把握できる。
【００８６】
＜教育支援システム１の使用例＞
続いて、図６〜図９を参照しながら、教育支援システム１の使用例を説明する。
【００８７】
本実施形態によると、サーバ１０の制御部１１は、第１再生指令部１１１として機能し、サーバ１０と電気的に接続されたユーザー端末２０に対し、対応テーブル１２１が有する複数のフレーズＩＤの一部又は全部について、画像データと該画像データに紐づけられたフレーズ音声データとの同時再生を順次実行させることをユーザー端末２０に指令する。ここでの画像データの再生時間は、フレーズ音声データにおけるフレーズの読み上げ時間と略同一の時間に設定されている。
【００８８】
図６は、図３に示す対応テーブル１２１におけるフレーズＩＤ「４」に相当する画像データ及びフレーズ音声データを同時再生するときの様子を示す図である。図６において、表示部２５は、フレーズＩＤ「４」の画像データ［ｉｍｇ４］から生成される「三毛猫」に対応する画像を表示する。この表示と同時に、スピーカー２６は、フレーズＩＤ「４」のフレーズ音声データ１から生成される「みけねこ」というフレーズ音声を再生する。このような同時再生が、所定のインターバル期間をおいてテンポ良く繰り返される。
【００８９】
そして、サーバ１０の制御部１１は、第２再生指令部１１２として機能し、上記ユーザー端末２０に対し、第１再生部１１１によって再生された複数の画像データの中から任意に選択される複数の選択画像データ（正答図及び誤答図の両方を含む画像データ）とこれら複数の選択画像データのいずれかの選択画像データ（正答図の画像データ）に紐づけられた特定のフレーズ音声データ（正答図の画像データを説明する正答フレーズ音声データ）との同時再生を実行させることをユーザー端末２０に指令する。
【００９０】
図７は、図３に示す対応テーブル１２１におけるフレーズＩＤ「４」に相当する画像データとフレーズ音声データと、フレーズＩＤ「５」に相当する画像データとを同時再生するときの様子を示す図である。この例はユーザーが「三毛猫」というフレーズを習得したかどうかを確認するためのものである。表示部２５にフレーズＩＤ「４」の画像データから生成される「三毛猫」を示す画像とフレーズＩＤ「５」の画像データから生成される「リクガメ」を示す画像とが並べて表示され、スピーカー２６がフレーズＩＤ「４」の音声データから再生される三毛猫の読みである「みけねこ」というフレーズを発声している。図７では特定のフレーズ音声に対応する正答図の画像と、特定のフレーズ音声に対応しない誤答図の画像とをそれぞれ１つずつ含む画面が表示されているが、特定のフレーズ音声に対応する１つの正答図の画像と、相異なる複数の特定のフレーズ音声に対応しない誤答図の画像とを含む画面が表示されるよう構成することもできる。複数の相異なる誤答図の画像を表示することにより、学習の状況をより正確に判断できる。
【００９１】
そして、サーバ１０の制御部１１は、選択操作指令部１１３として機能し、ユーザー端末２０での同時再生が行われている間、表示部２５で再生される複数の選択画像データのうち、これら複数の選択画像データと共にスピーカー２６で再生されている特定のフレーズ音声データ（正答フレーズ音声データ）に紐づけられた選択画像データがどれであるか、ユーザーに選択操作を促すことをユーザー端末２０に指令する。
【００９２】
図８は、図７を用いて示した同時再生ののちに、ユーザーがフレーズＩＤ「４」に相当する画像データを選択したことに応じてフレーズＩＤ「４」に相当する画像データ上に丸印を表示する画像処理を行ったときの様子を示す図である。この例はユーザーが「三毛猫」というフレーズを習得したかどうかの確認においてフレーズを習得したユーザーが再生された音声データに紐づけられた画像データを選択し、ユーザーが音声データと紐づけられた画像データを選択したことに応じて、ユーザーが音声データと紐づけられた画像データを選択したことをユーザーに通知する画像処理を行うものである。図８ではユーザーに選択の結果を伝えるために、正解であることを示す丸印を表示する画像処理を行っているが、音声データの再生を行う、または、画像処理と音声データの再生との両方を行うよう構成することもできる。
【００９３】
図９は、図７を用いて示した同時再生ののちに、ユーザーがフレーズＩＤ「５」に相当する画像データを選択したことに応じてフレーズＩＤ「５」に相当する画像データ上にばつ印を表示する画像処理を行ったときの様子を示す図である。この例はユーザーが「三毛猫」というフレーズを習得したかどうかの確認においてフレーズを習得したユーザーが再生された音声データに紐づけられていない画像データを選択し、ユーザーが音声データと紐づけられていない画像データを選択したことに応じて、ユーザーが音声データと紐づけられていない画像データを選択したことをユーザーに通知する画像処理を行うものである。図９ではユーザーに選択の結果を伝えるために、不正解であることを示すばつ印を表示する画像処理を行っているが、音声データの再生を行う、または、画像処理と音声データの再生との両方を行うよう構成することもできる。
【００９４】
そして、サーバ１０の制御部１１は、繰り返し部１１４として機能し、第２再生指令部１１２による同時再生の指令と、選択操作指令部１１３による選択操作を促す指令とを繰り返し実行する。
【００９５】
本実施形態に記載の教育支援システム１によると、教育支援システム１が第１再生指令部１１１の機能を有することにより、ユーザー端末２０において、画像データと画像データに紐づけられたフレーズ音声データとを順次同時再生することを指令し、それによりユーザーは学習を行うことができる。特に、画像データの再生時間がフレーズ音声データにおけるフレーズの読み上げ時間と略同一の時間に設定されているため、ユーザーは、同時再生された画像データと音声データとを互いに関連するものとして学習できることに加え、最小限の時間でできるだけ多くの画像及びフレーズ音声の関連づけを、フレーズ音声の再生速度を上げることなく、自然な発話スピードで実行することが可能である。
【００９６】
さらに、選択操作指令部１１３がフレーズ音声データに紐づけられた選択画像データがどれであるかユーザーに選択操作を促すことを指令する。そのため、発話能力や筆記能力が発達段階にある子供（特に幼児）であっても、プリントを用いた確認テスト等を行うことなく、あるいは確認テスト等を行う前段階として子供のフレーズ習得状況を容易かつ正確に把握することが可能である。そして、結果として、（１）既に十分に習得してこれ以上の学習効果が望めないフレーズを繰り返し再生し続ける事態や、（２）子供が学習範囲のフレーズを十分に習得しないうちに学習内容を発展させようとして新しいフレーズを数多く加えて再生してしまうといった事態を回避できる。これら（１）と（２）のような事態を回避することにより、子供の学習効率を高められる。
【００９７】
また、プリント学習に先立って順次同時再生による学習を行い、さらに、子供のフレーズ習得状況を把握することにより、ユーザーは適切なプリントを選択して子供に学習を行わせることができる。したがって、その後のプリント学習の効果が上がり、プリントを効率的に処理することができる。
【００９８】
よって、本実施形態に記載の教育支援システム１によると、画像とフレーズとを連続的に視聴する学習を行うことができ、発話能力が発達段階にある子供（特に幼児）においてもこの学習によるフレーズの習得状況を把握でき、子供の学習効率を高めることが可能な教育支援装置を提供できる。
【００９９】
また、本実施形態に記載の教育支援システム１によると、記憶部１２に設けられた対応テーブル１２１には、第１再生指令部１１１の機能によって指令され実現される表示部２５及びスピーカー２６での同時再生の時間が複数の組合せのそれぞれについて記憶され、第１再生指令部１１１の指令による画像データ及びフレーズ音声データの同時再生は、対応テーブル１２１のフレーズＩＤに紐づけられた同時再生の時間が長い順に実行可能である。
【０１００】
同時再生の時間が長い順に同時再生を実行することで、同時再生の開始直後は、１つの画像が次の画像に切り替わるまでの表示時間が比較的長く、画像とフレーズとの紐づけを比較的長い時間をかけて行うことができる。そして、同時再生の経過時間が進み、ユーザーにとって紐づけ作業が慣れてくるにつれて、画像が切り替わるテンポが速くなり、短時間でより多くの紐づけ作業を進めることができる。本実施形態に記載の発明によると、このテンポの変化によりユーザーの学習意欲が向上し、また、脳が刺激されてその発達が促され、学習効率が高まる。
【０１０１】
また、本実施形態に記載の教育支援システム１において、対応テーブル１２１には、画像データ及びフレーズ音声データが属する分類情報が複数のフレーズＩＤのそれぞれについて設けられており、第１再生指令部１１１の機能によって指令され実現される表示部２５及びスピーカー２６での同時再生は、その分類情報に基づき、互いに同一又は類似する組合せを優先して順次実行可能である。
【０１０２】
本実施形態に記載の教育支援システム１によれば、分類が同一の組合せを優先して順次同時再生を実行するため、ユーザーはフレーズを分類する法則にたどり着くことが容易となる。また、分類が類似する組み合わせを優先して順次同時再生を実行することで、ユーザーは類似する分類間を区別する法則に気づくことが可能となる。
【０１０３】
また、本実施形態に記載の教育支援システム１は、選択操作を行うユーザーの年齢を入力することを指令する年齢入力指令部１１６を備える。対応テーブル１２１では、画像データ及びフレーズ音声データの対象年齢情報が複数のフレーズＩＤのそれぞれについて記憶される。そして、第１再生指令部１１１の機能によって指令され実現される表示部２５及びスピーカー２６における画像データ及びフレーズ音声データの同時再生は、年齢入力指令部１１６の指令によって入力された年齢と、対応テーブル１２１にセットされている対象年齢情報とに基づいて順次実行可能である。
【０１０４】
上述の通り、従来より、上位概念によるカテゴリーごとにフレーズを分けて学習範囲を選択する装置が提案されている。しかしながら、同じ家畜でも、イヌやネコ等の幼児の身近にいる家畜と、アルパカやラマなどのユーザーの身近にあることが少ない家畜とではユーザーにとっての馴染みやすさが異なり、習得に至るまでの学習時間にも差が生じる。そして、学習時間の差は、ユーザーの年齢によってより顕著に現れ、ユーザーの身近なものに対応するフレーズから学習させることができれば、より高い学習効果を期待できる。
【０１０５】
本実施形態に記載の教育支援システム１によれば、画像データ及びフレーズ音声データの同時再生を、年齢入力指令部１１６の指令により入力された年齢及び対象年齢情報に基づいて順次実行するため、ユーザーの年齢に合わせた学習コンテンツの提供が可能となる。これにより、ユーザー（特に、幼児）の学習効率が向上する。
【０１０６】
＜教育プログラムとして提供可能であること＞
これまで、本発明を教育支援システム１として提供することについて説明したが、これに限るものではない。本実施形態に記載の発明は、コンピュータに実行させることの可能な教育支援プログラムとしても提供可能である。当該教育支援プログラムは、コンピュータに、画像データと該画像データによる再生画像を説明するフレーズ音声データとが紐づけられた組合せを複数有する対応テーブルが予め記憶された対応テーブル記憶部を参照し、前記画像データと該画像データに紐づけられたフレーズ音声データとの同時再生を、前記対応テーブルが有する複数の組合せの一部又は全部について順次実行させる第１再生ステップと、前記第１再生ステップによる同時再生が終了したことに応じて、前記第１再生ステップにおいて再生された複数の前記画像データの中から任意に選択される複数の選択画像データとこれら複数の選択画像データのいずれかの選択画像データに紐づけられた特定のフレーズ音声データとの同時再生を実行させる第２再生ステップと、前記第２再生ステップにおける同時再生が行われている間、前記第２再生ステップにおいて再生される複数の選択画像データのうち、これら複数の選択画像データと共に再生されている前記特定のフレーズ音声データに紐づけられた選択画像データがどれであるか、ユーザーに選択操作させる選択操作ステップと、前記第２再生ステップと前記選択操作ステップとを繰り返す繰返しステップとを実行させる。そして、前記第１再生ステップにおける前記画像データの再生時間が、前記フレーズ音声データにおけるフレーズの読み上げ時間と略同一の時間に設定されている。
【０１０７】
当該教育支援プログラムは、フレーズ音声データの再生時間に応じたインターバル期間をおいて前記同時再生が順次実行されることが好ましい。また、前記同時再生後にユーザーの入力を待機し、ユーザーの入力により、さらに前記同時再生を実行する手順を繰り返すこともまた好ましい。前記同時再生が順次実行されることにより、ユーザーは煩雑な操作を行うことなく、多くの紐付け作業を行うことができる。ユーザーの入力を待機することにより、ユーザーは再生された音声と画像との紐付け作業に十分な時間を費やすことができる。これにより、フレーズ一つ一つの学習における学習効率がさらに高まる。これらインターバル期間をおいて自動的に進められる順次実行と、ユーザーの入力による手動の順次実行とを選択可能であることにより、ユーザーは学習状況に応じてより柔軟に学習を行える。
【０１０８】
＜変形例＞
以下、本実施形態に記載の発明における種々の変形例を例示する。
【０１０９】
〔変形例１〕  発問指令部１１５の付加機能
本実施形態では、対応テーブル１２１のフレーズＩＤに紐づけられている分類情報は、画像データ及びフレーズ音声データの組合せを含んで構成される学習コンテンツの上位概念に相当する。そこで、発問指令部１１５は、第１再生指令部１１１の機能によって指令され表示部２５及びスピーカー２６にて同時再生された一部又は全部の組合せに共通する前記上位概念が何であるかをユーザーに発問することを指令する機能をさらに有してもよい。
【０１１０】
従来より、フレーズを「動物」「家畜」等の上位概念によるカテゴリー毎に分けて学習範囲を選択する装置が提案されている。しかしながら、カテゴリー毎に分けて学習範囲を選択するものであっても、幼児をはじめとした低年齢期のユーザーがそのカテゴリーを定義する上位概念そのものを把握できるような工夫を施すことについては、なおいっそうの改良の余地がある。例えば、イヌという概念は「ある特定の秋田犬」にのみ対応するものではなく、「秋田犬」「マルチーズ」「シベリアンハスキー」といった共通の特徴を有するグループ全体を指すものである。従来のシステムでは、低年齢期のユーザーがこうした共通性を学び、イヌに該当しないネコやウサギとの違いを学べるような工夫が十分であるとはいえない。
【０１１１】
変形例１に記載の教育支援システム１によれば、分類情報が学習コンテンツの上位概念に相当するため、ユーザーはフレーズそのものを学習しつつ、さらにそれを分類する上位概念をも学習することが可能となる。さらに発問部が上位概念について発問することで、幼児が上位概念を理解しているかどうか把握することが可能となる。
【０１１２】
〔変形例２〕  再生言語の選択
図６及び図７では日本語でフレーズを発声しているが、対応テーブル１２１に英語等の外国語により読み上げられたフレーズ音声データを記憶することにより、英語等を加えた複数の言語からフレーズの再生言語を選択できるよう構成することもできる。再生言語を選択できることにより、日本語だけでなく、英語等の外国語についても学習を進めることができ、また、複数の言語を学習することによって、子供の脳が刺激されてその発達が促され、学習効率が高まる。図１０は、フレーズの再生言語を選択する画面の一例である。ユーザーが入力部２４を介して「日本語学習」を選択すると、第１再生指令部１１１の指令による画像データと画像データに紐づけられた音声データの再生とにおいて、日本語によってフレーズが読み上げられる。ユーザーが入力部２４を介して「英語学習」を選択すると、第１再生指令部１１１の指令による画像データと画像データに紐づけられた音声データの再生とにおいて、英語によってフレーズが読み上げられる。また、フレーズの再生言語を選択することにより、第２再生指令部１１２の指令による学習内容の把握において、ユーザーに外国語によって読み上げられたフレーズ音声と対応する画像データを選択するよう促すこともできる。外国語によって読み上げられたフレーズ音声を用いる同時再生と選択操作により、外国語における子供のフレーズ習得状況を容易かつ正確に把握することが可能となる。
【０１１３】
〔変形例３〕  数学分野の学習
画像と音声を同時再生し、画像と音声との紐付け作業を行う学習において、四則演算等の数式の画像と数式を読み上げる音声とを紐付けて同時再生するよう構成することもできる。このように構成することで、ユーザーは、数式を構成する各要素とその読み方との対応とを紐付ける学習を行える。また、数式の画像と音声とを紐付ける学習を連続的に行うことにより、ユーザーは、計算規則を把握することが容易となる。さらに、数式を読み上げるフレーズ音声を用いる同時再生と選択操作により、子供の計算規則習得状況を容易かつ正確に把握することが可能となる。
【０１１４】
図１１は、この数式の画像と数式を読み上げる音声とを紐づけて同時再生する、数学分野の学習の例である。図１１のＡ）は、表示部２５に数式「３×３＝９」が表示され、同時にスピーカー２６から「三かける三は九」という音声が再生される様子を示している。また、図１１のＢ）は、表示部２５に数式「８＋３＝１１」が表示され、同時にスピーカー２６から「八たす三は十一」という音声が再生される様子を示している。このように数式の画像と数式を読み上げる音声との同時再生が順次実行されることで、ユーザーは数式の画像と音声とを紐付ける学習を連続的に行うことができる。
【０１１５】
〔変形例４〕  文字の書き順学習及び時計の学習
上記においては、１つの画像データに対して１つのフレーズ音声データが対応しており、この組を用いて画像と音声との紐付け作業を行う学習を行っていたが、対応テーブル１２１を、非静止画像データに対して順次再生される複数の音声データを紐付けられるよう構成することもできる。このように構成することで、例えば、文字の書き順の学習などを行うことができる。図１２は、この書き順学習を用いて、ひらがなの「あ」の書き順を学習する画面の一例である。この文字の書き順の学習は、１）まず白地の背景を表示し、２）一定のインターバル期間の後に、３）筆順１を書き加えたものを表示して同時に筆順「いち」を読み上げる音声を再生し、４）筆順が画数に達していなければ筆順を１増やして３のステップに戻り、画数に達していれば終了する、という繰り返しを実行することで行われる。この例では、上記のステップを繰り返してひらがな「あ」の筆順２までを表示したものに筆順３を書き加えると同時に、筆順３に対応した音声「さん」を再生している。必須の構成ではないが、筆順１を表示する前に、書き順を学習する文字を白抜き文字として表示することも可能である。ユーザーは、教育支援システム１を用いた同時再生の視聴による学習と選択操作による学習内容の把握に続けて、教育支援システム１を用いて学習した内容をプリントに筆記する学習を行うことが好ましいが、筆記能力が発達段階にある子供（特に幼児）がプリントに筆記することには困難が伴う。変形例４による書き順学習を行うことで子供が書き順を学ぶことができ、ユーザー（子供）は、本発明の教育支援システム１を用いた同時再生の視聴による学習と、選択操作による学習内容の把握とに続けて、学習内容をプリントに筆記する学習を行うことを容易に行える。
【０１１６】
また、このように構成することで、ユーザーは、時計の学習を行うこともできる。この時計の学習は、１）まず第１の時刻を示すアナログ時計の画像を表示し、表示した時刻を読み上げる音声を再生する、２）一定のインターバル期間の後に、３）第１の時刻から第２の時刻まで分針及び時針が進む様子を表示し、４）第２の時刻を示すアナログ時計の画像を表示し、表示した第２の時刻を読み上げる音声を再生する、という手順で行われる。このような手順により、ユーザーは、アナログ時計の表示と時刻との対応を学習できる。さらに、分針及び時針が進む様子を表示することで、ユーザーは、アナログ時計における分針と時針の関係についても学習できる。
【０１１７】
〔変形例５〕  達成度チェックに特化した学習
上記の例においては、図２に示すように、第１再生指令部１１１の指令による学習（例えば、日本語学習の段階）と、それに続く第２再生指令部１１２の指令及び選択操作指令部１１３の指令による学習内容の把握（例えば、達成度チェックの段階）との２段階で行ったが、第１再生指令部１１１の指令による学習を行うことなく、第２再生指令部１１２の指令及び選択操作指令部１１３の指令による学習内容の把握を集中して行うよう構成することもできる。また、選択結果テーブル１２２に記憶されたユーザーの選択結果を表示することを指令する、選択結果表示指令部１１７を備えることもできる。
【０１１８】
図１３は、表示部２５に表示された、第１再生指令部１１１の指令による学習と、第２再生指令部１１２の指令及び選択操作指令部１１３の指令による学習の把握とのいずれから実行するかを選択する画面の一例である。ユーザーが入力部２４を介して「学習スタート」を選択すると、第１再生指令部１１１の指令による学習が実行される。ユーザーが入力部２４を介して「選択スタート」を選択すると、第２再生指令部１１２の指令及び選択操作指令部１１３の指令による学習内容の確認が実行される。
【０１１９】
図１４は、選択結果表示指令部１１７の指令により表示部２５に表示された、選択結果の日別一覧の一例である。ユーザーが指定した年月について、その月に含まれる日の一覧が表示される。そして、各日について、その日に該当する選択結果が選択結果テーブル１２２に登録されているかどうかが、日付と対応付けられて表示される。この例では、１日から５日までの各日、７日から１５日までの各日について、該当する選択結果があることを示す花の意匠が表示されている。また、６日及び１６日について、該当する選択結果がないことを示すバツ印が表示されている。このように構成することで、ユーザーは各日の学習状況を把握することが容易となる。また、ユーザー（特に幼児）が継続的な学習を行う習慣を身につけているかどうかの把握も、容易となる。
【０１２０】
図１５は、選択結果表示指令部１１７の指令により表示部２５に表示された、複数の設問（選択操作に使用されたフレーズ音声と画像との組み合わせ）の選択結果を一覧する表示の一例である。ユーザーが指定した複数の設問について、設問それぞれについての代表的な選択結果と、音声に対応付けられた画像を選んだかどうか、すなわち、選択の正否の情報と、その選択に要した時間とが一覧として表示される。代表的な選択結果の選び方として、例えば、設問ごとに選択結果テーブル１２２に記憶された最新の選択結果を採用する選び方、設問ごとに最も古い選択結果を採用する選び方などがある。この例では、「問１」で示されるＩＤ１の設問について、ユーザーが２０秒間で音声と対応付けられた「ア」を選択したこと、「問２」で示されるＩＤ２の設問について、ユーザーが１０秒間で音声と対応付けられていない「６」を選択したこと等が示されている。複数の設問を一覧する選択結果が表示されることにより、ユーザーは、選択の正否及び選択に要した時間から、音声と画像との対応付けの学習状況や得手不得手を、容易に把握できる。
【０１２１】
図１６は、選択結果表示指令部１１７の指令により表示部２５に表示された、個別の設問（選択操作に使用されたフレーズ音声と画像との組み合わせ）の選択結果の詳細表示の一例である。ユーザーが指定した特定の設問について、選択を行った日時と、音声に対応付けられた画像を選んだかどうか、すなわち、選択の正否の情報と、選択に要した時間とが、一覧として表示される。この例では、「問１」で示されるＩＤ１の設問について、２０１６年１１月２９日に行われた選択、２０１６年１１月３０日に行われた選択を含む４回の選択が行われたことが下段の表に示されている。「１回目」の行では、ユーザーが、２０１６年１１月２９日に５３秒間で選択を行い、音声に対応付けられていない誤った選択を行ったことが表示されている。詳細表示が行われることにより、ユーザーは、学習を進めるにつれて選択に要する時間が短縮されているかどうかや、音声に対応付けられた画像を正しく選択できるようになっているかどうかの学習履歴を、容易に把握できる。
【０１２２】
教育支援システム１が第１再生指令部１１１の指令による学習に先立って第２再生指令部１１２と選択操作指令部１１３を実行することで、ユーザーの学習内容の確認を集中して行うことができる。さらに、選択結果表示指令部１１７が選択操作の結果を表示することで、ユーザーは、学習内容を容易かつより詳細に把握できる。これにより、ユーザーは、ユーザーが既に十分に習得した学習内容を学習することを避けることができる。これにより、同じ年齢でも発達段階や学習段階が異なるそれぞれの子供に適した学習を行える。
【０１２３】
〔変形例６〕  フレーズの再生順序
フレーズの再生順序を指定し、連続再生を、再生時間の長い順だけでなく、分類情報内でランダムな順番で再生するよう構成することもできる。分類情報内でランダムな順番で再生することにより、直前までに再生されたフレーズをヒントとしない、１つのフレーズ音声と１つの画像との関連付けに適した学習が行える。
【０１２４】
連続再生を、分類情報によらないランダムな順番で再生するよう構成することもできる。分類情報によらないランダムな順番で再生することにより、共通の分類情報を持たないフレーズが連続して再生される。これにより、ユーザーは、上位概念によるカテゴリーを越えた学習を行うことができる。また、直前までに表示されたフレーズの分類情報をヒントとしない、１つのフレーズ音声と１つの画像との関連付けに適した学習が行える。
【０１２５】
連続再生を、再生時間の長短によらないランダムな順番で再生することもできる。再生時間の長短によらないランダムな順番で再生することにより、連続再生のテンポが複雑に変化する。この変化によりユーザーの学習意欲が向上し、また、脳が刺激されてその発達が促され、学習効率が高まる。さらに、再生順序が固定されていないことによって、直前までに再生されたフレーズをヒントとしない、１つのフレーズ音声と１つの画像との関連付けに適した学習が行える。
【０１２６】
以上のように構成することで、画像とフレーズとを連続的に視聴する学習を行うことができ、発話能力が発達段階にある子供（特に幼児）においてもこの学習によるフレーズの習得状況を把握でき、子供の学習効率を高めることが可能な教育支援システム１を提供できる。
【０１２７】
以上、本発明の実施形態について説明したが、本発明は上述したこれらの実施形態に限るものではない。また、本発明の実施形態に記載された効果は、本発明から生じる最も好適な効果を列挙したに過ぎず、本発明による効果は、本発明の実施形態に記載されたものに限定されるものではない。
【０１２８】
また、上記した実施の形態は本発明を分かりやすく説明するために詳細に説明したものであり、必ずしも説明した全ての構成を備えるものに限定されるものではない。また、ある実施の形態の構成の一部を他の実施の形態の構成に置き換えることが可能であり、また、ある実施の形態の構成に他の実施の形態の構成を加えることも可能である。
【０１２９】
また、上記の各構成、機能、処理部は、それらの一部又は全部を、ハードウェア（例えば、集積回路）で実現してもよい。また、上記の各構成、機能、処理部は、プロセッサがそれぞれの機能を実現するプログラムを解釈し、実行することによりソフトウェアで実現してもよい。各機能を実現するプログラム、テーブル、ファイル等の情報は、メモリや、ハードディスク、ＳＳＤ（Ｓｏｌｉｄ  Ｓｔａｔｅ  Ｄｒｉｖｅ）等の記録装置、または、ＩＣカード、ＳＤカード、ＤＶＤ等の記録媒体に置くことができる。
【符号の説明】
【０１３０】
１      教育支援システム
１０    サーバ
１１    制御部
１１１  第１再生指令部
１１２  第２再生指令部
１１３  選択操作指令部
１１４  繰り返し部
１１５  発問指令部
１１６  年齢入力指令部
１１７  選択結果表示指令部
１２    記憶部
１２１  対応テーブル
１２２  選択結果テーブル
１３    通信部
２０    ユーザー端末
２１    制御部
２２    記憶部
２３    通信部
２４    入力部
２５    表示部
２６    スピーカー
【要約】
【課題】画像とフレーズとを連続的に視聴する学習を行うことができ発話能力が発達段階にある子供においてもフレーズの習得状況を把握可能な教育支援装置を提供する。
【解決手段】本発明の教育支援装置に係るサーバ１０は、画像データと画像データによる再生画像を説明するフレーズ音声データとが紐づけられたフレーズＩＤを複数有する対応テーブル１２１が予め記憶された記憶部１２と、データの同時再生をフレーズＩＤについて順次実行する第１再生指令部１１１と、複数の選択画像データとこれら画像データのいずれかに紐づけられた特定のフレーズ音声データとの同時再生を実行する第２再生指令部１１２と、特定のフレーズ音声データに紐づけられた選択画像データがどれであるか選択操作を促す選択操作指令部２１１と、第２再生指令部１１２による同時再生と選択操作指令部２１１による選択操作を促すこととを繰り返し実行する繰り返し部１１３とを備える。
【選択図】図１【図１】
0006723625.tif 000002
【図２】
0006723625.tif 000003
【図３】
0006723625.tif 000004
【図４】
0006723625.tif 000005
【図５】
0006723625.tif 000006
【図６】
0006723625.tif 000007
【図７】
0006723625.tif 000008
【図８】
0006723625.tif 000009
【図９】
0006723625.tif 000010
【図１０】
0006723625.tif 000011
【図１１】
0006723625.tif 000012
【図１２】
0006723625.tif 000013
【図１３】
0006723625.tif 000014
【図１４】
0006723625.tif 000015
【図１５】
0006723625.tif 000016
【図１６】
0006723625.tif 000017