(57)【特許請求の範囲】
【請求項１】
発音教材蓄積手段に予め蓄積された外国語の所定の発音に対応した、当該発音の音声データと、当該発音発声時に必要な鼻腔、口腔、歯、舌及び顎の発声動作を、口内部分中央垂直片半断面模式図上における所定の挙動変化とともに所要の息の流れを順次表示することで、唇の使い方、歯の位置・開き方、顎の使い方、舌の位置、息の流れを示すアニメーション動画像と，前記発音の際の口もとの挙動変化の様子を示す口もと正面動画像と，口もと斜視動画像との各データを有する動画像データと、を含む発音教材を読込み再生することで、前記外国語の前記発音の短期集中習得を最適支援するための、任意に設置された学習者端末に適用される発音学習支援方法であって、
当該学習者端末は、
予め前記発音教材の前記音声データと前記動画像データのいずれも男女それぞれの所定の各年齢層毎にサンプリングして前記発音教材蓄積手段に蓄積して置き、
まず、前記発音教材蓄積手段に、前記学習者端末を利用する学習者により任意の性別及び年齢層を選択設定して該当する前記発音教材を要求し、
次いで、当該発音教材の要求に基づき前記発音教材蓄積手段から当該発音教材を抽出し、
引続き、抽出した当該発音教材をデコードして、
その後、当該デコードした当該発音教材を再生するにあたり、
当該発音教材中の前記音声データの再生と、
当該発音教材中の前記動画像データの表示再生とを、当該発音に同期対応させ一画面上に同時並列に行なうとともに、
これと平行して、映像入力デバイスで撮影した学習者の発音時の口の動きを撮影した撮影データを前記発音教材ともどもデコードし、前記動画像データと同一画面上に同期対応して対照可能に同時並列表示する、
ことを特徴とする発音学習支援方法。
【請求項２】
前記動画像データの表示再生は、
当該表示再生動画像中の任意の領域を指定した拡大表示が設定されたときには、
当該領域を所定の倍率で拡大して表示再生して、
当該表示再生の途中に当該発音教材の一時停止が設定されたときには、
当該表示再生を一時停止することで、
前記発音途中における前記発声動作を示す静止画を表示する、
ことを特徴とする請求項１に記載の発音学習支援方法。
【請求項３】
外国語の所定の発音に対応した、当該発音の音声データと、当該発音発声時に必要な鼻腔、口腔、歯、舌及び顎の発声動作を、口内部分中央垂直片半断面模式図上における所定の挙動変化とともに所要の息の流れを順次表示することで、唇の使い方、歯の位置・開き方、顎の使い方、舌の位置、息の流れを示すアニメーション動画像と，前記発音の際の口もとの挙動変化の様子を示す口もと正面動画像と，口もと斜視動画像とのデータを有する動画像データと、を含む発音教材が蓄積された発音教材蓄積手段を搭載して読込み再生可能に構成された任意の学習者端末であって、
ストレージデバイスにより前記発音教材蓄積手段を、予め前記発音教材の前記音声データと前記動画像データのいずれも男女それぞれの所定の各年齢層毎にサンプリングした前記発音教材を読込み可能に構成するとともに、
前記学習者端末を利用する前記学習者からの性別、年齢層の任意選択設定を含む入力を受付けて、当該入力に基づき前記発音教材の要求信号を出力する入力デバイスと、
当該入力デバイスから当該要求信号を入力して、当該要求信号に基づき前記発音教材蓄積手段から前記選択設定の発音教材を抽出する発音教材抽出部と、
前記発音教材抽出部にて抽出された前記発音教材中の前記音声データと前記動画像データとをデコードするデータデコード部と、
当該データデコード部にてデコードされた前記音声データを出力する音声データ出力部と、
当該データデコード部にてデコードされて前記音声データの出力と同期された前記動画像データを表示出力する動画像データ出力部と、
当該動画像データ出力部の一画面上に当該動画像データと共に出力可能に前記データデコード部に接続自在な映像入力デバイスと、を具備する、
ことを特徴とする発音学習支援学習者端末。
【請求項４】
前記データデコード部は、
前記学習者端末に別途具備する映像入力デバイスから、前記発音教材に基づき発音する学習者の口周辺の挙動を記録した撮影データを入力して、前記動画像データ出力部に向けて、当該撮影データと前記口もと正面動画像と前記口もと斜視動画像とを同期対応させて一画面上に同時並列して表示再生可能に出力するよう機能構成される、
ことを特徴とする請求項３に記載の発音学習支援学習者端末。
【請求項５】
発音教材蓄積手段に予め蓄積された外国語の所定の発音に対応した、当該発音の音声データと、当該発音発声時に必要な鼻腔、口腔、歯、舌及び顎の発声動作を、口内部分中央垂直片半断面模式図上における所定の挙動変化とともに所要の息の流れを順次表示することで、唇の使い方、歯の位置・開き方、顎の使い方、舌の位置、息の流れを示すアニメーション動画像と，前記発音の際の口もとの挙動変化の様子を示す口もと正面動画像と，口もと斜視動画像との各データを有する動画像データと、を含む発音教材を読込み再生することで、前記外国語の前記発音の短期集中習得を最適支援するための、前記発音教材蓄積手段を搭載して任意に設置された学習者端末に導入して使用される発音学習支援処理プログラムであって、
当該学習者端末に、
予め前記発音教材の前記音声データと前記動画像データのいずれも男女それぞれの所定の各年齢層毎にサンプリングして前記発音教材蓄積手段に蓄積する処理手順と、
当該発音教材蓄積手段に、前記学習者端末を利用する学習者により任意になされた性別及び年齢層を選択設定した該当する前記発音教材を要求させる処理手順と、
当該発音教材の要求に基づき前記発音教材蓄積手段から当該発音教材を抽出させる処理手順と、
抽出させた当該発音教材をデコードさせる処理手順と、を順次実行させて行き、
その後、当該デコードした当該発音教材を再生させる処理手順とを実行させるにあたり、
当該発音教材中の前記音声データを再生させる処理手順と、
当該発音教材中の前記動画像データを表示再生させる処理手順とを、当該発音に同期対応させて一画面上に同時並列して実行させるとともに、
これと平行して、映像入力デバイスで撮影された学習者の発音時の口の動きを撮影した撮影データを前記発音教材ともどもデコードし、前記動画像データと同一画面上に同期対応して対照可能に同時並列表示する処理手順も併せ実行させる、
ことを特徴とする発音学習支援処理プログラム。
【請求項６】
前記動画像データを表示再生させる処理手順は、
当該表示再生動画像中の任意の領域を指定した拡大表示が設定されたときには、
当該領域を所定の倍率で拡大して表示再生させる処理手順を実行させて、
当該表示再生の途中に当該発音教材の一時停止が設定されたときには、
当該表示再生を一時停止させる処理手順を実行させることにより、
前記発音途中における前記発声動作を示す静止画を表示させる、
ことを特徴とする請求項５に記載の発音学習支援処理プログラム。
【請求項７】
請求項５又は請求項６に記載の発音学習支援処理プログラムにおける各処理手順をコンピュータ読取可能に実録してなる、
ことを特徴とする発音学習支援処理プログラムを記録した記録媒体。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、発音学習支援方法、学習者端末及び処理プログラム並びに該プログラムを記録した記録媒体に関し、詳しくは、発音教材蓄積手段に予め蓄積された外国語の所定の発音に対応して、いずれも男女それぞれの各年齢層に亙り複数サンプリングされた、当該発音の音声データと、当該発音発声時に必要な鼻腔、口腔、歯、舌及び顎の発声動作を、口内部分中央垂直片半断面模式図上における所定の挙動変化とともに所要の息の流れを順次表示することで、唇の使い方、歯の位置・開き方、顎の使い方、舌の位置、息の流れを示すアニメーション動画像と，当該発音の際の口もとの挙動変化の様子を示す口もと正面動画像と，口もと斜視動画像との各データを有する動画像データと、を含む発音教材を読込み再生することで、外国語の発音の短期集中習得を最適支援するための、発音教材蓄積手段を搭載して学習者端末に適用される発音学習支援方法、並びにその実施に直接使用される発音学習支援学習者端末、この学習者端末に導入して使用される発音学習支援処理プログラム、該発音学習支援処理プログラムを記録した記録媒体に係わる。
【背景技術】
【０００２】
外国語のうち、例えば、日本人は、中学校で３年間、高等学校で３年間と英語を勉強するものの、発音の仕方を学ぶ機会は皆無であり、実際に英語を話してみたものの、相手が聞き取れないことも多く、日本人の英会話、即ち、国際舞台におけるコミュニケーションの場を限定することとなり、近年、外国語の習得に、ネイティブスピーカーの発音の学習が注目されている。
【０００３】
そこで、従来、単語や文章を読みながら、併せてＣＤ（Compact Disc）やカセットテープ等に吹き込まれた外国語を繰返し聞くことで、外国語の発音を習得するようにしていた。外国語は、母音、子音の発音が異なることや、ときには、発音する周波数が異なることから、このような外国語を学ぶ際にはネイティブの発音を真似ることが有効な手段となる。
【０００４】
なお、上記発音を身につけることを目的とした外国語トレーニングの詳細は、以下に示す非特許文献１、２、３及び４に記載されている。
【非特許文献１】スティーブ・ウォーカー著，「英語の発音ザジングルズ  Ｊ−ＴＥＰ英語発音検定対応  レベル８６発音筋肉強化編」，ＤＡＩ−Ｘ出版，２００１年７月
【非特許文献２】鵜田豊著，「ＵＤＡ式３０音英語革命  イントネーションで英語が変わる、あなたが変わる。」，ＳＳコミュニケーションズ，２０００年９月
【非特許文献３】鵜田豊著，「ＵＤＡ式３０音でマスターする英会話  これだけで聞ける・話せる」，ＳＳコミュニケーションズ，１９９８年６月
【非特許文献４】池田紅玉著，「１日１０分「魔法の仮名」で英語が見につく勉強法  すぐ読めるすぐ通じる」，大和書房，２００２年１月
【発明の開示】
【発明が解決しようとする課題】
【０００５】
しかしながら、そもそも、外国語の習得において発音のトレーニングに着目するものは少なく、発音に注目したものにおいても、聴覚的に発音を繰返し聞くだけのものであったり、あるいは、発音記号に基づき、視覚的に特定の発音記号を発音する場合のある瞬間の口の様子を静止画面に平面図示する程度であり、時間的な変化を有する動的発音という発声動作を習得するためには甚だ情報不足であった。いずれにしても、視覚的と聴覚的には別媒体を通して別体として時空的に個別に出力表現され相互に動的に組合された総合性はない。
【０００６】
また、発音する際の口の様子を示した平面図を用いた発音のトレーニングにおいても、ある発音途中の瞬間の舌の位置や、唇の形を示すのみであり、実際に発音した場合の、一連の唇の形の挙動変化や、歯の位置と開き具合の挙動変化、顎の移動、舌の形と位置の挙動変化、息の流れの挙動変化等の口のまわりの筋肉の動きを立体的に動的トレーニングすることは不可能であった。
【０００７】
さらに、特定の発音記号に対応させて舌の位置を図示した平面図のみでは、複数の発音の連続である単語や文章を発音する場合、その連続性に起因した発音の変化や省略等が生じ、その発音の瞬間を示す平面図や、流暢な音のみの情報では、複雑に組み合わされた発音を正確に習得することは、困難なものであった。
【０００８】
しかも、非特許文献４は、英語の発音には日本語の発音にはない筋肉の動きを必要とするものが多いにも関わらず、英語の発音記号を日本語のカタカナに置き換えて発音させるものであり、正確な発声動作について説明するものでもなく、外国語の正しい発音を身につけることが不可能であるばかりか、英語を習得するにあたり常に日本語に置き換えて発音する必要性があることから、学習者に対して外国語の習得の弊害となっていた。
【０００９】
ここにおいて、本発明の解決すべき主要な目的は、次のとおりである。
【００１０】
即ち、本発明の第１の目的は、学習者が外国語の発音に必要な発声動作の様子を、その発音の音とともに、唇の形、歯の位置と開きの程度、顎の位置、舌の形と位置及び息の流れの挙動変化について視覚的・聴覚的に捉えることを可能とするとともに、性別、年齢層の異なるそれぞれの学習者に最適な発音教材の提供を可能とする発音学習支援方法、学習者端末及び処理プログラム並びに該プログラムを記録した記録媒体を提供せんとするものである。
【００１１】
本発明の第２の目的は、任意の学習者端末において、発音に必要な発音動作を詳細に拡大可能に表示するとともに、複雑な動作が連続する発音の途中において、発音動作を停止させて確認可能な発音学習支援方法、学習者端末及び処理プログラム並びに該プログラムを記録した記録媒体を提供せんとするものである。
【００１２】
本発明の第３の目的は、外国語の発音の習得にあたり、単語や文章の発音について、その発音に必要な連続的な発声動作を発音の音とともに視覚的・聴覚的に捉えることを可能とする発音学習支援方法、学習者端末及び処理プログラム並びに該プログラムを記録した記録媒体を提供せんとするものである。
【００１３】
本発明の他の目的は、明細書、図面、特に特許請求の範囲の各請求項の記載から、自ずと明らかになろう。
【課題を解決するための手段】
【００１４】
まず、本発明方法においては、学習者端末が、まず、発音教材蓄積手段に、当該学習者端末を利用する学習者により任意になされた性別及び年齢層の選択情報を含む発音教材の指定に基づき該当する発音教材を要求し、次いで、当該発音教材の要求に基づき発音教材蓄積手段から当該発音教材を抽出し、引続き、抽出した当該発音教材をデコードして、その後、当該デコードした当該発音教材を再生するにあたり、当該発音教材中の音声データの再生と、当該発音教材中の動画像データの表示再生とを、当該発音に同期対応させ一画面上に同時並列に行なうとともに、これと平行して、映像入力デバイスで撮影した学習者の発音時の口の動きを撮影した撮影データを前記発音教材ともどもデコードし、前記動画像データと同一画面上に同期対応して対照可能に同時並列表示する、という特徴的構成手法を講じる。
【００１５】
また、本発明端末においては、ストレージデバイスにより発音教材蓄積手段を予め発音教材読込み可能に構成するとともに、学習者端末を利用する学習者からの性別、年齢層の選択設定を含む入力を受付けて、当該入力に基づき発音教材の要求信号を出力する入力デバイスと、入力デバイスから要求信号を入力して、当該要求信号に基づき発音教材蓄積手段から発音教材を抽出する発音教材抽出部と、発音教材抽出部にて抽出された発音教材中の音声データと動画像データとをデコードするデータデコード部と、当該データデコード部にてデコードされた音声データを出力する音声データ出力部と、当該データデコード部にてデコードされて音声データの出力と同期された動画像データとして、動画像データを表示出力する動画像データ出力部と、当該動画像データ出力部の一画面上に当該動画像データと共に出力可能に前記データデコード部に接続自在な映像入力デバイスと、を具備させる、という特徴的構成手段を講じる。
【００１６】
一方、本発明プログラムにおいては、学習者端末に、発音教材蓄積手段に、当該学習者端末を利用する学習者により任意になされた性別及び年齢層の選択情報を含む発音教材の指定に基づき該当する発音教材を要求させる処理手順と、当該発音教材の要求に基づき発音教材蓄積手段から当該発音教材を抽出させる処理手順と、抽出させた当該発音教材をデコードさせる処理手順と、を順次実行させて、その後、当該デコードした当該発音教材を再生させる処理手順とを実行させるにあたり、当該発音教材中の音声データを再生させる処理手順と、当該発音教材中の動画像データを表示再生させる処理手順とを、当該発音に同期対応させて一画面上に同時並列して実行させるとともに、これと平行して、映像入力デバイスで撮影された学習者の発音時の口の動きを撮影した撮影データを前記発音教材ともどもデコードし、前記動画像データと同一画面上に同期対応して対照可能に同時並列表示する処理手順も併せ実行させる、という特徴的構成手順を講じる。
【００１７】
他方、本発明記録媒体においては、学習者端末に、発音教材蓄積手段に、学習者端末を利用する学習者により任意になされた性別及び年齢層の選択情報を含む発音教材の指定に基づき該当する発音教材を要求させる処理手順と、当該発音教材の要求に基づき発音教材蓄積手段から当該発音教材を抽出させる処理手順と、抽出させた当該発音教材をデコードさせる処理手順と、当該デコードした当該発音教材を再生させる処理手順とを実践する手続をコンピュータ読取可能に実録する、という特徴的構成手続を講じる。
【００１８】
さらに、具体的詳細に述べると、当該課題の解決では、本発明が次に列挙する上位概念から下位概念に亙る新規な特徴的構成手法、手段、手順又は手続を採用することにより、前記目的を達成するよう為される。
【００１９】
即ち、本発明方法の第１の特徴は、発音教材蓄積手段に予め蓄積された外国語の所定の発音に対応した、当該発音の音声データと、当該発音発声時に必要な鼻腔、口腔、歯、舌及び顎の発声動作を、口内部分中央垂直片半断面模式図上における所定の挙動変化とともに所要の息の流れを順次表示することで、唇の使い方、歯の位置・開き方、顎の使い方、舌の位置、息の流れを示すアニメーション動画像と，前記発音の際の口もとの挙動変化の様子を示す口もと正面動画像と，口もと斜視動画像との各データを有する動画像データと、を含む発音教材を読込み再生することで、前記外国語の前記発音の短期集中習得を最適支援するための、任意に設置された学習者端末に適用される発音学習支援方法であって、当該学習者端末は、予め前記発音教材の前記音声データと前記動画像データのいずれも男女それぞれの所定の各年齢層毎にサンプリングして前記発音教材蓄積手段に蓄積して置き、まず、前記発音教材蓄積手段に、前記学習者端末を利用する学習者により任意の性別及び年齢層を選択設定して該当する前記発音教材を要求し、次いで、当該発音教材の要求に基づき前記発音教材蓄積手段から当該発音教材を抽出し、引続き、抽出した当該発音教材をデコードして、その後、当該デコードした当該発音教材を再生するにあたり、当該発音教材中の前記音声データの再生と、当該発音教材中の前記動画像データの表示再生とを、当該発音に同期対応させ一画面上に同時並列に行なうとともに、これと平行して、映像入力デバイスで撮影した学習者の発音時の口の動きを撮影した撮影データを前記発音教材ともどもデコードし、前記動画像データと同一画面上に同期対応して対照可能に同時並列表示する、発音学習支援方法の構成採用にある。
【００２０】
本発明方法の第２の特徴は、上記本発明方法の第１の特徴における前記動画像データの表示再生が、当該表示再生動画像中の任意の領域を指定した拡大表示が設定されたときには、当該領域を所定の倍率で拡大して表示再生して、当該表示再生の途中に当該発音教材の一時停止が設定されたときには、当該表示再生を一時停止することで、前記発音途中における前記発声動作を示す静止画を表示してなる、発音学習支援方法の構成採用にある。
【００２１】
また、本発明端末の第１の特徴は、外国語の所定の発音に対応した、当該発音の音声データと、当該発音発声時に必要な鼻腔、口腔、歯、舌及び顎の発声動作を、口内部分中央垂直片半断面模式図上における所定の挙動変化とともに所要の息の流れを順次表示することで、唇の使い方、歯の位置・開き方、顎の使い方、舌の位置、息の流れを示すアニメーション動画像と，前記発音の際の口もとの挙動変化の様子を示す口もと正面動画像と，口もと斜視動画像とのデータを有する動画像データと、を含む発音教材が蓄積された発音教材蓄積手段を搭載して読込み再生可能に構成された任意の学習者端末であって、ストレージデバイスにより前記発音教材蓄積手段を、予め前記発音教材の前記音声データと前記動画像データのいずれも男女それぞれの所定の各年齢層毎にサンプリングした前記発音教材を読込み可能に構成するとともに、前記学習者端末を利用する前記学習者からの性別、年齢層の任意選択設定を含む入力を受付けて、当該入力に基づき前記発音教材の要求信号を出力する入力デバイスと、当該入力デバイスから当該要求信号を入力して、当該要求信号に基づき前記発音教材蓄積手段から前記選択設定の発音教材を抽出する発音教材抽出部と、前記発音教材抽出部にて抽出された前記発音教材中の前記音声データと前記動画像データとをデコードするデータデコード部と、当該データデコード部にてデコードされた前記音声データを出力する音声データ出力部と、当該データデコード部にてデコードされて前記音声データの出力と同期された前記動画像データを表示出力する動画像データ出力部と、当該動画像データ出力部の一画面上に当該動画像データと共に出力可能に前記データデコード部に接続自在な映像入力デバイスと、を具備してなる、発音学習支援学習者端末の構成採用にある。
【００２２】
本発明端末の第２の特徴は、上記本発明端末の第１の特徴における前記データデコード部が、前記学習者端末に別途具備する映像入力デバイスから、前記発音教材に基づき発音する学習者の口周辺の挙動を記録した撮影データを入力して、前記動画像データ出力部に向けて、当該撮影データと前記口もと正面動画像と前記口もと斜視動画像とを同期対応させて一画面上に同時並列して表示再生可能に出力するよう機能構成されてなる、発音学習支援学習者端末の構成採用にある。
【００２３】
一方、本発明プログラムの第１の特徴は、発音教材蓄積手段に予め蓄積された外国語の所定の発音に対応した、当該発音の音声データと、当該発音発声時に必要な鼻腔、口腔、歯、舌及び顎の発声動作を、口内部分中央垂直片半断面模式図上における所定の挙動変化とともに所要の息の流れを順次表示することで、唇の使い方、歯の位置・開き方、顎の使い方、舌の位置、息の流れを示すアニメーション動画像と，前記発音の際の口もとの挙動変化の様子を示す口もと正面動画像と，口もと斜視動画像との各データを有する動画像データと、を含む発音教材を読込み再生することで、前記外国語の前記発音の短期集中習得を最適支援するための、前記発音教材蓄積手段を搭載して任意に設置された学習者端末に導入して使用される発音学習支援処理プログラムであって、当該学習者端末に、予め前記発音教材の前記音声データと前記動画像データのいずれも男女それぞれの所定の各年齢層毎にサンプリングして前記発音教材蓄積手段に蓄積する処理手順と、当該発音教材蓄積手段に、前記学習者端末を利用する学習者により任意になされた性別及び年齢層を選択設定した該当する前記発音教材を要求させる処理手順と、当該発音教材の要求に基づき前記発音教材蓄積手段から当該発音教材を抽出させる処理手順と、抽出させた当該発音教材をデコードさせる処理手順と、を順次実行させて行き、その後、当該デコードした当該発音教材を再生させる処理手順とを実行させるにあたり、当該発音教材中の前記音声データを再生させる処理手順と、当該発音教材中の前記動画像データを表示再生させる処理手順とを、当該発音に同期対応させて一画面上に同時並列して実行させるとともに、これと平行して、映像入力デバイスで撮影された学習者の発音時の口の動きを撮影した撮影データを前記発音教材ともどもデコードし、前記動画像データと同一画面上に同期対応して対照可能に同時並列表示する処理手順も併せ実行させてなる、発音学習支援処理プログラムの構成採用にある。
【００２４】
本発明プログラムの第２の特徴は、上記本発明プログラムの第１の特徴における前記動画像データを表示再生させる処理手順が、当該表示再生動画像中の任意の領域を指定した拡大表示が設定されたときには、当該領域を所定の倍率で拡大して表示再生させる処理手順を実行させて、当該表示再生の途中に当該発音教材の一時停止が設定されたときには、当該表示再生を一時停止させる処理手順を実行させることにより、前記発音途中における前記発声動作を示す静止画を表示させてなる、発音学習支援処理プログラムの構成採用にある。
【００２５】
他方、本発明記録媒体の特徴は、上記本発明プログラムの第１又は第２の特徴における各処理手順をコンピュータ読取可能に実録してなる、発音学習支援処理プログラムを記録した記録媒体の構成採用にある。
【発明の効果】
【００２６】
本発明によれば、学習者端末を利用する学習者に、外国語の発音に必要な、唇の形、歯の位置と開きの程度、顎の位置、舌の形と位置及び息の流れの挙動変化等の発声動作の様子を、聴覚的発音の音とともに動画及び静止画を多面視覚的に複合提供することができ、学習者に普段利用しない顔の筋肉を鍛えさせて、発音の音のみに頼らずに顔の動きを伴う正しい外国語の発音の仕方についての学習を支援することが可能となる。
【００２７】
また、任意の学習者端末において、手軽に正しい発音及びイントネーションを学習させるために、正しい発音に必要な発声動作の表示再生の指定領域の一部拡大、あるいは、一時停止による静止画等により、詳細に顔の動きを表示出力することが可能であり、学習者に正しい発音を身につけるための顔の筋肉の動かし方を示し、耳だけにたよらず、３Ｄ（三次元立体）視覚的に正確な発音の容易な取得を支援することが可能となる。
【００２８】
加えて、同一の発音教材に対して男女それぞれの各年齢層に亙る音声データ及び動画像データを予め複数サンプリングされたものを複数蓄積した発音教材蓄積手段から、所望の発音教材を抽出して出力することにより、学習者端末を利用する学習者の性別、年齢層に合わせる等、所望の最適な発音教材を提供することが可能となる。
【００２９】
さらに、発音記号に対応させた発音のみならず、単語や文章の並びにより発音が組み合わされて複雑に挙動変化する場合についても、その単語又は文章の流れの中での複雑な唇の形、歯の位置と開きの程度、顎の位置、舌の形と位置及び息の流れの挙動変化等の顔の動きを一連に学習者に示すことが可能であり、学習者の実際の発音動作と発音教材中のお手本となる発音動作とを、学習者自身により視覚的に比較対照表示することにより、学習者に正確な発音動作との差異を明確かつ的確に示すことが可能であり、短期間で確実な発音の習得を可能とすると共に、発音力の向上に伴い単語力、速読力の向上も期待でき、外国語の生きた会話学習に最適である。
【発明を実施するための最良の形態】
【００３０】
以下、本発明の実施の形態につき、添付図面を参照しつつ、学習者端末例並びにこれに対応する方法例を説明し、これに引続き、その方法例を具現化するためのプログラム例及び記録媒体例を説明する。
【００３１】
（学習者端末例）
まず、図１は、本発明の学習者端末例に係る発音学習支援学習者端末の機能構成図である。なお、本図では、本発明を適用する発音学習支援学習者端末α（以下、学習者端末αという）を最も一般的なＣＰＵ（Central Processing Unit）とメモリを具備したパーソナルコンピュータとした適用形態を例に挙げている。
【００３２】
同図に示すように、例えば、発音教材蓄積手段１１は、ＣＤ−ＲＯＭ（Compact Disc Read Only Memory）等のストレージデバイスで構成されて、予め外国語の所定の発音に対応して、いずれも男女それぞれの各年齢層に亙り複数サンプリングされた、発音の音声データと、この発音発声時に必要な鼻腔、口腔、歯、舌及び顎の発声動作を、口内部分中央垂直片半断面模式図上における所定の挙動変化とともに所要の息の流れを順次表示することで、唇の使い方、歯の位置・開き方、顎の使い方、舌の位置、息の流れを示すアニメーション動画像と、この発音の際の口もとの挙動変化の様子を示す口もと正面動画像と、口もと斜視動画像とのデータを有する動画像データと、を含む発音教材を蓄積して構成され、本適用システム構成例に係る学習者端末αは、例えば、リーダドライブ等を具備することにより、この発音教材蓄積手段１１を搭載して読込み可能に構成される。
【００３３】
さらに、学習者端末αは、学習者端末αを利用する学習者により操作可能なキーボードやマウス等の学習者からの性別、年齢層の選択設定を含む入力を受付けて、この入力に基づき発音教材の要求信号を出力する入力デバイス１２と、入力デバイス１２から要求信号を入力してこの要求信号に基づき発音教材蓄積手段１１から発音教材を抽出する発音教材抽出部１３と、発音教材抽出部１３にて抽出された発音教材中の音声データと動画像データとをデコードするデータデコード部１４と、を具備する。
【００３４】
加えて、学習者端末αは、データデコード部１４にてデコードされた音声データを出力する音声データ出力部１５と、データデコード部１４にてデコードされて音声データの出力と同期された動画像データを出力する動画像データ出力部１６とを具備する。
【００３５】
ここで、動画像データ出力部１６は、動画像データとして、発音の際に必要な鼻腔、口腔、歯、舌及び顎の発声動作を口内部分中央垂直片半断面模式図上における所定の動作順に順次挙動変化して表示するアニメーション動画像と、この発音の際の口もとの挙動変化の様子を示す口もと正面動画像と、口もと斜視動画像とを同期対応させて一画面上に同時並列して表示再生可能に機能構成される。
【００３６】
また、入力デバイス１２は、音声データ出力部１５と動画像データ出力部１６における音声データと動画像データとの出力を、学習者が任意にコントロール可能に設定された場合には、学習者による入力デバイス１２の操作に従い、音声データ及び動画像データとの再生の、例えば、開始、停止、一時停止、一時停止の解除、指定領域の拡大表示等の命令を、データデコード部１４に対し通知可能に構成されても構わない。
【００３７】
さらに、学習者端末αに別途、カメラ等を有した映像入力デバイス１７を具備した場合、映像入力デバイス１７は、学習者が音声データ出力部１５及び動画像データ出力部１６からの発音教材に基づく再生出力に併せて発音する様子の口周辺の挙動を撮影可能に構成されて、撮影した撮影データはデータデコード部１４で入力して、データデコード部１４が、この撮影データを発音教材中の動画像データとともに同期対応させて一画面上に同時並行に表示再生可能に動画像データ出力部１６に出力するよう機能構成されてもよい。
【００３８】
（方法例）
次に、図２は、本発明の方法例に係る発音学習支援方法のフローチャートである。
【００３９】
本方法例は、例えば、ＣＤ−ＲＯＭ等のストレージデバイスで構成された発音教材蓄積手段１１に予め蓄積された外国語の所定の発音に対応して、いずれも男女それぞれの各年齢層に亙り複数サンプリングされた、発音の音声データと、この発音発声時に必要な鼻腔、口腔、歯、舌及び顎の発声動作を、口内部分中央垂直片半断面模式図上における所定の挙動変化とともに所要の息の流れを順次表示することで、唇の使い方、歯の位置・開き方、顎の使い方、舌の位置、息の流れを示すアニメーション動画像と、この発音の際の口もとの挙動変化の様子を示す口もと正面動画像と、口もと斜視動画像とのデータを有する動画像データと、を含む発音教材を読込み再生することで、外国語の発音の習得を支援するための、発音教材蓄積手段１１を搭載可能に任意に設置された、例えば、ＣＰＵとメモリを具備したパーソナルコンピュータや携帯端末等により構成された、例えば、適用システム構成例に示した学習者端末αに適用される。
【００４０】
同図に示すように、学習者端末αにおいて、例えば、発音記号に基づく発音や、単語の発音又は文章の発音等の蓄積された、発音教材蓄積手段１１中の複数の標準発音教材中から、入力デバイス１２から学習者により入力された性別、年齢層の選択設定を含む要求命令に基づく特定の発音教材を要求し（ＳＴ１）、発音教材抽出部１３は、この発音教材の要求に基づき発音教材蓄積手段１１から該当する発音教材を抽出して（ＳＴ２）、抽出した発音教材をデータデコード部１４にてデコードし（ＳＴ３）、その後、このデコードした発音教材を音声データ出力部１５と動画像データ出力部１６にて再生出力する（ＳＴ４）ことにより、学習者端末αを利用する学習者の発音学習を支援する。
【００４１】
図３は、図２に示した発音教材の再生において一画面上に表示再生する複数動画像データの表示再生例であり、例えば、動画像データの表示再生を行なうための表示インターフェース（画面）１を有している。
【００４２】
同図に示すように、ＳＴ４の発音教材の再生において、発音教材中の音声データ出力部１５での音声データの再生（ＳＴ４１）と、発音教材中の動画像データから、発音の際に必要な鼻腔、口腔、歯、舌及び顎の発声動作を、口内部分中央垂直片半断面模式図上における所定の動作順に順次挙動変化して表示することで発音に必要な内部構造の挙動変化を示すアニメーション動画像２の表示再生（ＳＴ４２）と、この発音の際の口もとの挙動変化の様子を外見から、例えば、撮影映像によって示す、口もと正面動画像３の表示再生（ＳＴ４３）と、口もと斜視動画像４の表示再生（ＳＴ４４）とを、教材となる発音に同期対応させて動画像データ出力部１６の一画面上に同期並列に行なう。即ち、多面動・静止的に視聴覚一体総合体験学習を可能とする。
【００４３】
ここで、ＳＴ４２におけるアニメーション動画像２の表示再生は、鼻腔、口腔、歯、舌及び顎の挙動変化を順次表示するとともに、対応する発音を発声する際に同時に必要な発声動作として、例えば、息の流れを矢印（図示せず）等で口内部分中央垂直片半断面模式図上にその流れを順次変化させて示すようにすることにより、息の流れの挙動変化を示すことができる。
【００４４】
このとき、ＳＴ４２のアニメーション動画像２の表示再生と、ＳＴ４３，ＳＴ４４の口もと正面動画像３と口もと斜視動画像４の表示再生は、表示インターフェース１にて表示再生中の動画像の任意の領域を指定した拡大表示が設定されたか否か監視しておき（ＳＴ５）、拡大表示の設定が為されたときには、指定領域を所定の倍率で拡大して表示再生する（ＳＴ５ａ）とよい。
【００４５】
また、ＳＴ４２のアニメーション動画像２の表示再生と、ＳＴ４３，ＳＴ４４の口もと正面動画像３と口もと斜視動画像４の表示再生は、ＳＴ５の拡大表示設定の監視とともに、この表示再生の途中に発音教材の一時停止又は一時停止の解除が設定されたか否か監視しておき（ＳＴ６）、一時停止が設定されたときには、表示再生を一時停止して、静止画表示状態として、この一時停止が解除されたときには、静止画の表示状態から再び動画像を表示再生する（ＳＴ６ａ）とよい。
【００４６】
ここで、表示インターフェース１中には、再生コントロールスイッチ表示部５中の再生スイッチ５１のＯＮ／ＯＦＦ、一時停止スイッチ５２のＯＮ／ＯＦＦ、繰返し再生スイッチ５３のＯＮ／ＯＦＦ等を併せて表示することにより、この再生コントロールスイッチ表示部５を視覚的に確認可能な学習者からの、例えば、学習者端末αに搭載されたキーボードやマウス等の入力デバイス１２を介して切替え入力の設定を受付けるとよく、同様にして、ＳＴ５の拡大表示の設定も入力デバイス１２からの入力を監視するようにするとよい。
【００４７】
なお、ＳＴ４の発音教材の再生は、発音教材を一意に特定可能な、例えば、発音記号や単語、文章等を示す記号又は文字列等による発音教材情報を、表示インターフェース１上の発音教材情報表示部６への表示とともに行なうとよく、図３では、例えば、表記上の「ｒ」に対応する発音教材の再生を行なうことを示している。
【００４８】
さらに、学習者端末αにて、例えば、ＣＤ−ＲＯＭ等のストレージデバイスで構成された発音教材蓄積手段１１を読み込んだときに、発音教材蓄積手段１１中に蓄積する発音教材の発音教材情報を動画像データ出力部１６に表示出力することで、学習者端末αに搭載された入力デバイス１２を通じて、学習者からの発音教材の選択要求の入力を受付けて、この選択要求に基づきＳＴ１の発音教材の要求を行なうようにしてもよい。
【００４９】
加えて、ＳＴ３の発音教材のデコード及びＳＴ４の発音教材の再生を、学習者端末αの搭載するプラグインモジュールを利用して行なうようにした場合、特定の学習者端末αに依存せずに、任意の学習者端末αにおいて発音教材の再生が可能となるとともに、このとき、発音教材蓄積手段１１にはプラグインモジュールにより規格化されたデータのみが蓄積されればよく、発音教材の１コンテンツあたりのデータ容量の圧縮を為すことが可能となり、発音教材を複数格納可能となるとともに、少ないデータ容量によって効果的な発音教材の再生を可能とする。
【００５０】
なお、本実施形態例においては、発音教材蓄積手段１１に、外国語として、例えば、クイーンズイングリッシュの発音記号に対応させた６５種類程度のそれぞれの音についての発音教材を蓄積することで、学習者端末αを利用する学習者に対して、クイーンズイングリッシュの標準発音について、それぞれ音声データに基づき音声出力した正確な発音とともに、動画像データに基づき表示出力した動画像中の口の動きを示すことができる。
【００５１】
したがって、特に、外国語の、唇の使い方、歯の位置・開き方、顎の使い方、舌の位置、息・音の出し方を３Ｄに提供することが可能となり、学習者は発音の正確な音を耳で聞きながら、この発音に必要な発声動作を、口もとや顎等の外見のみならず、鼻腔、口腔、歯、舌及び息の流れ等について内部から知ることができ、このような正確な発声動作を真似ることにより、正確な発音を身につけることができる。
【００５２】
そこで、発音教材として、例えば、クイーンズイングリッシュの発音を教材とした場合、上下の歯の噛み合わせを同じにすることが多く、発声はお腹から声が出る感じで、胸に息をため、のどの奥で息を振動させること、顎を下げて、口の中を広くすることが多いことを十分に学習者に提示することができ、また、子音で終わり、例えば、学習者が既に習得している言語とは異なる母音を用いることを学習者に習得させることができる。
【００５３】
また、学習者端末αにカメラ等の映像入力デバイス１７が搭載された場合、この映像入力デバイス１７により撮影した学習者の発音時の口の動きを撮影した撮影データを、例えば、データデコード部１４に発音教材中の動画像データとともに入力することにより、表示インターフェース１上において、発音教材中の標準発音動作を示す動画像（口もと正面動画像３、口もと斜視動画像４）と同期対応させて一画面上に同時並列に表示出力することで、学習者に、学習者の発声動作の挙動と、お手本となる発音教材中の標準発音動作の挙動との比較対照を動画像データ出力部１６に表示出力させて示すことができる。
【００５４】
（プログラム例及び記録媒体例）
続いて、以上に説明した方法例の実施に際し、学習者端末αに導入して使用される発音学習支援処理プログラムの例と、当該発音学習支援処理プログラムを記録した記録媒体の例とを説明する。
【００５５】
まず、ＣＤ−ＲＯＭ等のストレージデバイスで構成された発音教材蓄積手段１１が読込み可能なパーソナルコンピュータや携帯端末等で構成された学習者端末αに、（i）入力デバイス１２から発音教材抽出部１３に発音教材蓄積手段１１中の、学習者端末αを利用する学習者により任意になされた性別及び年齢層の選択情報を含む発音教材の指定に基づき該当する発音教材を要求させる処理手順と、（ii）この発音教材の要求に基づき発音教材蓄積手段１１から発音教材を抽出させる処理手順と、（iii）抽出させたこの発音教材をデータデコード部１４にてデコードさせる処理手順と、を順次実行させる。
【００５６】
その後、（iv）このデコードした発音教材を音声データ出力部１５と動画像データ出力部１６とで再生させる処理手順とを実行させるにあたり、（iv-1）デコードした発音教材中の音声データを音声データ出力部１５で再生させる処理手順と、動画像データ出力部１６において、（iv-2）この発音教材中の動画像データから、発音の際に必要な鼻腔、口腔、歯、舌及び顎の発声動作を、口内部分中央垂直片半断面模式図上における所定の動作順に順次挙動変化して表示するアニメーション動画像を表示再生させる処理手順と、（iv-3）この発音の際の口もとの挙動変化の様子を示す口もと正面動画像を表示再生させる処理手順と、（iv-4）口もと斜視動画像を表示再生させる処理手順とを、この発音に同期対応させて一画面上に同時並行して実行させる。
【００５７】
ここで、アニメーション動画像を表示再生させる処理手順と、口もと正面動画像と口もと斜視動画像を表示再生させる処理手順は、（v）表示再生動画像中の任意の領域を指定した拡大表示が設定されたときには、この指定領域を所定の倍率で拡大して表示再生させる処理手順を実行させて、(vi)表示再生の途中にこの発音教材の一時停止が設定されたときには、この表示再生を一時停止させる処理手順を実行させることにより、正確を期するため、その複雑発音途中における再確認故の発声動作を示す静止画を表示させるとよい。
【００５８】
なお、上記発音学習支援処理プログラムを記録した記録媒体を構成する場合には、任意の記録媒体に、当該発音学習支援処理プログラムにおける(i)〜（vi）の各処理手順をコンピュータ読取可能に実録すればよい。
又、これ等処理手順に平行して、映像入力デバイス１７で学習者の発音時の口の動きを撮影した撮影データを抽出した前記発音教材ともどもデコードし、動画像データと同一画面上に同期対応して比較対照可能に同時並列表示する処理手順も加えてもよい。
【実施例】
【００５９】
続いて、本発明の実施の形態につき、添付図面を参照しつつ、学習者端末αを利用する学習者から性別及び年齢層の選択設定を受付ける実施例を説明する。
【００６０】
図４は、図３に示した表示インターフェース（画面）の他の表示再生例であり、例えば、表示インターフェース１´中に、発音教材切換スイッチ表示部７を有している。なお、本実施例の説明で用いる図４には、図３に示したものと同一又は同等な構成要素につき同一の符号を当てるものとし、当該構成要素の詳細な説明については省略するものとする。
【００６１】
同図に示すように、本実施例に係る表示インターフェース１´中には、性別、年齢層のそれぞれの選択設定の入力をＧＵＩ（Graphical User Interface）として表示して、例えば、入力デバイス１２からの入力を受付けることで、男女の別を示す性別項目と年齢層を示す年齢項目のそれぞれの選択項目において、いずれか１つの項目を選択入力されることでＯＮとして、同一項目中の他の項目を自動的にＯＦＦとするラジオボタンを複数有した発音教材切換スイッチ７を有する。
【００６２】
ここで、発音教材として予め発音教材蓄積手段１１に蓄積された音声データと動画像データとは、年齢により肉体や声帯の発達具合が異なり、男性変声期前後の及び性別により音質や高低に差が出るため、学習者が一番なじみ易く学習し易い声を選択する必要から、同一の発音教材に対して、様々な年齢層の男女からのサンプリングされた、性別、年齢層等により数種類の発音教材を蓄積されるとよい。
【００６３】
その後、ＳＴ１の発音教材の要求を行なう前に、発音教材情報の表示とともに、表示インターフェース１´中の発音教材切換スイッチ７を表示して、性別、年齢層の選択設定の入力を入力デバイス１２から事前に受付けるとよく、この選択設定に基づきＳＴ１の発音教材の要求を行なうようにし、ＳＴ４にてこの任意選択設定された性別、年齢層からサンプリングされた発音教材を再生する。
【００６４】
このとき、本実施例に係る発音学習支援処理プログラムを記録した記録媒体を構成する場合には、任意の記録媒体に、本実施形態例における（i），（ii），（iii），（iv）の各処理手順をコンピュータ読取可能に実録すればよい。
【００６５】
なお、本実施例において、発音教材切換スイッチ７は、ラジオボタンとして説明したが、ラジオボタンに限定されるものではなく、性別、年齢層等、発音教材蓄積手段１１に蓄積された発音教材を選択可能なプルダウンメニュー、プルアップメニュー、又は、入力デバイス１２からの直接入力等によっても構わない。
【００６６】
以上、本発明の実施形態につき、その方法例並びにプログラム例及び記録媒体例を挙げて説明し、引続き、実施例を挙げて説明したが、本発明は必ずしも上述した手法、手段並びに手順及び手続にのみ限定されるものではなく、前述の効果を有する範囲内において、適宜、変更実施することが可能なものである。
【００６７】
例えば、本実施形態例において、外国語として英語の、特に、クイーンズイングリッシュの発音について説明したが、クイーンズイングリッシュ以外の英語、中国語、韓国語、スペイン語、フランス語、イタリア語、ドイツ語、ロシア語、日本語等、これに限定されるものではなく、発音をともなうあらゆる語学における発音の学習に適用可能である。
【００６８】
さらに、発音教材蓄積手段１１は、ＣＤ−ＲＯＭやフレキシブルディスク等に予め記録された記録媒体として読み込むものに限定されず、例えば、会員学習者端末αに搭載されたハードディスクやメモリ等にインターネット等を介してサーバ等からダウンロードした発音教材であっても構わない。
【図面の簡単な説明】
【００６９】
【図１】本発明の学習者端末例に係る発音学習支援学習者端末の機能構成図である。
【図２】本発明の方法例に係る発音学習支援方法のフローチャートである。
【図３】同上した発音教材の再生において一画面上に表示再生する複数動画像データの表示再生例である。
【図４】同上した表示インターフェース（画面）の他の表示再生例である。
【符号の説明】
【００７０】
α…発音学習支援学習者端末（学習者端末）
１，１´…表示インターフェース
２…アニメーション動画像
３…口もと正面動画像
４…口もと斜視動画像
５…再生コントロールスイッチ表示部
５１…再生スイッチ
５２…一時停止スイッチ
５３…繰返し再生スイッチ
６…発音教材情報表示部
７…発音教材切換スイッチ表示部
１１…発音教材蓄積手段
１２…入力デバイス
１３…発音教材抽出部
１４…データデコード部
１５…音声データ出力部
１６…動画像データ出力部
１７…映像入力デバイス
【要約】
【課題】学習者が外国語の発音に必要な発声動作の様子を、指定された性別、年齢層毎に、唇の形、歯の位置と開きの程度、顎の位置、舌の形と位置、息の流れの挙動変化について発声聴覚と同期して視覚的に捉えることが可能な発音学習支援方法、学習者端末及び処理プログラム並びに該プログラムを記録した記録媒体の提供。
【解決手段】発音教材蓄積手段１１を搭載して読込み再生可能に構成し、学習者からの性別、年齢層の選択設定を含む入力を受付けて発音教材の要求信号を出力する入力デバイス１２と、発音教材を抽出する発音教材抽出部１３と、発音教材中の音声データと動画像データをデコードするデータデコード部１４と、音声データを出力する音声データ出力部１５と、音声データの出力と同期された動画像データとして、アニメーション動画像と口もと正面動画像と口もと斜視動画像とを表示出力する動画像データ出力部１６と、を具備する特徴。
【選択図】図１
【図１】
0003569278.tif 000002
【図２】
0003569278.tif 000003
【図３】
0003569278.tif 000004
【図４】
0003569278.tif 000005