(57)【特許請求の範囲】
【請求項１】
学習対象言語の原音声に基づいて音声出力手段から出力される再生音声を学習者が聴取し、これに従って発声を行うことにより当該言語の会話の訓練を行う語学学習支援システムであって、
a)学習対象言語の原音声の文を取得して、該原音声に対し音声波形分析を実施し、無音領域と音声領域とを識別することで、前記原音声の文をチャンク単位に分割して原音声チャンクを得る文分割手段と、
b)学習者の母語における前記原音声チャンクにそれぞれ対応した意味を有する母語音声チャンクを取得する母語音声チャンク取得手段と、
c)前記原音声チャンク及び前記母語音声チャンクに対しそれぞれ、再生時に繰り返し音がそれぞれ独立に聴取可能な遅延時間を有して所定回数繰り返すようなエコー付加処理を行うエコー付加手段と、
d)それぞれエコー付加処理された学習対象言語の原音声チャンクと母語音声チャンクとが、チャンク単位で時間的に交互に、且つ、所定の時間間隔空けた状態で音声出力されるように、時間経過に伴う出力タイミングを制御した第１音声データを作成するデータ作成手段と、
を備え、前記データ作成手段により作成された第１音声データを音声出力手段から出力させるようにしたことを特徴とする語学学習支援システム。
【請求項２】
請求項１に記載の語学学習支援システムであって、
前記データ作成手段は、原音声チャンクと母語音声チャンクとを異なる音声チャンネルに格納することを特徴とする語学学習支援システム。
【請求項３】
請求項１に記載の語学学習支援システムであって、
前記データ作成手段は、エコー付加処理を施していない原音声チャンクが、チャンク毎に少なくとも間に学習者による発声が可能な時間間隔を空けて間欠的に音声出力されるように、時間経過に伴う出力タイミングを制御した第２音声データを作成し、第１音声データと第２音声データとを選択的に音声出力手段から再生出力可能としたことを特徴とする語学学習支援システム。
【請求項４】
請求項３に記載の語学学習支援システムであって、
前記データ作成手段は、一定時間間隔で発せられる基準音のテンポに合わせて前記原音声チャンクが音声出力されるように出力タイミングを制御するとともに、その基準音を音声出力に合成した第２音声データを作成することを特徴とする語学学習支援システム。
【請求項５】
請求項１〜４のいずれかに記載の語学学習支援システムであって、
各原音声チャンクに対応した画像データを格納しておく画像データ格納手段と、
前記音声出力手段から音声データが再生出力される際に、出力される音声に同期して対応した画像データを再生する画像再生手段と、をさらに備えることを特徴とする語学学習支援システム。
【請求項６】
請求項１〜５のいずれかに記載の語学学習支援システムであって、
ネットワークを介して相互に接続されたホストコンピュータと端末とを含むシステムであり、前記音声出力手段は前記端末に備えられ、前記データ作成手段により作成された音声データは前記ホストコンピュータが有する記憶装置に格納され、前記端末からホストコンピュータへの要求に対し、該ホストコンピュータからその端末へと音声データが送出されることを特徴とする語学学習支援システム。
【請求項７】
学習対象言語の原音声に基づいて音声出力手段から出力される再生音声を学習者が聴取し、これに従って発声を行うことにより当該言語の会話の訓練を行う語学学習支援方法であって、
a)文分割手段が、学習対象言語の原音声の文を取得して、該原音声に対し音声波形分析を実施し、無音領域と音声領域とを識別することで、前記原音声の文をチャンク単位に分割して原音声チャンクを得る文分割ステップと、
b)母語音声チャンク取得手段が、学習者の母語における前記原音声チャンクにそれぞれ対応した意味を有する母語音声チャンクを取得する母語音声チャンク取得ステップと、
c)エコー付加手段が、前記原音声チャンク及び前記母語音声チャンクに対しそれぞれ、再生時に繰り返し音がそれぞれ独立に聴取可能な遅延時間を有して所定回数繰り返すようなエコーを付加するエコー付加ステップと、
d)データ作成手段が、それぞれエコー付加された学習対象言語の原音声チャンクと母語音声チャンクとが、チャンク単位で時間的に交互に、且つ、所定の時間間隔空けた状態で音声出力されるように、時間経過に伴う出力タイミングを制御した第１音声データを作成するデータ作成ステップと、
を有し、前記データ作成ステップにより作成された第１音声データを音声出力手段から出力させるようにしたことを特徴とする語学学習支援方法。
【請求項８】
請求項７に記載の語学学習支援方法であって、
前記データ作成ステップでは、エコー付加処理を施していない原音声チャンクが、チャンク毎に少なくとも間に学習者による発声が可能な時間間隔を空けて間欠的に音声出力されるように、時間経過に伴う出力タイミングを制御した第２音声データを作成し、第１音声データと第２音声データとを選択的に音声出力手段から再生出力可能としたことを特徴とする語学学習支援方法。
【請求項９】
請求項８に記載の語学学習支援方法であって、
前記データ作成ステップでは、一定時間間隔で発せられる基準音のテンポに合わせて前記原音声チャンクが音声出力されるように出力タイミングを制御するとともに、その基準音を音声出力に合成した第２音声データを作成することを特徴とする語学学習支援方法。
【請求項１０】
請求項７〜９のいずれかに記載の語学学習支援方法であって、
各原音声チャンクに対応した画像データを用意しておき、前記音声出力手段から音声データが再生出力される際に、出力される音声に同期して対応した画像データを再生することを特徴とする語学学習支援方法。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、外国語の習得のための語学学習支援システム及び語学学習支援方法に関し、さらに詳しくは、外国語の会話力の向上のための語学学習支援システム及び語学学習支援方法に関する。
【背景技術】
【０００２】
グローバル化が進む現代社会において、外国語習得の重要性はますます高まっている。特に、外国人とのコミュニケーションに必要な会話力の習得に対する需要はかなり高く、多くの語学学校がサービスを提供しているほか、学習者が一人で学習ができるような様々な教材が市販されている。しかしながら、何年もかけて外国語を勉強しているのにも拘わらず外国語が十分に話せるようにならない、といったケースが少なからず見受けられる。こうした問題は従来から指摘されてきたことであり、外国語、特に外国語の会話力の向上に有効な学習方法として、様々な方法がこれまで提案されている。
【０００３】
一般に、外国語会話力を高めるには、以下の４つの能力を総合的に高める必要があると言われている。
（１）音声そのものを聴き取る能力
（２）聴き取った音声と意味（又は概念）とを結びつける能力
（３）音声そのものの発声能力
（４）発声している（又は発声しようとする）音声と意味（又は概念）とを結びつける能力
【０００４】
ここでいう発声能力とは、単なる単語単位の「発音」能力だけを指すものではなく、日常会話の実際の場面において当該言語のネイティブ話者にとって自然（ナチュラル）であると感じられる「発声＝音声」であり、言語学上プロソディ（韻律）と呼ばれる、イントネーション（抑揚）・リズム（律動）・ストレス（強勢）・ピッチ（高低）・トーン（音調）、テンポ、さらには声の大小、発声速度など、様々な音声学的特徴を指す。小学校の英語教育で、このプロソディ的側面を重要視した発声（発音）教育も提案されている。
【０００５】
上記の能力を効果的に向上させる訓練法として、これまでの研究や実際の教育結果から効果があるとされているものに、「シャドーイング」、「リプロダクション」等がある。
【０００６】
例えば特許文献１、２などにも開示されている「シャドーイング」は、ネイティブ話者等による発音を聴きながら、それにかぶせるようにして訓練者が聴き取った音を発声するという方法である。これはもともとプロの同時通訳者を目指す者を対象とした訓練法であって、シャドーイングを行うことにより、上記４つの能力、特に上記の（１）、（３）の能力を向上させるのに有効であると言われている。しかしながら、シャドーイングは、ある程度の構文の知識や意味の理解がなければ行うことができないため、初学者や初級者には向かず、適切な効果が得られない場合もよく見受けられる。
【０００７】
また、シャドーイングは、自分の発声（自分の骨を伝って聞こえてしまう音）を聴きながら、同時に模範となるネイティブ話者の音声（以下「原文」という）を聴かなければならないという点で、認知的負荷の高い作業を課していることになる。その結果として、特に、全く未知の言語を成人してから学ぶ初期の段階では、原文の聴き落としや復唱発声自体の品質低下を招いている可能性もあることが、本願発明者らの実験によってわかってきている。
【０００８】
一方、「リプロダクション」は、或る程度の長さの原文を聴いた直後に、学習者がそれを真似て発声するという訓練方法である。一般的なリプロダクションでは、原文をセンテンス（ひとかたまりの意味を持つ文）毎に区切ってその音声を一旦停止するため、原文の長さは様々であり、場合によってはかなり長くなる場合もある。
【０００９】
しかしながら、本願発明者らが行った実験によれば、原文が時間的に長くなればなるほど、学習者による原文の再現性（正確な復唱発声の品質）が失われる傾向にあり、その質が落ちることが判明した。これは、非特許文献１等に開示されている、言語音声に対する人間の短期記憶の理論にも関係すると考えられる。こうしたことから、従来の行われているリプロダクションも、必ずしも効率的な学習方法であるとは言えない。
【先行技術文献】
【特許文献】
【００１０】
【特許文献１】特開２００３−２４１６２９号公報
【特許文献２】特開２００３−３０７９９７号公報
【非特許文献】
【００１１】
【非特許文献１】ミラー（Mille G. A.）、「ザ・マジカル・ナンバー・セブン、プラス・オア・マイナス・トゥー：サム・リミッツオンアーワキャパシティフォー・プロセッシング・インフォメイション（The magical number seven, plus or minus two: Some limits on our capacity for processing information）」、サイコロジカル・レビュー（Psychological Review）、６３巻、ｐ．８１−９７
【非特許文献２】“［チャンク］スピーキング力の決め手は「小さな英語」”[online]、Eigoriki.net、［平成２１年９月２３日検索］、インターネット＜http://eigoriki.net/2008/04/post-9.html＞
【発明の概要】
【発明が解決しようとする課題】
【００１２】
前述のように、外国語の会話力の向上を目的とした学習方法には様々なものが提案されているものの、必ずしも人間の記憶力の特性などを考慮したものではなく、効率的な学習方法として確立されてはいない。
本発明はこうした点に鑑みてなされたものであり、その目的とするところは、特に外国語会話を習得する際に効率的な訓練を行うことができる語学学習支援システム及び語学学習支援方法を提供することである。
【課題を解決するための手段】
【００１３】
上記課題を解決するためになされた第１発明は、学習対象言語の原音声に基づいて音声出力手段から出力される再生音声を学習者が聴取し、これに従って発声を行うことにより当該言語の会話の訓練を行う語学学習支援システムであって、
a)学習対象言語の原音声の文を取得してチャンク単位に分割して原音声チャンクを得る文分割手段と、
b)学習者の母語における前記原音声チャンクにそれぞれ対応した意味を有する母語音声チャンクを取得する母語音声チャンク取得手段と、
c)前記原音声チャンク及び前記母語音声チャンクに対しそれぞれ、再生時に繰り返し音がそれぞれ独立に聴取可能な遅延時間を有して所定回数繰り返すようなエコー付加処理を行うエコー付加手段と、
d)それぞれエコー付加処理された学習対象言語の原音声チャンクと母語音声チャンクとが、チャンク単位で時間的に交互に、且つ、所定の時間間隔空けた状態で音声出力されるように、時間経過に伴う出力タイミングを制御した第１音声データを作成するデータ作成手段と、
を備え、前記データ作成手段により作成された第１音声データを音声出力手段から出力させるようにしたことを特徴としている。
【００１４】
また上記課題を解決するためになされた第２発明は、学習対象言語の原音声に基づいて音声出力手段から出力される再生音声を学習者が聴取し、これに従って発声を行うことにより当該言語の会話の訓練を行う語学学習支援方法であって、
a)学習対象言語の原音声の文を取得してチャンク単位に分割して原音声チャンクを得る文分割ステップと、
b)学習者の母語における前記原音声チャンクにそれぞれ対応した意味を有する母語音声チャンクを取得する母語音声チャンク取得ステップと、
c)前記原音声チャンク及び前記母語音声チャンクに対しそれぞれ、再生時に繰り返し音がそれぞれ独立に聴取可能な遅延時間を有して所定回数繰り返すようなエコーを付加するエコー付加ステップと、
d)それぞれエコー付加された学習対象言語の原音声チャンクと母語音声チャンクとが、チャンク単位で時間的に交互に、且つ、所定の時間間隔空けた状態で音声出力されるように、時間経過に伴う出力タイミングを制御した第１音声データを作成するデータ作成ステップと、
を有し、前記データ作成ステップにより作成された第１音声データを音声出力手段から出力させるようにしたことを特徴としている。
【００１５】
当業者によく知られているように、チャンクとは、会話などにおいて文よりも短い意味を持つ１乃至複数の単語からなる発声出力の単位である（例えば非特許文献２など参照）。本願第１発明に係る語学学習支援システムにおいて、文分割手段は、与えられた学習対象言語、例えば英語の原音声の一つの文に対し、音声波形解析を用いた無音検出などを実行することにより、その一文を複数のチャンクに分割する。多くの場合、自動的にこうしたチャンク分割が可能であるものの、文によっては或いは話者の話し方の特性によっては適切なチャンク分割ができない場合がある。そうした場合には、作業者が自動で実行されたチャンク分割の結果を評価し、適切でない場合に適宜マニュアルで修正するようにしてもよい。
【００１６】
一方、母語音声チャンク取得手段は例えば、原音声チャンク毎に翻訳者等が発声した母語音声を取り込んでチャンク毎に保存するものである。この母語音声の発音自体は学習対象ではないから、この母語音声はコンピュータ等による合成音声であってもよい。
【００１７】
エコー付加手段は、一文を構成する複数の原音声チャンクとこれに対応した複数の母語音声チャンクとにそれぞれエコー付加処理を実行する。ここで、エコーの繰り返し回数は特に限定されないが、時間遅延は各音声がそれぞれ独立に聴き取れる程度の時間遅延に設定される。また、エコー付加処理された後の音声チャンクの時間長さは３〜５秒程度に収まるようにするとよい。これは、正確な言語音声の短期記憶が可能な長さを考慮した時間範囲である。非特許文献１などの過去の研究によれば、一般的な短期記憶の限界は１５〜２０秒程度であると言われているが、これは記憶対象の意味や概念を理解している場合であると考えられ、そうした理解がない場合や不足している場合には記憶可能な時間はかなり短縮される。本願発明者らのこれまでの実験によれば、特に全く未知の言語を成人してから学ぶ初期の段階では、記憶に留めることが可能であるのは数秒以内にすぎない。そこで、こうした学習においては、上記時間長を３〜５秒程度にしておくのがよい。
【００１８】
データ作成手段は、上記のようにエコー付加処理された原音声チャンクとそれに意味的に対応した母語音声チャンクとが、チャンク単位で時間的に交互に出力されるように並び替えるとともに、１つのチャンクの音声出力の終了時点と次のチャンクの音声出力の開始時点との間に所定の時間間隔が空くように無音区間を挿入することで第１音声データを作成し、これを例えば記憶装置に格納する。学習者は、記憶装置に格納された音声データを音声出力手段により読み出して再生・聴取する。この再生音は、例えば母語である日本語で１つのチャンクの意味が所定回数繰り返され、引き続いて学習対象言語である英語で１つのチャンクが所定回数繰り返される。
【００１９】
したがって、学習者がもともとそのチャンクの意味を十分に理解していなくても、意味と英語音声とをテンポ良く交互に聴くことができる。また、それぞれのチャンクの再生時間長は人間が容易に記憶できる時間内に収まっており、しかもその再生時間中に音声出力は徐々に小さくなるので、学習者は記憶した英語音声をその再生音声に被せるように容易に発声することができる。これにより、英語音声の発声の訓練を行うと同時に意味の理解を促進することができる。
【００２０】
第１発明に係る語学学習支援システムの一態様において、前記データ作成手段は、原音声チャンクと母語音声チャンクとを異なる音声チャンネルに格納する構成とするとよい。ここで言う異なる音声チャンネルとは、通常、ステレオ音声の左（Ｌ）チャンネルと右（Ｒ）チャンネルとである。これによれば、音声出力手段が左右チャンネルを独立に出力可能なものである場合に、例えば学習対象言語のみを聴取したり、逆に母語音声のみを聴取したりすることが可能となる。
【００２１】
また第１発明に係る語学学習支援システム及び第２発明に係る語学学習支援方法では、学習効果を高めるために、上記第１音声データの再生出力のほかに他の形態の音声データの再生出力を行えるようにしてもよい。
例えば、好ましくは、前記データ作成手段は、エコー付加処理を施していない原音声チャンクが、チャンク毎に少なくとも間に学習者による発声が可能な時間間隔を空けて間欠的に音声出力されるように、時間経過に伴う出力タイミングを制御した第２音声データを作成するようにし、第１音声データと第２音声データとを選択的に音声出力手段から再生出力可能とするとよい。
【００２２】
この構成においては、データ作成手段は、上記のように分割され、エコー付加処理がなされていない原音声チャンクに対し、チャンク毎に少なくとも間に学習者による発声が可能な時間間隔を空けて間欠的に音声が出力されるように、時間経過に伴う出力タイミングを制御した第２音声データを作成し、これを例えば記憶装置に格納する。学習者は、この記憶装置に格納された第２音声データを音声出力手段により読み出して再生・聴取する。通常、エコー付加処理がなされていない１つのチャンクの音声の長さは１秒程度であるので、学習者は、時間を空けて間欠的に再生される原音声チャンクを聴きながら、それを繰り返すように復唱発声することができる。
【００２３】
この場合、データ作成手段は、一定時間間隔で発せられる基準音（例えばメトロノーム音）のテンポに合わせて原音声チャンクが音声出力されるように出力タイミングを制御するとともに、その基準音を音声出力に合成するようにするとよい。原音声チャンクが基準音に合わせて出力されるようにするとともに、学習者による発声が可能な時間間隔の間にも基準音が発生するように出力タイミングを決めることにより、学習者はこの基準音でリズムをとりながらチャンク毎の繰り返し発声を行うことができる。特に、その基準音によって自らが発声を行うタイミングを把握し易いので、発声が促進され、英語音声を口に出す訓練の効果を一層高めることができる。さらにまた、発声を促す基準音が発せられることにより、心理的によい意味での強制力が作用し、学習者が意図しない積極性が生まれ、学習効果を高めることができる。また一般に、基準音なしに学習者が自らタイミングをとって発声を行う場合に比べて学習者が疲れを感じにくく、長時間の訓練を行い易いという副次的な効果もある。
【００２４】
また、一般に知られているように、視覚的な情報を音声と並行して与えることで、学習効果を一層高めることができる。そこで、第１発明に係る語学学習支援システムでは、各原音声チャンクに対応した画像データを格納しておく画像データ格納手段と、前記音声出力手段から音声データが再生出力される際に、出力される音声に同期して対応した画像データを再生する画像再生手段と、をさらに備える構成とするとよい。ここで、画像データは静止画、動画のいずれでもよい。
【００２５】
第１発明に係る語学学習支援システムは様々な態様で学習者に学習環境を提供するものとすることができるが、学習者が自宅等に居ながら任意の時間に任意の時間長だけ学習できることが好ましい。そこで、第１発明に係る語学学習支援システムの好ましい一実施態様として、ネットワークを介して相互に接続されたホストコンピュータと端末とを含むシステムであり、前記音声出力手段は前記端末に備えられ、前記データ作成手段により作成された音声データは前記ホストコンピュータが有する記憶装置に格納され、前記端末からホストコンピュータへの要求に対し、該ホストコンピュータからその端末へと音声データが送出される構成とするとよい。
【００２６】
この場合、ネットワークはインターネット、端末は一般的なパーソナルコンピュータを用いることができる。パーソナルコンピュータに標準的に搭載されている音声ファイル（画像付き音声ファイル）再生用アプリケーションソフトウエアで再生可能なデータ形式でホストコンピュータから端末へと音声データ（又は画像付き音声データ）を送出するようにすれば、端末側では専用のソフトウエアを特にインストールする必要がない。
【発明の効果】
【００２７】
以上のように、本発明に係る語学学習支援システム及び語学学習支援方法によれば、学習対象言語の音声とそれに対応した意味を有する母語の音声とが、チャンク単位で繰り返し且つ交互に音声出力されるので、初学者、初級者など、学習対象言語の構文の知識や意味の理解が不足している者であっても、聴き取った音声と意味とを結び付けながら、聴き取った音声を真似た発声の訓練を行うことができる。また特に、学習者が聴き取る音声単位の時間長さは多くの場合、短期記憶が可能な時間範囲内に収まっているので、原音声の聴き逃しを生じにくく、また復唱発声を正確に行うことができる。これにより、効果性が高い外国語会話の学習を行うことが可能となる。
【図面の簡単な説明】
【００２８】
【図１】本発明に係る語学学習支援システムの一実施例のシステム構成図。
【図２】サーバの動画ファイル記憶部に格納される動画ファイルを生成する素材となる再生素材ファイルの一例を示す図。
【図３】本実施例の語学学習支援システムにおける基本音声の一例を示す図。
【図４】図３に示した例に基づく第１練習モード用音声ファイル再生時の音声出力を示す図。
【図５】図３に示した例に基づく第２練習モード用音声ファイル再生時の音声出力を示す図。
【図６】図３に示した例に基づく第３練習モード用音声ファイル再生時の音声出力を示す図。
【図７】図３に示した例に基づく復習モード用音声ファイル再生時の音声出力を示す図。
【図８】図３に示した例に基づく静止画付き第２練習モード用音声ファイル再生時の状態を示す図。
【図９】本実施例の語学学習支援システムにおけるチャンク分割処理の手順を示すフローチャート。
【図１０】本実施例の語学学習支援システムにおける第１練習モード用音声加工処理の手順を示すフローチャート。
【図１１】本実施例の語学学習支援システムにおける第２練習モード用音声加工処理の手順を示すフローチャート。
【図１２】本実施例の語学学習支援システムにおける第３練習モード用音声加工処理の手順を示すフローチャート。
【図１３】本実施例の語学学習支援システムにおける復習モード用音声加工処理の手順を示すフローチャート。
【発明を実施するための形態】
【００２９】
本発明に係る語学学習支援システムの一実施例について、添付図面を参照して説明する。ここで例示する語学学習支援システムは、母語が日本語である学習者が英語（学習対象言語）会話を学習するものであるが、学習者や学習対象言語はこれに限るものではないことは後述の説明から明らかである。
【００３０】
図１は本実施例の英会話学習支援システムの全体構成図である。本実施例の英会話学習支援システムにおいては、サービス提供者３側のサーバ３０と学習者１１の手元にある端末１０とが、インターネットなどのネットワーク２を介して接続される。
【００３１】
端末１０は、キーボードなどの操作部１４、ＬＣＤモニタ等の表示部１３、スピーカ１５、などが本体１２に付設された一般的なパーソナルコンピュータ（ＰＣ）である。このＰＣには一般的なインターネット閲覧ソフトウエア、音声ファイル再生ソフトウエアなどが搭載されており、学習者１１は、こうしたアプリケーションソフトウエアで実現可能な機能を利用して、後述するような学習を行うことが可能である。
【００３２】
サーバ３０は、学習者１１に送信すべき音声付き動画像データが格納された動画ファイルが予め格納された動画ファイル記憶部３２と、動画ファイルの関連情報が収集・格納されている再生ファイル関連データベース（ＤＢ）３３と、ネットワーク２を介した端末１０からの要求などに応じて、再生ファイル関連データベース３３に格納されている関連情報を利用して動画ファイル記憶部３２から適当な動画ファイルを読み出して端末１０に送出するデータ送出処理部３１と、を備える。データ送出処理部３１はサーバ３０に搭載された専用のソフトウエアにより実現される機能ブロックである。動画ファイル記憶部３２に保存される動画ファイルは近年、動画配信等で多用されているＦＬＶ形式のファイルであり、通常、サーバ３０とは別の素材作成用コンピュータ４０上で作成されたＡＶＩ形式或いはＷＭＶ形式などの動画ファイルがサーバ３０にアップロードされた段階でＦＬＶ形式に変換され、動画ファイル記憶部３２に保存される。再生ファイル関連データベース３３に格納される関連情報には、動画ファイル記憶部３２上で動画ファイルの保存場所を示す情報のほか、ファイル名やそのファイルに関するコメント情報、ファイルサイズ、再生時間等のいわゆるファイル属性情報が含まれる。
また、素材作成用コンピュータ４０は、付設されたハードウエアや搭載されたソフトウエアにより実現される機能ブロックとして、音声入力部４５、データ格納部、画像情報作成部、チャンク分割部４２、音声データ加工部４１、及び、動画ファイル生成部４６、などを備える。
【００３３】
図２は、サーバの動画ファイル記憶部に格納される動画ファイルを生成する素材となる再生素材ファイルの一例を示す図である。再生素材ファイルには、大別して、例えばＷＡＶＥ形式等の所定形式で音声データが格納された音声ファイル、例えばＪＰＥＧ形式等の所定形式の静止画データが格納された画像ファイルがある。音声ファイルには、基本音声ファイル、第１練習モード用音声ファイル、第２練習モード用音声ファイル、第３練習モード用音声ファイル、及び復習モード用音声ファイルの５種のファイルがある。
【００３４】
次に、本実施例の英会話学習支援システムにおいて、学習者１１が端末１０のスピーカ１５（又は図示しないヘッドホン等）を通して聴くことができる英会話学習教材の音声出力形態について、一例を挙げて詳しく説明する。
図３は加工対象である５種類の基本音声の一例を示す図であり、図４は第１練習モード用音声の再生出力を示す模式図であり、図５は第２練習モード用音声の再生出力を示す模式図であり、図６は第３練習モード用音声の再生出力を示す模式図であり、図７は復習モード用音声の再生出力を示す模式図である。
【００３５】
ここでは一例として、図３に示すように、学習対象言語である英語の一文が、"Where is the check in counter for this flight?"、であるものとする。図３に示した基本音声の英語の一文は、典型的には、ネイティブ話者が標準的な話速で発した音声である。この一文の音声は複数のチャンクに分割される。前述したように、チャンクとは意味を持つ１乃至複数の単語からなる発声出力の単位である。上記例文は、"Where is" 、"the check in counter"、" for this flight?"、という３つのチャンクに分割される。一方、この英語の一文に対応する「私の乗る飛行機のチェックインカウンターはどこですか？」という日本語音声が別に用意され、さらに上記英語音声のチャンクにそれぞれ対応して、「どこなの」、「チェックインカウンターは」、「この便の」、という３つの日本語音声のチャンクも用意される。さらに、こうした音声データとは別に、四分の一拍子（アンダンテ）のメトロノーム音のデータも用意される。
【００３６】
これら５種類の基本音声から、以下に説明する４種類の形態の音声データが作成される。なお、図４〜図８では、「どこなの」、「チェックインカウンターは」、「この便の」、という日本語音声チャンクそれぞれＪ１、Ｊ２、Ｊ３と記述し、"Where is" 、"the check in counter"、" for this flight?"、という英語音声チャンクをそれぞれＥ１、Ｅ２、Ｅ３と記述している。また、チャンク分割されていない元の英語音声"Where is the check in counter for this flight?"をＥと記述し、元の日本語音声「私の乗る飛行機のチェックインカウンターはどこですか？」をＪと記述している。
【００３７】
図４に示すように、第１練習モード用音声では、ステレオ音声の左チャンネル（Ｌｃｈ）に日本語音声が収録され、右チャンネル（Ｒｃｈ）に英語音声が収録される。英語音声、日本語音声ともに、チャンク単位で複数回（この例では５回）の音声の繰り返しがエコー音として聞こえるように、つまり１回の音声チャンクの再生毎にその音声出力レベルが低下するようにエコー付加がなされる。そして、エコー付加された英語音声チャンクに先立ってその英語音声チャンクの意味を示す、エコー付加された日本語音声チャンクが再生出力されるように、エコー付加された日本語音声チャンクとエコー付加された英語音声チャンクとが時間的に交互に再生出力される。
【００３８】
ここで、英語音声の１つのチャンクの繰り返しの時間長、つまりエコー付加された状態の英語音声チャンクの再生時間ｔ１は５秒程度以内に収まるように遅延時間や繰り返し回数が調整されている。これは、学習者１１がその言語の意味や概念を理解していない場合に短期記憶が可能な時間長さ、を考慮して決められている。また、エコー付加された音声チャンクの再生出力の終了時点から次の（他方の言語の）エコー付加された音声チャンクの再生出力が開始されるまでの間には、所定時間ｔ２（０．５〜１秒程度）の無音期間が設けられる。
【００３９】
この第１練習モード用音声の通常の再生音声を学習者１１が聴くと、英語音声チャンクに先立ってその意味が簡潔な日本語音声チャンクで発せられるので、意味と英語との一体的な理解が促進される。また、エコー付加された英語音声チャンクの再生時間は初学者であっても容易に記憶可能な時間範囲に抑えられているので聴き逃すことなく、例えば次の音声チャンクの再生が開始されるまでの時間ｔ２内に学習者１１がその英語音声チャンクを発声することができる。即ち、初学者でも無理なくシャドーイングと同様の訓練を行うことができる。また、チャンクは一塊の意味を持つものであるから、実質的にリプロダクションと同等の訓練も行える。また、通常の学習では、Ｌｃｈ音声（日本語音声）とＲｃｈ音声（英語音声）とを併せて聴くが、ステレオ再生可能な端末１０では、学習者１１は日本語音声のみ又は英語音声のみを選択的に聴くこともできる。
【００４０】
図５に示すように、第２練習モード用音声では、ステレオ音声のＬｃｈに四分の１拍子のメトロノーム音が収録され、Ｒｃｈに英語音声が収録される。この場合には日本語音声はない。メトロノーム音は１秒毎に音を発するものであり、例えば１拍目に相当する４秒毎に「チン」という音がし、２拍目以降には「カチ・カチ・カチ」という音が発せられるものとすることができる。もちろん、電子音などを利用したものでもよい。
【００４１】
Ｒｃｈに収録される英語音声において、まず１巡目には、Ｌｃｈのメトロノーム音の１拍目に同期して、英語音声チャンクがＥ１、Ｅ２、Ｅ３と順に出力され、メトロノーム音の３拍目に同期して１拍目の英語音声チャンクの音声出力レベルが低下されたものが出力される。次の２巡目では、メトロノーム音の１拍目に同期した英語音声チャンクの出力は１巡目と同じであるが、３拍目は無音となる。
【００４２】
基本的な訓練としては、まず学習者１１は１拍目の英語音声チャンクの再生出力を聴取し、３拍目にレベルが下げられた英語音声チャンクが出力されるタイミングで、学習者１１はシャドーイングの要領で発声する。このときには減衰された英語音声に被せるように発声すればよい。次の２巡目には、学習者１１は１拍目の英語音声チャンクの再生出力を聴取し、３拍目のメトロノーム音に合わせてシャドーイングの要領で発声する。このように学習者１１は周期的なメトロノーム音に合わせてその直前に聴いた英語音声チャンクを発声すればよいので、学習者１１は発声のタイミングをとり易い。このように学習者１１に対して積極的な発声を促すことができるので、シャドーイングやリプロダクションの効果が高い。
【００４３】
図６に示すように、第３練習モード用音声では、ステレオ音声のＬｃｈに、四分の１拍子のメトロノーム音と日本語音声との合成音が収録され、Ｒｃｈに英語音声が収録される。メトロノーム音は第２練習モード用音声と同様である。
【００４４】
メトロノーム音に合成される日本語音声では、メトロノーム音の１拍目に同期して各日本語音声チャンクがＪ１、Ｊ２、Ｊ３の順に出力され、これが３巡繰り返される。他方、Ｒｃｈの英語音声では、メトロノーム音の２拍目に同期して各英語音声チャンクがＥ１、Ｅ２、Ｅ３順に出力されるが、１巡目には通常の音声出力レベルで、２巡目には減衰された音声出力レベルで、３巡目には完全にミュートされた無音状態となる。従って、１巡目、２巡目では、メトロノーム音のテンポに合わせて日本語音声チャンクと英語音声チャンクとが交互に出力され（但し２巡目では英語音声は低出力レベルで出力され）、３巡目には、メトロノーム音のテンポに合わせて日本語音声チャンクに続く無音期間に学習者１１の発声が可能となっている。
【００４５】
これにより、学習者１１は英語音声チャンクの再生順に、つまり英語の文法に則った順序で日本語の意味を理解しながら（確認しながら）、且つ、リズミカルに英語音声チャンクの発声を行うことができる。
【００４６】
図７に示すように、復習モード用音声では、ステレオ音声のＬｃｈに日本語音声が収録され、Ｒｃｈに英語音声が収録される。この場合には、英語音声、日本語音声ともに、チャンク単位ではなく、分割されていない一文の英語音声Ｅ及び日本語音声Ｊが利用される。即ち、基本的に一文単位で、日本語音声Ｊ、英語音声Ｅが交互に再生出力されるが、日本語音声Ｊは全て同じ話速、同じ出力レベルであるのに対し、英語音声Ｅは、２回目が通常話速、標準出力レベルであって、１回目は話速が１．２〜１．５倍程度に話速が上げられている（図７中には→Ｅ←で示す）。また３回目に相当する時間領域は無音であり、４回目は通常話速で、出力レベルは減衰された低出力レベルある。
【００４７】
初めに話速を速めた英語音声を聴かせることで２回目に標準話速の英語音声を聴いたときにゆっくり聞こえるため、聴き取りが容易になる。これにより、学習者１１は１回目、２回目に英語文を的確に聴き取り、３回目、４回目にこれをリプロダクションの要領で発声することができる。
【００４８】
本実施例の英会話学習支援システムでは、上記のような３種の練習モード用音声と１種の復習モード用音声とを適宜に組み合わせた学習（訓練）が可能である。典型的には、第１練習モード用音声→第２練習モード用音声→第３練習モード用音声→復習モード用音声、の順で一文の英語文の会話の訓練が実行される。もちろん、学習者のレベルや理解の進度により、第１乃至第３練習モード用音声、及び復習モード用音声の１つを繰り返すようにしてもよい。
【００４９】
さらに本実施例の英会話学習支援システムでは、スピーカ１５等からの音声出力のほか、それに同期した画像を表示部１３の画面上に描出することで、視覚的な学習効果を付加するようにしている。具体的には、各英語音声チャンクに対応した画像データが用意され、その英語音声チャンクやそれに意味的に対応した日本語音声チャンクによる音声が再生出力されるのに同期して、対応した画像が順次表示されるようになっている。図３に示した例文に対し、第２練習モード用音声が再生出力される際の表示出力の一例を示したのが図８である。こうした画像が音声と同期して表示されることで、学習者１１はその英語音声チャンクが用いられる状況やシチュエーションなどを視覚的に把握することができ、音声のみを用いた場合に比べて格段に高い学習効果が得られる。
なお、学習者が文字情報に頼った発声を行うことを避けるために、基本的には、英語（学習対象言語）の文字表示は行わないが、例えば抽象的な感情表現など、画像情報だけでは適切な状況を表現できないような場合には、最小限の日本語（母国語）文字を例えば漫画の吹き出し様に表示するようにしてもよい。
【００５０】
本実施例の英会話学習支援システムにおいて、動画ファイル記憶部３２には、上記の各練習モード用音声ファイルや復習モード用音声ファイルなどの音声ファイルに格納された音声データとそれに対応した画像ファイルに格納された画像データとが合成されることで生成された動画ファイルが保存される。
【００５１】
例えば学習者１１がサービス提供者３に対し学習教材の提供サービスを予め依頼すると、学習者１１を識別する認証情報がサーバ３０内に保持される。そうした環境の下で、学習者１１が手元の端末１０を操作して英会話学習の要求をサーバ３０に対して出すと、サーバ３０は、要求を出した学習者１１が許可された者であるか否かを認証する。そして、認証が完了すると、サーバ３０においてデータ送出処理部３１は、端末１０から要求された学習を行うために必要なファイルの関連情報を再生ファイル関連データベース３３から読み出し、その情報によって該当する動画ファイルの保存場所を認識して動画ファイル記憶部３２からその動画ファイルを読み出し、ネットワーク２を介して端末１０に送信する。端末１０は、所定のアプリケーションソフトウエア上で送られてきたファイル中の音声データ及び画像データをそれぞれ復号し、ストリーミング再生する。これにより、上述したような音声出力や表示出力が端末１０から行われ、学習者１１はこれを利用した英会話学習を実施することができる。
【００５２】
もちろん、送信ファイルの蓄積が学習者１１側に許可されている場合には、端末１０はサーバ３０から送信されてきたファイルを一旦、内部の記憶装置に蓄積し（つまりダウンロード）し、その後にオフラインで再生できるようにしてもよい。
【００５３】
次に、本実施例の英会話学習支援システムにおいて、素材作成用コンピュータ４０において実行される、各種音声ファイルの作成処理を図９〜図１３を参照して説明する。図９はチャンク分割処理の手順を示すフローチャート、図１０は第１練習モード用音声加工処理の手順を示すフローチャート、図１１は第２練習モード用音声加工処理の手順を示すフローチャート、図１２は第３練習モード用音声加工処理の手順を示すフローチャート、図１３は復習モード用音声加工処理の手順を示すフローチャート、である。
【００５４】
教材の元となる英文（英語音声）は、例えばネイティブ話者が教材用として話したもの音声入力部４５により取り込み、そのまま又は適宜に音声圧縮してデータ格納部４４に格納されたものとすることができる。もちろん、教材用としてではなく一般に録音された会話などを教材とすることもできる。但し、後述したような処理を行う関係上、背景ノイズはできるだけ小さいことが好ましい。また、これとは別に、教材として用意された英文に対応する日本語文を用意する必要があるが、これは、その英文を適宜に翻訳した日本文をネイティブ話者が読み、これを音声入力部４５を介してデータ格納部４４に格納することで得るようにすることができる。
【００５５】
上記のように用意された英語音声に対し、まずチャンク分割部４２は図９に従ったチャンク分割処理を開始する。
即ち、チャンク分割部４２はデータ格納部４４から上記のような英語音声（原音声）を内部のワーキングメモリに読み込む（ステップＳ１）。次に、この原音声に対し音声波形分析を実施し、無音領域と音声領域とを識別する（ステップＳ２）。例えば、無音状態（出力レベルが所定閾値以下である状態）が所定時間以上継続した場合に、その無音状態の開始時点から終了時点までを無音領域であると判断し、それ以外を音声領域であると判断する。そして２つの無音領域で挟まれた音声領域を１つのチャンクとみなすようにすることができる。なお、そうした判断のための各種パラメータ（例えば無音領域判定のための時間長さの閾値など）は予めオペレータが設定しておくようにし、設定されないパラメータについてはデフォルト値を利用するものとすればよい。
【００５６】
一般的に、英語のネイティブ話者が話をする場合に、ひとまとまりの意味を持つチャンクの区切りで息つぎをしたり次の話の内容を考えたりするために無音区間が生じる。そのため、多くの場合には、上記のような無音領域及び音声領域の識別結果に基づいて、一つの文をチャンクに分割することができる。但し、話し方などによっては、一つのチャンクの途中に無音領域が入って複数のチャンクに誤って分割されてしまったり、逆に複数のチャンクが１つのチャンクであると判定されてしまったりすることもある。そこで、ステップＳ２の処理の終了後に例えばオペレータがステップＳ２の識別結果を評価し（ステップＳ３）、適切な識別がなされていない（つまりチャンク分割が適切でない）と判定した場合には、オペレータが例えば手動操作で無音領域や音声領域の識別位置をずらしたり適宜に強制的な分割指示を挿入したりすることにより、自動判定によるチャンク分割を修正し（ステップＳ４）、ステップＳ３に戻ってそうして修正されたチャンク分割を再び評価する。ステップＳ３においてチャンク分割が適切であると判定されると、オペレータの所定の操作により、チャンク分割された音声が図３に示した基本音声の１つとしてデータ格納部４４に格納される（ステップＳ５）。
【００５７】
日本語音声についても英語音声と同様の処理によりチャンク分割してもよいが、一般的に、日本語音声チャンクは英語音声チャンクの意味を簡潔に且つ的確に伝えるためには、日本語の原文を単に分割したものは適切ではない。そのため、日本語音声チャンクは上記のような処理によらず、ネイティブ話者によってチャンク単位で発声されたものを音声入力部４５を介して取り込むようにすることが好ましい。
【００５８】
オペレータの指示により、第１練習モード用音声ファイル作成処理が開始されると、音声データ加工部４１は、任意の一文についてチャンク分割された英語音声（英語音声チャンク）と、チャンク分割された日本語音声（日本語音声チャンク）とをデータ格納部４４から内部のワーキングメモリに読み込む（ステップＳ１１）。図３の例で言えば、"Where is" 、"the check in counter"、" for this flight?"の３つの英語音声チャンクと、「どこなの」、「チェックインカウンターは」、「この便の」という３つの日本語音声チャンクとが読み込まれる。
【００５９】
次に上記の各チャンク毎に、所定繰り返し回数のエコー付加処理を実行する（ステップＳ１２）。このときのエコーの時間遅延や繰り返し回数などのパラメータは予めオペレータが設定しておくようにし、設定されないパラメータについてはデフォルト値を利用するものとすればよい。これにより、例えば図４に示したような、５回のエコーが付加されたチャンク毎の音声データが得られる。次に、エコー付加処理された各チャンクを、図４に示すように各チャンネルに振り分け、且つ所定の時間間隔で日本語音声チャンクと英語音声チャンクとが交互に出力されるように時間軸上のデータ配置を調整する（ステップＳ１３）。
【００６０】
但し、ステップＳ１２、Ｓ１３で自動的に処理を実行した場合、処理後の音声を人間が聴いたときに不自然であったり、或いは意図する学習に適合するものとなっていなかったりする場合がある。そこで、ステップＳ１３の処理の終了後に例えばオペレータが処理後の再生音を評価し（ステップＳ１４）、適切な処理がなされていないと判定した場合には、オペレータが例えばエコー遅延時間等のパラメータを修正し（ステップＳ１５）、ステップＳ１２に戻って再び処理を実行する。或いは、予め複数のパラメータの下での処理を実行して異なる音声ファイルを作成し、オペレータがそれを聴き比べて最も適切な音声を選ぶようにしてもよい。ステップＳ１４において再生音が適切であると判定されると、オペレータの所定の操作により、作成された音声ファイルが第１練習モード用の完成音声ファイルとしてデータ格納部４４に格納される（ステップＳ１６）。
【００６１】
オペレータの指示により、第２練習モード用音声ファイル作成処理が開始されると、音声データ加工部４１は、任意の一文についてのチャンク分割された英語音声（英語音声チャンク）と、メトロノーム音とをデータ格納部４４から内部のワーキングメモリに読み込む（ステップＳ２１、Ｓ２２）。
【００６２】
次に四分の一拍子のメトロノーム音を基準に、上記の各英語音声チャンクの再生が一拍目にちょうど開始されるようにし、その一拍目の英語音声チャンクをコピーし音声出力レベルを所定レベルだけ減衰させ、その再生が三拍目にちょうど開始されるように時間軸上のデータ配置を調整する（ステップＳ２３、２４）。また、２巡目では三拍目の英語音声チャンクを削除する。そして、図５に示すように、上記のように再生出力の時間的なタイミングを調整した英語音声チャンクをステレオ音声のＲｃｈに、メトロノーム音をＬｃｈに格納して音声ファイルとする（ステップＳ２５）。
【００６３】
ステップＳ２５の処理の終了後に例えばオペレータが処理後の再生音を評価し（ステップＳ２６）、適切な処理がなされていないと判定した場合には、オペレータが例えば音声出力レベルの減衰量等のパラメータを修正し（ステップＳ２７）、ステップＳ２３に戻って再び処理を実行する。或いは、予め複数のパラメータの下での処理を実行して異なる音声ファイルを作成し、オペレータがそれを聴き比べて最も適切な音声を選ぶようにしてもよい。ステップＳ２６において再生音が適切であると判定されると、オペレータの所定の操作により、作成された音声ファイルが第２練習モード用の完成音声ファイルとしてデータ格納部４４に格納される（ステップＳ２８）。
【００６４】
オペレータの指示により、第３練習モード用音声ファイル作成処理が開始されると、音声データ加工部４１は、任意の一文について英語音声チャンクと日本語音声チャンクとをデータ格納部４４から内部のワーキングメモリに読み込む（ステップＳ３１）。また、メトロノーム音をデータ格納部４４から内部のワーキングメモリに読み込む（ステップＳ３２）。
【００６５】
次に四分の一拍子のメトロノーム音を基準に、上記の各日本語音声チャンクの再生が一拍目にちょうど開始されるように順に配置し、且つ、これが３回（３巡）繰り返されるように各日本語音声チャンクをコピーして、時間軸上のデータ配置を調整する（ステップＳ３３）。そして、このように加工した日本語音声チャンクとメトロノーム音とを時間軸上で合成する（ステップＳ３４）。次に、図６に示すように、一文の英語音声チャンクの再生がメトロノーム音の三拍目に開始されるように順に配置し、且つ、これが３回（３巡）繰り返されるように各英語音声チャンクをコピーして、時間軸上のデータ配置を調整する（ステップＳ３５）。さらに、このように加工した英語音声チャンクの２巡目の各音声チャンクの出力レベルを所定レベルだけ減衰させ、３巡目の各音声チャンクは削除する（ステップＳ３６）。そして、英語音声をステレオ音声のＲｃｈに、日本語音声をＬｃｈに格納して音声ファイルとする（ステップＳ３７）。
【００６６】
ステップＳ３７の処理の終了後に例えばオペレータが処理後の再生音を評価し（ステップＳ３８）、適切な処理がなされていないと判定した場合には、オペレータが例えば音声出力レベルの減衰量等のパラメータを修正し（ステップＳ３９）、ステップＳ３３に戻って再び処理を実行する。或いは、予め複数のパラメータの下での処理を実行して異なる音声ファイルを作成し、オペレータがそれを聴き比べて最も適切な音声を選ぶようにしてもよい。ステップＳ３８において再生音が適切であると判定されると、オペレータの所定の操作により、作成された音声ファイルが第３練習モード用の完成音声ファイルとしてデータ格納部４４に格納される（ステップＳ４０）。
【００６７】
オペレータの指示により、復習モード用音声ファイル作成処理が開始されると、音声データ加工部４１は、チャンク分割されていない任意の一文の英語音声と日本後音声、つまり原音声をデータ格納部４４から内部のワーキングメモリに読み込む（ステップＳ４１）。そして、元の英語音声Ｅから話速を１．２〜１．５倍程度に上げた英語音声Ｅ１、音声出力レベルを所定レベルだけ減衰させた英語音声Ｅ２、無音化された英語音声Ｅ３とを作成する（ステップＳ４２）。次に、図７に示すように、日本語音声をＬｃｈに、上記のような英語音声をＲｃｈに格納し、日本語音声Ｊと英語音声Ｅ１、Ｅ、Ｅ２、Ｅ３とが交互に出力されるようにデータ配置を調整する（ステップＳ４３）。
【００６８】
ステップＳ４３の処理の終了後に例えばオペレータが処理後の再生音を評価し（ステップＳ４４）、適切な処理がなされていないと判定した場合には、オペレータが例えば話速等のパラメータを修正し（ステップＳ４５）、ステップＳ４２に戻って再び処理を実行する。或いは、予め複数のパラメータの下での処理を実行して異なる音声ファイルを作成し、オペレータがそれを聴き比べて最も適切な音声を選ぶようにしてもよい。ステップＳ４４において再生音が適切であると判定されると、オペレータの所定の操作により、作成された音声ファイルが復習モード用の完成音声ファイルとしてデータ格納部４４に格納される（ステップＳ４６）。
【００６９】
上記のような各処理により第１乃至第３練習モード用音声ファイルと復習モード用ファイルとがデータ格納部４４に用意される。また、オペレータは画像情報作成部４３により各英語音声チャンクに対応した適宜の画像を作成し、これもデータ格納部４４に格納する。動画ファイル生成部４６は上記のようにデータ格納部４４に格納されたファイルを用い、一文に対応する各音声ファイル毎に音声出力と画像出力とが同期するように画像データと音声データとを合成して例えばＡＶＩ、ＷＭＶなどのファイル形式の動画ファイルを自動的に生成する。そして、生成された動画ファイルに所定のファイル名を付与してサーバ３０にアップロードすると、ＦＬＶ形式の動画ファイルに変換されて動画ファイル記憶部３２に格納される。また、これと同時に、その動画ファイルの関連情報（例えば上述したようなファイルの保存場所やファイルの属性情報など）が収集され、これが再生ファイル関連データベース３３に保存される。これにより、データ送出処理部３１は、学習者１１から或る一文の再生の指示を受けたときに、再生ファイル関連データベース３３に保存されている関連情報を参照して該当する動画ファイルを特定するとともにその保存場所を即座に見つけ、動画ファイル記憶部３２から該当する動画ファイルを構成するデータを読み出して端末１０に送出することができる。
【００７０】
なお、上記実施例は本発明の一例にすぎず、本発明の趣旨の範囲で適宜、変形、追加、修正を行っても本願特許請求の範囲に包含されることは明らかである。
【符号の説明】
【００７１】
１０…端末
１１…学習者
１２…ＰＣ本体
１３…表示部
１４…操作部
１５…スピーカ
２…ネットワーク
３…サービス提供者
３０…サーバ
３１…データ送出処理部
３２…動画ファイル記憶部
３３…再生ファイル関連データベース
４０…素材作成用コンピュータ
４１…音声データ加工部
４２…チャンク分割部
４３…画像情報作成部
４４…データ格納部
４５…音声入力部
４６…動画ファイル生成部
【図１】
0005580019.tif 000002
【図２】
0005580019.tif 000003
【図３】
0005580019.tif 000004
【図４】
0005580019.tif 000005
【図５】
0005580019.tif 000006
【図６】
0005580019.tif 000007
【図７】
0005580019.tif 000008
【図８】
0005580019.tif 000009
【図９】
0005580019.tif 000010
【図１０】
0005580019.tif 000011
【図１１】
0005580019.tif 000012
【図１２】
0005580019.tif 000013
【図１３】
0005580019.tif 000014