(57)【要約】【課題】早や聴きと映像との組み合わせにより効果を高める方法を提供する。【解決手段】早や聴き用音声データの再生と同時に自然音を通常速度で再生し、さらに、同時に該自然音に対応する動画を表示する。早や聴き用音声データに対してイコライザ処理を加えることにより、胎児が母胎にて聴く周波数の音声にして再生する。早や聴き用音声データに対してイコライザ処理を加えることにより、外国語が用いる周波数帯を強調して再生する。早や聴き用音声データの再生と同時に自然の中を移動する動画を表示する。該早や聴きのスピードに合わせて前記自然の中の移動の動画スピードも速くする。【選択図】　　図１
2004133232.tif 000002
【特許請求の範囲】
【請求項１】
早や聴き用音声データを再生する早や聴き用音声データ再生方法であって、
該早や聴き用音声データの再生と同時に自然音を通常速度で再生し、
さらに、同時に該自然音に対応する動画を表示する
ことを特徴とする早や聴き用音声データ再生方法。
【請求項２】
早や聴き用音声データを再生する早や聴き用音声データ再生方法であって、
前記早や聴き用音声データに対してイコライザ処理を加えることにより、胎児が母胎にて聴く周波数の音声にして再生することを特徴とする早や聴き用音声データ再生方法。
【請求項３】
早や聴き用音声データを再生する早や聴き用音声データ再生方法であって、
前記早や聴き用音声データに対してイコライザ処理を加えることにより、外国語が用いる周波数帯を強調して再生することを特徴とする早や聴き用音声データ再生方法。
【請求項４】
早や聴き用音声データを再生する早や聴き用音声データ再生方法であって、
該早や聴き用音声データの再生と同時に自然の中を移動する動画を表示することを特徴とする早や聴き用音声データ再生方法。
【請求項５】
請求項４に記載した早や聴き用音声データ再生方法であって、
該早や聴きのスピードに合わせて前記自然の中の移動の動画スピードも速くすることを特徴とする早や聴き用音声データ再生方法。
【発明の詳細な説明】
【０００１】
【発明の属する技術分野】本発明は、早や聴き用音声データの再生方法に関する。
【０００２】
【従来の技術】本発明の発明者が発明した音声データ生成方法、音声データ再生方法、記録媒体についての発明が特許願２０００−１００３１４に開示されている。この発明について簡単に紹介すると、コンピュータを用いて元音声データに対してデジタル処理を施して早や聴き用音声データを生成する早や聴き用音声データ生成方法であって、前記元音声データを所定サンプリング周波数によりサンプリングして互いに同じ長さの多数のブロックを生成するブロックサンプリングステップと、該ブロックサンプリングステップによりサンプリングされたブロックのうち隣り合う部分の端部のそれぞれに減衰処理を施す減衰処理ステップと、該減衰処理ステップにて減衰処理を施した隣り合うブロックの端部を重ね合わせる隣接ブロック重畳ステップとを有するものである。
【０００３】
【発明が解決しようとする課題】本発明の発明者は、２００２年６月２３日（日曜日）の日本経済新聞２８ページのサイエンス記事「目が耳をごまかす」という記事を読んだ。そこには、「光が１回点滅するのに合わせて音を２回鳴らすと、光が２回点滅したと感じる」、「遠ざかる四角形を繰り返し見た後では、一定のはずの音量が次第に大きくなるように聞こえる」、「二つのボールが交差する動画は、衝突音を鳴らすことにより跳ね返ったように見える」など音と映像とのだましあいの効果について書かれてあった。本発明の発明者は、この記事に書かれていたことをヒントに天恵を得た。つまり、２年前に出願した発明に対して、映像を効果的に組み合わせることにより、早や聴きの効果をもっと引き出すことができると気づいた。
【０００４】本発明は、早や聴きと映像との組み合わせにより効果を高める方法を提供することを目的とする。
【０００５】
【課題を解決する手段】上記課題を解決すべく、本発明は早や聴き用音声データを再生する早や聴き用音声データ再生方法であって、該早や聴き用音声データの再生と同時に自然音を通常速度で再生し、さらに、同時に該自然音に対応する動画を表示するものである。
【０００６】請求項２に記載した発明は、早や聴き用音声データを再生する早や聴き用音声データ再生方法であって、前記早や聴き用音声データに対してイコライザ処理を加えることにより、胎児が母胎にて聴く周波数の音声にして再生するものである。
【０００７】請求項３に記載した発明は、早や聴き用音声データを再生する早や聴き用音声データ再生方法であって、前記早や聴き用音声データに対してイコライザ処理を加えることにより、外国語が用いる周波数帯を強調して再生するものである。。
【０００８】請求項４に記載した発明は、早や聴き用音声データを再生する早や聴き用音声データ再生方法であって、該早や聴き用音声データの再生と同時に自然の中を移動する動画を表示するものである。
【０００９】請求項５に記載した発明は、請求項４に記載した早や聴き用音声データ再生方法であって、該早や聴きのスピードに合わせて前記自然の中の移動の動画スピードも速くするものである。
【００１０】
【発明の実施の形態】以下、図面を参照しつつ、本発明の実施形態について説明する。図７は、早や聴き用音声データの生成の仕方を説明する概念図である。図７（ａ）は、元の音声データに対して例えば１１ｋＨｚでサンプリングして、そのサンプリングした音声データを数百（例えば４００から１０００程度）一まとめにしてブロック化した様子を示している。このブロックサイズは、すべて同一の長さのものである。図７（ｂ）では、各ブロックの端部で隣り合うブロック同士で重ね合わせるべき長さを特定する様子を示している。２倍の早や聴き用音声データを生成しようとするときにはブロックの長さの２分の１ずつを隣り合うブロック同士で重ね合わせる。３倍の早や聴きを実現するには、３分の２を重ねることになる。一般に、ｎ倍速の早や聴き用音声データを生成するには、（ｎ−１）をｎで割った割合のブロックの長さに対して重ね合わせの処理をする。図７（ｃ）は、重ね合わせるべきブロックの端部に対して減衰処理を加える様子を示している。減衰処理とは、いわゆるフェードインフェードアウトである。つまり、それぞれのブロックについて端から中央に向けて徐々に振幅が増し、もっとも端においてはゼロとなるようにする処理である。この処理を実行するには、直線関数を用いてもよいし、三角関数、対数関数などの既存の関数を掛け合わせることによりこの処理を実行できる。図７（ｄ）は、図７（ｃ）の減衰処理後の各ブロックを重ね合わせることにより早や聴き用音声データを生成する様子を示したものである。重ね合わせた分だけ全体のデータの長さが短くなり、それだけ速いスピードになる。
【００１１】図８は、減衰処理の仕方を説明する概念図である。図８（ａ）は、各ブロックの終わり部分の減衰処理を示し、図８（ｂ）は、各ブロックの始まり部分の減衰処理を示している。図において矢印で示す振幅に対して所定の関数を掛け合わせて減衰処理を行う。図８では、直線関数（一次関数）であって、ブロックの端においてゼロとなり、最も中央よりの位置で１となる関数を選んでいる。この減衰処理を例えば、三角関数で行う場合には、（１＋ｃｏｓｘ）／２をブロックの終わりの部分で用い、（１−ｃｏｓｘ）／２をブロックの始まりの部分で用いることができる（ここで、便宜上ブロックの端の部分で重ね合わせるべき部分の長さをπ（パイ）とする）。ゼロとパイとでそれぞれ１及び０の値をとり、単調関数であるからである。
【００１２】図９は、２倍速の場合の音の生成の仕方を示す概念図である。上で述べたように２倍速の早や聴き用音声データを作成するには、ブロックの長さの２分の１を重ね合わせる。図９（ａ）は、元の音声データをサンプリングして互いに同じ長さのブロックに分けた様子を示す。図９（ｂ）は、隣り合うブロックがブロック長の２分の１ずつ重なり合う様子を示す。図９（ｃ）は、生成された早や聴き用音声データの様子を示す。
【００１３】図１０は、３倍速の場合の音の生成の仕方を示す概念図である。３倍速の早や聴き用音声データを作成するには、ブロックの長さの３分の２を重ね合わせる。図１０（ａ）は、元の音声データをサンプリングして互いに同じ長さのブロックに分けた様子を示す。図１０（ｂ）は、隣り合うブロックがブロック長の３分の２ずつ重なり合う様子を示す。図１０（ｃ）は、生成された早や聴き用音声データの様子を示す。２倍速、３倍速の例を示したが、４倍速、５倍速なども実用に耐ええる音質のものが得られる。また、その間の速度も有理数ならばいくらでも細かく作成可能である。例えば、２．７倍速とか、３．８倍速とかも可能であり、さらに細かいものについても可能である。その場合にも、重ね合わせるブロック長の割合については、（ｎ−１）／ｎの数式が有効である。
【００１４】図１１は、０．５倍速の場合（遅聴き）の場合の音の生成の仕方を示す概念図である。遅聴きの場合は、図１１（ａ）のサンプリング、ブロック化の後、図１１（ｂ）に示すように、隣り合うブロックの間に所定の長さの空間を設ける。そして、図１１（ｃ）で、その空間に直前ブロックから所定の長さをコピーしてそれに減衰処理を加えたものを持ってくる。図１１（ｄ）で直後のブロックから所定の長さをコピーしてそれに減衰処理を加えたものを持ってくる。図１１（ｂ）、図１１（ｃ）、図１１（ｄ）の三つを重ね合わせて、遅聴き用音声データ図１１（ｅ）を得る。ここで、図１１（ｂ）で隣り合うブロック間に設ける空間の長さをブロック長のｍ倍（ｍは１以下の有理数）としたとき、できあがる遅聴き用音声データは、１／（１＋ｍ）倍のものとなる。ｍを１として０．５倍速、ｍを０．５として０．６７倍速、ｍを０．２５として０．８倍速が得られる。
【００１５】図１２は、早や聴きの音の生成の仕方を示すフローチャートである。ｓｔｅｐ６１０で音のサンプリングをして、ｓｔｅｐ６２０でひとつのブロックにまとめる。ｓｔｅｐ６３０でブロックの端部を倍速に合わせて減衰処理する。ｓｔｅｐ６４０でブロックの端部を重ね合わせ、早や聴きデータを生成する。
【００１６】図１３は、早や聴きの音の再生を早や聴きデータを記録した記録媒体により実行する場合の実行の仕方を示すフローチャートである。末端ユーザが本発明にかかる早や聴き用音声データを再生するのに、すでに録音された記録媒体の再生による場合は、音響再生装置（例えば音楽ＣＤ再生装置）に記録媒体をセットする（ｓｔｅｐ７１０）。そして、スタートボタンを押す（ｓｔｅｐ７２０）。そして、繰り返す場合はリピートボタンを押す（ｓｔｅｐ７３０）。
【００１７】図１４は、早や聴きの音の再生をプログラムで実行する場合の練習設定の仕方を示すフローチャートである。この設定は、末端ユーザが自らのレベル、練習の進展度などを把握した上で選択により、なされる。早や聴きタイプの選択（ｓｔｅｐ８１０）、自然音の選択（ｓｔｅｐ８２０）、練習時間の設定（ｓｔｅｐ８３０）、スタート（ｓｔｅｐ８４０）からなる。詳細については、図１５を参照しつつ説明する。
【００１８】図１５は、早や聴きの音の再生をプログラムで実行する場合の練習設定画面を示すハードコピーである。早や聴きタイプＡ，Ｂ，Ｃは、各ユーザが自ら日ごろよく用いるパターンを登録しておくものである。例えばタイプＡは、いきなり３倍速から入り、２．５倍速、２倍速、１．５倍速と落としていくパターンであるとか、タイプＢは、１倍速から、１．５倍速にあげて、２倍速、２．５倍速、３倍速とあげたあと、２倍速に落とすタイプであるとか、といった登録をしておくことができ、それを画面上のラジオボタン選択により選択できる。音声データのファイル選択をファイル名のタイプ（あるいは参照検索）により選び、練習時間の入力、倍率の時間軸に関するデザインを自ら設定するなどの設定をこの画面でした上でスタートボタンを押すと、プログラムが自らユーザの設定に従った早や聴き用の音声データ生成を実行し、それを再生する。
【００１９】なお、自然音の選択とは、風の音、波の音、小鳥の音、木々のざわめきなどの自然音のことであり、これらもユーザの選択により種類を選べる。また、早や聴きや遅聴きにかかわらず自然音に関しては、標準のスピードで再生することが望ましい。本発明の発明者は、実験により早や聴きの音声データと自然音の標準スピードの音とを混合して人間が聴いた場合には、より聴きやすいことがわかった。したがって、自然音の混合は、早や聴き用音声データの生成後、標準スピードの自然音とミックスするのがよい。また、自然音には、人間が音声に用いる波長以外の音も含まれている。できるだけ、音の再生にはアンプ、スピーカーなども２５ｋＨｚ以上の音が再生できるものを利用したほうがよいことも実験によって判明した。
【００２０】図１は、小鳥などの動画表示についてのフローチャートである。動画は、小鳥のさえずり、海の波、小川のせせらぎなどの自然のものが望ましい。さらに、自然の中をドライブして写り行く車窓の風景を動画として記録したものを使うこともできる。その際に、早や聴きのスピードが速くなるほど、車のスピードも速くなるように対応付けることがさらに望ましい。
【００２１】図２は、モード設定についてのフローチャートである。自然音と動画のファイルの具体例を表１に示す。さらに、それらを格納するフォルダについて表２に示す。
【００２２】
【表１】
2004133232.tif 000003
【００２３】
【表２】
2004133232.tif 000004
【００２４】従来は、速音を聴くときに、自然音のみでアルファ波を脳から出すように行っていた。しかし、速音を聴いている時に、見ている目の情報で、脳がアルファ波状態になりえることもわかってきた。そこで、自然音による脳内のアルファ波発生効果に加えて、表示画面にて自然の動画を表示して自然の持つ１／ｆ特性の揺らぎ効果を、視覚からも入れて、耳と目とからアルファ波状態を作り出し、早や聴きの効果を高めるようにした。また、表示画面に表示をすることにより学習中の目のやり場を作ることができ、集中力を高める効果もある。
【００２５】図３は、イコライザ処理を加える場合のフローチャートである。
【００２６】図４は、イコライザ処理のモード設定についてのフローチャートである。ここでは、通常、胎児音、語学耳の三つのモードの選択を可能としている。胎児音は、胎児が母胎中で感ずる音の周波数帯域に変換したものである。語学耳は外国語の周波数帯域を強調したイコライズ処理を施したものである。表３は、胎児音モードで８キロヘルツ以上のみ発生するようにした例のデータ構造を示すものである。また、表４は、語学耳モードで２キロヘルツ以上を強調した例を示すものである。
【００２７】
【表３】
2004133232.tif 000005
【００２８】
【表４】
2004133232.tif 000006
【００２９】図５は、各民族言語のパスバンドを示す図である。この図に示すように、日本語の使う周波数帯域は、英語米語などの外国語に比べるとかなり異なる。このことが日本人の語学学習に障壁となっているという事実が最近知られてきている。早や聴きを効果的に行う際には、この外国語で使っている周波数帯域の音を強調するエコライズ処理をすることにより、語学を学習する際の障壁を取り除く効果が期待できる。このようなエコライズ処理をした上で音声を再生するモードを語学耳と呼ぶ。
【００３０】胎児音は、エコライズ処理により８キロヘルツ以上の音しか聞こえない状態にするモードをいう。この状態では、母親の胎内に戻った感覚を持つことができる。フランス人の聴覚博士であるトマティス博士は、耳の蘇生がこれにより可能であると説いている。
【００３１】図６は、人体と音の周波数との関係を示す図である。人体の色々な部分が音のどのような周波数帯域と関連するかを研究して療法に役立てる（モーツァルト療法）事も行われている。それによると８キロヘルツは脳の周波数帯域であり、胎児音は、脳にエネルギーを与える音であるという理解をすることもできる。
【００３２】インターネットからの自然動画（音）のダウンロードをするようにして、世界中のさまざまな自然の動画、自然の音（小鳥のさえずり、海の波の音、小川のせせらぎなど）を早や聴きの際に用いることができるようにするのが望ましい。
【００３３】自然音の中でも、特に、（母親の）心臓音を早や聴きの際に、聞くことにより、鬱症の治療に役立てることもできる。
【００３４】
【効果】本発明は以上のように構成されているから、音と映像との相互作用を考慮した早や聴きシステムの構築が可能となった。
【図面の簡単な説明】
【図１】小鳥などの動画表示についてのフローチャートである。
【図２】モード設定についてのフローチャートである。
【図３】イコライザ処理を加える場合のフローチャートである。
【図４】イコライザ処理のモード設定についてのフローチャートである。
【図５】各民族言語のパスバンドを示す図である。
【図６】人体と音の周波数との関係を示す図である。
【図７】早や聴き用音声データの生成の仕方を説明する概念図である。
【図８】減衰処理の仕方を説明する概念図である。
【図９】２倍速の場合の音の生成の仕方を示す概念図である。
【図１０】３倍速の場合の音の生成の仕方を示す概念図である。
【図１１】０．５倍速の場合（遅聴き）の場合の音の生成の仕方を示す概念図である。
【図１２】早や聴きの音の生成の仕方を示すフローチャートである。
【図１３】早や聴きの音の再生を早や聴きデータを記録した記録媒体により実行する場合の実行の仕方を示すフローチャートである。
【図１４】早や聴きの音の再生をプログラムで実行する場合の練習設定の仕方を示すフローチャートである。
【図１５】早や聴きの音の再生をプログラムで実行する場合の練習設定画面を示すハードコピーである。
【符号の説明】
ｓｔｅｐ　６１０　　サンプリングする。
ｓｔｅｐ　６２０　　ひとつのブロックにまとめる。
ｓｔｅｐ　６３０　　ブロックの端部を、倍速に合わせて、減衰処理する。
ｓｔｅｐ　６４０　　ブロックの端部を重ねあわせ、早や聴きデータを生成する。
【図１】
2004133232.tif 000007
【図２】
2004133232.tif 000008
【図３】
2004133232.tif 000009
【図４】
2004133232.tif 000010
【図５】
2004133232.tif 000011
【図６】
2004133232.tif 000012
【図７】
2004133232.tif 000013
【図８】
2004133232.tif 000014
【図９】
2004133232.tif 000015
【図１０】
2004133232.tif 000016
【図１１】
2004133232.tif 000017
【図１２】
2004133232.tif 000018
【図１３】
2004133232.tif 000019
【図１４】
2004133232.tif 000020
【図１５】
2004133232.tif 000021