(57)【要約】  テキストから音声を合成する際に使用されるテキストを音響的にコード化する方法及びシステムが開示され、本方法は、表現力のある意味を伝えるよう、発声されるテキストに付与する所望の韻律を話し手に示す、１つ以上の図形記号を用いて発声されるテキストをマークすることを含む。マーク付けは、それぞれ、書かれたテキストで用いられ得る可視韻律表示書記素と、ディジタルドメイン内で機能する、これに対応するディジタル音素とを有する、書記素／音素の対を有し得る。本発明は、口語本及び雑誌、ドラマ、及び他の娯楽において、ボイスメールシステム、電子的に使用可能な器具、自動車、コンピュータ、ロボットアシスタント、ゲームなどを含む広範囲な適用形態について、人の心に訴える、人間らしい機械音声を生成するのに有用である。
2007527555.tif 000002
【特許請求の範囲】
【請求項１】
テキストから音声を合成する際に使用される前記テキストをマーク付けする方法であり、
前記テキストを発声する際に用いられる所望の音声特性を話し手に示す、１つ以上の図形記号を用いて、発声される前記テキストをマークすることを含む方法であって、
前記話し手により前記発声されるテキストに付与される所望の韻律を示す図形記号音響コードとして用いることを特徴とする方法。
【請求項２】
前記付与された韻律が、テンポと、イントネーションパターンと、リズムと、音楽性と、振幅と、強調及び息継ぎのための休止と、単語及びフレーズの正式及び略式調音とからなる群から選択される、１つ以上の韻律要素を有することを特徴とする請求項１に記載の方法。
【請求項３】
図形韻律記号を用いて可視テキストをマークすること又は電子バージョンの前記図形記号を用いて電子テキストを電子的にマークすることを含み、
前記電子的にマークされたテキストが、人が読み取ることのできる図形でマークされたテキストとして表示可能又は印刷可能であり、出力される音声の韻律を制御できるやり方で所望の韻律を音声シンセサイザに通信するのに効果的であることを特徴とする請求項２に記載の方法。
【請求項４】
発声される前記テキストが、所望の韻律による、英字、二重母音、音節、又は他の音声要素の発音に必要なピッチ制御を示すグラフィカルシンボルと、上昇するピッチを示す上昇曲線と、下降するピッチを示す下降曲線と、上昇し次いで下降するピッチ又は下降し次いで上昇するピッチを示す曲折アクセント記号と、不変のピッチを示すレベル持続部と、第１の英字が準備されたことを示す、密接に関連した又は同一のサウンドの子音が後に続く第１の英字上の前方斜線と、他の英字により互いに分離された英字が該英字の間に休止を置かずに連続して発音されることを示す浅いＵ形のリエゾンハンモックと、それぞれ、ティンパニのドラムビート、Ｄ、Ｂ、及びＧ、及びスネアドラム、ベース、及びトムトムのドラムビート、Ｔ、Ｐ、及びＫを含む再生可能な打楽器をマークするための１本の下線であり、マークのない子音は表示不可能であることと、再生可能な弦楽器Ｎ、Ｍ、Ｖ、及びＺ、木管楽器、Ｌ、ＮＧ、ＴＨ、及びＺＨ、及び（無声）音響効果Ｆ、Ｓ、ＳＨ、及びｔｈとしてマークする２本の下線であり、マークのない子音は表示不可能であることと、Ｈがまず発せられるべきであり、次にＷが続き、いずれも再生されないことを示す、発声される前記テキスト中の前記英字の組合せＷＨの上又はこれに隣接してマークされた英字の組合せ「ｈｗ」と、「Ｙ」又は「Ｗ」が別の母音の前に発生した場合には、音声連続性が１つの単語から次の単語へ又は１つの音節から次の音節へと維持されるべきであることを示すＹとＷとの連結語と、前記ＹとＷとの連結語がそれぞれ、Ｕ中、Ｕの近く、又はＵの上でそれぞれマークされた小さいＹ又はＷの英字と共に、前記Ｙ又は前記Ｗの下からそれぞれ以下の母音へのハンモック状の浅いＵルーピングを有することとからなる群から選択される前記韻律グラフィカルシンボルの、１つ、２つ以上、又はすべてを用いてマークされ、母音の前の子音は、発声されるが、再生可能であるとしてマークされないという規則を有することを特徴とする請求項１、２、又は３に記載の方法。
【請求項５】
発声される前記テキストをマーク付けすることが、発声される勢いが、単語の間に中断又は休止又は休みを置かずに１つの結合された英字から次の結合された英字に進むべきであることを示す、前記結合された英字の下及びこの間にリエゾンハンモック状の線を有する直接結合と、第１の子音は再生され、第２の子音は再生されないことを示す、前記第１の子音の１本の又は２本の下線と組み合わせられたリエゾンハンモックを有する再生及び結合と、準備され、かつ前記第１の子音と前記第２の子音との間の結合を示す第２の子音とのリエゾンハンモックに組み合わせられた、子音である第１の子音上の前方斜線を有する準備及び結合とからなる群から選択される前記韻律グラフィカルシンボルの、１つ、２つ以上、又はすべてを用いてマークされることであり、再生可能な子音が、下線を用いて示されることを特徴とする請求項１、２、３、又は４に記載の方法。
【請求項６】
発声される前記テキストに隣接して前記韻律グラフィカルシンボルを置くこと、前記テキストの直ぐ上の行内で前記韻律グラフィカルシンボルを調整すること、前記テキストの下に選択的に前記韻律グラフィカルシンボルを置くこと、又は前記テキストの上に及び前記テキストの下に前記韻律グラフィカルシンボルを置くことを特徴とする請求項１、２、３、４、又は５に記載の方法。
【請求項７】
ライン中の前記テキストをレンダリングすることにより、発声される前記テキストをマーク付けすることと、前記テキストの上に理解を容易にする発音表記法をマークすることと、前記テキストの下に韻律グラフィカルシンボルをマークすることと、前記理解を容易にする発音表記法ラインの上にピッチ基準線をマークすることと、所望のピッチの変化及び強調を示す前記ピッチ基準線の上にさらなる韻律記号をマークすることとを特徴とする請求項１、２、３、４、又は５に記載の方法。
【請求項８】
前記ピッチ基準線がＹバズピッチラインを有することと、より小さい強勢を示すより小さいドットとより大きい強勢を示すより大きいドットとを使用して、前記Ｙバズピッチラインの上に所望のイントネーションパターンをマークすることとを特徴とし、前記ドットが、話し手のＹバズピッチラインに対する所望のピッチを示す前記Ｙバズピッチラインの上のレベルで位置決めされる請求項７に記載の方法。
【請求項９】
テキストに韻律的なマークを自動的に適用するための方法であって、
少なくとも１つの計算言語学アルゴリズムを用いて、発音される前記テキストを識別し、マークし、所望の韻律発音を示すことを含むことを特徴とする請求項１、２、３、４、又は５に記載の方法。
【請求項１０】
所望の発音サウンドに対応するコード変数を用いて、前記マーク付けされたテキストを合成音声として出力するために音声シンセサイザに入力を指定するのに用いることが可能な音響変数のための値を生成することを含むことを特徴とする請求項９に記載の方法。
【請求項１１】
前記図形記号マークによって示される韻律を用いて発声された音声要素である、ディジタル方式で録音された音声要素を有する音響ライブラリを用いることを含むことを特徴とする請求項１、２、３、４、又は５に記載の方法。
【請求項１２】
英語と、アメリカ英語と、フランス語と、スペイン語と、ドイツ語と、日本語と、ロシア語と、中国語と、アラビア語と、ヒンディ語と、図形記号セット及び規則に基づく文法を有する文語及び口語と、前述の言語の任意の１つの言葉遣い及び専門的な部分集合とからなる群から選択される言語において実施されることを特徴とする請求項１１に記載の方法。
【請求項１３】
前記韻律グラフィカルシンボルを利用して、音声コードでマークされたテキストに従って正確に発音された音声を含む、発音された音声のデータベースを作成するための前記韻律グラフィカルシンボルを用いて前記テキストのマーク付けに従って、１人以上の訓練された人がテキストを正確に発音することにより、合成音声出力、任意にフォルマント音声出力での人間らしいサウンドを促進することを含むことを特徴とする請求項１、２、３、４、又は５に記載の方法。
【請求項１４】
前記韻律グラフィカルシンボルをディジタル方式でレンダリングすることと、機械で発声されるテキストの電子マーク付けのためにシンセサイザソフトウェアにおいて前記グラフィカルシンボルを用い、これにより、出力される音声への韻律要素のディジタルドメインの導入が促進される又はガイドされることとを特徴とする請求項１３に記載の方法。
【請求項１５】
英字、単語、フレーズ、文、段落、及びより長いテキストの１つ以上を有する、テキストのための前記図形表記法に対応する録音された音声が、データベース内にディジタル化され、特有のテキスト及び前記テキストに関係する前記図形表記法に対応する特有の音声データの関係を指定するためのアルゴリズム又はメトリクスを提供するよう分析されることを特徴とする請求項１４に記載の方法。
【請求項１６】
前記提供されたアルゴリズム又はメトリクスの１つ以上を利用して、指定された韻律を用いて音声として合成される特定のテキストについて人の音声を模倣するサウンドを再作成するために音声シンセサイザに入力パラメータを提供することを特徴とする請求項１５に記載の方法。
【請求項１７】
前記音声シンセサイザへの音響コード化変数入力によって制御される音声シンセサイザであって、
前記音響コード化変数が、所望の韻律発音を有する録音された人の音声を生成するのに用いられる韻律仕様に対応し、前記録音された人の音声を用いて、前記所望の韻律発音を具現化する合成音声出力が提供されることを特徴とする音声シンセサイザ。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、新規な韻律音声テキストコードを用いた、通常テキスト入力からの、合成又は人工音声を提供する方法及びコンピュータシステムに関する。
【背景技術】
【０００２】
合成、人工、又は機械音声は、たとえば、口語本及び雑誌、ドラマ、及び他の娯楽において、ボイスメールシステム、電子的に使用可能な器具、自動車、コンピュータ、ロボットアシスタント、ゲームなどの、多くの有用な適用形態を有する。本発明は、任意のこのようなシステムの実装形態にも広く適用されるものであるが、これについては、本明細書の以下において明らかとなろう。
【０００３】
人工音声を生成するための有用な公知のシステムが、一般に、連結システム又はフォルマントシステムとして記述されている。連結人工音声システムが、たとえば対話型ボイスメールシステムにおいて使用されており、事前に録音された完全なフレーズ又は文を用いて、許容できる人の音声サウンドを生じさせる。しかし、このようなシステムは、雑誌の記事や本などの、大量の小冊子の未知のテキストの音声への変換には適していない。テキストが機械で読み取られる又はコンピュータシステムによって処理される「オンザフライ」で声によって作り出される又は声のようなサウンドの小さいスライスを合成するフォルマントシステムの方が、このような広範な小冊子に適している。しかし、最近まで、このようなフォルマント音声システムの出力は、機械的で、単調かつ機械のようであり、評判の悪いものであった。
【０００４】
センシメトリクス社（Ｓｅｎｓｉｍｅｔｒｉｃｓ  Ｃｏｒｐｏｒａｔｉｏｎ）（マサチューセッツ州ケンブリッジ(Ｃａｍｂｒｉｄｇｅ、ＭＡ））に譲渡されたスティーブンス（Ｓｔｅｖｅｎｓ）による米国特許第５,７４８,８３８号明細書では、声門モデリングを使用し、マッピング関係を使用して、１０以下の高レベルパラメータを判断し、３９の低レベルパラメータに変換する音声合成方法について開示している。これらのパラメータを音声シンセサイザに入力することにより、任意の特定の音声を表すのに５０〜６０のパラメータを入力する必要がある先行技術によるシステムと比べて、音声をより簡単に合成できる。スティーブンスの開示は、その使用目的については有用なものであるが、スティーブンスが用いている声を解剖するやや機械的なモデリングは、人の心に訴える人間的な音質を有する音声出力を生じない。また、スティーブンスは、望ましい韻律を追加したり、合成的又は人工的に生成された音声の韻律を制御し修正したりする手段を提供又は提案していない。
【０００５】
共同所有される、アディソン（Ａｄｄｉｓｏｎ）らによる米国特許第６,８４７,９３１号明細書、同時係属中の米国特許出願第１０／３３４,６５８号明細書、（以下、アディソン「‘６５８」と称する）、及び国際公開第２００３／０６５３４９号パンフレットに記述されているように、合成されるテキストが、理解を容易にするための発音ガイドとしての発声訓練表記法を用いてマーク付けされることがある。アディソン「‘６５８」は、音声合成の表現構文解析を提供し、訓練された話し手を用いて、利用可能な音声要素データベースを生成し、テキストから音声の表現合成を実施する。レサック（Ｌｅｓｓａｃ）システムも、他の公知のシステムも、出力される音声の韻律を制御できるようなやり方で所望の韻律を音声シンセサイザに通信するための簡単な方法を提供していない。
【０００６】
マーガレット・ブレンダギャスト・マクリーン（Ｍａｒｇａｒｅｔ  Ｐｒｅｎｄｅｒｇａｓｔ  ＭｃＬｅａｎ）による「Ｇｏｏｄ  Ａｍｅｒｉｃａｎ  Ｓｐｅｅｃｈ」（Ｅ．Ｐ．  Ｄｕｔｔｏｎ  ＆  Ｃｏ．，Ｉｎｃ．（１９５２）（以下「マクリーン」と称す）では、一本調子又は異様な又は方言的なイントネーションなどの欠陥を避けるために採用される、所望のイントネーションパターン、又は連結音声中のピッチの変更を読者に指示するために、テキストをマークする表記法システムについて記述している。音声をコンピュータ化するが、芸術の観点からは何の試みも行わないという、このような近代以前の作業においては、音声合成における今日の課題を解決するためには、マクリーンのイントネーションパターンが有用であることを示唆している。さらに、マクリーンのイントネーションパターンは、ピッチを基準とするどのような手段もなく、このため、異なる話し手が、一貫性をもってイントネーションパターンを利用することが困難である。
【０００７】
上記の背景技術の記述には、本発明以前の関連技術においては公知でないが、本発明によって実現される、洞察力、発見、理解又は開示、又は開示との関連が含まれる。本発明のいくつかのこのような寄与が、本明細書において特に指摘されているが、本発明の他のこのような寄与についても、それらの文脈より明らかとなろう。ある文献が本明細書に引用されているからといって、本発明とはかなり異なるその文献の分野が、本発明の１つ又は複数の分野に類似していると認めるものではない。
【発明の開示】
【発明が解決しようとする課題】
【０００８】
したがって、出力される音声の韻律を制御できるようなやり方で所望の韻律を音声シンセサイザに通信するための簡単な方法が必要となる。
【課題を解決するための手段】
【０００９】
上記の又は他の目的を満たすために、本発明は、テキストから音声を合成する際に使用されるテキストを音響的にコード化する方法を提供し、本方法は、１つ以上の図形記号を用いて発声されるテキストをマークして、発声されるテキストに付与する所望の韻律を話し手に示すことを含む。本発明はまた、適切な韻律を指定する表現力のある意味を用いてテキストをマーク付けするための韻律コード又は表記法を含む、音声合成方法及びシステムを提供する。マーク付けは、書記素／音素の対を有し、このそれぞれが、書かれたテキストで用いられ得る可視韻律表示書記素と、ディジタルドメイン内で機能する、これに対応するディジタル音素とを有する。
【００１０】
付与する韻律は、テンポと、イントネーションパターンと、リズムと、音楽性と、振幅と、強調及び息継ぎのための休止と、単語及びフレーズの正式及び略式調音とからなる群から選択される、１つ以上の韻律要素を有し得る。
【００１１】
本方法は、図形韻律記号を用いて可視テキストをマークすること、又は電子バージョンの図形記号を用いて電子テキストを電子的にマークすることを含み、この電子的にマークされたテキストは、人が読み取ることのできる図形でマークされたテキストとして表示可能又は印刷可能である。
【００１２】
別の態様においては、本発明は、音声シンセサイザに入力された音響コード化変数によって制御される音声シンセサイザを提供し、この音響コード化変数は、所望の韻律発音を具現化する合成音声出力を提供する所望の韻律発音を有する、録音された人の音声を生成するのに用いられる韻律仕様に対応する。
【００１３】
本発明の一実施形態によれば、本明細書の以下に記述されているように、再生可能な子音及び再生不可能な子音の音声学、構造、及び名称のための新規な表記法システム、及び所謂４つの「レサック」の曖昧語（ｎｅｕｔｒａｌ）が実現される。これらを使用することにより、図形でマーク付けされた新規なテキストが合成される。
【００１４】
さらに、本発明は、テキスト／音声（本明細書においては、時に「ＴＴＳ」と称する）音声又は音認識適用形態に有用な、新規な手順及びシステムを提供する。この手順には、
音声合成における韻律音声規則の生成及びそれらの適用形態と、
韻律音声規則の音響デモンストレーションと、
韻律音声要素の音響データベースライブラリと、
ＴＴＳのためのソフトウェアの例と、
ＴＴＳの聞き手による試験と、の１つ以上又はすべてが含まれる。
【００１５】
以下、添付図面を参照しながら、本発明のいくつかの実施形態、及び本発明の製作及び使用、及び本発明を実施するための最良の形態を、例示として詳細に記述する。なお、参照文字は、いくつかの図を通じて同様の要素を表す。
【発明を実施するための最良の形態】
【００１６】
本発明以前には、サウンドを指定するための公知のシンセサイザ「コード」もなければ、コードに作成させる、任意の測定セットのサウンド表示もなかった。したがって、本発明では、熟練した音声実践者が、言わば「シンセサイザ」となり、韻律的にマーク付けされたテキストのサンプリングを発音して、所望の発音のための音響値を取得できるようにすることが実現される。これらの音響値は、本発明に従って音声合成に使用され得る、新規な韻律音響データベースライブラリを準備するのに用いられる。上述の制御されたデータベース録音方法と共に、本明細書に記述されている新規な図形マーク付け記号を用いて、イントネーションパターン、リズム、強調及び息継ぎのための休止、それに単語及びフレーズの正式及び略式調音などの有用な韻律要素を、合成又は人工音声に組み込むことが有益であろう。
【００１７】
公知の合成音声出力に代表的な、魅力のない機械的な音質を改良するために、本発明は、人間らしい音声出力を提供するために、適切な音響要素を用いるよう適応された規則セットを用いて、音声に機械的に組み立てられ得る音響要素のデータベースを生成するのに使用される、制御された又は標準化された人の音声入力を提供する、システム、方法、及び新規なテキストコード化技術を提供する。
【００１８】
人の音声入力及び規則セットは、１人以上の専門的な音声実践者の教示を具現化することが望ましい。本発明の一実施形態においては、公認されている音声訓練指導者の教示が用いられる。
【００１９】
演劇及び演説についてのアーサー・レサック（Ａｒｔｈｕｒ  Ｌｅｓｓａｃ）の教示が例として本明細書に言及されているが、他の音声訓練指導者又は音声訓練の他の団体の教示が用いられることもあり、特に英語以外の言語においては、多くの場合、かなり異なる音声訓練教示を用いることが理解されている。このような他の音声訓練技術は、本明細書の教示より明らかであろうが、人の心に訴える韻律文字を有する、一貫性のある容易に理解される音声出力、たとえば楽譜記号を提供する規則セットを有することが望ましい。音声実践者とは、話す能力について、通常専門的な発声スキル及び知識を用いる、関連する発声訓練又は指導において十分な教育を受けた個人、たとえば発声教師、演説家、又は役者であると理解されたい。
【００２０】
レサック方法の訓練を受けた音声実践者は、音声をオーケストラのサウンドとして考える。即ち音声は音楽であると考えるようになる。テキストは、アーサー・レサックの本「人の声の使用及び訓練（Ｔｈｅ  Ｕｓｅ  Ａｎｄ  Ｔｒａｉｎｉｎｇ  Ｏｆ  Ｔｈｅ  Ｈｕｍａｎ  Ｖｏｉｃｅ）」（メイフィールト出版社（Ｍａｙｆｉｅｌｄ  Ｐｕｂｌｉｓｈｉｎｇ  Ｃｏｍｐａｎｙ、第３版、１９９７）（以下、「アーサー・レサックの本」と称する）のパートＩＩの６１ページより記述されている、３要素の相互作用として音声パラメータを識別する。レサックによって識別される３つの音声パラメータは、子音、音調、及び構造エネルギーである。これらは、子音「オーケストラ」、声自体の音楽としての音調性、及び子音及び母音に対する構造要素の相互作用としての構造エネルギーとして導入される。アーサー・レサックは、声のｅＮｅＲＧｙとしての３つの音声パラメータについて言及している。レサックは、これらのすべてが、発音されるテキストから導き出されることに留意している。つまり、全体として考慮されるテキストの内容、単語の意味及びサウンド、それらの文法上の関係、用いられる構文、及びテキストによって伝えるメッセージなどの要因を示唆している。
【００２１】
人の音声はアナログサウンドであり、話し手は「連続した楽器として声を再生」し得るが、アーサー・レサックの本の、特に１４９及び１７０〜１７３ページに記述されている連続可変表現音声の概念を教示するには、連続した文中で個別の点をとることが有用であり、このテキストは、連続した構造及び音調範囲内の「点」の値を例示している。
【００２２】
レサックシステムは、個々の音声要素、顕著な音素、複音、及び所謂Ｍ−ａｒｙ  ｐｈｏｎｅについての理解を容易にするために所望の発音をコード化するよう、ある程度の英数字表記法を提供する。これらの音声要素は、主に、個々の母音及び子音、二重母音、及び子音の混合語である。
【００２３】
ここで、図１を参照すると、マーク付けされたテキストは、レサック表記法に従って発音のためにマーク付けされた単語のテキスト行１０を有し、英数字記号の表記法行１２は、テキスト行１０の直ぐ上に位置決めされる。たとえばアーサー・レサックの本に記述されているレサックシステムに精通した個人は、行１２の表記法によって示されている発音指示を理解することができ、これらを適用して、個人毎に一貫性をもって行１０のテキストを発音することができる。本発明を実践する際に用いられるこのような表記法のサンプルが、以下の表Ａ〜Ｅに示されている。テキストが上手にマークされ、話し手がマーク付けの指示を適切に実施すると、明瞭かつわかりやすい音声が生じる。しかし、明瞭かつわかりやすいものであっても、音声は、話し手又は音声源により、やや単調又は機械的になることがある。
【００２４】
2007527555.tif 000003
2007527555.tif 000004
2007527555.tif 000005
2007527555.tif 000006
2007527555.tif 000007
わかりやすい発音を示すレサック図形表記法の有用性が、２００２年１２月３１日に出願の「テキストから音声に（ＴＥＸＴ  ＴＯ  ＳＰＥＥＣＨ）」と題された、アディソンらによる米国特許出願第１０／３３４,６５８号明細書に記述されているが、例が記載されておらず、図１に示されているマーク付けの特定の実施形態も記述されていない。
【００２５】
ここで、図２を参照すると、本発明によれば、示されているグラフィカルシンボルが有用であり、話されている過程において所望の韻律を得るための、英字、二重母音、音節、又は他の音声要素の発音に必要なピッチ制御を示す。
【００２６】
本発明に用いられる韻律コードは、テキストの配列、１単語内の英字の配列、１文内の単語の配列、１文の固有の配列、１段落中の文の配列の場所、及び段落の配列の一部としての段落の位置に関係する発音コードである。これらの考慮すべき点の任意の１つ以上により、何が適切な韻律であるか、又は何が適切な韻律でないか、又は何が、テキストに適用するのに適した、強勢、ピッチ、又はタイミングの韻律要素であるかが判断される。適切な韻律は、配列が完了するまで明らかでないこともある。本発明により、これらの考慮すべき点を鑑みて、適切な韻律をテキストに適用することができる。本発明において用いられるコードは、調音的なサウンド作成原理及び文脈によって判断され、適切な韻律を指定することにより、表現力のある意味について修正される。
【００２７】
上昇曲線（ｕｐｇｌｉｄｅ）２０、下降曲線（ｄｏｗｎｇｌｉｄｅ）２２、２つの曲折アクセント記号２４Ａ及び２４Ｂ、及びレベル持続部２６が例示されている。それぞれの図形表記法２０〜２６は、開始ピッチを示すドット２８などの左側のドットと、ドット２８の右に延びた上向きの尾部３０などの尾部とを有する。
【００２８】
尾部３０の形状は、音声要素がはっきりと発音されるにつれてピッチがどのように変化するかを示している。上昇曲線２０の上向きの尾部３０は、上昇するピッチを示している。下降曲線２２は、下降するピッチを示す下向きの尾部３２を有し、レベル持続部２６は、持続している不変のピッチを示すレベルに留まっている。曲折アクセント記号２４Ａは、ピークまで上昇し次いで下降するピッチを示し、曲折アクセント記号２４Ｂは、この反対を示している。韻律グラフィカルシンボル２０〜２６は、発声されるテキストに隣接した任意の都合の良い場所に、たとえばテキストの直ぐ上の列に調整されて、又はテキストの下に選択的に、置かれ得る。テキストは、本明細書に記述されている図形発音記号の付属語句としてテキスト又はハイフンで分割され得るが、通常タイプされた、キー入力された、又は書かれた、テキストの外観を維持することが好ましい。
【００２９】
本明細書の以下に記述する、この後の図（図５以降）においては、英字上の前方斜線３６を用いて、この英字が一部のみ発せられる、「準備される」ことが示される。何故なら、以下の子音は、これに密接に関連した又は同一のサウンドを有するからである。また、結合された英字及び本明細書における参照符号４０の下に及びこれらの間にハンモック状の線（ｈａｍｍｏｃｋ  ｓｔｒｕｎｇ）の形態を有する、浅いＵ形の結合記号を用いて、他の英字により互いに分離されており、かつ通常隣接した単語中にある英字は、連結調音を連続して発音すべきであることが示される。以下、図９に関連して、直接結合をマークする結合記号４０の使用についてより詳細に記述する。
【００３０】
一般に、本発明の一実施形態によれば、子音をマーク付けする場合、母音の前の子音が発声されるが、「再生可能ではない」。何故なら、音声が母音へと直接流れる時に、非常に短く形成されるだけだからである。この場合、「再生可能」とは、話し手が、再生可能な子音をはっきりと発音する時に、一時停止、休止、又はピッチの変化を用いて、再生可能な子音をはっきりと発音すると、所望の韻律効果が作られ得ることを意味する。
【００３１】
この実施形態においては、無音の子音は、図形でマークされることはないが、コンピュータソフトウェアに残されている。息継ぎ又は解釈のための休止の前の最後の子音が、再生可能であるとマークされる。Ｒトロンボーンは、再生可能ではなく、他の任意の子音の前に、又は最終時に、息継ぎ又は解釈のための休止の前にマークされることはない。この特色はまた、コンピュータが理解するようプログラムされる場合の特色でもある。
【００３２】
ここで、図３を参照すると、例示されている韻律グラフィカルシンボルの実施形態には、以下のように、子音をマークすることが含まれる。即ち、
それぞれ、再生可能な打楽器、たとえば、ティンパニのドラムビート、Ｄ、Ｂ、及びＧ、及びスネアドラム、ベース、及びトムトムのドラムビート、Ｔ、Ｐ、及びＫをマークするための１本の下線、
再生可能な弦楽器Ｎ、Ｍ、Ｖ、及びＺ、木管楽器Ｌ、ＮＧ、ＴＨ、及びＺＨ、及び（無声）音響効果Ｆ、Ｓ、ＳＨ、及びｔｈをマークするための２本の下線である。
【００３３】
マークのない子音は、再生可能でない。つまり、はっきりと発音される時に、一時停止、休止、又はピッチの変化を用いて所望の韻律効果を作るための注意箇所ではない。
【００３４】
子音の混合語に用いられる本発明による韻律図形表記法のための追加規則には、単語から始まる子音の混合語の最初の英字がマークされないことが含まれる。単語中の子音の混合語は、以下のようにマークされ得る。
【００３５】
2007527555.tif 000008
図２〜１０に例示されている本発明を実践する際に有用な図形表記法の例示的実施形態においては、弦楽器（Ｎ、Ｍ、Ｖ、及びＺ）、木管楽器（Ｌ、ＮＧ、ＴＨ、及びＺＨ）、及び（無声）音響効果（Ｆ、Ｓ、ｔｈ、及びＺＨ）として上述した英字又は英字の組合せ及び二重母音は、以下の子音が同一の子音又は同語源の語ではなく、他のすべての子音の前に現れる場合、２本の下線により「再生可能である」とマークされる。同一の子音又は同語源の語がこの後に続く場合には、最初の子音は、子音上の前方斜線を用いて「準備された」としてマークされる。
【００３６】
英字ＮＧには、Ｇがドラムビートが後に続くオーボエを表さない場合、２回下線が引かれ得ることが望ましい。英字ＮＧで終了する単語の一部が単語全体と共通の意味を有する場合は、以下の例などの、オーボエ英字の後にドラムビートがないと考えられる。即ち、
2007527555.tif 000009
図３は、様々な単語内で発生する子音のｓ−混合語中の子音のうちのどれが、再生可能であるか、つまり、韻律を高めるために、延ばされた又は強調された発音、又は楽音が与えられ得ることを示している。たとえば、「ｗｈｉｓｋｅｙ(ウィスキー）」及び「ｈｕｓｋｙ(ハスキー）」においては、Ｓは再生されるが、Ｋは再生されない。Ｋは無音ではなく、休止又は一時停止を置かずに簡単に素早く発せられる。「ｅｎｓｎａｒｅ(わなにかける）」においては、第１のＮ及びＳは再生されるが、第２のＮ及びＲは再生されない。Ｃ及びＴのための１本の下線の後の別個のＮの下に「尾部」３４を有する２本の下線は、再生可能なＮがオーボエとして再生されるが、再生されるべきドラムビートの子音、この場合は二重ドラムビート子音対が続くことを示している。「ｄｉｓｍａｎｔｌｅ（取り外す）」のＴ上でマークされた上端部に球状部３８を有する前方斜線３６は、ＴＬが、「ウッドブロックのカチッという音」としては再生され得ないが、Ｌのための２本の下線で注記されているように、再生可能な子音Ｌが後に続く子音Ｔとして再生され得ることを示している。
【００３７】
図４に示されているように、ＮＧがオーボエそれにドラムビート又は他の打楽器を表す場合、Ｎには尾部４２で２回下線が引かれ、Ｎがオーボエとして再生可能であることを示すが、Ｇには１回下線が引かれ、正しく歯切れ良く発音すべき単語のためのＧティンパニのドラムビート打楽器として再生される必要があることを示す。また図４においては、単語の長さが、下線なしのＧが後に続くＮのための２本の下線及び尾部を用いてマークされ、Ｎはオーボエとして再生可能であるが、Ｇは、正しく歯切れ良く発音すべき単語のための「他の打楽器」シンバルＤＧとして歯切れ良く発音しなければならないことを示す。
【００３８】
ドラムビートは、ドラムビートに無関係であり、かつ口腔解剖学による舌の異なる接触位置で作られ感じられる子音の前に、１本の下線を用いて再生可能であるとしてマークされ得る。殆ど同じ位置であると感じられるように作られた、同一の、同語源の、又は半ば関連する子音の前に、ドラムビートが、子音上の前方斜線を用いて「準備された」としてマークされ得ることが有用である。
【００３９】
ここで、図５を参照すると、シンバルが、同一の語及び同語源の語を除く、他のすべての子音の前のシンバルのそれぞれの英字の下に、１本の下線を用いて「再生可能である」としてマークされる。したがって、たとえば、「ｈｅａｄｓ（頭部）」におけるＤＳは、「ｈｅａｄｓ  ｂａｃｋ（頭部を後ろに）」においては再生可能であるが、「ｈｅａｄｓ  ｓｏｕｔｈ（頭部を南に）」においては再生可能でない。図５においては、上述したように、直接結合が結合記号４０でマークされる。したがって、「ｈｅａｄｓ  ｂａｃｋ」におけるＤＳは、Ｂに結合された結合記号４０で示され、「ｂｅａｔｓ  ｆａｓｔ（早く打つ）」におけるＴＳは、Ｆに結合された結合記号４０で示されている。
【００４０】
ここで、図６を参照すると、ウッドブロックのカチッという音ＤＬ及びＴＬが、以下の頭文字Ｌを除く（何故なら、このＬはウッドブロックのカチッという音中にあるからである）、他のすべての子音の前に、２本の下線を用いて「再生可能である」としてマークされている。したがって、たとえば、「ｍｉｄｄｌｅ(真ん中）」におけるＤＬは、「ｍｉｄｄｌｅ  ｓｃｈｏｏｌ（中学校）」においては再生可能であるが、「ｍｉｄｄｌｅ  ｌｉｆｅ（中年）」においては再生可能でない。上述したように、ハンモック４０は、直接結合を示すようマークされる。前方斜線３６の上部にマークされた「ｏ」は、ウッドブロックのカチッという音にのみ使用される、「準備」マークの特別バージョンを示し、子音が準備され、Ｌに結合されることを示す。以下のＬの場合、このＬは、以下のＬに直接結合され、したがって、ウッドブロックのカチッという音の終了が、持続可能な子音Ｌとして再生されないことがある。
【００４１】
図７を参照すると、ＧＬ、ＫＬ、ＢＬ、及びＰＬの子音の組合せは、これらの間で発声される曖昧な（書かれない）母音があるため、ウッドブロックのカチッという音を表すものとして扱われないことが望ましいことに留意されたい。したがって、示されているように、Ｌは再生可能であるが、これに先行する子音は再生可能でない。
【００４２】
Ｗ、Ｈ、及びＹは、他の子音楽器について再生可能であると思われる位置で発生した場合は再生可能であるとしてマークされないことが望ましい。何故なら、これらは、以下の例に示されているように、母音又は二重母音の一部であるからである。
【００４３】
2007527555.tif 000010
本発明による、共通の組合せＷＨ中のＷ及びＨのための共に有用な表記法は、ＷＨの上に英字「ｈｗ」をマークして、Ｈがまず発せられ、次にＷが発せられ、いずれも再生されないことを示すことである。
【００４４】
図８を参照すると、「Ｙ」又は「Ｗ」が、別の母音の前に、単語の中に、及び単語と単語との間に発生した場合、ＹとＷとの連結語５０及び５２が作成されて、音声の連続性が、１単語から次の単語へ又は１つの音節から次の音節へと維持されることを示す。本発明のこの実施形態における、ＹとＷとの連結語５０及び５２で用いられる記号の例は、それぞれ、Ｕ中、Ｕの近く、又はＵ上でマークされた小文字のＹ又はＷとの、それぞれＹ又はＷの下から以下の母音へと、ハンモック状の浅いＵルーピングを有する。Ｕは、維持されるべき連続性を示し、英字Ｙ又はＷは、この英字が書かれたテキスト入力内に存在していてもしていなくても用いられるサウンドを示す。たとえば、Ｙは、「ｃｒｅａｔｅ(作成する）」のＥとＡとの間で発せられ、Ｗは、「ｃｒｕｅｌ(残酷な)」のＵとＥとの間で発せられる。
【００４５】
ここで、図９を参照すると、アディソンらによる同時係属中の特許出願第１０／３３４,６５８号明細書に、より詳細にはアーサー・レサックの本に記述されているように、レサックシステムは、子音、及び単語又はフレーズ内の１つ以上の追加の英字又は音素が発声される時に結合されるいくつかの方法を明らかにする。図９は、このような結合された単語の所望の発音が、本発明に従って、どのように図形的に示されるかについて、いくつかの例を示している。
【００４６】
レサック音声システムにおいて利用される、発声される単語結合の３例、即ち、所謂、「直接結合」、「再生及び結合」、及び「準備及び結合」が、図９に記載されている。
【００４７】
直接結合においては、１単語の最後の子音が、次の単語の初めの母音に直接結合される。たとえば、「ｆａｒ  ａｂｏｖｅ（はるか上に）」は、１単語「ｆａｒａｂｏｖｅ」と発音される。
【００４８】
「ｐｌａｙ−ａｎｄ−ｌｉｎｋ（再生及び結合）」においては、「ｋ」の後に「ｔ」が続くなどの、口の中の異なる場所で作られる２つの隣接した子音があり、第１の語、この場合「ｋ」が、十分に「再生される」（発音される又は発せられる）。つまり、第２の子音、この場合「ｔ」に進む前に完了する。
【００４９】
「ｇｒａｂ  ｂｏｘｅｓ（箱をつかむ）」又は「ｋｅｅｐ  ｂａｃｋ（我慢する）」の場合などの、「ｂ」の後に別の「ｂ」又は「ｐ」が続くなどの、口の中の同じ場所で又は互いに密接した所で作られる２つの隣接した子音がある場合、準備及び結合が使用される。この場合、第１の子音又は「ドラムビート」が準備される。つまり、わずかな躊躇でなされる、第２のドラムビートに進む前に完了しない。
【００５０】
図９の上の行に示されている直接結合を示すのに採用されている韻律図形表記法の例は、示されている例より明らかであろうが、１単語の終了時又は終了時近くの１つ又は複数の英字と次の単語の開始時又は開始時近くの英字とを通常結合する、結合された英字の下及びこれらの間の結合記号４０線を有する。直接結合は、発声される勢いが、単語と単語との間に中断又は休止又は休みを置かずに、１つの結合された英字から次の結合された英字へと伝わるべきであることを示す。
【００５１】
図９の真ん中の行に示されている再生及び結合の例においては、第１の子音は再生されるが、第２の子音は再生されない。したがって、結合記号４０が、第１の子音の１本又は２本の下線と組み合わせられる。
【００５２】
図９に下の行に例示されている準備及び結合の例では、準備され、かつ第２の子音との結合記号４０と組み合わせられた、第１の子音上の前方斜線が用いられ、結合が示される。その上、上述したように、再生可能な子音が下線で示される。
【００５３】
ここで、示されている２つの韻律グラフィカルシンボルについて、図１０を参照すると、例１は、実施するのが比較的簡単かつ経済的なものであり、例２は、口語本及び雑誌、ドラマ及び他の娯楽などの適用形態に、無制限に、適した高品質の合成音声出力の作成を容易にするよう設計された、より高度なものである。また、例２のより詳細な表記法により、訓練された話し手が用いられた場合にも発生し得る話し手間のばらつきが減少し、これにより、出力の一貫性が促進される。
【００５４】
例１の表記法は、器具、車両、製造機械、ローエンドゲーム、及び娯楽装置などとの、声による通信などの工業適用形態に、無制限に適し得る。勿論、所望の場合には、いずれの表記法も他の目的に使用され得る。
【００５５】
図１０においては、並べて比較するために、交互の線に、同じテキストに適用された例１及び例２が例示されている。図１０の最初の２本の線を順に比較すれば分かるであろうが、「ｈｅａｄｓ」と別の結合された単語とのいくつかの組合せにおいて、ＤＳの組合せのＤ上の前方斜線３６によってマークされる追加の準備により、より微妙かつより人の心に訴えるサウンドが提供される。それぞれの場合において、「ｈｅａｄｓ」から以下の単語までの連続性が維持されるが、例２においては、追加のマークに従って準備されるので、Ｄはよりはっきりと聞こえる。例１以下の発音においては、Ｄが消えることがある。
【００５６】
ここで、図１１及び図１２を参照すると、本発明は、１つの又は別の互いにかなり異なるスタイルを有する、魅力的な韻律音声出力用のテンプレートを示す又は提供するのに用いられ得るグラフィカルシンボルセットを提供し、用いることが理解されよう。図１１は、「レポートリアルな」と称される「韻律」スタイルのゲティスバーグ演説（Ｇｅｔｔｙｓｂｕｒｇ  Ａｄｄｒｅｓｓ）の一部分のレンダリングのためのマーク付けを示しており、図１２に示されているスタイルは、より感情的な人の興味をそそるスタイルである。
【００５７】
アドレスのテキストは、テキストライン１０などのテキストラインにおいてレンダリングされ、この上に、表記法ライン１２などの表記法ラインにおいて、上述したような、打楽器及び持続可能な音調の子音、ウッドブロックのカチッという音、及び結合記号のためのマークを含む、レサック構造及び音調エネルギー母音発音表記法を用いて及び子音エネルギー発音表記法を用いてマークされる。テキストはまた、個々の英字下線、上昇曲線、下降曲線、ハンモックなどを含む、本明細書の上記に記述したような韻律グラフィカルシンボルで、発音表記法に干渉しないようテキストの下にマークされる。その上、所謂Ｙバズライン（Ｙ−ｂｕｚｚ）６０が、上記の表記法ライン１２の上に追加され、この上のＹバズライン６０に、さらなる韻律記号がマークされる。アーサー・レサックの本の、たとえばページ１２２以降に記述されているように、Ｙバズは、話し手の又は歌手の声の骨を通って伝わる音調の振動の基礎である。
【００５８】
所望のイントネーションパターンが、話し手のＹバズラインのピッチに対する所望のピッチを示すＹバズライン６０上のドットのレベルで小さいドット６２及び大きいドット６４を使用して、Ｙバズライン６０の上の所謂韻律ピッチチャートと称されるものでマークされる。ドットサイズは、所望の強勢、又は表された相対ピッチの相対振幅を示すのに用いられ、小さいドット６２は余分の強勢がないことを示し、大きいドット６４は追加強勢が望ましいことを示す。任意に、ドットサイズは、所望の度合いの強勢を比例で示し得る。Ｙバズライン６０以下の周波数で声に出すことは可能であろうが、制御可能な楽器として演奏するための声については、声の音調及び調音の制御が不十分となり得る。
【００５９】
また、図１１及び図１２には、マーク付けに従ってテキストを発音する場合、音声実践者Ｂによって作られた誤りを示す円内に英字Ｂがマークされている。誤りは、他の音声実践者が、発音の録音を聴き、その発音がどこで従うべきマーク付けから逸脱したかに注意することによって判断される。たとえば図１２においては、実践者Ｂは、マーク付けに必要なものとは異なる２つの発音を行った。第１のものは、単語「ｅｎｇａｇｅｄ(係合される）」の終了時（テキストライン４、単語４）に、ドラムビートの子音Ｄを発音する際の失敗であった。第２のものは、単語「ｄｅｄｉｃａｔｅｄ(専用）」の終了時（テキストライン５、単語５）に、Ｅの上昇曲線、それに子音Ｄのドラムビートを演奏する際の失敗であった。
【００６０】
図１２に示されている、人の興味をそそるマーク付けによって伝えられる、さらなる感情及びエネルギーは、図１１のレポートリアルなマーク付けと韻律ピッチチャートのマーク付けとを注意深く比較することにより、容易に明らかとなる。たとえば、図１２の強勢ドットの多くが、より大きい強勢又は強調を必要とするより大きいドット６４である。また、ライン１の「ａｇｏ（前に）」の上の上昇曲線２０は、Ｙバズライン６０の上に上昇し、所望のより高いピッチを示す。最も低いラインにおいては、「ｃｏｎｃｅｉｖｅｄ(考案される）」のＶには、余分の強勢ドット６４が与えられ、曲折アクセント記号２４Ｂは用いられない。複数の図を点検すれば、他の差が理解されよう。
【００６１】
図２〜図１０から及び特に図１１及び図１２から、本発明により、包括的なテキストマーク付けシステムが提供されることが理解されよう。これにより、通常のテキストを分割又は中断しない重ね書きとして、通常のテキストを有する高度な発音及び韻律記号を具現化し、人の声又は機械による音声としてのテキストの、正確で、理解し得る、人の心に訴える、さらには旋律の美しいレンダリングの青写真を提供する、新規な指示又は制御文書を生じ得る。
【００６２】
本発明の目的を達成するために、音声用テキストをマーク付けするための他の好適なグラフィカルシンボルが、当業者には、本明細書の開示より明らかとなり、本発明を実践するのに適していることが推察されるであろう。たとえば、様々な幾何学的な記号又は幾何学的な記号のスキーム又は動画化された書記素が用いられることがある。しかし、本明細書に記述されているような簡単な記号は、直感的に理解できるものであり、スクリプト又は他のテキストをマーク付けする際に適用することが容易であり、さらに重要なことには、訓練された話し手がマーク付けされたテキストを読む時に容易に理解し得ることである。
【００６３】
図２〜図４及び他の図に示されている、かつ本明細書に記述されている、韻律グラフィカルシンボルは、合成音声出力で、特にフォルマント音声出力で、人間らしいサウンドを促進するよう様々な方法で利用される。たとえば、表記法は、発音される音声データベースを作成するために、本明細書に記載されているマーク付け音声コードに従ってテキストを正確に発音するよう訓練された、１人以上の、好ましくは複数の人によって用いられる。前記データベースは、本明細書に記載されている音声コードでマークされたテキストに正確に従うよう、例証されている発音される音声を含む。代替形態として又は追加形態として、本発明の韻律グラフィカルシンボルは、ディジタル方式でレンダリングされ、韻律要素のディジタルドメインの出力される音声への導入を促進する又はガイドするために、機械で発声されるテキストの電子マーク付け用のシンセサイザソフトウェアにおいて用いられ得る。英字、単語、フレーズ、文、段落、及びより長いテキストのための図形表記法に対応する、録音された音声データベースは、ディジタル化され分析されて、関連する図形表記法を有する特有のテキストに対応する特有の音声データの一意の関係を指定するためのアルゴリズム及び他のメトリクスを得る。ついで、これを使用して、入力パラメータをシンセサイザに提供し、指定された韻律を有する音声として合成される特定のテキストのための人の音声を模倣するサウンドを再び作成し得る。
【００６４】
話しを簡単にするために、それぞれのテキストユニット及びそれに関連付けられた音声コード図形表記法を「書記素」と考える。同様に、「書記素」に対応するそれぞれの音響ユニットを「音素」として識別する。数百又は数千（ここで、「数」とは、「少なくとも２つ」を意味する）の拡張セット、又はこれ以上、ピッチ、振幅のための発音を関連付けするための書記素／音素対、及び本発明の韻律図形表記法が、ディジタル方式でレンダリングされ、韻律要素のディジタルドメインの出力される音声への導入を促進する又はガイドするために機械で発声されるテキストの電子マーク付け用のシンセサイザソフトウェアにおいて用いられ得る。
【００６５】
当業者は、図２〜図４に示されている特定の韻律グラフィカルシンボルは単なる例示であり、本明細書の教示に従って本発明を実践するのに有用な韻律グラフィカルシンボルが、他の多くの形態を有することを理解されるであろう。さらに、示されている記号の特定の例は、レサック音声システムに適応される。所望の場合には、他の韻律グラフィカルシンボルが、他の音声指導又は訓練方法を実施するのに、又は本発明に従って機械音声を人間らしいものにすることを促進するようレサックシステムを実施するのに用いられる。これについて、当業者は、本明細書の教示より理解されよう。
【００６６】
本発明の一実施形態によれば、以下の段落に記述されているようなガイドラインが、図１１及び図１２に示されているような韻律マーク付けを準備する際に観察され得る。
【００６７】
マーク付けされたスクリプトの準備
図１１〜図１２に例示されているような、発声されるマーク付けされたスクリプトを準備する際に、上手なページのレイアウトが話し手にとって有益であり、本発明に従って、一貫性のある魅力的な音声出力に話し手をガイドする場合、テキストだけでなく追加記号の同時理解が容易となり、この音声出力は、データベースを作成する際に有用であり、またコンピュータ化された音声の合成にも有用であり得る。
【００６８】
テキストは、追加すべき発音表記法及び韻律グラフィカルシンボルを収容するよう、それぞれのラインの上に、たとえば３ｃｍ以上の、たっぷりとした間隔がとられることが望ましい。比較的大きいフォントは、様々な表記法及び記号を収容するのに有用であり、声に出して発声している間のマークの正確な読取り及び解釈が容易となる。１４ポイントのルシダ（Ｌｕｃｉｄａ）輝度のセミボールドなどのフォントが、好適なフォントの一例である。
【００６９】
スクリプトをマーク付けする本発明の一実施形態においては、ページの最後のラインを含む、スクリプトのそれぞれのラインが、区切り又は息継ぎのための垂直のマークで終了する。数字が書き込まれる。頭辞語が、英字ではなく単語として発声される場合は、すべて書かれる。有用なことに、一貫性のある発音のための参考辞書、たとえば、メリアム・ウェブスター・カレッジ英英辞典（Ｍｅｒｒｉａｍ  Ｗｅｂｓｔｅｒ’ｓ  Ｃｏｌｌｅｇｉａｔｅ  Ｄｉｃｔｉｏｎａｒｙ)第１０版が、指摘されている。
【００７０】
参考辞書は、発音の選択項目を提示しているが、記載されている最初の発音は、録音が正式のものでない又は「高い」音声でない場合に使用される。この場合、列挙されている場合には、「短縮された」発音が使用される。
【００７１】
イントネーションパターンとは、連結音声中の、段階的なピッチ毎の一般的な動きである。抑揚とは、所謂、上昇曲線、レベル持続部、下降曲線、又は曲折アクセント記号などの、母音又は子音の、移動するピッチの変化である。
【００７２】
有用なことに、スクリプトの準備のこの実施形態においては、話し手は、それぞれの文の意味を伝えるイントネーション及び抑揚を得るよう、スクリプトを声に出して探る。
【００７３】
２本の垂直線がスクリプト上にマークされて、息継ぎの休止を示し、１本の垂直線がマークされて、これらの分割部分の最後の子音の取扱いに影響を及ぼす休止がない場合の区切りを示す。
【００７４】
本発明の１つの有用な実施形態においては、これらの準備の後、本明細書の上記に記述されているように発音及び韻律について、まず子音がマーク付けされ、次いで母音がマーク付けされる。
【００７５】
次のステップは、母音の直ぐ上に、母音を隠さずに、Ｙバズピッチライン６０を引き、ピッチのマーク基準を提供することである。留意すべきピッチ範囲は、低いＹバズ範囲（以下、Ｙバズライン６０）から、変形しない母音がミッドコール（ｍｉｄ−ｃａｌｌ）で、たとえば＃３、Ｒ、及び＋Ｙ、及び任意に＃４及びＮ内で声に出され得るミッドコール範囲までである。
【００７６】
所望の場合には、Ｙバズライン６０の上に、追加のピッチライン（図示せず）、たとえば真ん中下部の音域ライン及びちょうど真ん中の音域ラインが引かれ得る。イントネーションドット６２、６４又は他の好適なマークは、ピッチラインの上及びピッチラインの間の両方に置かれ得る。所望の場合には、たとえばダニエル・ジョーンズ（Ｄａｎｉｅｌ  Ｊｏｎｅｓ）の本、「英語音声学の概要（Ｏｕｔｌｉｎｅ  ｏｆ  Ｅｎｇｌｉｓｈ Ｐｈｏｎｅｔｉｃｓ）」に記述されているような、ピッチ範囲を提供するための他の方法が使用されることがあり、ここでは、ピッチ範囲を定義するのに、３線譜が使用される。
【００７７】
本明細書に記述されている、例示されている実施形態を実践するためには、音声システム実践者は、レサック実践者であるべきであり、次いで、自分自身のピッチ範囲のためのガイドとしてＹバズライン６０を使用して、各音声システム及び所望の韻律に従って、所望のイントネーション及び抑揚であると認識されるものを録音する。上記に言及したように、あらゆる音節についてドットがマークされ得る。つまり、強調しない音節には６２などの小さい個別のドット、強調した音節には非常に大きいドット６４を用いる。
【００７８】
たとえば図１２に例示されている人の興味をそそる録音については、レサックシステムにおいて「構造ＮＲＧ」及び「集中音調」として公知のものなどの音声特徴がより豊富に使用され、より大きいドットには周囲に円を使用し、又は母音の変形のない、レサック基本コール単語を含む単語に、所望の場合には、コールに集中する（ｃａｌｌ  ｆｏｃｕｓ）ことを示すための、他の好適な図形表示を使用してマークされ得る。この段落において使用される用語は、レサック音声又は声のシステムに関係しており、アーサー・レサックの本より理解されるであろう。
【００７９】
たとえば、その本に記述されているように、構造ＮＲＧとは、顔の表情に関係し、かつ声の共鳴室の型、形状、及びサイズに関する運動感覚の声のエネルギー（レサックによる「ＮＲＧ」）の状態である。構造ＮＲＧは、色、体温、及び声の音調の美しさに関係すると考えられる。
【００８０】
有効な単語が、二重アクセントマークを用いて、たとえば「二次強勢音節が、たとえば１つのアクセントマークをとり得る間、一次強勢音節の前に」マークされ得る。
【００８１】
この場合、有効な単語とは、文が進行するにつれて引き数を前方に運ぶという新しい考え方を導入する、それぞれの連続するフレーズ、又は他のテキストの感覚群分割中の単語である。
【００８２】
本発明のこの態様に従って、注意深くかつ一貫性のある声の録音が、テキスト／音声合成データベースで行われ得る場合、テキストの区切り及び息継ぎ休止分割内のそれぞれの「感覚群」の単語が、識別される有効な単語を有することが望ましい。まれに、同等に重要な、２つの有効な単語があり得る。
【００８３】
有効な単語は、レサック訓練の声の強弱法を使用し、様々な方法で、たとえばより高いピッチで発声されるようマークすることにより、又はその母音及び子音を実質的に長くすることにより、又は集中音調、コール共振を追加することにより、又はこれらの強弱法の組合せによって識別され得る。
【００８４】
本発明の一例示的実施形態においては、引き数の導入は平叙文から始まり、この平叙文において、連続語以外のすべてが、ほぼ同じ量の強勢又は強調を有するよう、マークされる場合もマークされない場合もある。第１の強調単語でピッチが上昇し、残りで、最後の強勢音節上に下降曲線を有するＹバズ範囲に段階的に下降し得る。
【００８５】
たとえば、本発明に従って音声についてマーク付けされるスクリプトにおいては、様々な抑揚が句読点マークで使用され得る。以下、これについて記述する。ピリオド及びセミコロンが、最後の強調単語上に下降曲線２２をとり得る。コンマ及びコロンが、上昇曲線２０又はレベル持続部２６をとり得る。疑問語（たとえば、誰、何、どこ、いつ、どのように、又は何故）から開始する疑問は、最後の強調単語上に下降曲線２２をとり、他の疑問、通常「はい」又は「いいえ」の答えを予想する疑問は、最後の強調単語上に上昇曲線をとる。
【００８６】
他の音声訓練システム
当業者は理解されるであろうが、権利請求の対象とする本発明は、レサック方法以外の規則又は音声訓練原理又は実践を用いる実施形態においても実施され得る。このような例の１つが、コロンビア大学演劇部のクリスティン・リンクレーター（Ｋｒｉｓｔｉｎ  Ｌｉｎｋｌａｔｅｒ）の方法である。クリスティン・リンクレーターの技術、及び所望の場合には、本発明を実践する際にその規則が用いられ得る分野における他の音声実践者の技術に関する情報については、
ｗｗｗ．ｃｏｌｕｍｂｉａ．ｅｄｕ／ｃｕ／ｎｅｗｓ／ｍｅｄｉａ／００／ｋＬｉｎｋｌａｔｅｒ／及びｗｗｗ．ｋｒｉｓｔｉｎｌｉｎｌｄａｔｅｒ．ｃｏｍ
に見出され得る。
【００８７】
韻律音声規則及びその適用形態
本発明において用いることが可能な韻律音声規則は、言語の調音及び同時調音及びその様々な言葉遣いを説明するためのものである。本明細書において言及するプログラム言語の例は、アメリカ英語、一般的な教養のある言葉遣いである。他の言語も用いられ得ることが理解されよう。少なくともそのいくつかがレサックテキストから導き出せる又は公知である韻律音声規則がテキストに適用され、本明細書に記述されている新規な音響コードを使用して発音され又は合成され、レサックシステムに精通した話し手が、適切なレサックで決められた制御された発音で、テキストを声に出して読むことができる。
【００８８】
規則の例には、一般に所有されている適用形態の１つ以上に記述され、かつ息継ぎ休止によって修正されるランダムな休止の使用、リズム、イントネーションパターン、語強勢、単語の選択、及び子音の「混合語」を組み込んだ韻律の定義が含まれ、これらすべてが、発音されるテキストから直接導き出される。これらの韻律音声規則は、他の言葉遣い及び言語にも適応され得る。
【００８９】
本発明において用いられる音響マーク付けコードは、特定の音声サウンドがどのように作成されるか、及びこれらのサウンドを作成するのに、どの音声変数が用いられるかを示し得る。発音されるテキストは、それぞれのコードの１つ又は複数の変数のための任意選択の指定された１つ又は複数の値と共に、テキストを発音する場合にコードに従うよう訓練された人の話し手のための韻律指示として役立ち得る。本発明によれば、同一の又は同様のこのようなコード変数、又はこれらの機械等価物を使用して、韻律指示に従ってテキストを発音するよう、コンピュータシンセサイザに命令する。サウンド及び変数の作成を制御するコードは、所望のサウンド特性に関係する、定量化可能な識別情報を示す。
【００９０】
本発明の方法に従ってコード化され得る音声変数の例には、特定の音素又は他の音声要素を表現するよう合成されるサウンド要素の、可聴周波数、振幅、ピッチ、及び持続時間が含まれる。所望の値に定量化され得る特有の変数のいくつかの例に、基本的な声の周波数、制御可能なピッチ範囲の上限値及び下限値、時間単位当りの周波数の変化として表現されるピッチの変化、時間単位当りの振幅の変化、及び時間単位当りの振幅とピッチの変化との組合せがある。
【００９１】
ここで、音声規則と、音響マーク付けコードと、１つ以上の変数値との間の１つの有用な関係の一例について記述する。当業者には他の可能性も明らかであろう。単語間の休み及び文中のコンマの発生の両方が、音声サウンドを作成する際の休止を表す。しかしながら、それぞれの種類の休止が、本発明の一実施形態に従って異なる音響コードによって示され得る異なる文字を有する。休止は聞き手にとって有用なものであり、個々の単語の認識を容易にし、フレーズの識別を援助する分離を提供する。同様に、それぞれの休止は変数としての時間を伴うが、一般に休止を構成するサウンド間の相対沈黙のミリ秒で測定される時間値又は持続時間は、状況により異なる場合がある。書かれたテキストがコンマを有さない場合、単語間の休止は、話しのテンポの一部であり、それぞれの休止を境界付けかつ完全なフレーズ内に含まれる、歯切れ良い発音の単語のリズミカルなサウンドに必要な、音声の速度及びリズミカルなばらつき全体によって判断されることがある。
【００９２】
したがって、休止は、たとえば興奮した、深刻な、レポートリアルな、詩的な、説得力のある、又は他の韻律などの、音声の韻律によって文脈上で判断されることがあり、これに対応するテキスト中のコンマはフレーズの分離を示し、これに対応する休止持続時間又はテキストが発声される時に発言のない時間は、韻律及び他の要因に従って、話し手によって変わり得る。自然な人の音声においては、この休止は１つの値ではなく、より大きい又はより少ない長さの時間のばらつきを有し、時には、新鮮な息継ぎをとるための、及び追加強調を提供する、又は文及びそのフレーズを含む段落全体のリズムのためのポイント／反対のポイントとして役立つ、他の時間を有する。段落の機械音声レンダリングの場合、人の話し手の変化する休止持続時間は、一定のミリ秒値としてレンダリングされ、この結果生じた音声は、人ではなく機械として認識される可能性がある。何故なら、人には、フレーズ間の休止の長さを変える傾向があるからである。
【００９３】
クリプトマーク付け手順の例
図形記号セットを作成し、韻律音響ライブラリの例を準備するための規則に従う正確な発音のための音響データを提供するために、４人の公認レサック実践者のチームが、アメリカ英語の１,０００の最も頻繁に使用される単語と５００のフレーズ及び文とを使って作業する。
【００９４】
実践者は、用いられた韻律音声規則を再検討し、改良する。規則のそれぞれについてマーク付けの指示及び表記法を開発し得ることが望ましい。また、韻律のための表記法も開発し得る。次いで、規則は、サンプルの単語及び文に適用される。
【００９５】
本発明によるスクリプトマーク付け手順の一例示的実施形態においては、それぞれの音声実践者が、韻律音声規則による発音について、本明細書に記述されているようにフォーマットされた、スクリプト中の単語及び文をマークする。有用なことに、スクリプトは、音声に変換すべきテキストの言語を広範囲に表す、少なくとも約１,０００の単語と５００のフレーズとを有し得る。所望の場合には、スクリプト中の単語及びフレーズは、言語の専門的な部分集合、たとえば医学、科学、又は地域の方言などの専門的な部分集合に限定される。次いで、それぞれの実践者のマーク付けが、別のチームのメンバーによって調べられ、韻律音声規則を適用した際の誤りが識別される。誤りのない、１,０００の単語及び５００のフレーズ及び文の照合調整された最終マーク付けが準備された。
【００９６】
照合調整された最終マーク付けを使用して、それぞれの実践者が、マーク付けされたスクリプトからの単語及び文のサンプリングを音読することが望ましい。他の実践者の１人以上が、その発音を聴き、韻律的にマーク付けされたテキストに従っているかどうかに関する誤りについて調べる。この技術を用いて、録音セッション又は他の言葉によるプレゼンテーションの前に、１人以上の話し手でリハーサルされ得る。
【００９７】
本発明に従って音声合成に使用する音響データベースを準備するのに有用な録音を準備するために、スタジオでの録音セッションにおいて発音される単語及び文のスクリプトが、たとえば図１１に示されている、基準線のレポートリアルな韻律でマーク付けされる。それぞれの実践者は、第２の韻律のためのマーク付けを有する同じ文の部分集合のマーク付けと共に、レポートリアルなスクリプトの最終的に照合調整されたマーク付けのコピーを受け取る。
【００９８】
録音セッションについて、実践者は、「乾燥室」の録音環境を有するスタジオ、望ましくは、アナログ／ディジタルサンプリングレート及び音響品質について正確に引かれた基準に合うスタジオを用いる。スタジオセッションにおいては、それぞれの実践者の発音の音響ＣＤ又は他のアナログ録音が、録音された発音をＷＡＶ又は他のデータファイルとして取り込むデータＣＤ又はＤＶＤと共に準備される。
【００９９】
データの品質を確実にするために、それぞれの実践者の音響ＣＤが別の実践者に提供され、別の実践者は、発音を聴き、完全な正しいマーク付けのコピーの、そのマーク付けに従っていない発音の誤りについて留意する。誤りに気づいた場合、その発音はＷＡＶデータベースから除かれ、データベースには、正しい調音、イントネーション、及び韻律要素のみが保有されることが望ましい。
【０１００】
このようなマーク付け、発声及び録音手順に従うことにより、音声要素の比較的誤りのないディジタル化されたデータベースライブラリが提供され、この中には、入力された発音及び韻律規則に準拠する言語又は言語の部分集合の、音素、単語、フレーズ及び文が含まれ得る。ある程度の一貫性が可能となり、これにより、１群の実践者によって準備された音声要素ライブラリが、別の群の同様に訓練された実践者によって準備された同様のライブラリと比較され得る。
【０１０１】
韻律音響ライブラリ
コンピュータ化された音声に効果的に適用される韻律音声規則について、本発明は、それぞれの韻律音声規則を発音される特有のテキスト及び正しく発音された場合にはこれに対応する音声データに一義的に連結する図形記号セットを提供する。特有の韻律音響ライブラリが、それぞれの言語及び最も広く使用されている言葉遣いについて準備される。それぞれの特有の韻律音響ライブラリは、発音の例のためのテキストと共に、包括的な辞書、韻律音声規則、規則を表す図形マーク付け記号、規則に正しく従っている発音のための音声データの例を含むと想定される。特有の言語及び言葉遣いのための包括的な韻律音響ライブラリは、適用される韻律音声規則に一義的に関連付けられている調音のためのフォルマントパラメータ値を導き出す、したがって指定するための土台である。
【０１０２】
本発明の一実施形態による韻律音響ライブラリデータベースの例には、以下のものが含まれる。即ち、
ａ）音声に合成されるテキストを表す、テキストの単語及び文の選択。
【０１０３】
ｂ）わかりやすい発音のためのテキストのコンピュータ化されたマーク付けのための１組の規則。これらは、子音、母音、同時調音、及び休止規則を含むことがある。
【０１０４】
ｃ）本明細書に記述されている、２つの韻律、「レポートリアルな」及び「人の興味をそそる」についての韻律規則。これらの韻律は、マーク付けされ、発音され、含まれる。これらの規則は、ピッチ、音量、リズム、話すテンポ、及び語強勢の変化などの、時間と共に変化する値を指定する。
【０１０５】
ｄ）テキストに適用される韻律音声規則の照合調整された手動マーク付けのコピー。
【０１０６】
ｅ）マーク付けされたテキストの発音。「レポートリアルな」韻律で発音されたすべての単語及び文を表す、４人の実践者のＷＡＶデータファイル、それに「人の興味をそそる」韻律で発音されたいくつかの文の例。
【０１０７】
韻律音響ライブラリデータベース構造の例には、ＷＡＶデータ、テキスト、図形、及び数値データが含まれることが望ましい。ソフトウェアステートメントの例、ソースコードの修正、及びシンセサイザ仕様値も追加され得る。韻律音響ライブラリデータベースの一例には、約８〜１２ギガバイトのデータが含まれ得る。市販の標準量産品のリレーショナルデータベースでは、現在、ＷＡＶデータと、テキスト、図形、オーディオＣＤ、及び数値データとを組み合わせることができない。したがって、本発明は、ＷＡＶデータと、テキスト、図形、及び数値データとを組み合わせるための製品設計を検証するために、一時的データベース構造を用い得る。ソフトウェアステートメントの例、ソースコードの修正、及びシンセサイザ仕様値も追加され得る。ＬＡＬデータベースの一例には、約８〜１２ギガバイトのデータが含まれ得る。所望の場合には、データベース構成要素を組み立てる、格納する、及び処理するためのアーキテクチャが、一時的構造を使用した結果を鑑みて改良され得る。これは、テキスト、図形、音響、及び数値データを含む包括的なデータベースライブラリを組み立てるのに有用であり得る。
【０１０８】
ソフトウェアの例
公知の音声シンセサイザ又はシンセサイザエンジンは、以下のものを有し得る。即ち、
テキスト入力手段、たとえば、１つ以上のデータファイル、好適な形態のシステムで利用可能なテキストデータを作るための、スキャナ及び関連ソフトウェア及びハードウェア。
【０１０９】
ソフトウェア及び効果音声合成オペレーションを実施するための、データ処理ユニット及び関連データメモリ。
【０１１０】
データ処理ユニットによって実施可能な音声合成ソフトウェア。このソフトウェアはまた、テキストデータを音声データに変換するためのソフトウェアエンジンでもあり得る。
【０１１１】
可聴出力手段、たとえば、オーディオ信号を拡声器又はヘッドホンに提供できるオーディオポート、及び音声合成ソフトウェアから受信された音声データを最終的にオーディオ形態で出力するための関連ハードウェア及びソフトウェア。
【０１１２】
音声は、所望の場合には、合成された後の１つ又は複数の時間に再生するために、音声ファイル、たとえばｗａｖファイルとして、格納される、通信される、又は分散されることが理解されよう。
【０１１３】
従来、特有の制限された組の言語学及び合成規則を実施するために、このような公知の音声シンセサイザが開発されてきたが、音素、単語、又は短いフレーズなどの小さい音声構成要素から組み立てられている場合、それらの出力は、機械的かつ非人間的で評判の悪いものである。本発明は、人の心に訴える、人間らしい音声出力を提供するよう、本発明の新規なテキストマーク付け記号及び韻律マーク付けを用いて、本明細書の教示を実施するために、追加及び／又は代替言語学規則を実施できるよう適応されたソースコードを用いる、新規な音声シンセサイザと音声合成ソフトウェアとを提供する。本発明によれば、音声合成ソフトウェアは、発音表記法及びグラフィカルシンボルによって示されるテキストに適用される発音規則に対応するサウンドを作成する好適な音声シンセサイザの音響出力値を指定でき、このテキストは、出力音声の発音及び韻律を判断するためにマーク付けされ得る。
【０１１４】
ソフトウェアの例
本明細書に記述されている本発明の目的に適応された、本発明を実施するのに好適なソフトウェアが、フォルマントテキスト／音声（「ＴＴＳ」）エンジンソフトウェアに精通した、１人以上の当業者、たとえば技術者及び／又はコンピュータ言語学者によって提供され得る。好適な追加の言語学規則及びシンセサイザ信号仕様が、公知の音声ソフトウェアエンジンに追加され、本発明を具現化する又は実施するソフトウェアを構築し試験し得る。たとえば、本明細書に記述されている、サンプルの韻律音響ライブラリデータベースを分析して、公知のフォルマントＴＴＳシンセサイザにおいて現在指定されていない同時調音のための、本発明の発音マーク付け記号及びこれに対応するＷＡＶデータを隔離し、必要な要素を公知のシンセサイザに追加し得る。
【０１１５】
この結果生じた、１つ又は複数の音声合成ソフトウェアプログラムは、テキストからの、人の心に訴える又は優雅な音声の機械生成に使用することに加えて、ソフトウェア内で実施されるレサック又は他の音声訓練システム及び用いられる新規な韻律音声規則を実際的に理解するようソフトウェア技術者などを教育するのに有用であり得る。これはまた、本明細書に記述されている、所望のさらなる言語学、音声学、及び韻律規則及び新規な音響信号パラメータを収容するようプログラムされる項目を識別し得る。
【０１１６】
ソフトウェアの例は、テキストへのマーク付けをプログラミングし、シンセサイザのサウンド作成について関連付けられた音声値を指定して手動で書き込み得る。このようなサンプルが作られると、合成されるテキストを入力として直接使用し、ハイブリッドフォルマント、及び連結パラメータ及び値を指定するための、特定の単語、文、及びフレーズの文脈中にその特定のテキストが必要とする規則を適用するコンピュータシステムを用いて、より大きい辞書が自動的にプログラムされ得る。フォルマントパラメータ値とは、マークされた特有の発音及び／又は韻律規則に従って、及び出力されるべき、声識別情報特性、基本的な周波数、和声学などに従って動作する、テキストのマーク付けに指定される発音及び韻律を生じさせるのに必要な値である。
【０１１７】
聞き手による試験
本発明は、本発明に従って、聞き手による合成音声出力の試験を用いて、製品を改良するためのフィードバックを提供することを想定している。聞き手については、明瞭度及びメッセージの理解度の向上を認識するために、及びサンプルが従来の比較製品、たとえばＳｅｎｓｉｍｅｔｒｉｃｓ社のＨＬＳＹＮ（登録商標）又はＳＥＮＳＹＮ（登録商標）フォルマントシンセサイザより良い音を発するかどうかについて判断するために投票がなされ得る。認識、理解度、及び好みの測定では、各業界において公知であり得る、正当性が検証された実験的な設計及びデータ収集技術が用いられることが望ましい。
【０１１８】
前述の記述より明らかであろうが、発声されるテキストは、所望の韻律に従って英字、二重母音、音節、又は他の音声要素の発音に必要なピッチ制御を示すグラフィカルシンボルと、上昇するピッチを示す上昇曲線と、下降するピッチを示す下降曲線と、上昇し次いで下降するピッチ又は下降し次いで上昇するピッチを示す曲折アクセント記号と、不変のピッチを示すレベル持続部と、最初の英字が準備されたことを示す、密接に関連した又は同一のサウンドの子音が後に続く最初の英字上の前方斜線と、他の英字により互いに分離された英字が間に休止を置かずに連続して発音されることを示す浅いＵ形のリエゾンハンモックと、それぞれ、ティンパニのドラムビート、Ｄ、Ｂ、及びＧ、及びスネアドラム、ベース、及びトムトムのドラムビート、Ｔ、Ｐ、及びＫを含む再生可能な打楽器としてマークする１本の下線であり、マークのない子音は再生不可能であることと、再生可能な弦楽器Ｎ、Ｍ、Ｖ、及びＺ、木管楽器、Ｌ、ＮＧ、ＴＨ、及びＺＨ、及び（無声）音響効果Ｆ、Ｓ、ＳＨ、及びｔｈとしてマークする２本の下線であり、マークのない子音は再生不可能であることと、Ｈがまず発せられるべきであり、次にＷが続き、両方とも再生されないことを示す、発声されるテキスト中の英字の組合せＷＨの上に又はこれに隣接してマークされた英字の組合せ「ｈｗ」と、別の母音の前に「Ｙ」又は「Ｗ」が発生した場合には、１つの単語から次の単語への又は１つの音節から次の音節への音声連続性が維持されるべきことを示すＹとＷとの連結語であり、このＹとＷとの連結語のそれぞれが、Ｕの中、Ｕの近く、又はＵの上でそれぞれマークされた小さいＹ又はＷ英字と共に、それぞれＹ又はＷの下から以下の母音へのハンモック状の浅いＵルーピングを有することとからなる群から選択された韻律グラフィカルシンボルの１つ、２つ以上、又はすべてを用いてマークされ得る。ここで、母音の前の子音は、発声されるが、再生可能であるとしてマークされないという規則を有する。
【０１１９】
代替形態として又は追加形態として、発声されるテキストは、発声される勢いが、単語の間に中断又は休止又は休みを置かずに１つの結合された英字から次の結合された英字へと進むべきであることを示す、結合された英字の下及びこの間にリエゾンハンモック状の線を有する直接結合と、第１の子音は再生され、第２の子音は再生されないことを示す、第１の子音の１本の又は２本の下線と組み合わせられたリエゾンハンモックを有する再生及び結合と、準備され、かつ第１の子音と第２の子音との間の結合を示す第２の子音とのリエゾンハンモックと組み合わせられた、子音である第１の子音上の前方斜線を有する準備及び結合であり、再生可能な子音が下線で示されることとからなる群から選択される韻律グラフィカルシンボルの１つ、２つ以上、又はすべてを用いてマークされ得る。
【０１２０】
本発明において用いられ得る、所望の場合には韻律音響ライブラリデータベース内に含まれる、マーク付け指示のいくつかの可能な実施形態が、本明細書に記述されている。本発明によれば、本明細書に記述されている新規な音響値コード又はグラフィカルシンボルセット及び表記法は、本明細書の開示より明らかであるが、本発明の目的のために用いられ得る又は考案され得るコードの単なる例示であることを理解されたい。
【０１２１】
さらに、音響値コードの例が英語の言語の文脈で記述されているが、本発明は、別の言語の必要に応じて好適に修正された又は適応された音声規則を用いて、一貫性のある発音のマーク付けについて、本明細書の一般的な原理を具現化する他の言語の特定の必要性のために考案された他のコード化システムを包含することを理解されよう。したがって、本発明の方法は、たとえば、英語と、アメリカ英語と、フランス語と、スペイン語と、ドイツ語と、日本語と、ロシア語と、中国語と、アラビア語と、ヒンディ語と、図形記号セット及び規則に基づく文法を有する文語及び口語と、前述の言語又は他の言語、部分集合、又は言葉遣いの、任意の１つの言葉遣い及び専門的な部分集合とからなる群から選択される言語において実施され得る。これについては、当業者には、本明細書の教示より明らかであろう。
【０１２２】
レサック又は他の音声訓練規則は、個々の英字及び２つの又は３つの英字の組合せを有する比較的小さい音声要素についての理解を容易にするための発音に特に効果的であり、本明細書に記述されている韻律規則は、通常、全単語、フレーズ、文、又は段落を有するより大きい音声要素の文脈中の、このような英字又は英字の組合せに、再生、休止、強勢、及び他の韻律技術を適用するのに有用であることが理解されよう。
【０１２３】
要約すると、本発明は、熟練した音声実践者が人又は機械により発声されるテキストに適用した場合には、明瞭で、人の心に訴える、旋律の美しい音声出力のための明白なテンプレートを提供し得る、理解を容易にするための発音規則とリズム及びメロディのための韻律規則とを有する、図形的に表示可能なグローバル規則セットを提供する。
【０１２４】
援用される開示
本明細書又はこの特許出願の他の箇所において言及した、それぞれの及びあらゆる米国特許及び特許出願の、それぞれの外国及び国際特許出願の、それぞれの他の公開及び非公開特許出願の開示全体が、参照により本明細書に援用される。
【０１２５】
本発明の例示的実施形態について記述してきたが、当然ながら、当業者には、多くの及び様々な修正形態が明らかであり、当業界において開発が進むにつれて明らかとなり得ることを理解されたい。このような修正形態は、本明細書に開示されている本発明の趣旨及び範囲内に含まれるものとする。
【図面の簡単な説明】
【０１２６】
【図１】構造ＮＲＧ母音のためのレサック発音表記法を用いてマーク付けされた、いくつかの単語及びフレーズを示す図である。
【図２】本発明の実施形態による、テキスト中の所望のピッチの変化を示すのに有用な韻律グラフィカルシンボルのサンプル、たとえば、テキストに関係する韻律イントネーションパターン内の連続した音調ピッチ変化パターンを示す図である。
【図３】本発明の実施形態による、子音ｓの混合語中の子音の所望の発音を示すのに有用な、韻律グラフィカルシンボルのサンプルを示す図である。
【図４】本発明の実施形態による、「オーボエ」の後に「打楽器」が続く子音の混合語を有する子音の所望の発音を示すのに有用な、韻律グラフィカルシンボルのサンプルを示す図である。
【図５】「シンバル」を有する打楽器の子音の組合せの所望の発音を示すのに有用な、韻律グラフィカルシンボルのサンプルを示す図である。
【図６】「ウッドブロックのカチッという音」を有する、子音の組合せの所望の発音を示すのに有用な、韻律グラフィカルシンボルのサンプルを示す図である。
【図７】子音の間に曖昧な母音を有する、子音の組合せの所望の発音を示すのに有用な、韻律グラフィカルシンボルのサンプルを示す図である。
【図８】ＹとＷとの連結語を有する、子音の組合せの所望の発音を示すのに有用な、韻律グラフィカルシンボルのサンプルを示す図である。
【図９】単語を順に結合する場合に調音上考慮すべき点、この場合は短いフレーズに基づいて、所望の発音を示すのに有用な、韻律グラフィカルシンボルのサンプリングを示す図である。
【図１０】指定された韻律、この場合は「レポートリアルな（ｒｅｐｏｒｔｏｒｉａｌ)」韻律のための、語強勢及びイントネーションパターンを用いた、本発明による韻律図形表記法の２例の使用を示す図である。
【図１１】レポートリアルなスタイルで図２〜図１０に例示されているレサック発音表記法及び韻律図形表記法の両方を用いるマーク付けの１つのサンプルを例示する図である。
【図１２】図２〜図１０に例示されているレサック発音表記法及び韻律図形表記法の両方を用いるマーク付けの別のサンプルを例示する図であり、このサンプルは、人の興味をそそるスタイルである。
【図１】
2007527555.tif 000011
【図２】
2007527555.tif 000012
【図３】
2007527555.tif 000013
【図４】
2007527555.tif 000014
【図５】
2007527555.tif 000015
【図６】
2007527555.tif 000016
【図７】
2007527555.tif 000017
【図８】
2007527555.tif 000018
【図９】
2007527555.tif 000019
【図１０】
2007527555.tif 000020
【図１１】
2007527555.tif 000021
【図１２】
2007527555.tif 000022
【国際調査報告】
2007527555.tif 000023