(57)【要約】【課題】検出したポーズを利用して適切な分割、必要ならば低速化、あるいは繰返しなどの処理を番組音声信号に施し、聞取り易く、書起しし易いように支援する。【解決手段】音声を聞きつつ、その音声からテキストデータを書起す作業を支援する書起し支援装置であって、入力音声信号のポーズを検出するポーズ検出部１と、検出されたポーズに基づいて、書起し作業者の短期記憶が可能な時間または文字数で前記入力音声信号を分割する分割部１１とを備える。【選択図】      図１
2004212799.tif 000002
【特許請求の範囲】
【請求項１】
音声を聞きつつ、その音声からテキストデータを書起す作業を支援する書起し支援装置であって、
入力音声信号のポーズを検出するポーズ検出部と、
検出されたポーズに基づいて、書起し作業者の短期記憶が可能な時間または文字数で前記入力音声信号を分割する分割部と、
を備えたことを特徴とする書起し支援装置。
【請求項２】
請求項１に記載の書起し支援装置において、
前記分割部は、
前記ポーズ検出部によって検出されたポーズの中で、最も信頼性の高いポーズにより前記入力音声信号を分割する第１次分割手段と、
この第１次分割手段による分割の結果、短期記憶が可能な所定の時間以上または所定の文字数以上である部分については、次に信頼性の高いポーズにより前記入力音声信号を分割する第２次分割手段と、
から成ることを特徴とする書起し支援装置。
【請求項３】
請求項１または２に記載の書起し支援装置において、
前記分割部は、
前記第２次分割手段による分割の結果、短期記憶が可能な所定の時間以上または所定の文字数以上である部分については、次の次に信頼性の高いポーズにより前記入力音声信号を分割するか、または予め決定された時間若しくは文字数で機械的に分割する第３次分割手段、
を含むことを特徴とする書起し支援装置。
【請求項４】
請求項１乃至３のいずれかに記載の書起し支援装置において、
前記短期記憶が可能な時間は、約２．５秒前後であり、または前記短期記憶が可能な文字数は、モーラ数で約２５モーラであることを特徴とする書起し支援装置。
【請求項５】
請求項１乃至４のいずれかに記載の書起し支援装置において、
前記分割部は、
分割された音声の前後部分を所定の時間または文字数だけ重複させる重複手段を含む、
ことを特徴とする書起し支援装置。
【請求項６】
請求項１乃至５のいずれかに記載の書起し支援装置において、
前記ポーズ検出部は、
前記入力音声信号の振幅レベルまたはパワーレベルを示すレベル信号から、通常の速度におけるスピーチの変動特性を示す特定周波数成分を抽出する特定周波数成分抽出手段と、
抽出された特定周波数成分のエンベロープ波形を求め、求められたエンベロープ波形信号に対して所定のスライスレベルを設定してポーズ区間を検出するポーズ区間検出手段と、
から成ることを特徴とする書起し支援装置。
【発明の詳細な説明】
【０００１】
【発明の属する技術分野】
本発明は、ポーズ部分の検出を利用して番組音声等の書起しを支援する書起し支援装置に関する。
【０００２】
［発明の概要］
本発明は、ポーズ部分の検出を利用した番組音声等の書起しを支援する装置にに関するものであり、特に番組音声を聞いてこれを書起す際に、検出したポーズを利用して適切な分割を行い、必要に応じて低速化、あるいは繰返しなどの処理を番組音声信号に施し、聞取り易く、書起しし易いように支援するものである。
【０００３】
この処理を行うことにより、書起しに要する時間や作業に伴う緊張感や疲労を低減することができる。特に、この処理法を字幕用テキストの書起しに適用すると、字幕番組制作時間の短縮、作業の平易化による書起し作業者層の拡大が可能となり、字幕放送番組の拡大やコスト低減に寄与する。
【０００４】
【従来の技術】
字幕つきテレビ放送番組を受信者が利用する際、字幕が読みやすく、理解しやすいものであることが重要となる。そのため、字幕番組制作における字幕原稿作成では、熟練した人手を使い、多大の労力・時間をかけて、より読みやすく、理解しやすい字幕となるよう制作している。
【０００５】
【発明が解決しようとする課題】
しかしながら、今後適用番組分野・番組数などの拡大を進めている字幕放送において、この熟練した人手、多大の労力・時間を要するこのような形態の字幕番組制作システムでは、字幕番組制作上の大きなネックとなっており、その改善が急がれている。
【０００６】
現在最も多く行われている字幕番組制作形態では、タイムコードを映像にスーパーした番組テープと必要な場合は番組台本を素材とし、これを放送関係経験者など専門知識のある人によって、１）番組スピーチの要約書起し、  ２）字幕表示イメージ化（別途定めのある字幕原稿作成要領による）、および  ３）その開始・終了タイムコード記入を行い、字幕用の原稿を作成している。この字幕原稿を基に、オペレーターが電子化字幕データを作成し、担当の字幕制作責任者、原稿作成者、電子化したオペレーター立ち会いのもとで、試写・校正を行って完成字幕としている。
【０００７】
この作業の中で最も多くの時間を必要とするのは、１）の番組スピーチなどを聴取して、字幕原稿を書起し作成する点であり、ほとんどが人間の知能と手作業によっている。
【０００８】
番組スピーチの具体的な書起し作業例では、番組テープを再生操作して音声を聴取し、音声中のスピーチ開始点からテープを再生聴取しつつ、ワープロや筆記で書起しを行う。実際には、書起し作業者の書起し速度や内容確認などのため、一区切りのスピーチ区間を対象として録音テープの頭出し・再生操作を繰り返し、書起し作業が行われる。
【０００９】
したがって書起し作業は、テープの頭出し・再生操作の繰り返しといった煩雑なテープ操作と、スピーチの聴取確認、書起しといった人間の知能に負う負担の多い業務であり、必要な能力・労力を低減できる適切な支援機能が必要であり、その開発が望まれている。
【００１０】
本発明は上記事情に鑑み、検出したポーズを利用して適切な分割を行い、必要に応じて低速化、あるいは繰返しなどの処理を番組音声信号に施し、聞取り易く、書起しし易いように支援することのできる書起し支援装置を提供することを目的としている。
【００１１】
【課題を解決するための手段】
上記の目的を達成するために請求項１の発明は、音声を聞きつつ、その音声からテキストデータを書起す作業を支援する書起し支援装置であって、入力音声信号のポーズを検出するポーズ検出部と、検出されたポーズに基づいて、書起し作業者の短期記憶が可能な時間または文字数で前記入力音声信号を分割する分割部とを備えたことを特徴としている。
【００１２】
請求項２の発明は、請求項１に記載の書起し支援装置において、前記分割部は、前記ポーズ検出部によって検出されたポーズの中で、最も信頼性の高いポーズにより前記入力音声信号を分割する第１次分割手段と、この第１次分割手段による分割の結果、短期記憶が可能な所定の時間以上または所定の文字数以上である部分については、次に信頼性の高いポーズにより前記入力音声信号を分割する第２次分割手段とから成ることを特徴としている。
【００１３】
請求項３の発明は、請求項１または２に記載の書起し支援装置において、前記分割部は、前記第２次分割手段による分割の結果、短期記憶が可能な所定の時間以上または所定の文字数以上である部分については、次の次に信頼性の高いポーズにより前記入力音声信号を分割するか、または予め決定された時間若しくは文字数で機械的に分割する第３次分割手段を含むことを特徴としている。
【００１４】
請求項４の発明は、請求項１乃至３のいずれかに記載の書起し支援装置において、前記短期記憶が可能な時間は、約２．５秒前後であり、または前記短期記憶が可能な文字数は、モーラ数で約２５モーラであることを特徴としている。
【００１５】
請求項５の発明は、請求項１乃至４のいずれかに記載の書起し支援装置において、前記分割部は、分割された音声の前後部分を所定の時間または文字数だけ重複させる重複手段を含むことを特徴としている。
【００１６】
請求項６の発明は、請求項１乃至５のいずれかに記載の書起し支援装置において、前記ポーズ検出部は、前記入力音声信号の振幅レベルまたはパワーレベルを示すレベル信号から、通常の速度におけるスピーチの変動特性を示す特定周波数成分を抽出する特定周波数成分抽出手段と、抽出された特定周波数成分のエンベロープ波形を求め、求められたエンベロープ波形信号に対して所定のスライスレベルを設定してポーズ区間を検出するポーズ区間検出手段とから成ることを特徴としている。
【００１７】
【発明の実施の形態】
＜本発明の背景＞
前述したように、番組音声の書起し作業は、テープの頭出し・繰り返し再生といった煩雑なテープ操作や、スピーチの聴取確認、書起しといった人間の知能に負う負担の多い業務であり、必要な能力・労力を低減できる適切な支援機能が必要である。
【００１８】
例えば前記「一区切りのスピーチ区間」やその「繰り返し」については、これを一つの文とするとその前後には通常ポーズ部分があるので、このポーズを検出して自動的に区切りを付与し、必要回数繰返しを行うように番組音声を処理する。その結果、スピーチ区間は聞取り易く、書起しし易くなる。
【００１９】
一方、書起し不要な非スピーチ区間は自動的に除去できるので、書起し作業者はスピーチ部分の書起し作業に専念することができ、字幕用テキストの正確・迅速な作成に大いに貢献することができる。
【００２０】
また、この処理は必要な能力・労力の低減にも寄与するので、書起し作業者は一般的なワープロ作業者レベルの方々まで拡大できる可能性がある。
【００２１】
なお、ポーズの検出に関しては特願２００２−１６０２５５「音声のスピーチ／ポーズ区間検出装置」で提案済みであり、このような手法（この手法を第１の手法として後述する）で検出したポーズを本件番組音声の分割などの処理に適用できる。
【００２２】
《番組音声分割処理の手法》
前記「一区切りのスピーチ区間」の意義をさらに検討すると、書起しのための適切な分割単位の設定と必要に応じて行う低速化処理は、この分割時間内にこの単位となるスピーチの書起し作業を完了出来るようにすることであり、分割と必要回数の繰り返しも同様である。
【００２３】
まず、聞き易さの点では、番組音声におけるスピーチのないところ、もしくは息継ぎなどによる途切れ箇所（書起しのためのポーズとする）を利用して分割するのが合理的である。
【００２４】
どの程度の長さに分割するかについては後述するが、この処理で所要の分割長に収まらない場合は、追加の分割処理を考える必要がある。
【００２５】
そのため、検出した比較的長いポーズ（例えば１〜２秒）でまず分割し、分割が足りない部分はより短いポーズ（例えば０．５〜１秒）で分割し、なお分割が足りない部分は他の方法（より短いポーズ、所定時間など）によることとした。
【００２６】
《書起しのための分割の長さについての考察》
書起しのための分割の長さについては、未知語や固有名詞なども含めて、短期記憶が可能である長さが望ましいと考えているが、簡単な実験からも妥当性がある。
【００２７】
短期記憶可能な長さの具体的なイメージは一義的には定めがたいものであるが、身近な事例として俳句や和歌、標語の例がある。これらは、かたかな（モーラ）で１７文字（モーラ）や３１文字（モーラ）であるので、一応２５文字（モーラ）程度を目標として検討した。これは、漢字の割合を１／３としたかな漢字混じり文では約１９文字になり、１モーラを０．１秒とすると時間は２．５秒に相当する。
【００２８】
聞取り易く、書起しし易いような番組音声の分割法として、分割の位置やここで上げた分割長としてのモーラ数や時間の妥当性を検証するために、まず実際の番組テキストを利用して検討を行った。
【００２９】
《実際の番組テキストを利用した分割法の検討》
図２は、ニュース番組を例として、手作業により書起しのための分割をしたものである。この図２に示す例は番組テキストなので、通常存在する句読点にまず着目するとともに、文節も考慮して分割した。
【００３０】
図３はドキュメンタリー番組を例として手作業による書起しのための分割例である。図３に示す例も同様に、まず句読点に着目するとともに、文節も考慮して分割した。ここで、両図で使用される語句を以下のように定義する。
【００３１】
開始：対応する番組音声の開始時間
終了：対応する番組音声の終了時間
時間：対応する番組音声の経過時間
カナ：テキストのカナ数
漢字：テキストの漢字等の数
モーラ：テキストのモーラ数（漢字等は、１．８６モーラとして計算）
／Ｓ：モーラ数／経過時間で１秒あたりのモーラ数である。
【００３２】
図２の場合、経過時間つまり時間長は平均２．４５秒（最小：１．３秒、最大：３．４秒）であり、モーラ数は平均２４．４（最小：１２．３、最大：３３．３で３９０／１６）であった。総モーラ数（モーラ数の合計）／総経過時間（経過時間の合計）は３９０／３９．２＝９．９５であり、これはスピーチの速度と関係する値で、やや早いスピーチである。
【００３３】
図３の場合、経過時間つまり時間長は平均２．２６秒（最小：０．９秒、最大：３．５秒）であり、モーラ数は平均１７．５（最小：９．５、最大：２５．２）であった。総モーラ数（モーラ数の合計）／総経過時間（経過時間の合計）は７．７６であり、これはスピーチの速度と関係する値で、ほぼ標準のスピードである。
【００３４】
これら二つの番組例について、図２、図３のようにテキストを手作業で分割し、この分割テキストに対応するするよう番組音声を分割し、必要回数繰り返し再生しながら、簡単な書起し実験を行った。
【００３５】
その結果、一部の長い経過時間部分を除き、かなり聞取り易く、書起しし易く、しかも速いとの評価が得られ、平均２５モーラ、２．５秒程度での分割の妥当性を確認することが出来た。
【００３６】
《実際の番組音声におけるスピーチ／ポーズ部分の検出》
しかし、実際の書起しの対象は番組音声中のスピーチであり、句読点や文節があるわけでなく、さらに目的のスピーチだけでなくさまざまな背景音があり、まったく事情が異なる。
【００３７】
番組音声の処理では、望ましくは正しく各スピーチ区間の開始・終了時間を求め、この開始・終了時間を基に前記の説明に準じて適切な時間長となるよう分割することとなる。
【００３８】
しかし、実際の番組音声では目的のスピーチだけでなく様々な背景音が重なっており、各スピーチ区間の開始・終了時間を正しく求めることは一般には至難なことである。一方、非スピーチ区間の場合は、無音区間は確実であり、背景音がある場合でもそのレベル、区間長によっては信頼性が大きいと判断できる可能性がある。
【００３９】
そこで、本発明では、入力音声信号の振幅レベルまたはパワーレベルを示すレベル信号の分析により、通常の速度におけるスピーチの変動特性を示す特定周波数成分を抽出し、抽出された特定周波数成分のエンベロープ波形を求め、求められたエンベロープ波形信号に対して所定のスライスレベルを設定してポーズ区間を検出する第１の手法、または音響データ内の複数のＬＣＰケプストラムベクトルを、基準フレームから相互に比較することで、音響データ内容の切り替わり点を、より安定に検出する第２の手法（ブロックケプストラムフラックス法）によりポーズを検出するようにしている。
【００４０】
＜実施の形態の説明＞
図１は、本発明に係る書起し支援装置の実施形態を示すブロック図である。
【００４１】
同図に示す書起し支援装置は、入力音声信号のポーズを検出するポーズ検出部１と、検出されたポーズに基づいて、書起し作業者の短期記憶が可能な時間または文字数で前記入力音声信号を分割する分割部１１とを備えている。
【００４２】
ポーズ検出部１は、入力音声信号の振幅レベルまたはパワーレベルを示すレベル信号から、通常の速度におけるスピーチの変動特性を示す特定周波数成分を抽出する特定周波数成分抽出手段３と、抽出された特定周波数成分のエンベロープ波形を求め、求められたエンベロープ波形信号に対して所定のスライスレベルを設定してそのレベル以下のポーズ区間を検出するポーズ区間検出手段５とから構成されている。
【００４３】
また、分割部１は、ポーズ検出部１によって検出されたポーズの中で、最も信頼性の高いポーズにより前記入力音声信号を分割する第１次分割手段１３と、この第１次分割手段１３による分割の結果、短期記憶が可能な所定の時間以上または所定の文字数以上である部分については、次に信頼性の高いポーズにより前記入力音声信号を分割する第２次分割手段１５と、この第２次分割手段による分割の結果、短期記憶が可能な所定の時間以上または所定の文字数以上である部分については、次の次に信頼性の高いポーズにより前記入力音声信号を分割するか、または予め決定された時間若しくは文字数で機械的に分割する第３次分割手段１７と、分割された音声の前後部分を所定の時間または文字数だけ重複させる重複手段１９とから構成されている。
【００４４】
次に、この実施の形態の作用をポーズ検出部１の処理と、分割部１１の処理に分けて説明する。
【００４５】
《ポーズ検出部１の処理》
図４乃至図７はポーズ検出処理の手順を示す説明図である。
【００４６】
図４のフローチャートにおいて、先ず、図５（Ａ）に示すような振幅波形を持つ番組音声信号を取り込んで、音声振幅値の基準化処理を実行する（ステップＳＴ１，ＳＴ３）。この処理では、取り込まれた番組音声信号中からそのエンベロープの低域成分のみを取り出して（ステップＳＴ５）、この低域成分の振幅値を基として信号成分を所定レベルの大きさにする処理である。一般に、低域成分のレベルが大きい場合には高域成分のレベルも大きいと考えられる。レベルに違いがあると検出精度に影響を与えるので、ある程度のレベル基準化を図る必要があるからである。
【００４７】
こうして音声振幅値の基準化がされた音声信号は、次に、絶対値化処理がされて、図５（Ｂ）に示すような＋側に折り返した振幅値波形信号（Ｌｃｈ，Ｒｃｈのステレオ音声信号がある場合は、その和と差の信号を利用してスピーチ部分を伸長する）と成る（ステップＳＴ７）。図６（Ａ）の波形は、図５（Ｂ）に矢印で示した範囲の時間軸を１０倍に拡大して示したものである。
【００４８】
次いで、絶対値化された振幅値波形信号からディジタル高域ろ波処理（ステップＳＴ９）、ディジタル帯域ろ波処理（ステップＳＴ１１）が実行される。ディジタル高域ろ波処理では、例えば２Ｈｚ以上の周波数の信号が取り出され、ディジタル帯域ろ波処理では、例えば４〜７Ｈｚの周波数の信号が取り出される。図６（Ｂ）の波形は、４〜７Ｈｚ成分の信号波形である。
【００４９】
スピーチに関する時間軸方向の変動特性をスピーチの発音記号列と比較すると、母音の発音記号に対応する音声パワーが他の部分よりも大きくなる傾向があることが知られている。そして、通常速度のスピーチにおける信号波形の時間軸方向への変動は、４〜７Ｈｚ程度の周波数となっていることを先願で示した（特願２００２−１６０２５５）。この実施形態は、この波形の時間軸方向の変動に着目し、大まかな周期性を捉えることでポーズ部分の検出をする。
【００５０】
ディジタル帯域ろ波処理で４〜７Ｈｚの周波数の信号が取り出され、さらに絶対値化処理（ステップＳＴ１２）をすると、スピーチに類似した波形の信号となる。一方、演算処理（ステップＳＴ１３）が実行されると、これら取り出された信号の差分として主なスピーチ成分以外の成分が抽出され、さらに絶対値化処理（ステップＳＴ１５）、ディジタル低域ろ波処理（ステップＳＴ１７）が実行される。レベル補正処理（ステップＳＴ１９）では、低域ろ波処理で生成された０．５Ｈｚ以下の低域成分の波形は主にスピーチ成分以外の成分が多いので、このレベルを参照して、ステップＳＴ１２出力のスピーチ類似波形信号のレベルを逆方向に補正し、結果的にスピーチ成分を強調する処理がされる。この処理後のスピーチ近似波形を図７に示す。
【００５１】
こうして、レベル補正がされたエンベロープ波形信号は、その適否検証のためディスプレイ上に波形表示される（ステップＳＴ２１）。そして、図７に示すように、所定のスライスレベル（閾値）でスライスされる（ステップＳＴ２３）。
【００５２】
次に、微小ポーズ区間除去処理が実行される（ステップＳＴ２５）。この処理では、スライス処理された音声振幅値信号中から、例えば、ちょっとした母音区間の変動や息継ぎ程度の区間は検出対象から除外するためである。検出時間範囲として、例えば、“０．２〜２秒”程度を設定し、その以下の時間を検出対象外として除去する処理である。これにより、意味を持たない信頼性が低いポーズ検出が効果的に防止できる。
【００５３】
こうして検出されたポーズ区間が画面表示される（ステップＳＴ２７）。ポーズの検出精度やスライス（ステップＳＴ２３）レベル設定の最適化などの目的でスピーチ区間を実測し、図７に示すように、実測スピーチ区間と比較される（ステップＳＴ２９）。これにより、実測されたスピーチ区間から導かれるポーズ区間と、検出されたポーズ区間とが比較され、比較によって、ポーズ検出精度をチチェックしたり、スライスレベルが最適となるように変更することができる。
【００５４】
《分割部１１の処理》
上述のようにしてポーズが検出されると、次に、図８のフローチャートに示すように、比較的長いポーズが一番信頼性が高いといえるので、先ず、１〜２秒程度以上の長いポーズにより入力音声信号を分割する（ステップＳＴ４１）。この処理は第１次分割手段１３で実行される。
【００５５】
この分割の結果、作業者にとって短期記憶が可能な所定の時間以上または所定の文字数以上である部分については、次に長いポーズ（０．５〜１秒程度）により入力音声信号を分割する（ステップＳＴ４３，ＳＴ４５）。この処理は第２次分割手段１５で実行される。
【００５６】
この分割の結果、作業者にとって短期記憶が可能な所定の時間以上または所定の文字数以上である部分については、次の次に長いポーズ（例えば０．２〜０．５秒）により前記入力音声信号を分割するか、または予め決定された時間若しくは文字数で機械的に分割する（ステップＳＴ４７，ＳＴ４９）。この処理は第３次分割手段１７で実行される。
【００５７】
また、分割部１１における分割に際しては、信頼性上問題がある可能性のある分割手段１５，１７による分割の場合には、重複手段１９により、分割された音声の前後部分を所定の時間または文字数だけ重複させる（ステップＳＴ５１）。例えば１秒程度の重複部分を設けることにより、ポーズ検出の信頼性の低さによって引起こされる書起し作業者の聴取不能や書起しの欠落を防止することができる。
【００５８】
《ブロックケプストラムフラックス法によるポーズの検出》
スピーチ区間を検出する第２の手法としてのブロックケプストラムフラックス（Ｂｌｏｃｈ  Ｃｅｐｓｔｒｕｍ  Ｆｌｕｘ）法について簡単に説明する。
【００５９】
この手法は、音響データ内の複数のＬＣＰケプストラムベクトルを、基準フレームから相互に比較することで、音響データ内容の切り替わり点を、より安定に検出するものである。
【００６０】
図９のグラフには、平均的な背景音レベルと考えられる実際のテレビ番組の音声をこの両手法で分析処理した結果を示した。
【００６１】
図９において、（Ａ）はブロックケプストラムフラックス法による処理値（ｃｆｌｘ解析値）、（Ｂ）は音声エンベロープの４〜７Ｈｚ成分抽出（第１の手法による）値、（Ｃ）は（Ｂ）の波形を適切なレベルでスライスし、２値化したデータである。
【００６２】
この（Ｃ）の波形では、高レベル範囲はスピーチ、低レベル範囲は非スピーチ（ポーズ）区間に対応するものとし、この場合の（Ｃ）は、実測したスピーチ区間とかなりよく合致しているといえる。
【００６３】
したがって、（Ｃ）の波形から音声中のスピーチ区間をある程度正確に把握することができる。（Ｃ）の波形中でＰ１は短いポーズ、Ｐ３は比較的長いポーズであり、このＰ３が最も信頼性の高いポーズ、Ｐ２が次に信頼性の高いポーズといえる。
【００６４】
なお、（Ａ）のブロックケプストラムフラックス法（第２の手法）についても同様にして比較したが、第１の手法よりやや悪い結果であるが、場合によっては適用可能である。
【００６５】
＜実際の番組音声のポーズ部分検出を利用した分割実験＞
実際の番組音声におけるスピーチのないところ、もしくは息継ぎなどによる途切れ箇所を番組音声の適切な処理により検出（書起しのためのポーズとする）し、このポーズなどを目安にして書き起こすべきスピーチを作業がし易い単位に分割し、また必要に応じて低速化処理などを行った。
【００６６】
書起し作業がし易いスピーチの時間は前記のように２．５秒程度が望ましいので、この程度となるよう分割した。対象にした番組はかなり高レベルの背景音（音楽）があるため、ここの分割手法は、まず比較的長いポーズ（例えば２秒程度以上）を検出して分割した。
【００６７】
図１０は、対象にした番組の音声（かなり高レベルの背景音（音楽）がある）からのポーズ部分検出を説明したものである。
【００６８】
対象番組のオリジナル音声波形を下端に示したが、前述した第１の手法を用いて、この波形のエンベロープからその４〜７Ｈｚの周波数範囲成分を抽出し、その振幅値を「処理後の音声波形」として示した。この「処理後の音声波形」を適当なスレシホルドレベルで大小を比較し、「検出ポーズ」とした。この「検出ポーズ」の適否を評価するために、参考に実測スピーチのデータも表示した。少なくとも比較的長いポーズ（例えば２秒程度以上）は正しく検出されているといえる。
【００６９】
このポーズ検出結果を利用し、ポーズが１〜２秒での第１分割、０．５〜１秒の第２分割を行った。この分割でも２．５秒程度以上となる部分は、以下のいずれもの手法で２．５秒程度となるよう分割した。
【００７０】
（１）より短いポーズ（例えば０．２〜０．５秒以上）を検出し、これを利用してさらに分割。
（２）３秒程度となるように、この部分を等分割。
【００７１】
なお、少なくとも（１）または（２）の処理を適用した部分は、１秒程度の重複部分を設けて、欠落や聴取不能を回避するようにした。また重複部分を示すため、その部分の冒頭に重複表示音ＣＨを挿入して重複であることが分かるようにした。
【００７２】
＜分割・重複処理例＞
実際の処理例を文章で示すと下記のようになる。下線部分は重複処理を示す。また、ＰＰ  ：１〜２秒以上の検出ポーズ、ＳＰ：０．５〜１秒以上の検出ポーズ、ＣＨ：重複表示音（下線部分は重複部分）をそれぞれ示す。
【００７３】
（１）の処理例  １秒重複  １８分割
ＰＰ大自然、そこにはいつも、生きもの
ＣＨ生きものたちが織りなす不思議と感動があります。ＳＰ
さあ、大自然の真っただ中へ、生きもの地球紀行。ＳＰ
新しい出会いを求めて、とっておきの
ＣＨとっておきの地球の旅の始まりです。ＰＰ
今日の舞台は中米コスタリカに
ＣＨ米コスタリカに広がる熱帯の森です。ＳＰ
この森では、多くの生きものたちが
ＣＨ生きものたちが、工夫を凝らして生きています。ＳＰ
中でも、独特の知恵をもって暮らして
ＣＨをもって暮らしているのが、ノドジロオマキザルです。ＰＰ
ノドジロオマキザルの知恵は様々です。ＳＰ
木の実を石にたたきつけて、中
ＣＨきつけて、中の種を取り出します。ＳＰ
更に、種類の違うサルと平和に暮らす
ＣＨ平和に暮らす、駆け引きの知恵まであるのです。ＰＰ
ノドジロオマキザルが、森の暮らしの中で見せる、ＳＰ知恵
ＣＨ見せる、知恵の数々を見つめました。ＰＰ
【００７４】
（２）処理例  ＰＰ間等分割、１秒重複  １６分割
ＰＰ大自然、そこにはいつも、生きものたち
生きものたちが織りなす不思議と感動があります。さあ
さあ、大自然の真っただ中へ、生きもの地
生きもの地球紀行。新しい出会いを求めて、
会いを求めて、とっておきの地球の旅の始まりです。ＰＰ
今日の舞台は中米コスタリカに広がる
カに広がる熱帯の森です。この森では、
この森では、多くの生きものたちが、工夫を凝らして生きてい
凝らして生きています。中でも、独特の知恵をも
特の知恵をもって暮らしているのが、ノドジロオマキザルです。ＰＰ
ノドジロオマキザルの知恵は様々です。木
木の実を石にたたきつけて、中の種を取り出し
の種を取り出します。更に、種類の違うサルと平
違うサルと平和に暮らす、駆け引きの知恵まであるのです。ＰＰ
ノドジロオマキザルが、森の暮らしの中で見せる
の中で見せる、知恵の数々を見つめました。ＰＰ
【００７５】
《分割番組音声を利用した書起し実験》
実験対象にした番組は全体で７８秒、スピーチ部分は４８秒（６２％）である。
【００７６】
前記の分割方法による番組音声を利用して書起し実験を行った。実験は、図１１に示すように、ＭＩＤＩＰＬＡＹＥＲ（シェアウエアソフト）に上記のように処理した分割音声を入れ、このソフトの操作機能を利用して行った。具体的には、各分割音声は繰り返し再生状態とし、ハッチした部分の書起しが完了するとキー操作で次の分割音声に進むようになっている。図１１は上記（１）の処理例を示す。
【００７７】
図１１のソフトにより実験した結果、
（１）の方法による書起し時間：約１３５秒    各分割音声の繰り返し回数  約２．８回
（２）の方法による書起し時間：約１５２秒    各分割音声の繰り返し回数  約３．２回
であり、一応検出したポーズをできるだけ活用する分割方法が望ましいことが分かった。
【００７８】
【発明の効果】
以上説明したように本発明によれば、検出したポーズを利用すると番組音声の適切な分割、必要ならば低速化、あるいは繰返しなどの処理を番組音声信号に施し、聞取り易く、書起しし易いように支援することが可能となる。
【００７９】
また、重複手段により、分割された特定音声の前後部分を所定の時間または文字数だけ重複させるようにしているので、書起し作業者の聴取不能や書起しの欠落を効果的に防止することができる。
【図面の簡単な説明】
【図１】本発明に係る書起し支援装置に一例を示すブロック図である。
【図２】ニューズ番組の書起しのための分割実験例を示す説明図である。
【図３】ドキュメンタリー番号見の書起しで検証された分割例を示す説明図である。
【図４】ポーズ検出の手順を示すフローチャートである。
【図５】番組音声信号波形と、この波形に対応する振幅レベル信号またはパワーレベル信号を示す説明図である。
【図６】図５に示した振幅レベル信号またはパワーレベル信号を時間軸を拡大して示すと共に特性周波数範囲の抽出成分値を示す説明図である。
【図７】図６に示した特定周波数範囲の振幅レベル信号またはパワーレベル信号のエンベロープ波形と実測ポーズ（スピーチ）部分を示す説明図である。
【図８】ポーズによる番組音声の分割の処理手順を示す説明図である。
【図９】音声信号を特殊処理したスピーチ近似データの説明図である。
【図１０】ポーズ部分検出の説明図である。
【図１１】分割された番組音声を音声再生ソフトを使用して再生する際に使用されるコンピュータの画面例を示す説明図である。
【符号の説明】
１  ポーズ検出部
３  特定周波数成分抽出手段
５  ポーズ区間検出手段
１１  分割部
１３  第１次分割手段
１５  第２次分割手段
１７  第３次分割手段
１９  重複手段
【図１】
2004212799.tif 000003
【図２】
2004212799.tif 000004
【図３】
2004212799.tif 000005
【図４】
2004212799.tif 000006
【図５】
2004212799.tif 000007
【図６】
2004212799.tif 000008
【図７】
2004212799.tif 000009
【図８】
2004212799.tif 000010
【図９】
2004212799.tif 000011
【図１０】
2004212799.tif 000012
【図１１】
2004212799.tif 000013