(57)【要約】【課題】  オーディオ出力を伴う特殊再生を行う際に、より聞き取りやすいオーディオ出力を実現する。【解決手段】  オーディオ出力を伴う特殊再生を行う際に、1フレーム未満の単位でオーディオデータに対するデコード・出力処理のスキップ・リピート制御を行い、且つ、高周波数領域の出力レベルを強調する補正を行い良好なオーディオ出力を実現する。また、再生するオーディオデータの特徴によってスキップ・リピート制御や出力レベル補正の手法を変更することによっても、良好なオーディオ出力を実現する。【選択図】図１
2005346781.tif 000002
【特許請求の範囲】
【請求項１】
符号化された音声のデータストリームを再生するデジタル情報再生装置において、
前記データストリームの再生時に利用する時刻情報にオフセットを付加するオフセット付加手段と、
前記オフセット付加手段によりオフセットが付加された時刻情報に基づき、前記データストリームの再生速度が可変となるようにデコードを行なうデコード手段と、
前記デコード手段においてデコードされた音声信号を出力する出力手段と、を備えることを特徴とするデジタル情報再生装置。
【請求項２】
前記オフセット付加手段は、装置内の時刻基準となるＳＴＣカウンタ値にオフセットを付加することを特徴とする請求項１に記載のデジタル情報再生装置。
【請求項３】
前記データストリームから前記時刻情報を取得する時刻情報取得手段を備えてなることを特徴とする請求項１に記載のデジタル情報再生装置。
【請求項４】
前記デコード手段は、前記オフセットが付加された時刻情報に基づき１オーディオフレーム未満のデータのデコードの制御を行なうことを特徴とする請求項１に記載のデジタル情報再生装置。
【請求項５】
前記デコード手段の出力レベルを音声の周波数成分に応じて補正することを特徴とする請求項１に記載のデジタル情報再生装置。
【請求項６】
前記レベル補正手段は、前記デコード手段が再生速度を可変して再生を行う際に、所定の周波数よりも高い高周波数領域の音声の出力レベルを強調することを特徴とする請求項５に記載のデジタル情報再生装置。
【請求項７】
前記レベル補正手段は、前記デコード手段が再生速度を可変して再生を行う際に、所定の周波数よりも低い低周波数領域の音声の出力レベルを低減することを特徴とする請求項５に記載のデジタル情報再生装置。
【請求項８】
前記データストリームは、伝送されるコンテンツの番組関連情報が付加されており、
前記番組関連情報を取得する番組関連情報取得手段を備え、
前記オフセット付加手段は、前記番組関連情報取得手段において取得された前記コンテンツに関する情報に応じて、前記オフセットの大きさを変えることを特徴とする請求項１に記載のデジタル情報再生装置。
【請求項９】
前記データストリームは、伝送されるコンテンツの番組関連情報が付加されており、
前記番組関連情報を取得する番組関連情報取得手段を備え、
前記オフセット付加手段は、前記番組関連情報取得手段において取得された前記コンテンツに関する情報に応じて、前記補正手段における補正量を変えることを特徴とする請求項４に記載のデジタル情報再生装置。
【請求項１０】
前記データストリームはＭＰＥＧ規格におけるＴＳ形式の放送ストリームにて放送された音声データであり、前記放送ストリームのデータから所望の音声データおよび映像データを分離するデマルチプレクサと、前記デマルチプレクサにより分離された音声データおよび映像データを記録する記録手段と、を備えることを特徴とする請求項１に記載のデジタル情報再生装置
【請求項１１】
符号化された音声のデータストリームを再生するデジタル情報再生方法であって、
前記データストリームの再生時に利用する時刻情報にオフセットを付加するステップと、
オフセットが付加された時刻情報に基づき、前記データストリームの再生速度が可変となるようにデコードを行なうステップと、
前記デコード手段においてデコードされた音声信号を出力するステップと、を備えることを特徴とするデジタル情報再生方法。
【請求項１２】
前記付加されるオフセットは１オーディオフレーム未満の時刻に相当するオフセットであることを特徴とする請求項１１に記載のデジタル情報再生方法。
【請求項１３】
前記デコードを行なうステップにおいて、１オーディオフレーム未満のデータ量を単位としてデータをデコードすることを特徴とする請求項１１に記載のデジタル情報再生方法。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明はデジタル情報再生装置および再生方法に関する。特に符号化されたオーディオ信号を特殊再生するために好適なデジタル情報再生装置に関する。
【背景技術】
【０００２】
符号化され、ハードディスク等の記録媒体に記録されたオーディオデータの場合、通常の速さで再生する他に、特殊な再生(以後、特殊再生という)として再生速度を調整して出力する事が可能である。例えば喋りのテンポが速いＴＶ番組や外国語のＴＶ番組など、視聴者にとって理解が間に合わない・音声が聞き取りづらいといった際に通常よりゆっくり再生するスロー再生の機能を用いることでＴＶ番組再生のテンポを遅くして視聴することが可能である。
【０００３】
この時、要求する速さを実現するために元のデータを加工することになり、音質の劣化を免れられない。そのため、音質を良くするための制御方法を検討する必要がある。例えば２倍速で音声を出力する際に音質の向上を図る技術が開示されている(特許文献１参照)。
【０００４】
【特許文献１】特開２００２−２７８５９７
【発明の開示】
【発明が解決しようとする課題】
【０００５】
従来の技術においては、通常の２倍の速さで音声を出力するために１オーディオフレームおきにデコード・出力を行い、その出力レベルが不連続となるデータ間において、出力レベルを最小２乗法によって連続にすることで音質の向上を図っている。
【０００６】
しかし、従来の技術では２倍速以外の音声の高速再生時や、通常より低速での音声の再生において、音質の向上を図ることが不可能である。また、従来技術のようなオーディオフレームを1フレームおきに等間隔にデコードし、その出力レベルの不連続を補正するだけでは、ニュースなどのゆっくりとした喋りが中心のコンテンツに対しては有効であるが、バラエティ、或いはドラマなどの早い喋りがあるコンテンツではあまり効果が発揮されない。本発明は、上記の課題に対して取り組み、２倍速以外の音声の特殊再生も可能となり、且つ様々なコンテンツにおいて良好な音質での特殊再生が可能なデジタル記録再生装置を提供することを目的としている。
【課題を解決するための手段】
【０００７】
本発明は、上記目的を達成するためにデータストリームの再生時に利用する時刻情報にオフセットを付加するオフセット付加手段と、前記オフセット付加手段によりオフセットが付加された時刻情報に基づき、前記データストリームの再生速度が可変となるようにデコードを行なうデコード手段とを備える構成とする。また、オーディオ出力を伴う特殊再生を行う際に、1フレーム未満の単位でオーディオデータに対するデコード・出力処理のスキップ・リピート制御を行う。また、高周波数領域の出力レベルを強調する補正を行い良好なオーディオ出力を実現する。また、再生するオーディオデータの特徴によってスキップ・リピート制御や出力レベル補正の手法を変更することによっても、良好なオーディオ出力を実現する。
【発明の効果】
【０００８】
本発明によって、特殊再生時に良好な音声出力を実現することが可能となる。
【発明を実施するための最良の形態】
【０００９】
以下の実施例ではデジタル放送の伝送に用いられるＭＰＥＧ（Moving Picture Experts Group）２トランスポートストリーム（以下、ＭＰＥＧ２−ＴＳと略す）を記録、再生する装置を例に説明を行う。尚、以下は本発明の説明のための例示であって、本発明の範囲をこの変形例にのみ限定する趣旨ではない。本発明は、他の種々のデジタル記録再生装置やデジタル情報再生装置でも実施することが可能である。
【実施例１】
【００１０】
始めにＭＰＥＧ２−ＴＳの特徴について説明する。デジタル記録再生に適したデータ形式としてＭＰＥＧ２方式があり、ビデオの場合、画像の符号化データ構造はＩ・Ｐ・Ｂピクチャと呼ばれる構造を持ち、複数枚のピクチャをまとめてＧＯＰ（Group of Picture）という編集単位を構成している（例えばＴＶ放送ではピクチャ１５枚で１ＧＯＰという構成がよく使用される）。
【００１１】
Ｉピクチャは画面の全てをイントラ符号化するフレーム内符号化を用いており、Ｉピクチャ単独でデコードが可能である。ＰピクチャはＩピクチャを利用した順方向のピクチャ間予測符号化によって符号化されており、ＰピクチャをデコードするにはＩピクチャが必要となる。さらにＢピクチャは前後のＩピクチャもしくはＰピクチャを利用した双方向予測符号化に基づいているため、デコードにはデコードするＢピクチャの直前と直後のＩピクチャ或いはＰピクチャを必要とする。
【００１２】
一つのＧＯＰにはＩピクチャが少なくとも１枚含まれており、ＧＯＰ単位でのランダムアクセスを可能としている。
【００１３】
ひとつのメディアごとにデータをパケット化したものをＰＥＳ（Packetized Elementary Stream）パケットと呼ぶ。ビデオ、オーディオなどのデータを固定長で分割したＰＥＳパケットにして組み込むことで、マルチメディア多重したものがＭＰＥＧ２−ＴＳ（Transport Stream）である。
【００１４】
また、ＭＰＥＧ２−ＴＳには送信側が意図したとおりに受信側で動作するようにＰＣＲ(Program Clock Reference)とよばれるシステムの基準参照値が埋め込まれて送信される。同様に、再生時に参照される時刻管理情報のＰＴＳ(Presentation Time Stamp)、デコード時に参照される時刻管理情報であるＤＴＳ(Decoding Time Stamp)などのデータもＰＥＳのヘッダ情報に埋め込まれて送信される。
【００１５】
＜通常の再生手順＞
図１は記録再生装置の構成の一例のブロック図を示す。この図を用いて本実施例におけるデジタル記録再生装置について説明する。
図１において、デジタル記録再生装置は、記録媒体１０１、デマルチプレクサ１０２、制御部１０３、ＰＣＲ取得部１０４、クロック発生部１０５、ＳＴＣカウンタ１０６、ビデオＰＥＳパーサ１０７、ビデオバッファ１０８、ビデオデコーダ１０９、ＤＴＳ／ＰＴＳ取得部１１０、ＳＴＣ比較器１１１、オーディオＰＥＳパーサ１１２、オーディオバッファ１１３、オーディオデコーダ１１４、ＰＴＳ取得部１１５、ＳＴＣ比較器１１６、オフセット設定部１１７、出力レベル補正部１１８及びシステムバス１１９を備える。本実施例では、図１に示していない入力ポートから上記で説明したＭＰＥＧ２−ＴＳ形式の信号が受信され、ハードディスクドライブに代表される記録媒体１０１に記録されているとする。
【００１６】
記録媒体１０１は記録されているデータの中からユーザに選択される任意のＭＰＥＧ２−ＴＳ形式のデータストリームを読み出し、マルチプレクサ１０２へ送出する。
【００１７】
デマルチプレクサ１０２は記録媒体１０１から送られてきたストリーム中に混在しているビデオＰＥＳ・オーディオＰＥＳ・ＰＣＲデータ・その他のデータを分離して、ビデオＰＥＳをビデオＰＥＳパーサ１０７に、オーディオＰＥＳをオーディオＰＥＳパーサ１１２に、ＰＣＲデータをＰＣＲ取得部１０４にそれぞれ供給する。制御部１０３は、システムバス１１９を介して再生装置内の各ユニットにおける処理の制御を行う。
【００１８】
ＰＣＲ取得部１０４はデマルチプレクサ１０２から供給されたＰＣＲデータのＰＣＲ値とＳＴＣカウンタ１０６のＳＴＣカウンタ値が異なる場合、制御部１０３はＳＴＣカウンタ１０６にＰＣＲ値をセットする。
【００１９】
クロック発生部１０５はＳＴＣカウンタ１０６がクロックに同期してＳＴＣカウンタ値を増加させるために必要となるクロック信号を発振、供給する。
【００２０】
ＳＴＣカウンタ１０６はＰＣＲ取得部から供給されるＰＣＲ値をＳＴＣカウンタに設定し、以降、クロック発生部１０５から供給されるクロック信号と同期してＳＴＣカウンタ値を増加させる。設定されたＳＴＣカウンタ値を随時ビデオデコーダに付随するＳＴＣ比較器１１１、オーディオデコーダに付随するＳＴＣ比較器１１６へと供給する。
【００２１】
ビデオＰＥＳパーサ１０７は、デマルチプレクサ１０２から供給されるビデオＰＥＳの解析を行い、ビデオデータ、時刻情報であるＤＴＳ・ＰＴＳを分離する。分離したビデオデータはビデオ再生用のビデオバッファ１０８に送られ、時刻情報はＤＴＳ／ＰＴＳ取得部１１０に送られる。
【００２２】
ビデオバッファ１０８は、ビデオＰＥＳパーサ１０７から供給されるビデオデータを入力として、時刻情報に同期してビデオデコーダ１０９へ出力をするタイミングを計るための緩衝記憶装置である。
【００２３】
ビデオデコーダ１０９はＳＴＣ比較器１１１からのＤＴＳとＳＴＣが一致したという通知に同期してビデオバッファ１０８からその時刻情報に対応するビデオＰＥＳパケットを取得、デコードを実行し、また、ＰＴＳとＳＴＣが一致したという通知に同期してデコードしたビデオＰＥＳパケットを映像出力する。
【００２４】
ＤＴＳ／ＰＴＳ取得部１１０は、ＰＥＳパーサ１０７によってビデオＰＥＳパケットから分離されたＰＴＳおよびＤＴＳを取得して、ビデオデコーダに付随するＳＴＣ比較器１１１へと出力する。
【００２５】
ビデオデコーダに付随するＳＴＣ比較器１１１は、ＳＴＣカウンタ１０６から供給されるＳＴＣカウンタ値と、ＤＴＳ／ＰＴＳ取得部１１０から取得したＤＴＳ値とを比較して両者の値が一致するとビデオデコーダ１０９へそれを通知する。同様にＤＴＳ／ＰＴＳ取得部１１０から取得したＰＴＳ値とＳＴＣカウンタ値を比較して、両者が一致した場合にビデオデコーダ１０９に通知する。
【００２６】
オーディオＰＥＳパーサ１１２は、デマルチプレクサ１０２から供給されるオーディオＰＥＳの解析を行い、オーディオデータ、時刻情報であるＰＴＳを分離する。オーディオデータをオーディオバッファ１１３に送信し、ＰＴＳデータをＰＴＳデータ抽出部１１５に送信する。
【００２７】
オーディオバッファ１１３は、オーディオＰＥＳパーサ１１２から送出されるオーディオデータを入力として、時刻情報に同期してオーディオデコーダ１１４へ出力するタイミングを計るための緩衝記憶装置である。
【００２８】
オーディオデコーダ１１４では、ＳＴＣ比較器１１４からＳＴＣカウンタ値とＰＴＳが一致したという通知が送られてきたタイミングに同期してオーディオバッファ１１３からオーディオデータを取り込んでデコードを実行し、出力レベル補正部１１８にオーディオデータを出力する。
【００２９】
ＰＴＳデータ取得部１１５はオーディオＰＥＳパーサ１１２から送られるＰＴＳ値を抽出し、オーディオデコーダに付随するＳＴＣ比較器１１６へ出力を行う。
【００３０】
オーディオデコーダに付随しているＳＴＣ比較器１１６はＰＴＳデータ取得部１１５で抽出されたＰＴＳと、ＳＴＣカウンタ１０６から供給されるＳＴＣカウンタ値とを比較し、ＳＴＣカウンタ値がＰＴＳと一致すると、それをオーディオデコーダ１１４に通知する。
【００３１】
オフセット設定部１１７は特殊再生時にＳＴＣカウンタ１０６から生成されるＳＴＣカウンタ値にオフセットを与える。要求速度に応じたオフセット設定の詳細については後述する。
【００３２】
出力レベル補正部１１８は後述する図２のフローチャートに示す動きをする。
以上で説明した処理手順により、本実施例におけるデジタル記録再生装置において通常再生が行われ、記録媒体１０１から映像と音声が同期して出力される。
【００３３】
上記実施例では、オフセット設定部１１７はＳＴＣカウンタ１０６に対してオフセットを与えているが、オフセット設定部１１７からＤＴＳ／ＰＴＳ取得部１１０とＰＴＳ取得部１１５に対してＰＴＳ、ＤＴＳにオフセットを与えてやることで、同じようにデコードと出力のタイミングを変更する効果を得ることが可能である。
【００３４】
＜特殊再生手法＞
記録媒体からの再生では、通常再生中にユーザが本装置のリモコンのボタン操作などにより、早送りや巻き戻し、一時停止、スロー再生といった特殊再生を実行できる。
【００３５】
図３は、特殊再生実行時の音声再生動作を示したフローチャートである。
Ｓ３０１では、通常再生を１．０として、それに対していかなる比率で特殊再生を行うのか、倍速数の指定をおこなう。後述するＳ３０３では、この比率が１．０倍より小さければスロー再生、１．０倍より大きければ高速再生と判断する。
【００３６】
Ｓ３０２において、既に説明したデータの流れと同様にして、記録媒体１０１からビデオ・オーディオデータの読み出しを行う。
【００３７】
Ｓ３０３で特殊再生の種別が高速再生かスロー再生かを判断する。高速再生の場合にはＳ３０４へ遷移し、スロー再生の場合にはＳ３０５へ遷移する。
【００３８】
Ｓ３０４では、オフセット設定部１１７にて、オーディオデータをスキップ再生するための制御の設定を行う。スキップ再生とは、任意のオーディオフレームのデコード処理を止め、その次のオーディオフレームからデコード処理を再開することである。この処理のために、Ｓ３０１で指定した倍速数に合わせてＳＴＣカウンタ値が増加するように例えばオーディオフレーム毎、或いは数オーディオフレーム毎にオフセットを与える。例えば１．５倍速を実行する場合には、ＳＴＣカウンタ値の増加量が通常再生時よりも１．５倍となるようにオフセットを設定する。
【００３９】
Ｓ３０５では、オフセット設定部１１７にて、オーディオデータをリピート再生するための制御の設定を行う。リピート再生とは、任意部分のオーディオフレームのデコード処理を繰り返し実行することであり、オーディオデコーダ１１４は該当個所のオーディオデータをもう一度先頭部分からデコードする。この処理のためＳＴＣカウンタ値にＳ３０１で指定した倍速数に合うように例えばオーディオフレーム毎、或いは数オーディオフレーム毎にオフセットを与える。例えば０．７５倍速を実行する場合、ＳＴＣカウンタ値の増加量が通常再生時の０．７５倍となるように減算を行う。
【００４０】
Ｓ３０６では、Ｓ３０４あるいはＳ３０５での設定に基づき、オフセット設定部１１７からオフセットを与えられたＳＴＣカウンタ値によってオーディオデータのデコードを行う。
【００４１】
Ｓ３０７で特殊再生を終了するかどうか判断をする。特殊再生を続行する場合Ｓ３０５へ戻り、特殊再生を終了すると判断した場合には、Ｓ３０８へ遷移する。Ｓ３０８では特殊再生を終了するため、オフセット設定部１１７、制御部１０３を通常再生の設定に戻してルーチンを終了する。
【００４２】
オーディオデータのスキップ・リピート手法に関して、設定が自在に変更できることを以下に例をあげて説明する。図４は以下で説明するいくつかの１．５倍速、０．７５倍速の特殊再生設定において、オーディオデータの出力にどのような違いが出るのかを説明するための図解図である。（Ａ）は通常再生時にデコード・出力されるオーディオデータの流れをオーディオフレーム単位で区切って表している。１．５倍速再生時に出力されるオーディオデータの例を示しているのが（Ｂ）、（Ｃ）、（Ｄ）、（Ｅ）である。０．７５倍速再生時に出力されるオーディオデータの例を表しているのが（Ｆ）、（Ｇ）である。（Ｂ）、（Ｃ）、（Ｆ）、（Ｇ）においては通常再生時と比較するために（Ａ）を一緒に示している。
【００４３】
まず早送り再生について、音声データを１．５倍の早送りで再生する場合を例に説明する。１．５倍速で早送りを行う場合には、ＳＴＣカウンタ値にオフセットを与えることでオーディオＰＥＳデータを２／３倍（＝１／１．５）にするため、全体のデータの１／３をスキップしなければならない。この時、例えば図４（Ｂ）に示すように、（Ａ）と比較してオーディオフレーム１、２は同様に処理を行い、オーディオフレーム３はスキップを行う、というように３個に１個の割合で一定の間隔で１フレームずつオーディオデータをスキップする手法が考えられる。一方で、図４（Ｃ）に示すように、（Ａ）における全てのオーディオフレームにおいてスキップ処理を行うというように、フレーム毎に１／３ずつデータをスキップする手法も考えられる。データの減少量は（Ｂ）と（Ｃ）では等しく１／３となる。
【００４４】
上記の例以外でも、求めている倍速数に応じたデータの編集が実行されれば良いため、図４（Ｄ）のように通常のデコードを１フレーム行い、２フレーム続けて点線で示した部分をスキップするという制御や、図４（Ｅ）に示すように２フレーム通常にデコードして、続く４フレームの点線部分でスキップ処理を入れるといったように、より長く６フレームに跨った制御で１．５倍速を実現できる。
【００４５】
ただし以上のように多くの制御方法の中からひとつを選ぶに当たり、視聴者にとってリップシンクずれが気にならないように実行可能であるかを考慮しなければならない。ビデオの再生時刻とオーディオの再生時刻とのずれの範囲が随時２３ミリ秒の音進みと５６ミリ秒の音遅れの間に収まっていることが望ましい。
【００４６】
逆にスロー再生について、０．７５倍速再生を行う場合を例に説明する。
この際にはＳＴＣカウンタ値にオフセットを与えることにより、部分的にリピートを実行し、オーディオＰＥＳのデコード量を４／３倍（＝１／０．７５）にする。例えば図４（Ｆ）に示すように始めのオーディオフレーム１〜３は通常に処理し、濃く塗りつぶした矩形で示した部分でオーディオフレーム３をリピート処理するというように、４回に１回の一定間隔で同じデータを繰り返し出力する処理方法や、図４（Ｇ）に示すように、フレーム毎に１／４ずつそのフレームの先頭をリピートする方法が可能である。（Ｆ）と（Ｇ）を比較した場合も全体のデータ量は等しくなる。０．７５倍のスロー再生においても、上記の二つの方法だけではなく、より多くのリピートのバリエーションが可能である。
【００４７】
また、以上の議論は早送り・スロー再生における倍速数が１．５倍、０．７５倍に関して展開したが、上記以外の倍速数の場合でも同様に当てはまる。
【００４８】
＜出力レベルの補正＞
図２は、図１中の出力レベル補正部１１８で実行される動作を表したフローチャートである。上記の手法によってデコードが完了したオーディオデータが補正部１１８に送信されるが、スキップ・リピートを行ったオーディオデータはその処理の前後において出力が不連続になるため、音質が不自然になる。そのため出力レベル補正部１１８で音質の向上を図る。
【００４９】
Ｓ２０１で特殊再生中かどうかを判断する。通常再生の場合には、補正を実行することなくこのルーチンを終了する。特殊再生であると判断した場合にはＳ２０２へ遷移し、Ｓ２０２からＳ２０４にて一連の補正の設定を行う。
【００５０】
Ｓ２０２では、周波数領域における出力レベルの補正を行う。オーディオデータのスキップ・リピートを行った特殊再生の場合、例えば、会話の音声は４００Ｈｚから３０００Ｈｚくらいの間の周波数帯にあるが、４００Ｈｚよりも低い低周波数領域の出力レベルを弱め、相対的に３０００Hｚ以上の高周波数領域を強調する補正をかけることで、出力される音声がより聞き取りやすくなる。
【００５１】
Ｓ２０３では上記Ｓ２０２における補正の副作用として全体のオーディオ出力のレベルも低下するため、出力される音声が小さくなってしまう。そのため、再度全体のオーディオボリュームを増加させるため、全周波数成分に対してレベルを上げる補正を行う。
【００５２】
Ｓ２０４ではスキップ・リピートを行ったデータの境目に対する補正を行う。スキップ・リピートを行ったデータの境目では、音声の出力レベルが不連続になり、その急激な変化のためにやはり出力される音声は不自然に聞こえてしまう。音声データの不連続点を連続とするように、最小二乗法に代表される線形補間で出力データのレベル補正を行う手法、フェードイン、フェードアウト処理を行うことで不連続点を目立たなくする手法などでそれに対する補正を行う。
【００５３】
なお、以上の複数の補正手法については本実施例に記載された順序で処理を行わなくとも、順序を入れ替える、あるいは並列的に処理を行う手順でも同等の効果が得られる。
【００５４】
＜コンテンツによる制御変更手法＞
スキップ・リピートをどのように行うかを、再生するコンテンツが含んでいるオーディオの特徴を検出して制御手法を変更する手法について説明する。
【００５５】
図５は通常再生時のオーディオ出力レベルの変化の違いを示した模式図である。横軸に時間、縦軸にオーディオ出力レベルを取り、縦軸の振幅が大きい部分ほど出力される音量が大きい。点線はオーディオフレームの分かれ目を示している。
【００５６】
例えば１．５倍速を行う際に、図５の（Ａ）に示すようにオーディオ出力レベルの変化が時間あたりで小さいコンテンツ（例えば、ニュース番組など）の場合、一度のスキップが長くても違和感無く聞く事が可能である。そのため、図４（Ｂ）のように一度のスキップで１フレームスキップするなど、大きくスキップして回数を減らした方が処理の効率は良い。
【００５７】
逆に図５（Ｂ）に示すような出力レベルの変化が短い周期で見られるコンテンツ（例えば、バラエティ番組など）の場合、長いスキップをしてしまうと出力レベルの不連続がより目だってしまう。この場合には例えば図４（Ｃ）のように一度のスキップ間隔を短くする制御方法を適用することで音質を向上することが可能である。
【００５８】
デジタル放送においては、ビデオ、オーディオだけではなく番組の内容を表す様々なデータ情報が多重化されて送信されている。一例としては番組ジャンルという項目があり、ジャンルと登場する人物の会話のテンポに互換性があると考え、ジャンル名によって制御方法を変更する事を考える。例えばバラエティ番組の場合、一般的に登場する人物の喋りのテンポは速いといえ、ニュース番組のように、アナウンサーが聞き取りやすさを意識してゆっくり喋っている番組に比べると、図５の（Ｂ）のような波形が目立つといえる。そのため、用いる制御方法としては図４（Ｃ）のように細かい修正を行う手法を採用する。
【００５９】
周波数成分の出力レベルを補正する手法についても、番組情報に応じて設定するオフセットの大きさによって、出力レベルの増減量を変更して、或いは出力レベルを変更する周波数領域を変更して処理を実行する。例えば、一度のスキップ間隔を短くした場合、低周波数成分の減少量を少なくしても十分な効果を得ることが可能である。
【００６０】
図６は再生するオーディオの特徴により、オフセット設定部１１７ならびに出力レベル補正部１１８における処理手法を変更する動作を表したフローチャートである。再生開始直後にＳ６０１で再生するコンテンツのジャンルを判断し、制御部１０３からオフセット設定部１１７、出力レベル設定部１１８へ情報を通知する。
【００６１】
Ｓ６０２でオフセット補正部１１７はあらかじめどういったジャンルでどのような制御を行うかを決定しておき、適宜特殊再生時に用いる制御方法を変更する。
【００６２】
Ｓ６０３で出力レベル補正部１１８は同様にジャンルに応じた制御方法を設定する。
以降、Ｓ６０４で特殊再生に入ったかどうかを再生終了まで判断し、特殊再生に入ればＳ６０５、通常再生ならばＳ６０６に遷移し、図３を用いて説明をした特殊再生、通常再生の手続きを実行する。Ｓ６０７で再生終了ならば、ルーチンを抜ける。再生が継続されるならば、Ｓ６０４へ戻る。
【００６３】
以上により、コンテンツに応じて処理手法を変更することで、より音質の向上を図ることが可能である。また、コンテンツの特徴を判断する際には上記の番組ジャンルのみに限らず、ストリームに含まれて送られてくる様々な情報を組み合わせて判断を行う事が有効である。
【００６４】
以上の説明においては記録されたコンテンツがＭＰＥＧ２−ＴＳであるものとして説明をしたが、デジタル記録されるコンテンツであればそれ以外のもの（例えばＭＰＥＧ２−ＰＳなど）でも、上記と同様の手順で同じ効果を得ることが可能である。記録コンテンツがＭＰＥＧ２−ＰＳの場合、上記ＰＣＲをＳＣＲ（System Clock Reference）に読み替える必要がある。
【００６５】
また、放送ストリームの記録・再生に関連して説明を行ったが、映像・音声をパケット化してデジタル記録し、時刻情報にオフセットを付加することで特殊再生が可能であるシステム全てに対して適用可能である。例えば、家庭用のビデオ/DVDカメラや監視カメラシステムへの適用が考えられる。
【図面の簡単な説明】
【００６６】
【図１】本発明の一実施例におけるビデオ/オーディオ再生装置の構成を示すブロック図
【図２】本発明の一実施例における出力レベル補正動作のフローチャート
【図３】本発明の一実施例における特殊再生時の動作のフローチャート
【図４】実施例における様々な再生の形態でのオーディオＰＥＳを形成するオーディオフレームを示す図解図であり、（Ａ）は通常再生時に復号・出力されるオーディオフレームを示す。（Ｂ）、（Ｃ）、（Ｄ）、（Ｅ）は１．５倍速再生時に復号・出力されるオーディオフレームの一例であり、（Ｆ）、（Ｇ）は０．７５倍速再生時に復号・出力されるオーディオフレームの一例である。
【図５】本発明の一実施例における通常再生時のオーディオ出力レベルの差異を表現した模式図
【図６】模式図本発明の一実施例における再生コンテンツの特徴を判断する動作のフローチャート
【符号の説明】
【００６７】
101 記録媒体
102 デマルチプレクサ
103 制御部
104 ＰＣＲ取得部
105 クロック発生部
106 ＳＴＣカウンタ
107 ビデオＰＥＳパーサ
108 ビデオバッファ
109 ビデオデコーダ
110 ＤＴＳ／ＰＴＳ取得部
111 ＳＴＣ比較器
112 オーディオＰＥＳパーサ
113 オーディオバッファ
114 オーディオデコーダ
115 ＰＴＳ取得部
116 ＳＴＣ比較器
117 オフセット設定部
118 出力レベル補正部
119 システムバス
【図１】
2005346781.tif 000003
【図２】
2005346781.tif 000004
【図３】
2005346781.tif 000005
【図４】
2005346781.tif 000006
【図５】
2005346781.tif 000007
【図６】
2005346781.tif 000008