(57)【要約】【課題】映像および音声の再生速度を独立して変化するとともに、それぞれを等速で再生することが好ましい区間の近傍で、等速再生時と違和感が少なくなるよう、再生速度を制御する映像音声再生装置およびその方法を提供する。【解決手段】この発明は、コンテンツを映像信号と音声信号に分離し、分離した映像信号を復調し、分離した音声信号を復調し、復調した映像信号について、その再生速度を設定し、復調した音声信号について、その再生速度を設定し、再生速度が設定された映像信号と再生速度が設定された音声信号を出力することを特徴とする。【選択図】図１
2010206279.tif 000002
【特許請求の範囲】
【請求項１】
コンテンツを映像信号と音声信号に分離する分離モジュールと、
前記分離モジュールが分離した映像信号を復調する映像復調モジュールと、
前記分離モジュールが分離した音声信号を復調する音声復調モジュールと、
映像信号の再生速度を設定する映像再生速度設定モジュールと、
音声信号の再生速度を設定する音声再生速度設定モジュールと、
前記映像復調モジュールが復調した映像信号を前記映像再生速度設定モジュールが設定した再生速度で再生可能な映像出力と前記音声復調モジュールが復調した音声信号を前記音声再生速度設定モジュールが設定した再生速度で再生可能な音声出力とを映像音声出力装置が再生可能に処理する信号処理モジュールと、
を有することを特徴とする映像音声再生装置。
【請求項２】
前記映像再生速度設定モジュールは、等速再生シーンの開始点に対して時間軸上で一定時間手前となる任意の単位ブロックにおいて、高速再生の度合いである単位時間当たりの再生ブロック数を次第に低下させることを特徴とする請求項１記載の映像音声再生装置。
【請求項３】
前記音声再生速度設定モジュールは、等速再生シーンの開始点に対して時間軸上で一定時間手前となる任意の単位ブロックにおいて、高速再生の度合いである単位時間当たりの再生ブロック数を次第に低下させることを特徴とする請求項１記載の映像音声再生装置。
【請求項４】
前記音声再生速度設定モジュールは、等速再生シーンの開始点に対して時間軸上で一定時間手前となる任意の時間から、音声の再生速度を映像の再生速度よりも遅くすることを特徴とする請求項１記載の映像音声再生装置。
【請求項５】
前記音声再生速度設定モジュールは、等速再生シーンの開始点に対して時間軸上で一定時間手前となる任意の単位ブロックにおいて、高速再生の度合いである単位時間当たりの再生ブロック数を次第に低下させ、高速再生中には音量を低減し、音声の再生速度が所定の速度に低下したタイミングで、音量を次第に増加することを特徴とする請求項１記載の映像音声再生装置。
【請求項６】
前記映像再生速度設定モジュールは、外部から取得可能なコンテンツから直接、取得できる情報に限らない情報に基づいて、時間軸上で一定時間手前となる任意の単位ブロックにおいて、高速再生の度合いである単位時間当たりの再生ブロック数を次第に低下させることを特徴とする請求項２記載の映像音声再生装置。
【請求項７】
前記音声再生速度設定モジュールは、外部から取得可能なコンテンツから直接、取得できる情報に限らない情報に基づいて、時間軸上で一定時間手前となる任意の単位ブロックにおいて、高速再生の度合いである単位時間当たりの再生ブロック数を次第に低下させることを特徴とする請求項３ないし５のいずれかに記載の映像音声再生装置。
【請求項８】
前記映像再生速度設定モジュールは、任意数のインデックス情報に従って、時間軸上で一定時間手前となる任意の単位ブロックにおいて、高速再生の度合いである単位時間当たりの再生ブロック数を次第に低下させることを特徴とする請求項２記載の映像音声再生装置。
【請求項９】
前記音声再生速度設定モジュールは、任意数のインデックス情報に従って、時間軸上で一定時間手前となる任意の単位ブロックにおいて、高速再生の度合いである単位時間当たりの再生ブロック数を次第に低下させることを特徴とする請求項３ないし５のいずれかに記載の映像音声再生装置。
【請求項１０】
前記信号処理モジュールは、時間軸と、時間軸上における現在再生中の映像の時刻情報と、時間軸上における現在再生中の音声の時刻情報と、に関連する情報を表示可能な映像信号を出力することを特徴とする請求項１記載の映像音声再生装置。
【請求項１１】
コンテンツを映像信号と音声信号に分離し、
分離した映像信号を復調し、
分離した音声信号を復調し、
復調した映像信号について、その再生速度を設定し、
復調した音声信号について、その再生速度を設定し、
再生速度が設定された映像信号と再生速度が設定された音声信号を出力する
ことを特徴とする映像音声再生方法。
【発明の詳細な説明】
【技術分野】
【０００１】
この発明は、映像および音声の再生速度を独立して変化することのできる映像音声再生装置およびその方法に関する。
【背景技術】
【０００２】
映像および音声の記録方法の多様化に伴い、ユーザーは、さまざまなコンテンツを再生する機会を得ている。
【０００３】
反面、コンテンツを再生することのできる時間は必ずしも十分ではなく、再生速度を一定の割合で高める、例えば早見早聞モード等が既に実用化されている。
【０００４】
しかしながら、再生速度を単純に高めた場合、映像については、シーンの切り替わり等において不連続性が顕著となることがあり、音声およびオーディオについては、必ずしも聞き取り易い状態で再生されないことがありことがある。
【０００５】
このような背景から、映像および音声の再生速度をそれぞれ別々に設定する方法が提案されている。
【０００６】
特許文献１には、ＡＶデータ分析部で分析された音声信号および映像信号の特徴量に基づき前記音声信号および映像信号の再生速度を個別に決定する速度決定部と、前記速度決定部で決定された音声再生速度に基づき前記音声信号の再生速度を変化させる音声再生速度変換部と、前記速度決定部で決定された映像再生速度に基づき前記映像信号の再生速度を変化させる画像再生速度変換部とを備える記録再生装置および記録再生方法が示されている。
【先行技術文献】
【特許文献】
【０００７】
【特許文献１】国際公開２００６／０８２７８７パンフレット
【発明の概要】
【発明が解決しようとする課題】
【０００８】
特許文献１は、現在録画中のコンテンツの映像および音声を独立して通常速度（等倍）よりも高めて再生することを開示する。なお、映像と音声を独立して再生する際に、両者をリンクさせる際の条件に関する記載は見当たらない。
【０００９】
この発明の目的は、コンテンツを再生する際に、映像および音声の再生速度を独立して変化するとともに、それぞれを等速で再生することが好ましい区間の近傍で、等速再生時と違和感が少なくなるよう、再生速度を制御する映像音声再生装置およびその方法を提供することである。
【課題を解決するための手段】
【００１０】
この発明は、上記問題点に基づきなされたもので、コンテンツを映像信号と音声信号に分離する分離モジュールと、前記分離モジュールが分離した映像信号を復調する映像復調モジュールと、前記分離モジュールが分離した音声信号を復調する音声復調モジュールと、映像信号の再生速度を設定する映像再生速度設定モジュールと、音声信号の再生速度を設定する音声再生速度設定モジュールと、前記映像復調モジュールが復調した映像信号を前記映像再生速度設定モジュールが設定した再生速度で再生可能な映像出力と前記音声復調モジュールが復調した音声信号を前記音声再生速度設定モジュールが設定した再生速度で再生可能な音声出力とを映像音声出力装置が再生可能に処理する信号処理モジュールと、を有することを特徴とする映像音声再生装置である。
【発明の効果】
【００１１】
この発明の一つの実施の形態によれば、映像および音声の再生速度を独立して変化するとともに、それぞれを等速で再生することが好ましい区間の近傍において、等速再生時と違和感が少なくなるよう、再生速度を制御する映像音声再生装置が得られる。
【００１２】
またこの発明の一つの実施の形態によれば、映像および音声の再生速度を独立して変化しながら、任意区間を「等速再生」よりも高速な「高速再生」により再生する際に、等速再生すなわち倍速の程度を示す倍率「Ｘ」が１となるシーン２の開始点に対して時間軸上で一定時間手前となる任意の時間から、音声の再生速度を映像の再生速度よりも遅くすることにより、音声が聞き取りにくくなることを解消できる。
【００１３】
さらにこの発明の一つの実施の形態を適用することにより、映像および音声の再生速度を独立して変化しながら、任意区間を「等速再生」よりも高速な「高速再生」により再生する際に、高速再生の度合いである単位時間当たりの再生ブロック数（倍速の程度を示す倍率「Ｘ（Ｘは任意数）」）を次第に低下させ、さらに音声について、「高速再生」中には、音量を低減し、音声の再生速度が、例えば２倍速程度まで低下するタイミングで、音量を次第に増加することにより、比較的聞き取りにくい条件で音声が再生されている時間が低減される。
【００１４】
このように、視聴者が再生中のコンテンツの音声の聞き取りに集中できないような急激な音量変化を伴う音声再生状態や、明暗を伴う映像再生状態が生じることを抑止することで、等速で再生することが好ましい区間の近傍において等速再生時と違和感が少なくなるよう、再生速度を制御することができる。
【００１５】
従って、映像音声再生装置を用いる非等速再生における利便性が向上され、ユーザーの負担が低減される。
【図面の簡単な説明】
【００１６】
【図１】この発明の実施の形態が適用可能な映像音声再生装置の構成の一例を示す概略図。
【図２】図１に示した映像音声再生装置が取得可能な「おすすめメニュー」／「おすすめサービス」等のコンテンツから直接取得できる情報に限らない情報（再生条件設定要件）の一例を説明する概略図。
【図３】図１に示す映像音声再生装置において、「映像信号」と「音声信号」との同期値を説明する概略図。
【図４】図１に示す映像音声再生装置において、単純に「高速再生」と「等速再生」とを切り換えた際の影響の一例を示す概略図。
【図５】図４に示す「高速再生」が、例えば３倍速である場合に、「映像信号」と「音声信号」との同期を合わせる方法の一例を説明する概略図。
【図６】図１に示す映像音声再生装置において、「高速再生」と「等速再生」とを、切り換えた時の映像および音声に影響が生じることを低減可能なシームレス再生の一例を説明する概略図。
【図７】図６に示す「高速再生」と「等速再生」とを、切り換えた時の映像および音声のシームレス再生において、同期を合わせる方法の一例を説明する概略図。
【図８】図１に示す映像音声再生装置において、「高速再生」と「等速再生」とを、切り換えた時の映像および音声に影響が生じることを低減可能なシーン別再生速度制御の一例を説明する概略図。
【図９】図８に示す「高速再生」と「等速再生」とを、切り換えた時の映像および音声のシーン別再生速度制御において、同期を合わせる方法の一例を説明する概略図。
【図１０】図１に示す映像音声再生装置において、「高速再生」と「等速再生」とを切り換えた時の映像および音声に影響が生じることを低減可能なシーン別再生速度制御と音量の変化を併用する説明する概略図。
【図１１】図１に示す映像音声再生装置において、「高速再生」と「等速再生」とを切り換えた時の映像および音声に影響が生じることを低減可能なシーン別再生速度制御と音声（フレーズ、文章）の区切りと音量の変化を併用する説明する概略図。
【図１２】図１に示した映像音声再生装置において、番組情報に基づいて、「高速再生」と「等速再生」とを実現する一例を説明する概略図。
【図１３】図１に示した映像音声再生装置において、インデックス情報に基づいて、映像の「高速再生」と「等速再生」とを切り換える（再生速度）を設定する方法の一例を説明する概略図。
【図１４】図１に示した映像音声再生装置において、インデックス情報に基づいて、音声の「高速再生」と「等速再生」とを切り換える（再生速度）を設定する方法の一例を説明する概略図。
【図１５】図１に示した映像音声再生装置において、「高速再生」と「等速再生」とを、切り換えながら映像および音声を再生する際に、映像および音声の時間軸を、再生画面に表示する例を説明する概略図。
【図１６】図１に示した映像音声再生装置において、任意の区間を抽出する方法の一例を示す概略図。
【図１７】図１に示した映像音声再生装置において、任意の区間（ＣＭ区間）を抽出する方法の一例を示す概略図。
【発明を実施するための最良の形態】
【００１７】
以下、図面を参照して、本発明の実施の形態の一例について説明する。
【００１８】
図１は、この発明を適用した映像音声再生装置、例えばＨＤＤ（Hard Disk Drive）に記録されたコンテンツを再生するプレーヤー装置に関する。なお、記録媒体の記録方式および記録媒体から信号を再生する形態は任意であり、例えばＤＶＤ（Digital Versatile Disk）規格の光ディスクとプレーヤー装置、ＨＤＤまたはＤＶＤドライブが実装されたＰＣ（Personal Computer）、ＨＤＤまたはＤＶＤドライブが組み込まれたテレビ受信装置、ＳＤ（Secure Digital）カードのようなカード状の半導体メモリからコンテンツを再生する携帯型メディアプレーヤー等、に利用可能であることはいうまでもない。また、コンテンツは、任意の形式で圧縮された形式であってもよいことはいうまでもない。
【００１９】
図１に示す映像音声再生装置１０は、任意の記録媒体が保持するコンテンツを再生する再生モジュール２０、再生モジュール２０により、例えば圧縮状態から伸長された再生用信号から映像データおよび音声（オーディオ）データを分離する分離モジュール３０、分離モジュール３０が分離した映像データを復調する映像復調モジュール３１、分離モジュール３０が分離した音声（オーディオ）データを復調する音声復調モジュール３２、映像復調モジュール３１と音声復調モジュール３２のそれぞれから供給される映像信号および音声信号を処理する信号処理モジュール４０を含む。なお、信号処理モジュール４０から出力される映像出力および音声出力（オーディオ出力）を再生する映像音声出力装置５０が、一体にまたは独立に設けられる。
【００２０】
信号処理モジュール４０には、＜＜映像復調モジュール３１からの＞＞映像信号に適用する非等速再生（再生速度変更）時の映像再生速度を設定する映像速度演算モジュール１０１、＜＜音声復調モジュール３２からの＞＞音声信号に適用する非等速再生（再生速度変更）時の音声再生速度を設定する音声速度演算モジュール１０２、を含む再生速度設定モジュール１００から、映像信号および音声信号を再生する際の速度情報が入力される。
【００２１】
再生速度設定モジュール１００（映像速度演算モジュール１０１／音声速度演算モジュール１０２）が映像速度および音声速度を演算するための情報としては、例えば外部から取得可能な「番組情報」と、例えばコンテンツ記録時に取得した「インデックス情報」等を用いることができる。
【００２２】
「番組情報」は、例えばＥＰＧ（Electrical Program Guide）から取得可能なキーワード、例えば出演者情報、分野および放送時間等、あるいはプレーヤー装置を提供するメーカー（製造者）またはそのユーザー（利用者）ら等が組織するもので、例えばネットワーク上のサーバー等から取得可能な「おすすめメニュー」／「おすすめサービス」等のコンテンツから直接、取得できる情報に限らない情報（再生条件設定要件）を含む。図２に、製造者が提供するサーバーから取得でき、図１に示した映像音声再生装置１０と接続される映像音声出力装置５０の画面に表示されるサービス画面（「おすすめサービス」）の一例を示す。
【００２３】
図３は、等速（等倍）再生時の「映像信号」と「音声信号」の同機軸、すなわち映像と音声の時間軸に対する同期値の関連を示す。
【００２４】
図示する通り、等速（等倍）再生においては、映像信号と音声信号のそれぞれに、信号の同期を行うために信号同期値を付与する。等倍再生時には、この信号同期値に従って同期再生を行う。すなわち、「映像信号」と「音声信号」の同期軸、すなわち映像と音声の時間軸に対する同期値は、通常は、完全に一致する。
【００２５】
図４は、シーン１とシーン３との間に位置するシーン２について、シーン１とシーン３を「高速再生」し、シーン２を「等速再生」する例を模式的に示す。
【００２６】
図４に示すように、「高速再生」されているシーン１からシーン２とシーン１との切り換え点で急激に速度を変化させてシーン２を「等速再生」する場合に、シーン２の開始点で、例えば音声がフレーズの途中から再生される等の理由により、突然大きな音量で再生される等の視聴者が再生中のコンテンツの音声の聞き取りに集中できることを妨げる要因がある。また、映像についても同様に、例えば明暗の差が大きな映像が出現する等の視聴者が再生中のコンテンツの映像を注視しがたい要因が生じることがある。
【００２７】
図５は、「高速再生」の速度が３倍速である場合に「映像信号」と「音声信号」との同期を合わせる方法の一例を示し、映像信号については、単位ブロックのうち、任意の３つのブロック毎に２つのブロック分の映像データを読み捨てる（再生しない）ことが一般的である。一方、音声信号については、単位ブロックのうち、任意の３つのブロック毎に、１つのブロックの時間に相当する時間で再生が終了するよう、圧縮することが一般的である。
【００２８】
すなわち、信号処理モジュール４において信号同期値を参照し、映像信号については指定倍数について、読み捨てることで映像の高速再生を実現する。また、音声信号については、信号処理モジュール４０において、音声信号を圧縮することで音程を保ったまま音声の高速再生を実現する。なお、音声信号の圧縮については、詳述しないが、既に広く実用化されているさまざまな手法が利用可能である。
【００２９】
図６は、図１に示す映像音声再生装置において、「高速再生」と「等速再生」とを切り換えて再生する際に、映像および音声に影響が生じることを低減可能な再生方法の一例であるシームレス再生の原理を示す。
【００３０】
シーン１とシーン３とが「高速再生」で、間に位置するシーン２が「等速再生」である場合、等速再生（すなわち倍速の程度を示す倍率「Ｘ」が１となる）シーン２の開始点に対して時間軸上で一定時間手前となる任意の単位ブロックにおいて、高速再生の度合いである単位時間当たりの再生ブロック数（倍速の程度を示す倍率「Ｘ（Ｘは任意数）」）を次第に低下させる例を、模式的に示す。すなわち、高速再生から等倍再生へ、コンテンツ再生速度を推移する際、滑らかな速度変化で移行することで、再生速度が等倍再生に移行する際の視聴者への違和感を緩和することができる。
【００３１】
図６に示す例は、図７により詳細に説明するように、「映像信号」および「音声信号」ともに、等倍（ｘ１）再生の直前において、ｘ５倍速から、ｘ４倍速、ｘ３倍速、およびｘ２倍速の順に単位時間当たりの再生ブロック数を減少することで、等速（等倍）再生の直前の速度を低下している。すなわち、映像と音声の同期軸の幅を狭めていくことにより滑らかに速度を変化させることができる。
【００３２】
図８は、図１に示す映像音声再生装置において、「高速再生」と「等速再生」とを切り換えて再生する際に、映像および音声に影響が生じることを低減可能な再生方法の一例であるシーン別再生速度変化（映像音声ずらし）方式の原理を示す。
【００３３】
シーン１とシーン３とが「高速再生」で、間に位置するシーン２が「等速再生」である場合、等速再生（すなわち倍速の程度を示す倍率「Ｘ」が１となる）シーン２の開始点に対して時間軸上で一定時間手前となる任意の時間から、音声の再生速度を映像の再生速度よりも遅くすることにより、音声が聞き取りにくくなることを解消できる。なお、シーン２の開始点において、音声と映像が一致するよう、音声の再生速度が制御される。
【００３４】
図８に示す例は、図９により詳細に説明するように、例えば「映像信号」については、ｘ３倍速を適用し、「音声信号」については、ｘ２倍速を適用することにより音声が聞き取りにくくなることを解消できることを模式的に説明している。
【００３５】
すなわち、映像の同期軸と音声の同期軸のそれぞれを、同期値に対して所定量ずらして設定することで、映像と音声とを別々の速度で再生することができ、滑らかに速度を変化させることができる。
【００３６】
また、後段に説明するが、取得したインデックス情報を参照してシーン切り替わり時の信号同期値を参照可能であるため、映像速度演算モジュール１０１あるいは音声速度演算モジュール１０２にて逆算した同期軸を元に、容易に同期を取ることができる。
【００３７】
図１０は、図１に示す映像音声再生装置において、「高速再生」と「等速再生」とを切り換えて再生する際に、映像および音声に影響が生じることを低減可能な再生方法の一例であり、「シームレス再生」と「シーン別再生速度変化（映像音声ずらし）方法」の原理を示す。
【００３８】
シーン１とシーン３とが「高速再生」で、間に位置するシーン２が「等速再生」である場合、等速再生（すなわち倍速の程度を示す倍率「Ｘ」が１となる）シーン２の開始点に対して時間軸上で一定時間手前となる任意の単位ブロックにおいて、はじめに、高速再生の度合いである単位時間当たりの再生ブロック数（倍速の程度を示す倍率「Ｘ（Ｘは任意数）」）を次第に低下させ、さらに音声について、「高速再生」中には、音量を低減し、音声の再生速度が、例えば２倍速程度まで低下するタイミングで、音量を次第に増加することにより、比較的聞き取りにくい条件で音声が再生されている時間が低減される。これにより、視聴者が再生中のコンテンツの音声の聞き取りに集中できないような急激な音量変化を伴う音声再生が生じることが抑制される。
【００３９】
すなわち、図１０に示す例では、「映像信号」および「音声信号」を、等倍（ｘ１倍）再生（シーン２の開始点）の直前までの一定の時間内にｘＸ倍速（Ｘは任意数）からｘ２倍速まで、順に単位時間当たりの再生ブロック数を減少するとともに、音声速度が、例えばｘ２倍速相当に低下するタイミングで、音声信号の音量を増加することで、音声が聞き取りにくくなることを解消している
より詳細には、シーンの切り換わり時に、音声信号の音量を、フェードイン（次第に増加）／フェードアウト（次第に減少）処理を行うことで、急激な音量変化による雑音または視聴者が違和感を感じるような音声（音量）の発生を抑制することができる。なお、図１１に一例を示すが、音声信号の音量増加のタイミングとして、既に広く実用化されている音声認識の手法に従い、フレーズまたは文章のきれ目を検出して、音量を増減することも可能である。
【００４０】
図１２は、番組情報を参照して、予め「高速再生」と「等速再生」を切り換える一例を示す。
【００４１】
図２に示した通り、例えばＥＰＧから取得可能なキーワード、例えば出演者情報、分野および放送時間等、あるいはプレーヤー装置を提供するメーカー（製造者）、またはそのユーザー（利用者）ら等が組織するもので、例えばネットワーク上のサーバー等から取得可能な「おすすめメニュー」／「おすすめサービス」等のコンテンツから直接、取得できる情報に限らない情報（再生条件設定要件）が存在する。
【００４２】
例えば「おすすめサービス」等に記録された情報を参照することで、図１２のシーン２であり、例えば「得点シーン」含む時刻情報が取得できた場合には、そのシーンの直前で再生速度を低下させ、取得した時刻を開始点として「等速再生」すればよい。
【００４３】
なお、図１２において、シーン４は、コンテンツ（番組）の本編に引き続く「ＣＭ（コマーシャル）」であることが「番組情報」から取得できるので、（シーン４については）最も再生速度の高い「高速再生」を適用することができる。
【００４４】
すなわち、インデックス情報として、シーン毎に重要度を付与し、番組（コンテンツ）のシーンに応じて、シーンの再生方法（速度）を変更する。例えば得点シーンなどでは、等倍再生を適用し、通常のシーン（必ずしも等速再生を継続する必要が高いとは限らないシーン）は通常よりも早く再生する。また、重要なシーンからの切り替わりには、映像と音声を別々の速度で移行する。最も重要ではない、と判定可能なシーン、例えばＣＭ等については、コンテンツとの関わりが小さいため、速やかに高速再生へ移行する。
【００４５】
図１３は、「映像信号」に関し、インデックス情報（あるいはインデックス情報と番組情報）を参照して「高速再生」すべき区間とその区間の再生速度を算出する方法の一例を示す。
【００４６】
図１３から明らかなように、始めに「インデックス情報（番組情報）」を取得し［ブロック１］、映像の再生速度の倍率「Ｔ」を演算する［ブロック２］。
【００４７】
ブロック２において求められた映像の再生速度の倍率「Ｔ」に従い、映像信号を「Ｔ」倍に増大する［ブロック３］。
【００４８】
以下、インデックス（番組情報）がなくなった（情報が残っていない）ことを示す『終了通知』を取得する（［ブロック５−ＮＯ］）まで、次のインデックス（番組情報）に基づいて、ブロック２とブロック３の処理が繰り返される［ブロック４］。
【００４９】
なお、インデックス（番組情報）がなくなった（情報が残っていない）ことを示す『終了通知』を取得した（［ブロック５−ＹＥＳ］）時点で、再生速度の演算が終了することはいうまでもない。
【００５０】
図１４は、「音声信号」に関し、インデックス情報（あるいはインデックス情報と番組情報）を参照して「高速再生」すべき区間とその区間の再生速度を算出する方法の一例を示す。
【００５１】
図１４から明らかなように、始めに「インデックス情報（番組情報）」を取得し［ブロック１１］、音声の再生速度の倍率「Ｔ」を演算する［ブロック１２］。
【００５２】
ブロック１２において求められた音声の再生速度の倍率「Ｔ」に基づいて、音声信号を「Ｔ」倍に増大する［ブロック１３］。
【００５３】
以下、インデックス（番組情報）がなくなった（情報が残っていない）ことを示す『終了通知』を取得する（［ブロック１５−ＮＯ］）まで、次のインデックス（番組情報）に基づいて、ブロック１２とブロック１３の処理が繰り返される［ブロック１４］。
【００５４】
なお、インデックス（番組情報）がなくなった（情報が残っていない）ことを示す『終了通知』を取得した（［ブロック１５−ＹＥＳ］）時点で、再生速度の演算が終了することはいうまでもない。
【００５５】
図１５は、図１に示した映像音声再生装置において、「高速再生」と「等速再生」とを切り換えながら映像および音声を再生する際に、映像および音声の時間軸を、再生画面に表示する例を示す。
【００５６】
図１５から明らかなように、表示装置に表示される画面の所定の位置、例えば画面の下方の通常は字幕（文字情報）等が表示される領域の下方に、「映像信号」の再生速度（倍率）１５Ａと現在再生されている映像の時間軸上の位置１５Ｂとを、バーグラブ１５Ｃ等により表示することで、視聴者は、コンテンツの残りの時間がどの程度であるかを容易に把握できる。
【００５７】
また、バーグラフ１５Ｃを挟んで「映像信号」の再生速度１５Ａおよび時間軸上の位置１５Ｂと比較可能に、「音声信号」の再生速度（倍率）１５Ｄと現在再生されている音声の時間軸上の位置１５Ｅを、「映像信号」と同様に表示することにより、時間軸上の位置１５Ｅ（音声）と時間軸上の位置１５Ｂ（映像）との間隔が狭くなると、『ハイライト』シーンまたは注視すべき再生位置（時間）が近づいていることを認識できる。すなわち、映像速度または音声速度の演算結果やインデックス情報を、再生映像と同時にまたは同一画面に表示することで、視聴者へ再生状態を視覚的にも伝えることが可能である。
【００５８】
なお、図１６および図１７に示すように、既に実用化されている「映像の構造化」方法と「任意区間検出」方法を用いて、コンテンツ（番組）の本編に含まれる「ＣＭ（コマーシャル）」区間については、高速再生とすることもできる。
【００５９】
一例としては、図１６に示す「映像の構造化」処理パートにより、ｃ１、ｃ２、…、ｃ５としてあらわすことのできるチャプタ分割点（第１の区切り情報）を検出し、「任意区間検出」処理パートにより、同じ番組（コンテンツ）の時間方向に対して第２の区切り情報ｍ１、ｍ２、ｍ３、ｍ４（無音区間）を検出し、例えば音声モードが変化せず連続している区間、あるいはステレオモードが連続している区間であるｍ１とｍ２との間ならびにｍ３とｍ４との間を任意区間に設定することで、特定された任意区間を、ＣＭ区間として検出できる。なお、無音部と次の無音部との時間間隔が一定時間（Ａ）の倍数であるかどうかを判定することで、より高い精度で「ＣＭ区間」を検出できる。
【００６０】
このようにして検出できた「ＣＭ区間」については、図６および図７あるいは図８および図９もしくは図１０により説明したように「高速再生」を適用することで、「視聴者の集中を妨げる要因」が生じることを抑制しながら、「高速再生」と「等速再生」とを切り換えることができる。
【００６１】
以上説明したように、この発明の一つの実施の形態によれば、映像および音声の再生速度を独立して変化するとともに、それぞれを等速で再生することが好ましい区間の近傍において、等速再生時と違和感が少なくなるよう、再生速度を制御する映像音声再生装置が得られる。
【００６２】
またこの発明の一つの実施の形態によれば、映像および音声の再生速度を独立して変化しながら、任意区間を「等速再生」よりも高速な「高速再生」により再生する際に、等速再生すなわち倍速の程度を示す倍率「Ｘ」が１となるシーン２の開始点に対して時間軸上で一定時間手前となる任意の時間から、音声の再生速度を映像の再生速度よりも遅くすることにより、音声が聞き取りにくくなることを解消できる。
【００６３】
さらにこの発明の一つの実施の形態を適用することにより、映像および音声の再生速度を独立して変化しながら、任意区間を「等速再生」よりも高速な「高速再生」により再生する際に、高速再生の度合いである単位時間当たりの再生ブロック数（倍速の程度を示す倍率「Ｘ（Ｘは任意数）」）を次第に低下させ、さらに音声について、「高速再生」中には、音量を低減し、音声の再生速度が、例えば２倍速程度まで低下するタイミングで、音量を次第に増加することにより、比較的聞き取りにくい条件で音声が再生されている時間が低減される。
【００６４】
このように、視聴者が再生中のコンテンツの音声の聞き取りに集中できないような急激な音量変化を伴う音声再生状態や、明暗を伴う映像再生状態が生じることを抑止することで、等速で再生することが好ましい区間の近傍において等速再生時と違和感が少なくなるよう、再生速度を制御することができる。
【００６５】
従って、映像音声再生装置を用いる非等速再生における利便性が向上され、ユーザーの負担が低減される。
【００６６】
なお、この発明は、上述した各実施の形態に限定されるものではなく、その実施の段階ではその要旨を逸脱しない範囲で種々な変形もしくは変更が可能である。また、各実施の形態は、可能な限り適宜組み合わせて、もしくは一部を削除して実施されてもよく、その場合は、組み合わせもしくは削除に起因したさまざまな効果が得られる。
【符号の説明】
【００６７】
１…映像音声再生装置、２０…再生モジュール、３０…分離モジュール、３１…映像復調モジュール、３２…音声復調モジュール、４０…信号処理モジュール、５０…映像音声出力装置、１００…再生速度設定モジュール、１０１…映像速度演算モジュール、１０２…音声速度演算モジュール。
【図１】
2010206279.tif 000003
【図２】
2010206279.tif 000004
【図３】
2010206279.tif 000005
【図４】
2010206279.tif 000006
【図５】
2010206279.tif 000007
【図６】
2010206279.tif 000008
【図７】
2010206279.tif 000009
【図８】
2010206279.tif 000010
【図９】
2010206279.tif 000011
【図１０】
2010206279.tif 000012
【図１１】
2010206279.tif 000013
【図１２】
2010206279.tif 000014
【図１３】
2010206279.tif 000015
【図１４】
2010206279.tif 000016
【図１５】
2010206279.tif 000017
【図１６】
2010206279.tif 000018
【図１７】
2010206279.tif 000019