(57)【要約】【課題】  音声が聞こえない状況であっても、音声主の発する音声の音量を視覚的に把握することによって、緊迫感や圧迫感等の雰囲気を感じ取ることができ、作品を十分に楽しむことができる「再生装置および再生方法」を提供すること。【解決手段】  映像ならびに音声とともに、副映像として前記音声に応じた文字情報を再生可能とされた再生装置１であって、前記音声の音量に応じて前記文字情報の表示態様を変更するための制御を行う副映像制御手段１２，１４，１５を備えたこと。【選択図】      図１
2006079684.tif 000002
【特許請求の範囲】
【請求項１】
主映像ならびに音声とともに、副映像として前記音声に応じた文字情報を再生可能とされた再生装置であって、
前記音声の音量に応じて前記文字情報の表示態様を変更するための制御を行う副映像制御手段を備えたことを特徴とする再生装置。
【請求項２】
前記副映像制御手段は、前記音声の音量が一定値以上の場合に、前記文字情報の大きさを基準の大きさよりも大きくするための制御を行うことを特徴とする請求項１に記載の再生装置。
【請求項３】
前記副映像制御手段は、音声の周波数に基づいて音声主の種別を判別し、前記音声主の種別に応じて文字情報の表示態様を異ならせるための制御を行うことを特徴とする請求項１または請求項２に記載の再生装置。
【請求項４】
前記副映像制御手段は、周囲の騒音の音量が一定値以上となる場合に、前記制御を行うことを特徴とする請求項１乃至請求項３のいずれか1項に記載の再生装置。
【請求項５】
主映像ならびに音声とともに、副映像として前記音声に応じた文字情報を再生する再生方法であって、
前記音声の音量に応じて前記文字情報の表示態様を変更するための制御を行うことを特徴とする再生方法。
【請求項６】
前記音声の音量が一定値以上の場合に、前記文字情報の大きさを基準の大きさよりも大きくするための制御を行うことを特徴とする請求項５に記載の再生方法。
【請求項７】
音声の周波数に基づいて音声主の種別を判別し、前記音声主の種別に応じて文字情報の表示態様を異ならせるための制御を行うことを特徴とする請求項５または請求項６に記載の再生方法。
【請求項８】
周囲の騒音の音量が一定値以上となる場合に、前記制御を行うことを特徴とする請求項５乃至請求項７のいずれか1項に記載の再生方法。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、再生装置および再生方法に係り、特に、主映像ならびに音声とともに副映像として音声に応じた文字情報を再生するのに好適な再生装置および再生方法に関する。
【背景技術】
【０００２】
従来から、車載用のエンターテイメントシステムとして、ＤＶＤ等の映像を音声とともに再生する再生装置が用いられていた。
【０００３】
このような再生装置を用いて車室内でＤＶＤ等を鑑賞する際には、外国語音声に応じた日本語字幕表示を行う場合であっても、登場人物の声の大きさを音声の音量によって直に把握することができ、緊迫感や迫力を感じ取ることができる。
【０００４】
【特許文献１】特開２０００−９１４０９号公報
【発明の開示】
【発明が解決しようとする課題】
【０００５】
しかしながら、車室内の騒音が大きい場合には、音声自体が聞こえないときがあり、字幕だけでは作品の緊迫感や迫力などの雰囲気を十分に感じ取ることができないといった問題が生じていた。
【０００６】
そこで、本発明は、このような問題に鑑みなされたものであり、音声が聞こえない状況であっても、音声主の発する音声の音量を視覚的に把握することによって、緊迫感や圧迫感等の雰囲気を感じ取ることができ、作品を十分に楽しむことができる再生装置および再生方法を提供することを目的とするものである。
【課題を解決するための手段】
【０００７】
前述した目的を達成するため、本発明に係る再生装置の特徴は、主映像ならびに音声とともに、副映像として前記音声に応じた文字情報を再生可能とされた再生装置であって、前記音声の音量に応じて前記文字情報の表示態様を変更するための制御を行う副映像制御手段を備えた点にある。
【０００８】
そして、このような構成によれば、副映像制御手段により、音声の音量に応じて文字情報の表示態様を変更することが可能となる。
【０００９】
また、本発明に係る再生装置の特徴は、副映像制御手段が、音声の音量が一定値以上の場合に、文字情報の大きさを基準の大きさよりも大きくするための制御を行う点にある。
【００１０】
そして、このような構成によれば、副映像制御手段により、音声の音量が大きな場合には、それに合わせて文字情報を大きく表示させることが可能となる。
【００１１】
さらに、本発明に係る再生装置の特徴は、副映像制御手段が、音声の周波数に基づいて音声主の種別を判別し、前記音声主の種別に応じて文字情報の表示態様を異ならせるための制御を行う点にある。
【００１２】
そして、このような構成によれば、副映像制御手段により、性別や年齢（大人であるか子供であるか）等の音声主の種別に応じて文字情報の表示態様を異ならせることが可能となる。
【００１３】
さらにまた、本発明に係る再生装置の特徴は、副映像制御手段が、周囲の騒音の音量が一定値以上となる場合に、前記制御を行う点にある。
【００１４】
そして、このような構成によれば、周囲の騒音が一定値以上となった場合に、音声の音量に応じて文字情報の表示態様を変更するための制御および音声主の種別に応じて文字情報の表示態様を異ならせるための制御を行うことが可能となる。
【００１５】
また、本発明に係る再生方法の特徴は、主映像ならびに音声とともに、副映像として前記音声に応じた文字情報を再生する再生方法であって、前記音声の音量に応じて前記文字情報の表示態様を変更するための制御を行う点にある。
【００１６】
そして、このような方法によれば、音声の音量に応じて文字情報の表示態様を変更することが可能となる。
【００１７】
さらに、本発明に係る再生方法の特徴は、音声の音量が一定値以上の場合に、文字情報の大きさを基準の大きさよりも大きくするための制御を行う点にある。
【００１８】
そして、このような方法によれば、音声の音量が大きな場合には、それに合わせて文字情報を大きく表示させることが可能となる。
【００１９】
さらにまた、本発明に係る再生方法の特徴は、音声の周波数に基づいて音声主の種別を判別し、前記音声主の種別に応じて文字情報の表示態様を異ならせるための制御を行う点にある。
【００２０】
そして、このような方法によれば、音声主の種別に応じて文字情報の表示態様を異ならせることが可能となる。
【００２１】
また、本発明に係る再生方法の特徴は、周囲の騒音の音量が一定値以上となる場合に、前記制御を行う点にある。
【００２２】
そして、このような方法によれば、周囲の騒音が一定値以上となった場合に、音声の音量に応じて文字情報の表示態様を変更するための制御および音声主の種別に応じて文字情報の表示態様を異ならせるための制御を行うことが可能となる。
【発明の効果】
【００２３】
本発明に係る再生装置によれば、副映像制御手段により、音声の音量に応じて文字情報の表示態様を変更することができる結果、音声が聞こえない状況であっても、音声主の発する音声の音量を文字情報の表示態様を介して視覚的に把握することができることによって、緊迫感や圧迫感等の雰囲気を感じ取ることができ、作品を十分に楽しむことができる。
【００２４】
また、本発明に係る再生装置によれば、副映像制御手段により、音声の音量が大きな場合には、それに合わせて文字情報を大きく表示させることができる結果、音声が聞こえない状況であっても、音声主の発する音声の音量を文字情報の大きさを介して視覚的に把握することができることによって、緊迫感や圧迫感等の雰囲気を感じ取ることができ、作品を十分に楽しむことができる。
【００２５】
さらに、本発明に係る再生装置によれば、副映像制御手段により、性別や年齢等の音声主の種別に応じて文字情報の表示態様を異ならせることができる結果、種別の異なる複数の登場人物が登場している場合における音声主を即時に判別することができることによって、音声が聞こえない場合であっても作品の内容をより的確に把握して作品をさらに十分に楽しむことができる。
【００２６】
さらにまた、本発明に係る再生装置によれば、周囲の騒音が一定値以上となった場合に、音声の音量に応じて文字情報の表示態様を変更するための制御および音声主の種別に応じて文字情報の表示態様を異ならせるための制御を行うことができる結果、騒音が大きく音声を聞き取ることができない場合には、文字の大きさや色を介して場面の雰囲気や内容を把握することができ、一方、音声を十分に聞き取ることができる場合には、直接音声の音量を介して場面の雰囲気や内容を把握することができる。
【００２７】
また、本発明に係る再生方法によれば、音声の音量に応じて文字情報の表示態様を変更することができる結果、音声が聞こえない状況であっても、音声主の発する音声の音量を文字情報の表示態様を介して視覚的に把握することができることによって、緊迫感や圧迫感等の雰囲気を感じ取ることができ、作品を十分に楽しむことができる。
【００２８】
さらに、本発明に係る再生方法によれば、音声の音量が大きな場合には、それに合わせて文字情報を大きく表示させることができる結果、音声が聞こえない状況であっても、音声主の発する音声の音量を文字情報の大きさを介して視覚的に把握することができることによって、緊迫感や圧迫感等の雰囲気を感じ取ることができ、作品を十分に楽しむことができる。
【００２９】
さらにまた、本発明に係る再生方法によれば、性別や年齢等の音声主の種別に応じて文字情報の表示態様を異ならせることができる結果、種別の異なる複数の登場人物が登場している場合における音声主を即時に判別することができることによって、音声が聞こえない場合であっても作品の内容をより的確に把握して作品をさらに十分に楽しむことができる。
【００３０】
また、本発明に係る再生方法によれば、周囲の騒音が一定値以上となった場合に、音声の音量に応じて文字情報の表示態様を変更するための制御および音声主の種別に応じて文字情報の表示態様を異ならせるための制御を行うことができる結果、騒音が大きく音声を聞き取ることができない場合には、文字の大きさや色を介して場面の雰囲気や内容を把握することができ、一方、音声を十分に聞き取ることができる場合には、直接音声の音量を介して場面の雰囲気や内容を把握することができる。
【発明を実施するための最良の形態】
【００３１】
以下、本発明に係る再生装置の実施形態について、図１を参照して説明する。
【００３２】
図１に示すように、本実施形態における再生装置１は、ＤＶＤビデオ２を有しており、このＤＶＤビデオ２には、主映像データならびに音声データとともに、音声データに対応する字幕の文字データ等からなる副映像データ（サブピクチャ）が圧縮された状態で格納されている。
【００３３】
ＤＶＤビデオ２には、ディスクドライバ３が接続されており、このディスクドライバ３は、ＤＶＤビデオ２から主映像データ、音声データおよび副映像データを取得し、取得したデータを内部に出力するようになっている。
【００３４】
ディスクドライバ３には、データ処理部４が接続されており、このデータ処理部４は、ディスクドライバ３から出力された主映像データ、音声データおよび副映像データを入力し、これらのデータをさらに内部に出力するようになっている。
【００３５】
データ処理部４の出力側には、主映像・副映像・音声分離部５が接続されており、この主映像・副映像・音声分離部５には、データ処理部４から出力された主映像データ、音声データおよび副映像データが入力されるようになっている。
【００３６】
そして、主映像・副映像・音声分離部５は、入力された主映像データ、音声データおよび副映像データを互いに分離して出力するようになっている。
【００３７】
主映像・副映像・音声分離部５の出力側には、主映像デコーダ７が接続されており、この主映像デコーダ７には、主映像・副映像・音声分離部５から出力された主映像データが入力されるようになっている。
【００３８】
そして、主映像デコーダ７は、入力された主映像データをデコード（解凍）して出力するようになっている。
【００３９】
また、主映像・副映像・音声分離部５の出力側には、副映像デコーダ８が接続されており、この副映像デコーダ８には、主映像・副映像・音声分離部５から出力された副映像データが入力されるようになっている。
【００４０】
そして、副映像デコーダ８は、入力された副映像データをデコード（解凍）して出力するようになっている。
【００４１】
さらに、主映像・副映像・音声分離部５には、音声デコーダ９が接続されており、この音声デコーダ９には、主映像・副映像・音声分離部５から出力された音声データが入力されるようになっている。
【００４２】
そして、音声デコーダ９は、入力された音声データをデコード（解凍）して出力するようになっている。
【００４３】
音声デコーダ９の出力側には、音声側Ｄ／Ａ変換部１０が接続されており、この音声側Ｄ／Ａ変換部１０は、音声デコーダ９から出力された音声データを入力し、入力した音声データをアナログ信号に変換して出力するようになっている。
【００４４】
音声側Ｄ／Ａ変換部１０の出力側には、スピーカ１１が接続されており、このスピーカ１１によって、音声側Ｄ／Ａ変換部１０から出力された音声データを音声出力するようになっている。
【００４５】
そして、本実施形態における再生装置１は、前記音声の音量に応じて副映像の表示態様を変更するための制御を行う副映像制御手段を備えており、この副映像制御手段は、音量が一定値以上の場合には、文字の大きさを基準の大きさ（例えば通常の字幕の大きさ）よりも大きくするための制御を行うようになっている。
【００４６】
すなわち、音声デコーダ９の出力側には副映像制御手段の一部を構成する音声抽出部１２が接続されており、この音声抽出部１２は、音声デコーダ９から出力された音声データを入力し、入力した音声データから人間の発する声の周波数（８０〜４００Ｈｚ）に相当する周波数の音声データを抽出し、抽出結果を出力するようになっている。
【００４７】
また、音声抽出部１２の出力側には、副映像制御手段の一部を構成する音量計算部１４が接続されており、この音量計算部１４には、音声抽出部１２から出力された抽出結果が入力されるようになっている。
【００４８】
そして、音量計算部１４は、入力された抽出結果に基づいて、音声の音量を計算し、計算結果を出力するようになっている。
【００４９】
さらに、音量計算部１４および副映像デコーダ８の出力側には、副映像制御手段の一部を構成する副映像加工部１５が接続されており、この副映像加工部１５には、副映像デコーダ８から出力された副映像データおよび音量計算部１４の計算結果が入力されるようになっている。
【００５０】
そして、副映像加工部１５は、入力された音量の計算結果に基づき、音量が一定値以上の場合には、文字の大きさを基準の大きさよりも大きくするように副映像データに加工を施し、加工を施した副映像データを出力するようになっている。
【００５１】
したがって、音声の音量が大きな場合には、それに合わせて文字情報を大きく表示させることができることになる。
【００５２】
副映像加工部１５および主映像デコーダ７の出力側には、映像合成部１６が接続されており、この映像合成部１６には、副映像加工部１５から出力された副映像データと、主映像デコーダ７から出力された主映像データとが入力されるようになっている。
【００５３】
そして、映像合成部１６は、入力された主映像データと副映像データとを合成した合成映像データを出力するようになっている。
【００５４】
映像合成部１６の出力側には、映像側Ｄ／Ａ変換部１７が接続されており、この映像側Ｄ／Ａ変換部１７には、映像合成部１６から出力された合成映像データが入力されるようになっている。
【００５５】
そして、映像側Ｄ／Ａ変換部１７は、入力された合成映像データをアナログ信号に変換して出力するようになっている。
【００５６】
映像側Ｄ／Ａ変換部１７の出力側には、モニタ１９が接続されており、このモニタ１９には、映像側Ｄ／Ａ変換部１７から出力された合成映像データが入力されるようになっている。
【００５７】
そして、モニタ１９は、入力された合成映像データを表示するようになっている。
【００５８】
上記構成に加えて、さらに、本実施形態において、副映像制御手段は、音声の周波数に基づいて音声主の種別を判別し、音声主の種別に応じて文字情報の表示態様としての文字の色を異ならせるための制御を行う機能を備えている。
【００５９】
すなわち、音声抽出部１２の出力側には、副映像制御手段の一部を構成する基本周波数計算部２０が接続されており、この基本周波数計算部２０には、音声抽出部１２から出力された抽出結果が入力されるようになっている。
【００６０】
そして、基本周波数計算部２０は、入力された音声抽出部１２の抽出結果に基づいて、音声の基本周波数を計算し、計算結果を出力するようになっている。ここで、人間の声は、複数の周波数の音が合成されることによって構成されているが、この合成された周波数を基本周波数という。そして、基本周波数は、男性、女性等の音声主の種別によって異なり、例えば、一般的な男性の声の基本周波数は１１０〜１５０Ｈｚ程度、一般的な女性の声の基本周波数は２２０〜２７０Ｈｚ程度となっている。
【００６１】
基本周波数計算部２０の出力側には、音声種別判別部２１が接続されており、この音声種別判別部２１には、基本周波数計算部２０の計算結果が入力されるようになっている。
【００６２】
そして、音声種別判別部２１は、入力された基本周波数計算部２０の計算結果に基づいて、音声主の種別を判別し、判別結果を副映像加工部１５に対して出力するようになっている。
【００６３】
副映像加工部１５は、音声種別判別部２１から出力された判別結果を入力し、この入力した判別結果に基づいて、音声主の種別に応じて文字情報の色を異ならせるための加工を副映像データに施すようになっている。
【００６４】
したがって、性別あるいは年齢等の音声主の種別に応じて文字の色を異ならせることができることになる。
【００６５】
上記構成に加えて、さらに、本実施形態において、副映像制御手段は、周囲の騒音の音量が一定値以上となる場合に、前述した音量に応じた文字の大きさの制御と、音声主の種別に応じた文字の色の制御とを行うようになっている。
【００６６】
すなわち、再生装置１は、周囲すなわち車室内の騒音を集音するためのマイク２２を有しており、このマイク２２は、集音した騒音を騒音データとして出力するようになっている。
【００６７】
マイク２２の出力側には、騒音測定部２４が接続されており、この騒音測定部２４には、マイク２２から出力された騒音データが入力されるようになっている。
【００６８】
そして、騒音測定部２４は、入力された騒音データに基づいて車室内の騒音を測定し、測定結果を副映像加工部１５に対して出力するようになっている。
【００６９】
副映像加工部１５は、騒音測定部２４の測定結果に基づいて、騒音の音量が一定値以上となった場合に、前述した副映像データの加工を行うようになっている。一方、騒音の音量が一定値に満たない場合には、副映像加工部１５は、入力された副映像データに特別な加工を施さずに映像合成部１６に対してそのまま出力するようになっている。
【００７０】
したがって、車室内の騒音が一定値以上となった場合に、音声の音量に応じて文字の大きさを変更するための制御と、音声主の種別に応じて文字の色を異ならせるための制御とを行うことができる。
【００７１】
次に、本発明に係る再生方法の実施形態について説明する。
【００７２】
本実施形態における再生方法は、前述した再生装置１を用いて行うことができる。
【００７３】
本実施形態においては、まず、ディスクドライバ３によってＤＶＤビデオの主映像データ、音声データおよび副映像データを読み出すと、これら３つのデータは、データ処理部４を経た後に主映像・副映像・音声分離部５に対して出力される。
【００７４】
次いで、主映像・副映像・音声分離部５により、前記３つのデータを互いに分離し、これらの分離した３つのデータのうち、主映像データを、主映像デコーダ７に対して出力する。そして、主映像デコーダ７により、主映像・副映像・音声分離部から出力された主映像データをデコードした後に映像合成部１６に対して出力する。
【００７５】
また、主映像・副映像・音声分離部５により、前記３つのデータのうち、副映像データを、副映像デコーダ８に対して出力する。そして、副映像デコーダ８により、主映像・副映像・音声分離部５から出力された副映像データをデコードした後に副映像加工部１５に対して出力する。
【００７６】
さらに、主映像・副映像・音声分離部５により、前記３つのデータのうち音声データを音声デコーダ９に対して出力する。そして、音声デコーダ９により、主映像・副映像・音声分離部５から出力された音声データをデコードした後に音声抽出部１２および音声側Ｄ／Ａ変換部１０に対してそれぞれ出力する。
【００７７】
次いで、音声抽出部１２により、音声デコーダ９から出力された音声データから、人間の声に相当する周波数を抽出し、抽出結果を音量計算部１４および基本周波数計算部２０に対してそれぞれ出力する。
【００７８】
また、音声側Ｄ／Ａ変換部１０により、音声デコーダ９から出力された音声データをアナログ信号に変換した後にスピーカ１１に対して出力する。
【００７９】
次いで、音量計算部１４により、音声抽出部１２から出力された音声データに基づいて、音声の音量を計算し、計算結果を副映像加工部１５に対して出力する。
【００８０】
また、基本周波数計算部２０により、音声抽出部１２から出力された音声データに基づいて、音声の基本周波数を計算し、計算結果を音声種別判別部２１に対して出力する。そして、音声種別判別部２１により、基本周波数計算部２０から出力された計算結果に基づいて、音声主の種別を判別し、判別結果を副映像加工部１５に対して出力する。
【００８１】
一方、騒音測定部２４により、マイク２２を介して入力された騒音データに基づいて車室内の騒音を測定し、測定結果を副映像加工部１５に対して出力する。
【００８２】
そして、副映像加工部１５により、騒音測定部２４の測定結果に基づいて、車室内の騒音が一定値以上の場合であって、音量計測部１４の計測結果が一定値以上の場合に、副映像データの文字の大きさが基準の大きさよりも大きくなるように副映像データに加工を施す。
【００８３】
同時に、副映像加工部１５により、車室内の騒音が一定値以上の場合に、音声主の種別に応じて文字の色を異ならせるように副映像データに加工を施す。このとき、例えば、女性の音声に対応する文字が赤色に、男性の音声に対応する文字が青色になるように副映像データに加工を施してもよい。
【００８４】
一方、車室内の騒音が一定値に満たない場合には、副映像加工部１５による副映像データの加工は行わない。
【００８５】
そして、副映像加工部１５により、副映像データを映像合成部１６に対して出力する。
【００８６】
次いで、映像合成部１６により、副映像加工部１５から出力された副映像データと、主映像デコーダ７から出力された主映像データとを合成させることによって合成映像データを作成し、この合成映像データを映像側Ｄ／Ａ変換部１７に対して出力する。
【００８７】
次いで、映像側Ｄ／Ａ変換部１７により、合成映像データをアナログ信号に変換してモニタ１９に対して出力する。
【００８８】
これにより、モニタ１９には、主映像と副映像である文字表示とが同時に表示される。また、スピーカ１１からは、モニタ１９に表示された文字に対応する音声が出力される。
【００８９】
このとき、図２の上図に示すように、音声の音量が大きな場合には、図２の下図に示すように大きな文字表示がなされる。
【００９０】
一方、図３の上図に示すように、音声の音量が小さな場合には、図３の下図に示すように基準の大きさの文字表示がなされる。
【００９１】
さらに、図示はしないが、音声主が男性の場合と、女性の場合とでは異なる色の文字表示がなされる。
【００９２】
したがって、作品を鑑賞している鑑賞者は、車室内の騒音が大きく登場人物の発話音声が聞こえない場合においても、モニタ１９に表示される字幕の文字の大きさによって場面の緊迫感や迫力を感じ取ることができる。また、文字の色によってモニタ１９に複数の登場人物が表示されている場合にどの登場人物が発した声であるかを確実に把握することができる。
【００９３】
以上述べたように、本実施形態によれば、副映像制御手段により、音声の音量に応じて文字の大きさを変更することができる結果、音声が聞こえない状況であっても、音声主の発する音声の音量を文字の大きさを介して視覚的に把握することができることによって、緊迫感や圧迫感等の雰囲気を感じ取ることができ、作品を十分に楽しむことができる。
【００９４】
また、性別や年齢等の音声主の種別に応じて文字の色を異ならせることができる結果、種別の異なる複数の登場人物が登場している場合における音声主を即時に把握することができることによって、音声が聞こえない場合であっても作品の内容を的確に把握することができる。
【００９５】
なお、本発明は、前述した実施の形態に限定されるものではなく、必要に応じて種々の変更が可能である。
【００９６】
例えば、音量や音声主に応じて文字の太さやフォントを適宜変更するようにしてもよい。
【図面の簡単な説明】
【００９７】
【図１】本発明に係る再生装置の実施形態を示すブロック図
【図２】本発明に係る再生方法の実施形態において、音量が大きい場合における副映像（文字）の表示状態を示す説明図
【図３】本発明に係る再生方法の実施形態において、音量が小さい場合における副映像（文字）の表示状態を示す説明図
【符号の説明】
【００９８】
１  再生装置
１２  音声抽出部
１４  音量計算部
１５  副映像加工部
１６  映像合成部
２０  基本周波数計算部
２１  音声種別判別部
【図１】
2006079684.tif 000003
【図２】
2006079684.tif 000004
【図３】
2006079684.tif 000005