(57)【要約】  記録媒体に一旦蓄積された映像コンテンツを再生する場合に、従来よりも画像調整の精度を向上させ得る記録再生システムを提供する。本発明に係る記録再生システムは、記録媒体に一旦記録された映像ストリームの映像データに基づいて、オリジナル映像データを再生装置に入力した場合の出力値を制御するための制御値を調整用パラメータとして設定し、設定した調整用パラメータと、オリジナル映像データの再生時において調整用パラメータを適用するタイミングを示す時刻情報とを記録する記録部と、オリジナル映像データを再生する際に、記録部に記録された調整用パラメータに基づいて映像データを表示するための出力値を導出して再生する再生部とを含む。
2008007745.tif 000002
【特許請求の範囲】
【請求項１】
映像データを記憶している記録装置と当該映像データを再生する再生装置とで構成された記録再生システムであって、
前記記録装置は、
所定期間分の前記映像データに基づいて映像調整用パラメータを設定し、当該映像調整用パラメータと当該映像調整用パラメータを適用すべき映像データの表示タイミングを示す時刻情報とを記録媒体に記録する記録手段を備え、
前記再生装置は、
前記映像データを再生する際、前記記録媒体に記録された各映像調整用パラメータについての時刻情報が示す表示タイミングで表示すべき映像データを、前記各映像調整用パラメータに基づいて調整し再生する再生手段を備えること
を特徴とする記録再生システム。
【請求項２】
前記映像調整用パラメータは、前記映像データを再生する際の輝度を調整するためのパラメータであり、
前記記録手段は、前記所定期間分の映像データに基づいて各映像データの平均輝度を算出し、当該映像データの平均輝度の遷移が所定の輝度上昇パターンと合致するか否か判断し、前記所定の輝度上昇パターンと合致する場合、平均輝度が上昇した後の映像データについての再生時に用いられるべき輝度レベルを、平均輝度上昇時の映像データについて再生に用いられる輝度レベルより徐々に下げるための前記映像調整用パラメータを設定し、当該平均輝度上昇時から所定時間経過するまでの間の一の時刻を前記時刻情報として当該調整用パラメータ及び当該時刻情報を前記記録媒体に記録すること
を特徴とする請求項１記載の記録再生システム。
【請求項３】
前記記録手段は、更に、前記映像データを再生するための再生条件を取得し、取得した再生条件毎に異なる前記映像調整用パラメータを前記映像データの輝度に基づいて設定し、当該映像調整用パラメータと時刻情報とを記録すること
を特徴とする請求項２記載の記録再生システム。
【請求項４】
前記再生条件は、前記再生手段が前記映像データを再生する再生装置の種別であり、
前記記録装置は、前記再生装置の種別に応じて前記映像調整用パラメータを定め、定めた映像調整用パラメータとその時刻情報とを前記各種別に対応づけて記録すること
を特徴とする請求項１記載の記録再生システム。
【請求項５】
前記映像信号はインタレース方式で送信された信号であり、
前記記録装置は、更に、
前記映像信号からなる各フィールドの映像データの各画素について、時間軸上当該フィールドを基準とする前後の２以上のフィールドと当該フィールドの画素に基づき動画か静止画かを判断する判断手段を備え、
前記記録手段は、前記判断手段の判断結果と当該映像データのフィールドの時刻情報とを対応づけて前記映像調整用パラメータとして記録し、
前記再生手段は、前記映像データをプログレッシブ信号に変換して再生するとき、前記映像調整用パラメータに含まれた判断結果に応じて、前記映像データの各フィールドの画素を補間する際に参照するフィールドを変えてプログレッシブ信号に変換すること
を特徴とする請求項１記載の記録再生システム。
【請求項６】
前記記録手段は、前記映像調整用パラメータ及び前記時刻情報を電子透かしとして前記映像データに埋め込み、埋め込み後の映像データを前記記録媒体に記録すること
を特徴とする請求項１記載の記録再生システム。
【請求項７】
映像データを記憶している記録装置であって、
所定期間分の前記映像データに基づいて映像調整用パラメータを設定し、当該映像調整用パラメータと当該映像調整用パラメータを適用すべき映像データの表示タイミングを示す時刻情報とを記録媒体に記録する記録手段を備えること
を特徴とする記録装置。
【請求項８】
映像データと、各映像データについての各映像調整用パラメータ及び当該映像調整用パラメータを適用すべき映像データの表示タイミングを示す時刻情報が記録された記録媒体から前記映像データを読み出して再生する再生装置であって、
前記映像データを再生する際、当該映像データに対応する各映像調整用パラメータについての時刻情報が示す表示タイミングで表示すべき映像データを、前記各映像調整用パラメータに基づいて調整し再生する再生手段を備えること
を特徴とする再生装置。
【請求項９】
映像データと、各映像データについての各映像調整用パラメータ及び当該映像調整用パラメータを適用すべき前記映像データの表示タイミングを示す時刻情報とが記録されていることを特徴とする記録媒体。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、映像データの再生技術に関し、特に、記録された映像データについて画質等を調整して再生する技術に関する。
【背景技術】
【０００２】
近年、テレビ放送番組等の映像コンテンツを受信して記録し、再生する記録再生装置が普及している。
また、従来の記録再生装置は映像コンテンツを再生する際、省電力化、画質の向上等を目的として、輝度の調整、インタレース信号をプログレッシブ信号に変換する(以下、「I/P変換」と言う。)際の画素の補間処理、ブロックノイズの除去等、様々な画像調整が行われている。【０００３】
例えば、輝度調整の技術としては、ユーザによる画質調整の手間を軽減すると共に省電力化を図ることを目的とし、映像コンテンツの再生時において、再生中の映像信号の平均輝度レベルに応じてディスプレイに表示する輝度レベルを自動調整する技術が開示されている（特許文献１参照）。
【特許文献１】日本国特開平７−１５６８５号公報
【発明の開示】
【発明が解決しようとする課題】
【０００４】
しかしながら、特許文献１の技術は、一旦記録された映像コンテンツを再生する場合であっても、再生中の映像信号の輝度信号を画像調整のための要素として抽出し、これを基に平均輝度レベルを算出して調整を行うため、映像コンテンツの再生時における調整しか行うことができない。
また、従来の他の画像調整も上記特許文献１と同様、再生時における画像調整を前提としているため、再生中の映像信号に基づく画像調整しか行うことができず、画像調整に限界がある。【０００５】
本発明は、上記の状況に鑑みてなされたものであり、記録媒体に一旦蓄積された映像コンテンツを再生する際、従来よりも画像調整の精度を向上させ得る記録再生システムを提供することを目的とする。
【課題を解決するための手段】
【０００６】
上記課題を解決するために、本発明に係る記録装置は、映像データを記憶している記録装置と当該映像データを再生する再生装置とで構成された記録再生システムであって、前記記録装置は、所定期間分の前記映像データに基づいて映像調整用パラメータを設定し、当該映像調整用パラメータと当該映像調整用パラメータを適用すべき映像データの表示タイミングを示す時刻情報とを記録媒体に記録する記録手段を備え、前記再生装置は、前記映像データを再生する際、前記記録媒体に記録された各映像調整用パラメータについての時刻情報が示す表示タイミングで表示すべき映像データを、前記各映像調整用パラメータに基づいて調整し再生する再生手段を備えることを特徴とする。【０００７】
尚、映像調整用パラメータは、映像データを表示する際の省電力化や画質向上等の目的を達成するための、映像データの出力を制御するための制御値であり、映像調整用パラメータに基づいて調整するとは、記録している映像データを入力した場合の出力値を映像調整用パラメータで示される制御値に応じて決定することである。
【発明の効果】
【０００８】
上述の構成によれば、記録手段により、記録装置に記憶されている映像データの全体を通して、画質向上や省電力等の目的に応じた映像調整用パラメータを設定することができるので、再生時に再生中の映像のみに基づいて映像調整する従来技術と比べて、調整を行うための要素を抽出する範囲を広げることができ、より精度良く確実に映像調整用パラメータを設定することができる。また、設定した各映像調整用パラメータと各映像調整用パラメータが再生の際に用いられる時間の情報とを記録しているので、再生手段により映像データが再生される度に、時間情報が示すタイミングで当該映像調整用パラメータを用いて当該映像データの出力を制御することができ、再生時の映像調整にかかる処理負荷を軽減することができる。【０００９】
また、前記映像調整用パラメータは、前記映像データを再生する際の輝度を調整するためのパラメータであり、前記記録手段は、前記所定期間分の映像データに基づいて各映像データの平均輝度を算出し、当該映像データの平均輝度の遷移が所定の輝度上昇パターンと合致するか否か判断し、前記所定の輝度上昇パターンと合致する場合、平均輝度が上昇した後の映像データについての再生時に用いられるべき輝度レベルを、平均輝度上昇時の映像データについて再生に用いられる輝度レベルより徐々に下げるための前記映像調整用パラメータを設定し、当該平均輝度上昇時から所定時間経過するまでの間の一の時刻を前記時刻情報として当該調整用パラメータ及び当該時刻情報を前記記録媒体に記録することとしてもよい。【００１０】
ここで、所定の輝度上昇パターンは、平均輝度が所定値以下の暗いシーンが続いた直後に、暗いシーンの時の平均輝度より一定値以上高い平均輝度の明るいシーンが続き、その直後に暗いシーンが続く場合である。
プラズマディスプレイ等の表示装置は輝度が高いほど発熱し、電力を消費する。また、暗いシーンから明るいシーンに変化し、ユーザの目が明順応し始めるまでに、輝度レベルを徐々に下げてもユーザに違和感を与えにくい。この構成によれば、再生する前に、記録している映像コンテンツから上記の輝度上昇パターンを検出することができるので、平均輝度が上昇した時から一定時間経過後の映像データについて、再生時の輝度レベルを下げるように制御するための調整用パラメータを設定することができる。従って、輝度上昇時から一定時間は、明るいシーンに変化した時の映像のインパクトをユーザに与えることができ、一定時間経過後は、ユーザに違和感を与えることなくディスプレイの発熱を抑制し、省電力化を図ることができる。【００１１】
また、前記記録手段は、更に、前記映像データを再生するための再生条件を取得し、取得した再生条件毎に異なる前記映像調整用パラメータを前記映像データの輝度に基づいて設定し、当該映像調整用パラメータと時刻情報とを記録することとしてもよい。
この構成によれば、記録手段は、映像データが再生される再生条件に対応する輝度調整用パラメータを時間情報と共に記録するので、ディスプレイの種類や視聴者の年齢等の再生条件に応じた適切な輝度を予め設定することができ、各映像データの再生時に好適な輝度で各映像データを表示させることができる。【００１２】
また、前記再生条件は、前記再生手段が前記映像データを再生する再生装置の種別であり、前記記録装置は、前記再生装置の種別に応じて前記映像調整用パラメータを定め、定めた映像調整用パラメータとその時刻情報とを前記各種別に対応づけて記録することとしてもよい。
この構成によれば、同じ映像データを再生するディスプレイの種類が複数ある場合でも、各ディスプレイの特性に応じた輝度調整のための映像調整用パラメータをディスプレイの種類毎に設定することができるので、複数のユーザが各々異なるディスプレイで映像データを視聴する際に、各々のディスプレイに対応する好適な輝度で映像データを表示させることができる。【００１３】
また、前記映像信号はインタレース方式で送信された信号であり、前記記録装置は、更に、前記映像信号からなる各フィールドの映像データの各画素について、時間軸上当該フィールドを基準とする前後の２以上のフィールドと当該フィールドの画素に基づき動画か静止画かを判断する判断手段を備え、前記記録手段は、前記判断手段の判断結果と当該映像データのフィールドの時刻情報とを対応づけて前記映像調整用パラメータとして記録し、前記再生手段は、前記映像データをプログレッシブ信号に変換して再生するとき、前記映像調整用パラメータに含まれた判断結果に応じて、前記映像データの各フィールドの画素を補間する際に参照するフィールドを変えてプログレッシブ信号に変換することとしてもよい。【００１４】
再生時に動画か静止画かを判断してI/P変換する従来の場合、I/P変換対象となるフィールドと前フィールドの画素値しか用いて動画・静止画の判断を行うことができない。この判断に基づいてI/P変換すると、例えばI/P変換対象フィールドの前後のフィールドが動画である場合でも誤って静止画と判断してしまう場合があり、このような場合には動きがぶれた違和感のある画像が表示される。この構成によれば、判断手段により、補間対象となるフィールドを基準とする前後２フィールド以上のフィールドの画素値を用いて補間対象画素が動画か静止画かの判断を行うことができるので、動画か静止画かの判断を適切に行うことができ、動きがぶれないように画像を表示することができる。【００１５】
また、前記記録手段は、前記映像調整用パラメータ及び前記時刻情報を電子透かしとして前記映像データに埋め込み、埋め込み後の映像データを前記記録媒体に記録することとしてもよい。
この構成によれば、電子透かしの技術を用いて調整用パラメータと時間情報を映像データと共に記録するので、映像コンテンツの画質や音質等に影響を与えることなく記録することができる。
【図面の簡単な説明】
【００１６】
【図１】実施の形態１に係る記録再生システムの機能構成図である。
【図２】実施の形態１における映像データのAPLレベルの遷移パターンと輝度調整を示す図である。
【図３】実施の形態１におけるディスプレイの輝度調整の特性を示す図である。
【図４】(ａ)は実施の形態１における輝度調整のガンマ特性を示す図である。(ｂ)は実施の形態１の変形例における輝度調整のガンマ特性を示す図である。
【図５】(ａ)は実施の形態１で用いる調整用APLテーブルの構成及びデータ例を示す図である。(ｂ)は実施の形態１で用いる調整用LUTの構成及びデータ例を示す図である。(ｃ)は実施の形態１の所定パターンの波形を示す図である。
【図６】実施の形態１における調整用パラメータ記録処理の動作フロー図である。
【図７】実施の形態１におけるパラメータ設定記録処理の動作フロー図である。
【図８】実施の形態１における再生処理の動作フロー図である。
【図９】I/P変換時に画素を補間するための動画か静止画かを判断する方法を説明するための図である。
【図１０】実施の形態２に係る記録再生システムの機能構成図である。
【図１１】実施の形態２における動静判断処理を示す動作フロー図である。
【図１２】実施の形態２における再生処理を示す動作フロー図である。
【図１３】実施の形態３に係る記録再生システムの機能構成図である。
【図１４】(ａ)はブロックノイズが無い場合のＦＦＴ処理後の周波数スペクトルを示す図である。(ｂ)はブロックノイズが有る場合のＦＦＴ処理後の周波数スペクトルを示す図である。
【図１５】実施の形態３における調整用パラメータ記録処理を示す動作フロー図である。
【図１６】実施の形態３におけるブロックノイズ検出処理を示す動作フロー図である。
【図１７】実施の形態３における再生処理を示す動作フロー図である。
【図１８】暗画面から明画面、明画面から暗画面への画面の切り替わりを見た人間の瞳径反応を示すグラフである。
【符号の説明】
【００１７】
１００、２００、３００  記録再生システム
１１０、２１０、３１０  記録部
１１１  映像蓄積部
１１２、２１２、３１２  パラメータ抽出部
１１３  パラメータ設定部
１１４、２１６、３１６  パラメータ蓄積部
１２０、２２０、３２０  再生部
１２１、２２１、３２１  調整部
１２２  ＬＵＴ
１２３  ＬＵＴ設定部
１２４  表示部
２１３、２２２  ｎ−１フィールドメモリ
２１４  ｎ＋１フィールドメモリ
２１５  ｎフィールド動静判断部
２２３、３１３  ｎフィールドメモリ
２２４、３２２  I/P変換部
３１４  ＦＦＴ処理部
３１５  ブロックノイズ検出部
３１７  動静判断情報蓄積部
３１８  ブロックノイズ情報蓄積部
３２３  ＬＰＦ
３２４  ＬＰＦ制御部
【発明を実施するための最良の形態】
【００１８】
＜実施の形態１＞
＜概要＞
本発明に係る記録再生システムは、記録媒体に一旦記録された映像ストリームの映像データに基づいて、オリジナル映像データを再生装置に入力した場合の出力値を制御するための制御値を調整用パラメータとして設定し、設定した調整用パラメータと、オリジナル映像データの再生時において調整用パラメータを適用するタイミングを示す時刻情報とを記録する記録部と、オリジナル映像データを再生する際に、記録部に記録された調整用パラメータに基づいて映像データを表示するための出力値を導出して再生する再生部とで構成されている。【００１９】
本実施の形態に係る記録再生システムは、一旦記録部に記録された映像ストリームを、ユーザの再生操作に応じてプラズマディスプレイ(PDP)に表示する場合において、記録部は、再生開始より前に予め輝度レベルを調整するための調整用パラメータを設定して時間情報と共に記録し、再生部は、記録部に記録された時間情報が示すタイミングで再生する映像データを表示する際に、調整用パラメータで示される制御値に基づいて輝度レベルを調整し、当該映像データをPDPに表示する。【００２０】
以下、PDPに表示する際の通常の輝度調整について説明する。
本実施の形態に係る再生部は、入力される映像ストリームの映像信号からフレーム単位の平均輝度レベル(Average Picture Level)(以下、「APLレベル」と言う。)を算出し、輝度レベル調整用の予め設定された制御値を格納したルックアップテーブル(LUT)を参照し、算出したAPLレベルに対応する制御値に基づいてフレームの各画素の輝度レベルを決定して表示する。【００２１】
PDPの場合、再生部は、図３の破線３１で示す様に、オリジナル映像データのAPLレベルが低いほど白ピーク輝度が高くなるように制御値が設定されたLUTを用いて輝度レベルを調整し、APLレベルが高くなるほど白ピーク輝度が低くなるように制御値が設定されたLUTを用いて再生時の輝度レベルを調整する。
本実施の形態のLUTは、入力される映像信号のAPLレベルに対して、図４(ａ)のAPL0〜APLN(以下、「調整用APLレベル」と言う。)の各レベルのガンマ特性曲線４１〜４３の各々が示す出力値の輝度レベルを出力するように設定された制御値が格納されているものとする。尚、同図のAPL0のガンマ特性曲線４１で示される出力値は、オリジナル映像データのAPLレベルが所定値APLminの場合に適用され、APLNのガンマ特性曲線４３で示される出力値は、オリジナル映像データのAPLレベルが所定値APLmax場合に適用されるものとする。【００２２】
次に、本実施の形態の特徴部分である輝度制御について説明する。
本実施の形態に係る記録部は、放送局等から受信した映像ストリームを記録媒体に一旦記録し、記録した映像ストリームのフレーム単位の輝度信号に基づいてAPLレベルを算出し、APLレベルの遷移が、図５(ｃ)で示すような輝度変化パターン(以下、「所定パターン」と言う。)と所定程度以上に合致する部分があるか否かを検出する。【００２３】
所定パターンを検出した場合、輝度が急激に変化したＴ２期間については、図２の破線２１で示す様に、徐々に白ピーク輝度を下げるようにＴ２期間の映像データ再生時のAPLレベルを設定し、設定したAPLレベルを適用すべきフレームのフィールド番号を時間情報として記録し、また、設定したAPLレベルに対応するLUTを識別するためのルックアップテーブル番号(LUTNO.)を調整用パラメータとして時間情報と対応付けて記録する。【００２４】
ここで、Ｔ２期間の望ましい具体数値について言及する。図１８は、発明者らが実測した瞳径の反応時間と、画面輝度との関係を示したグラフである。図１８の上のグラフは人間の瞳径の変化を示すグラフであり、図１８の下のグラフは輝度の変化を示すグラフである。ここでは、２０cd/m2程度の暗画面を見ていた状態から、３００cd/m2の明画面を１秒間見た場合の人間の瞳径反応を示している。図１８を見れば分かるように、明画面を見た時間から瞳径が収縮していくが、明画面から暗画面に切り替わっても瞳径の収縮は継続する。そして明画面を見た時間から２秒程度で瞳径の収縮は収まり、再び広がっていく。このことから、暗画面から明画面に切り替わる際に映像としてのインパクトを保つためには明画面の初期の輝度を２秒以上保つ必要があることになる。即ち図２の実線２０と破線２１とが重複している期間、時間Ｔ４が２秒以上必要となる。なお、図１８に示した瞳径反応は、多数のサンプルの平均値である。【００２５】
また、人間が暗い場所から明るい場所に出た場合に明るい場所に目が慣れることを明順応と呼ぶが、一般的にその明順応に必要な時間は１分程度と言われている。そこで、徐々に輝度を下げるカーブはそれより短い時定数３０秒程度以下にすると、人間は輝度を落としても画面が暗くなったことを認識しにくくなる。即ち、図２における時間Ｔ５を３０秒以内に収めることが望ましい。【００２６】
本実施の形態に係る再生部は、上記記録装置によって記録されたフィールド番号の映像データを再生する際、当該フィールド番号に対応づけて記録されたLUTNO.で示されるLUTを用いて、当該映像データの輝度レベルを決定し表示する。
尚、本明細書において、ＭＰＥＧ-２システム等の圧縮された映像データを再生する場合の伸長処理は本願の特徴部分ではないため説明を省略する。【００２７】
＜構成＞
以下、上述した本実施の形態に係る記録再生システムの構成について説明する。
図１は、本実施の形態に係る記録再生システム１００の機能構成図を示している。
記録再生システム１００は、上述した様に、所定パターンと合致する部分の映像データ再生時の輝度レベルを調整するためのLUTの識別子であるLUTNO.と そのLUTNO.のLUTを適用するフィールド番号を記録する記録部１１０と、記録媒体に記録されている映像ストリームを再生する再生部１２０とで構成されている。【００２８】
以下、各部について説明する。
＜記録部１１０＞
記録部１１０は、映像蓄積部１１１、パラメータ抽出部１１２、パラメータ設定部１１３、及びパラメータ蓄積部１１４とを含んで構成されている。
ここで、映像蓄積部１１１は、ハードディスク等の記録媒体であり、放送局等から受信したＭＰＥＧ-２システム等の映像ストリームの映像データを記憶する機能を有する。【００２９】
パラメータ抽出部１１２は、映像蓄積部１１１に記憶されている映像データをフレーム単位に読み出し、読み出した各映像データの輝度信号を抽出し、抽出した各フレームの輝度信号を各フレームのフィールド番号と共にパラメータ設定部１１３に送出する機能を有する。
パラメータ設定部１１３は、抽出されたフレーム毎の輝度信号に基づいてAPLを算出し、算出したAPLレベルの遷移について所定パターンと所定程度以上に合致するか部分があるか否かを検出する機能を有する。【００３０】
ここで、所定パターンについて説明する。
図５(ｃ)は、所定パターンの波形を示しており、同図の波形は、パラメータ設定部１１３が、オリジナル映像データのAPLレベルの遷移について、所定パターンと所定程度以上に合致するか部分があるか否か、即ち、所定パターンと局所的に所定レベル以上の相関を有する部分があるか否かを検出する際に用いられる。【００３１】
APLminは所定パターンのAPLレベルの最小値であり、図４(a)に示すAPL０レベルの出力を行う場合のAPL値を示し、APLmaxは所定パターンのAPLレベルの最大値であり、図４(a)に示すAPLＮレベルの出力を行う場合のAPL値を示しており、APLminとAPLmaxは一定値以上の差があるものとする。また、同図(ｃ)の波形において、t1〜t2の間隔は１０秒程度であるものとする。【００３２】
APLレベルの遷移が所定パターンと一致するか否かの判断は、例えば、図５(ｃ)に示す所定パターンの波形を一定時間おきにずらしながら当該波形と所定程度以上の相関がある区間があるか否かを検出することにより行うものとする。
また、パラメータ設定部１１３は、映像ストリームを再生する際に輝度を調整するための複数の調整用APLレベルと、調整用APLレベルに対応したLUTを識別するためのLUTNO.とを予め対応づけて記憶する機能を有する。【００３３】
更に、パラメータ設定部１１３は、映像ストリームのAPLレベルの遷移について所定パターンと一致する部分がある場合に、APLレベルがAPLminからAPLmaxに遷移したフィールド(以下、「APL上昇フィールド」と言う。)を特定し、オリジナル映像ストリームのAPLと調整用APLレベルに基づいて、当該APL上昇フィールド以降の各フィールドの輝度レベルが一定時間tおきに低くなるようにLUTNO.を設定し、設定したLUTNO.と当該LUTNO.を適用するフィールド番号をパラメータ蓄積部１１４へ送出する機能を有する。【００３４】
パラメータ蓄積部１１４は、ハードディスクやメモリ等の記録媒体であり、各映像ストリームについて設定されたLUTNO.とフィールド番号を対応付けた再生時適用パラメータを記憶する機能を有する。
＜再生部１２０＞
再生部１２０は、調整部１２１、及び表示部１２４を含んで構成されており、以下、各部について詳細に説明する。【００３５】
調整部１２１は、LUT１２２及びLUT設定部１２３とを含んで構成されており、ユーザの再生指示に応じて映像蓄積部１１１に記録されている映像データをフレーム単位に読み出し、LUT１２２に設定されているLUTの制御値に基づいて輝度レベルを決定し、決定した輝度レベルで当該映像データを表示するよう表示部１２４に当該映像データ及び輝度レベルを送出する。【００３６】
LUT１２２は、RAM(Random Access Memory)等のメモリであり、読み出された各フレームのフィールド番号の映像データを表示する際に適用するLUTを記憶する機能を有する。尚、LUTは、各映像データが示す各輝度値について、各映像データ表示時の輝度レベル制御用の制御値を対応付けたものである。
LUT設定部１２３は、各LUTNO.に対応するLUTの制御値を記憶する機能と、読み出された映像データに対応する再生時適用パラメータを順次読み出す機能を有する。また、読み出されたオリジナル映像データのAPLを算出し、算出したAPLに応じたLUTNO.のLUTの制御値をLUT１２２に設定する機能と、読み出した映像データのフィールド番号と再生時適用パラメータのフィールド番号とが一致する場合に、再生時適用パラメータのLUTNO.が示すLUTの制御値をLUT１２２に設定する機能を有する。尚、LUT１２２への制御値の設定は、垂直ブランキング期間に行うものとする。【００３７】
表示部１２４は、PDPや液晶等のディスプレイであり、読み出された各フィールドの映像データを、調整部１２１によって決定された輝度レベルで表示する機能を有する。
＜データ＞
次に、本実施の形態に係る記録再生システム１００に記憶されているテーブルデータについて説明する。【００３８】
図５(ａ)は、パラメータ設定部１１３に予め記憶されている調整用APLテーブルの構成及びデータを例示している。
調整用APLテーブル５０は、APLレベル５１とLUTNO.５２とを対応付けて記憶している。
APLレベル５１は、APL値を所定値毎に区分することにより定めたAPLのレベルを示しており、当該各レベルに応じて、上述した図４(ａ)のガンマ特性曲線４１〜４３のうち、どの曲線の出力値を出力するように制御するか予め設定されているものとする。【００３９】
LUTNO.５２は、ガンマ特性曲線４１〜４３の各々で示される出力値が出力されるように設定された制御値を格納するLUTを識別するための識別番号である。
また、図５(ｂ)は、LUT設定部１２３に予め記憶されている調整用LUTの構成及びデータを例示している。
調整用LUT６０は、入力(アドレス)６１とLUTNO.０〜LUTNO.Ｎ６２を対応付けて記憶している。【００４０】
入力(アドレス)６１は、オリジナル映像データの各輝度信号が入力されるLUT１２２のアドレスを示している。また、LUTNO.０〜LUTNO.Ｎ６２は、各LUTを識別するための識別番号を示しており、LUTNO.０〜LUTNO.Ｎ６２の各々のテーブル値は、LUT１２２内部の入力(アドレス)６１の各アドレスに格納される。
＜動作＞
本実施の形態に係る記録再生システム１００の動作について説明する。【００４１】
図６は、本実施の形態に係る記録再生システム１００の調整用パラメータ記録処理を示す動作フローである。
以下、同図に従って調整用パラメータ記録処理について説明する。
パラメータ抽出部１１２は、映像蓄積部１１１から映像データを順次フレーム単位に読み出し(ステップＳ１１０)、読み出した映像データの輝度信号をフレーム毎に抽出し、当該輝度信号と当該フレームのフィールド番号とをパラメータ設定部１１３へ送出する(ステップＳ１２０)。【００４２】
続いて、パラメータ設定部１１３は、ステップＳ１２０で抽出されたフレーム毎の輝度信号に基づいてAPLを算出し、パラメータ設定記録処理を行う(ステップＳ１３０)。
以下、パラメータ設定記録処理について図７を用いて説明する。
尚、調整用パラメータ設定処理前において、パラメータ設定部１１３は、初期LUTNO.としてLUTNO.０をメモリに設定しているものとする。【００４３】
図６のステップＳ１４１において、パラメータ設定部１１３は、ステップＳ１２０で抽出されたフレーム毎の輝度信号に基づいて算出したAPLレベルの遷移が図５(c)に示す所定パターンの波形と合致するか否か、図５(c)の波形をフレーム毎にずらしながら各々対応する部分を乗算して累積して平均化し、相関部分があるか否か判断する。
ステップＳ１４１において、パラメータ設定部１１３が、APLレベルの遷移が所定パターンと相関があり、合致すると判断した場合には(ステップＳ１４１:Ｙ)、図５(c)に示すAPLminからAPLmaxに遷移したフィールドをAPL上昇フィールドとして特定し、当該フィールドから所定時間経過後のフィールドに着目する(ステップＳ１４２)。【００４４】
パラメータ設定部１１３は、メモリに格納されているLUTNO.を１加算し(ステップＳ１４３)、メモリ上のLUTNO.を加算結果のLUTNO.に置き換えて記憶し、当該LUTNO.と着目しているフィールドのフィールド番号とを対応づけてパラメータ蓄積部１１４に記録する(ステップＳ１４４)。
続いて、パラメータ設定部１１３は、次のフィールドに着目し(ステップＳ１４５)、当該フィールドが、ステップＳ１４２で特定したＡＰＬ上昇フィールドから一定時間t×ｎ(ｎ=１，２，３・・・)経過後のフィールドか否か判断する(ステップＳ１４６)。【００４５】
ステップＳ１４６において、パラメータ設定部１１３が、一定時間t×ｎ経過後のフィールドでないと判断した場合には(ステップＳ１４６:Ｎ)、メモリに格納されているLUTNO.を現在着目しているフィールドのフィールド番号と対応づけて、パラメータ蓄積部１１４に記録する(ステップＳ１４７)。
また、ステップＳ１４６において、パラメータ設定部１１３が、一定時間t×ｎ経過後のフィールドであると判断した場合には(ステップＳ１４６:Ｙ)、ステップＳ１４４においてメモリに格納されたLUTNO.に１加算し、メモリ上のLUTNO.に換えて加算結果のLUTNO.をメモリに格納し(ステップＳ１４８)、ステップＳ１４７の処理を行う。【００４６】
ステップＳ１４７に続いて、パラメータ設定部１１３は、オリジナル映像データのAPLレベルが所定値以上か否か判断する(ステップＳ１４９)。
ステップＳ１４９において、パラメータ設定部１１３が、APLレベルが所定値以上であると判断した場合(ステップＳ１４９:Ｙ)、ステップＳ１４５以下の処理を繰り返し行う。【００４７】
また、ステップＳ１４９において、パラメータ設定部１１３が、APLレベルが所定値以上でないと判断とした場合(ステップＳ１４９:Ｎ)、パラメータ設定記録処理を終了する。
次に、本実施の形態に係る記録再生システム１００の再生処理について説明する。
図８は、記録再生システム１００の再生処理フローを示している。以下、同図に従って説明する。【００４８】
ステップＳ２１０において、ユーザの再生指示に応じて、調整部１２１が映像蓄積部１１１から映像データを順次読み出し、各フレームの映像データの輝度信号をLUT設定部１２３に送出し、また読み出した映像データをフィールド毎にLUT１２２に送出する。
LUT設定部１２３は、フレーム毎の輝度信号に基づいてAPLを算出し、パラメータ蓄積部１１４に格納されている再生時適用パラメータを読み出す(ステップＳ２２０)。【００４９】
LUT設定部１２３は、ステップＳ２２０で読み出された再生時適用パラメータのフィールド番号が、ステップＳ２１０で読み出されたフレームのフィールド番号と一致するか否か判断する(ステップＳ２３０)。
ステップＳ２３０において、LUT設定部１２３が一致すると判断した場合(ステップＳ２３０:Ｙ)、調整用LUT６０を読み出し、ステップＳ２２０で読み出した再生時適用パラメータのLUTNO.が示すLUTのテーブル値を選択し、選択したテーブル値をLUT１２２に書き込む(ステップＳ２４０)。【００５０】
また、ステップＳ２３０において、LUT設定部１２３が一致しないと判断した場合(ステップＳ２３０:Ｎ)、LUT設定部１２３は、ステップＳ２２０で算出したAPLに応じたLUTNO.のテーブル値をLUT１２２に書き込む(ステップＳ２５０)。
表示部１２４は、LUT１２２に入力された映像データの輝度信号に対するテーブル値を出力し、映像データを表示する(ステップＳ２６０)。
＜実施の形態１の変形例１＞
＜概要＞
上述した実施の形態１では、記録されている映像データに、暗いシーンが一定時間続き(図２のＴ１期間)、その後急激に明るいシーンに変化して一定時間明るいシーンが続き(図２のＴ２期間)、その後、急激に暗いシーンに変化して一定時間暗いシーンが続く区間が含まれている場合(図２のＴ３期間)、急激に明るいシーンに変化した後、明るいシーンが一定時間続くことが予め分かっている。【００５１】
従って、実施の形態１では、図２に示す様なAPLレベルの遷移パターンにおいて、明るいシーンに変化した時は、輝度変化による映像のインパクトを維持するために、オリジナル映像データの輝度で所定時間表示し、その後、PDPの発熱を抑制し、省電力化を図るために、一定時間おきに徐々に輝度を下げるように輝度調整を行うものとして説明した。
本変形例では、実施の形態１と同様、明るいシーンが一定時間(図２のＴ２期間)続いた後、急激に暗いシーンが続くこと(図２のＴ３期間)が予め分かっている。【００５２】
そのため、本変形例では、視聴者の眼が明順応し始めた後に暗いシーンに変化した瞬間は、視聴者は暗い映像部分の識別が困難であることを考慮し、暗い映像部分の階調を所定値だけ上げるように輝度を調整するための制御値を設定し、視聴者が暗い部分の映像を見やすいように輝度を調整する。また、視聴者の眼が暗順応し始める前に、オリジナル映像データのAPLレベルに応じた輝度を出力するように制御する。【００５３】
上述した暗い映像部分の階調を所定値だけ上げる時間は、暗順応時間は明順応時間より長いため少なくとも１０秒以上が望ましい。
以下、上述した本変形例のパラメータ設定記録処理について、実施の形態１と異なる部分について説明する。尚、本変形例における再生処理は、実施の形態１と同様であるため説明を省略する。【００５４】
図４(ｂ)は、オリジナル映像データのAPLレベルの遷移が図２で示すパターンと一致する場合において、明るいシーンから暗いシーンに急激に変化したＴ３期間に適用するガンマ特性を示している。
LUT設定部１２３は、実施の形態１と同様に、ガンマ特性曲線４４が示す出力値を出力するための制御値を含むLUTを調整用LUT６０に保持しており、パラメータ設定部１１３は、当該LUTのLUTNO.とガンマ特性曲線44に対応するAPLレベルとを調整用APLテーブル５０に保持しているものとする。【００５５】
また、図５の所定パターンとオリジナル映像データのAPLレベルの遷移が一致する場合において、APLmaxからAPLminに変化した時点から一定時間は、図４(ｃ)の破線４５で示す様に、所定値x以下の入力値に対してはガンマ特性曲線44で示す出力値より大きい出力値を出力するように設定した制御値を含むLUTを、調整用LUT６０に保持しているものとする。【００５６】
パラメータ設定部１１３は、実施の形態１と同様に、抽出されたフレーム毎の輝度信号に基づいてAPLを算出し、算出したAPLレベルの遷移について所定パターンと合致する部分があるか否か判断する。
また、パラメータ設定部１１３は、映像ストリームのAPLレベルの遷移について所定パターンと一致する部分がある場合に、APLレベルがAPLmaxからAPLminに遷移したフィールド(以下、「APL下降フィールド」と言う。)を特定する。【００５７】
パラメータ設定部１１３は、当該APL下降フィールドから一定時間経過するまでの各フィールドについては、オリジナル映像ストリームのAPLと調整用APLレベルに基づき、図４(ｂ)の破線４５が示す出力値を出力するための制御値を含むLUTNO.を設定し、当該各フィールド番号と設定したLUTNO.とを再生時適用パラメータとしてパラメータ蓄積部１１４に送出する。【００５８】
パラメータ蓄積部１１４は、実施の形態１と同様、パラメータ設定部１１３によって送出されたフィールド番号とLUTNO.とを対応付けて記憶する。
＜実施の形態２＞
＜概要＞
本実施の形態に係る記録再生システムは、実施の形態１と同様、記録媒体に一旦記録された映像ストリームの映像データに基づき、当該映像データの再生時に適用するパラメータを設定して記録し、記録したパラメータを用いて映像データを再生するものである。【００５９】
本実施の形態に係る記録再生システムは、記録部が、インタレースの映像信号を受信して記録した映像ストリームの映像データに基づいて、I/P変換対象となるフィールドの補間対象画素が動画か静止画かを判断し、その判断結果を調整用パラメータとして記録し、再生部が、調整用パラメータで示される判断結果に基づいてI/P変換対象フィールドを補間してフレームを生成し再生する。【００６０】
ここで、I/P変換を行う際に補間対象となるフィールドの補間対象画素が動画か静止画か判断する動静判断の方法を、従来及び本実施の形態の場合に分けて説明する。
まず、従来の動静判断について図９を用いて説明する。
同図に示すｎ−１〜ｎ＋１の各フィールドは、時間軸において連続するフィールドを示しており、各フィールドの各画素は、各フィールドにおいて同じ位置に配置された画素である。また、同図は、ｎ−１フィールドは既に補間処理がなされており、ｎフィールドの補間対象画素について動静判断を行う場合を示している。【００６１】
例えば、補間対象画素７４について補間処理を行う場合、補間対象画素７４の上ラインに位置するオリジナル画素７２の画素値と、オリジナル画素７２と同位置のｎ−１フィールドの補間画素７１を比較し、画素値が一致している場合に補間対象画素７４を静止画と判断する。静止画と判断した場合には、ｎ−１フィールドのオリジナル画素７３の画素値を用いて補間対象画素７４を補間する。【００６２】
また、画素値が一致していない場合には、補間対象７４を動画と判断し、動画と判断した場合には、補間対象画素７４の上下のラインに位置するオリジナル画素７２とオリジナル画素７５の画素値を用いて補間対象画素７４を補間する。
次に、本実施の形態の動静判断について図９を用いて説明する。
上記と同様、ｎフィールドの補間対象画素７４について補間処理を行う場合、補間対象画素７４と同位置のｎ−１フィールドのオリジナル画素７３及びｎ＋１フィールドのオリジナル画素７６の画素値を比較する。【００６３】
両方の画素値が一致すれば、補間対象画素７４を静止画と判断し、画素値が一致しなければ動画と判断する。尚、動静判断後の補間方法は従来と同じである。
上記の従来の補間方法によると、例えば、ｎ−１フィールドの画素７３及びｎ＋１フィールドの画素７６が動画領域である場合でも、補間対象画素７４にｎ−１フィールドの画素が補間されてしまうことがあり、特に白黒の画像について誤った動静判断に基づいて補間すると、視聴者に強い違和感を与えてしまうという問題がある。【００６４】
本実施の形態では、上記の問題を考慮し、従来の様にリアルタイムで動静判断を行わないため、動静判断対象となるフィールドの前後フィールドの画素値を抽出して動静判断を行い、確実に動画部分を検出する。
＜構成＞
以下、本実施の形態に係る記録再生システムの構成について説明する。【００６５】
図１１は、本実施の形態に係る記録再生システム２００の機能構成図を示しており、実施の形態１と同じ構成については実施の形態１と同じ符号を付している。
記録再生システム２００は、各フレームの画素毎の動静判断結果を記録する記録部２１０と、記録部１００に記録された動静判断結果を用いて映像データのI/P変換を行い再生する再生部２２０で構成されている。【００６６】
各部について、以下詳細に説明するが、実施の形態１と同じ構成については説明を省略する。
記録部２１０は、映像蓄積部１１１、パラメータ抽出部２１２、パラメータ蓄積部２１６を含んで構成されている。
パラメータ抽出部２１２は、ｎ−１フィールドメモリ２１３と、ｎ＋１フィールドメモリ２１４と、ｎフィールド動静判断部２１５とを含んで構成されている。【００６７】
パラメータ抽出部２１２は、記録されている映像データの全フィールドから順に動静判断対象フィールドを特定し、特定した動静判断対象フィールドの前後のフィールドの映像データを読み出し、読み出した各映像データを各々対応するフィールドメモリに送出する機能を有する。尚、動静判断対象フィールドを、以下「ｎフィールド」とし、ｎフィールドの前後のフィールドを、「ｎ−１フィールド」及び「ｎ＋１フィールド」とする。【００６８】
ｎ−１フィールドメモリ２１３及びｎ＋１フィールドメモリ２１４は、ＲＡＭ等のメモリであり、パラメータ抽出部２１２によって送出された映像データを記憶する機能を有する。
ｎ−１フィールドメモリ２１３は、読み出されたｎ−１フィールドの映像データを記憶し、ｎ＋１フィールド２１４は、読み出されたｎ＋１フィールドの映像データを記憶する。【００６９】
ｎフィールド動静判断部２１５は、ｎ−１フィールドメモリ２１３及びｎ＋１フィールドメモリ２１４に記憶されている映像データの各画素値に基づいて、ｎフィールドの補間対象画素について動静判断を行う機能と、補間対象画素の動静判断結果とフィールド番号とをパラメータ蓄積部２１６へ送出する機能を有する。
パラメータ蓄積部２１６は、パラメータ抽出部２１２によって送出された動静判断結果とフィールド番号とを対応づけた動静判断情報を記憶する機能を有する。【００７０】
再生部２２０は、調整部２２１及び表示部１２４を含んで構成され、調整部２２１は、ｎ−１フィールドメモリ２２２、ｎフィールドメモリ２２３、及びフレーム生成部２２４を含む。
調整部２２１は、ユーザによる映像データの再生指示に応じて記録部２１０からI/P変換対象のフィールド(以下、「ｎフィールド」と言う。)と当該フィールドの前のフィールド(以下、「ｎ−１フィールド」と言う。)の映像データを読み出し、ｎフィールドの映像データをｎフィールドメモリ２２３へ送出し、ｎ−１フィールドの映像データをｎ−１フィールドメモリ２２２に送出する機能を有する。【００７１】
ｎ−１フィールドメモリ２２２及びｎフィールドメモリ２２３は、ＲＡＭなどのメモリであり、調整部２２１により送出されたフィールドの映像データを記憶する機能を有する。
I/P変換部２２４は、ｎ−１フィールドメモリ２２２及びｎフィールドメモリ２２３の映像データを読み出すと共に、ｎフィールドに対応する動静判断情報を読み出す機能と、読み出した動静判断情報と各映像データに基づいて、ｎフィールドの補間対象画素について補間処理を行い、オリジナルの各画素値と補間対象画素値とを合成してプログレッシブ方式の映像データに変換し、変換後の画素値を表示部１２４へ送出する機能を有する。【００７２】
＜動作＞
上述した本実施の形態に係る記録再生システムの動作について説明する。
図１１は、本実施の形態に係る記録再生システムの動静判断処理を示す動作フロー図である。以下、同図に従って説明する。
ステップＳ２１０において、パラメータ抽出部２１２は、映像蓄積部１１１に記憶されている映像データから動静判断対象フィールド(ｎフィールド)を特定し、ｎ−１フィールド及びｎ＋１フィールドの映像データを映像蓄積部１１１から読み出し、ｎ−１フィールドメモリ２１３にｎ−１フィールドの映像データを送出し、ｎ＋１フィールドメモリ２１４にｎ＋１フィールドの映像データを送出する。【００７３】
ｎフィールド動静判断部２１５は、ｎ−１フィールドメモリ２１３及びｎ＋１フィールドメモリ２１４から映像データを読み出し、ｎフィールドの各補間対象画素について、当該補間対象画素と同位置のｎ−１フィールド及びｎ＋１フィールドの画素値を比較する(ステップＳ２１１)。
続いて、ｎフィールド動静判断部２１５は、ステップＳ２１１で比較した画素値が一致しているか否か判断する(ステップＳ２１２)。【００７４】
ステップＳ２１２において、ｎフィールド動静判断部２１５が、画素値が一致していると判断した場合(ステップＳ２１２:Ｙ)、ｎフィールド動静判断部２１５は、当該補間対象画素を動画と判断し、その判断結果とｎフィールドのフィールド番号をパラメータ蓄積部２１６へ送出する。
また、ステップＳ２１２において、ｎフィールド動静判断部２１５が、画素値が一致していないと判断した場合(ステップＳ２１２:Ｎ)、ｎフィールド動静判断部２１５は、当該補間対象画素を静止画と判断し、その判断結果とｎフィールドのフィールド番号をパラメータ蓄積部２１６へ送出する。【００７５】
パラメータ蓄積部２１６は、ステップＳ２１３及びステップＳ２１４において送出された動静判断結果とフィールド番号を対応づけて記憶する(ステップＳ２１５)。
次に、本実施の形態に係る記録再生システムの再生処理について説明する。
図１２は、本実施の形態に係る記録再生システム２００の再生処理を示す動作フローである。以下、同図に従って説明する。【００７６】
ステップＳ２２０において、調整部２２１は、ユーザの再生指示に応じて、映像蓄積部１１１からI/P変換対象となるｎフィールドを特定し、ｎ−１フィールド及びｎフィールドの映像データを映像蓄積部１１１から読み出し、ｎ−１フィールドメモリ２１３にｎ−１フィールドの映像データを送出し、ｎフィールドメモリ２１４にｎフィールドの映像データを送出する。【００７７】
I/P変換部２２４は、ｎ−１フィールドメモリ２２２及びｎフィールドメモリ２２３から各フィールドの画素値を読み出すと共に、パラメータ蓄積部２１６からｎフィールドの動静判断情報を読み出す(ステップＳ２２１)。
続いて、I/P変換部２２４は、ｎフィールドの各補間対象画素と同位置の動静判断情報で示される画素の動静判断結果を参照し、当該画素が静止画か否か判断する(ステップＳ２２２)。【００７８】
ステップＳ２２２において、I/P変換部２２４が、当該画素が静止画であると判断した場合(ステップＳ２２２:Ｙ)、ｎフィールドの当該補間対象画素と同位置のｎ−１フィールドの画素値を用いて補間する(ステップＳ２２３)。
続いて、I/P変換部２２４は、ステップＳ２２３で補間した補間対象画素の画素値と補間前の各画素値を合成してプログレッシブ方式の映像データを生成し、表示部１２４に変換後の映像データを出力する(ステップＳ２２５)。【００７９】
また、ステップＳ２２２において、I/P変換部２２４が、当該画素が静止画でないと判断した場合(ステップＳ２２２:Ｎ)、ｎフィールドの当該補間対象画素の上下ラインの画素値を用いて補間し(ステップＳ２２４)、ステップＳ２２５の処理を行う。
＜実施の形態３＞
＜概要＞
本実施の形態に係る記録再生システムは、記録部が、上述した実施の形態２の動静判断結果を用いて、記録した映像ストリームの映像データからブロックノイズが発生しているマクロブロックを含む特定画素ブロックを検出し、検出したフレームの特定画素ブロックを示すブロックノイズ情報を調整用パラメータとして記録する。再生部は、記録されている映像ストリームを再生する場合に、フレーム毎にI/P変換した後、ブロックノイズ情報で示されるフレームの特定画素ブロックの映像データについては、ＬＰＦ(Low Pass Filter)をONに制御して高周波成分を除去し、ブロックノイズが発生していない特定画素ブロックについては、ＬＰＦをOFFに制御する。【００８０】
ここで、本実施の形態におけるブロックノイズの検出について説明する。
例えば、ｎ−１フィールドとｎ＋１フィールドが奇数ライン、動静判断対象となるｎフィールドが偶数ラインの画素データを保持している場合、動静判断部２１５は、偶数ラインに奇数ラインの動静判断結果を適用し、ｎフィールドの動画領域を検出する。
また、ｎフィールドの映像データの輝度信号について特定画素単位に高速フーリエ変換(ＦＦＴ)を行い、ｎフィールドの映像データの空間周波数を算出する。【００８１】
図１４(ａ)は、ブロックノイズが無い場合のＦＦＴ結果を示しており、同図(ｂ)は、ブロックノイズが有る場合のＦＦＴ結果を示している。
ブロックノイズが無い場合には、同図(ａ)に示す様に、空間周波数が高周波になるほど強度は低下傾向になり、ブロックノイズが有る場合には、同図(ｂ)の９２で示す様に、１６画素相当の空間周波数T/１６の強度が高くなり、また、同図(ｂ)の９３で示す様に、T/１６以降の空間周波数の強度が極端に少なくなる傾向がある。【００８２】
従って、本実施の形態では、記録部が、フレームの動画領域のＦＦＴ結果が同図(ｂ)で示す様な結果である場合にブロックノイズが有ることを検出し、そのＦＦＴ対象となった特定画素のブロックを特定してブロックノイズ情報として記録する。
＜構成＞
以下、上述した本実施の形態に係る記録再生システムの構成について説明する。【００８３】
図１３は、本実施の形態に係る記録再生システム３００の機能構成図である。
記録再生システム３００は、上述した記録部３１０及び再生部３２０とで構成されている。以下、各部について説明するが、上述した実施の形態１及び２と同じ構成については同じ符号を付しており、同じ構成については説明を省略する。
記録部３１０は、映像蓄積部１１１、パラメータ抽出部３１２、及びパラメータ蓄積部３１６を含んで構成されている。【００８４】
パラメータ抽出部３１２は、実施の形態２と同様、ｎ−１フィールドメモリ２１３及びｎ＋１フィールドメモリ２１４、動静判断部２１５を含み、更に、ｎフィールドメモリ３１３と、ＦＦＴ処理部３１４と、ブロックノイズ検出部３１５を含んで構成されている。
ｎフィールドメモリ３１３は、ＲＡＭ等のメモリであり、動静判断部２１５により動静判断対象フィールドとして特定されたｎフィールドの映像データを記憶する機能を有する。【００８５】
ＦＦＴ処理部３１４は、ｎフィールドメモリ３１３に記憶されている映像データの輝度信号について、例えば６４画素×６４画素などの特定画素のブロック単位に高速フーリエ変換を行い、空間周波数の強度をＦＦＴ処理結果としてブロックノイズ検出部３１５に送出する機能を有する。
ブロックノイズ検出部３１５は、ＦＦＴ処理結果により示される空間周波数T/16の強度が所定値以上であるか否かを判断する。また、空間周波数T/16の強度が所定値以上である場合に、動静判断部２１５によって送出された動静判断結果に基づいて、そのＦＦＴ処理対象となったブロックが動画領域か否か判断してブロックノイズの有無を検出する機能と、ブロックノイズが発生しているＦＦＴ処理対象となった特定画素ブロックを示すブロックノイズ情報をブロックノイズ情報蓄積部３１８へ送出する機能を有する。
＜動作＞
本実施の形態に係る記録再生システム３００の動作について説明する。【００８６】
図１５は、記録再生システム３００の記録部３１０の調整用パラメータ記録処理を示す動作フロー図である。
以下、同図に従って記録部３１０の動作を説明する。
ステップＳ３１０において、動静判断部２１５は、上述した実施の形態２と同様、動静判断対象となるｎフィールドを特定し、ｎフィールドとその前後のフィールド(ｎ−１フィールド、ｎ＋１フィールド)の映像データを読出し、各フィールドに対応するフィールドメモリに読み出した映像データを送出する。また、図１１のステップＳ２１１からステップＳ２１４までの処理を行い、動静判断結果を動静判断情報蓄積部３１７とブロックノイズ検出部３１５へ送出する。【００８７】
ＦＦＴ処理部３１４は、ｎフィールドメモリ３１３に格納されている映像データの輝度信号について、例えば６４画素×６４画素の特定画素ブロック単位にＦＦＴ処理を行い、ＦＦＴ処理結果をブロックノイズ検出部３１５に送出する(ステップＳ３２０)。
ブロックノイズ検出部３１５は、ステップＳ３１０で動静判断部２１５によって送出されたｎフィールドの動静判断結果と、ステップＳ３２０でＦＦＴ処理部３１４によって送出されたＦＦＴ処理結果とに基づいて、ｎフィールドの動画領域におけるブロックノイズの有無の検出を行う(ステップＳ３３０)。  尚、ブロックノイズの有無の検出動作については後述するものとする。【００８８】
ブロックノイズ検出部３１５は、ステップＳ３３０によって検出されたブロックノイズの発生フィールドの特定画素ブロックとフィールド番号と対応づけたブロックノイズ情報をブロックノイズ情報蓄積部３１８に送出する。
次に、記録再生システム３００の再生部３２０の再生処理動作について図１７を用いて説明する。【００８９】
ステップＳ３５０において、I/P変換部３２２は、実施の形態２と同様、図１２のステップＳ２２０からステップＳ２２４の処理を行い、補間した画素とオリジナル画素とを合成したフレームの映像データをＬＰＦ３２３に送出する。
ＬＰＦ制御部３２４は、ブロックノイズ情報蓄積部３１８からブロックノイズ情報を読出し、I/P変換部３２２に入力された映像データのフレームが、ブロックノイズ情報で示されるフィールド番号のフレームか否か判断する(ステップＳ３７０)。【００９０】
ステップＳ３７０において、ＬＰＦ制御部３２４が、当該フレームがブロックノイズ情報で示すフィールド番号のフレームであると判断した場合(ステップＳ３７０:Ｙ)、ブロックノイズ情報で示される特定画素ブロックの映像データについて高周波成分を除去するようＬＰＦ３２３をONに制御し、表示部１２４は、ＬＰＦ３２３で高周波成分を除去された映像データを表示する(ステップＳ３８０)。【００９１】
また、ステップＳ３７０において、ＬＰＦ制御部３２４が、当該フレームがブロックノイズ情報で示すフィールド番号のフレームでないと判断した場合(ステップＳ３７０:Ｙ)、ＬＰＦ３２３をOFFにするよう制御し、表示部１２４は、I/P変換されたフレームの映像データを表示する(ステップＳ３９０)。
ここで、上述したステップＳ３３０のブロックノイズの有無を検出する動作について説明する。【００９２】
図１６は、ブロックノイズ検出処理の動作フローを示している。
同図のステップＳ３３１において、ブロックノイズ検出部３１５は、動静判断結果に基づいて特定画素ブロックに動画領域が所定数以上あるか否か判断する。
ステップＳ３３１において、ブロックノイズ検出部３１５が所定数以上の動画領域があると判断した場合(ステップＳ３３１:Ｙ)、当該ブロックのＦＦＴ処理結果に基づいて、マクロブロックの空間周波数の強度が所定値以上であるか否か判断する(ステップＳ３３２)。【００９３】
ステップＳ３３２において、ブロックノイズ検出部３１５が、マクロブロックの空間周波数の強度が所定値以上であると判断した場合(ステップＳ３３２:Ｙ)、当該ブロックにブロックノイズが有ると判断する(ステップＳ３３３)。
また、ステップＳ３３２において、ブロックノイズ検出部３１５が、マクロブロックの空間周波数の強度が所定値以上でないと判断した場合(ステップＳ３３２:Ｎ)、当該ブロックにブロックノイズが無いと判断する(ステップＳ３３４)。【００９４】
＜まとめ＞
以上、本発明に係る記録再生システムを実施の形態１から実施の形態３を用いて説明した。
本発明に係る記録再生システムは、記録されている映像ストリームを再生する前に、当該映像ストリームの各時刻における各映像データについて、各時刻を挟む前後所定時間内の映像データ又は各時刻より所定時間経過後までの映像データから、映像調整のための要素を抽出して調整用パラメータを設定し、当該調整用パラメータと当該映像データの再生時刻示す時間情報とを対応づけて記録することができる。【００９５】
このように、映像ストリームの再生前に予め映像データを解析して、画像調整の目的に応じた調整用パラメータを設定し、当該パラメータを再生時に適用する時間情報と共に記録することができるので、再生中の映像データに基づいて画像調整を行う場合に比べて画像調整の精度を向上させることができる。
また、サーバ蓄積型放送等の映像コンテンツの映像データをサーバ等の記録媒体に逐次送信するサービスの場合、ユーザが映像コンテンツの再生を行う前に、逐次送信された映像データについて調整用パラメータを設定することができ、ユーザは再生時に好適な画質等で映像コンテンツを視聴することができる。【００９６】
＜補足＞
以上、本発明に係る記録再生システムについて実施の形態に基づいて説明したが、以下のように変形することもでき、本発明は上述の実施の形態で示した記録再生システムに限られないことは勿論である。
(１)上述した実施の形態１では、映像データを再生してPDPに表示する場合について説明したが、CRT(Cathode Ray Tube)ディスプレイやLCD(Liquid Crystal Display)であってもよい。【００９７】
例えばCRTの場合、ディスプレイの前面フェースプレートガラスの発熱を抑制するために、PDPと同様、図３の破線３１で示す輝度の制御が行われている。本発明では、映像データのAPLレベルの遷移について所定パターン(図５(ｃ))と一致する部分を検出することができるので、明るいシーンの前に暗いシーンが一定時間続いていることが分かっており、この間は発熱していないことが分かる。【００９８】
そのため、実施の形態１と同様、所定パターンと一致する部分を検出した場合、図２の破線２１で示す様に一定時間おきにAPLレベルを徐々に下げるように制御する。この場合、実施の形態１と同様に、CRTに適応する各APLレベルの制御値を含むLUTを予めLUT設定部に記憶しているものとする。
また、LCDの場合は、図３の破線３０で示す様に、バックライトの輝度を一定にして液晶シャッターで点灯を抑制しているので発熱と輝度に関係がなく、APLレベルに応じた輝度の制御は行わない。しかし、LCDの場合、明るいシーンに変化後０．２〜０．４秒経過すると輝度変化による刺激が低下するため、それ以上高輝度で表示してもインパクト感は変わらず、かえって視覚疲労の原因になる。【００９９】
従って、LCDの場合においても、図２の破線２１で示す様に一定時間おきにAPLレベルを徐々に下げるように制御することが望ましい。この場合も実施の形態１と同様に、LCDに応じた輝度制御のための制御値を予めLUTに記憶し、APL上昇フィールドから例えば０．４秒以後のフィールドについては、一定時間毎に輝度が下がるようにLUTNO.を設定する。
(２)上述した実施の形態１では、PDPに対応するLUTをLUT設定部１２３に予め記憶しておくものとして説明したが、上記(１)で説明したCRTディスプレイやLCDに各々対応するLUTも予め記憶しておいてもよい。【０１００】
この場合、ユーザがディスプレイの種別を入力する、再生装置側からディスプレイの種別を送出するなどにより、記録装置が、ディスプレイの種別を取得することができるので、取得したディスプレイの種別に対応するLUTを設定することができ、ディスプレイに応じて好適な輝度調整を行うことができる。
(３)また、上述した実施の形態１では、映像データを視聴するユーザの年齢等に関係なく、所定パターンを検出した場合に約１０秒程度の間、一定時間おきにAPLレベルを徐々に下げるよう調整するものとして説明したが、視聴するユーザの年齢に応じてAPLレベルを徐々に下げるように調整する時間を変化させてもよい。  例えば、高齢者の場合には順応に時間を要するため、徐々に下げる時間を長めに設定する。【０１０１】
この場合、上記(２)のディスプレイの種別と同様に、ユーザの年齢に応じて設定されたAPLレベル毎のLUTをLUT設定部１２３に予め記憶しておき、年齢毎のLUTのLUTNO.をフィールド番号と共にパラメータ蓄積部１１４に記憶する。
映像データの再生時には、ユーザが年齢の情報を入力することにより、再生装置が年齢情報を取得し、取得した年齢情報に対応するLUTをパラメータ蓄積部１１４から選択してLUT１２２に選択したLUTを設定する。
(４)また、上述した実施の形態１では、記録部によって設定され記録されたLUTNO.に基づいて再生部がLUTNO.に対応するLUTをLUT１２２に設定し、輝度の調整を行うものとして説明したが、記録部が所定パターン(図５(ｃ))と合致する部分を検出した場合、APL上昇フィールドを示すフィールド番号と輝度レベルを徐々に下げるためのパラメータを記録し、再生部が、記録されたフィールド番号の映像データを再生する際、記録されたパラメータに基づいてLUTを選択してLUT１２２に設定することとしてもよいし、記録されたパラメータに基づいて輝度値を算出してもよい。
(５)また、上述した実施の形態１では、オリジナル映像データの遷移が所定パターン(図５(ｃ))と合致する場合に、APL上昇フィールドから一定時間おきに輝度レベルを徐々に下げるように輝度調整を行うものとして説明したが、APLレベルが上昇した後、APLレベル上昇時の輝度レベルより下げるように輝度の制御を行えばこれに限らない。
(６)上述した実施の形態２では、ｎフィールド動静判断部２１５は、各補間対象画素の動静判断結果を調整用パラメータとしてパラメータ蓄積部２１６へ送出し、パラメータ蓄積部２１６に記録するものとして説明したが、ｎフィールド動静判断部２１５は、補間対象画素のうち、動画と判断された補間対象画素の判断結果のみをパラメータ蓄積部２１６に送出することとしてもよい。これにより、パラメータ蓄積部２１６の記録領域を節約することができる。【０１０２】
また、実施の形態２では、ｎフィールド動静判断部２１５は、フィールドの全補間対象画素について動静判断を行うものとして説明したが、全補間対象画素のうち特定した補間対象画素についてのみ動静判断を行い、特定した補間対象画素の動静判断結果を用いて、他の補間対象画素に適用してもよい。これにより、動静判断を行うための回路規模を減少させることができる。
(７)また、上述の実施の形態２では、動静判断対象となるｎフィールドを基準とする前後のフィールド(ｎ−１フィールド及びｎ＋１フィールド )の画素値を用いて動静判断を行うものとして説明したが、更に、ｎフィールドを基準に前後２フィールド(ｎ−２フィールド及びｎ＋２フィールド)の画素値を用いて動静判断を行うこととしてもよい。【０１０３】
例えば、動画か静止画かの判断において動画と判断することを優先する場合には、補間対象画素位置の上下のラインに位置するｎ−２及びｎ＋２フィールドのオリジナル画素について動静判断を行い、実施の形態２と同様にｎ−１及びｎ＋１フィールドについて動静判断を行う。前後２フィールドの動静判断結果及び前後フィールドの動静判断結果が共に静止画である場合、その補間対象画素を静止画と判断する。
(８)上述した実施の形態では、調整用パラメータを映像データが蓄積されている映像蓄積部１１１とは別にパラメータ蓄積部２１６に記録するものとして説明したが、電子透かし技術を用いて映像データと共に記録することとしてもよい。【０１０４】
例えば、ＭＰＥＧの映像データについての調整用パラメータと時間情報を動きベクトルに埋め込む場合、各調整用パラメータと時間情報のビット列の１ビットを抽出し、そのビットの値（０または１）によって、１画素単位の動きベクトルが指す参照画素の周囲の画素からもっとも原画素に近い画素を動きベクトルの探索範囲に基づいて求め、それを指すベクトルを新たな動きベクトルとし、全ての調整用パラメータ及び時間情報を埋め込み後に再度圧縮して記録する。【０１０５】
このように映像コンテンツに調整用パラメータを埋め込むことにより、再生装置は、映像データの読出しと共に調整用パラメータを読み出すことができるので、読み出した調整用パラメータに基づいて輝度調整等の画像調整を行うことができる。
【産業上の利用可能性】
【０１０６】
本発明に係る記録再生システムは、映像コンテンツを記録して再生するハードディスクレコーダやDVD(Digital Versatile Disc)レコーダ、また、DLNA（Digital Living Network Alliance）に準拠したネットワーク映像装置等に利用され得る。
【図１】
2008007745.tif 000003
【図２】
2008007745.tif 000004
【図３】
2008007745.tif 000005
【図４】
2008007745.tif 000006
【図５】
2008007745.tif 000007
【図６】
2008007745.tif 000008
【図７】
2008007745.tif 000009
【図８】
2008007745.tif 000010
【図９】
2008007745.tif 000011
【図１０】
2008007745.tif 000012
【図１１】
2008007745.tif 000013
【図１２】
2008007745.tif 000014
【図１３】
2008007745.tif 000015
【図１４】
2008007745.tif 000016
【図１５】
2008007745.tif 000017
【図１６】
2008007745.tif 000018
【図１７】
2008007745.tif 000019
【図１８】
2008007745.tif 000020
【手続補正書】
【提出日】平成20年12月26日(2008.12.26)
【手続補正１】
【補正対象書類名】特許請求の範囲
【補正対象項目名】全文
【補正方法】変更
【補正の内容】
【特許請求の範囲】
【請求項１】
映像データを記憶している記録装置と当該映像データを再生する再生装置とで構成された記録再生システムであって、
前記記録装置は、
所定期間分の前記映像データに基づいて映像調整用パラメータを設定し、当該映像調整用パラメータと当該映像調整用パラメータを適用すべき映像データの表示タイミングを示す時刻情報とを記録媒体に記録する記録手段を備え、
前記再生装置は、
前記映像データを再生する際、前記記録媒体に記録された各映像調整用パラメータについての時刻情報が示す表示タイミングで表示すべき映像データを、前記各映像調整用パラメータに基づいて調整し再生する再生手段を備えること
を特徴とする記録再生システム。
【請求項２】
前記映像調整用パラメータは、前記映像データを再生する際の輝度を調整するためのパラメータであり、
前記記録手段は、前記所定期間分の映像データに基づいて各映像データの平均輝度を算出し、当該映像データの平均輝度の遷移が所定の輝度上昇パターンと合致するか否か判断し、前記所定の輝度上昇パターンと合致する場合、平均輝度が上昇した後の映像データについての再生時に用いられるべき輝度レベルを、平均輝度上昇時の映像データについて再生に用いられる輝度レベルより徐々に下げるための前記映像調整用パラメータを設定し、当該平均輝度上昇時から所定時間経過するまでの間の一の時刻を前記時刻情報として当該調整用パラメータ及び当該時刻情報を前記記録媒体に記録すること
を特徴とする請求項１記載の記録再生システム。
【請求項３】
前記記録手段は、更に、前記映像データを再生するための再生条件を取得し、取得した再生条件毎に異なる前記映像調整用パラメータを前記映像データの輝度に基づいて設定し、当該映像調整用パラメータと時刻情報とを記録すること
を特徴とする請求項２記載の記録再生システム。
【請求項４】
前記再生条件は、前記再生手段が前記映像データを再生する再生装置の種別であり、
前記記録装置は、前記再生装置の種別に応じて前記映像調整用パラメータを定め、定めた映像調整用パラメータとその時刻情報とを前記各種別に対応づけて記録すること
を特徴とする請求項３記載の記録再生システム。
【請求項５】
前記映像信号はインタレース方式で送信された信号であり、
前記記録装置は、更に、
前記映像信号からなる各フィールドの映像データの各画素について、時間軸上当該フィールドを基準とする前後の２以上のフィールドと当該フィールドの画素に基づき動画か静止画かを判断する判断手段を備え、
前記記録手段は、前記判断手段の判断結果と当該映像データのフィールドの時刻情報とを対応づけて前記映像調整用パラメータとして記録し、
前記再生手段は、前記映像データをプログレッシブ信号に変換して再生するとき、前記映像調整用パラメータに含まれた判断結果に応じて、前記映像データの各フィールドの画素を補間する際に参照するフィールドを変えてプログレッシブ信号に変換すること
を特徴とする請求項１記載の記録再生システム。
【請求項６】
前記記録手段は、前記映像調整用パラメータ及び前記時刻情報を電子透かしとして前記映像データに埋め込み、埋め込み後の映像データを前記記録媒体に記録すること
を特徴とする請求項１記載の記録再生システム。
【請求項７】
映像データを記憶している記録装置であって、
所定期間分の前記映像データに基づいて映像調整用パラメータを設定し、当該映像調整用パラメータと当該映像調整用パラメータを適用すべき映像データの表示タイミングを示す時刻情報とを記録媒体に記録する記録手段を備えること
を特徴とする記録装置。
【請求項８】
映像データと、各映像データについての各映像調整用パラメータ及び当該映像調整用パラメータを適用すべき映像データの表示タイミングを示す時刻情報が記録された記録媒体から前記映像データを読み出して再生する再生装置であって、
前記映像データを再生する際、当該映像データに対応する各映像調整用パラメータについての時刻情報が示す表示タイミングで表示すべき映像データを、前記各映像調整用パラメータに基づいて調整し再生する再生手段を備えること
を特徴とする再生装置。
【請求項９】
映像データと、各映像データについての各映像調整用パラメータ及び当該映像調整用パラメータを適用すべき前記映像データの表示タイミングを示す時刻情報とが記録されていることを特徴とする記録媒体。
【手続補正２】
【補正対象書類名】明細書
【補正対象項目名】全文
【補正方法】変更
【補正の内容】
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、映像データの再生技術に関し、特に、記録された映像データについて画質等を調整して再生する技術に関する。
【背景技術】
【０００２】
近年、テレビ放送番組等の映像コンテンツを受信して記録し、再生する記録再生装置が普及している。
また、従来の記録再生装置は映像コンテンツを再生する際、省電力化、画質の向上等を目的として、輝度の調整、インタレース信号をプログレッシブ信号に変換する(以下、「I/P変換」と言う。)際の画素の補間処理、ブロックノイズの除去等、様々な画像調整が行われている。
【０００３】
例えば、輝度調整の技術としては、ユーザによる画質調整の手間を軽減すると共に省電力化を図ることを目的とし、映像コンテンツの再生時において、再生中の映像信号の平均輝度レベルに応じてディスプレイに表示する輝度レベルを自動調整する技術が開示されている（特許文献１参照）。
【特許文献１】日本国特開平７−１５６８５号公報
【発明の開示】
【発明が解決しようとする課題】
【０００４】
しかしながら、特許文献１の技術は、一旦記録された映像コンテンツを再生する場合であっても、再生中の映像信号の輝度信号を画像調整のための要素として抽出し、これを基に平均輝度レベルを算出して調整を行うため、映像コンテンツの再生時における調整しか行うことができない。
また、従来の他の画像調整も上記特許文献１と同様、再生時における画像調整を前提としているため、再生中の映像信号に基づく画像調整しか行うことができず、画像調整に限界がある。
【０００５】
本発明は、上記の状況に鑑みてなされたものであり、記録媒体に一旦蓄積された映像コンテンツを再生する際、従来よりも画像調整の精度を向上させ得る記録再生システムを提供することを目的とする。
【課題を解決するための手段】
【０００６】
上記課題を解決するために、本発明に係る記録装置は、映像データを記憶している記録装置と当該映像データを再生する再生装置とで構成された記録再生システムであって、前記記録装置は、所定期間分の前記映像データに基づいて映像調整用パラメータを設定し、当該映像調整用パラメータと当該映像調整用パラメータを適用すべき映像データの表示タイミングを示す時刻情報とを記録媒体に記録する記録手段を備え、前記再生装置は、前記映像データを再生する際、前記記録媒体に記録された各映像調整用パラメータについての時刻情報が示す表示タイミングで表示すべき映像データを、前記各映像調整用パラメータに基づいて調整し再生する再生手段を備えることを特徴とする。
【０００７】
尚、映像調整用パラメータは、映像データを表示する際の省電力化や画質向上等の目的を達成するための、映像データの出力を制御するための制御値であり、映像調整用パラメータに基づいて調整するとは、記録している映像データを入力した場合の出力値を映像調整用パラメータで示される制御値に応じて決定することである。
【発明の効果】
【０００８】
上述の構成によれば、記録手段により、記録装置に記憶されている映像データの全体を通して、画質向上や省電力等の目的に応じた映像調整用パラメータを設定することができるので、再生時に再生中の映像のみに基づいて映像調整する従来技術と比べて、調整を行うための要素を抽出する範囲を広げることができ、より精度良く確実に映像調整用パラメータを設定することができる。また、設定した各映像調整用パラメータと各映像調整用パラメータが再生の際に用いられる時間の情報とを記録しているので、再生手段により映像データが再生される度に、時間情報が示すタイミングで当該映像調整用パラメータを用いて当該映像データの出力を制御することができ、再生時の映像調整にかかる処理負荷を軽減することができる。
【０００９】
また、前記映像調整用パラメータは、前記映像データを再生する際の輝度を調整するためのパラメータであり、前記記録手段は、前記所定期間分の映像データに基づいて各映像データの平均輝度を算出し、当該映像データの平均輝度の遷移が所定の輝度上昇パターンと合致するか否か判断し、前記所定の輝度上昇パターンと合致する場合、平均輝度が上昇した後の映像データについての再生時に用いられるべき輝度レベルを、平均輝度上昇時の映像データについて再生に用いられる輝度レベルより徐々に下げるための前記映像調整用パラメータを設定し、当該平均輝度上昇時から所定時間経過するまでの間の一の時刻を前記時刻情報として当該調整用パラメータ及び当該時刻情報を前記記録媒体に記録することとしてもよい。
【００１０】
ここで、所定の輝度上昇パターンは、平均輝度が所定値以下の暗いシーンが続いた直後に、暗いシーンの時の平均輝度より一定値以上高い平均輝度の明るいシーンが続き、その直後に暗いシーンが続く場合である。
プラズマディスプレイ等の表示装置は輝度が高いほど発熱し、電力を消費する。また、暗いシーンから明るいシーンに変化し、ユーザの目が明順応し始めるまでに、輝度レベルを徐々に下げてもユーザに違和感を与えにくい。この構成によれば、再生する前に、記録している映像コンテンツから上記の輝度上昇パターンを検出することができるので、平均輝度が上昇した時から一定時間経過後の映像データについて、再生時の輝度レベルを下げるように制御するための調整用パラメータを設定することができる。従って、輝度上昇時から一定時間は、明るいシーンに変化した時の映像のインパクトをユーザに与えることができ、一定時間経過後は、ユーザに違和感を与えることなくディスプレイの発熱を抑制し、省電力化を図ることができる。
【００１１】
また、前記記録手段は、更に、前記映像データを再生するための再生条件を取得し、取得した再生条件毎に異なる前記映像調整用パラメータを前記映像データの輝度に基づいて設定し、当該映像調整用パラメータと時刻情報とを記録することとしてもよい。
この構成によれば、記録手段は、映像データが再生される再生条件に対応する輝度調整用パラメータを時間情報と共に記録するので、ディスプレイの種類や視聴者の年齢等の再生条件に応じた適切な輝度を予め設定することができ、各映像データの再生時に好適な輝度で各映像データを表示させることができる。
【００１２】
また、前記再生条件は、前記再生手段が前記映像データを再生する再生装置の種別であり、前記記録装置は、前記再生装置の種別に応じて前記映像調整用パラメータを定め、定めた映像調整用パラメータとその時刻情報とを前記各種別に対応づけて記録することとしてもよい。
この構成によれば、同じ映像データを再生するディスプレイの種類が複数ある場合でも、各ディスプレイの特性に応じた輝度調整のための映像調整用パラメータをディスプレイの種類毎に設定することができるので、複数のユーザが各々異なるディスプレイで映像データを視聴する際に、各々のディスプレイに対応する好適な輝度で映像データを表示させることができる。
【００１３】
また、前記映像信号はインタレース方式で送信された信号であり、前記記録装置は、更に、前記映像信号からなる各フィールドの映像データの各画素について、時間軸上当該フィールドを基準とする前後の２以上のフィールドと当該フィールドの画素に基づき動画か静止画かを判断する判断手段を備え、前記記録手段は、前記判断手段の判断結果と当該映像データのフィールドの時刻情報とを対応づけて前記映像調整用パラメータとして記録し、前記再生手段は、前記映像データをプログレッシブ信号に変換して再生するとき、前記映像調整用パラメータに含まれた判断結果に応じて、前記映像データの各フィールドの画素を補間する際に参照するフィールドを変えてプログレッシブ信号に変換することとしてもよい。
【００１４】
再生時に動画か静止画かを判断してI/P変換する従来の場合、I/P変換対象となるフィールドと前フィールドの画素値しか用いて動画・静止画の判断を行うことができない。この判断に基づいてI/P変換すると、例えばI/P変換対象フィールドの前後のフィールドが動画である場合でも誤って静止画と判断してしまう場合があり、このような場合には動きがぶれた違和感のある画像が表示される。この構成によれば、判断手段により、補間対象となるフィールドを基準とする前後２フィールド以上のフィールドの画素値を用いて補間対象画素が動画か静止画かの判断を行うことができるので、動画か静止画かの判断を適切に行うことができ、動きがぶれないように画像を表示することができる。
【００１５】
また、前記記録手段は、前記映像調整用パラメータ及び前記時刻情報を電子透かしとして前記映像データに埋め込み、埋め込み後の映像データを前記記録媒体に記録することとしてもよい。
この構成によれば、電子透かしの技術を用いて調整用パラメータと時間情報を映像データと共に記録するので、映像コンテンツの画質や音質等に影響を与えることなく記録することができる。
【発明を実施するための最良の形態】
【００１６】
＜実施の形態１＞
＜概要＞
本発明に係る記録再生システムは、記録媒体に一旦記録された映像ストリームの映像データに基づいて、オリジナル映像データを再生装置に入力した場合の出力値を制御するための制御値を調整用パラメータとして設定し、設定した調整用パラメータと、オリジナル映像データの再生時において調整用パラメータを適用するタイミングを示す時刻情報とを記録する記録部と、オリジナル映像データを再生する際に、記録部に記録された調整用パラメータに基づいて映像データを表示するための出力値を導出して再生する再生部とで構成されている。
【００１７】
本実施の形態に係る記録再生システムは、一旦記録部に記録された映像ストリームを、ユーザの再生操作に応じてプラズマディスプレイ(PDP)に表示する場合において、記録部は、再生開始より前に予め輝度レベルを調整するための調整用パラメータを設定して時間情報と共に記録し、再生部は、記録部に記録された時間情報が示すタイミングで再生する映像データを表示する際に、調整用パラメータで示される制御値に基づいて輝度レベルを調整し、当該映像データをPDPに表示する。
【００１８】
以下、PDPに表示する際の通常の輝度調整について説明する。
本実施の形態に係る再生部は、入力される映像ストリームの映像信号からフレーム単位の平均輝度レベル(Average Picture Level)(以下、「APLレベル」と言う。)を算出し、輝度レベル調整用の予め設定された制御値を格納したルックアップテーブル(LUT)を参照し、算出したAPLレベルに対応する制御値に基づいてフレームの各画素の輝度レベルを決定して表示する。
【００１９】
PDPの場合、再生部は、図３の破線３１で示す様に、オリジナル映像データのAPLレベルが低いほど白ピーク輝度が高くなるように制御値が設定されたLUTを用いて輝度レベルを調整し、APLレベルが高くなるほど白ピーク輝度が低くなるように制御値が設定されたLUTを用いて再生時の輝度レベルを調整する。
本実施の形態のLUTは、入力される映像信号のAPLレベルに対して、図４(ａ)のAPL0〜APLN(以下、「調整用APLレベル」と言う。)の各レベルのガンマ特性曲線４１〜４３の各々が示す出力値の輝度レベルを出力するように設定された制御値が格納されているものとする。尚、同図のAPL0のガンマ特性曲線４１で示される出力値は、オリジナル映像データのAPLレベルが所定値APLminの場合に適用され、APLNのガンマ特性曲線４３で示される出力値は、オリジナル映像データのAPLレベルが所定値APLmax場合に適用されるものとする。
【００２０】
次に、本実施の形態の特徴部分である輝度制御について説明する。
本実施の形態に係る記録部は、放送局等から受信した映像ストリームを記録媒体に一旦記録し、記録した映像ストリームのフレーム単位の輝度信号に基づいてAPLレベルを算出し、APLレベルの遷移が、図５(ｃ)で示すような輝度変化パターン(以下、「所定パターン」と言う。)と所定程度以上に合致する部分があるか否かを検出する。
【００２１】
所定パターンを検出した場合、輝度が急激に変化したＴ２期間については、図２の破線２１で示す様に、徐々に白ピーク輝度を下げるようにＴ２期間の映像データ再生時のAPLレベルを設定し、設定したAPLレベルを適用すべきフレームのフィールド番号を時間情報として記録し、また、設定したAPLレベルに対応するLUTを識別するためのルックアップテーブル番号(LUTNO.)を調整用パラメータとして時間情報と対応付けて記録する。
【００２２】
ここで、Ｔ２期間の望ましい具体数値について言及する。図１８は、発明者らが実測した瞳径の反応時間と、画面輝度との関係を示したグラフである。図１８の上のグラフは人間の瞳径の変化を示すグラフであり、図１８の下のグラフは輝度の変化を示すグラフである。ここでは、２０cd/m2程度の暗画面を見ていた状態から、３００cd/m2の明画面を１秒間見た場合の人間の瞳径反応を示している。図１８を見れば分かるように、明画面を見た時間から瞳径が収縮していくが、明画面から暗画面に切り替わっても瞳径の収縮は継続する。そして明画面を見た時間から２秒程度で瞳径の収縮は収まり、再び広がっていく。このことから、暗画面から明画面に切り替わる際に映像としてのインパクトを保つためには明画面の初期の輝度を２秒以上保つ必要があることになる。即ち図２の実線２０と破線２１とが重複している期間、時間Ｔ４が２秒以上必要となる。なお、図１８に示した瞳径反応は、多数のサンプルの平均値である。
【００２３】
また、人間が暗い場所から明るい場所に出た場合に明るい場所に目が慣れることを明順応と呼ぶが、一般的にその明順応に必要な時間は１分程度と言われている。そこで、徐々に輝度を下げるカーブはそれより短い時定数３０秒程度以下にすると、人間は輝度を落としても画面が暗くなったことを認識しにくくなる。即ち、図２における時間Ｔ５を３０秒以内に収めることが望ましい。
【００２４】
本実施の形態に係る再生部は、上記記録装置によって記録されたフィールド番号の映像データを再生する際、当該フィールド番号に対応づけて記録されたLUTNO.で示されるLUTを用いて、当該映像データの輝度レベルを決定し表示する。
尚、本明細書において、ＭＰＥＧ-２システム等の圧縮された映像データを再生する場合の伸長処理は本願の特徴部分ではないため説明を省略する。
【００２５】
＜構成＞
以下、上述した本実施の形態に係る記録再生システムの構成について説明する。
図１は、本実施の形態に係る記録再生システム１００の機能構成図を示している。
記録再生システム１００は、上述した様に、所定パターンと合致する部分の映像データ再生時の輝度レベルを調整するためのLUTの識別子であるLUTNO.と そのLUTNO.のLUTを適用するフィールド番号を記録する記録部１１０と、記録媒体に記録されている映像ストリームを再生する再生部１２０とで構成されている。
【００２６】
以下、各部について説明する。
＜記録部１１０＞
記録部１１０は、映像蓄積部１１１、パラメータ抽出部１１２、パラメータ設定部１１３、及びパラメータ蓄積部１１４とを含んで構成されている。
ここで、映像蓄積部１１１は、ハードディスク等の記録媒体であり、放送局等から受信したＭＰＥＧ-２システム等の映像ストリームの映像データを記憶する機能を有する。
【００２７】
パラメータ抽出部１１２は、映像蓄積部１１１に記憶されている映像データをフレーム単位に読み出し、読み出した各映像データの輝度信号を抽出し、抽出した各フレームの輝度信号を各フレームのフィールド番号と共にパラメータ設定部１１３に送出する機能を有する。
パラメータ設定部１１３は、抽出されたフレーム毎の輝度信号に基づいてAPLを算出し、算出したAPLレベルの遷移について所定パターンと所定程度以上に合致するか部分があるか否かを検出する機能を有する。
【００２８】
ここで、所定パターンについて説明する。
図５(ｃ)は、所定パターンの波形を示しており、同図の波形は、パラメータ設定部１１３が、オリジナル映像データのAPLレベルの遷移について、所定パターンと所定程度以上に合致するか部分があるか否か、即ち、所定パターンと局所的に所定レベル以上の相関を有する部分があるか否かを検出する際に用いられる。
【００２９】
APLminは所定パターンのAPLレベルの最小値であり、図４(a)に示すAPL０レベルの出力を行う場合のAPL値を示し、APLmaxは所定パターンのAPLレベルの最大値であり、図４(a)に示すAPLＮレベルの出力を行う場合のAPL値を示しており、APLminとAPLmaxは一定値以上の差があるものとする。また、同図(ｃ)の波形において、t1〜t2の間隔は１０秒程度であるものとする。
【００３０】
APLレベルの遷移が所定パターンと一致するか否かの判断は、例えば、図５(ｃ)に示す所定パターンの波形を一定時間おきにずらしながら当該波形と所定程度以上の相関がある区間があるか否かを検出することにより行うものとする。
また、パラメータ設定部１１３は、映像ストリームを再生する際に輝度を調整するための複数の調整用APLレベルと、調整用APLレベルに対応したLUTを識別するためのLUTNO.とを予め対応づけて記憶する機能を有する。
【００３１】
更に、パラメータ設定部１１３は、映像ストリームのAPLレベルの遷移について所定パターンと一致する部分がある場合に、APLレベルがAPLminからAPLmaxに遷移したフィールド(以下、「APL上昇フィールド」と言う。)を特定し、オリジナル映像ストリームのAPLと調整用APLレベルに基づいて、当該APL上昇フィールド以降の各フィールドの輝度レベルが一定時間tおきに低くなるようにLUTNO.を設定し、設定したLUTNO.と当該LUTNO.を適用するフィールド番号をパラメータ蓄積部１１４へ送出する機能を有する。
【００３２】
パラメータ蓄積部１１４は、ハードディスクやメモリ等の記録媒体であり、各映像ストリームについて設定されたLUTNO.とフィールド番号を対応付けた再生時適用パラメータを記憶する機能を有する。
＜再生部１２０＞
再生部１２０は、調整部１２１、及び表示部１２４を含んで構成されており、以下、各部について詳細に説明する。
【００３３】
調整部１２１は、LUT１２２及びLUT設定部１２３とを含んで構成されており、ユーザの再生指示に応じて映像蓄積部１１１に記録されている映像データをフレーム単位に読み出し、LUT１２２に設定されているLUTの制御値に基づいて輝度レベルを決定し、決定した輝度レベルで当該映像データを表示するよう表示部１２４に当該映像データ及び輝度レベルを送出する。
【００３４】
LUT１２２は、RAM(Random Access Memory)等のメモリであり、読み出された各フレームのフィールド番号の映像データを表示する際に適用するLUTを記憶する機能を有する。尚、LUTは、各映像データが示す各輝度値について、各映像データ表示時の輝度レベル制御用の制御値を対応付けたものである。
LUT設定部１２３は、各LUTNO.に対応するLUTの制御値を記憶する機能と、読み出された映像データに対応する再生時適用パラメータを順次読み出す機能を有する。また、読み出されたオリジナル映像データのAPLを算出し、算出したAPLに応じたLUTNO.のLUTの制御値をLUT１２２に設定する機能と、読み出した映像データのフィールド番号と再生時適用パラメータのフィールド番号とが一致する場合に、再生時適用パラメータのLUTNO.が示すLUTの制御値をLUT１２２に設定する機能を有する。尚、LUT１２２への制御値の設定は、垂直ブランキング期間に行うものとする。
【００３５】
表示部１２４は、PDPや液晶等のディスプレイであり、読み出された各フィールドの映像データを、調整部１２１によって決定された輝度レベルで表示する機能を有する。
＜データ＞
次に、本実施の形態に係る記録再生システム１００に記憶されているテーブルデータについて説明する。
【００３６】
図５(ａ)は、パラメータ設定部１１３に予め記憶されている調整用APLテーブルの構成及びデータを例示している。
調整用APLテーブル５０は、APLレベル５１とLUTNO.５２とを対応付けて記憶している。
APLレベル５１は、APL値を所定値毎に区分することにより定めたAPLのレベルを示しており、当該各レベルに応じて、上述した図４(ａ)のガンマ特性曲線４１〜４３のうち、どの曲線の出力値を出力するように制御するか予め設定されているものとする。
【００３７】
LUTNO.５２は、ガンマ特性曲線４１〜４３の各々で示される出力値が出力されるように設定された制御値を格納するLUTを識別するための識別番号である。
また、図５(ｂ)は、LUT設定部１２３に予め記憶されている調整用LUTの構成及びデータを例示している。
調整用LUT６０は、入力(アドレス)６１とLUTNO.０〜LUTNO.Ｎ６２を対応付けて記憶している。
【００３８】
入力(アドレス)６１は、オリジナル映像データの各輝度信号が入力されるLUT１２２のアドレスを示している。また、LUTNO.０〜LUTNO.Ｎ６２は、各LUTを識別するための識別番号を示しており、LUTNO.０〜LUTNO.Ｎ６２の各々のテーブル値は、LUT１２２内部の入力(アドレス)６１の各アドレスに格納される。
＜動作＞
本実施の形態に係る記録再生システム１００の動作について説明する。
【００３９】
図６は、本実施の形態に係る記録再生システム１００の調整用パラメータ記録処理を示す動作フローである。
以下、同図に従って調整用パラメータ記録処理について説明する。
パラメータ抽出部１１２は、映像蓄積部１１１から映像データを順次フレーム単位に読み出し(ステップＳ１１０)、読み出した映像データの輝度信号をフレーム毎に抽出し、当該輝度信号と当該フレームのフィールド番号とをパラメータ設定部１１３へ送出する(ステップＳ１２０)。
【００４０】
続いて、パラメータ設定部１１３は、ステップＳ１２０で抽出されたフレーム毎の輝度信号に基づいてAPLを算出し、パラメータ設定記録処理を行う(ステップＳ１３０)。
以下、パラメータ設定記録処理について図７を用いて説明する。
尚、調整用パラメータ設定処理前において、パラメータ設定部１１３は、初期LUTNO.としてLUTNO.０をメモリに設定しているものとする。
【００４１】
図６のステップＳ１４１において、パラメータ設定部１１３は、ステップＳ１２０で抽出されたフレーム毎の輝度信号に基づいて算出したAPLレベルの遷移が図５(c)に示す所定パターンの波形と合致するか否か、図５(c)の波形をフレーム毎にずらしながら各々対応する部分を乗算して累積して平均化し、相関部分があるか否か判断する。
ステップＳ１４１において、パラメータ設定部１１３が、APLレベルの遷移が所定パターンと相関があり、合致すると判断した場合には(ステップＳ１４１:Ｙ)、図５(c)に示すAPLminからAPLmaxに遷移したフィールドをAPL上昇フィールドとして特定し、当該フィールドから所定時間経過後のフィールドに着目する(ステップＳ１４２)。
【００４２】
パラメータ設定部１１３は、メモリに格納されているLUTNO.を１加算し(ステップＳ１４３)、メモリ上のLUTNO.を加算結果のLUTNO.に置き換えて記憶し、当該LUTNO.と着目しているフィールドのフィールド番号とを対応づけてパラメータ蓄積部１１４に記録する(ステップＳ１４４)。
続いて、パラメータ設定部１１３は、次のフィールドに着目し(ステップＳ１４５)、当該フィールドが、ステップＳ１４２で特定したＡＰＬ上昇フィールドから一定時間t×ｎ(ｎ=１，２，３・・・)経過後のフィールドか否か判断する(ステップＳ１４６)。
【００４３】
ステップＳ１４６において、パラメータ設定部１１３が、一定時間t×ｎ経過後のフィールドでないと判断した場合には(ステップＳ１４６:Ｎ)、メモリに格納されているLUTNO.を現在着目しているフィールドのフィールド番号と対応づけて、パラメータ蓄積部１１４に記録する(ステップＳ１４７)。
また、ステップＳ１４６において、パラメータ設定部１１３が、一定時間t×ｎ経過後のフィールドであると判断した場合には(ステップＳ１４６:Ｙ)、ステップＳ１４４においてメモリに格納されたLUTNO.に１加算し、メモリ上のLUTNO.に換えて加算結果のLUTNO.をメモリに格納し(ステップＳ１４８)、ステップＳ１４７の処理を行う。
【００４４】
ステップＳ１４７に続いて、パラメータ設定部１１３は、オリジナル映像データのAPLレベルが所定値以上か否か判断する(ステップＳ１４９)。
ステップＳ１４９において、パラメータ設定部１１３が、APLレベルが所定値以上であると判断した場合(ステップＳ１４９:Ｙ)、ステップＳ１４５以下の処理を繰り返し行う。
【００４５】
また、ステップＳ１４９において、パラメータ設定部１１３が、APLレベルが所定値以上でないと判断とした場合(ステップＳ１４９:Ｎ)、パラメータ設定記録処理を終了する。
次に、本実施の形態に係る記録再生システム１００の再生処理について説明する。
図８は、記録再生システム１００の再生処理フローを示している。以下、同図に従って説明する。
【００４６】
ステップＳ２１０において、ユーザの再生指示に応じて、調整部１２１が映像蓄積部１１１から映像データを順次読み出し、各フレームの映像データの輝度信号をLUT設定部１２３に送出し、また読み出した映像データをフィールド毎にLUT１２２に送出する。
LUT設定部１２３は、フレーム毎の輝度信号に基づいてAPLを算出し、パラメータ蓄積部１１４に格納されている再生時適用パラメータを読み出す(ステップＳ２２０)。
【００４７】
LUT設定部１２３は、ステップＳ２２０で読み出された再生時適用パラメータのフィールド番号が、ステップＳ２１０で読み出されたフレームのフィールド番号と一致するか否か判断する(ステップＳ２３０)。
ステップＳ２３０において、LUT設定部１２３が一致すると判断した場合(ステップＳ２３０:Ｙ)、調整用LUT６０を読み出し、ステップＳ２２０で読み出した再生時適用パラメータのLUTNO.が示すLUTのテーブル値を選択し、選択したテーブル値をLUT１２２に書き込む(ステップＳ２４０)。
【００４８】
また、ステップＳ２３０において、LUT設定部１２３が一致しないと判断した場合(ステップＳ２３０:Ｎ)、LUT設定部１２３は、ステップＳ２２０で算出したAPLに応じたLUTNO.のテーブル値をLUT１２２に書き込む(ステップＳ２５０)。
表示部１２４は、LUT１２２に入力された映像データの輝度信号に対するテーブル値を出力し、映像データを表示する(ステップＳ２６０)。
＜実施の形態１の変形例１＞
＜概要＞
上述した実施の形態１では、記録されている映像データに、暗いシーンが一定時間続き(図２のＴ１期間)、その後急激に明るいシーンに変化して一定時間明るいシーンが続き(図２のＴ２期間)、その後、急激に暗いシーンに変化して一定時間暗いシーンが続く区間が含まれている場合(図２のＴ３期間)、急激に明るいシーンに変化した後、明るいシーンが一定時間続くことが予め分かっている。
【００４９】
従って、実施の形態１では、図２に示す様なAPLレベルの遷移パターンにおいて、明るいシーンに変化した時は、輝度変化による映像のインパクトを維持するために、オリジナル映像データの輝度で所定時間表示し、その後、PDPの発熱を抑制し、省電力化を図るために、一定時間おきに徐々に輝度を下げるように輝度調整を行うものとして説明した。
本変形例では、実施の形態１と同様、明るいシーンが一定時間(図２のＴ２期間)続いた後、急激に暗いシーンが続くこと(図２のＴ３期間)が予め分かっている。
【００５０】
そのため、本変形例では、視聴者の眼が明順応し始めた後に暗いシーンに変化した瞬間は、視聴者は暗い映像部分の識別が困難であることを考慮し、暗い映像部分の階調を所定値だけ上げるように輝度を調整するための制御値を設定し、視聴者が暗い部分の映像を見やすいように輝度を調整する。また、視聴者の眼が暗順応し始める前に、オリジナル映像データのAPLレベルに応じた輝度を出力するように制御する。
【００５１】
上述した暗い映像部分の階調を所定値だけ上げる時間は、暗順応時間は明順応時間より長いため少なくとも１０秒以上が望ましい。
以下、上述した本変形例のパラメータ設定記録処理について、実施の形態１と異なる部分について説明する。尚、本変形例における再生処理は、実施の形態１と同様であるため説明を省略する。
【００５２】
図４(ｂ)は、オリジナル映像データのAPLレベルの遷移が図２で示すパターンと一致する場合において、明るいシーンから暗いシーンに急激に変化したＴ３期間に適用するガンマ特性を示している。
LUT設定部１２３は、実施の形態１と同様に、ガンマ特性曲線４４が示す出力値を出力するための制御値を含むLUTを調整用LUT６０に保持しており、パラメータ設定部１１３は、当該LUTのLUTNO.とガンマ特性曲線44に対応するAPLレベルとを調整用APLテーブル５０に保持しているものとする。
【００５３】
また、図５の所定パターンとオリジナル映像データのAPLレベルの遷移が一致する場合において、APLmaxからAPLminに変化した時点から一定時間は、図４(ｃ)の破線４５で示す様に、所定値x以下の入力値に対してはガンマ特性曲線44で示す出力値より大きい出力値を出力するように設定した制御値を含むLUTを、調整用LUT６０に保持しているものとする。
【００５４】
パラメータ設定部１１３は、実施の形態１と同様に、抽出されたフレーム毎の輝度信号に基づいてAPLを算出し、算出したAPLレベルの遷移について所定パターンと合致する部分があるか否か判断する。
また、パラメータ設定部１１３は、映像ストリームのAPLレベルの遷移について所定パターンと一致する部分がある場合に、APLレベルがAPLmaxからAPLminに遷移したフィールド(以下、「APL下降フィールド」と言う。)を特定する。
【００５５】
パラメータ設定部１１３は、当該APL下降フィールドから一定時間経過するまでの各フィールドについては、オリジナル映像ストリームのAPLと調整用APLレベルに基づき、図４(ｂ)の破線４５が示す出力値を出力するための制御値を含むLUTNO.を設定し、当該各フィールド番号と設定したLUTNO.とを再生時適用パラメータとしてパラメータ蓄積部１１４に送出する。
【００５６】
パラメータ蓄積部１１４は、実施の形態１と同様、パラメータ設定部１１３によって送出されたフィールド番号とLUTNO.とを対応付けて記憶する。
＜実施の形態２＞
＜概要＞
本実施の形態に係る記録再生システムは、実施の形態１と同様、記録媒体に一旦記録された映像ストリームの映像データに基づき、当該映像データの再生時に適用するパラメータを設定して記録し、記録したパラメータを用いて映像データを再生するものである。
【００５７】
本実施の形態に係る記録再生システムは、記録部が、インタレースの映像信号を受信して記録した映像ストリームの映像データに基づいて、I/P変換対象となるフィールドの補間対象画素が動画か静止画かを判断し、その判断結果を調整用パラメータとして記録し、再生部が、調整用パラメータで示される判断結果に基づいてI/P変換対象フィールドを補間してフレームを生成し再生する。
【００５８】
ここで、I/P変換を行う際に補間対象となるフィールドの補間対象画素が動画か静止画か判断する動静判断の方法を、従来及び本実施の形態の場合に分けて説明する。
まず、従来の動静判断について図９を用いて説明する。
同図に示すｎ−１〜ｎ＋１の各フィールドは、時間軸において連続するフィールドを示しており、各フィールドの各画素は、各フィールドにおいて同じ位置に配置された画素である。また、同図は、ｎ−１フィールドは既に補間処理がなされており、ｎフィールドの補間対象画素について動静判断を行う場合を示している。
【００５９】
例えば、補間対象画素７４について補間処理を行う場合、補間対象画素７４の上ラインに位置するオリジナル画素７２の画素値と、オリジナル画素７２と同位置のｎ−１フィールドの補間画素７１を比較し、画素値が一致している場合に補間対象画素７４を静止画と判断する。静止画と判断した場合には、ｎ−１フィールドのオリジナル画素７３の画素値を用いて補間対象画素７４を補間する。
【００６０】
また、画素値が一致していない場合には、補間対象７４を動画と判断し、動画と判断した場合には、補間対象画素７４の上下のラインに位置するオリジナル画素７２とオリジナル画素７５の画素値を用いて補間対象画素７４を補間する。
次に、本実施の形態の動静判断について図９を用いて説明する。
上記と同様、ｎフィールドの補間対象画素７４について補間処理を行う場合、補間対象画素７４と同位置のｎ−１フィールドのオリジナル画素７３及びｎ＋１フィールドのオリジナル画素７６の画素値を比較する。
【００６１】
両方の画素値が一致すれば、補間対象画素７４を静止画と判断し、画素値が一致しなければ動画と判断する。尚、動静判断後の補間方法は従来と同じである。
上記の従来の補間方法によると、例えば、ｎ−１フィールドの画素７３及びｎ＋１フィールドの画素７６が動画領域である場合でも、補間対象画素７４にｎ−１フィールドの画素が補間されてしまうことがあり、特に白黒の画像について誤った動静判断に基づいて補間すると、視聴者に強い違和感を与えてしまうという問題がある。
【００６２】
本実施の形態では、上記の問題を考慮し、従来の様にリアルタイムで動静判断を行わないため、動静判断対象となるフィールドの前後フィールドの画素値を抽出して動静判断を行い、確実に動画部分を検出する。
＜構成＞
以下、本実施の形態に係る記録再生システムの構成について説明する。
【００６３】
図１１は、本実施の形態に係る記録再生システム２００の機能構成図を示しており、実施の形態１と同じ構成については実施の形態１と同じ符号を付している。
記録再生システム２００は、各フレームの画素毎の動静判断結果を記録する記録部２１０と、記録部１００に記録された動静判断結果を用いて映像データのI/P変換を行い再生する再生部２２０で構成されている。
【００６４】
各部について、以下詳細に説明するが、実施の形態１と同じ構成については説明を省略する。
記録部２１０は、映像蓄積部１１１、パラメータ抽出部２１２、パラメータ蓄積部２１６を含んで構成されている。
パラメータ抽出部２１２は、ｎ−１フィールドメモリ２１３と、ｎ＋１フィールドメモリ２１４と、ｎフィールド動静判断部２１５とを含んで構成されている。
【００６５】
パラメータ抽出部２１２は、記録されている映像データの全フィールドから順に動静判断対象フィールドを特定し、特定した動静判断対象フィールドの前後のフィールドの映像データを読み出し、読み出した各映像データを各々対応するフィールドメモリに送出する機能を有する。尚、動静判断対象フィールドを、以下「ｎフィールド」とし、ｎフィールドの前後のフィールドを、「ｎ−１フィールド」及び「ｎ＋１フィールド」とする。
【００６６】
ｎ−１フィールドメモリ２１３及びｎ＋１フィールドメモリ２１４は、ＲＡＭ等のメモリであり、パラメータ抽出部２１２によって送出された映像データを記憶する機能を有する。
ｎ−１フィールドメモリ２１３は、読み出されたｎ−１フィールドの映像データを記憶し、ｎ＋１フィールド２１４は、読み出されたｎ＋１フィールドの映像データを記憶する。
【００６７】
ｎフィールド動静判断部２１５は、ｎ−１フィールドメモリ２１３及びｎ＋１フィールドメモリ２１４に記憶されている映像データの各画素値に基づいて、ｎフィールドの補間対象画素について動静判断を行う機能と、補間対象画素の動静判断結果とフィールド番号とをパラメータ蓄積部２１６へ送出する機能を有する。
パラメータ蓄積部２１６は、パラメータ抽出部２１２によって送出された動静判断結果とフィールド番号とを対応づけた動静判断情報を記憶する機能を有する。
【００６８】
再生部２２０は、調整部２２１及び表示部１２４を含んで構成され、調整部２２１は、ｎ−１フィールドメモリ２２２、ｎフィールドメモリ２２３、及びフレーム生成部２２４を含む。
調整部２２１は、ユーザによる映像データの再生指示に応じて記録部２１０からI/P変換対象のフィールド(以下、「ｎフィールド」と言う。)と当該フィールドの前のフィールド(以下、「ｎ−１フィールド」と言う。)の映像データを読み出し、ｎフィールドの映像データをｎフィールドメモリ２２３へ送出し、ｎ−１フィールドの映像データをｎ−１フィールドメモリ２２２に送出する機能を有する。
【００６９】
ｎ−１フィールドメモリ２２２及びｎフィールドメモリ２２３は、ＲＡＭなどのメモリであり、調整部２２１により送出されたフィールドの映像データを記憶する機能を有する。
I/P変換部２２４は、ｎ−１フィールドメモリ２２２及びｎフィールドメモリ２２３の映像データを読み出すと共に、ｎフィールドに対応する動静判断情報を読み出す機能と、読み出した動静判断情報と各映像データに基づいて、ｎフィールドの補間対象画素について補間処理を行い、オリジナルの各画素値と補間対象画素値とを合成してプログレッシブ方式の映像データに変換し、変換後の画素値を表示部１２４へ送出する機能を有する。
【００７０】
＜動作＞
上述した本実施の形態に係る記録再生システムの動作について説明する。
図１１は、本実施の形態に係る記録再生システムの動静判断処理を示す動作フロー図である。以下、同図に従って説明する。
ステップＳ２１０において、パラメータ抽出部２１２は、映像蓄積部１１１に記憶されている映像データから動静判断対象フィールド(ｎフィールド)を特定し、ｎ−１フィールド及びｎ＋１フィールドの映像データを映像蓄積部１１１から読み出し、ｎ−１フィールドメモリ２１３にｎ−１フィールドの映像データを送出し、ｎ＋１フィールドメモリ２１４にｎ＋１フィールドの映像データを送出する。
【００７１】
ｎフィールド動静判断部２１５は、ｎ−１フィールドメモリ２１３及びｎ＋１フィールドメモリ２１４から映像データを読み出し、ｎフィールドの各補間対象画素について、当該補間対象画素と同位置のｎ−１フィールド及びｎ＋１フィールドの画素値を比較する(ステップＳ２１１)。
続いて、ｎフィールド動静判断部２１５は、ステップＳ２１１で比較した画素値が一致しているか否か判断する(ステップＳ２１２)。
【００７２】
ステップＳ２１２において、ｎフィールド動静判断部２１５が、画素値が一致していると判断した場合(ステップＳ２１２:Ｙ)、ｎフィールド動静判断部２１５は、当該補間対象画素を動画と判断し、その判断結果とｎフィールドのフィールド番号をパラメータ蓄積部２１６へ送出する。
また、ステップＳ２１２において、ｎフィールド動静判断部２１５が、画素値が一致していないと判断した場合(ステップＳ２１２:Ｎ)、ｎフィールド動静判断部２１５は、当該補間対象画素を静止画と判断し、その判断結果とｎフィールドのフィールド番号をパラメータ蓄積部２１６へ送出する。
【００７３】
パラメータ蓄積部２１６は、ステップＳ２１３及びステップＳ２１４において送出された動静判断結果とフィールド番号を対応づけて記憶する(ステップＳ２１５)。
次に、本実施の形態に係る記録再生システムの再生処理について説明する。
図１２は、本実施の形態に係る記録再生システム２００の再生処理を示す動作フローである。以下、同図に従って説明する。
【００７４】
ステップＳ２２０において、調整部２２１は、ユーザの再生指示に応じて、映像蓄積部１１１からI/P変換対象となるｎフィールドを特定し、ｎ−１フィールド及びｎフィールドの映像データを映像蓄積部１１１から読み出し、ｎ−１フィールドメモリ２１３にｎ−１フィールドの映像データを送出し、ｎフィールドメモリ２１４にｎフィールドの映像データを送出する。
【００７５】
I/P変換部２２４は、ｎ−１フィールドメモリ２２２及びｎフィールドメモリ２２３から各フィールドの画素値を読み出すと共に、パラメータ蓄積部２１６からｎフィールドの動静判断情報を読み出す(ステップＳ２２１)。
続いて、I/P変換部２２４は、ｎフィールドの各補間対象画素と同位置の動静判断情報で示される画素の動静判断結果を参照し、当該画素が静止画か否か判断する(ステップＳ２２２)。
【００７６】
ステップＳ２２２において、I/P変換部２２４が、当該画素が静止画であると判断した場合(ステップＳ２２２:Ｙ)、ｎフィールドの当該補間対象画素と同位置のｎ−１フィールドの画素値を用いて補間する(ステップＳ２２３)。
続いて、I/P変換部２２４は、ステップＳ２２３で補間した補間対象画素の画素値と補間前の各画素値を合成してプログレッシブ方式の映像データを生成し、表示部１２４に変換後の映像データを出力する(ステップＳ２２５)。
【００７７】
また、ステップＳ２２２において、I/P変換部２２４が、当該画素が静止画でないと判断した場合(ステップＳ２２２:Ｎ)、ｎフィールドの当該補間対象画素の上下ラインの画素値を用いて補間し(ステップＳ２２４)、ステップＳ２２５の処理を行う。
＜実施の形態３＞
＜概要＞
本実施の形態に係る記録再生システムは、記録部が、上述した実施の形態２の動静判断結果を用いて、記録した映像ストリームの映像データからブロックノイズが発生しているマクロブロックを含む特定画素ブロックを検出し、検出したフレームの特定画素ブロックを示すブロックノイズ情報を調整用パラメータとして記録する。再生部は、記録されている映像ストリームを再生する場合に、フレーム毎にI/P変換した後、ブロックノイズ情報で示されるフレームの特定画素ブロックの映像データについては、ＬＰＦ(LowPass Filter)をONに制御して高周波成分を除去し、ブロックノイズが発生していない特定画素ブロックについては、ＬＰＦをOFFに制御する。
【００７８】
ここで、本実施の形態におけるブロックノイズの検出について説明する。
例えば、ｎ−１フィールドとｎ＋１フィールドが奇数ライン、動静判断対象となるｎフィールドが偶数ラインの画素データを保持している場合、動静判断部２１５は、偶数ラインに奇数ラインの動静判断結果を適用し、ｎフィールドの動画領域を検出する。
また、ｎフィールドの映像データの輝度信号について特定画素単位に高速フーリエ変換(ＦＦＴ)を行い、ｎフィールドの映像データの空間周波数を算出する。
【００７９】
図１４(ａ)は、ブロックノイズが無い場合のＦＦＴ結果を示しており、同図(ｂ)は、ブロックノイズが有る場合のＦＦＴ結果を示している。
ブロックノイズが無い場合には、同図(ａ)に示す様に、空間周波数が高周波になるほど強度は低下傾向になり、ブロックノイズが有る場合には、同図(ｂ)の９２で示す様に、１６画素相当の空間周波数T/１６の強度が高くなり、また、同図(ｂ)の９３で示す様に、T/１６以降の空間周波数の強度が極端に少なくなる傾向がある。
【００８０】
従って、本実施の形態では、記録部が、フレームの動画領域のＦＦＴ結果が同図(ｂ)で示す様な結果である場合にブロックノイズが有ることを検出し、そのＦＦＴ対象となった特定画素のブロックを特定してブロックノイズ情報として記録する。
＜構成＞
以下、上述した本実施の形態に係る記録再生システムの構成について説明する。
【００８１】
図１３は、本実施の形態に係る記録再生システム３００の機能構成図である。
記録再生システム３００は、上述した記録部３１０及び再生部３２０とで構成されている。以下、各部について説明するが、上述した実施の形態１及び２と同じ構成については同じ符号を付しており、同じ構成については説明を省略する。
記録部３１０は、映像蓄積部１１１、パラメータ抽出部３１２、及びパラメータ蓄積部３１６を含んで構成されている。
【００８２】
パラメータ抽出部３１２は、実施の形態２と同様、ｎ−１フィールドメモリ２１３及びｎ＋１フィールドメモリ２１４、動静判断部２１５を含み、更に、ｎフィールドメモリ３１３と、ＦＦＴ処理部３１４と、ブロックノイズ検出部３１５を含んで構成されている。
ｎフィールドメモリ３１３は、ＲＡＭ等のメモリであり、動静判断部２１５により動静判断対象フィールドとして特定されたｎフィールドの映像データを記憶する機能を有する。
【００８３】
ＦＦＴ処理部３１４は、ｎフィールドメモリ３１３に記憶されている映像データの輝度信号について、例えば６４画素×６４画素などの特定画素のブロック単位に高速フーリエ変換を行い、空間周波数の強度をＦＦＴ処理結果としてブロックノイズ検出部３１５に送出する機能を有する。
ブロックノイズ検出部３１５は、ＦＦＴ処理結果により示される空間周波数T/16の強度が所定値以上であるか否かを判断する。また、空間周波数T/16の強度が所定値以上である場合に、動静判断部２１５によって送出された動静判断結果に基づいて、そのＦＦＴ処理対象となったブロックが動画領域か否か判断してブロックノイズの有無を検出する機能と、ブロックノイズが発生しているＦＦＴ処理対象となった特定画素ブロックを示すブロックノイズ情報をブロックノイズ情報蓄積部３１８へ送出する機能を有する。
＜動作＞
本実施の形態に係る記録再生システム３００の動作について説明する。
【００８４】
図１５は、記録再生システム３００の記録部３１０の調整用パラメータ記録処理を示す動作フロー図である。
以下、同図に従って記録部３１０の動作を説明する。
ステップＳ３１０において、動静判断部２１５は、上述した実施の形態２と同様、動静判断対象となるｎフィールドを特定し、ｎフィールドとその前後のフィールド(ｎ−１フィールド、ｎ＋１フィールド)の映像データを読出し、各フィールドに対応するフィールドメモリに読み出した映像データを送出する。また、図１１のステップＳ２１１からステップＳ２１４までの処理を行い、動静判断結果を動静判断情報蓄積部３１７とブロックノイズ検出部３１５へ送出する。
【００８５】
ＦＦＴ処理部３１４は、ｎフィールドメモリ３１３に格納されている映像データの輝度信号について、例えば６４画素×６４画素の特定画素ブロック単位にＦＦＴ処理を行い、ＦＦＴ処理結果をブロックノイズ検出部３１５に送出する(ステップＳ３２０)。
ブロックノイズ検出部３１５は、ステップＳ３１０で動静判断部２１５によって送出されたｎフィールドの動静判断結果と、ステップＳ３２０でＦＦＴ処理部３１４によって送出されたＦＦＴ処理結果とに基づいて、ｎフィールドの動画領域におけるブロックノイズの有無の検出を行う(ステップＳ３３０)。  尚、ブロックノイズの有無の検出動作については後述するものとする。
【００８６】
ブロックノイズ検出部３１５は、ステップＳ３３０によって検出されたブロックノイズの発生フィールドの特定画素ブロックとフィールド番号と対応づけたブロックノイズ情報をブロックノイズ情報蓄積部３１８に送出する。
次に、記録再生システム３００の再生部３２０の再生処理動作について図１７を用いて説明する。
【００８７】
ステップＳ３５０において、I/P変換部３２２は、実施の形態２と同様、図１２のステップＳ２２０からステップＳ２２４の処理を行い、補間した画素とオリジナル画素とを合成したフレームの映像データをＬＰＦ３２３に送出する。
ＬＰＦ制御部３２４は、ブロックノイズ情報蓄積部３１８からブロックノイズ情報を読出し、I/P変換部３２２に入力された映像データのフレームが、ブロックノイズ情報で示されるフィールド番号のフレームか否か判断する(ステップＳ３７０)。
【００８８】
ステップＳ３７０において、ＬＰＦ制御部３２４が、当該フレームがブロックノイズ情報で示すフィールド番号のフレームであると判断した場合(ステップＳ３７０:Ｙ)、ブロックノイズ情報で示される特定画素ブロックの映像データについて高周波成分を除去するようＬＰＦ３２３をONに制御し、表示部１２４は、ＬＰＦ３２３で高周波成分を除去された映像データを表示する(ステップＳ３８０)。
【００８９】
また、ステップＳ３７０において、ＬＰＦ制御部３２４が、当該フレームがブロックノイズ情報で示すフィールド番号のフレームでないと判断した場合(ステップＳ３７０:Ｙ)、ＬＰＦ３２３をOFFにするよう制御し、表示部１２４は、I/P変換されたフレームの映像データを表示する(ステップＳ３９０)。
ここで、上述したステップＳ３３０のブロックノイズの有無を検出する動作について説明する。
【００９０】
図１６は、ブロックノイズ検出処理の動作フローを示している。
同図のステップＳ３３１において、ブロックノイズ検出部３１５は、動静判断結果に基づいて特定画素ブロックに動画領域が所定数以上あるか否か判断する。
ステップＳ３３１において、ブロックノイズ検出部３１５が所定数以上の動画領域があると判断した場合(ステップＳ３３１:Ｙ)、当該ブロックのＦＦＴ処理結果に基づいて、マクロブロックの空間周波数の強度が所定値以上であるか否か判断する(ステップＳ３３２)。
【００９１】
ステップＳ３３２において、ブロックノイズ検出部３１５が、マクロブロックの空間周波数の強度が所定値以上であると判断した場合(ステップＳ３３２:Ｙ)、当該ブロックにブロックノイズが有ると判断する(ステップＳ３３３)。
また、ステップＳ３３２において、ブロックノイズ検出部３１５が、マクロブロックの空間周波数の強度が所定値以上でないと判断した場合(ステップＳ３３２:Ｎ)、当該ブロックにブロックノイズが無いと判断する(ステップＳ３３４)。
【００９２】
＜まとめ＞
以上、本発明に係る記録再生システムを実施の形態１から実施の形態３を用いて説明した。
本発明に係る記録再生システムは、記録されている映像ストリームを再生する前に、当該映像ストリームの各時刻における各映像データについて、各時刻を挟む前後所定時間内の映像データ又は各時刻より所定時間経過後までの映像データから、映像調整のための要素を抽出して調整用パラメータを設定し、当該調整用パラメータと当該映像データの再生時刻示す時間情報とを対応づけて記録することができる。
【００９３】
このように、映像ストリームの再生前に予め映像データを解析して、画像調整の目的に応じた調整用パラメータを設定し、当該パラメータを再生時に適用する時間情報と共に記録することができるので、再生中の映像データに基づいて画像調整を行う場合に比べて画像調整の精度を向上させることができる。
また、サーバ蓄積型放送等の映像コンテンツの映像データをサーバ等の記録媒体に逐次送信するサービスの場合、ユーザが映像コンテンツの再生を行う前に、逐次送信された映像データについて調整用パラメータを設定することができ、ユーザは再生時に好適な画質等で映像コンテンツを視聴することができる。
【００９４】
＜補足＞
以上、本発明に係る記録再生システムについて実施の形態に基づいて説明したが、以下のように変形することもでき、本発明は上述の実施の形態で示した記録再生システムに限られないことは勿論である。
(１)上述した実施の形態１では、映像データを再生してPDPに表示する場合について説明したが、CRT(Cathode Ray Tube)ディスプレイやLCD(LiquidCrystal Display)であってもよい。
【００９５】
例えばCRTの場合、ディスプレイの前面フェースプレートガラスの発熱を抑制するために、PDPと同様、図３の破線３１で示す輝度の制御が行われている。本発明では、映像データのAPLレベルの遷移について所定パターン(図５(ｃ))と一致する部分を検出することができるので、明るいシーンの前に暗いシーンが一定時間続いていることが分かっており、この間は発熱していないことが分かる。
【００９６】
そのため、実施の形態１と同様、所定パターンと一致する部分を検出した場合、図２の破線２１で示す様に一定時間おきにAPLレベルを徐々に下げるように制御する。この場合、実施の形態１と同様に、CRTに適応する各APLレベルの制御値を含むLUTを予めLUT設定部に記憶しているものとする。
また、LCDの場合は、図３の破線３０で示す様に、バックライトの輝度を一定にして液晶シャッターで点灯を抑制しているので発熱と輝度に関係がなく、APLレベルに応じた輝度の制御は行わない。しかし、LCDの場合、明るいシーンに変化後０．２〜０．４秒経過すると輝度変化による刺激が低下するため、それ以上高輝度で表示してもインパクト感は変わらず、かえって視覚疲労の原因になる。
【００９７】
従って、LCDの場合においても、図２の破線２１で示す様に一定時間おきにAPLレベルを徐々に下げるように制御することが望ましい。この場合も実施の形態１と同様に、LCDに応じた輝度制御のための制御値を予めLUTに記憶し、APL上昇フィールドから例えば０．４秒以後のフィールドについては、一定時間毎に輝度が下がるようにLUTNO.を設定する。
(２)上述した実施の形態１では、PDPに対応するLUTをLUT設定部１２３に予め記憶しておくものとして説明したが、上記(１)で説明したCRTディスプレイやLCDに各々対応するLUTも予め記憶しておいてもよい。
【００９８】
この場合、ユーザがディスプレイの種別を入力する、再生装置側からディスプレイの種別を送出するなどにより、記録装置が、ディスプレイの種別を取得することができるので、取得したディスプレイの種別に対応するLUTを設定することができ、ディスプレイに応じて好適な輝度調整を行うことができる。
(３)また、上述した実施の形態１では、映像データを視聴するユーザの年齢等に関係なく、所定パターンを検出した場合に約１０秒程度の間、一定時間おきにAPLレベルを徐々に下げるよう調整するものとして説明したが、視聴するユーザの年齢に応じてAPLレベルを徐々に下げるように調整する時間を変化させてもよい。  例えば、高齢者の場合には順応に時間を要するため、徐々に下げる時間を長めに設定する。
【００９９】
この場合、上記(２)のディスプレイの種別と同様に、ユーザの年齢に応じて設定されたAPLレベル毎のLUTをLUT設定部１２３に予め記憶しておき、年齢毎のLUTのLUTNO.をフィールド番号と共にパラメータ蓄積部１１４に記憶する。
映像データの再生時には、ユーザが年齢の情報を入力することにより、再生装置が年齢情報を取得し、取得した年齢情報に対応するLUTをパラメータ蓄積部１１４から選択してLUT１２２に選択したLUTを設定する。
(４)また、上述した実施の形態１では、記録部によって設定され記録されたLUTNO.に基づいて再生部がLUTNO.に対応するLUTをLUT１２２に設定し、輝度の調整を行うものとして説明したが、記録部が所定パターン(図５(ｃ))と合致する部分を検出した場合、APL上昇フィールドを示すフィールド番号と輝度レベルを徐々に下げるためのパラメータを記録し、再生部が、記録されたフィールド番号の映像データを再生する際、記録されたパラメータに基づいてLUTを選択してLUT１２２に設定することとしてもよいし、記録されたパラメータに基づいて輝度値を算出してもよい。
(５)また、上述した実施の形態１では、オリジナル映像データの遷移が所定パターン(図５(ｃ))と合致する場合に、APL上昇フィールドから一定時間おきに輝度レベルを徐々に下げるように輝度調整を行うものとして説明したが、APLレベルが上昇した後、APLレベル上昇時の輝度レベルより下げるように輝度の制御を行えばこれに限らない。
(６)上述した実施の形態２では、ｎフィールド動静判断部２１５は、各補間対象画素の動静判断結果を調整用パラメータとしてパラメータ蓄積部２１６へ送出し、パラメータ蓄積部２１６に記録するものとして説明したが、ｎフィールド動静判断部２１５は、補間対象画素のうち、動画と判断された補間対象画素の判断結果のみをパラメータ蓄積部２１６に送出することとしてもよい。これにより、パラメータ蓄積部２１６の記録領域を節約することができる。
【０１００】
また、実施の形態２では、ｎフィールド動静判断部２１５は、フィールドの全補間対象画素について動静判断を行うものとして説明したが、全補間対象画素のうち特定した補間対象画素についてのみ動静判断を行い、特定した補間対象画素の動静判断結果を用いて、他の補間対象画素に適用してもよい。これにより、動静判断を行うための回路規模を減少させることができる。
(７)また、上述の実施の形態２では、動静判断対象となるｎフィールドを基準とする前後のフィールド(ｎ−１フィールド及びｎ＋１フィールド )の画素値を用いて動静判断を行うものとして説明したが、更に、ｎフィールドを基準に前後２フィールド(ｎ−２フィールド及びｎ＋２フィールド)の画素値を用いて動静判断を行うこととしてもよい。
【０１０１】
例えば、動画か静止画かの判断において動画と判断することを優先する場合には、補間対象画素位置の上下のラインに位置するｎ−２及びｎ＋２フィールドのオリジナル画素について動静判断を行い、実施の形態２と同様にｎ−１及びｎ＋１フィールドについて動静判断を行う。前後２フィールドの動静判断結果及び前後フィールドの動静判断結果が共に静止画である場合、その補間対象画素を静止画と判断する。
(８)上述した実施の形態では、調整用パラメータを映像データが蓄積されている映像蓄積部１１１とは別にパラメータ蓄積部２１６に記録するものとして説明したが、電子透かし技術を用いて映像データと共に記録することとしてもよい。
【０１０２】
例えば、ＭＰＥＧの映像データについての調整用パラメータと時間情報を動きベクトルに埋め込む場合、各調整用パラメータと時間情報のビット列の１ビットを抽出し、そのビットの値（０または１）によって、１画素単位の動きベクトルが指す参照画素の周囲の画素からもっとも原画素に近い画素を動きベクトルの探索範囲に基づいて求め、それを指すベクトルを新たな動きベクトルとし、全ての調整用パラメータ及び時間情報を埋め込み後に再度圧縮して記録する。
【０１０３】
このように映像コンテンツに調整用パラメータを埋め込むことにより、再生装置は、映像データの読出しと共に調整用パラメータを読み出すことができるので、読み出した調整用パラメータに基づいて輝度調整等の画像調整を行うことができる。
【産業上の利用可能性】
【０１０４】
本発明に係る記録再生システムは、映像コンテンツを記録して再生するハードディスクレコーダやDVD(Digital Versatile Disc)レコーダ、また、DLNA（DigitalLiving Network Alliance）に準拠したネットワーク映像装置等に利用され得る。
【図面の簡単な説明】
【０１０５】
【図１】実施の形態１に係る記録再生システムの機能構成図である。
【図２】実施の形態１における映像データのAPLレベルの遷移パターンと輝度調整を示す図である。
【図３】実施の形態１におけるディスプレイの輝度調整の特性を示す図である。
【図４】(ａ)は実施の形態１における輝度調整のガンマ特性を示す図である。(ｂ)は実施の形態１の変形例における輝度調整のガンマ特性を示す図である。
【図５】(ａ)は実施の形態１で用いる調整用APLテーブルの構成及びデータ例を示す図である。(ｂ)は実施の形態１で用いる調整用LUTの構成及びデータ例を示す図である。(ｃ)は実施の形態１の所定パターンの波形を示す図である。
【図６】実施の形態１における調整用パラメータ記録処理の動作フロー図である。
【図７】実施の形態１におけるパラメータ設定記録処理の動作フロー図である。
【図８】実施の形態１における再生処理の動作フロー図である。
【図９】I/P変換時に画素を補間するための動画か静止画かを判断する方法を説明するための図である。
【図１０】実施の形態２に係る記録再生システムの機能構成図である。
【図１１】実施の形態２における動静判断処理を示す動作フロー図である。
【図１２】実施の形態２における再生処理を示す動作フロー図である。
【図１３】実施の形態３に係る記録再生システムの機能構成図である。
【図１４】(ａ)はブロックノイズが無い場合のＦＦＴ処理後の周波数スペクトルを示す図である。(ｂ)はブロックノイズが有る場合のＦＦＴ処理後の周波数スペクトルを示す図である。
【図１５】実施の形態３における調整用パラメータ記録処理を示す動作フロー図である。
【図１６】実施の形態３におけるブロックノイズ検出処理を示す動作フロー図である。
【図１７】実施の形態３における再生処理を示す動作フロー図である。
【図１８】暗画面から明画面、明画面から暗画面への画面の切り替わりを見た人間の瞳径反応を示すグラフである。
【符号の説明】
【０１０６】
１００、２００、３００  記録再生システム
１１０、２１０、３１０  記録部
１１１  映像蓄積部
１１２、２１２、３１２  パラメータ抽出部
１１３  パラメータ設定部
１１４、２１６、３１６  パラメータ蓄積部
１２０、２２０、３２０  再生部
１２１、２２１、３２１  調整部
１２２  ＬＵＴ
１２３  ＬＵＴ設定部
１２４  表示部
２１３、２２２  ｎ−１フィールドメモリ
２１４  ｎ＋１フィールドメモリ
２１５  ｎフィールド動静判断部
２２３、３１３  ｎフィールドメモリ
２２４、３２２  I/P変換部
３１４  ＦＦＴ処理部
３１５  ブロックノイズ検出部
３１７  動静判断情報蓄積部
３１８  ブロックノイズ情報蓄積部
３２３  ＬＰＦ
３２４  ＬＰＦ制御部
【手続補正３】
【補正対象書類名】図面
【補正対象項目名】全図
【補正方法】変更
【補正の内容】
【図１】
2008007745.tif 000021
【図２】
2008007745.tif 000022
【図３】
2008007745.tif 000023
【図４】
2008007745.tif 000024
【図５】
2008007745.tif 000025
【図６】
2008007745.tif 000026
【図７】
2008007745.tif 000027
【図８】
2008007745.tif 000028
【図９】
2008007745.tif 000029
【図１０】
2008007745.tif 000030
【図１１】
2008007745.tif 000031
【図１２】
2008007745.tif 000032
【図１３】
2008007745.tif 000033
【図１４】
2008007745.tif 000034
【図１５】
2008007745.tif 000035
【図１６】
2008007745.tif 000036
【図１７】
2008007745.tif 000037
【図１８】
2008007745.tif 000038
【国際調査報告】
2008007745.tif 000039
2008007745.tif 000040
2008007745.tif 000041
2008007745.tif 000042