(57)【特許請求の範囲】
【請求項１】
映像コンテンツの色温度をユーザの好みの色温度に変換するシステムにおいて、
入力映像コンテンツを所定の色温度記述フォーマットに従って時分割し、時分割区間情報を生成し、そして各々の時分割区間での色温度を推定し、その推定色温度を第１メタデータとして記録する映像色温度記録部と、
前記時分割区間毎にユーザの好みの色温度を決定し、前記ユーザの好みの色温度を第２メタデータとして記録し、出力する色温度管理部と、
前記第２メタデータの前記ユーザの好みの色温度に基づき、前記第１メタデータの前記推定色温度を、前記ユーザの好みの色温度に変換する色温度調整部と、を備えて構成されることを特徴とする色温度変換システム。
【請求項２】
前記映像色温度記録部は、
前記入力映像コンテンツを前記色温度記述フォーマットに従って時分割し、各々の時分割区間での代表色温度を推定する色温度推定部と、
前記色温度推定部から入力された前記入力映像コンテンツの時分割区間情報、及び、各々の時分割区間での前記推定色温度を所定のフォーマットに従って記録するメタデータ生成部と、
を備えて構成されることを特徴とする請求項１に記載の色温度変換システム。
【請求項３】
前記色温度推定部は、
時分割された前記入力映像コンテンツの各々の時分割区間での所定数のフレームの色温度を測定し、測定された前記色温度の平均値を各々の時分割区間での代表色温度として推定することを特徴とする請求項２に記載の色温度変換システム。
【請求項４】
前記色温度記述フォーマットに基づく前記映像コンテンツの時分割は、
前記入力映像コンテンツの各々のフレーム単位、
同じ場面を表わす時間的に連続した複数のフレームからなる同一場面単位、及び
前記入力映像コンテンツの所定の範囲内で均一な色温度をもつ複数のフレームからなる均一色温度場面単位、
のうち何れか１つの単位にて行われることを特徴とする請求項２に記載の色温度変換システム。
【請求項５】
前記色温度管理部は、
各々の時分割区間での前記推定色温度及び前記ユーザの好みの色温度からなる色温度対及び前記入力映像コンテンツの識別子を記録したデータベースを含み、前記データベースから抽出された前記色温度対及び前記識別子を用いて、各々の時分割区間での前記ユーザの好みの色温度を決定し、前記ユーザの好みの色温度を第２メタデータとして記録し、出力することを特徴とする請求項１に記載の色温度変換システム。
【請求項６】
前記色温度管理部は、
ユーザが自分の好みの色温度を入力し、前記ユーザの好みの色温度、を決定する方法と、
前記色温度調整部から前記入力映像コンテンツの前記識別子を入力され、前記入力映像コンテンツの前記識別子と同じ分類に属する識別子をもつ映像コンテンツについて前記ユーザの好みの色温度として選択された色温度を前記データベースから抽出し、前記入力映像コンテンツについての前記ユーザの好みの色温度として決定する方法と、
前記色温度調整部から前記入力映像コンテンツの各々の時分割区間での前記推定色温度を入力され、前記データベースに記録された前記色温度対のうち前記入力映像コンテンツの前記推定色温度に類似した推定色温度をもつ色温度対のユーザの好みの色温度を、前記入力映像コンテンツについての前記ユーザの好みの色温度として決定する方法と、
のうち何れか１つの方法を用いて前記ユーザの好みの色温度を決定することを特徴とする請求項５に記載の色温度変換システム。
【請求項７】
前記映像色温度記録部は、
前記入力映像コンテンツを前記色温度記述フォーマットに従って時分割し、各々の時分割区間での前記代表色温度を推定する色温度推定部と、
前記色温度推定部から入力された前記入力映像コンテンツの時分割区間情報、及び、各々の時分割区間での前記推定色温度を所定のフォーマットに従って記録するメタデータ生成部と、
を備えて構成されることを特徴とする請求項５に記載の色温度変換システム。
【請求項８】
前記色温度調整部は、
入力された前記第１メタデータを解析して、前記入力映像コンテンツの時分割区間情報及び各々の時分割区間での前記推定色温度を前記色温度管理部に出力し、前記第２メタデータを解析して、各々の時分割区間での前記ユーザの好みの色温度を出力するメタデータ解析部と、
前記入力映像コンテンツを入力し、前記時分割区間情報、各々の時分割区間での前記推定色温度及び各々の時分割区間での前記ユーザの好みの色温度を前記メタデータ解析部から入力し、さらに各々の時分割区間での前記入力映像コンテンツの前記推定色温度を前記ユーザの好みの温度に変換する色温度変換部と、
を備えて構成されることを特徴とする請求項１に記載の色温度変換システム。
【請求項９】
前記色温度記述フォーマットに基づく前記映像コンテンツの時分割は、
前記入力映像コンテンツの各々のフレーム単位、
同じ場面を表わす時間的に連続した複数のフレームからなる同一場面単位、及び、
前記入力映像コンテンツ内の所定の範囲内の均一な色温度をもつ複数のフレームからなる均一色温度場面単位、
のうち何れか１つの単位にて行われることを特徴とする請求項１に記載の色温度変換システム。
【請求項１０】
映像コンテンツの色温度をユーザの好みの色温度に変換する方法において、
（ａ）入力映像コンテンツを所定の色温度記述フォーマットに従って時分割し、時分割区間情報を生成し、そして各々の時分割区間での色温度を推定する段階と、
（ｂ）前記段階で推定される推定色温度を前記時分割区間情報と共に第１メタデータとして記録する段階と、
（ｃ）前記第１メタデータを解析して得られる前記推定色温度及び前記時分割区間情報に基づき、各々の時分割区間での前記ユーザの好みの色温度を決定し、前記時分割区間情報及び各々の時分割区間での前記ユーザの好みの色温度を第２メタデータとして記録する段階と、
（ｄ）前記第２メタデータを解析し、前記入力映像コンテンツの各々の時分割区間での前記推定色温度を、各々の時分割区間での前記ユーザの好みの色温度に変換する段階と、
を備えて構成されることを特徴とする色温度変換方法。
【請求項１１】
前記段階（ｃ）は、
各々の時分割区間での前記推定色温度及び前記ユーザの好みの色温度からなる前記色温度対及び前記入力映像コンテンツの識別子をデータベースに記録する段階を備えて構成されることを特徴とする請求項１０に記載の色温度変換方法。
【請求項１２】
前記段階（ａ）は、
前記入力映像コンテンツの各々のフレーム単位、
同じ場面を表わす時間的に連続した複数のフレームからなる同一場面単位、及び
前記入力映像コンテンツの所定の範囲内で均一な色温度をもつ複数のフレームからなる均一色温度場面単位、
のうち何れか１つの単位に前記入力映像コンテンツを時分割することを特徴とする請求項１０に記載の色温度変換方法。
【請求項１３】
前記段階（ａ）は、
時分割された前記入力映像コンテンツの各々の時分割区間での所定数のフレームの色温度を測定し、測定された前記色温度値の平均値を各々の時分割区間での代表色温度として推定することを特徴とする請求項１０に記載の色温度変換方法。
【請求項１４】
前記段階（ｃ）は、
ユーザが自分の好みの色温度を入力し、ユーザの好みの色温度、を決定する方法と、
前記色温度調整部から前記入力映像コンテンツの前記識別子を入力され、前記入力映像コンテンツの前記識別子と同じ分類に属する識別子をもつ映像コンテンツについて前記ユーザの好みの色温度として選択された色温度を前記データベースから抽出し、前記入力映像コンテンツについて前記ユーザの好みの色温度として決定する方法と、
前記色温度調整部から前記入力映像コンテンツの各々の時分割区間での前記推定色温度を入力され、前記データベースに記録された前記色温度対のうち前記入力映像コンテンツの前記推定色温度に類似した推定色温度をもつ色温度対のユーザの好みの色温度を、前記入力映像コンテンツについての前記ユーザの好みの色温度として決定する方法と、
のうち何れか１つの方法を用いて前記ユーザの好みの色温度を決定することを特徴とする請求項１０に記載の色温度変換方法。
【請求項１５】
請求項１０〜請求項１４のうち何れか１項に記載の色温度変換方法をコンピュータで実行可能なプログラムコードで記録した記録媒体。
【発明の詳細な説明】
【０００１】
【発明の属する技術分野】
本発明は、映像コンテンツの色温度をユーザの好みの色温度に基づいて変換する方法及びそのシステムに係り、特に、映像コンテンツの内容記述メタデータを用いた色温度変換方法及びそのシステムに関する。
【０００２】
【従来の技術】
光源の色温度は、ＣＩＥ  １９６０  ＵＣＳ色度座標において、前記光源と色度が最も近いプランクの輻射に基づく温度として定義される。映像の色温度は、映像の照度成分を評価することにより計算できる。色温度は、人間が映像について感じる暖かさ及び冷たさを定量化するのに用いられる。
【０００３】
一般に、色温度の高い映像は、全体として青い色を帯び、色温度の低い映像は、全体として赤い色を帯びるが、各個人の好みの色温度は異なる。
【０００４】
これまでは、映像の色温度をユーザの好みの色温度に変換するために、テレビジョンやモニタに色相やレッド、グリーン、ブルー（ＲＧＢ）の量を変えうる調整回路を設けることにより、ユーザが、映像または場面の色温度を自分の好みの色温度に調節できるようにしている（特許文献１〜３参照）。
【０００５】
しかしながら、ユーザが、様々なコンテンツの場面を含む動画を見るたびに、色温度を調節することは、非常に不便である。また、このようにして色温度を変える方法には、変換された映像がまるで特定の色フィルタを通したかのような感じを与える傾向があり、再生される映像が不自然に見えるという問題がある。
【０００６】
色温度を変換する他の方法として、色度感知装置を取り付けて表示装置の周りの明るさ、色などを感知し、表示装置の色温度を自動的に変換する方法が開示されている（特許文献４参照）。この方法は、映像そのものの特性とは無関係に周りの環境に応じて色温度を変換するため、周辺環境に依存する視聴者の気持ちの調節には向いているものの、映像内容の色温度特性に基づく色温度変換とは無関係である。一般に、テレビジョンまたはモニタなどの映像表示装置を視聴する環境は、あまり変わらずに一定であるのに対し、映像コンテンツは頻繁に変わるため、個人毎に好みの色温度があることを考慮に入れて、映像コンテンツの変化に応じて色温度を変える必要がある。
【０００７】
このような必要に応えるため、映像から色温度（照明色）を推定する方法が開示され（特許文献５〜７参照）、また、推定された色温度を用いて映像の色温度をユーザの好みの色温度に同時変換する方法も開示されている（特許文献８参照）。
【０００８】
しかしながら、これらの方法は各画素別に行列の掛け算による演算を行う色温度推定プロセスを伴う。従って、これらの方法をユーザの端末に適用する場合には、行列演算によるかなりの計算負荷が生じるため、映像表示性能が低下する、あるいは、映像表示性能向上のためのコストが増加するという問題があった。
【０００９】
本発明に関係のある従来技術としては、前記した特許文献１〜８の他に、特許文献９〜１５があり、ここではその詳細について説明せず、後記する発明の実施の形態において、適宜参照して説明する。
【００１０】
【特許文献１】
米国特許第４,５６２,４６０号公報
【特許文献２】
米国特許第４,６３３,２９９号公報
【特許文献３】
米国特許第４,７８８,５８６号公報
【特許文献４】
米国特許第６,１７２,７１９号公報
【特許文献５】
米国特許第４,６８５,０７１号公報
【特許文献６】
米国特許第５,４９５,４２８号公報
【特許文献７】
大韓民国特許出願第１９９８−５３１１９号公報
【特許文献８】
大韓民国特許出願第１９９９−５０５９６号公報
【特許文献９】
米国特許第４,６８５,０７１号公報
【特許文献１０】
米国特許第５,４９５,４２８号公報
【特許文献１１】
大韓民国特許出願第１９９８−５３１１９号公報
【特許文献１２】
大韓民国特許出願第１９９９−５０５９６号公報
【特許文献１３】
大韓民国特許出願第１９９９−５０５９６号公報
【特許文献１４】
大韓民国特許出願第２００１−７３２８８号公報
【特許文献１５】
大韓民国特許出願第１９９９−５０５９６号公報
【００１１】
【発明が解決しようとする課題】
そこで、本発明は、前記事情に鑑み、映像コンテンツの色温度を所定の色温度に基づいて変換する方法及びそのシステムに係り、特に、映像コンテンツの内容記述メタデータを用いた色温度変換方法及びそのシステムを提供することを目的とする。
【００１２】
【課題を解決するための手段】
本発明は、前記目的を達成するために創案されたものであり、まず、請求項１に記載の色温度変換システムは、映像コンテンツの色温度をユーザの好みの色温度に変換するシステムにおいて、入力映像コンテンツを所定の色温度記述フォーマットに従って時分割し、時分割区間情報を生成し、そして各々の時分割区間での色温度を推定し、その推定色温度を第１メタデータとして記録する映像色温度記録部と、前記時分割区間毎にユーザの好みの色温度を決定し、前記ユーザの好みの色温度を第２メタデータとして記録し、出力する色温度管理部と、前記第２メタデータの前記ユーザの好みの色温度に基づき、前記第１メタデータの前記推定色温度を、前記ユーザの好みの色温度に変換する色温度調整部とを備えて構成される。
【００１３】
請求項２に記載の映像色温度記録部は、請求項１に記載の色温度変換システムにおいて、前記入力映像コンテンツを前記色温度記述フォーマットに従って時分割し、各々の時分割区間での代表色温度を推定する色温度推定部と、前記色温度推定部から入力された前記入力映像コンテンツの時分割区間情報、及び、各々の時分割区間での前記推定色温度を所定のフォーマットに従って記録するメタデータ生成部とを備えて構成されることが望ましい。
【００１４】
請求項３に記載の色温度推定部は、請求項２に記載の色温度変換システムにおいて、時分割された前記入力映像コンテンツの各々の時分割区間での所定数のフレームの色温度を測定し、測定された前記色温度の平均値を各々の時分割区間での代表色温度として推定することが望ましい。
【００１５】
請求項４に記載の色温度記述フォーマットに基づく映像コンテンツの時分割は、請求項２に記載の色温度変換システムにおいて、前記入力映像コンテンツの各々のフレーム単位、同じ場面を表わす時間的に連続した複数のフレームからなる同一場面単位、及び前記入力映像コンテンツの所定の範囲内で均一な色温度をもつ複数のフレームからなる均一色温度場面単位、のうち何れか１つの単位にて行われることが望ましい。
【００１６】
請求項５に記載の色温度管理部は、請求項１に記載の色温度変換システムにおいて、各々の時分割区間での前記推定色温度及び前記ユーザの好みの色温度からなる色温度対及び前記入力映像コンテンツの識別子を記録したデータベースを含み、前記データベースから抽出された前記色温度対及び前記識別子を用いて、各々の時分割区間での前記ユーザの好みの色温度を決定し、前記ユーザの好みの色温度を第２メタデータとして記録し、出力することが望ましい。
【００１７】
請求項６に記載の色温度管理部は、請求項５に記載の色温度変換システムにおいて、ユーザが自分の好みの色温度を入力し、前記ユーザの好みの色温度、を決定する方法と、前記色温度調整部から前記入力映像コンテンツの前記識別子を入力され、前記入力映像コンテンツの前記識別子と同じ分類に属する識別子をもつ映像コンテンツについて前記ユーザの好みの色温度として選択された色温度を前記データベースから抽出し、前記入力映像コンテンツについての前記ユーザの好みの色温度として決定する方法と、前記色温度調整部から前記入力映像コンテンツの各々の時分割区間での前記推定色温度を入力され、前記データベースに記録された前記色温度対のうち前記入力映像コンテンツの前記推定色温度に類似した推定色温度をもつ色温度対のユーザの好みの色温度を、前記入力映像コンテンツについての前記ユーザの好みの色温度として決定する方法とのうち何れか１つの方法を用いて前記ユーザの好みの色温度を決定することが望ましい。
【００１８】
請求項７に記載の映像色温度記録部は、請求項５に記載の色温度変換システムにおいて、前記入力映像コンテンツを前記色温度記述フォーマットに従って時分割し、各々の時分割区間での前記代表色温度を推定する色温度推定部と、前記色温度推定部から入力された前記入力映像コンテンツの時分割区間情報、及び、各々の時分割区間での前記推定色温度を所定のフォーマットに従って記録するメタデータ生成部とを備えて構成されることが望ましい。
【００１９】
請求項８に記載の色温度調整部は、請求項１に記載の色温度変換システムにおいて、入力された前記第１メタデータを解析して、前記入力映像コンテンツの時分割区間情報及び各々の時分割区間での前記推定色温度を前記色温度管理部に出力し、前記第２メタデータを解析して、各々の時分割区間での前記ユーザの好みの色温度を出力するメタデータ解析部と、前記入力映像コンテンツを入力し、前記時分割区間情報、各々の時分割区間での前記推定色温度及び各々の時分割区間での前記ユーザの好みの色温度を前記メタデータ解析部から入力し、さらに各々の時分割区間での前記入力映像コンテンツの前記推定色温度を前記ユーザの好みの温度に変換する色温度変換部とを備えて構成されることが望ましい。
【００２０】
請求項９に記載の色温度記述フォーマットに基づく映像コンテンツの時分割は、請求項１に記載の色温度変換システムにおいて、前記入力映像コンテンツの各々のフレーム単位、同じ場面を表わす時間的に連続した複数のフレームからなる同一場面単位、及び、前記入力映像コンテンツ内の所定の範囲内の均一な色温度をもつ複数のフレームからなる均一色温度場面単位のうち何れか１つの単位にて行われることが望ましい。
【００２１】
請求項１０に記載の色温度変換方法は、映像コンテンツの色温度をユーザの好みの色温度に変換する方法において、（ａ）入力映像コンテンツを所定の色温度記述フォーマットに従って時分割し、時分割区間情報を生成し、そして各々の時分割区間での色温度を推定する段階と、（ｂ）前記段階で推定される推定色温度を前記時分割区間情報と共に第１メタデータとして記録する段階と、（ｃ）前記第１メタデータを解析して得られる前記推定色温度及び前記時分割区間情報に基づき、各々の時分割区間での前記ユーザの好みの色温度を決定し、前記時分割区間情報及び各々の時分割区間での前記ユーザの好みの色温度を第２メタデータとして記録する段階と、（ｄ）前記第２メタデータを解析し、前記入力映像コンテンツの各々の時分割区間での前記推定色温度を、各々の時分割区間での前記ユーザの好みの色温度に変換する段階とを備えて構成される。
【００２２】
請求項１１に記載の段階（ｃ）は、請求項１０に記載の色温度変換方法において、各々の時分割区間での前記推定色温度及び前記ユーザの好みの色温度からなる前記色温度対及び前記入力映像コンテンツの識別子をデータベースに記録する段階を備えて構成されることが望ましい。
【００２３】
請求項１２に記載の段階（ａ）は、請求項１０に記載の色温度変換方法において、前記入力映像コンテンツの各々のフレーム単位、同じ場面を表わす時間的に連続した複数のフレームからなる同一場面単位、及び前記入力映像コンテンツの所定の範囲内で均一な色温度をもつ複数のフレームからなる均一色温度場面単位のうち何れか１つの単位に前記入力映像コンテンツを時分割することが望ましい。
【００２４】
請求項１３に記載の段階（ａ）は、請求項１０に記載の色温度変換方法において、時分割された前記入力映像コンテンツの各々の時分割区間での所定数のフレームの色温度を測定し、測定された前記色温度値の平均値を各々の時分割区間での代表色温度として推定することが望ましい。
【００２５】
請求項１４に記載の段階（ｃ）は、請求項１０に記載の色温度変換方法において、ユーザが自分の好みの色温度を入力し、ユーザの好みの色温度、を決定する方法と、前記色温度調整部から前記入力映像コンテンツの前記識別子を入力され、前記入力映像コンテンツの前記識別子と同じ分類に属する識別子をもつ映像コンテンツについて前記ユーザの好みの色温度として選択された色温度を前記データベースから抽出し、前記入力映像コンテンツについて前記ユーザの好みの色温度として決定する方法と、前記色温度調整部から前記入力映像コンテンツの各々の時分割区間での前記推定色温度を入力され、前記データベースに記録された前記色温度対のうち前記入力映像コンテンツの前記推定色温度に類似した推定色温度をもつ色温度対のユーザの好みの色温度を、前記入力映像コンテンツについての前記ユーザの好みの色温度として決定する方法とのうち何れか１つの方法を用いて前記ユーザの好みの色温度を決定することが望ましい。
【００２６】
請求項１５に記載の記録媒体は、請求項１０〜請求項１４のうち何れか１項に記載の色温度変換方法をコンピュータで実行可能なプログラムコードで記録したものである。
【００２７】
【発明の実施の形態】
以下、本発明の実施の形態について図面を参照して説明する。
【００２８】
図１は、本発明に係る一実施の形態による色温度変換システムの構成を模式的に示すブロック図である。
【００２９】
図１に示すように、本発明に係る色温度変換システムは、映像コンテンツの色温度をユーザの好みの色温度に変換するものであって、映像色温度記録部１０と、色温度管理部２０と色温度調整部３０とを備えて構成される。
【００３０】
図１において、映像色温度記録部１０は、入力映像コンテンツを所定の色温度記述フォーマットに従って時分割し、時分割区間情報を生成し、そして各々の時分割区間での色温度を推定し、その推定色温度を第１メタデータとして記録する。そして、色温度管理部２０は、前記時分割区間毎にユーザの好みの色温度を決定し、前記ユーザの好みの色温度を第２メタデータとして記録し、出力する。また、色温度調整部３０は、前記第２メタデータの前記ユーザの好みの色温度に基づき、前記第１メタデータの前記推定色温度を、前記ユーザの好みの色温度に変換する
【００３１】
映像色温度記録部１０は、色温度推定部１１と、メタデータ生成部１２とを備えて構成される。
【００３２】
色温度推定部１１は、入力映像コンテンツを時分割し、所定の色温度記述フォーマット又は入力された色温度記述フォーマットに従って、それぞれの時分割区間別に色温度を推定する。メタデータ生成部１２は、色温度推定部１１から入力される前記入力映像コンテンツの時分割区間情報及び推定色温度を、所定のフォーマットで第１メタデータとして記録し、色温度調整部３０に出力する。
【００３３】
色温度管理部２０は、前記時分割区間別のユーザの好みの色温度を決定し、前記ユーザの好みの色温度を第２メタデータとして記録し、色温度調整部３０に出力する。
【００３４】
また、色温度調整部３０は、メタデータ解析部３１と、色温度変換部３２とを備えて構成される。
【００３５】
メタデータ解析部３１は、入力された第１メタデータから映像コンテンツの各々の時分割区間情報及び各々の時分割区間での色温度情報を解析し、色温度管理部２０に現在の映像コンテンツの各々の時分割区間での色温度情報及び現在の映像コンテンツの識別子を提供する。そして、メタデータ解析部３１は、色温度管理部２０において決定されたユーザの好みの色温度（第２メタデータ）を受信し、入力映像コンテンツの時分割区間別の情報、時分割区間別の色温度情報及びユーザの好みの色温度を出力する。また、色温度変換部３２は、メタデータ解析部３１から入力されたユーザの好みの色温度に基づき、入力映像コンテンツの各々の時分割区間での推定色温度をユーザの好みの色温度に変換する。
【００３６】
一方、本発明の映像色温度記録部１０、ユーザ色温度管理部２０及び色温度調整部３０は、各々物理的に独立したシステムあるいは装置に組み込んで使用できる。例えば、映像色温度記録部１０は、映像コンテンツプロバイダのシステムに組み込むことができ、また、色温度管理部２０及び色温度調整部３０は、ユーザ端末装置に組み込んで本発明の色温度変換システムを構成しても良い。そして、映像色温度記録部１０、色温度管理部２０及び色温度調整部３０は、何れもユーザ端末装置に組み込んで使用できる。
【００３７】
但し、入力映像コンテンツを時分割し、各々の時分割区間で色温度を推定して第１メタデータを記録する映像色温度記録部１０の機能と、第１及び第２メタデータを解析して色温度を変換する色温度調整部３０の機能とは、時間的に分離されている。すなわち、ユーザ端末装置の表示装置を通して映像コンテンツを表示する前に、映像色温度記録部１０において全体入力映像コンテンツについての第１タデータを生成し、そして表示装置を通して映像コンテンツを表示する要求があれば、生成された第１メタデータは色温度調整部３０に出力される。色温度調整部３０は、色温度を最初に推定することなしに、受信した第１及び第２メタデータを用いて色温度を変換するため、ユーザ端末装置において色温度変換にかかる時間は、大幅に短縮できる。
【００３８】
図２は、本発明に係る一実施の形態による色温度変換方法の構成を示すブロック図である。以下、図２に基づき、本発明の色温度変換プロセスについて説明する。
【００３９】
ユーザ端末装置の映像表示装置に映像コンテンツを表示するために、映像表示装置に表示する前に、前記映像コンテンツを映像コンテンツプロバイダのシステムまたはユーザ端末装置に組み込まれた色温度推定部１１に入力する（ステップＳ２００）。
【００４０】
色温度推定部１１は、入力された映像コンテンツを色温度記述フォーマットに従って時分割し、それぞれの時分割区間別の色温度を推定する（ステップＳ２１０）。色温度推定プロセスの詳細については、後記する図３を参照して説明する。
【００４１】
図３は、図２に示す色温度の推定（Ｓ２１０）のプロセスの詳細を模式的に示すブロック図である。
【００４２】
入力された映像コンテンツは、所定の色温度記述フォーマットに従って時分割されるが、時分割単位としては、前記映像コンテンツの各フレーム単位、前記映像コンテンツ内の連続した同一場面単位及び前記映像コンテンツ内の連続した均一色温度場面単位の３種類のうち何れか１つが選択できる。このような色温度記述フォーマットは、所定のフォーマットに従ってあらかじめ定義してもよい、あるいは、映像コンテンツの種類に対応して適宜選択してもよい。もし、入力映像が動映像ではない１枚の静止映像である場合には、フレーム単位で時分割される。
【００４３】
図３に示すように、まず、色温度推定部１１は、入力された色温度記述フォーマット、あるいはシステム内部において所定の色温度記述フォーマットで、入力映像コンテンツをどのように時分割するかを判断する（ステップＳ２１１）。
【００４４】
色温度記述フォーマットが、フレーム単位に時分割するように設定されているならば、色温度推定部１１は、入力された映像コンテンツのそれぞれのフレームについて色温度を推定する。映像における色温度（照明色）の推定方法については、多くの研究がなされてきている。代表的なものとして、前記特許文献９〜１２がある。
【００４５】
これらの特許文献は、映像におけるハイライトあるいは類似の情報を用いて、映像の色温度を抽出する方法に関するものである。これらの方法により得られた照明色または色温度は、ＣＩＥのＸＹＺ色空間または照明のスペクトル曲線などにより表わされる。
【００４６】
色温度推定部１１は、前記特許文献９〜１２に開示されている方法のうち何れか１つの方法を用いて、フレームの色温度を推定できる。好ましくは、本発明の出願人により既に出願され、前記特許文献１３に開示されている推定方法を用いて色温度を推定する（ステップＳ２１３）。
【００４７】
さて、色温度記述フォーマットが、同一場面単位に時分割するように設定されているならば、色温度推定部１１は、入力映像コンテンツを同一場面単位に時分割し（ステップＳ２１５）、時分割された各同一場面単位の代表色温度を推定する（ステップＳ２１７）。
【００４８】
映像コンテンツを連続した同一場面単位に時分割するためには、まず、それぞれのフレームが同じ場面を表わすか否かを判断しなければならない。同じ場面を表わすか否かを判断する方法としては、各フレーム別のカラーヒストグラムを求める方法、隣接フレーム間のカラーヒストグラムの違いを求める方法、各フレームのエッジ特性を用いる方法、あるいは動きベクトルを用いる方法など、多くの方法が既に知られている。そして、映像コンテンツは、同じ場面を表わすと判断できる、時間的に連続する単一または複数のフレームに時分割される（ステップＳ２１５）。
【００４９】
同一場面区間内の代表色温度は、次の方法により推定できる。
（ｉ）同一場面が出てくるフレームの最初フレームを代表フレームとして選択する、または予め定めた複数のフレームから１枚のフレームを周期的にとってそれを代表フレームとして選択する、あるいは他の方法により代表フレームを選定し、その代表フレームの色温度を代表色温度として推定する、あるいは、
（ｉｉ）時分割区間内の全てのフレーム又は一部のフレームの色温度から、例えば、平均値といった統計的な代表値を推定／計算し、その値を代表色温度として推定する。
次のステップＳ２１７で用いられる、代表フレームの色温度を時分割区間内の一部のフレームの色温度から推定する方法は、前記した方法、すなわち映像コンテンツをフレーム単位に時分割して、フレームの代表色温度を推定する方法と同一である。
【００５０】
一方、色温度記述フォーマットが映像コンテンツを均一色温度場面単位に時分割するように設定されているならば、色温度推定部１１は、前記映像コンテンツを均一色温度場面単位に時分割し（ステップＳ２１９）、前記同一場面単位に前記映像コンテンツを時分割する場合と同じ方法により代表色温度を推定する（ステップＳ２１７）。
【００５１】
映像コンテンツを均一な色温度場面に時分割するためには、いかなるフレームが均一な色温度場面に含まれるかを決定しなければならない。映像コンテンツ内の連続した均一色温度場面は、以下に記載する条件のうち何れか１つに相当する時間的に連続した単一または複数のフレームよりなる。すなわち、
（ｉ）色温度の範囲を幾つかの区間に分割した後、時間的に連続した２フレームの色温度が同じ色温度の区間に属する場合、又は、
（ｉｉ）時間的に連続した２フレームの色温度間の違いが、所定のしきい値よりも小さい場合、あるいは、
（ｉｉｉ）ｎ番目のフレーム及び（ｎ＋ｋ）番目のフレーム間のフレームが所定の数のフレームを除いて（ｉ）又は（ｉｉ）を満たす場合（例えば、ｎ番目のフレーム及び（ｎ＋ｋ）番目のフレーム間のフレームの色温度が２,０００±２０（°Ｋ）を満たすが、それらのうち２〜３枚のフレームがこの色温度範囲を超える時に、前記２〜３枚のフレームが、前記所定の数のフレームを意味する）。
なお、色温度推定部１１は、入力映像コンテンツを前記した条件に従って均一な色温度場面に時分割する。
【００５２】
前記した色温度推定プロセスにより推定される入力映像コンテンツの各々の時分割区間での推定色温度は、時分割区間情報と共にメタデータ生成部１２に出力される。メタデータ生成部１２は、前記推定色温度及び時分割区間情報が、ＭＰＥＧ−７あるいはＭＰＥＧ−２１などの内容記述の規格や内容記述の装置、又は内容記述サービスで規定されるフォーマットに従って記録された第１メタデータを生成し、入力映像コンテンツがユーザの映像表示装置に表示されるように要求された時、メタデータ解析部３１に出力する（ステップＳ２２０）。
【００５３】
メタデータ解析部３１は、受信した第１メタデータを解析し、映像コンテンツの時分割区間情報と、各時分割区間別の代表色温度の情報と、入力映像コンテンツの識別子とを色温度管理部２０に出力する（ステップＳ２３０）。
【００５４】
色温度管理部２０は、ユーザの好みの色温度をユーザから直接受け取り、ユーザが各種の映像コンテンツについて以前に選択した色温度の記録に基づきユーザの好みの色温度を決定し、これを入力映像コンテンツの時分割区間別情報と共に各々の時分割区間でのユーザの好みの色温度を第２メタデータとして生成して、メタデータ解析部３１に出力する（ステップＳ２４０）。
【００５５】
以下において、ユーザの好みの色温度の決定プロセスについて詳細に説明する。
【００５６】
ユーザから直接的にユーザの好みの色温度を受け取る方法には、以下の２つの方法がある。すなわち、
１）単にユーザが自分の好みの色温度を入力する方法と、
２）様々な色温度をもつ映像のサンプルを提示し、ユーザの選択する映像を受け取り、その映像の色温度をユーザの好みの色温度として決定する方法と、
がある。
【００５７】
一方、ユーザが各種の映像コンテンツについて以前に選択した色温度の記録に基づき、ユーザの好みの色温度を決定する方法において、映像コンテンツについてのユーザの以前の色温度選択の記録をデータベース（図示せず）に記憶した後、現在映像表示装置に表示するように要求された映像コンテンツがデータベースに記録された映像コンテンツと同一または類似の場合、データベースに記録された映像コンテンツについて選択された色温度が、現在表示される映像コンテンツのユーザの好みの色温度として決定される。
【００５８】
映像コンテンツの同一性または類似性を判別する方法としては、映像コンテンツの識別子により判別する方法と、映像コンテンツの色温度により判別する方法とがある。
【００５９】
まず、映像コンテンツの識別子による判別方法においては、デジタル放送標準、ＴＶ−Ａｎｙｔｉｍｅフォーラム、ＭＰＥＧ−７、ＭＰＥＧ−２１などのマルチメディアコンテンツ関連の規格に基づき、個々の映像コンテンツを、ジャンル、製作沿革、プロバイダなどの観点から再分類される１つのデジタル項目とみなされ、個々の映像コンテンツは、固有の識別子を持つことになる。
【００６０】
識別子による判別方法においては、色温度管理部２０は、ユーザの好みの色温度を入力されるたびに、ユーザの端末装置に表示される映像コンテンツについて選択されたユーザの好みの色温度を、その映像コンテンツの識別子と共に、データベースに記録する。一方、ユーザの好み色温度管理部２０は、新しい映像コンテンツを視聴する時、メタデータ解析部３１から受信した識別子を用いて、データベースに記録された以前の映像コンテンツから同じ識別子を持つ映像コンテンツ、あるいは同じ分類に属する映像コンテンツを検索し、検索した前記映像コンテンツに該当する色温度を、前記新しい映像コンテンツの色温度変換のためのユーザの好みの色温度として用いる。この方法は、ニュース、スポーツ、シリーズ物など、ほとんど類似した場面が繰り返される映像コンテンツを視聴する時に効果的な方法である。
【００６１】
次に、以前の映像コンテンツの色温度を用いる方法においては、ユーザが以前に選択したユーザの好みの色温度は、該当映像コンテンツの元（ｐｒｉｍａｒｙ）の色温度に基づいて分類される。すなわち、以前に視聴した映像コンテンツの特定の時分割区間の色温度がＴiであり、これについてユーザが選択した色温度がＳjであったならば、（Ｔi、Ｓj）という色温度対を構成し、このようにして得られた色温度対を,その存在頻度や持続時間量などにより重み付けした後に,データベースに記憶する。新しい映像コンテンツを視聴する時、個々のフレームや時分割区間において推定される色温度をＵとし、前記色温度のうち最も高い重み付けの値をもつ色温度をＦ（Ｕ）とすると、これらで定義される色温度対（Ｕ、Ｆ（Ｕ））がユーザの好みの色温度の記録上に存在して、Ｆ（Ｕ）が、色温度変換のためのユーザの好みの色温度として決定される。
【００６２】
以上を要約すると、色温度対の集合を、ＳT＝｛（Ｔi、Ｓj）｜Ｔi＝視聴した映像コンテンツの色温度、Ｓj＝色温度がＴiである映像コンテンツで選択されたユーザの好みの色温度｝、として定義し、Ｗijを色温度対（Ｔi、Ｓj）に与えられる重み付けの値として定義する時、前記重み付けの値は、前記色温度対に関連する選択回数や選択の持続時間により決定される。一方、ユーザが今視聴しようとする映像コンテンツの推定色温度、または前記映像コンテンツの時分割区間の推定色温度を、Ｕとし、色温度管理部２０において自動的に選択されるユーザの好みの色温度をＦ（Ｕ）とする時、Ｕ＝ＴiまたはＵ≒Ｔiであり、Ｆ（Ｕ）は、重み付けの値Ｗijが｛Ｗik｜ｋ＝１,２,……｝の中で最大値となる色温度対（Ｔi、Ｓj）のＳjとして選択される。色温度対の色温度の値は、色温度の分布範囲の全体を量子化して得られる色温度区間により表わされる。
【００６３】
色温度管理部２０は、前記した方法により決定されたユーザの好みの色温度を、現在の映像コンテンツの識別子と共に、データベースに記録し、またはユーザの好みの色温度を色温度対としてデータベースに記録し、各時分割区間別の現在の映像コンテンツのユーザの好みの色温度を第２メタデータとして生成し、その第２メタデータをメタデータ解析部３１に出力する。
【００６４】
メタデータ解析部３１は、入力された第２メタデータを解析して、入力映像コンテンツの時分割区間別のユーザの好みの色温度情報を、第１メタデータから解析された入力映像コンテンツの時分割区間別の推定色温度と共に、色温度変換部に出力する（ステップＳ２５０）。
【００６５】
図４は、図２に示す色温度の変換（Ｓ２６０）のプロセスの詳細を模式的に示すブロック図である。
【００６６】
図４に示すように、色温度変換部３２は、入力映像コンテンツの時分割区間情報、各時分割区間の推定色温度、ユーザの好みの色温度及び入力映像コンテンツを受信し、入力映像コンテンツの色温度記述フォーマットを判断する（ステップＳ２６１）。
【００６７】
色温度記述フォーマットが、入力映像コンテンツを各フレーム別に時分割するように設定されたならば、色温度変換部３２は、入力映像コンテンツの各フレーム別の推定色温度をユーザの好みの色温度に基づき変換する（ステップＳ２６３）。それぞれのフレームにおける色温度変換方法の詳細については、本発明の出願人により既に出願され、前記特許文献１４に開示されており、これら以外にも様々な色温度変換方法が、本発明に適用可能である。
【００６８】
ここで、前記特許文献１４で開示された色温度変換方法について簡略に説明する。一般に、テレビジョンやモニタ等において用いられる色温度を基準色温度として設定し、ユーザの好みの色温度が入力されると、前記基準色温度がユーザの好みの色温度に変換される。設定された前記基準色温度が所定の写像に応じてユーザの好みの色温度に変換されると、推定される各フレームの色温度Ｔiが前記写像により変換されて、出力映像コンテンツの目標色温度Ｔtが求められ、ＴtとＴiとがＣＩＥのＸＹＺ-３刺激値ベクトルに変換され、その２つの３刺激値ベクトル間の変換行列Ｍが求まる。入力映像フレームの各画素のＲＧＢ値、すなわちＲi、Ｇi及びＢi、は線形ＲＧＢに変換され、さらにこれをＣＩＥのＸＹＺベクトルに変換した後、変換行列Ｍを適用する。変換行列Ｍを適用して得られたＣＩＥのＸＹＺベクトルを線形ＲＧＢに変換し、さらにこれを元のＲＧＢに変換すれば、色温度変換された映像コンテンツが出力される。
【００６９】
これらに加えて、本発明の出願人により既に出願された前記特許文献１５に開示された色温度変換方法の推定基準色の値及び目標基準色の値を本発明の推定色温度及びユーザの好みの色温度に各々対応させて本発明の色温度変換を行うことができる。
【００７０】
一方、色温度記述フォーマットが、入力映像コンテンツを同一場面単位または均一色温度場面単位に時分割するように設定されたならば、色温度変換部３２は、時分割区間内の全てのフレームについて、推定された代表色温度を、入力されたユーザの好みの色温度に基づいて変換する（ステップＳ２６５）。各時分割区間内のそれぞれのフレームの色温度を変換する方法は、各フレーム別に色温度を変換する方法と同じである。
【００７１】
色温度の変換された各時分割区間の映像コンテンツは、出力映像コンテンツ７０として、ユーザ映像表示装置に出力される（ステップＳ２７０）。
【００７２】
本発明の色温度変換方法は、また、コンピュータで読取り可能な記録媒体にコンピュータにて読取り可能なコードとして具現可能である。コンピュータで読取り可能な記録媒体は、コンピュータシステムにより読取り可能なデータが記憶されるあらゆる種類の記録装置を含む。コンピュータで読取り可能な記録媒体の例としては、ＲＯＭ、ＲＡＭ、ＣＤ−ＲＯＭ、磁気テープ、フレキシブルディスク、光学的データ記憶装置などがあり、また、搬送波（例えば、インターネットを介した伝送）の形にて実現されるものも含まれる。さらに、コンピュータで読取り可能な記録媒体は、ネットワークで繋がったコンピュータシステムで使われるコンピュータで読取り可能なコードを記憶し、実行する。
【００７３】
以上、本発明に係る一実施の形態を説明したが、本発明が属する技術分野において通常の知識を有する者であれば、本発明の意図と目的から逸脱することなく、種々の実施の形態へと変更できるということが理解できるであろう。従って、開示された実施の形態は、それに限定されるという観点ではなく、それを説明するという観点から考慮されるべきである。本発明の目的は、これまでに記した説明だけではなく、特許請求の範囲に開示されており、それと等価であれば、本発明に含まれるものとして解釈すべきである。
【００７４】
【発明の効果】
以上説明したとおり、本発明に係る映像コンテンツの内容記述メタデータを用いた色温度変換方法及びシステムは、以下に示すような優れた効果を奏する。
【００７５】
本発明においては、入力映像コンテンツの色温度のユーザの好みの色温度への変換にあたり、入力映像コンテンツがユーザ端末装置の表示装置に表示される前に、入力映像コンテンツの色温度推定を行って、これをメタデータとして記録する。そして、入力映像コンテンツがユーザ表示装置に表示されるように要求された時に、前記メタデータ内に記録された推定色温度を色温度変換に用いる。入力映像コンテンツが映像表示装置に表示される時に色温度推定プロセスが引き起こすユーザ端末装置における計算負荷、あるいは映像表示装置の性能向上のためのコストを顕著に低減できる。
【００７６】
また、ユーザの好みの色温度の決定及び記録にあたり、以前にユーザが視聴した個々の映像コンテンツについて、ユーザの好みの色温度を記録しておき、これをユーザが視聴する現在の映像コンテンツの色温度変換に適用することにより、個々のコンテンツに適応できる色温度変換が可能になる。
【図面の簡単な説明】
【図１】本発明に係る一実施の形態による色温度変換システムの構成を模式的に示すブロック図である。
【図２】本発明に係る一実施の形態による色温度変換方法の構成を示すブロック図である。
【図３】図２に示す色温度の推定（Ｓ２１０）のプロセスの詳細を模式的に示すブロック図である。
【図４】図２に示す色温度の変換（Ｓ２６０）のプロセスの詳細を模式的に示すブロック図である。
【符号の説明】
１０    映像色温度記録部
２０    色温度管理部
３０    色温度調整部
【図１】
0003709191.tif 000002
【図２】
0003709191.tif 000003
【図３】
0003709191.tif 000004
【図４】
0003709191.tif 000005