(57)【特許請求の範囲】
【請求項１】
カメラで撮影されたカメラ映像データ信号から映写用画像を作成する映画システムで、前記カメラによる撮影が行われる撮影システムに用いられる映像変換装置であって、
前記カメラ映像データ信号を取得するカメラ映像信号取得ユニットと、
前記カメラ映像データ信号を、前記カメラで撮影したシーン基準の色空間へ変換して該シーン基準の色空間の第１の画像の映像データを求める第１の色変換ユニットと、
前記第１の画像の映像データに対して色調整を行なわせ、色調整後の前記第１の画像の映像データを得る色調整ユニットと、
この色調整後の前記第１の画像の映像データを、映像の出力の標準色空間へ変換して該出力の標準の色空間の第２の画像の映像データを求める第２の色変換ユニットと、
前記第２の画像の映像データを映像の最終出力となる最終出力デバイスの色空間へ変換した際に得られる前記最終出力デバイスの色を事前に異なる表示デバイスで確認させるために、前記第２の画像の映像データを確認用表示デバイスの色空間に変換して該確認用表示デバイスの色空間の第３の画像の映像データを求める第３の色空間変換ユニットを有し、
更に、前記色調整ユニットにおいて行われた色調整を含む編集加工の内容を記述した編集情報ファイルは、前記第３の画像の映像データのタイムコードと共に、前記映画システムのポストプロダクションである映像制作システムに送信されることを特徴とする映像変換装置。
【請求項２】
前記最終出力デバイスは、複数台の前記カメラで撮影された複数種類の前記カメラ映像データ信号から前記映写用画像を作成する前記映画システムで前記映写用画像を上映するための映写機であり、
前記映像変換装置は、複数台の前記カメラに、又は該複数台の前記カメラのそれぞれに対応して接続され、また、複数台の前記確認用表示デバイスに、又は該複数台の前記確認用表示デバイスのそれぞれに対応して接続されるものであり、
前記確認用表示デバイスは、前記映画システムの撮影側で、前記最終出力デバイスの色を確認させるためのものである請求項１に記載の映像変換装置。
【請求項３】
前記第３の画像の映像データは、低解像度の映像データである請求項１又は２に記載の映像変換装置。
【請求項４】
前記出力の標準の色空間は、出力デバイスに依存しない色空間である請求項１〜３のいずれか１項に記載の映像変換装置。
【請求項５】
前記出力の標準の色空間は、１００００：１以上のダイナミックレンジを有する理想的な出力デバイスを想定した出力色空間、標準出力デバイスを想定した出力色空間、又は映画システムで映写機で上映される映写用フィルムのプレビューを想定した出力色空間である請求項１〜４のいずれか１項に記載の映像変換装置。
【請求項６】
前記カメラは、被写体を撮影して前記カメラ映像データ信号を取得するデジタルビデオカメラ又はデジタルカメラである請求項１〜５のいずれか１項に記載の映像変換装置。
【請求項７】
さらに、前記映像変換装置に接続され、前記色調整ユニットによる色調整を制御するためのコントローラを備え、
該コントローラは、表示部と、コントローラ色変換ユニットと、映像解析ユニットと、制御ユニットと、入力ユニットと、を備え、
前記コントローラ色変換ユニットは、前記第２の色変換ユニットによって得られた前記出力の標準の色空間の前記第２の画像の映像データを、前記表示部上に、前記最終出力デバイスの色を持つ編集加工映像として再現するための色変換をするためのものであり、
前記映像解析ユニットは、前記色調整ユニットによって色調整され、前記表示部上に再現された前記最終出力デバイスの色を持つ前記編集加工映像を解析するためのものであり、
前記入力ユニットは、前記色調整ユニットによる色調整のための色調整パラメータを入力すると共に、前記表示部の表示を切り換えるためのものであり、
前記制御ユニットは、前記入力ユニットから入力された前記色調整パラメータに応じて前記色調整ユニットによる色調整を制御するためのものであり、
前記表示部は、前記表示部上に再現された前記最終出力デバイスの色を持つ前記編集加工映像、及び／又は前記映像解析ユニットによる映像解析の結果を表示する表示画面、並びに前記入力ユニットによる前記色調整パラメータの入力画面を備えるものである請求項１〜６のいずれか１項に記載の映像変換装置。
【請求項８】
前記表示部は、前記色調整ユニットによって色調整され、前記表示画面に表示された前記編集加工映像上の、前記入力ユニットによって選択された部分の解析結果を前記表示画面上に表示する請求項７に記載の映像変換装置。
【請求項９】
前記表示部の表示画面は、前記映像を表示する領域と、前記入力ユニットによる選択部分の解析結果及び／又は前記映像解析ユニットによる前記映像解析の結果を表示する領域とを備える請求項８に記載の映像変換装置。
【請求項１０】
前記表示部は、前記映像の各画素が、前記最終出力デバイスの色空間から外れている場合、もしくは前記入力ユニットによる選択部分の解析結果が、前記最終出力デバイスの色空間から外れている場合に、前記表示画面上に警告を表示するものである請求項８または９に記載の映像変換装置。
【請求項１１】
前記コントローラは、さらに、前記映像の各画素が、前記最終出力デバイスの色空間から外れている場合、もしくは前記入力ユニットによる選択部分の解析結果が、前記最終出力デバイスの色空間から外れている場合に、音声で警告を発する警報ユニットを備える請求項８〜１０にいずれか１項に記載の映像変換装置。
【請求項１２】
前記コントローラは、前記色調整ユニットに回線接続され、前記制御ユニットの制御に基づく前記色調整パラメータに応じて前記色調整ユニットによる色調整を行わせる請求項８〜１１にいずれか１項に記載の映像変換装置。
【請求項１３】
さらに、前記色調整ユニットによる色調整値及び／又は色調整参照テーブル、及び／又は、前記色調整ユニットによって色調整された、前記最終出力デバイスの色または前記出力の標準色空間を持つ編集加工映像の低解像度及び／又は圧縮画像を出力する出力ユニットを備える請求項１〜１２にいずれか１項に記載の映像変換装置。
【請求項１４】
前記色調整ユニットによる色調整値及び／又は色調整参照テーブル、及び／又は、前記色調整ユニットによって色調整された編集加工映像画像を、撮影時の日付及び／又はタイムコードと対応付けて出力することを特徴とする請求項１〜１３にいずれか１項に記載の映像変換装置。
【請求項１５】
複数台のカメラと、
該複数台のカメラに対応してそれぞれ配置された複数台の、請求項１〜１４にいずれか１項に記載の映像変換装置と、
該複数台の映像変換装置に対応してそれぞれ配置された確認用表示デバイスと、
前記複数台のカメラで撮影された前記カメラ映像データ信号を格納する撮影映像格納装置と、
前記色調整ユニットによって色調整された、前記最終出力デバイスの色を持つ編集加工映像の低解像度画像を格納する編集加工映像格納装置と、を備え、
前記映像変換装置は、前記色調整ユニットにおいて行われた色調整を含む編集加工の内容を記述した編集情報ファイルは、前記第３の画像の映像データのタイムコードと共に、前記映画システムのポストプロダクションである映像制作システムに送信されることを特徴とする映画システムの撮影システム。
【請求項１６】
前記第３の画像の映像データは、低解像度の映像データである請求項１５に記載の映画システムの撮影システム。
【請求項１７】
カメラで撮影されたカメラ映像データ信号から映写用画像を作成する映画システムで、前記カメラによる撮影が行われる撮影システムで行われる映像変換方法であって、
前記カメラ映像データ信号を取得し、
前記カメラ映像データ信号を、前記カメラで撮影したシーン基準の色空間へ変換して該シーン基準の色空間の第１の画像の映像データを求め、
前記第１の画像の映像データに対して色調整を行なわせ、色調整後の前記第１の画像の映像データを得、
この色調整後の前記第１の画像の映像データを、映像の出力の標準色空間へ変換して該出力の標準の色空間の第２の画像の映像データを求め、
前記第２の画像の映像データを映像の最終出力となる最終出力デバイスの色空間へ変換した際に得られる前記最終出力デバイスの色を事前に異なる表示デバイスで確認させるために、前記第２の画像の映像データを確認用表示デバイスの色空間に変換して該確認用表示デバイスの色空間の第３の画像の映像データを求めることを含み、
前記色調整を含む編集加工の内容を記述した編集情報ファイルは、前記第３の画像の映像データのタイムコードと共に、前記映画システムのポストプロダクションである映像制作システムに送信されることを特徴とする映像変換方法。
【請求項１８】
コンピュータに、請求項１７に記載の映像変換方法の各手順を実行させるための映像変換プログラム。
【請求項１９】
コンピュータに、請求項１７に記載の映像変換方法の各手順を実行させるための映像変換プログラムを記載したコンピュータに読取可能な記録媒体。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、映像変換装置、これを用いる映画システムの撮影システム、映像変換方法、映像変換プログラム、及びその記録媒体に関し、詳しくは映像製作過程、即ち映画、ＴＶの製作過程で行われる色設計、調整作業を効率化する、特に映画システムの撮影現場で、複数台のカメラを使用して撮影されるカメラ映像データから再現された最終表示デバイスの色を確認することができる映像変換装置、及び映像変換方法、映像変換装置を用いる映画システムの撮影システム、並びにこのような映像変換方法をコンピュータに実行させる映像変換プログラム、及びこれを記載したコンピュータに読取可能な記録媒体に関するものである。
【背景技術】
【０００２】
従来、映画システムにおいては、映写機による映画の上映のために、例えばフィルムプロジェクタに用いられる上映用ポジフィルム（上映用配給フィルム）やデジタルプロジェクタに用いられる上映用映像データを記録した上映用ハードディスク（可搬式上映用配給ハードディスク）等の記憶媒体が製作されている。
【０００３】
従来、このような上映用ポジフィルムやハードディスクを製作する映画制作ワークフローにおいては、撮影監督の下で、撮影・現像済みの映画撮影用ネガフィルムをテレシネ装置等の画像入力装置で読み取ってデジタル処理したデジタル映像データ、映画用デジタル撮像カメラで撮影したデジタル映像データ、コンピュータ等により作製されたコンピュータグラフィックス（ＣＧ）等のデジタル映像データを取得し、撮影後の後工程である編集工程（ポストプロダクション：Post Production）で、取得されたデジタル映像データに対してデジタル映像加工・編集・色補正を行い、また、視聴覚を加えて、編集加工後の映像データ、すなわち映像ソースデータを作成し、これを中間ネガを経由して上映用ポジフィルムに出力し、フィルムプロジェクタで投影し、または出力用データに変換し、上映用ハードディスク等に出力し又は直接配信してデジタルプロジェクタで投影している。（特許文献１参照）
【０００４】
なお、特許文献１には、映画システムにおいて、ビデオカメラによる電子撮像により得た映像信号の色補正等の映像特性の補正が、映画フィルムで撮影したものを処理する場合と同様に簡単に行う事が出来る映像変換方法及び装置が開示されている。
また、特許文献２には、映画システムではないが、ディスプレイ装置を接続して映像情報を送信し、接続されたディスプレイ装置の再現特性情報を取得又は選択し、得られた再現特性情報を利用して、忠実な色の映像がディスプレイ装置で再現されるように映像情報を変換する画像処理装置及び方法が開示されている。
【０００５】
ところで、撮影後の編集工程である映像製作の後工程（ポストプロダクション）は、撮影監督や、制作者（プロデューサ）や、カラリスト等の多数の人や、様々な会社の協働作業となるのが一般的であり、各人間、各社間のデータのやりとり、各人間、各社間にまたがる工程全体の設計が必要である。しかしながら、データフォーマットや画像変換ワークフローには標準が無いため、フォーマット変換や色空間の変換等の付帯作業が必要であり、作業の煩雑化、画像品質の低下、作業工数の増大を招いていた。
【先行技術文献】
【特許文献】
【０００６】
【特許文献１】特開２０１０−０５５０２９号公報
【特許文献２】特開２００８−２９５０３４号公報
【発明の概要】
【発明が解決しようとする課題】
【０００７】
このため、映像製作の後工程のポストプロダクションにおける色調整の規格化が、映画アカデミー（The Academy of Motion Picture Arts and Sciences：以下、ＡＭＰＡＳと略称する）において図られている。図１０に、ＡＭＰＡＳが提唱するデジタル映画制作ワークフロー規格ＡＭＰＡＳ−ＩＩＦの色変換アーキテクチャーの一例を示す。
図１０に示すＡＭＰＡＳ−ＩＩＦの色変換アーキテクチャーは、基本的に、入力色空間ＡＣＥＳ（Academy Color Encoding Specification）１００及び出力色空間ＯＣＥＳ（Output Color Encoding Specification）１０２の２つの共通色空間と、両者間を対応つける共通変換ＲＲＴ（Reference Rendering Transform）１０４及び入出力デバイスと共通空間を変換する入力デバイス変換ＩＤＴ（Input Device Transform）１０６／出力デバイス変換ＯＤＴ（Output Device Transform）１０８とによりデジタル映像データ変換が定義されている。
【０００８】
ＩＤＴ１０６は、デジタルカメラ１１０の撮影映像データ（デジタルカメラの色空間）を入力の共通色空間であるＡＣＥＳ１００に変換するものであり、ＯＤＴ１０８は、出力の共通色空間であるＯＣＥＳ１０２からデジタルプロジェクタ１１２の出力映像データ（デジタルプロジェクタの色空間）に変換するものである。
即ち、デジタル映像データ変換系では、デジタルカメラ１１０の撮影映像データがＩＤＴ１０６によってＡＣＥＳ１００に変換され、又コンピュータグラフィックス（ＣＧ）１１４の映像データも直接ＡＣＥＳ１００に変換され、ＡＣＥＳ１００で色調整等の編集加工が行われた後、ＲＲＴ１０４によってＯＣＥＳ１０２に変換され、ＯＣＥＳ１０２からＲＤＴ／ＯＤＴ１０８によってデジタルプロジェクタ１１２の出力映像データに変換される。
【０００９】
さらに、標準ネガフィルム濃度ＡＰＤ（AMPAS Printing Density）１１６とそれをコード化したＡＤＸ１１８を定義し、入力色空間ＡＣＥＳ１００との固定変換（Universal Build）とその逆変換（Universal Unbuild）からなるＵＢ変換／逆変換１２０を設定し、デジタル画像データ変換系とコンベンショナルな銀塩フィルム系を対応付けている。
この銀塩フィルム系では、フィルムカメラで撮影されたフィルムからフィルムスキャナ１２２によって読み取られた画像濃度データは、標準ネガフィルム濃度ＡＰＤ１１６の濃度データに変換され、さらに、ＡＤＸコード１１８に変換された後、ＵＢ変換１２０によってＡＣＥＳ１００に変換され、ＡＣＥＳ１００で色調整等の編集加工が行われ、ＡＣＥＳ１００から、逆変換１２０によって再びＡＤＸコード１１８に変換され、フィルムレコーダ１２４によってインターネガ１２６が作成され、光学プリント１２８によって映画用ポジフィルムが作成され、フィルムプロジェクタ１３０に供される。
【００１０】
ここで、ＡＣＥＳ１００は、シーン基準の色空間として定義され、シーン自身を測色計で測定したＣＩＥの３刺激値ＸＹＺを線形変換した値を持ち、図１１に示すように、全てのスペクトル軌跡をカバーするＲＧＢ３原色の色度が定められ、１６ビット（bit float）でエンコーディングされる。即ち、ＡＣＥＳ１００で記述できる画像データの色範囲とダイナミックレンジは無制限と言える。また、ＡＣＥＳ１００の基準白色は、Ｄ６０とされている。
このように、広大な色空間であるＡＣＥＳ１００は、フィルムカメラ及びデジタルカメラで撮影された画像とＣＧ画像とを、原画マスターとして保管するための共通色空間でもあり、色調整も、ＡＣＥＳ空間で行われる。
一方、ＯＣＥＳ１０２は、１，０００，０００：１以上のダイナミックレンジを有する理想的なディスプレイデバイスを想定した出力色空間であり、ＲＲＴ変換１０４を介してＡＣＥＳ色空間１００と１対１で対応付けられている。ＯＣＥＳ１０２は、ＡＭＰＡＳ-ＩＩＦの内部色空間として位置付けられ、一般ユーザーがＯＣＥＳ画像データを直接ハンドリングすることは想定されていない。
【００１１】
このように、ＡＭＰＡＳ-ＩＩＦは、映像製作のポストプロダクション工程に標準を与えるものであり、様々な映像ソースを色調整の標準作業色空間（シーン基準の色空間：ＡＣＥＳ）に変換する仕組み、ＡＣＥＳから映画上映やＴＶ放映向きの観賞用映像を理想的な出力デバイスの色空間（ＯＣＥＳ）への変換する仕組み、ＯＣＥＳから実在する表示デバイスへ色変換する仕組みを提供するので、撮影後の編集工程における煩雑な画像変換、色調整作業を効率化することができる。
このように、ポストプロダクションでは、この標準ワークフローに従うことで、標準データフォーマット、かつ標準色空間で作業を行うことができ、画像交換における付帯作業が解消され、色調整作業の効率化、画像品質の向上、及び工数削減の効果を上げることができる。
【００１２】
しかしながら、映像撮影には、様々なメーカ、機種のデジタルカメラが使用され、撮影された映像の確認用モニタも、様々なメーカ、機種のものが使用され、確認用モニタに表示させる信号の色空間も様々である。そのため、撮影現場での映像確認において色を厳密に評価することができず、映像の色調整は、映像製作の後工程であるポストプロダクションで行われている。このポストプロダクションでの映像の色調整は、ＡＭＰＡＳ−ＩＩＦの色変換アーキテクチャを用いることにより、色調整作業の効率化、画像品質の向上、及び工数削減を図ることはできるが、映像製作において、撮影した色を決める決定権を持っているのは撮影現場の撮影監督であるので、現在、撮影後、現場で撮影を指揮した撮影監督がポストプロダクションの現場に赴いて、シーン毎の撮影意図に応じた色再現調整を、ポストプロダクションにいる色調整の専門家であるカラリストと一緒に同席して撮影映像を見ながら、様々なシーンやカットやフレームに必要な色調整を行う作業を行っている。
この色調整作業は、通常、試行錯誤の後、完了する工程であるため、全部の映像を見なくてはならないし、色調整をするカットやフレームを何回も繰り返して見ることになるので、非常に長い時間がかかる作業になっているという問題があり、また、人件費の高いの高い撮影監督やカラリストによる作業のため、映画制作のコストを引き上げる結果となっているという問題を招いていた。
【００１３】
ところで、特許文献１は、ビデオカメラによって撮像された映像信号を映画フィルムの色特性に合わせる技術を開示するものであるが、特性の異なるビデオカメラで撮像された映像信号に対してその特性を合わせる変換や、撮影シーンに対して忠実な色変換を目指すものではないし、特許文献２に開示の技術でも、特性の異なるカメラで撮像された映像に対してその特性を合わせる変換は行っておらず、撮影シーンに対して忠実な色の映像がディスプレイに表示されるわけではない。
したがって、これらの技術では、映画製作のポストプロダクションにおける色調整作業を予め撮影現場で行っておくことにより、色調整作業の効率化を図ることができない。
【００１４】
本発明の目的は、上記従来技術の問題点を解消し、映像製作、即ち映画やＴＶの製作において、撮影監督による撮影現場での色調整を可能にし、複数台のカメラを使用して撮影される映像データを、複数台のモニタで映像確認を行いながら色の調整を行う際に、複数台のカメラで撮影されたそれぞれの映像データに対して撮影シーンに対して忠実な色変換を行うことができ、また、複数台のカメラ間の色のマッチングを高精度に実現することができ、それによって映像製作工程をさらに効率化することができると共に、コストダウンを図ることができ、映像の品質を向上させることができる映像変換装置、これを用いる映画システムの撮影システム、映像変換方法、映像変換プログラム、及びその記録媒体を提供することにある。
【課題を解決するための手段】
【００１５】
上記課題を解決するために、本発明の第１の態様の映像変換装置は、カメラで撮影されたカメラ映像データ信号から映写用画像を作成する映画システムで、カメラによる撮影が行われる撮影システムに用いられる映像変換装置であって、カメラ映像データ信号を取得するカメラ映像信号取得ユニットと、カメラ映像データ信号を、カメラで撮影したシーン基準の色空間へ変換してシーン基準の色空間の第１の画像の映像データを求める第１の色変換ユニットと、第１の画像の映像データに対して色調整を行なわせ、色調整後の第１の画像の映像データを得る色調整ユニットと、この色調整後の第１の画像の映像データを、映像の出力の標準色空間へ変換して出力の標準の色空間の第２の画像の映像データを求める第２の色変換ユニットと、第２の画像の映像データを映像の最終出力となる最終出力デバイスの色空間へ変換した際に得られる最終出力デバイスの色を事前に異なる表示デバイスで確認させるために、第２の画像の映像データを確認用表示デバイスの色空間に変換して確認用表示デバイスの色空間の第３の画像の映像データを求める第３の色空間変換ユニットを有し、更に、色調整ユニットにおいて行われた色調整を含む編集加工の内容を記述した編集情報ファイルは、第３の画像の映像データのタイムコードと共に、映画システムのポストプロダクションである映像制作システムに送信されることを特徴とする。
【００１６】
ここで、最終出力デバイスは、複数台のカメラで撮影された複数種類のカメラ映像データ信号から映写用画像を作成する映画システムで映写用画像を上映するための映写機であり、映像変換装置は、複数台のカメラに、又は複数台のカメラのそれぞれに対応して接続され、また、複数台の確認用表示デバイスに、又は複数台の確認用表示デバイスのそれぞれに対応して接続されるものであり、確認用表示デバイスは、映画システムの撮影側で、最終出力デバイスの色を確認させるためのものであることが好ましい。
また、第３の画像の映像データは、低解像度の映像データであることが好ましい。
また、出力の標準の色空間は、出力デバイスに依存しない色空間であることが好ましい。
また、出力の標準の色空間は、１００００：１以上のダイナミックレンジを有する理想的な出力デバイスを想定した出力色空間、標準出力デバイスを想定した出力色空間、又は映画システムで映写機で上映される映写用フィルムのプレビューを想定した出力色空間であることが好ましい。
また、出力の標準の色空間は、理想的な出力デバイスのダイナミックレンジを、確認用表示デバイスへの色空間変換を行った後の、表示品質を低下させない範囲で削減した色空間でも良く、１００００：１以上のダイナミックレンジに削減した色空間でも良い。
また、カメラは、被写体を撮影してカメラ映像データ信号を取得するデジタルビデオカメラ又はデジタルカメラであることが好ましい。
【００１７】
また、さらに、映像変換装置に接続され、色調整ユニットによる色調整を制御するためのコントローラを備え、コントローラは、表示部と、コントローラ色変換ユニットと、映像解析ユニットと、制御ユニットと、入力ユニットと、を備え、コントローラ色変換ユニットは、第２の色変換ユニットによって得られた出力の標準の色空間の第２の画像の映像データを、表示部上に、最終出力デバイスの色を持つ編集加工映像として再現するための色変換をするためのものであり、映像解析ユニットは、色調整ユニットによって色調整され、表示部上に再現された最終出力デバイスの色を持つ編集加工映像を解析するためのものであり、入力ユニットは、色調整ユニットによる色調整のための色調整パラメータを入力すると共に、表示部の表示を切り換えるためのものであり、制御ユニットは、入力ユニットから入力された色調整パラメータに応じて色調整ユニットによる色調整を制御するためのものであり、表示部は、表示部上に再現された最終出力デバイスの色を持つ編集加工映像、及び／又は映像解析ユニットによる映像解析の結果を表示する表示画面、並びに入力ユニットによる色調整パラメータの入力画面を備えるものであることが好ましい。
【００１８】
また、表示部は、色調整ユニットによって色調整され、表示画面に表示された編集加工映像上の、入力ユニットによって選択された部分の解析結果を表示画面上に表示することが好ましい。
また、表示部の表示画面は、映像を表示する領域と、入力ユニットによる選択部分の解析結果及び／又は映像解析ユニットによる映像解析の結果を表示する領域とを備えることが好ましい。
また、表示部は、映像の各画素が、最終出力デバイスの色空間から外れている場合、もしくは入力ユニットによる選択部分の解析結果が、最終出力デバイスの色空間から外れている場合に、表示画面上に警告を表示するものであることが好ましい。
【００１９】
また、コントローラは、さらに、映像の各画素が、最終出力デバイスの色空間から外れている場合、もしくは入力ユニットによる選択部分の解析結果が、最終出力デバイスの色空間から外れている場合に、音声で警告を発する警報ユニットを備えることが好ましい。
また、コントローラは、色調整ユニットに回線接続され、制御ユニットの制御に基づく色調整パラメータに応じて色調整ユニットによる色調整を行わせることが好ましい。
また、さらに、色調整ユニットによる色調整値及び／又は色調整参照テーブル、及び／又は、色調整ユニットによって色調整された、最終出力デバイスの色を持つ又は出力の標準色空間編集加工映像の低解像度及び／又は圧縮画像を出力する出力ユニットを備えることが好ましい。
また、色調整ユニットによる色調整値及び／又は色調整参照テーブル、及び／又は、色調整ユニットによって色調整された編集加工映像画像を、撮影時の日付及び／又はタイムコードと対応付けて出力することが好ましい。
【００２０】
また、上記課題を解決するために、本発明の第２の態様の映画システムの撮影システムは、複数台のカメラと、複数台のカメラに対応してそれぞれ配置された複数台の、上記第１の態様の映像変換装置と、複数台の映像変換装置に対応してそれぞれ配置された確認用表示デバイスと、複数台のカメラで撮影されたカメラ映像データ信号を格納する撮影映像格納装置と、色調整ユニットによって色調整された、最終出力デバイスの色を持つ編集加工映像の低解像度画像を格納する編集加工映像格納装置と、を備え、映像変換装置は、色調整ユニットにおいて行われた色調整を含む編集加工の内容を記述した編集情報ファイルは、第３の画像の映像データのタイムコードと共に、映画システムのポストプロダクションである映像制作システムに送信されることを特徴とする。
また、低解像度の第３の画像の映像データは、低解像度の映像データであることが好ましい。
【００２１】
また、上記課題を解決するために、本発明の第３の態様の映像変換方法は、カメラで撮影されたカメラ映像データ信号から映写用画像を作成する映画システムで、カメラによる撮影が行われる撮影システムで行われる映像変換方法であって、カメラ映像データ信号を取得し、カメラ映像データ信号を、カメラで撮影したシーン基準の色空間へ変換してシーン基準の色空間の第１の画像の映像データを求め、第１の画像の映像データに対して色調整を行なわせ、色調整後の第１の画像の映像データを得、この色調整後の第１の画像の映像データを、映像の出力の標準色空間へ変換して出力の標準の色空間の第２の画像の映像データを求め、第２の画像の映像データを映像の最終出力となる最終出力デバイスの色空間へ変換した際に得られる最終出力デバイスの色を事前に異なる表示デバイスで確認させるために、第２の画像の映像データを確認用表示デバイスの色空間に変換して確認用表示デバイスの色空間の第３の画像の映像データを求めることを含み、色調整を含む編集加工の内容を記述した編集情報ファイルは、第３の画像の映像データのタイムコードと共に、映画システムのポストプロダクションである映像制作システムに送信されることを特徴とする。
【００２２】
また、上記課題を解決するために、本発明の第４の態様は、コンピュータに、上記第３の態様の映像変換方法の各手順を実行させるための映像変換プログラムを提供するものである。
また、上記課題を解決するために、本発明の第５の態様は、コンピュータに、上記第３の態様の映像変換方法の各手順を実行させるための映像変換プログラムを記載したコンピュータに読取可能な記録媒体を提供するものである。
【発明の効果】
【００２３】
本発明の各態様によれば、上記構成により、映画システムの撮影現場において、撮影監督自らが色調整を行うことを可能にすることにより、複数台のカメラを使用して撮影される映像データを、複数台のモニターで映像確認を行いながら色の調整を行う際に、複数台間の色のマッチングを高精度に実現することができ、それによって映像製作工程をさらに効率化することができると共に、コストダウンを図ることができ、映像の品質を向上させることができる。
【００２４】
また、本発明の各態様によれば、映画システムにおける色調整工程に対してその一部を行うことを可能とすることにより、撮影監督自らタイムラグが少ない内に、撮影意図に応じた色調整を実施可能となり、ポストプロダクションでの試行錯誤回数を減らすことができ、コストダウンを図ることができる。
また、本発明の各態様によれば、撮影現場での色評価、調整が可能となることで、色に関する撮影ミスを低減でき、撮影監督の意図に合わせた撮影、調整が即座に可能となり、映像の品質を向上させることができる。
本発明は、ポストプロダクションでの適用しか想定されていないＡＭＰＡＳ-ＩＩＦを撮影現場へ適用可能とする仕組みを提供するものであり、それによって映像製作工程をさらに効率化すると共に、映像の品質を向上させる効果を上げることができる。
【図面の簡単な説明】
【００２５】
【図１】本発明の実施の形態に係る映像変換装置を用いる映画システムの構成の一例を模式的に示すブロック図である。
【図２】図１に示す映像変換装置の構成及び処理の流れ一例を示す概念模式図である。
【図３】図１に示す映像変換装置のコントローラの構成の一例を模式的に示すブロック図である。
【図４】図３に示すコントローラの表示部の色調整パラメータの入力画面の一例を示す模式図である。
【図５】図３に示すコントローラの表示部の色調整パラメータの入力画面の他の例を示す模式図である。
【図６】図３に示すコントローラの表示部の映像解析の結果を表示する表示画面の一例を示す模式図である。
【図７】図３に示すコントローラの表示部の色調整パラメータの入力画面の他の例を示す模式図である。
【図８】図３に示すコントローラの表示部の表示画面の一例を示す模式図である。
【図９】図１に示す映画システムの撮影システムの色調整入力補助装置の一例を示す外観図である。
【図１０】映画システムのポストプロダクションで行われるデジタル映画制作ワークフロー規格の色変換アーキテクチャーの一例を示すブロック図である。
【図１１】図１０に示す色変換アーキテクチャーの入力色空間を含む種々の色空間の色度図である。
【発明を実施するための形態】
【００２６】
以下に、本発明に係る映像変換装置、これを用いる映画システムの撮影システム、映像変換方法、及び映像変換プログラムを、添付の図面に示す好適実施形態に基づいて詳細に説明する。
図１は、本発明の実施の形態に係る映像変換装置を用いる映画システムの構成の一例を模式的に示すブロック図である。
【００２７】
図１に示すように、映画システム１０は、カメラによる撮影を行いカメラ映像データ信号を得ると共に、その色調整も行う撮影システム（撮影現場）１２と、撮影システム１２からのカメラ映像データから編集加工された映像ソースデータを作成し、デジタルプロジェクタ出力用デジタル映像データ又はフィルムプロジェクタ用上映用ポジフィルムを製作する映像制作システム（ポストプロダクション）１４と、デジタルプロジェクタ又はフィルムプロジェクタで映画映像を上映する上映システム（シアタ）１６とを有する。
【００２８】
撮影現場の撮影システム１２は、２台のカメラＡ１８ａ及びＢ１８ｂと、これらのカメラＡ１８ａ及びＢ１８ｂ（１８で総称する）にそれぞれ接続される本発明に係る２台の映像変換装置Ａ２０ａ及びＢ２０ｂと、これらの映像変換装置Ａ２０ａ及びＢ２０ｂにそれぞれ接続されるモニタＡ２２ａ及びＢ２２ｂと、映像変換装置Ａ２０ａ及びＢ２０ｂで色調整等の編集加工がなされた低解像度の出力用編集加工映像データや、編集加工の内容を記憶して格納する編集加工映像格納装置２４と、映像変換装置Ａ２０ａ及びＢ２０ｂ並びに編集加工映像格納装置２４を制御するコントローラ２６と、コントローラ２６の色調整操作を補助する色調整補助入力装置２７と、カメラ１８で撮影して得られたカメラ映像データを記憶して格納する撮影映像格納装置２８と、を有する。
【００２９】
カメラ１８は、被写体を撮影してカメラ映像データ信号を取得するためのものである。このようなカメラとしては、カメラ映像データ信号が取得できればどのようなカメラでも良いが、デジタル映像データが取得できるデジタルビデオカメラ又はデジタルカメラであるのが好ましい。なお、図示例の撮影システム１２では、２台のカメラＡ１８ａ及びＢ１８ｂを備えているが、３台以上のカメラを備えていても良い。
本発明で用いられるカメラは、異なるメーカや異なる機種であっても良いことはもちろんであり、その場合には、本発明は、より高い効果を発揮することができる。
【００３０】
映像変換装置Ａ２０ａ及びＢ２０ｂは、本発明の実施の形態の映像変換装置であり、カメラＡ１８ａ及びＢ１８ｂにそれぞれ１対１（１：１）対応で設けられるもので、撮影現場の撮影システム１２において、撮影監督やカラリスト等が撮影後直ちに色調整でき、映像の最終出力となる最終出力デバイス、例えば、デジタルプロジェクタやフィルムプロジェクタで用いる上映ポジフィルムの色空間へ変換した際に得られる、上映システム１６のデジタルプロジェクタやフィルムプロジェクタ等の映写機で再現される色、上映される映像の色を事前に映写機とは異なる表示デバイスであるモニタＡ２２ａ及びＢ２２ｂでそれぞれ確認させるようにするためのものである。
なお、以下では、映画システム１０の最終出力デバイスは、デジタルプロジェクタを代表例として説明する。
上述したように、３台以上のカメラを備えている場合には、それぞれに対応して３台以上の映像変換装置を備えているのが良い。
【００３１】
また、映像変換装置Ａ２０ａ及びＢ２０ｂ（２０で総称する）は、撮影監督等によって行われた色調整等の編集加工の内容（色調整パラメータ、階調調整パラメータ、その他の画像処理パラメータ等）、例えばＣＤＬ（カラーディシジョンリスト）や色調整用の３ＤＬＵＴ（３次元ルックアップテーブル）等の編集加工の内容を記述した編集情報ファイルＥＤＬ（エディットディシジョンリスト）をカメラ映像データのタイムコードと共に、ポストプロダクションの映像制作システム１４に送信する。ここで、ＣＤＬは、生データであるカメラ映像データに対して行う編集加工（色・階調の変更、その他の画像処理全般を含む）の内容を記述したものであり、３ＤＬＵＴは、その編集加工の内容を実施するために用いるものである。このようなタイムコード付きＣＤＬや、３ＤＬＵＴ等のＥＤＬは、映像制作システム（ポストプロダクション）１４に送信され、映像制作システム１４において、映像ソースデータを作成するためのカメラ映像データの編集加工に用いられる。
こうすることにより、撮影現場での色調整状態を撮影システム１２からポストプロダクション１４に伝えることができる。
【００３２】
ここで、映像変換装置２０で用いるカメラ映像データは、映像確認や色調整のために用いられるものであるので、必ずしも、カメラ１８で撮影されたフルサイズのカメラ映像データである必要はなく、小サイズのカメラ映像データ、低解像度のカメラ映像データであっても良い。色調整のリアルタイム性を重要視する場合には、小サイズ、低解像度カメラ映像データであるのが好ましい。
なお、映像変換装置２０の詳細な構成については後述する。
【００３３】
モニタＡ２２ａ及びＢ２２ｂ（２２で総称する）は、映像変換装置Ａ２０ａ及びＢ２０ｂにそれぞれ１対１（１：１）対応で設けられるもので、映像変換装置Ａ２０ａ及びＢ２０ｂによる色調整の結果をそれぞれ表示するための表示デバイスであって、撮影監督等が撮影後直ちに色調整した映写機で上映される映像の色を、撮影現場で直ちに確認するためのモニタである。
上述したように、３台以上の映像変換装置を備えている場合には、それぞれに対応して３台以上のモニタを備えているのが良い。
本発明で用いられるモニタは、上映システム１６の映写機で上映される映像の色を再現し、表示できれば特に制限的ではなく、従来公知の表示デバイスを用いることができる。なお、本発明で用いられるカメラは、異なるメーカーや異なる機種であっても良いことはもちろんであり、その場合には、本発明は、より高い効果を発揮することができる。
【００３４】
本実施形態では、上述したように、複数台のカメラ１８が用いられ、複数台のカメラ１８に対し、それぞれに対応する複数台の映像変換装置２０が備えられ、複数台の映像変換装置２０に対し、それぞれに対応する複数台のモニタ２２が備えられるのが好ましいが、即ち、カメラ１８、映像変換装置２０及びモニタ２２は、１：１：１対応であるのが好ましいが、本発明はこれに限定されず、１台の映像変換装置２０を用いる場合であっても、複数台の映像変換装置２０を用いる場合であっても、１台の映像変換装置２０に対して複数台のカメラ１８が備えられ、複数台のモニタ２２が備えられていても良い。
【００３５】
編集加工映像格納装置２４は、映像変換装置２０で色調整等の編集加工がなされた低解像度の出力用編集加工映像データを記憶して格納するためのものであり、ハードディスクやメモリ等によって構成される。ここで、低解像度の出力用編集加工映像データは、生データであるカメラ映像データに対して編集加工（色・階調の変更、その他の画像処理全般を含む）された映像データである。なお、この低解像度編集加工映像データは、低解像度のカメラ映像データに対して編集加工された映像データであるのが好ましい。
編集加工映像格納装置２４に格納された低解像度編集加工映像データは、映像制作システム（ポストプロダクション）１４に送信され、映像制作システム１４において、映像ソースデータを作成するためのカメラ映像データの編集加工に用いられる。
なお、本実施形態においては、低解像度のカメラ映像データや低解像度の編集加工映像データや、編集加工映像の低解像度画像は、元々低解像度の映像データや画像であるものに限定されず、高解像度又は通常の解像度の映像データや映像や画像を圧縮したものであっても良いし、圧縮して低解像度にしたものであって良い。
【００３６】
コントローラ２６は、映像変換装置２０及びに編集加工映像格納装置２４を制御するためのものであり、映像変換装置２０と共に本発明の映像変換装置を構成する。
コントローラ２６は、撮影監督等が撮影後、モニタ２２に表示された撮影映像の再現色を確認しながら、色調整する際に、色調整のための色調整パラメータを入力すると共に、色調整された映像、及び／又はその解析、特に映像の色の解析の結果をその表示部に表示し、色調整された映像の各画素、もしくは映像の色調整の結果、少なくとも選択部分の解析結果が、最終出力デバイスであるデジタルプロジェクタの色空間から外れる場合などには、警告を表示したり、警報を発したりするためのものである。
コントローラ２６としては、映像変換装置２０及び編集加工映像格納装置２４と有線又は無線で通信でき、映像変換装置２０及び編集加工映像格納装置２４を制御できれば、どのようなものでも良く、例えば、イーサネット（登録商標）等の通信網を介して接続されるパソコン（ＰＣ）、例えば、ノート型ＰＣや、デスクトップ型ＰＣや、ｉＰａｄ（商品名）等のタブレット型ＰＣ等を用いることができる。
なお、コントローラ２６の詳細な構成については後述する。
【００３７】
色調整入力補助装置２７は、図９に示すように、コントローラ２６又は映像変換装置２０に接続することにより、コントローラ２６で行う色調整操作の操作性を向上させるためのものである。色調整入力補助装置２７は、図９にその外観を示すが、トラックボール２９ａやダイアル２９ｂ等のユーザーインターフェース２９を持ち、トラックボール２９ａやダイアル２９ｂ等のユーザーインターフェース２９の操作に応じて、コントローラ２６の色調整パラメータが連動することにより、色調整を実現する。
【００３８】
撮影映像格納装置２８は、カメラ１８で撮影して得られたカメラ映像データ自体、即ちカメラ映像データを編集加工することなく生データのまま記憶して格納するもので、ハードディスクやメモリ等によって構成される。
撮影映像格納装置２８に格納されたカメラ映像データは、映像制作システム（ポストプロダクション）１４に送信され、映像制作システム１４において、映像ソースデータを作成するための編集加工に供される。
【００３９】
以上のように構成される撮影システム１２においては、撮影監督等が撮影後、撮影現場で、カメラ１８で撮影して得られたカメラ映像データを、それぞれ映像変換装置２０、及びコントローラ２６を用いて色調調整等の編集加工を行うことができ、モニタ２２において、編集加工の結果、映画システム１０の最終出力デバイスであるデジタルプロジェクタで再現される映像や色を表示することができるので、メーカや機種の異なる複数台のカメラ１８で撮影されたカメラ映像データを、メーカや機種の異なる複数台のモニタ２２に表示して映像を確認しながら、色調調整等の編集加工を行う場合あっても、複数台のカメラ１８間、複数台のモニタ２２間の色等のマッチングを高精度に行うことができる。
【００４０】
次に、ポストプロダクションの映像制作システム１４は、撮影システム１２からカメラ映像データや撮影現場でなされた色調整等の編集加工の内容及び低解像度の出力用編集加工データなどを取得する映像データ取得装置３０と、映像データ取得装置３０で取得された色調整等の編集加工の内容及び低解像度の出力用編集加工データに従って、カメラ映像データに対して色調調整等の編集加工を行い、編集加工された映像ソースデータを生成する編集装置３２と、この編集装置３２で生成された映像ソースデータからデジタルプロジェクタ出力用デジタル映像データを生成してハードディスク等に記録する、又は最終的にフィルムプロジェクタ用上映用ポジフィルムを製作する記録装置３４とを有する。
映像データ取得装置３０は、撮影システム１２の撮影映像格納装置２８からカメラ映像データを取得し、映像変換装置Ａ２０ａ及びＢ２０ｂからタイムコード付きＣＤＬや３ＤＬＵＴ等の編集加工の内容を記述した編集情報ファイル（ＥＤＬ）を取得し、編集加工映像格納装置２４から低解像度の出力用編集加工映像データを取得するためのものである。
【００４１】
編集装置３２は、映像データ取得装置３０で取得されたタイムコード付きＣＤＬや３ＤＬＵＴ等の色調整等の編集加工の内容を記述した編集情報ファイル（ＥＤＬ）、及び低解像度の出力用編集加工データに従って、映像データ取得装置３０で取得されたカメラ映像データに対して色調調整等の編集加工を行い、編集加工された映像ソースデータを生成するためのものである。編集装置３２で行われる編集加工には、ＣＤＬやＥＤＬに従った合成・編集・カット、３ＤＬＵＴ等を用いた色調整（色調調整）・階調調整など、映画制作に必要となるあらゆる編集加工が含まれる。
【００４２】
図示例のポストプロダクション１４の編集装置３２においては、本発明の映像変換装置２０を用いる撮影システム１２において、複数台のカメラ１８で撮影されたカメラ映像データであっても、撮影現場で予め撮影監督等により映像確認しながら色調整等編集加工が行われており、その編集加工の内容（ＣＤＬ、３ＤＬＵＴ等のＥＤＬ）やその低解像度編集加工映像データが提供されるので、ポストプロダクション１４における撮影監督及びカラリスト等による全映像を見ながらの試行錯誤の色調調整を行う必要がなく、ポストプロダクション１４の映像製作工程をさらに効率化することができると共に、コストダウンを図ることができ、映像の品質を向上させることができる。
【００４３】
記録装置３４は、編集装置３２で生成された映像ソースデータからデジタルプロジェクタ出力用デジタル映像データを生成してハードディスク等に記録するためのものである。
なお、記録装置３４は、編集装置３２で生成された映像ソースデータから、図１０に示すように、フィルムレコーダによってインターネガを作成し、光学プリントによって映画用ポジフィルムを作成し、最終的にフィルムプロジェクタで上映するための上映用ポジフィルムを製作するものであっても良い。
【００４４】
次に、シアターの上映システム１６は、映像制作システム１４で作成された出力用デジタル映像データに基づいてデジタル映像として映画を上映する、又は映像制作システム１４で作製された上映用ポジフィルムを用いて映画を上映する映写機３６を有する。
映写機３６としては、映像制作システム１４から配信される出力用デジタル映像データに基づいてデジタル映像を映写するデジタルプロジェクタであっても良いし、映像制作システム１４で作製された上映用ポジフィルムの映像を映写するフィルムプロジェクタであっても良い。
【００４５】
次に、図２に基づいて、本発明の実施の形態に係る映像変換装置について説明する。
図２は、図１に示す映像変換装置の構成及び処理の流れ一例を示す概念模式図である。
同図に示す映像変換装置２０は、基本的に、映画システム１０のポストプロダクション１４で用いられる図１０に示すＡＭＰＡＳ-ＩＩＦの色変換アーキテクチャを、撮影システム１２に適用可能にしたもので、入力部３８と、入力色変換部（インプットトランスフォームセクション：Input Transform Section）４０と、色調整部（ルックモディフィケーションセクション：Look Modification Section）４２と、出力色変換部（ターゲットレンダリングセクション：Target Rendering Section）４４と、撮影側モニタ色変換部（オンセットモニタートランスフォームセクション：Onset Monitor Transform Section）４６と、コントローラ色変換部（コントローラトランスフォームセクション：Controller Transform Section）４８と、データ出力部５０と、モニタ出力部５２とを有する。
【００４６】
入力部３８は、カメラ１８で撮影されたカメラ映像データが入力され、入力色変換部４０内にカメラ映像データ５４を取得する部分である。
入力色変換部４０は、図１０に示すＡＭＰＡＳ-ＩＩＦの色変換アーキテクチャの場合と同様に、カメラ映像データ５４を入力色空間ＡＣＥＳ６０（における映像データ）に変換するためのもので、入力デバイス変換のＩＤＴ変換部５６と、カメラキャリブレーション部５８と、を有する。
【００４７】
ＩＤＴ変換部５６は、図１０に示すＩＤＴ１０６と同様に、カメラ１８で撮影されたカメラ映像データ５４（カメラ１８の色空間）を入力の共通色空間であるＡＣＥＳ６０（の映像データ）に変換するものである。
カメラキャリブレーション部５８は、ＩＤＴ変換部５６で入力色空間ＡＣＥＳ６０（の映像データ）に変換された映像データを、カメラの個体差に応じて補正するものである。
こうすることにより、メーカや機種の異なる複数台のカメラ１８で撮影されたカメラ映像データは、シーン基準の色空間として定義される入力色空間ＡＣＥＳ６０（の映像データ）に変換されるので、同一シーンであれば、同一の色の映像データに変換される。
こうして、メーカや機種の異なる複数台のカメラ１８で撮影されたカメラ映像データであっても、高精度にマッチングの取れた入力色空間ＡＣＥＳ６０の映像データとすることができる。
【００４８】
色調整部４２は、本発明の最も特徴とする部分であって、ルックモディフィケーションセクションと呼ばれ、撮影現場で色を調整することを可能とするためのもので、入力色空間ＡＣＥＳ６０において、上述したコントローラ２６による色調整パラメータに基づいて映像の色、例えばシーンの色を調整させる、即ち撮影監督等に撮影現場で映像確認しながら調整させることを可能にするためのものであり、入力色空間ＡＣＥＳ６０においてコントローラ２６による色調整パラメータに基づく色調整を行うＬＭＴ（ルックモディフィケーショントランスフォーム：Look Modification Transform）変換部６２を有する。
ここで、ＬＭＴ変換部６２は、映像コンテンツやストーリ、シーンの雰囲気にあわせた演出のための現場監督等のユーザ指示に基づく色調整を実施するものである。なお、ＬＭＴ変換部６２は、入力色空間ＡＣＥＳ６０において、映像データを色調整済映像データに変換するので、色調整済映像データの色空間も、ＡＣＥＳであるが、ここでは、入力色空間ＡＣＥＳ６０ａとして表わす。
なお、色調整部４２で行われる色調整の詳細については、後述する。
【００４９】
出力色変換部４４は、ターゲットレンダリングセクションと呼ばれ、その後、ＡＣＥＳ映像を、予め指定されている、映像コンテンツの出力ターゲット（映画館向けなのかＴＶ放送向けなのか？  デジタル上映なのかフィルム映写なのか？  フィルムの種類は何なのか？等）に応じたレンダリング（編集加工）を施し、ターゲット出力デバイスの、出力デバイスに依存しない出力標準色空間内に変換する。即ち、出力色変換部４４は、入力色空間ＡＣＥＳ６０ａ（６０）を、出力デバイスに依存しない出力標準色空間（ＤＩＣ：Device Independent Color：デバイスインディペンデントカラー）６６に色変換するためのもので、入力色空間ＡＣＥＳ６０ａ（６０）の映像データを、出力色に編集加工して、出力標準色空間ＤＩＣ６６の編集加工された画像データとする出力色へのレンダリング変換部６４を有する。
【００５０】
ここで、出力標準色空間ＤＩＣ６６は、出力デバイスに依存しない標準色空間であれば特に制限はないので、図１０に示すＡＭＰＡＳ-ＩＩＦの色変換アーキテクチャーの出力の共通色空間であるＯＣＥＳ１０２であっても良い。従って、この場合には、レンダリング変換部６４は、図１０に示すＲＲＴ変換部１０４であれば良い。
この他、例えば、レンダリング変換部６４を、ＲＤＴ変換部、映画用フィルムのためのフィルムプレビューのための変換部等で構成しても良い。
したがって、出力標準色空間（ＤＩＣ）は、理想的な出力デバイスのダイナミックレンジを、確認用表示デバイスへの色空間変換を行った後の、表示品質を低下させない範囲で削減した色空間でも良く、１００００：１以上のダイナミックレンジに削減した色空間でも良い。
また、出力標準色空間（ＤＩＣ）は、標準出力デバイスを想定した出力色空間、又は映画システムで映写機で上映される映写用フィルムのプレビューを想定した出力色空間であっても良い。
【００５１】
撮影側モニタ色変換部４６は、オンセットモニタートランスフォームセクションと呼ばれ、撮影現場のプレビューモニタ表示用（ＭＣＶ：Monitor Code Value)に、色空間及びガンマ変換、モニタ２２単体ごとのキャリブレーションが施され、接続されているプレビューモニタ２２へ映像データ信号として映像を送るためのものである。即ち、撮影側モニタ色変換部４６は、出力デバイスに依存しない出力標準色空間（ＤＩＣ）６６から、現実の出力デバイスであるモニタ２２に依存する色空間（ＤＤＣ：Device dependent Color：デバイスディペンデントカラー）に変換し、出力標準色空間（ＤＩＣ）６６の映像データから、映画システム１０の最終出力デバイスであるデジタルプロジェクタで再現される色をモニタ２２で表示するためのモニタ映像データ７２に変換するためのもので、色空間やγ値を変換するモニタ色空間変換部６８と、モニタ２２の個体差に応じた変換を行うモニタキャリブレーション部７２と、を有する。
【００５２】
モニタ色空間変換部６８は、モニタ２２に表示するために、出力標準色空間（ＤＩＣ）６６の映像データを、モニタ２２の色空間に変換すると共に、モニタ２２のγ特性に合わせるように変換するものである。
モニタキャリブレーション部７２は、モニタ色空間変換部６８でモニタ２２の色空間に変換された映像データを、モニタ２２の個体差に応じて補正するものである。
こうすることにより、メーカや機種の異なる複数台のモニタ２２で表示される映像であっても、映画システム１０の最終出力デバイスであるデジタルプロジェクタで再現される色と同じ色を表示することができる。
こうして、メーカや機種の異なる複数台のモニタ２２で表示された映像であっても、高精度にマッチングの取れた映像とすることができる。
【００５３】
コントローラ色変換部４８は、コントローラトランスフォームセクションと呼ばれ、コントローラ２６でのサムネイル映像確認用に、コントローラ２６の表示部（ディスプレイ８４：図３参照）の（ＣＣＶ：Controller Code Value）に合わせたキャリブレーションを行い、出力しても良い。即ち、コントローラ色変換部４８は、出力色変換部４４の出力標準色空間（ＤＩＣ）６６のサムネイル映像データを、映画システム１０の最終出力デバイスであるデジタルプロジェクタで再現される色をコントローラ２６の表示部（８４）で表示するためのコントローラ映像データに変換して、コントローラ表示用サムネイル画像７６（図４、図５、図６の各参照符号８６ｄ、８８ｇ、９０ｄ参照）として表示するもので、コントローラ２６の個体差に応じた変換を行うコントローラキャリブレーション部７４を有する。
コントローラキャリブレーション部７４は、出力色変換部４４の出力標準色空間（ＤＩＣ）６６の映像データを、コントローラ２６の表示部（８４）の色空間の映像データに変換すると共に、コントローラ２６の個体差に応じて補正するものである。
こうすることにより、コントローラ２６の表示部（８４）にも、映画システム１０の最終出力デバイスであるデジタルプロジェクタで再現される色と同じ色を表示することができる。
【００５４】
データ出力部５０は、撮影側モニタ色変換部４６のモニタ色空間変換部６８から、標準的な色空間とガンマ変換（例えばｒｅｃ７０９やｓＲＧＢ等）のみを施した信号を撮影後に毎日行われる映像試写(Ｄａｉｌｉｅｓ)用のデータとしてポストプロダクション１４に出力するためのものである。データ出力部５０は、設けられていなくても良い。
モニタ出力部５２は、撮影側モニタ色変換部４６からプレビュー用モニタ２２にモニタ映像データ信号を出力するためのものである。
本発明に係る映像変換装置は、基本的に以上のように構成される。
【００５５】
コントローラ２６は、上述したように、映像変換装置２０と共に本発明の映像変換装置を構成するものであり、映像変換装置２０及びに集加工映像格納装置２４を制御するためのものである。
図３に、図１に示すコントローラの構成の一例を模式的に示すブロック図を示す。
また、図４、図５及び図７に、それぞれ図３に示すコントローラの表示部の色調整パラメータの入力画面を示し、図６に、図３に示すコントローラの表示部の映像解析の結果を表示する表示画面を示し、図８に、図３に示すコントローラの表示部の過去の色調整情報リストの一例を表示する表示画面を示す。
コントローラ２６は、図２に示すコントローラ色変換部４８と、映像解析部７８と、入力部８０と、制御部８２と、表示部（ディスプレイ）８４と、警報部８５とを有する。
【００５６】
コントローラ色変換部４８は、上述したように、出力色変換部４４によって得られた出力標準色空間（ＤＩＣ）の映像データを、表示部８４上に、映画システム１０の最終出力デバイスであるデジタルプロジェクタの色を持つ編集加工映像として再現するための色変換をするためのものである。
映像解析部７８は、色調整部４２によって色調整され、表示部８４上に再現された最終出力デバイスの色を持つ編集加工映像を解析するためのものである。
入力部８０は、色調整部４２による色調整のための色調整パラメータ等を入力すると共に、表示部８４の表示を切り換えるためのものである。
制御部８２は、入力８０から入力された色調整パラメータに応じて色調整部４２による色調整を制御するためのものである。
【００５７】
表示部８４は、表示部８４上に再現された最終出力デバイスの色を持つ編集加工映像、及び／又は映像解析部７８による映像解析の結果を表示する表示画面、並びに入力部８０による色調整パラメータ等の入力画面を備えるものである。
また、表示部８４には、
なお、再現される編集加工映像は、映画システム１０の最終出力デバイスであるデジタルプロジェクタの色を持つものに限定されず、出力標準色空間（ＤＩＣ）を持つ編集加工映像であっても良い。
【００５８】
なお、表示部８４は、色調整部４２によって色調整され、表示画面に表示された編集加工映像上の、入力部８０によって選択された部分の解析結果を表示画面上に表示することが好ましく、表示部の表示画面は、映像を表示する領域と、入力部８０による選択部分の解析結果及び／又は映像解析部７８による映像解析の結果を表示する領域とを備えることが好ましい。
また、表示部８４は、その表示画面に表示された映像の各画素が、最終出力デバイスであるデジタルプロジェクタの色空間から外れている場合、もしくは入力部８０による選択部分の解析結果が最終出力デバイスであるデジタルプロジェクタの色空間から外れている場合に、表示画面上に警告を表示するものであっても良い。
更に、コントローラ２６は、色調整された映像の各画素もしくは映像の色調整の結果、例えば、少なくとも選択部分の解析結果が、最終出力デバイスであるデジタルプロジェクタの色空間から外れる場合などに、音声で警告を発する警報部８５を備えていても良い。
【００５９】
以下に、コントローラ２６の表示部８４の表示画面及び入力画面の具体例について説明する。
図４は、映像変換装置２０の色調整部４２のＬＭＴ変換部６２に色調整を行わせるためのコントローラ２６の表示部８４に表示されるＬＭＴのユーザインターフェースの入力画面例である。このＬＭＴ入力画面８６は、コントローラ２６の表示部８４上に表示され、ユーザは、コントローラ２６の入力部８０を使って色調整を行うことができる。この入力画面８６は、映像の階調特性を調整するためのものであり、映像変換特性グラフ（入力：調整前、出力：調整後）８６ａのトーンカーブを任意に調整する事ができるものである。これによって、全体の明るさ、ハイライト、中間調、シャドウそれぞれの階調の傾きをコントロールできるようにしている。なお、画面右側の明度スライドバー８６ｂを調整する事でその色温度を調整できる。
【００６０】
図５は、ハイライト領域、中間領域、及びシャドウ領域のそれぞれの領域で、原色（ＲＧＢ）、２次色（ＣＭＹ）の色相、明度、彩度を調整できるコントロール画面である。この入力画面８８は、中央のマーカ領域８８ａのＲＧＢＣＭＹの６色のそれぞれのマーカ８９ａを移動することで、６色の中心方向が彩度低下、中心から離れるに従い彩度向上、他の色に近づくように移動させるとその色味を帯びた色相に変化する。また、中心のグレーマーカ８９ｂを移動させることで、色バランスを変更することが可能である。
各マーカ８９ａを選択した状態で画面右側の左側の明度スライドバー８８ｂを調整することでその色の明度を調整できる。同様に、画面右側の真中のスライドバー８８ｃを調整することでその色の彩度を調整することもでき、画面の最も右側のスライドバー８８ｄを調整することでその色の色温度を調整することもできる。
なお、アイコン８８ｅは、シャドウ（Shadow）領域、ミドル（Middle）部、ハイライト部（Highlight）、及び全体領域（Over All）の内のいずれの領域の色調整であるかを示す。
【００６１】
図４に示す領域８６ｄ及び図５に示す領域８８ｇは、図６に示すプレビューモニタ画面９０に表示させる画像を切り替える部分であり、現在撮影されているライブ動画のサムネイル表示（Ｌｉｖｅ）、選択ボタン（Ｓｅｌｅｃｔ）を押したタイミングで取得・設定された静止画のサムネイル表示（Ｓｅｌｅｃｔｅｄ）、１回前に選択された静止画のサムネイル表示（ＬａｓｔＳｅｌｅｃｔｅｄ）を切り替えることができることを示す。ライブ動画表示を選択した場合には、撮影している動画に対してリアルタイムで色調整を適用、表示させることができる。
図４に示すアイコン８６ｃ及び図５に示すアイコン８８ｆでは、コントローラ２６の表示部８４の色調整の方法を選択できるようになっており、前述した図４のトーンカーブ調整ＴｏｎｅＣｕｒｖｅの入力画面８６、前述の図５の６色調整６Ｃｏｌｏｒｓの入力画面８６、図７のＣＤＬ調整ＣＤＬの入力画面９２が選択できる。ＬＭＴログボタン（ＬＭＴＬｏｇ）を押すと、図８に示すように、過去に作成した色調整情報リストを表示し、それを選択／適用することで、過去の調整値を現在の動画に適用／編集できるようにすることが可能である。
【００６２】
図７は、コントローラ２６の表示部８４に表示されたＣＤＬ調整の入力画面９２を示している。トラックボール９４ａやダイアル９４ｂのコントロールを回転操作により変更することで、ＣＤＬの色調整パラメータ（オフセット、ガンマ、ゲイン、彩度）を変更することができる。
図８は、表示部８４に表示された、過去に作成した色調整情報リストの表示画面９６を示し、表示画面９６には、色調整された静止画の複数のサムネイルと、各色調整日と、各色調整の内容と、各ＬＭＴ設定値（図４、図５に示すアイコン８６ｃ、８８ｆと同様）のリストが示される。
また、図９に示す色調整入力補助装置２７を、コントローラ２６または映像変換装置２０に接続し、色調整入力補助装置２７の操作がコントローラ２６の色調整画面のコントロールGUI（トラックボールやダイヤルの回転量、グラフ、数値等）に反映させるようにすることで操作性を向上させることができる。
【００６３】
図６は、撮影映像の解析を行うためのコントローラ２６の表示部８４の表示画面の一例である。
この表示画面９０では、動画像９０ａ上の画素９１ａを入力部８０のマウス等で指定することで、画像ヒストグラム９０ｃ上におけるその画素（部位）９１ｂの位置を知ることができる。また、真中のグラフ９０ｂは、ガマット（色再現域）外判定グラフであり、その画素がディスプレイの色再現範囲を超えているか否かを知ることができる。このガマット外判定を、映像変換フローの段階毎に確認する事が出来るようにし、どの段階でガマット外になってしまうのかを確認することができる。なお、表示画面９０の左側の領域９０ｄは、図４、図５に示す領域８６ｄ、８８ｇと同様に、表示画面９０に表示させる画像を切り替える部分であり、ライブ動画表示Ｌｉｖｅ、選択ボタンで選択された静止画の表示Ｓｅｌｅｃｔｅｄ、１回前に選択された静止画の表示ＬａｓｔＳｅｌｅｃｔｅｄに加え、カメラによる取得画像Ｃａｐｔｕｒｅを切り替えることができる。
【００６４】
これによって、カメラ入力の段階であれば、撮影条件の変更の判断に使用できるし、出力標準色空間（ＤＩＣ）６６であれば、ＬＭＴ変換部６２の調整を見直す判断の参考になる。モニタ映像データ（ＭＣＶ）７２やコントローラ表示映像（ＣＣＶ）であれば、プレビューしているモニタ２２では表示不可能であるが、最終出力では色再現域であることを知ることができる。
このガマット判定グラフに表示する映像変換フローの段階、色空間と、下に表示する画像は必ずしも一致している必要は無いので、映像は、常にＭＣＶを表示することで評価・鑑賞に適した映像にしながら、グラフの段階のみを変えることができる。
また、画像上の画素のみでなく領域を選択可能とすることで、選択された領域内の画素がヒストグラムや、ガマットのどの範囲に分布しているかを表示することも可能である。
【００６５】
なお、本実施形態においては、色調整部４２による色調整値及び／又は色調整参照テーブル（ＣＤＬ、３ＤＬＵＴ等）、及び／又は、色調整部４２によって色調整された、最終出力デバイスの色又は出力の標準色空間を持つ編集加工映像の低解像度及び／又は圧縮画像を、コントローラ２６の表示部８４や、映像変換装置２０のデータ出力部５０やモニタ出力部５２（モニタ２２）や、その他の出力ユニットに出力することが好ましい。
更に、本実施形態においては、色調整部４２による色調整値及び／又は色調整参照テーブル、及び／又は、色調整部４２によって色調整された、最終出力デバイスの色又は出力の標準色空間を持つ編集加工映像やその低解像度画像を、撮影時の日付及び／又はタイムコードと対応付けて、コントローラ２６の表示部８４や、映像変換装置２０のデータ出力部５０やモニタ出力部５２（モニタ２２）や、その他の出力ユニットに出力することが好ましい。即ち、タイムコード等と色調整値及び／又は色調整参照テーブルとを対応させた色調整情報ファイル（ＣＤＬ，ＥＤＬ等）が出力されるように構成するのが好ましい。
【００６６】
本発明は、図２に示す映像変換装置の処理の流れを映像変換方法として実施することができる。
即ち、本発明の映像変換方法は、カメラで撮影されたカメラ映像データ信号を取得し、カメラ映像データ信号を、カメラで撮影したシーン基準の色空間へ変換して該シーン基準の色空間の第１の画像の映像データを求め、この第１の画像の映像データに対して色調整を行なわせ、色調整後の第１の画像の映像データを得、この色調整後の第１の画像の映像データを、映像の出力の標準色空間へ変換して、この出力の標準の色空間の第２の画像の映像データを求め、この第２の画像の映像データを映像の最終出力となる最終出力デバイスの色空間へ変換した際に得られる最終出力デバイスの色を事前に異なる表示デバイスで確認させるために、第２の画像の映像データを確認用表示デバイスの色空間に変換してこの確認用表示デバイスの色空間の第３の画像の映像データを求めることにより、実施することができる。
【００６７】
なお、上述の映像変換方法は、映像変換プログラムを実行することによってコンピュータ上で処理することができる。
例えば、本発明の映像変換プログラムは、上述した映像変換方法の各ステップをコンピュータ、具体的にはそのＣＰＵに行わせる手順を有するものである。これらの手順からなるプログラムは、１つまたは複数のプログラムモジュールとして構成されていても良い。
これらのコンピュータが実行する手順からなる映像変換プログラムは、コンピュータまたはサーバのメモリ（記憶装置）内に記憶されるものであっても良いし、記録媒体に記憶されるものであっても良く、実行時に、当該コンピュータ（ＣＰＵ）または他のコンピュータによって、メモリまたは記録媒体から読み出されて実行されるものである。したがって、本発明は、上記映像変換方法をコンピュータに実行させるための映像変換プログラムを記憶したコンピュータに読み取り可能なメモリもしくは記録媒体であっても良い。
【００６８】
以上、本発明に係る映像変換装置、これを用いる映画システムの撮影システム、映像変換方法、及び映像変換プログラム並びに記録媒体について詳細に説明したが、本発明は、以上の実施形態に限定されるものではなく、本発明の要旨を逸脱しない範囲において、各種の改良や変更を行ってもよい。
【符号の説明】
【００６９】
１０  映画システム
１２  撮影システム（撮影現場）
１４  映像制作システム（ポストプロダクション）
１６  上映システム（シアター）
１８、１８ａ、１８ｂ  カメラ
２０、２０ａ、２０ｂ  映像変換装置
２２、２２ａ、２２ｂ  モニタ
２４  編集加工映像格納装置
２６  コントローラ
２８  撮影映像格納装置
３８  入力部
４０  入力色変換部（インプットトランスフォームセクション）
４２  色調整部（ルックモディフィケーションセクション）
４４  出力色変換部（ターゲットレンダリングセクション）
４６  撮影側モニタ色変換部（オンセットモニタートランスフォームセクション）
４８  コントローラ色変換部（コントローラトランスフォームセクション）
５０  データ出力部
５２  モニタ出力部
【図１】
0005784541.tif 000002
【図２】
0005784541.tif 000003
【図３】
0005784541.tif 000004
【図４】
0005784541.tif 000005
【図５】
0005784541.tif 000006
【図６】
0005784541.tif 000007
【図７】
0005784541.tif 000008
【図８】
0005784541.tif 000009
【図９】
0005784541.tif 000010
【図１０】
0005784541.tif 000011
【図１１】
0005784541.tif 000012