(57)【要約】  本発明は、クロマキー合成装置において、カメラを通じて撮象した映像と背景スクリーンの代替映像の入力を受けるための映像入力手段と、入力映像をスキャンした後、毎フレームごとに画面全体を空間分割して、各分割面に対して別途のクロマキーを生成した後、クロマキー値の変化を追跡してクロマキーを生成するための前処理手段と、前記クロマキーに基づいてクロマキーイング処理して、客体を含む入力映像で背景スクリーンクロマキーに該当する画素を前記背景スクリーンの代替映像に代替及び合成するためのクロマキーイング処理手段と、前記クロマキーイング処理の時、客体と背景スクリーンとの共通的な部分(交集合)が存在する場合、クロマ成分以外に輝度成分を適用して背景スクリーンと客体との共通色相領域を最小化するための後処理手段と、前記合成された客体と背景スクリーンの代替映像を出力するための映像出力手段とを含む。
2008527951.tif 000002
【特許請求の範囲】
【請求項１】
クロマキー合成装置において、カメラを通じて撮象した映像と背景スクリーンの代替映像の入力を受けるための映像入力手段と、
入力映像をスキャンした後、毎フレームごとに画面全体を空間分割して、各分割面に対して別途のクロマキーを生成した後、クロマキー値の変化を追跡してクロマキーを生成するための前処理手段と、
前記クロマキーに基づいてクロマキーイング処理して、客体を含む入力映像で背景スクリーンクロマキーに該当する画素を前記背景スクリーンの代替映像に代替及び合成するためのクロマキーイング処理手段と、
前記合成された客体と背景スクリーンの代替映像を出力するための映像出力手段とを含む
ことを特徴とする適応形クロマキー合成装置。
【請求項２】
前記クロマキーイング処理の時、客体と背景スクリーンとの共通的な部分が存在する場合、輝度成分を追加的に適用して背景スクリーンと客体との共通色相領域を最小化するための後処理手段をさらに含む
ことを特徴とする請求項１に記載の適応形クロマキーの合成装置。
【請求項３】
前記前処理手段は、各フレームで客体とスクリーンを区分するために、以前フレームのクロマキーを利用する
ことを特徴とする請求項１または請求項２に記載の適応形クロマキー合成装置。
【請求項４】
クロマキー合成装置において、カメラを通じて撮象した映像と背景スクリーンの代替映像の入力を受けるための映像入力手段と、
入力映像をスキャンした後、毎フレームごとに画面全体を空間分割して、各分割面に対して別途のクロマキーを生成した後、クロマキー値の変化を追跡してクロマキーを生成するための前処理手段と、
前記クロマキーに基づいてクロマキーイング処理して、客体を含む入力映像で背景スクリーンクロマキーに該当する画素を前記背景スクリーンの代替映像に代替及び合成するためのクロマキーイング処理手段と、
前記クロマキーイング処理の時、客体と背景スクリーンとの共通的な部分(交集合)が存在する場合、クロマ成分以外に輝度成分を適用して背景スクリーンと客体との共通色相領域を最小化するための後処理手段と、
前記合成された客体と背景スクリーンの代替映像を出力するための映像出力手段とを含む
ことを特徴とする適応形クロマキー合成装置。
【請求項５】
クロマキー合成方法において、カメラを通じて撮象した映像と背景スクリーンの代替映像の入力を受ける段階と、
入力映像をスキャンした後、毎フレームごとに画面全体を空間分割して、各分割面に対して別途のクロマキーを生成した後、クロマキー値の変化を追跡してクロマキーを生成する段階と、
前記クロマキーに基づいてクロマキーイング処理して、客体を含む入力映像で背景スクリーンクロマキーに該当する画素を前記背景スクリーンの代替映像に代替及び合成する段階と、
前記合成された客体と背景スクリーンの代替映像を出力する段階とを含む
ことを特徴とする適応形クロマキー合成方法。
【請求項６】
前記クロマキーイング処理の時、客体と背景スクリーンとの共通的な部分(交集合)が存在する場合、クロマ成分以外に輝度成分を適用して背景スクリーンと客体との共通色相領域を最小化する段階をさらに含む
ことを特徴とする請求項５に記載の適応形クロマキー合成方法。
【請求項７】
プロセッサを備えたクロマキー合成装置に、カメラを通じて撮象した映像と背景スクリーンの代替映像の入力を受ける機能と、
入力映像をスキャンした後、毎フレームごとに画面全体を空間分割して、各分割面に対して別途のクロマキーを生成した後、クロマキー値の変化を追跡してクロマキーを生成する機能と、
前記クロマキーに基づいてクロマキーイング処理して、客体を含む入力映像で背景スクリーンクロマキーに該当する画素を前記背景スクリーンの代替映像に代替及び合成する機能と、
前記クロマキーイング処理の時、客体と背景スクリーンとの共通的な部分が存在する場合、輝度成分を追加的に適用して背景スクリーンと客体との共通色相領域を最小化する機能と、
前記合成された客体と背景スクリーンの代替映像を出力する機能とを実現させるためのプログラムを記録したコンピューターで読み取られる
ことを特徴とする記録媒体。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、適応形クロマキー(ｃｈｒｏｍａ  ｋｅｙ)合成装置及びその方法と、前記方法を実現させるためのプログラムを記録したコンピューターで読み取られる記録媒体に係り、より詳しくは、多様な映像条件(カメラ、照明、演出、スタジオなど)に能動的に適応してクロマキー(ｃｈｒｏｍａ  ｋｅｙ)の品質を高める適応形クロマキー合成装置及びその方法と、前記方法を実現させるためのプログラムを記録したコンピューターで読み取られる記録媒体に関する。
【背景技術】
【０００２】
色相(ｃｏｌｏｒ)は通常、輝度(ｂｒｉｇｈｔｎｅｓｓ(ｌｕｍａ))と色差(ｃｏｌｏｒ  ｄｉｆｆｅｒｅｎｃｅ(ｃｈｒｏｍａ))に分離して示される。
【０００３】
クロマキー(ｃｈｒｏｍａ  ｋｅｙ)は、映像合成をするために、特定の色(ｃｈｒｏｍａ)をキー(ｋｅｙ)に指定した後、主映像でキーに該当する画素を他の映像に取り替える。この時、クロマキーを遂行するアルゴリズムでキーは、単一のクロマ(ｃｈｒｏｍａ)値ではなく、クロマ値の範囲を意味する。
従って、クロマキーを遂行するためには、キーになる背景スクリーン(ｂａｃｋｇｒｏｕｎｄ  ｓｃｒｅｅｎ)が必要であり、背景スクリーンのクロマ値の変位は小さくする。そして、背景スクリーンと客体(ｏｂｊｅｃｔ)(人を含み、スクリーンと区分されるすべての物体)は、クロマを基準に相互に分離されるべきである。
【０００４】
図１の一般的なクロマキー合成装置は、特定の色(ｃｈｒｏｍａ)をキー(ｋｅｙ)に指定した後、クロマキーに基づき、カメラを通じて撮影された客体と背景スクリーン映像で、背景スクリーン映像を他の背景映像に取り替えて合成された映像を生成する。
この時、図２に示したように、カメラを通じて入って来た映像のクロマを色の分布で表示する。理想的な場合、スクリーンのクロマ成分と客体のクロマ成分が重ならずに完全に分離される。すなわち、図２では、スクリーンのクロマ成分が緑色に傾いて、スクリーンのクロマ成分と客体のクロマ成分が完全に分離される。
【０００５】
スクリーンクロマの分布に基づいてキーを設定して、キーの周辺にクロマキーイングされるようにキーイングの範囲を設定する。この時、範囲を設定する方式は自由であるが、通常、図２のように、キーの周辺に菱形状の範囲を設定する。
成功的なクロマキー技術のための前提条件として、画質、キーの分離、装備などを中心に説明する。
クロマキー技術は、映像を扱う技術であるために、ソース(ｓｏｕｒｃｅ)になる映像の画質が最も重要である。映像の画質は、撮影技法と撮影装備、照明、俳優の衣裳、背景スクリーンの状態と質などに大きく左右される。
【０００６】
一方、背景スクリーンと客体を分離するためには、客体の色相が背景の色相と同一にならないように、予め計画する。さらに、客体の色相が背景の色相と異なるとしても、特定の照明条件下で、同一になることがあるので、照明条件を予め計画する。また、客体が特定のカメラ演出技法下で、背景と同一なクロマ範囲に入る場合があるので、カメラの技法を予め計画する。
【０００７】
客体が他の客体の登場によって、反射または影、照明状態の変化などを誘発して背景と同一な色相の範囲に入る場合があるので、これを予め計画する。また、客体とカメラ、照明などを予め計画するためには、撮影する前に背景のクロマキー値を予想する。さらに、すべてのカメラは、実物の色相とその他の状態をある程度歪曲するために、背景スクリーンのクロマキー値も目で見るキー値とカメラを通じて入って来る映像信号のクロマキー値の差があるので、この差を最小化して予め計画した色相の構成どおり撮影することができる。
【０００８】
客体と照明、カメラの演出技法などによって、背景スクリーンのクロマ成分が変化されるために、この場合、基準になるキー値も変化するので、このような現象が発生しないように、予め計画する。他方、演出計画と共に装備も重要である。すなわち、ノイズのひどいカメラを使用したり、色相が一定しない背景スクリーン、または照明を反射させるスクリーンなどを使用したりすると、成功的なクロマキーイングを遂行することができない。また、予測できない太陽光と照明を避けるスタジオ(ｓｔｕｄｉｏ)もクロマキーイングの品質を向上させる条件になる。
【０００９】
以下、従来のクロマキー技術の問題を察する。まず、装備は、カメラによるノイズと歪曲を防ぐために必ず放送用として分類されるカメラの使用が必須的である。また、照明と物体に影響をより少なめに受けて均一なクロマの分布を維持する専用のスクリーンが必要である。さらに、影と色相の変化、照度の変化を最小化するスタジオの照明が必要であって、高度に計画されたスタジオが必要である。
【００１０】
図３に示したように、従来は、このような装備条件(操作後固定)下で、入力映像をそのまま収容した。
特に、一般的なカメラを使用する場合、自動露出(ａｕｔｏ  ｅｘｐｏｓｅ)効果は、図４及び図５に示したように、時間の流れ、客体の移動、カメラによってスクリーンと客体の色が著しく変化する。従来のクロマキー技法は、時間に従って変化するスクリーンに対して、キーイングが不可能である。
より具体的には、図４に示したように、白色の服が占める空間が増えることによって露出が徐々に減り、その結果、目で観察する緑色のスクリーンには変化がないが、カメラを経て緑色が黒色に変わって白色の服は、暗くなっている。また、図５に示したように、黒色の服が占める空間が増えることによって緑色のスクリーンが明るくなり、さらに、黒く見える服もＡ/Ｅによって明るい灰色に見えて、少し赤色を含む。従って、従来のクロマキー技法によると、時間に従って変化するスクリーンに対してキーイングは、不可能である。
【００１１】
一方、予め計画されたキー値のみを使用するので、キー値を維持するために大変努力する必要がある。また、条件が異なる多様なスタジオに同一に適用されるクロマキー製品がない。また、演出されていないアドリブが介する余地がない(不特定の使用者が出演できないこと)。さらに、演出や装備が不備な場合、発生するクロマキーの品質の低下を後半部の作業で補完する(リアルタイムの適用が難しい)。
【００１２】
他方、伝統的な方式のクロマキーの代替アルゴリズム外に、他の付加的な装置がない。また、発生するすべての問題を装備と演出と後半部の作業を通じて解決する。
また他方、放送、映画、天気予報、仮想現実システムなどに適用範囲が制約される。また、装備とスタジオ、演出の問題で多様な階層が使用する製品を作ることができない。
このように、従来のクロマキーの技術は、クロマキーの品質の補完をするために、装備(カメラ、照明、演出、スタジオ)と演出、後半部の作業に依存的である。
【００１３】
【特許文献１】米国特許第５８３８３１０号明細書
【特許文献２】特開平５−３３６５３９号公報
【特許文献３】国際公開第９８／３７７０２号パンフレット
【特許文献４】韓国特許出願公開第１０−２００４−０１１０７４８
【発明の開示】
【発明が解決しようとする課題】
【００１４】
本発明は、前述したような問題を解決するために提案されており、多様な映像条件(カメラ、照明、演出、スタジオなど)に能動的に適応してクロマキーの品質を高める、適応形クロマキー合成装置及びその方法と、前記方法を実現させるためのプログラムを記録したコンピューターで読み取られる記録媒体を提供することを目的とする。
【課題を解決するための手段】
【００１５】
前述したような目的を達成するための本発明のクロマキー(ｃｈｒｏｍａ  ｋｅｙ)の合成装置は、カメラを通じて撮象した映像と背景スクリーンの代替映像の入力を受けるための映像入力手段と、入力映像をスキャンした後、毎フレームごとに画面全体を空間分割して、各分割面に対して別途のクロマキーを生成した後、クロマキー値の変化を追跡してクロマキーを生成するための前処理の手段と、前記クロマキーに基づいてクロマキーイング(ｃｈｒｏｍａ  ｋｅｙｉｎｇ)処理して、客体を含む入力映像で背景スクリーンのクロマキーに該当する画素を前記背景スクリーンの代替映像に代替及び合成するためのクロマキーイングの処理手段と、前記合成された客体と背景スクリーンの代替映像を出力するための映像出力手段とを含むことを特徴とする。
【００１６】
また、本発明は、前記クロマキーイング処理の時、客体と背景スクリーンとの共通的な部分(交集合)が存在する場合、クロマ成分以外に輝度成分を適用して、背景スクリーンと客体との共通色相領域を最小化するための後処理の手段をさらに含む。
従って、本発明のより望ましい実施例は、クロマキーの合成装置において、カメラを通じて撮象した映像と背景スクリーンの代替映像の入力を受けるための映像入力手段と、入力映像をスキャンした後、毎フレームごとに画面全体を空間分割して、各分割面に対して別途のクロマキーを生成した後、クロマキー値の変化を追跡してクロマキーを生成するための前処理手段と、前記クロマキーに基づいてクロマキーイング処理して、客体を含む入力映像で背景スクリーンのクロマキーに該当する画素を前記背景スクリーンの代替映像に代替及び合成するためのクロマキーイング処理手段と、前記クロマキーイング処理の時、客体と背景スクリーンとの共通的な部分(交集合)が存在する場合、クロマ成分以外に輝度の成分を適用して背景スクリーンと客体との共通色相領域を最小化するための後処理手段と、前記合成された客体と背景スクリーンの代替映像を出力するための映像出力手段とを含むことを特徴とする。
【００１７】
一方、本発明は、クロマキー合成方法において、カメラを通じて撮象した映像と背景スクリーンの代替映像の入力を受ける段階と、入力映像をスキャンした後、毎フレームごとに画面全体を空間分割し、各分割面に対して別途のクロマキーを生成した後、クロマキー値の変化を追跡してクロマキーを生成する段階と、前記クロマキーに基づいてクロマキーイング処理して、客体を含む入力映像で背景スクリーンのクロマキーに該当する画素を前記背景スクリーンの代替映像に代替及び合成する段階と、前記合成された客体と背景スクリーンの代替映像を出力する段階とを含むことを特徴とする。
【００１８】
また、本発明は、前記クロマキーイング処理の時、客体と背景スクリーンとの共通的な部分(交集合)が存在する場合、クロマ成分以外に輝度成分を適用して背景スクリーンと客体との共通色相領域を最小化する段階をさらに含む。
【００１９】
他方、本発明は、プロセッサを備えたクロマキー合成装置に、カメラを通じて撮象した映像と背景スクリーンの代替映像の入力を受ける機能と、入力映像をスキャンした後、毎フレームごとに画面全体を空間分割して、各分割面に対して別途のクロマキーを生成した後、クロマキー値の変化を追跡してクロマキーを生成する機能と、前記クロマキーに基づいてクロマキーイング処理して、客体を含む入力映像で背景スクリーンクロマキーに該当する画素を前記背景スクリーンの代替映像に代替及び合成する機能と、前記クロマキーイング処理の時、客体と背景スクリーンとの共通的な部分(交集合)が存在する場合、クロマ成分以外に輝度成分を適用して背景スクリーンと客体との共通色相領域を最小化する機能と、前記合成された客体と背景スクリーンの代替映像を出力する機能とを実現させるためのプログラムを記録したコンピューターで読み取られる記録媒体を提供する。 
以下、添付された図面を参照して、本発明による望ましい一実施例を詳しく説明する。
【発明の効果】
【００２０】
本発明は、クロマキーの技術に対する理解が劣る非専門家も簡単に操作するだけで映像合成ができて、高価の装備と演出力がなくても具現ができることによって、クロマキーの具現が容易であり、クロマキーの具現の総費用を減少(低価型のカメラ、低価のスクリーン、スタジオの無費用、照明の無費用、低価のクロマキー装備、映像の専門人力不必要)させる。
【００２１】
また、本発明は、既存の放送、映画、仮想現実システムの外にも、玩具、カラオケ、プリクラ屋などでエンターテイメントの要素として需要創出されて、運転、訓練などのシミュレーション及び放送(個人放送、小規模インターネット放送局、映像フリレンサーなど)などに活用される。
【発明を実施するための最良の形態】
【００２２】
図６は、本発明によるクロマキー合成過程を示している。
既存の方式がクロマキーの品質の補完を主に装備と演出、後半部の作業で解決したとすると、本発明は、装備と演出などの条件はそのままにして、アルゴリズムの補強を通じて知能的に映像に適応することによって、クロマキーの品質を高める。
すなわち、クロマキーのために、高価の放送用のカメラ(ｃａｍｅｒａ)は不必要であって、家庭用のビデオカメラ(ｃａｍｃｏｄｅｒ)や監視用カメラなどを使用する。また、よく設計されたスタジオが不必要であって、一般的な事務室や居間、勉強する部屋など、どこででも使用できる。また、照明の種類や位置に大きな影響を受けず、事物が識別できる程度の照明さえあれば適用できる。さらに、別途の演出が不必要であって、多様な環境と物体の動き、色相の重複にも知能的に反応する。また、別途の後半部の作業が不必要であって、リアルタイムでクロマキー適用映像を作ることができる。
従って、図６に示したように、任意のカメラと任意のスクリーン、照明がランダム(ｒａｎｄｏｍ)に使用されるので、本発明のクロマキーの合成装置(図７参照。)は、事前条件及びキーに関するどのような情報も知らない状態である。
【００２３】
図７は、本発明による適応形クロマキーの合成装置の一実施例の構成図である。
図７に示したように、本発明による適応形クロマキーの合成装置は、カメラを通じて撮象した映像と背景スクリーンの代替映像の入力を受けるための映像入力部６１と、入力映像をスキャンした後、毎フレームごとにクロマキー値の変化を追跡して、クロマキーを生成するための前処理部６２と、クロマキーに基づいてクロマキーイング処理して、客体を含む入力映像で背景スクリーンのクロマキーに該当する画素を前記背景スクリーンの代替映像に代替及び合成するためのクロマキーイングの処理部６３と、合成された客体と背景スクリーンの代替映像を出力するための映像出力部６５とを含む。特に、クロマキーイング処理の時に、客体と背景スクリーンとの共通的な部分(交集合)が存在する場合、クロマ成分以外に輝度成分を適用して背景スクリーンと客体との共通領域を最小化するための後処理部６４をさらに含む。
そして、前処理部６２では、毎フレームごとに画面全体を空間分割して、各分割面に対して、別途のクロマキーを生成する機能をさらに備える。
【００２４】
以下、本発明による適応形クロマキーの合成装置の各構成要素の機能をより詳しく説明する。
前処理部６２では、クロマキーの自動適応(ｃｈｒｏｍａ  ｋｅｙ  ａｕｔｏ  ａｄｊｕｓｔｍｅｎｔ)の過程(図８及び図９参照。)、リアルタイムのクロマキーの生成(ｒｅａｌｔｉｍｅ  ｃｈｒｏｍａ  ｋｅｙ  ｇｅｎｅｒａｔｅ)過程(図１０及び図１１参照。)、空間分割のクロマキーの適用過程(図１２ないし図１４参照。)を行う。
【００２５】
図８及び図９に示したように、クロマキーの自動適応の過程は、背景スクリーンのクロマ値を予め指定しなくても自ら認識する過程である。すなわち、任意の場所、任意の照明、任意のカメラとスクリーン下でも最適のクロマキー値が算出されるが、カメラを通じて背景スクリーンのみを撮影する状態で、自動適応ボタン(ａｕｔｏ  ａｄｊｕｓｔｍｅｎｔ  ｂｕｔｔｏｎ)を押すと（７０１）、映像全体をスキャンして（７０２）、特定の赤色Ｒ、緑色Ｇ、青色Ｂ系列に近接した値のみを取り出して（７０３、７０４）クロマキー値を生成する（７０５）。例えば、緑色系列の色に対して抽出されたサンプルでキー値を計算する。
【００２６】
ところが、劣悪な条件下で撮影された映像は、同一な客体とスクリーンであっても、条件によって他の色相を有する。例えば、照明が蛍光燈から白熱燈に変わったり、閉まったカーテンを開いたりする場合、カメラの自動露出機能が動作する場合、客体の追加的な登場や退場がある場合などがある。
この場合、最初に得たスクリーンのキー値では、クロマキーイングができなかったり、できたとしても品質の低下を伴う。
従って、 これを克服するために、図１０及び図１１に示したように、リアルタイムのクロマキー生成(ｒｅａｌｔｉｍｅ  ｃｈｒｏｍａ  ｋｅｙ  ｇｅｎｅｒａｔｅ)の過程を行う。
【００２７】
図１０及び図１１に示したように、リアルタイムのクロマキー生成過程は、リアルタイムでスクリーンをスキャンして、毎フレームごとにスクリーンのクロマキー値を得る(クロマキー値の変化を追跡)。
この時、各フレームで客体とスクリーンを区分するために、最初に得たクロマキー値を活用する。また、各フレームで客体とスクリーンを区分するために、直前(以前)フレームのクロマキー値を活用する。
すなわち、毎フレームごとにクロマキーを生成するにおいて、新しいフレームに対して、以前フレームのキーがない場合には（８０１）、図９に示したように、クロマキー自動適応過程（８０２）を通じて以前フレームのクロマキー値を生成して貯蔵する。そして、以前フレームのクロマキーがある場合には（８０１）、画面をスキャンした後（８０３）、以前フレームのクロマキーを利用してスクリーンとして予想される画素をサンプリングして（８０４）スクリーン候補画素で該当フレームのクロマキーを生成する（８０５）。以後、クロマキーイング過程を行う（８０６）。
【００２８】
図１２ないし図１４を参照して、空間分割のクロマキーの適用過程を説明する。
一般化された環境では、一定の色のスクリーンを使用するとしても、照明の位置や反射、客体の状態によって不均等な色相の分布を有する。
従って、スクリーンの色相の分布で平均値に対する偏差が大きくなると、算出されたクロマキー値にスクリーン全体が対応できなくなる。すなわち、図１２に示したように、上側は明るくて下側は暗いため(一般的な環境で非常によく発生する場合である)、上側と下側に同一なクロマキーが適用できない。
よって、スクリーン全体に対するクロマキーだけでは不足であるため、本発明では、画面全体を空間分割して、各分割面に対して別途のクロマキーを要求する。すなわち、図１３に示したように、画面全体を空間分割して別途のクロマキーを適用する。このようにすることによって、各々の分割面のみを見ると、非常に均一な色の分布を有する。
このように、各分割面に対して別途のクロマキーを要求すると(図１３)、照明の不均等やカメラの特性などによる色相の分布の不均衡が解消される。
【００２９】
すなわち、毎フレームごとにクロマキーを生成するにおいて、新しいフレームに対して、画面をスキャンした後（９０２）、以前フレームの同一分割面のクロマキー値をロードして（９０３）以前のキー値に基づいたスクリーンの候補をサンプリングして（９０４）、スクリーンの系列色の特徴に基づいてサンプリングすることによって（９０５）クロマキーを生成する（９０６）。以後、クロマキーイングの過程を行う（９０７）。
一方、図１５ないし図１７に示したように、後処理部６４では、輝度に基づいたクロマキーの適用過程を行う。有彩色の領域は、図１５に示したように、マゼンタＭ(ｍａｇｅｎｔａ)、青色Ｂ、シアンＣ(ｃｙａｎ)、緑色Ｇ、黄色Ｙ、赤色Ｒの６種の代表色合いに区分される。
そして、色相の表現は、図１６に示したように、ＹＣｂＣｒの方法を利用して表現する。普通、ＲＧＢ方法を使用するが、この方法は、光の三元素である赤色光Ｒ、緑色光Ｇ、青色光Ｂの色を混合して色を表現する方法である。しかし、ＹＣｂＣｒは、色の強度である輝度Ｙと、青色との色差の情報Ｃｂ、赤色との色差の情報Ｃｒで色を表現する方法である。
【００３０】
輝度に基づいて発展したクロマキー技法を説明する。クロマキーは、色のクロマ成分に基づいたキーイング技術であるために、輝度成分が異なっても、クロマ成分が同一であると、同一キーとして認識する。従って、図１５に示したように、スクリーンと客体との共通的な部分(交集合)が発生すると、既存のクロマキー技法では、この領域をスクリーンとして認識した。
しかし、人の視覚システムは、クロマより輝度に敏感であるため、同一なクロマ成分であっても輝度が異なると、異なる色として認識するようになる。すなわち、既存のクロマキー技法は、このことを看過しているので、白色の紙に反射されたスクリーンの色もスクリーンのように取り扱う。
【００３１】
既存のクロマキー技法では、スクリーンと同一なクロマ領域は全部、スクリーンの領域として取り扱われるが、輝度に基づいて発展したクロマキー技法では、その割合を低めた。
すなわち、図１６に示したように、スクリーンと客体との共通的な部分(交集合)が発生する場合、クロマ以外に輝度成分を適用することによって、共通領域を最小化することができる。
【００３２】
この処理の手続きは、図１７に示したように、カメラの入力映像(画素単位)に対してクロマキーイング過程を行った後（１０１）、客体領域に対してはカメラの入力映像を維持して（１０２、１０３）、スクリーン領域に対しては客体を含む入力映像で背景スクリーンのクロマキーに該当する画素を背景スクリーンの代替映像に代替する（１０２、１０４）。この時、スクリーンと客体との共通的な部分(交集合)が発生する場合、クロマ以外に輝度成分を適用することによって（１０５）、共通領域を最小化することができる。
【００３３】
前述したような本発明の方法は、プログラムで具現されコンピューターで読み取る形態で記録媒体(シデ−ロム、ラム、ロム(Ｒｅａｄ  Ｏｎｌｙ  Ｍｅｍｏｒｙ)、フレキシブルディスク、ハードディスク、光磁気ディスクなど)に貯蔵することができる。このような過程は、本発明が属する技術分野で通常の知識を有する者が容易に実施できるので、これ以上、詳しく説明しないことにする。
以上、本発明は、本発明が属する技術分野で通常の知識を有する者において、本発明の技術的思想を脱しない範囲内で多様に置換、変形及び変更できて、前述した実施例及び添付された図面によって限られるのではない。
【図面の簡単な説明】
【００３４】
【図１】一般的なクロマキーの合成装置の構成図である。
【図２】理想的なクロマキーイング過程を示した説明図である。
【図３】従来のクロマキーの合成過程を示した概路図である。
【図４】従来の技術によるクロマキーイングの過程を示した説明図である。
【図５】従来の技術によるクロマキーイングの過程を示した説明図である。
【図６】本発明によるクロマキーの合成過程を示した概路図である。
【図７】本発明による適応形クロマキー合成装置の一実施例の構成図である。
【図８】本発明による適応形クロマキーの合成方法のうち、クロマキー自動適応過程を示した一実施例の説明図である。
【図９】本発明による適応形クロマキーの合成方法のうち、クロマキー自動適応過程を示した一実施例の説明図である。
【図１０】本発明による適応形クロマキーの合成方法のうち、リアルタイムクロマキー生成過程を示した一実施例の説明図である。
【図１１】本発明による適応形クロマキーの合成方法のうち、リアルタイムクロマキー生成過程を示した一実施例の説明図である。
【図１２】本発明による適応形クロマキーの合成方法のうち、空間分割クロマキー適用過程を示した実施例の説明図である。
【図１３】本発明による適応形クロマキーの合成方法のうち、空間分割クロマキー適用過程を示した実施例の説明図である。
【図１４】本発明による適応形クロマキーの合成方法のうち、空間分割クロマキー適用過程を示した実施例の説明図である。
【図１５】本発明による適応形クロマキーの合成方法のうち、輝度に基づいたクロマキーの適用過程を示した一実施例の説明図である。
【図１６】本発明による適応形クロマキーの合成方法のうち、輝度に基づいたクロマキーの適用過程を示した一実施例の説明図である。
【図１７】本発明による適応形クロマキーの合成方法のうち、輝度に基づいたクロマキーの適用過程を示した一実施例の説明図である。
【符号の説明】
【００３５】
６１  映像入力部
６２  前処理部
６３  クロマキーイングの処理部
６４  後処理部
【図１】
2008527951.tif 000003
【図２】
2008527951.tif 000004
【図３】
2008527951.tif 000005
【図４】
2008527951.tif 000006
【図５】
2008527951.tif 000007
【図６】
2008527951.tif 000008
【図７】
2008527951.tif 000009
【図８】
2008527951.tif 000010
【図９】
2008527951.tif 000011
【図１０】
2008527951.tif 000012
【図１１】
2008527951.tif 000013
【図１２】
2008527951.tif 000014
【図１３】
2008527951.tif 000015
【図１４】
2008527951.tif 000016
【図１５】
2008527951.tif 000017
【図１６】
2008527951.tif 000018
【図１７】
2008527951.tif 000019
【国際調査報告】
2008527951.tif 000020
2008527951.tif 000021