(57)【要約】      （修正有）【課題】ユーザにとって実用的で、不鮮明化因子を扱い、最適なトレードオフをする能力をユーザに与え、迅速に及び効率的に補正を再演算できる様式で、ディスプレイシステムの色及び彩度の較正を可能にするシステム及び方法を提供する。【解決手段】彩度及び色の不均一性の補正及び調整を検討し、並びにそれらの変化を検出する及び補正するために光学センサのフィードバックを使用する。これは、極めて明るい画像及び極めて暗い画像を提示することを含むが、これに限定されない。更に、ユーザにとって実用的なシステムを作製する方法であって、補正を計算する方法、計算プロセスに影響を及ぼし得る不鮮明化因子に対処する方法、どのようにディスプレイの品質因子をトレードオフするかについてユーザが決定を下すことを可能にする情報を提供する方法、並びに再較正の際の彩度補正の迅速な再計算を可能にする方法を含む。【選択図】図３
2019032516.tif 000002
【特許請求の範囲】
【請求項１】
１つ以上の光センサを使用して、システムの１つ以上のユニットディスプレイにおいて空間的な彩度及び／又は色のばらつきを較正するための方法であって、
（ａ）ディスプレイユニットを使用して目標画像を計算するステップ、並びに
反復アルゴリズムを用いて、少なくとも１つの前記空間的な彩度及び色のばらつきを前記目標画像に収束させ、前記反復アルゴリズムは、所定の正確性が達成されない場合、１回以上の反復を適用するステップ
を含む、方法。
【請求項２】
前記システムの少なくともいくつかのOMTEパラメータを改変することを更に含む、請求項１に記載の方法。
【請求項３】
インジェクション機能を提供することを更に含む、請求項１に記載の方法。
【請求項４】
前記ユニットディスプレイはプロジェクタである、請求項１に記載の方法。
【請求項５】
見る人の各目に届くよう適合された１つ以上の画像を用いて、前記システムにステレオ画像を提供することを更に含む、請求項１に記載の方法。
【請求項６】
１つ以上のユニットディスプレイにおいて空間的な彩度及び／又は色のばらつきを較正するための方法であって、
１つ以上の光センサを提供するステップ、並びに
前記ディスプレイの所望の目標画像の計算において、他の領域と異なるように１つ以上の所定の領域を重み付けすることによって、不鮮明化因子及びそれらの影響を検出するステップ
を含む、方法。
【請求項７】
反復アルゴリズムを用いて、０回以上の反復を使用して前記空間的な彩度及び／又は色のばらつきを前記目標画像に収束させることを更に含む、請求項６に記載の方法。
【請求項８】
前記目標画像を内包するスクリーン上の汚れ又は混入物を検出することを更に含む、請求項６に記載の方法。
【請求項９】
カメラレンズ上の汚れ若しくは混入物又は前記カメラ上の他の固定パターンノイズを検出することを更に含む、請求項６に記載の方法。
【請求項１０】
他のスクリーンソースと重複している前記ディスプレイのエッジ上の画素を、前記不鮮明化因子として検出することを更に含む、請求項６に記載の方法。
【請求項１１】
１つ以上のユニットディスプレイにおいて空間的な彩度及び／又は色のばらつきを較正するための方法であって、
１つ以上の光センサを提供するステップ、並びに
目標画像において複数の品質因子の間でトレードオフするための選択オプションを含むユーザインターフェースを提供するステップ
を含む、方法。
【請求項１２】
前記トレードオフは彩度平滑性と明度の間で行われ、
前記ユーザが前記トレードオフの動作ポイントを選択するためのインターフェーススライダを提供することを更に含む、請求項１１に記載の方法。
【請求項１３】
前記トレードオフは前記彩度平滑性と明度の間で行われ、
前記ユーザが前記トレードオフの前記動作ポイントを選択するためのプロットを備える、請求項１１に記載の方法。
【請求項１４】
前記トレードオフは（ａ）明度と（ｂ）色又は彩度のばらつきの１つの間で行われる、請求項１１に記載の方法。
【請求項１５】
前記トレードオフは演算時間と前記収束した結果の品質の間で行われる、請求項１１に記載の方法。
【請求項１６】
前記トレードオフは別の空間領域上の１つの空間領域における前記システムの前記品質に対して行われる、請求項１１に記載の方法。
【請求項１７】
１つ以上の光センサを使用するシステムの１つ以上のユニットディスプレイにおいて、空間的な彩度及び／又は色のばらつきを較正するための方法であって、
カメラの運動及び前記光センサの移動に対して、前記光センサにおける測定値の導関数を計算するステップ、
前記ユニットディスプレイの運動及び前記光センサの移動の前記測定値を推定するステップ、並びに
前記移動前の前記初期測光較正データを用いて、前記運動及び前記導関数、即ち前記システムの新しい所望の補正を推定するステップを含む、方法。
【請求項１８】
前記光センサは１つ以上のカメラである、請求項１７に記載の方法。
【請求項１９】
前記光センサは１つ以上のプロジェクタである、請求項１７に記載の方法。
【請求項２０】
反復手順を用いて、前記空間的な彩度及び／又は色のばらつきを目標画像に収束させることを更に含む、請求項１７に記載の方法。
【請求項２１】
１つ以上のユニットディスプレイにおいて空間的な彩度及び／又は色のばらつきを較正するためのシステムであって、
１つ以上の光センサ、並びに
前記ディスプレイの所望の目標画像の計算において、他の領域と異なるように１つ以上の所定の領域を重み付けすることによって、不鮮明化因子及びそれらの影響を検出するプロセス／プロセッサ
を含む、システム。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明はディスプレイに関し、限定するものではないが、マルチ投影ディスプレイシステムに焦点を当てたものである。より詳細には、本発明は、より均一な色及び彩度を達成するためにディスプレイを調整するためのシステム及び方法に関する。
【背景技術】
【０００２】
人々は周囲に存在する像を見ることを好む。サイズ、明度、解像度、明度比、３Ｄ及びその他多くの特徴が、観察者の注意を引く。ディスプレイシステムを作製する際の目的は、見るものにとって可能な限り最高の経験をもたらすことである。最高の経験をもたらす、とは、ディスプレイの品質を最適化することをしばしば意味する。品質因子は、これらに限定するものではないが、幾何精度、色精度、コントラスト、解像度、及び煩わしいアーティファクトからの解放、並びに一般に良好とされる画像の性質に寄与するその他の性能的特性を含む。これらには、表示されるデジタル画像が、元々のデジタル画像又は自然界で見られる画像を正確に表現できるようにすることも含んでよい。ユーザにとって可能な限り最高の経験及びまたは可能な限り最高のディスプレイ品質を実現するために、画像情報の補正測定を適用してディスプレイシステムの動作ポイントをチューニングすることにより、ディスプレイが生成する画像の特定の不正確さを、補正することが望ましい。
【０００３】
ディスプレイシステムは１つ以上のディスプレイユニットを含む。ディスプレイユニットは、フラットパネルディスプレイ、プロジェクタ、発光型ディスプレイ、ｅ−インクディスプレイ等であってよい。これらは平坦であっても、カーブしていてもよい。このようなディスプレイの例は、「光学フィードバックを用いたディスプレイ調整及び画像処理によって改善されたディスプレイ品質を提供するためのシステム又は方法」という名称の特許文献１、及び「マッピング機能のインジェクションのためのシステム及び方法」という名称の特許文献２に挙げられており、これら特許文献の開示は、有用な背景技術情報として参照により本明細書に含まれるものとする。これらのタイプのディスプレイユニットはそれぞれ、異なるアーティファクトに影響を受け得ることが不利な点である。
【０００４】
例えばフラットパネルタイプのディスプレイは、パネル内の色及び彩度の光沢、並びにパネルにわたる色及び彩度の差の影響を受けることがある。これらはまた、異なる入出力カーブの影響を受けることもある。例えば、これらは極めて類似した低彩度のグレーレベルを表示するが、高彩度のグレーレベルでは異なり得る。ベゼル、複数のパネルの不整列、パネル内における所望の珍しいディスプレイ形状、円筒形等の形状でのパネルの整列等により、望まない幾何学的な問題をもたらすこともある。
【０００５】
投影ベースのディスプレイは、プロジェクタの光学部品が完璧なものではないことによってしばしば起こる、場合によっては色別チャネル上の幾何学的歪みの影響を受ける。これらはまた、プロジェクタ内における及びプロジェクタにわたる彩度のばらつき、色光沢、プロジェクタにわたる色のミスマッチ、黒レベルの変化、異なる入出力カーブ等の影響も受ける。
【０００６】
３Ｄ画像のディスプレイでは、右目と左目に異なる／別個の画像を提示する場合がある。このタスクを実現するための方法には、各目に送達される画像を交替させるための時間を必要とすること、特定の画像をどちらの目が受容するかを選択するために極性化又は波長等の光の特性を用いること、目の空間的配置に基づいて各目に異なる画像を送達するよう試みるために光学部品を用いること等を含むことができる。標準画像と同様、３Ｄ画像にも、幾何学的アーティファクト、色及び彩度アーティファクト、並びに、各目を標的とする画像に関する潜在的に異なるアーティファクトが存在し得る。
【０００７】
システムに対して行われる補正は、画像の表示を実行する一連の機能の多くの箇所において行うことができる。１つの例は、上に援用した「マッピング機能のインジェクションのためのシステム及び方法」に詳細に説明されているような、デジタル信号の生成時に行うことができるものである。１つの例は、上に援用した特許文献１に詳細に記載されているような、ＯＭＴＥパラメータ等、プロジェクタ又は中間ワーピングボックスについて説明されている。例として、いくつかのプロジェクタでは、例えば各色に関して独立に、プロジェクタの入力／出力カーブを変化させることが考えられている。例として、いくつかのディスプレイユニットは、プロジェクタにわたってシェーディングテーブルを有しており、これらにアクセスして変化させることができる。Ｌｉｑｕｉｄ  Ｃｒｙｓｔａｌ  ｏｎ  Ｓｉｌｉｃｏｎ（ＬＣＯＳ）プロジェクタにはこの性能が含まれていることが多い。
【０００８】
考えられる補正のタイプには、スクリーン上で像を歪曲させることを含む。プロジェクタを使用する場合、複数のプロジェクタによって重複した領域の総彩度がディスプレイの残りの領域の彩度と同程度になるように、プロジェクタにわたって画像を混合する。ディスプレイユニットにわたって、及びディスプレイユニット内において、色及び彩度の変化の補正を行うことも考えられる。
【０００９】
多くのタイプの像をシーン上で見ることができる。コンテンツは事実上、スクリーン上で混合及び歪曲され得る長方形の画像である場合がある。コンテンツは、３次元シーンの多数の視野からなる場合があり、ここでは、潜在的に各ディスプレイユニットに３次元シーンの異なる視野が付与され得、各ディスプレイユニットはこれら視野を引き延ばしたり歪曲させたりし、これにより、ディスプレイシステムがシステム全体の１つの極めて大きな視野を示しているように見えるようにする。この場合、ＯｐｅｎＧＬ又はＤｉｒｅｃｔＸ等の３次元レンダリングエンジンを用いてコンテンツをレンダリングすることがある。
【００１０】
有用な背景技術として、上で確認した先行技術の欠点を考慮した、より詳細な考察を提供する：
【００１１】
不鮮明化因子：使用するディスプレイシステムは、スクリーン上に汚れ又は他の異物を有することがある。カメラ等の光学センサは、そのレンズ上に汚れ又は他の異物を有することがある。ディスプレイシステム上に機能しない画素、及びカメラ上に機能しない画素が生じ得る。部屋を暗くするために部屋の明かりを消したり、窓のカーテンを閉めたりすることは、多くのディスプレイシステムにとって困難をもたらす。従って、較正中に採取される色データ及び彩度データは、しばしばノイズが入るか、又は不鮮明化因子を生む小さなエラーを引き起こしやすい。また、所望の関心領域の周りに光沢のある金属フレーム又は黒い縁飾りが存在し得、これにより、境界上の画素は適切な状態もはるかに明るく又は暗くなることがある。カメラセンサは完全には特徴づけられない。これらの不鮮明化因子を扱う適切なアルゴリズム及びプロセスを提供し、更に高品質なディスプレイシステムを生み出すことが望ましい。
【００１２】
計算：極彩色は、ディスプレイユニットに送られる入力彩度を出力の色及び彩度に非線形マップするために、ディスプレイユニットでしばしば使用される１つのアルゴリズム／プロセスである。その目的は、画像をより明るく見えるようにすることである場合が多い。このようなマッピングのアルゴリズム／プロセスは十分に非線形であるため、入力全体を出力の色及び彩度のマッピングカーブにマッピングすることは著しい量のデータを必要とし、これには時間がかかり得る。同様に、スクリーンの一部から他の一部への光反射をモデル化することは困難である；しかし、このような影響を考慮に入れずに、均一な彩度のディスプレイを生みだすことは難しい。これら全ての問題を考慮に入れたアルゴリズムを提供することが望ましい。
【００１３】
ユーザによるトレードオフ：ディスプレイユニットは、エッジで又はエッジの近くにおいて彩度低下を有することがある。これが発生する場合、均一な彩度の全体のディスプレイシステムを得ることは、明度について多く妥協することを意味し得る。よって、ユーザは典型的には、マジュムダーらによる名称「マルチプロジェクタディスプレイにわたって測光のばらつきを平滑にする方法」の特許文献３で説明されるような、知覚的に均一であるシステムを好む。上記特許文献の内容は参照により有用な背景技術情報として本明細書に援用されるものとする。システムにわたる低調な彩度及び色のばらつきは、人間に知覚されないことがあることに留意されたい。均一な彩度を要求するよりも、このようなばらつきを許容することにより、典型的には従来より著しく明るいディスプレイがもたらされる。
【００１４】
実際の商業上利用可能なディスプレイ及び画像システムでは、ユーザはトレードオフすることを好み、自らの決定が及ぼす影響を理解している。例えば、極めて明るい部屋では、ユーザはもたらされる均一性（又はその欠如）とは無関係に、可能な最も明るいディスプレイシステムを選択し得る。極めて暗い部屋では、知覚的な彩度の平滑性は更により著しくなり得る。他の条件では、ユーザは明度と知覚的な均一性の間でトレードオフすることを好むことがある。
【００１５】
同様に、ユーザは、較正プロセス又は計算プロセスのスピードと結果の正確性をトレードオフすることがある。代替として、ユーザは、明度と色のばらつきをトレードオフすることがある。時にユーザは空間的な好みを有する。例えば、ディスプレイシステムの中央領域は極めて均一であることを要求されるかもしれないが、システムの他の領域の均一性への要求は低いかもしれない。
【００１６】
迅速な再計算：システムを設置すると、光学センサ又はディスプレイユニットはしばしば、振動させられたり、押されたりすることで、わずかな量移動することがある。光学センサからプロジェクタに関する色及び彩度のデータを採取することは時間がかかるプロセスであり得るが、これは特に、明るいコンテンツと暗いコンテンツの両方に関してシステムを較正するという一般的な望みがあり、つまりランタイム中に良いディスプレイ結果を達成するために多くのトレーニング画像をキャプチャする必要があるためである。システムがあらかじめ採取されたデータを使用でき、それを最少量の新しいデータ採取で再使用できることが望ましい。
従って、一般的に、ユーザが扱う及び操作するのに実用的で、不鮮明化因子を扱い、ユーザがトレードオフでき、迅速に及び効率的に補正を再計算できる、色及び彩度のための較正システムを提供することが望ましい。
【先行技術文献】
【特許文献】
【００１７】
【特許文献１】米国特許出願第１２／０４９２６７号
【特許文献２】米国特許出願第１２／８１８１０２号
【特許文献３】米国特許第７０３８７２７号
【発明の概要】
【課題を解決するための手段】
【００１８】
本発明は、ユーザにとって実用的で、不鮮明化因子を扱い、最適なトレードオフをする能力をユーザに与え、迅速に及び効率的に補正を再演算できる様式で、ディスプレイシステムの色及び彩度の較正を可能にするシステム及び方法を提供することにより、先行技術の不利点を克服する。より一般的には、本発明は、彩度及び色の不均一性の補正及び調整を検討し、並びにそれらの変化を検出する及び補正するために光学センサのフィードバックを使用する。これは、極めて明るい画像及び極めて暗い画像を提示することを含むが、これに限定されない。本発明は更に、ユーザにとって実用的なシステムを作製する方法を提供する。これらの方法は、以下：補正を計算する方法、計算プロセスに影響を及ぼし得る不鮮明化因子に対処する方法、どのようにディスプレイの品質因子をトレードオフするかについてユーザが決定を下すことを可能にする情報を提供する方法、並びに再較正の際の彩度補正の迅速な再計算を可能にする方法を含む。
【００１９】
実例的な実施形態では、１つ以上の光センサを使用して、システムの１つ以上のユニットディスプレイにおいて空間的な彩度及び／又は色のばらつきを較正するためのシステム及び方法は、（ａ）ディスプレイユニットを使用して目標画像を計算するステップ、並びに（ｂ）ディスプレイユニットを使用して目標画像を計算する；及び、反復アルゴリズムを用いて、少なくとも１つの空間的な彩度及び色のばらつきを目標画像に収束させ、この反復アルゴリズムは、所定の正確性が達成されない場合、１回以上の反復を適用する（例えばより一般的には、０回以上の反復を使用する）ステップを含む。実例的には、収束のステップはプロジェクタの入出力カーブを測定しなくてよい。実例的には、ディスプレイはプロジェクタであってよく、システム及び方法は、ＯＭＴＥパラメータを改変する及び／又はインジェクション機能を提供するプロセッサ／プロセスを更に含んでよい。その上、システム及び方法は、ステレオディスプレイに、見る人の各目に届くように（見られるように）適合された１つの画像を更に提供してよい。更なる実例的な実施形態では、１つ以上のユニットディスプレイにおいて空間的な彩度及び／又は色のばらつきを較正するためのシステム及び方法は、（ａ）１つ以上の光センサを提供すること、並びに（ｂ）ディスプレイの所望の目標画像の計算において、他の領域と異なるように１つ以上の所定の領域を重み付けすることによって、不鮮明化因子及びそれらの影響を検出することを含む。これらの（検出される）不鮮明化因子は、カメラにおける固定パターンノイズ、カメラレンズ上若しくはスクリーン上の汚れ若しくは混入物、又は他のスクリーンソースと重複しているディスプレイのエッジ上の画素を含んでよい。
【００２０】
別の実施形態では、１つ以上のユニットディスプレイにおいて空間的な彩度及び／又は色のばらつきを較正するためのシステム及び方法は、（ａ）１つ以上の光センサを提供すること、（ｂ）目標画像において複数の品質因子の間でトレードオフするための選択オプションを含むユーザインターフェースを提供することを含む。トレードオフは、彩度の平滑性と明度の間で行われてよく、ユーザがトレードオフの動作ポイントを選択することを可能にするインターフェーススライダをユーザインターフェースに提供することを採用することによって設定できる。同様に、トレードオフは彩度の平滑性と明度の間で行われてよく、ユーザがトレードオフの動作ポイントを選択できるようにプロットが提供される。より一般的には、トレードオフは、明度と色のばらつきの間、演算時間と収束された結果の品質の間、及び／又は別の空間領域上の１つの空間領域におけるシステムの品質に対して行われてよい。
【００２１】
更に別の実例的な実施形態では、１つ以上の光センサを使用して、システムの１つ以上のユニットディスプレイにおいて空間的な彩度及び／又は色のばらつきを較正するためのシステム及び方法は、（ａ）カメラの運動及び光センサの移動に対する、光センサにおける測定値の導関数を計算すること、（ｂ）ユニットディスプレイの運動及び光センサの移動の測定値を推定すること、並びに（ｃ）移動前の初期測光較正データを用いて、運動及び導関数、即ちシステムの新しい所望の補正を推定することを含む。光センサは１つ以上のカメラ及び／又は１つ以上のプロジェクタを含んでよい。システム及び方法は、反復手順を用いて、空間的な彩度及び色のばらつきを目標画像に収束させるためのプロセッサ／プロセスを更に含んでよい。
【００２２】
以下の本発明の説明は、添付の図面を参照する。
【図面の簡単な説明】
【００２３】
【図１】図１は、本発明の実例的な実施形態による、自動較正を用いたディスプレイシステムの一般的かつ例示的な実装形態の図である。
【００２４】
【図２】図２は、本発明の実例的な実施形態による、自動較正を用いた一般的かつ例示的なディスプレイシステムの図であり、この例示的なディスプレイシステムはプロジェクタへ伝達するビデオ信号を改変するためのボックスを含む点において図１とは異なる。
【００２５】
【図３】図３は、色及び彩度の補正を行う実例的なプロセスのステップを示すフローチャートである。
【００２６】
【図４ａ】図４ａは、ディスプレイ上の汚れの不鮮明化因子を補正するための手順のステップを示すフローチャートである。
【００２７】
【図４ｂ】図４ｂは、レンズ上の汚れ及び／又は混入物を扱うためのフローチャートである。
【００２８】
【図５ａ】図５ａは、実例的な実施形態による、ユーザが彩度の平滑性と明度の間でトレードオフすることを可能にする、例示的なグラフィカルユーザインターフェイスシステムである。
【図５ｂ】図５ｂは、実例的な実施形態による、ユーザが彩度の平滑性と明度の間でトレードオフすることができる、例示的なグラフィカルユーザインターフェイスシステムである。
【００２９】
【図６】図６は、システムに効率的な再較正を提供するための手順を示すブロック図である。
【００３０】
【図７】図７は、一時センサを使用して視野領域から色及び彩度の較正を提供するための手順を示すブロック図である。
【００３１】
【図８】図８は、フィードバックを使用して視野領域から色及び彩度の較正を提供するための代替手順のブロック図である。
【発明を実施するための形態】
【００３２】
図１は、実例的な実施形態による、自動較正を用いた例示的なディスプレイシステム１００のブロック図である。この場合、３つのプロジェクタを有するシステムを較正するために、単一のカメラセンサ１１０が使用される。カメラ１１０は従来のユニット（例えばデジタルＳＬＲ）又はカスタム構成であってよく、幾何位置、システムにわたるプロジェクタの色及び彩度を測定することができ、及び補正を生成できる。そして、結果補正を、後に画像をプロジェクタ１４０、１４２、１４４に（それぞれ）伝える画像生成器（ＩＧ）１３０、１３２、１３４（これは従来のＰＣであってよい）に送るために生成された画像に対する補正に組み込んでよく、この補正は、本明細書に記載のシステム及び方法を操作するために保存されている非一時的なソフトウェアアプリケーション（及び／又は電子ハードウェア）（ブロック１２２）を含む例示的なＰＣ１２０内で生成される。又は、補正は直接ＩＧに適用できる。色補正の一部を、相互接続されたプロジェクタ１４０、１４２、１４４に（個別に）アップロードしてよい。プロジェクタ１４０、１４２、１４４は、ソースからスクリーン１５０上に、典型的には適切に重複（例えば図示した１５％の重複）するように合成画像を投影する。実例的な実施形態では、プロジェクタ間の相互接続を（有線及び／又は無線の）ネットワークリンクで制御してよく、このネットワークリンクは従来のネットワーク切替器１６０を含んでよい。
【００３３】
図２は、本発明の一般的な実施形態による、自動較正を用いた例示的なディスプレイシステム２００のブロック図である。この実施形態は図１（類似の要素は同様に番号が付されている）と極めてよく似ているが、リンクされたビデオフィード内に、ビデオウォールコントローラの一種であるＲＧＢスペクトルボックス２２４が提供されている点において異なる。この場合、歪み補正、色補正及び彩度補正は、ワーピングボックス（図では、カナダ、オンタリオのＦｌｅｘｉｂｌｅ  Ｐｉｃｔｕｒｅ  Ｓｙｓｔｅｍｓ  ＩＮＣ製のＩＡ２００ワーピングボックス２３０、２３２、２３４として示される）内に設けるか、又はワーピングボックス内及びプロジェクタ２４０、２４２、２４４内に組み合わせて設けてよい。ワーピングボックス２３０、２３２、２３４は、上記で図示及び説明されるように、１つ以上のソース２６０から画像を受信する。
【００３４】
図３は使用する実例的なアルゴリズム／プロセスである。主なステップは、幾何データ採取（ステップ３１０）、測光データ採取（ステップ３２０）、目標形成（ステップ３３０）、及びセンサフィードバックを使用する解の反復による精緻化（ステップ３４０）である。
【００３５】
幾何マッピングステップ（３１０）では、マップはディスプレイユニットと光学センサの間で形成される。この実例的なプロセスを実行するために多くのアルゴリズム／プロセスを採用してよい。例として、Ｓｃａｌａｂｌｅ  Ｄｅｓｋｔｏｐ（マサチューセッツ州ケンブリッジのＳｃａｌａｂｌｅ  Ｄｅｓｋｔｏｐ  Ｔｅｃｈｎｏｌｏｇｉｅｓ製のソフトウェア）は、１つ以上のカメラから採取された斑点模様のシーケンスを打ち出して、このようなマッピングを生成する。より一般的には、本明細書で使用する用語「アルゴリズム」は、プログラム命令の非一時的なコンピュータ可読媒体を使用して実行されるプロセス／手順の全て又は一部を含むものとして広く理解されるべきである。本明細書に記載のシステム及び方法は、ＦＰＧＡ、ＡＳＩＣ等の専用演算チップを含む、このような非一時的なコンピュータ可読媒体及び／又は電子ハードウェアを使用して実装してよい。更に、方法ステップ又はプロセスブロックが図示及び説明されている箇所において、上述のステップ／プロセスの全て又は一部は、別の分離した、別個のステップ又はプロセス内に実装してもよいことが自明のこととして考えられる。同様に、様々なステップ／プロセス（又はその一部分）は、図示した方法とは異なる方法で機能的に組み合わせることができる。
【００３６】
測光採取フェーズ（３２０）は実例的に、１つ以上のカメラから背景画像をキャプチャすることにより開始してよく、カメラはアンビエント照明及びプロジェクタの黒レベルを記録する。背景画像をキャプチャしたら、その画像を、様々な減算技術等の様々な技術を用いて、続いてキャプチャされる画像からアンビエント照明及び黒レベル照明を除去するために使用してよい。実例的な実施形態では、データ採取フェーズは、１つずつフル彩度の同一調の白（ＲＧＢ＝２５５）の入力画像を各プロジェクタに順番に照明し、一方で残り全てのプロジェクタには黒（ＲＧＢ＝０）の入力画像を送信し、１つ以上のカメラから画像をキャプチャすることにより続行される。これらの採取された画像（用語「明画像」とする）を、ノイズを除去するために低域でフィルタリングし、各ＲＧＢ画素を３ｘ３のホワイトバランス行列によってスケーリングしてよい。実例的には、このホワイトバランス行列は対角行列であってよい。
【００３７】
プロセスの次のフェーズは、目標形成（ステップ３３０）である。一般性を損なわずに、目標画像を演算するメカニズムが多く存在する。目標形成の１つの方法は実例的には、各カメラ又はセンサの明画像を最大出力画像と呼ばれる単一の画像に累算することによって開始する。マスク又は他の方法によって決定されるアクティブ領域を、最大出力画像から選択する。様々な実施形態では、アクティブ領域をより低い解像度にダウンサンプリングしてよい。アクティブ領域は、カメラのアクティブ領域内の各有効画素につき１つの寸法で、Ｎ次元ベクトルＭに展開される。ある実施形態では、最適目標ｔ＊のための二次最適化は以下のように導かれる：
t* = argmin 0.5 * tT * H * t - wl * t  (0 <= t≦Mである)
ここで、H = w2 * (DxT * S 1 * Dx + DyT * S2 * Dy) + w3 * ( DxxT * S3 * Dxx + DyyT * S4 * Dyy)であり、ｗｌ、ｗ２、ｗ３はスカラー量であり、Ｄｘ及びＤｙは、空間ｘ及びｙの一次導関数を演算する行列であり、Ｄｘｘ及びＤｙｙは、ｘ及びｙの二次導関数を演算する行列であり、ｘT及びｙTはｘ及びｙの転置行列である。Ｓ１、Ｓ２、Ｓ３及びＳ４の行列は対角行列であり、領域、彩度、及び画像彩度におけるヒストグラムの統計値に基づいて効果的に空間的に変化する重みである。多くの場合、これらは単位行列として残される。目標画像はＭ以下でなければならないという制約は、目標が達成可能であることを効果的に保証するものである。
【００３８】
最終ステップでは、必要に応じて最大出出力画像有効領域の原寸法へのアップサンプリングｔ＊によって目標Ｔを演算する。
【００３９】
上述のフェーズは実例的に各カメラについて繰り返される。
【００４０】
プロセスの最終フェーズは、カメラに基づくフィードバックを使用した、解の反復による精緻化（３４０）である。解は、一般性を損なうことなく、目標画像を最も緊密に達成するためにプロジェクタへの入力として送信される、Ｒ、Ｇ、Ｂの３つの値である。
【００４１】
反復フェーズのある実例的な実施形態として、プロジェクタの重複領域におけるエッジ混合重量を演算し、それら混合重量を解の初期ポイントとして使用する。反復フェーズの各ステップにおいて、全てのプロジェクタ上に現在の解を表示し、１つ以上のカメラから画像をキャプチャし、これらの画像を目標ｔ＊と比較する。現在の画像Ｃ（例えば低域フィルタリング後の）と目標画像ｔ＊の比率を演算し、プロジェクタへの入力のアップデートを計算する。滑降シンプレックスを含む様々な反復による解法を使用してよい。なお、現在の画像Ｃから得る比率は典型的にはカメラ画素当たり及び色当たりで演算される。なお、プロジェクタ及び測定システムのモデルを十分に説明するならば、ゼロ（０）の反復は反復の「回数」と考えられる。
【００４２】
反復フェーズは、反復の最大回数に達するか、又は適切なエラー尺度を用いて演算された差異が規定の閾値を下回った時に、終了する。
このタイプの解決法には、注目すべき２つの利点がある。１つ目の利点は、このタイプの反復はプロジェクタの入出力カーブを測定することなく完結できることである。最終結果には、多くの測定値を取る必要がない。２つ目の利点は、二次反射が重要なシステムにおいて、このタイプの方法はシステム内の反射率を推定することなく直接補正できることである。例えばドームシステムでは、スクリーンの一部からの光の１０％は、典型的には他の部分から反射した光に由来する。従って、跳ね返る光の影響は極めて重要になり得る。しかしながら、これらの跳ね返りを効果的にモデル化するには、多数の測定値を取得するか、又はスクリーン、プロジェクタ及びカメラの極めて良好なモデルを有していなければならない。
【００４３】
プロジェクタの入出力カーブが利用できるか又は既に推定されている場合、この入出力カーブを最小化に単純に含んでよく、最小化において、最適なステップサイズを推定する補助としてこの入出力カーブを用いる。入出力カーブが利用できない場合は、その情報なしで最小化を行ってよい。
【００４４】
図３で説明されるプロセスは、一度又は複数回繰り返すことができる。例えば、複数の目標画像を、例えば１つをフル彩度で、１つを４分の１の彩度で、１つを４分の３の彩度で形成してよい。そして、各プロジェクタに送信する入力を各目標について決定し、それにより効果的にプロジェクタの彩度についての単純なルックアップテーブルを決定する。
【００４５】
使用するディスプレイシステムは、スクリーン上に蓄積した汚れ又は他の混入物を有することがある。同様に、カメラ等の光学センサは、そのレンズ上に汚れ及び／又は混入物を有することがある。多くのタイプの不鮮明化因子のうちの一つであるこの混入物は、上述のように、部分的にはその所定の領域において、そして全体的には画像の広いエリアにわたって、画像の見た目及び特質に影響を及ぼす。
【００４６】
図４ａは、汚れ／混入物がスクリーン上に存在する際に、不鮮明化因子に対処する（を補正する）ためのプロセスのフローチャートを示す。不鮮明化因子は、適用可能なアルゴリズム／プロセスは望まない色補正を引き起こす。図３のアルゴリズム／プロセスは暗に平滑な色補正を想定するため、スクリーン上の汚れ／混入物は部分的な彩度の低下を生成し得る。画像センサには、汚れ／混入物上の画素がスクリーン上の汚れ混入物が無い画素と同じ明度には見えないため、汚れ／混入物は、部分的な彩度の低下、又はシステムが全体の明度の低下が達成されたと思い込むこと（トリック）を引き起こす潜在性を有している。最も多いのが、ユーザが汚れ／混入物を無視することを好んで選択することである。よって、図４では、第１のステップは可能性がある汚れ及び／又は混入物を見つけるアルゴリズム／プロセスを提供し（ステップ４１０）、汚れ／混入物を無視するための空間的な重み付けタームを生成する（ステップ４２０）。目標ステップ（４３０）を上記図３で説明した様式と同様の様式で完結してよい。よって、図３の最小化を空間的に変化する重み付けタームを含むように改変し、この重み付けタームは、少なくとも部分的に汚れ／混入物のある領域と重複する画素を内包した領域内を除いて、画像内の全ての領域に１．０を設定する。また、このような重複画素には、実例的には値０．０が設定される（図４、ステップ４４０参照）。重み付け設定のために使用した値は例示のためのものであり、その他の様々な値を使用してよい。
【００４７】
スクリーン上の汚れ及び／又は混入物の位置を特定するために様々な方法を用いてよい。様々な実施形態では、プロジェクタの彩度はスクリーンの中央で緩やかに変化することが期待される。従って、２つの方向において高空間周波数を見つけるために、高域フィルタを使用できるが、これはこのような汚れ／混入物を見つけるのに効果的な技法である。
【００４８】
図４ｂでは、別の不鮮明化因子（レンズ上の汚れ及び／又は混入物）を扱うための方法が提供されている。例として、ハイファイイメージングが一般的な顕微鏡では、レンズ上の汚れ／混入物は、しばしば固定パターンノイズの一部とみなされる。つまり、レンズ上の汚れ／混入物のために、個々の画素のゲインは他の画素のゲインと効果的に異なっているということである。なお、汚れ／混入物の影響は局所的なものではない場合があり、多数のカメラ画素に影響する。個々の画素の入力／出力カーブを検出するために様々な露出時間で同じシーンの画像フレームを取得することによって、固定パターンノイズを検出できる（ステップ４５０）。極めて低いゲイン、即ち低い彩度のカメラ画素を、極めて高いゲインのカメラ画素と異なるように重み付けしてよい。上記図４ａのプロセスと同様に、空間的に変化するタームを、図３の最小化に追加してよい（ステップ４６０）。ステップ及び４８０は、４３０及び４４０と実質的に全く同じである。
【００４９】
変化する背景、１つ以上の不適切に測定されたカメラ応答等、その他の不鮮明化因子については、反復アルゴリズムプロセスを使用してよい。
【００５０】
図５ａ及び図５ｂでは、ユーザが明度と彩度平滑性の間でトレードオフするための、２つの例が示されている。
【００５１】
明度と彩度平滑性の間で選択を行うためのユーザインターフェースをユーザに提供することは、最も一般的なトレードオフである。決定を行うためのスライダを含むユーザインターフェースが便利である（図５ａ）。この図では、ユーザはスライダ５２０をライン５１０に沿って移動させて、図３で示し説明した重みを、大きく重み付けされた彩度平滑性又は明度に移動させるよう変化させることができる。別の実施形態では、図３で説明した採取された測光データを、彩度対知覚的均一性のグラフを推定するために使用してよく、またユーザがグラフ５３０上の動作ポイント５４０を選択できるようにすることで、自らが何をトレードオフしているのかをユーザが極めて明確に理解できるようにする。これによりユーザは動作ポイントをより迅速に選択できる。ユーザは日中の時間や部屋の明かりによっていくつかの動作ポイントを必要とする場合があり得ることに留意されたい。
【００５２】
いずれのユーザ選択トレードオフにおいても、これらの決定のためのユーザインターフェースを提供することは、実用的なシステムにおいて使用するために望ましい。また、プロット若しくはスライダ又は動作ポイントを選択するための他の適切なユーザインターフェース機構を提供することも有用である。同様に、ユーザに重要度の高い領域を示すためのツールを提供することも有用である。
【００５３】
図６はシステムに効率的な再較正を提供するための手順を示すブロック図である。ある実例的な手順は、プロジェクタ及びカメラの３次元（３Ｄ）の位置、彩度の低下、スクリーンのＢＲＤＦ等を推定することを試みて、システム全体をモデル化することである。カメラ及びプロジェクタを前のポジション／配向から移動する際、関連する全ての運動の影響を事前に完結された測定値に追加し、図３で説明した最小化の推定を最終結果の優れた予測を用いて再較正してよい。
【００５４】
ＢＲＤＦの推定／測定を必要としない、多数の実例的な実施形態が存在する。１つの例は、様々な例示的な実装形態において一般的であるように、プロジェクタ及びカメラの運動が比較的小さい場合である。この場合、小さな運動によって引き起こされる彩度及び色の階調度を推定することで、色及び彩度における運動の影響を推定できる。この場合、再較正はディスプレイユニットの新しい幾何位置の測定を必要とするが、単に事前に補正された色及び彩度のデータを使用して、色及び彩度の補正を再推定してもよい。代替として、反復手順については、実例的に、所望の解に比較的／極めて近い解ポイントから再較正を開始してよく、このポイントから反復となる。データの採取及び実例的な反復手順の実行には時間がかかるが、この実例的な手順はスクラッチからデータを再取得することについて著しい時間的な利点を提供できる。図６では、ステップ６１０から手順が始まり、この手順は図３で説明する最小化と均等又は同様である。従って、この手順は運動による彩度の階調度を推定できる（ステップ６２０）。基本的な推定では、実際的に必要なデータを提供するだけで十分であるが、これには幾何学的な運動がスクリーン上及び／又はカメラ内の画素をどのように移動するのかについての理解が必要である。ステップ６３０では、手順は移動及び階調度に基づいて補正を推定する。従って、この手順は、図３で説明した最小化と同様（又は同一）の最小化を開始するよう効果的に準備されている（ステップ６４０）。しかしながら、この場合、手順は初期測定値、運動の推定及び階調度に基づいたデータを採用している。
【００５５】
関心視点（即ち見る人が置かれた領域）は、カメラが恒久的に設置された場所又は他の光センサが位置する場所から遠いことがある。恒久的に設置されたセンサは、迅速な再較正が必要である場合に設備を動かすことなくユーザがシステムを再較正できるため有益である。この場合、スクリーン反射パラメータのモデルがあれば（又はその推定を作製すれば）、センサ視点とは異なる１つ以上の視点において見られる彩度を計算するために使用できる。しかしながら、恒久的なセンサはしばしば所望の視点からはるかに遠く、これは、良好な結果を得るためには変換が極めて正確に認識されている必要があることを意味する。図７は、仮センサを使用したシステム及び方法の更なる実施形態である。ステップ７１０では、仮センサは視点に又は視点の近くに置かれる。ステップ７２０では、仮センサ及び恒久的なセンサは同じ測光データを採取し、補正を推定するためにこのデータを使用する。ステップ７３０では、潜在的に空間的に変化するマッピングが、仮センサから恒久的なセンサへ形成される。効率的なマッピングの１つの例は、ルックアップテーブルである。この方法では、仮センサから恒久的なセンサへの色及び彩度は効果的に学習され、仮センサなしで、所望の目標画像を計算できるようにする（ステップ３３０）。
【００５６】
図８は、センサが所望の視点領域にない場合に、フィードバックを使用して視点領域から、色及び彩度の較正を提供するための手順の別の実施形態のブロック図である。ステップ８１０では、色及び彩度の補正は、例えば一般的には図３を参照して示され及び説明される方法ステップを使用して生成される。そして例えば同一調の灰色画像等の画像を、スクリーン上に投影する。ステップ８２０では、ユーザ又は他の（例えば自動化された）方法は、ある領域において画像が暗すぎる又は明るすぎる等、スクリーン上の画像において問題を指摘することができる。代替として、ユーザは領域の色が間違っている（例えば赤色が強すぎるように見える、緑色が強すぎるように見える等）ことを指摘することができる。ステップ８３０では、提供される情報を使用して、目標画像を指摘された領域へアップデートしてよい。実例的には、スクリーン上に現れる最終画像に急激な変更が生じないように、目標画像をアップデートする際に平滑性の制約を使用してよい。ステップ８４０では、ユーザ又は他の方法は、スクリーン上のアップデートされた画像が許容可能かどうかを決める。もし固定又はユーザが設定できる所定のパラメータに応じて許容可能でなければ、プロセスはステップ８２０に戻り、反復する。もし許容可能でなければ、プロセスは完結する。
【００５７】
追加の実施形態
ここで説明される一般的な原理に基づく更なる実施形態が存在する。
【００５８】
改善された画像を提供するために対処するべき様々な不鮮明化因子が存在する。上述のように、著しく不鮮明化する因子は、スクリーン上及び／又はカメラレンズ上の汚れ／混入物である。同様に、ディスプレイシステムはディスプレイスクリーン上又は少なくとも１台のカメラ上のいずれかに機能しない画素を含み得る。更なる例として、所望の関心領域の周りに光沢のある（光を反射する）金属フレーム又は黒い縁飾り等の様々な外部構造が、画像フィールド内に存在し得る。このような例では、境界上の画素は通常適切な明るさ又は暗さよりもはるかに明るく又は暗く見え得る。これらの各不鮮明化因子は適切な手順によって検出され、それらがもたらす影響が考えられる。これらの因子を対象にする実例的な手順は、これら因子のために使用される検出器、並びに図４ａ及び４ｂで説明したような領域の重み付けアルゴリズム／プロセスに基づいている。
【００５９】
様々なディスプレイシステムにとって、部屋を暗くするために部屋の明かりを消したり又は窓のカーテンを閉めたりすることは、部屋がディスプレイシステムを内包する場合、一定の困難をもたらす。従って、較正中に採取される色データ及び彩度データは、ノイズが入るか、又はシステム内に存在する様々な適用可能な不鮮明化因子を生む小さなエラーを引き起こしやすい。カメラセンサは完全には特徴づけられないことに注目すべきである。従って目的は、これらの不鮮明化因子を扱い又は対象にできる適切なアルゴリズム及びプロセスを提供し、更に高品質なディスプレイシステムを提供することである。また、スクリーンの一面から他の一面への光反射は一定量大きくなり得るが、その発生又は量は予測することが難しい。その上、Ｂｒｉｌｌｉａｎｔ（登録商標）色は、明度強化のために非線形に色を混合する、多くのＤＬＰプロジェクタ（例えばテキサス、ダラスのＴｅｘａｓ  Ｉｎｓｔｒｕｍｅｎｔｓ  Ｉｎｃｏｒｐｏｒａｔｅｄから入手可能）で使用されるアルゴリズム／プロセスであるが、十分に特徴づけるには多大な時間を要し得る。これらの因子を対象にするために、反復アルゴリズムは極めて強力な解を提供できる。システムの良好なモデルを用いた高信号対ノイズ比のシステムでは、反復アルゴリズムは必要ではないかもしれない。この場合、ゼロ（０）に等しい回数の反復をステップ３４０で用いるか、又は手順は単純に高品質のデータのおかげで極めて迅速に収束し得る。しかし、ほとんどの関心システムでは、モデルの正確性は不十分であり、所望の正確性を提供するために１回以上の反復が採用される。一般的には、正確性の所望の度合いは、固定の又はユーザ規定／設定のパラメータに基づいていてよい。
【００６０】
較正を行うことができる様々なステレオ方式が存在する。パッシブステレオ方式を用いて、ユーザがメガネを装着する、偏光選択等の機構を用いて各目に光が向かうように意図されたプロジェクタが存在してよい。ディスプレイと共に使用される偏光器は、しばしば色シフト又は彩度の差異を生むことがある。これらの問題及び他の問題を補正するために、カメラ毎又は光センサ毎に２つの目標画像を有することは有意義である。この場合、プロジェクタは同じ空間を充填することから、所望の目標へ１つのプロジェクタを移動するためにパラメータを変化させる間に、もう一方のプロジェクタを黒にする又はそうでなければ無効にすることは有意義である。同様の方法を、色ベースのステレオフィルタ及びアクティブシャッターメガネ等の他のタイプの選択技術と共に使用できるが、これらの選択技術は全て当業で一般的に知られているものである。
【００６１】
ユーザがディスプレイ構成を組成したいと望むであろう様々なトレードオフが存在する。トレードオフのいくつかは、較正又は計算プロセスのスピードと結果の正確性のトレードオフを含む。あるいは、ユーザは明度と色のばらつきをトレードオフしてよい。ある実装形態では、ユーザは空間的な好みを有する。例えば、ディスプレイシステムの中央領域は実質的に均一であることが望ましいが、他の領域は全体の画像に対してそれほど重要でないことがある。この領域の重要度の尺度は、図３で説明した最小化手順で使用するためのパラメータを提供できる。これらの実例的なトレードオフは、著しく改善された画像を提供できる。
【００６２】
センサは、別個のシステムで異なるタイプの複数のセンサを含む、多くの異なるタイプの１つ以上のセンサであってよいことに留意されたい。１つの例は、１つ以上の固定カメラを採用するシステムである。センサは、例えばパン・チルトヘッド構成で適切に移動される１つ以上のカメラであってよい。実例的に、センサは、移動するパン・チルトヘッド上の分光測光計等の光計器又はこのような計器のシーケンスであってよい。実例的な光センサは、スクリーンに組み込まれた多様なフォトダイオードから構成されてよい。
【００６３】
別の実例的な実施形態では、図１の構成は、図示した単一のカメラの代わりに複数の（例えば２台の）カメラを含んでよいことが考えられる。実例的な実施形態では、１台のカメラが左及び中心のプロジェクタによって生成されたスクリーン画像を撮像し、もう一方の（中心を向いた）カメラが中心及び右のプロジェクタによって生成された画像を撮像する。この場合各カメラ用の目標画像は後続の図３のプロセスで形成されるが、この目標画像はカメラ間の重複領域に完全には一致しない。この困難に対処する多数の方法が存在する。１つの方法は、当該技術分野で一般的に採用される公知のエッジ混合技術である。即ち、スクリーンの左側用の目標は全体として１台のカメラからのものであり、スクリーンの右側用の目標は全体としてもう１台のカメラからのものであり、スクリーンの中心用の効果的な目標画像は両方のカメラからのものである。この共通して見られる／撮像される領域では、その領域の左側の寄与は１台のカメラによって管理され、そして、もう一方の領域の端（両方のカメラによって見られる／撮像される部分）においてもう１台のカメラによって管理されるように緩やかに切り替わる。この混合を達成するために、目標画像は典型的には共通の座標系（例えばスクリーンを表す）に変換され、各カメラに送り返される。
【００６４】
関心視点（即ち見る人が置かれた領域）は、しばしばカメラが位置する場所ではない。この場合、スクリーン反射パラメータのモデルを有していれば（又はその推定を作成すれば）、カメラと異なる視点において見られる彩度を計算するために使用できる。他の実施形態では、ここで補正目標の同一性／位置を決定するために光センサを採用する様々な実例的な手順を助長するように視点が配向された場所に、仮センサを置いてよい。このタイプのプロセス（ステップ７１０）を、視点の領域のセンサから他の位置のセンサへの基本的なルックアップテーブルとして実行してよい。このプロセスを、スクリーン反射パラメータ、プロジェクタ及びカメラ若しくは他のセンサの彩度低下を他のプロパティと同様にモデル化することによって実行してよい。上記モデルを改良するために追加の情報を使用してよい。また、実例的には、仮センサを多数の各視野位置に位置決めしてよく、この視野位置はモデルのパラメータを改良するのに望ましいものであってよい。
【００６５】
代替として、ユーザは同様に、コンピュータ（例えば汎用目的のデスクトップコンピュータ、ノートパソコン、タブレット又は手持ちのデバイス）のディスプレイ上で、グラフィカルユーザインターフェース（ＧＵＩ）を使用してよく、これにより上記方法を補助し並びに補正目標画像の同一性及び位置が何かを指摘してよい。このタイプの手順は反復プロセスとして実行されてよい。ユーザは（例えばマウスを使用して）領域を選択してよく、ＧＵＩ又は別の場所上で手動でスライダを回して、スライダをより明るく又は暗くする、若しくはホワイトポイント（例えば見た目をより赤くする等）を変化させるようにしてよい。この情報を反復方法へフィードバックしてよい。システムのモデルをより正確にする（例えばスクリーンの反射モデル、プロジェクタの彩度低下、又はカメラの採取効率の低下を正確にする）か、又は非パラメータ的に単純にその領域内の新しい目標画像を指摘してよく、より広い領域全体に情報を拡大するために目標画像の平滑性の制約を使用してよい。ユーザ又は他の方法からの少数の指摘を使用することで、全体のシステムにわたって良好な品質の目標画像を得ることができる。
【００６６】
本発明の例示的実施形態の詳細な説明は以上である。本発明の精神及び範囲から逸脱しない限りにおいて、様々な改変及び追加を行うことが可能である。上述した様々な実施形態それぞれを、他の説明した実施形態と組み合わせて、複数の特徴を備えるようにしてよい。更に、以上では、本発明の装置及び方法の別個の実施形態を多数説明したが、ここでの説明は、本発明の原理の応用の単なる例示に過ぎない。例えば、人間であるユーザが手順のステップを実行したが、適切な自動化デバイス又は機構、例えば、スクリーンの画像を取得し、従来のプログラムされたビジョンシステムのプロセスをこの画像に対して実行する、マシンビジョンシステムを、人間であるユーザと相互に交換可能なものとして使用することができる、ということも当然考えられる。更に、ここで説明したいずれの手順及び関数を、ハードウェア、プログラム実行指示からなる持続的な及び／又は記録可能なコンピュータ可読媒体を備えるソフトウェア、又はハードウェアとソフトウェアの組み合わせで実装することができる。更に、本明細書で使用されるように用語「プロセス」は、ハードウェア、ソフトウェア又はそれらの組み合わせを用いて関数、方法又は手順を実行する１つ以上のプロセス及び／又はプロセッサを表すことができる。プロセス又はプロセッサは、汎用コンピュータ又は専用の電子回路として実装してよい。従って、本説明は単なる例として理解されることを意図したものであり、本発明の範囲を限定することを意図したものではない。
【図１】
2019032516.tif 000003
【図２】
2019032516.tif 000004
【図３】
2019032516.tif 000005
【図４ａ】
2019032516.tif 000006
【図４ｂ】
2019032516.tif 000007
【図５ａ】
2019032516.tif 000008
【図５ｂ】
2019032516.tif 000009
【図６】
2019032516.tif 000010
【図７】
2019032516.tif 000011
【図８】
2019032516.tif 000012
【外国語明細書】
2019032516000001.pdf