(57)【要約】装置を検査するシステムと方法が開示される。その方法は、複数の可動カメラ（３２，３４）に対し予め定められた位置へ装置を配置することを含む。複数の可動カメラは制御可能なアクチュエータ（３６，３８）に搭載される。複数のカメラは、ユーザーインターフェースでカメラを位置決めする制御可能なアクチュエータを制御することで装置へ向けられる。コンピューティングデバイス４０が装置のＣＡＤモデルから仮想画像を描画する。カメラにより生成された装置の画像はディスプレイ４４に表示される。コンピューティングデバイスは、装置の描画仮想画像もディスプレイに表示させる。カメラ画像及び描画画像は、並列、オーバーレイ方式、又はその両方で表示可能である。【選択図】図２
2013537979.tif 000002
【特許請求の範囲】
【請求項１】
制御可能なアクチュエータに搭載されて装置に向けられる複数の可動カメラに対し、予め定められた位置に前記装置を配置し、
ユーザインターフェースで前記制御可能なアクチュエータを制御して前記カメラを位置決めし、
コンピューティングデバイスで前記装置のＣＡＤモデルから仮想画像を描画し、
前記カメラにより生成された前記装置の画像をディスプレイに表示し、
前記コンピューティングデバイスが、前記装置の描画仮想画像を前記ディスプレイに表示させる、
ことを含む、装置を検査する方法。
【請求項２】
前記カメラにより生成された前記装置の画像及び前記ＣＡＤモデルからの描画仮想画像が、前記ディスプレイに並列に表示される、請求項１に記載の方法。
【請求項３】
前記カメラにより生成された前記装置の画像及び前記ＣＡＤモデルからの描画仮想画像が、前記画像を前記ＣＡＤモデルからの描画仮想画像上に正しく位置させるようにして、前記描画仮想画像に前記画像をオーバーレイ表示するオーバーレイ方式でも、表示される、請求項１に記載の方法。
【請求項４】
前記複数のカメラからの１以上の追加画像が、複数の前記画像のそれぞれを前記ＣＡＤモデルからの描画仮想画像上に正しく位置させるようにして、前記描画仮想画像に前記複数の画像をオーバーレイ表示するオーバーレイ方式で、表示される、請求項３に記載の方法。
【請求項５】
前記コンピューティングデバイスが、前記画像及び前記描画仮想画像を表示するときに、前記制御可能なアクチュエータの位置及び向きに従って、及び、前記複数のカメラのうちの少なくとも１つの物理的特性に従って、前記画像及び前記描画仮想画像を処理する、請求項３に記載の方法。
【請求項６】
前記制御可能なアクチュエータが多自由度で動作可能である、請求項３に記載の方法。
【請求項７】
前記制御可能なアクチュエータが位置及び向きを前記コンピューティングデバイスに通知し、前記コンピューティングデバイスが、該位置及び向きと共に前記複数のカメラの物理的特性に関する情報を使用して前記仮想画像を描画する、請求項６に記載の方法。
【請求項８】
コンピューティングデバイスが、装置の画像、該画像を生成するカメラの複数の物理的特性、該カメラの位置と向き、及び前記カメラに対する前記装置の較正を収集し、
前記コンピューティングデバイスが、前記装置のＣＡＤモデルを収集し、
前記コンピューティングデバイスが、前記装置のＣＡＤモデルから前記装置の仮想画像を描画し、
前記コンピューティングデバイスが、前記装置の画像及び前記装置の描画仮想画像の対応する部分を同時に表示させる、
ことを含む、装置を検査する方法。
【請求項９】
前記カメラにより生成された前記装置の画像及び前記ＣＡＤモデルからの描画仮想画像が、ディスプレイに並列に表示される、請求項８に記載の方法。
【請求項１０】
前記カメラにより生成された前記装置の画像及び前記ＣＡＤモデルからの描画仮想画像が、前記画像を前記ＣＡＤモデルからの描画仮想画像上に正しく位置させるようにして、前記描画仮想画像に前記画像をオーバーレイ表示するオーバーレイ方式でも、表示される、請求項８に記載の方法。
【請求項１１】
複数の前記カメラからの１以上の追加画像が、複数の前記画像のそれぞれを前記ＣＡＤモデルからの描画仮想画像上に正しく位置させるようにして、前記描画仮想画像に前記複数の画像をオーバーレイ表示するオーバーレイ方式で、表示される、請求項１０に記載の方法。
【請求項１２】
前記コンピューティングデバイスが、前記画像及び前記描画仮想画像を表示するときに、前記制御可能なアクチュエータの位置及び向きに従って、及び、前記複数のカメラのうちの少なくとも１つの物理的特性に従って、前記画像及び前記描画仮想画像を処理する、請求項１０に記載の方法。
【請求項１３】
制御可能なアクチュエータにそれぞれ搭載され、装置へ向けられる、複数のカメラと、
検査対象の前記装置の少なくとも部分の仮想画像を描画するコンピューティングデバイスからアクセス可能なメモリに記憶される、前記装置のＣＡＤモデルと、
前記複数のカメラと接続されて前記複数のカメラの１つ以上からの画像を表示する、少なくとも１つのディスプレイと、
を備え、
前記コンピューティングデバイスは、前記制御可能なアクチュエータ及び前記少なくとも１つのディスプレイと接続され、前記制御可能なアクチュエータを制御するためのユーザインターフェースを含み、
前記描画仮想画像も、前記少なくとも１つのディスプレイに表示される、
装置を検査するための検査システム。
【請求項１４】
前記カメラにより生成された前記装置の画像及び前記ＣＡＤモデルからの描画仮想画像が、前記ディスプレイに並列に表示される、請求項１３に記載の検査システム。
【請求項１５】
前記カメラにより生成された前記装置の画像及び前記ＣＡＤモデルからの描画仮想画像が、前記画像を前記ＣＡＤモデルからの描画仮想画像上に正しく位置させるようにして、前記描画仮想画像に前記画像をオーバーレイ表示するオーバーレイ方式でも、表示される、請求項１３に記載の検査システム。
【請求項１６】
前記複数のカメラからの１以上の追加画像が、複数の前記画像のそれぞれを前記ＣＡＤモデルからの描画仮想画像上に正しく位置させるようにして、前記描画仮想画像に前記複数の画像をオーバーレイ表示するオーバーレイ方式で、表示される、請求項１５に記載の検査システム。
【請求項１７】
前記制御可能なアクチュエータは、多自由度で動作可能である、請求項１３に記載の検査システム。
【請求項１８】
前記制御可能なアクチュエータが位置及び向きを前記コンピューティングデバイスに通知し、前記コンピューティングデバイスは、該位置及び向きと共に前記複数のカメラの物理的特性に関する情報を使用して前記仮想画像を描画する、請求項１７に記載の検査システム。
【発明の詳細な説明】
【技術分野】
【０００１】
関連事件の言及
本願は、２０１０年９月２４日出願のＵＳ仮出願６１／３８６，０９２の優先権と利益を主張する。
【０００２】
本発明は、カメラを利用した検査システム及び方法に関する。
【背景技術】
【０００３】
産業装置及び設備に関し、カメラ画像からのコンピュータ化された検査で非常に正確な情報が提供される。しかし、検査対象物が複雑である場合（例えば、最新のガスタービン機械）、及び、複数のカメラ及び複数のカメラ配置が入り組んでいるとき、検査は難しくなる。各カメラ又はカメラ配置と検査される装置との空間的関係を理解するのは、直感的でないことが多い。これが、検査の生産性を妨げる。
【０００４】
検査プロセスは、検査対象装置が複雑なときに特に難しい。例えば、既存の検査システム及び手順を備えた最新のガスタービン機械の検査は困難である。その理由の一つが、装置が大きく且つ検査の配信映像を精査するときに位置を突き止め難い複雑な形状ということである。
【発明の概要】
【発明が解決しようとする課題】
【０００５】
したがって、複雑な装置を検査するための新しく改善されたシステム及び手順が求められる。
【課題を解決するための手段】
【０００６】
本発明は、装置を検査する検査者に、該検査対象の装置に対するカメラ配置の最適状況を認識させるように、直接支援する。本発明の一態様によれば、ジョイスティック、キーボード、及びマウスを含むユーザインターフェースを備えたコンピュータから制御可能なアクチュエータに、カメラが設置される。カメラは、多自由度をもち得る。コンピューティングデバイスのソフトウエアがアクチュエータを全面的に制御し、各カメラの空間的位置及び向きを掌握する。
【０００７】
検査対象のＣＡＤモデルを利用可能であり、コンピューティングデバイスのソフトウエアに読み込まれる。カメラからのビデオ画像は、コンピュータへ中継される。本発明のシステムは、これら利用可能な情報を選択的に並列にして提示することが可能である：カメラからの生画像；ＣＡＤモデルにオーバーレイ表示した生画像と合わせて、ＣＡＤモデル中のカメラの仮想表示並びにカメラ及びＣＡＤモデルの現状概観。
【０００８】
これらの表示で、検査者は、検査対象の装置に対するカメラの位置、カメラ映像をチューニング（微調整）せずに見た外観、及びカメラからの実画像、を全て同時に同じアプリケーションにおいて正確に把握できる。これは、ユーザが予め定められた配置を設定し、トレーニングを実施し、そして検査を実際に行うことに対し大きな手助けとなる。
【０００９】
したがって、装置を検査する新しく改善された方法及びシステムが、本発明の各種態様に応じて提供される。
【００１０】
本発明の一態様によれば、装置を検査する方法が提案される。検査対象装置は、制御可能なアクチュエータに搭載された複数の可動カメラと関連させて、予め定められた位置に配置される。次に、アクチュエータを操作して、複数のカメラを装置に向ける。制御可能なアクチュエータは、ユーザインターフェースを介して検査者又はユーザにより制御されてカメラを位置決めする。
【００１１】
コンピューティングデバイスが検査対象装置のＣＡＤモデルをアクセスし、該ＣＡＤモデルから検査対象装置の仮想画像を描画する。
【００１２】
そして、検査対象装置の画像が、１以上のカメラによってディスプレイに生成される。コンピューティングデバイスは、そのディスプレイに、描画した装置の仮想画像を表示させ得る。
【００１３】
本発明の一態様によれば、カメラにより生成された装置の画像及びＣＡＤモデルから描画された仮想画像が、ディスプレイに並列に表示される。
【００１４】
本発明の他の態様によれば、カメラにより生成された装置の画像及びＣＡＤモデルから描画された仮想画像は、画像をＣＡＤモデルからの描画仮想画像上に正しく位置させるようにして、描画仮想画像に画像をオーバーレイ表示するオーバーレイ方式により、表示され得る。
【００１５】
本発明の他の態様によれば、複数のカメラからの１以上の追加画像が、複数の画像のそれぞれをＣＡＤモデルからの描画仮想画像上に正しく位置させるようにして、描画仮想画像上に複数の画像をオーバーレイ表示するオーバーレイ方式により、表示される。
【００１６】
本発明の他の態様によれば、装置は、該装置の画像が得られた後に検査可能である。この場合、当該画像はカメラにより得られ、そして本発明の態様によれば分析のために記憶される。
【００１７】
この本発明の態様によれば、コンピューティングデバイスが、装置の画像、該画像を生成するカメラの複数の物理的特性、該カメラの位置及び向き、該カメラに対する装置の較正を読み出す。コンピューティングデバイスは、検査対象装置のＣＡＤモデルも読み出す。
【００１８】
コンピューティングデバイスは、装置のＣＡＤモデルから該装置の仮想画像を描画する。このコンピューティングデバイスは、対象となっている装置の部分に応じて、ＣＡＤモデルの一部又は全体を描画し得る。
【００１９】
コンピューティングデバイスは、次に、装置の画像と該装置の仮想画像の対応する部分とを同時に表示させる。カメラにより生成された装置の画像及びＣＡＤモデルからの描画仮想画像は、ディスプレイに並列に表示可能である。さらに、カメラにより生成された装置の画像及びＣＡＤモデルからの描画仮想画像は、ＣＡＤモデルからの描画仮想画像上に画像を正しく位置させるようにして、描画仮想画像に画像をオーバーレイ表示するオーバーレイ方式により、表示され得る。
【００２０】
複数のカメラからの１以上の追加画像が、複数の画像のそれぞれをＣＡＤモデルからの描画仮想画像上に正しく位置させるようにして、描画仮想画像に複数の画像をオーバーレイ表示するオーバーレイ方式により、表示され得る。
【００２１】
本発明の態様によれば、上記方法及び本明細書に記載するその他の方法を実行するシステムも提供される。本発明の一態様によれば、装置を検査する検査システムは、複数のカメラを含み、該複数のカメラのそれぞれは、制御可能なアクチュエータに搭載され、装置へ向けられる。該システムはさらに、コンピューティングデバイスからアクセス可能なメモリに記憶された、装置のＣＡＤモデルを含む。コンピューティングデバイスは、検査対象装置の少なくとも部分の仮想画像を描画する。このシステムは、複数のカメラと接続された少なくとも１つのディスプレイを含み、複数のカメラの１つ以上からの画像を表示する。
【００２２】
コンピューティングデバイスは、各制御可能アクチュエータ及び少なくとも１つのディスプレイと接続されており、各制御可能アクチュエータを制御するユーザインターフェースを含む。コンピューティングデバイスは、さらに、描画仮想画像を少なくとも１つのディスプレイに表示させる。
【図面の簡単な説明】
【００２３】
【図１】本発明の実施形態に係る装置検査システムを説明する。
【図２】コンピューティングデバイスによりディスプレイに表示されるアクチュエータの位置データを説明する。
【図３】本発明の実施形態に係り、コンピューティングデバイスがディスプレイに表示するウインドウを説明する。
【発明を実施するための形態】
【００２４】
図１は、本発明の実施形態に従う検査対象装置及び検査システムを示す。検査対象装置１０が図示されている。この装置１０は、タービンやガスタービン等を含む非常に多くの装置のいずれかであり得る。当該検査対象装置は、サイズ及び形状の両方において非常に複雑であり得る。検査をするためにカメラを使用する場合、欠陥のある位置を簡単に見失ってしまう。欠陥は、傷、ひび、染み、その他の欠陥であり得る。
【００２５】
複数のカメラ１２，１４が検査対象装置１０の内側で動作し、検査が行われる。カメラ１２，１４は、可動の、制御可能なアクチュエータ１６に搭載される。本発明の実施形態によれば、アクチュエータ１６は、第１アーム１８及び第２アーム２０を含む。
【００２６】
２つのカメラ１２，１４が図示されているが、１つのカメラも使用され得る。他に、２個以上のカメラも使用され得る。
【００２７】
第１アーム１８は、矢印２２で示す方向に沿って制御可能に動かせる。したがって、カメラ１２，１４は、検査実行にあたり、検査対象装置１０の中心を通して動かすことができる。
【００２８】
第２アーム２０は、矢印２４で示す方向に回動可能である。第２アーム２０は、図の内外にも回動可能である。したがって、制御可能な可動アクチュエータ１６は、多自由度をもつ。アクチュエータ１６を方向２２に沿って移動させつつ、第２アーム２０を回動させ、検査対象装置１０の全内部を精査することができる。
【００２９】
本発明の他の実施形態によれば、伝送回路がアクチュエータ１６に取り付けられ、アクチュエータ１６の位置及び向きを、インターフェース２８を介してコンピューティングデバイス２６へ伝達する。伝送回路は、カメラ１２，１４の全物理的特性も、コンピューティングデバイス２６へ伝送し得る。これにより、コンピューティングデバイス２６は、カメラ１２，１４が装置１０上の何を見ているのか掌握し、カメラ１２，１４の特性を理解する。
【００３０】
本発明の実施形態に係る装置検査システムが、さらに図２に図示されている。検査されるべき装置３０が図示される。該装置は、典型的には、ガスタービン機械のような複雑な装置である。
【００３１】
このシステムは、複数のカメラ３２，３４を含む。上述のように、２つのカメラを図示するが、２以上のカメラも使用し得る。本発明の他の実施形態によれば、１つのカメラも使用し得る。使用するカメラのタイプは、複雑な装置の検査を実行するために使用される標準的産業カメラである。
【００３２】
各カメラ３２，３４は、それぞれアクチュエータ３６，３８に取り付けられる。本発明の実施形態によれば、アクチュエータ３６，３８は、複数部品を含む単一機構の部分である。あるいは、アクチュエータ３６，３８のそれぞれが、個別のアクチュエータ機構であり得る。アクチュエータ３６，３８は、複数のカメラ３２，３４のそれぞれに対して多自由度を提供する。これにより、カメラ３２，３４は、検査対象装置上のいかなる所望の位置にも向けることができる。
【００３３】
アクチュエータは、インターフェース４２を通してコンピューティングデバイス４０により制御可能である。コンピューティングデバイスは、パーソナルコンピュータ、ラップトップ、又は専用設計コンピュータも含んだ、如何なるタイプのコンピューティングデバイスでもよい。検査対象装置に対するアクチュエータ３６，３８の位置及び向きは、コンピューティングデバイス４０の一部であるユーザインターフェースによりコントロールされる。使用可能なユーザインターフェースは、マウス、キーボード、キーパッド、タッチスクリーン、及びジョイスティックを含む。これらは、コンピューティングデバイスの一部として提供される。
【００３４】
システムは、カメラ３２，３４のそれぞれと接続された１以上のディスプレイ４４を含む。本発明の一実施形態では、各カメラ３２，３４がディスプレイ４４に接続される。本発明の他の実施形態によれば、１つのカメラが個別に１つのディスプレイと接続され得る。
【００３５】
検査され得る複数の装置の１以上のＣＡＤモデルがメモリ４８に記憶される。メモリ４８は、遠隔操作でコンピューティングデバイス４０からアクセスされる遠隔サーバの一部でもよい。メモリ４８は、検査対象装置３０のＣＡＤモデルを含む。
【００３６】
コンピューティングデバイス４０は、検査対象装置のＣＡＤモデルから該検査対象装置の仮想画像を描画する。これは、OpenGL（登録商標）などの公的に利用可能なソフトウエアを使用して実行可能である。コンピューティングデバイス４０は、検査対象装置全体の完全な仮想画像を描画できるし、あるいは、検査対象装置の部分の仮想画像を描画して時間を節約することもできる。
【００３７】
カメラ３２，３４の位置及び向きは、検査対象装置の画像を得るべくコンピューティングデバイス４０のユーザインターフェースから制御される。本発明の実施形態によれば、検査対象装置からの画像及び描画された仮想画像は、同時に表示される。
【００３８】
図３は、コンピューティングデバイス４０により表示されるウインドウ５０を図示する。画像５２，５４は検査対象装置からの生画像である。もし、傷、ひび、脱色等の欠陥が存在すれば、当該欠陥はここに現れる。しかし、これら画像を単純に精査しただけでは、検査対象装置におけるその位置が検査者にとって不確定なままのことがある。検査者にとっては、検査対象装置の特質なのか、実際に欠陥があるのか否かも、不確かであり得る。
【００３９】
そこで、本発明は、画像５８，５６のように、生画像に対応する描画仮想画像も表示する。すなわち、生画像５２は描画仮想画像５８と関連する。また、生画像５４は描画仮想画像５６と関連する。
【００４０】
一般的に、仮想画像は、予め定められた仮想カメラ位置及び内的特性を用いてＣＡＤモデルから描画される。仮想画像と生画像との間の相互関係を確立するために、仮想カメラは、生カメラと同じ位置及び内的特性をもつ必要がある。内的較正プロセスが生カメラの内的特性を評価する。外的較正プロセスの後、何時でも、ＣＡＤモデルに関する生カメラの位置は、アクチュエータ位置測定値から計算される。
【００４１】
生カメラの位置及び内的パラメータが得られれば、これらはOpenGL（登録商標）などのコンピュータグラフィック技術を使用してＣＡＤモデルから仮想画像５６，５８を描画するべく、仮想カメラに使用される。生画像５４及び仮想画像５６の最上部中央の穴など、仮想画像及び生画像は類似構造を示す。
【００４２】
したがって、本発明の実施形態は、検査対象装置の生画像を描画仮想画像と共に表示することを可能にする。本発明の実施形態によれば、生画像５４は、描画仮想画像５６の隣に表示される。これら画像は並列に表示可能である。これは、検査対象装置の欠陥をより簡単に特定することを可能にする。すなわち、検査者が、既に使用に供されている検査対象装置の画像を精査するにあたり、未使用状態の装置のモデルを見ることができるからである。
【００４３】
追加的に、あるいは代替的に、生ビデオ画像５２は、ウインドウ６０内の、より広域版の描画仮想画像６２における画像６４のように、オーバーレイ表示することが可能である。これは、位置を相関させることで行われる。
【００４４】
アクチュエータがその位置をコンピューティングデバイスに通知するので、コンピューティングデバイスは、カメラの位置及び向きを掌握する。カメラの必要な物理的特性も、アクチュエータインターフェースを通してコンピューティングデバイスへ送信可能である。あるいは、カメラの物理的特性は、メモリに記憶して必要に応じコンピューティングデバイスからアクセスすることもできる。コンピューティングデバイスは、この情報を利用して、生画像６４，６６を描画仮想画像６２上に配置する。
【００４５】
図３に示すように、複数の画像６４，６６は、検査中の装置の描画仮想画像６２上にオーバーラップ表示され得る。
【００４６】
ディプレイ６０は、検査者が画像の位置及び生画像５２，５４にある欠陥の位置を容易に特定することを補助する。
【００４７】
本発明の検査ステーションは、異なるモードで使用可能である。第１モードにおいては、検査対象装置のリアルタイム検査から生成の生画像がコンピューティングデバイスに取り込まれる。この場合、コンピューティングデバイスは、リアルタイムで上記ステップを実行し、アクチュエータの位置、したがってカメラの位置を制御するべく使用可能である。
【００４８】
本発明の他の実施形態によれば、装置の画像は、カメラ及び可動の制御可能なアクチュエータを使用して生成可能であり、当該画像がメモリに記憶される。分析時には、画像は、コンピューティングデバイスからアクセス可能なメモリに記憶されている。
【００４９】
コンピューティングデバイスは、上記のように、検査対象装置のＣＡＤモデルにアクセスする。コンピューティングデバイスは、例えばOpenGL（登録商標）を使用して、ＣＡＤモデルから検査対象装置の仮想画像を描画する。コンピューティングデバイスは、次いで、１以上の生画像を描画仮想画像と同時に表示させる。
【００５０】
生画像及び描画仮想画像の表示は、上述のような並列又はオーバーラップ方式、あるいはその両方である。並列表示及びオーバーレイ表示は、図３に示してある。
【００５１】
検査対象装置は、検査前に、カメラ又はアクチュエータに対して規定の位置に配置される。これにより、コンピューティングデバイスは、装置のＣＡＤモデルの適切な部分へ画像を関連付けることができる。これを較正（キャリブレーション）と呼ぶ。較正は手動で実行可能であり、較正の詳細がコンピューティングデバイスに通知される。
【００５２】
本発明の基礎的な新規特徴を、その好適な実施形態に適用して、図示し、説明し、指摘したが、記載した方法及びシステムの形態及び詳細とその動作において、種々の省略、代替、変更を、本発明の思想を逸脱することなく、当業者であればなし得る。すなわち、特許請求の範囲によってのみ範囲を定めるべきと考える。
【符号の説明】
【００５３】
１０，３０  検査対象の装置
１２，１４，３２，３４  カメラ
１６，３６，３８  アクチュエータ
１８  第１アーム
２０  第２アーム
２６，４０  コンピューティングデバイス
２８，４２  インターフェース
４４  ディスプレイ
４８  メモリ
５０，６０  ウインドウ
５２，５４，６４，６６  画像（生）
５６，５８，６２  画像（仮想）
【図１】
2013537979.tif 000003
【図２】
2013537979.tif 000004
【図３】
2013537979.tif 000005
【手続補正書】
【提出日】平成24年2月13日(2012.2.13)
【手続補正１】
【補正対象書類名】特許請求の範囲
【補正対象項目名】全文
【補正方法】変更
【補正の内容】
【特許請求の範囲】
【請求項１】
第１及び第２アームをもち且つコンピューティングデバイスに制御される制御可能なアクチュエータに搭載されて装置に向けられる複数の可動カメラに対し、予め定められた位置に前記装置を配置し、
前記コンピューティングデバイス上のユーザインターフェースで前記制御可能なアクチュエータを制御して前記カメラを位置決めし、
前記コンピューティングデバイスで前記装置のＣＡＤモデルから仮想画像を描画し、
前記カメラにより生成された前記装置の画像をディスプレイに表示し、
前記コンピューティングデバイスが、前記装置の描画仮想画像を前記ディスプレイに表示させる、
ことを含む、装置を検査する方法。
【請求項２】
前記カメラにより生成された前記装置の画像及び前記ＣＡＤモデルからの描画仮想画像が、前記ディスプレイに並列に表示される、請求項１に記載の方法。
【請求項３】
前記カメラにより生成された前記装置の画像及び前記ＣＡＤモデルからの描画仮想画像が、前記画像を前記ＣＡＤモデルからの描画仮想画像上に正しく位置させるようにして、前記描画仮想画像に前記画像をオーバーレイ表示するオーバーレイ方式でも、表示される、請求項１に記載の方法。
【請求項４】
前記複数のカメラからの１以上の追加画像が、複数の前記画像のそれぞれを前記ＣＡＤモデルからの描画仮想画像上に正しく位置させるようにして、前記描画仮想画像に前記複数の画像をオーバーレイ表示するオーバーレイ方式で、表示される、請求項３に記載の方法。
【請求項５】
前記コンピューティングデバイスが、前記画像及び前記描画仮想画像を表示するときに、前記制御可能なアクチュエータの位置及び向きに従って、及び、前記複数のカメラのうちの少なくとも１つの物理的特性に従って、前記画像及び前記描画仮想画像を処理する、請求項３に記載の方法。
【請求項６】
前記制御可能なアクチュエータが多自由度で動作可能である、請求項３に記載の方法。
【請求項７】
前記制御可能なアクチュエータが位置及び向きを前記コンピューティングデバイスに通知し、前記コンピューティングデバイスが、該位置及び向きと共に前記複数のカメラの物理的特性に関する情報を使用して前記仮想画像を描画する、請求項６に記載の方法。
【請求項８】
コンピューティングデバイスが、装置の画像、該画像を生成するカメラの複数の物理的特性、該カメラの位置と向き、及び前記カメラに対する前記装置の較正を収集し、前記カメラの位置及び向きを制御し、
前記コンピューティングデバイスが、前記装置のＣＡＤモデルを収集し、
前記コンピューティングデバイスが、前記装置のＣＡＤモデルから前記装置の仮想画像を描画し、
前記コンピューティングデバイスが、前記装置の画像及び前記装置の描画仮想画像の対応する部分を同時に表示させる、
ことを含む、装置を検査する方法。
【請求項９】
前記カメラにより生成された前記装置の画像及び前記ＣＡＤモデルからの描画仮想画像が、ディスプレイに並列に表示される、請求項８に記載の方法。
【請求項１０】
前記カメラにより生成された前記装置の画像及び前記ＣＡＤモデルからの描画仮想画像が、前記画像を前記ＣＡＤモデルからの描画仮想画像上に正しく位置させるようにして、前記描画仮想画像に前記画像をオーバーレイ表示するオーバーレイ方式でも、表示される、請求項８に記載の方法。
【請求項１１】
複数の前記カメラからの１以上の追加画像が、複数の前記画像のそれぞれを前記ＣＡＤモデルからの描画仮想画像上に正しく位置させるようにして、前記描画仮想画像に前記複数の画像をオーバーレイ表示するオーバーレイ方式で、表示される、請求項１０に記載の方法。
【請求項１２】
前記コンピューティングデバイスが、前記画像及び前記描画仮想画像を表示するときに、前記制御可能なアクチュエータの位置及び向きに従って、及び、前記複数のカメラのうちの少なくとも１つの物理的特性に従って、前記画像及び前記描画仮想画像を処理する、請求項１０に記載の方法。
【請求項１３】
制御可能なアクチュエータにそれぞれ搭載され、コンピューティングデバイスの制御で装置へ向けられる、複数のカメラと、
検査対象の前記装置の少なくとも部分の仮想画像を描画する前記コンピューティングデバイスからアクセス可能なメモリに記憶される、前記装置のＣＡＤモデルと、
前記複数のカメラと接続されて前記複数のカメラの１つ以上からの画像を表示する、少なくとも１つのディスプレイと、
を備え、
前記コンピューティングデバイスは、前記制御可能なアクチュエータ及び前記少なくとも１つのディスプレイと接続され、前記制御可能なアクチュエータを制御するためのユーザインターフェースを含み、
前記描画仮想画像も、前記少なくとも１つのディスプレイに表示される、
装置を検査するための検査システム。
【請求項１４】
前記カメラにより生成された前記装置の画像及び前記ＣＡＤモデルからの描画仮想画像が、前記ディスプレイに並列に表示される、請求項１３に記載の検査システム。
【請求項１５】
前記カメラにより生成された前記装置の画像及び前記ＣＡＤモデルからの描画仮想画像が、前記画像を前記ＣＡＤモデルからの描画仮想画像上に正しく位置させるようにして、前記描画仮想画像に前記画像をオーバーレイ表示するオーバーレイ方式でも、表示される、請求項１３に記載の検査システム。
【請求項１６】
前記複数のカメラからの１以上の追加画像が、複数の前記画像のそれぞれを前記ＣＡＤモデルからの描画仮想画像上に正しく位置させるようにして、前記描画仮想画像に前記複数の画像をオーバーレイ表示するオーバーレイ方式で、表示される、請求項１５に記載の検査システム。
【請求項１７】
前記制御可能なアクチュエータは、多自由度で動作可能である、請求項１３に記載の検査システム。
【請求項１８】
前記制御可能なアクチュエータが位置及び向きを前記コンピューティングデバイスに通知し、前記コンピューティングデバイスは、該位置及び向きと共に前記複数のカメラの物理的特性に関する情報を使用して前記仮想画像を描画する、請求項１７に記載の検査システム。
【国際調査報告】
2013537979.tif 000006
2013537979.tif 000007