(57)【特許請求の範囲】
【請求項１】
関心対象物内または関心対象物上の異物を検出するための方法であって、
異物が無いと判っているサンプル対象物の第１の画像群をキャプチャし、
既定のカラーパレットからの複数の色を前記第１の画像群の色コンテンツに応じて少なくとも第１クラス及び第２クラスに分類し、
前記関心対象物の第２の画像群をキャプチャし、
前記第２の画像群内に前記第１クラスからの色がある場合に、前記関心対象物内または関心対象物上に異物が存在するかどうかを判定し、
異物が存在すると判定された場合に前記異物の場所をユーザに示し、
存在すると判定された異物が異物ではない旨のフィードバックをユーザから受け取り、
その異物に関連付けられた色のセットを判定し、
前記既定のカラーパレットからの複数の色を前記第１の画像群の色コンテンツおよび判定した色のセットに応じて少なくとも前記第１クラス及び前記第２クラスに再分類することを備える、前記方法。
【請求項２】
既定のカラーパレットからの複数の色を前記第１の画像群の色コンテンツに応じて分類することは、当該複数の色を単純ベイズ分類法を介して分類することを含む、請求項１に記載の方法。
【請求項３】
既定のカラーパレットからの複数の色を前記第１の画像群の色コンテンツに応じて分類することは、前記複数の色のうち前記第１の画像群に現れるすべての色を前記第２クラスに割り当て、前記複数の色のうちの他の色全てを前記第１クラスに割り当てることを含む、請求項１に記載の方法。
【請求項４】
異物の場所をユーザに示すことは、前記第２の画像群の内の所与の画像を、異物の場所を有色表示し当該画像の残りをグレースケール表示した状態で、ユーザに示すことを含む、請求項１に記載の方法。
【請求項５】
異物の場所をユーザに示すことは、前記第２の画像群の内の所与の画像を、予め選択した色で異物の場所を強調表示した状態でユーザに示すことを含む、請求項１に記載の方法。
【請求項６】
異物の場所をユーザに示すことは、ユーザに文字メッセージを表示することを含む、請求項１に記載の方法。
【請求項７】
サンプル対象物の第１の画像群をキャプチャすることは、
前記第１の画像群の各画素についての複数の強度値をキャプチャすることであって、当該複数の強度値の各々が可視光、赤外光、または紫外光のうちの特定の波長に関連付けられている、前記キャプチャすることと、
所望の解像度と各画素についての前記複数の強度値における強度値の数とに応じて前記既定のカラーパレットが規定されるように、前記複数の強度値の各々を前記所望の解像度へとキャプチャすることを含む、請求項１に記載の方法。
【請求項８】
前記関心対象物は飛行機の内部であり、前記サンプル対象物は事前に検査されて異物が無いと判っている航空機の内部の一部である、請求項１に記載の方法。
【請求項９】
関心対象物内または関心対象物上の異物を検出するためのシステムであって、
イメージングシステムと、
異物が無いと判っているサンプル対象物の第１の画像群をキャプチャすることを前記イメージングシステムに命令するように構成されたシステム制御部と、
前記第１の画像群の色コンテンツに応じて既定のカラーパレットから複数の色を選択するように構成された色選択部とを備え、
前記システム制御部は、前記イメージングシステムに前記関心対象物の第２の画像群をキャプチャするように命令し、選択された色が前記第２の画像群内にある場合にユーザに通知するように更に構成され、前記システムは、前記選択された色が関心対象物内または関心対象物上の異物を示す旨の確認と、前記選択された色が異物を示さない旨の指示とのうちの一方を受け取るように構成されているユーザインターフェースを更に備え、前記色選択部は、前記選択された色が異物を示さない旨の指示に応答して、前記第１の画像群の色コンテンツおよび選択された色に応じて前記既定のカラーパレットから複数の色を再選択するように構成される、前記システム。
【請求項１０】
頭部装着型の光学式ディスプレイを備えたウェアラブルコンピュータとして前記イメージングシステム、前記システム制御部、前記色選択部、及び前記ディスプレイがまとめて実装されている、請求項９に記載の前記システム。
【請求項１１】
前記色選択部は、前記第１の画像群に現れる全ての色を選択するように構成されている、請求項９に記載の前記システム。
【請求項１２】
システム制御部は、前記イメージングシステムに、前記第１の画像群の各画素についての複数の強度値をキャプチャすることであって、当該複数の強度値の各々が可視光、赤外光、または紫外光のうちの特定の波長に関連付けられている、前記キャプチャすることと、所望の解像度と各画素についての前記複数の強度値における強度値の数とに応じて前記既定のカラーパレットが規定されるように、前記複数の強度値の各々を前記所望の解像度へとキャプチャすることを命令するように構成されている、請求項９に記載の前記システム。
【発明の詳細な説明】
【技術分野】
【０００１】
本出願は、概して、品質管理業務に関し、より詳細には、色に基づく異物検出システムに関する。
【背景技術】
【０００２】
異物破片は、製品またはシステムにとって外来物であって損害または機能不全を引き起こし得る物質、破片、または物品である。異物による損害は、製品の一部ではない任意の物体である異物であって、物理的または経済的な用語で表現されて製品に必要な安全性または性能特性を低下させるものもあればそうでないものある異物に起因する任意の損害のことである。ＦＯＤは、異物によって製品になされた損害及び異物自体の両方を表すのにしばしば、特に航空機分野で使われる頭字語である。
【発明の概要】
【発明が解決しようとする課題】
【０００３】
異物による損害は、航空業界だけでも年間１３億ドルに達すると考えられており、それには遅延、航空機変更、燃料費増、予定外のメンテナンス作業などの直接的および間接的な費用が含まれる。
【課題を解決するための手段】
【０００４】
一例によると、関心対象物内または関心対象物上の異物を検出するための方法が提供される。例えば一連の個々の画像やビデオストリームといった、異物が無いと判っているサンプル対象物の第１の画像群がキャプチャされる。既定のカラーパレットからの複数の色が第１の画像群の色コンテンツに応じて少なくとも第１クラス及び第２クラスに分類される。関心対象物の第２の画像群がキャプチャされる。第２の画像群内に第１クラスからの色があれば、関心対象物内または関心対象物上に異物が存在すると判定される。
【０００５】
別の例によると、関心対象物内または関心対象物上の異物を検出するためのシステムが提供される。このシステムは、イメージングシステムと、異物が無いと判っているサンプル対象物の第１の画像群をキャプチャすることを前記イメージングシステムに命令するように構成されたシステム制御部とを含む。色選択部は、前記第１の画像群の色コンテンツに応じて既定のカラーパレットから複数の色を選択するように構成される。前記システム制御部は、前記イメージングシステムに前記関心対象物の第２の画像群をキャプチャするように命令し、選択された色が前記第２の画像群内にある場合にユーザに通知するように更に構成されている。
【０００６】
更に別の例によると、非一時的コンピュータ可読媒体が提供される。システム制御部は、異物が無いと判っているサンプル対象物の第１の画像群をキャプチャすることをイメージングシステムに命令するように構成される。システム制御部は、前記第１の画像群を受け取るように構成されたイメージャーインターフェースと、ユーザからの入力を受け取るように構成されたユーザインターフェースとを備える。色選択部は、既定のカラーパレットからの複数の色を前記第１の画像群の色コンテンツに応じて少なくとも第１クラス及び第２クラスに分類するように構成される。前記システム制御部は、前記イメージングシステムに関心対象物の第２の画像群をキャプチャするように命令し、前記第２の画像群内に前記第１クラスの色があるときにユーザに通知し、その色が前記関心対象物内の異物を現すかどうかを示すユーザからの入力を前記ユーザインターフェースを介して受け取るように更に構成される。
【０００７】
本発明のハイブリッド量子ビットアセンブリによる特徴、目的、および利点は、図面と併せて以下に述べる詳細な説明からより明らかになるであろう。
【図面の簡単な説明】
【０００８】
【図１】異物検出システムの例を示す図。
【図２】赤緑青色空間における複数の異物を示す図。
【図３】関心対象物内または関心対象物上の異物を検出するための方法例を示す図。
【図４】関心対象物内または関心対象物上の異物を検出するための別の方法例を示す図。
【図５】図１乃至４に開示したシステム及び方法の例を実装可能なハードウェア構成要素からなる例示システムを示す模式的ブロック図。
【発明を実施するための形態】
【０００９】
本明細書では、製品または環境に想定される色コンテンツからのずれを探索して異物の存在を検出する異物検出システムについて説明する。なお、本明細書では、適切な検出器で受け取られる強度値のセットによって表されるような複数の波長にまたがるオブジェクトの強度プロファイルを記述するために「色」という用語を広義で用いる。したがって、ある物体上の所与の場所は、照明、検出器の角度、および当該物体からの距離（距離が増えたときの画素ブレンドによる等）に基づき複数の「色」を有することがあり、これらの色の各々は本システムによって当該物体の想定色コンテンツの一部としてキャプチャされ記録される。なお、所与の「色」は可視、赤外および紫外のスペクトルにおける波長に対する強度を含むことができ、所与の波長に対する強度が適切な波長の光を用いるアクティブ照明中かまたは環境照明下で測定できる。ある実装例では、所与の画素の色が、赤色光、緑色光および青色光用の一検出器での複数の強度値として示される。
【００１０】
この異物検出システムは、製造した組立体における異物破片（ＦＯＤ）が当該製造施設から次の組立へと、より深刻には顧客／エンドユーザへと「逃げる」前に当該異物破片の存在を知らせる。ある実装例のシステムは、デジタルビデオカメラ、ディスプレイ、ＬＣＤディスプレイ等のイメージングシステムと、入力ビデオデータを処理して色によって視野内の異物を割り出すマシンビジョンソフトウェアアルゴリズムを備えたポータブルコンピュータとを含むことができる。このシステムは、異物が検出されるとオペレータに警告して、組立体内に異物を封入してしまうかもしれない次の組立工程の前に異物を取り除けるようにする。ある実装例の異物検出システムは、現状では検査師がＦＯＤを視覚的に走査する際に標準的な懐中電灯を使用することから、懐中電灯に似た構造で実装されてよく、この場合、懐中電灯の使用に満足している検査師は当該提案のシステムがとても馴染みやすいものであると判るであろう。別の実装例のシステムは、頭部装着型の光学式ディスプレイを備えたウェアラブルコンピュータに実装され得る。
【００１１】
図１は異物 検出システム１０の一例を示す。このシステムは、異物が無いと判っているサンプル対象物の第１の画像群（a first set of images）をキャプチャするように、システム制御部１６にあるイメージャーインターフェース１４によって命令されるイメージングシステム１２を含む。なお、当該画像セットは一連の個々の画像やビデオストリーム内の複数のフレームを含むことができる。本願の目的に関し、「対象物」は、異物の存在が望まれない任意の製品または環境であり得る。例えば、関心対象物は航空機の内部であり得る。サンプル対象物は、異物の不存在が既知であることに加え、任意の方法で関心対象物を表現するように選択される。例えば、サンプル対象物は、関心対象物と同じタイプでかつ検査済みの製品であってよく、または、ある時点で異物が無いと判っている関心対象物それ自体のこともあり得る。イメージングシステム１２は、複数の波長で光を検出して各画素についての複数の強度値からなるセットであって、当該画素の色を画定する複数の強度値からなるセットを生成するように構成され得る。
【００１２】
色選択部１８は、規定のカラーパレットから第１の画像群の色コンテンツに応じて複数の色を選択するように構成される。当該規定のカラーパレットは、例えば、測定した波長から形成され得る、所望の解像度レベルで分画（bin)された全ての可能性のある色を持ち得る。８ビットの赤色値、緑色値及び青色値を使用するある例では、分画が各々５ビット幅で各波長につき３１分画あり、可能性のある色が２９７９１である。ある例では、第１の画像群からの色の分布は、所与の色が計算されたバックグラウンドである確率Ｐ（Ｓ｜Ｃ）と当該確率が所定の閾値より下である場合には選択された色とを用いて、色毎に単純ベイズ分類法を介して判定され得る。この例では、各色が出現するであろう確率が、すなわちその色がサンプル対象物の一部であるとすればＰ（Ｃ｜Ｓ）が、サンプルの第１の画像群から見積もることができ、計算する必要がある他の確率Ｐ（Ｃ）及びＰ（Ｓ）は過去のテストデータから見積もることができる。別の例では、第１の画像群に存在しない全ての色が選択される。最終的に、第１の画像群内の色群から所定距離より外側にある全ての色が請託され得る。なお、本システムによって高確率または低確率の色が明示的に特定されるかどうかに関わらず、それらの色を「許可」クラスと「却下」クラスとに分けて、関心対象物内に存在するはずのない一群の色を本来的に示してよく、それらの色が明瞭化用の選択された複数の色として取り扱われる。
【００１３】
その後、イメージングシステム１２は、関心対象物の第２の画像群（a second set of images）をキャプチャするようにシステム制御部によって命令され得る。全ての可能性のある色が事前に分類されているので、当該画像群はリアルタイムで処理されてそれら画像内に選択された複数の色に含まれる内の色を有する画素があるかどうかが判定される。もしあるなら、当該画素が関連付けられたディスプレイ２０においてユーザに示され得る。例えば、選択された複数の色に含まれる色を有する画素は強調表示されてよく、あるいは、他の画素をグレースケール表示しつつ当該画素を有色表示されてよい。あるいは、選択された複数の色に含まれる色を有する画素がなければ、文字表示でユーザに通知してもよい（「問題なし」等）。このように、ユーザに提示された表示データが、画像内の異常が強調されるのをいっそう確実にし、関心対象物内または関心対象物上の異物が検出される可能性を大幅に増加させる。ある実装例では、ユーザは、示された場所における異物の存在を、適宜の入力装置２４を介してユーザインターフェース２２で、確認または却下することができる。ユーザが異物を確認した場合には、選択された複数の色に対する変更は行われない。異物が存在しないとユーザが示した場合には、検出された異物に関連付けられた一以上の色が選択された複数の色から除去されてよく、この場合、その色と同じ色の物体が、あるいは任意で、検出された色付近の範囲にある類似色を有する物体がそのユーザに対して強調表示されないようになる。このように、関心対象物のリアルタイム走査中であっても本システムのトレーニングを継続的に行うことができ、異物検出の正確さが向上する。
【００１４】
図２は、複数の異物５２〜５７を赤緑青（ＲＧＢ）色空間で表現したもの５０である。これら異物の例は、製品に関連付けられた作業スペースで使用されることがありそのまま残された可能性のある、コッタピン、テープ、ワッシャ、およびその他の小さな物が含まれる。この色空間は、３軸６２、６４、６６によって規定され、各軸は、所与の画素の赤、青、緑の色コンテンツのうちの一つを８ビット値の範囲で示す。なお、イメージャーから物体までの距離、物体毎のばらつき、および照明のばらつきがいずれもイメージャーで受け取られる色コンテンツを変化させ得るため、各異物５２〜５７が相当の色範囲をもつものとして表現される。このことによって、所与の異物に関連する分類用の色を正しく規定することが困難になる。しかし、本願の画像は所与の対象物に対する背景色の学習に焦点を当てており、その結果、各物体に関連する色の全範囲とともに、ある検出システムでは予期していなかったために考慮されなかった異物に関連する色も考慮に入れることができる。
【００１５】
上述した構造的及び機能的特徴を考慮し、図３、４を参照して本発明の様々な態様に従う方法をより良く理解できるであろう。なお、図３、４の方法は説明の簡略化のために連続的に実行されるものとして示されているが、本発明は図示された順序に限定されず、本発明に従う一部の態様では本明細書に示され説明された態様とは異なる順序および／または同時に行われ得る。さらに、示された特徴の全てが本発明の一態様による方法を実施するのに必要とされるわけではない。
【００１６】
図３は、関心対象物内または関心対象物上の異物を検出するための方法１００の一例を示す。１０２では、異物が無いと判っているサンプル対象物の第１の画像群がキャプチャされる。この第１の画像群は、一連の個々の画像としてまたはビデオストリームとしてキャプチャされ得る。なお、サンプル対象物は、関心対象物のカラーパレットを共有すると期待される任意の製品または環境であってよく、例えば、人間のオペレータによって検査済みの関心対象物と同じタイプかまたはその一部である別の製品を含み得る。第１の画像群は、本明細書において「背景」色と称される、異物が無い状態の関心対象物に関連付けられた複数の色を表す。ある実装例では、各々が可視光、赤外光または紫外光のうちの特定の波長に関連付けられた複数の強度値が、第１の画像群の各画素に対してキャプチャされるとともに、その複数の強度値の各々が所望の解像度へとキャプチャされ、当該所望の解像度と、各画素についての複数の強度値における強度値の数とに応じて、規定のカラーパレットが規定される。例えば、当該複数の強度値が８ビットの赤、青、緑色値で表されることができ、それら強度値を５の倍数に丸めることを含むことができる量子化を行うと、各波長について３１個の可能性のある量子化値と２９７９１の可能性のある色が得られる。
【００１７】
１０４では、規定のカラーパレットからの複数の色が、第１の画像群の色コンテンツに応じて第１クラスと第２クラスに分類される。実用的には、この選択は、当該カラーパレットの全体を背景色群と非背景色群とに分類し、関心対象物において期待される色と異物に関連する可能性のある色とを区別するためにそれら２つの色クラスのうちの１つを記憶する。これを実現するために、トレーニング用データとして第１の画像群を用いる改良型の単純ベイズ分類法を介して色の分類を行って、第１および第２クラスの色を取得することができる。あるいは、前記複数の色のうち第１の画像群に現れるすべての色を第２クラスに割り当て、前記複数の色のうちの他の色全てを第１クラスに割り当てることができる。
【００１８】
１０６では、関心対象物の第２の画像群がキャプチャされる。ある例では、手持ち型のまたは着用型のイメージングセンサをまとったユーザがそのイメージングセンサを関心対象物のいたるところに向けて、様々な照明条件と様々な物体からの距離とが記録されるようにする。あるいは、当該イメージャーは、関心対象物がその視野内に移動させながら、自動化装置によって移動されてもよいし静置されてもよい。１０８では、第１クラスの色に含まれる色が第２の画像群内に存在すれば、異物が関心対象物内または関心対象物上に存在するかどうかが判定される。関心対象物を走査する前に色の分類が行われるので、異物を示す色の認識をリアルタイムで実行することができ、異物の存在にユーザが速やかに対応できるようになる。
【００１９】
１１０では、異物が存在すると判定された場合には、判定された異物の場所がユーザに対して表示される。例えば、異物の場所を有色表示して残りをグレースケールで第２の画像群のキャプチャ画像をユーザに対して表示することや、予め選択した色や形で異物の場所を強調表示して当該画像をユーザに対して表示することや、あるいは、文字メッセージをユーザに表示することによって、その場所が示される。なお、この表示は、リアルタイム走査プロセスとともに即時行われることができ、ユーザへの通知前に関心対象物の走査が完了するのを待つ必要はない。従って、一実装例では、本システムは、存在すると判定された異物は異物ではない旨のフィードバックをユーザから受け取り、その異物に関連付けられた色のセットを判定し、その判定した色のセットを第１クラスから第２クラスに移し替えることができる。本システムが誤認警報を生成した場合には、同じ色に基づく以後の誤認警報を避けるためにこのユーザ入力が本システムに記憶されるのに用いられ得る。
【００２０】
図４は、関心対象物内または関心対象物上の異物を検出する方法１５０の別例を示す。１５２では、異物検出システムはトレーニングモードに入る。トレーニングモードでは、異物検出システムによってキャプチャされた全ての画像が本システムをトレーニングするのに用いることができるように、それらキャプチャデータが異物のないものと仮定される。１５４では、関心対象物の一部または異物が無いと判っている別の対象物等の対象物からの距離と照明条件とが異なっている複数の画像をキャプチャするために、当該対象物を横切るように本システムが遷移される。
【００２１】
１５６では、異物検出システムはトレーニングモードを出て、検出器に対して可能性のある全ての色を有するカラーパレットからキャプチャしたトレーニングデータ内で見つけた全ての色を除去し、異物に関連すると期待される色だけを残すようにする。本システムは、異物を示し得る、当該パレットからの色を判定ブロック１５８で走査する。このカラーバレットに残っている複数の色からある色が見つかると（Ｙ）、本方法は１６０に進み、ユーザに潜在的異物が見つかったことを通知してこの発見を確認するように促す。その後判定ブロック１６２において本方法はユーザからの入力を待機する。潜在的異物が異物であるとユーザが示すと（Ｙ）、本方法は１５８に戻り、異物の操作を続行する。検知された異物は誤認警報であるとユーザが示すと、本方法は１６４に進み、当該検知された異物に関連付けられた全ての色が、異物に関連すると期待されている複数色のパレットから除去される。その後、本方法は１５８に戻って関心対象物の走査を続行する。
【００２２】
図５は、図１のイメージャーインターフェース１４、システム制御部１６、及び色選択部１８といった図１乃至４に開示したシステム及び方法の例を実装可能なハードウェアコンポーネントからなる例示システム２００を示す模式的ブロック図である。このシステム２００は、様々なシステムやサブシステムを含むことができる。このシステム２００は、パーソナルコンピュータ、ラップトップコンピュータ、ワークステーション、コンピュータシステム、電気機器、「スマート」フォン、特定用途向け集積回路（ＡＳＩＣ）、サーバ、サーバーブレードセンタ、サーバファーム等であり得る。
【００２３】
本システム２００は、システムバス２０２、処理ユニット２０４、システムメモリ２０６、メモリ装置２０８、２１０、通信インターフェース２１２（ネットワークインターフェース等）、通信リンク２１４、ディスプレイ２１６（ビデオ画面等）、及び入力装置（キーボードやマウス等）を含むことができる。システムバス２０２は、処理ユニット２０４及びシステムメモリ２０６と通信可能であり得る。ハードディスクドライブ、サーバ、スタンドアロンデータベースまたは他の不揮発的メモリ等の追加のメモリ装置２０８、２１０も、システムバス２０２と通信可能であり得る。システムバス２０２は、処理ユニット２０４、メモリ装置、２０６〜２１０、通信インターフェース２１２、ディスプレイ２１６、及び入力装置２１８０を相互接続する。いくつかの例では、システムバス２０２は、ユニバーサルシリアルバス（ＵＳＢ）ポート等の追加のポート（図示せず）とも相互接続する。
【００２４】
処理ユニット２０４は、演算装置であってよく、特定用途向け集積回路（ＡＳＩＣ）を含むことができる。処理ユニット２０４は、本明細書に開示した動作例を実施するように命令セットを実行する。当該処理ユニットは処理コアを含むことができる。
【００２５】
追加のメモリ装置２０６、２０８、２１０は、データ、プログラム、命令、テキスト形式のまたはコンパイル済み形式のデータベースクエリ、及びコンピュータを動作させるのに必要とされ得る任意の他の情報を格納する。メモリ２０６、２０８、２１０は、メモリカード、ディクスドライブ、コンパクトディスク（ＣＤ）、またはネットワークを介してアクセス可能なサーバといった（内蔵型または取り出し可能）コンピュータ可読媒体として実装することができる。特定の例では、メモリ２０６、２０８、２１０は、テキスト、画像、動画、および／または音声を備えることができ、それらの一部は人に理解可能なフォーマットで取得可能であってよい。
【００２６】
本システム２００は、追加でまたは代替として、システムバス２０２及び通信リンク２１４と通信可能である通信インターフェース２１２を介して外部データソースまたはクエリソースにアクセス可能である。
【００２７】
動作時には本システム２００が異物検出システムの一つ以上の部分を実現するのに使用され得る。特定の例では、システム制御部１２６を実現するためのコンピュータ実施可能ロジックがシステムメモリ２０６及びメモリ装置２０８、２１０のうちの一つ以上に常在している。処理ユニット２０４は、システムメモリ２０６及びメモリ装置２０８、２１０由来の一以上のコンピュータ実行可能命令を実行する。本明細書で使用される「コンピュータ可読媒体」という用語は、処理ユニット２０４に、実行用の命令を提供するのに参加する媒体を指し、処理ユニット２０４と動作可能に接続された単一媒体及び多数の非一時的媒体のいずれも含み得る。
【００２８】
本発明を例示的に開示した。したがって、本開示を通して使用した用語は限定的な意味ではなく例示として解釈されるべきである。当業者であれば本発明に対して微細な変更を行い得るであろうが、本技術の進歩の範囲内に入るのが合理的である全ての実施形態がここに保証される特許の範囲内に包含されることを意図している。
本開示は以下を包含する。
［付記１］
関心対象物内または関心対象物上の異物を検出するための方法であって、
異物が無いと判っているサンプル対象物の第１の画像群をキャプチャし、
既定のカラーパレットからの複数の色を前記第１の画像群の色コンテンツに応じて少なくとも第１クラス及び第２クラスに分類し、
前記関心対象物の第２の画像群をキャプチャし、
前記第２の画像群内に前記第１クラスからの色がある場合に、前記関心対象物内または関心対象物上に異物が存在するかどうかを判定すること
を備える、前記方法。
［付記２］
既定のカラーパレットからの複数の色を前記第１の画像群の色コンテンツに応じて分類することは、当該複数の色を単純ベイズ分類法を介して分類することを含む、付記１に記載の方法。
［付記３］
既定のカラーパレットからの複数の色を前記第１の画像群の色コンテンツに応じて分類することは、前記複数の色のうち前記第１の画像群に現れるすべての色を前記第２クラスに割り当て、前記複数の色のうちの他の色全てを前記第１クラスに割り当てることを含む、付記１に記載の方法。
［付記４］
異物が存在すると判定された場合に前記異物の場所をユーザに示すことを更に備える、付記１に記載の方法。
［付記５］
存在すると判定された異物が異物ではない旨のフィードバックをユーザから受け取り、
その異物に関連付けられた色のセットを判定し、
その判定した色のセットを前記第１クラスから前記第２クラスに移し替えること
を更に備える、付記４に記載の方法。
［付記６］
異物の場所をユーザに示すことは、前記第２の画像群の内の所与の画像を、異物の場所を有色表示し当該画像の残りをグレースケール表示した状態で、ユーザに示すことを含む、付記４に記載の方法。
［付記７］
異物の場所をユーザに示すことは、前記第２の画像群の内の所与の画像を、予め選択した色で異物の場所を強調表示した状態でユーザに示すことを含む、付記４に記載の方法。
［付記８］
異物の場所をユーザに示すことは、ユーザに文字メッセージを表示することを含む、付記４に記載の方法。
［付記９］
サンプル対象物の第１の画像群をキャプチャすることは、
前記第１の画像群の各画素についての複数の強度値をキャプチャすることであって、当該複数の強度値の各々が可視光、赤外光、または紫外光のうちの特定の波長に関連付けられている、前記キャプチャすることと、
所望の解像度と各画素についての前記複数の強度値における強度値の数とに応じて前記既定のカラーパレットが規定されるように、前記複数の強度値の各々を前記所望の解像度へとキャプチャすること
を含む、付記１に記載の方法。
［付記１０］
前記関心対象物は飛行機の内部であり、前記サンプル対象物は事前に検査されて異物が無いと判っている航空機の内部の一部である、付記１に記載の方法。
［付記１１］
関心対象物内または関心対象物上の異物を検出するためのシステムであって、
イメージングシステムと、
異物が無いと判っているサンプル対象物の第１の画像群をキャプチャすることを前記イメージングシステムに命令するように構成されたシステム制御部と、
前記第１の画像群の色コンテンツに応じて既定のカラーパレットから複数の色を選択するように構成された色選択部と
を備え、
前記システム制御部は、前記イメージングシステムに前記関心対象物の第２の画像群をキャプチャするように命令し、選択された色が前記第２の画像群内にある場合にユーザに通知するように更に構成されている、前記システム。
［付記１２］
頭部装着型の光学式ディスプレイを備えたウェアラブルコンピュータとして前記イメージングシステム、前記システム制御部、前記色選択部、及び前記ディスプレイがまとめて実装されている、付記１１に記載の前記システム。
［付記１３］
前記色選択部は、前記複数の色を単純ベイズ分類を介して分類することによって、前記第１の画像群の色コンテンツに応じて前記既定のカラーパレットから前記複数の色を選択するように構成されている、付記１１に記載の前記システム。
［付記１４］
前記色選択部は、前記第１の画像群に現れる全ての色を選択するように構成されている、付記１１に記載の前記システム。
［付記１５］
前記選択された色が関心対象物内または関心対象物上の異物を示す旨の確認と、前記選択された色が異物を示さない旨の指示とのうちの一方を受け取るように構成されているユーザインターフェースを更に備える、付記１１に記載の前記システム。
［付記１６］
前記選択された色が異物を示さない旨の前記指示に応答して、前記選択された複数の色から前記第２の画像群内に存在する前記選択された色が除去される、付記１５に記載の前記システム。
［付記１７］
システム制御部は、前記イメージングシステムに、前記第１の画像群の各画素についての複数の強度値をキャプチャすることであって、当該複数の強度値の各々が可視光、赤外光、または紫外光のうちの特定の波長に関連付けられている、前記キャプチャすることと、所望の解像度と各画素についての前記複数の強度値における強度値の数とに応じて前記既定のカラーパレットが規定されるように、前記複数の強度値の各々を前記所望の解像度へとキャプチャすることを命令するように構成されている、付記１１に記載の前記システム。
［付記１８］
非一時的コンピュータ可読媒体であって、
異物が無いと判っているサンプル対象物の第１の画像群をキャプチャすることをイメージングシステムに命令するように構成されるシステム制御部であって、前記第１の画像群を受け取るように構成されるイメージャーインターフェースと、ユーザからの入力を受け取るように構成されるユーザインターフェースとを備える前記システム制御部と、
既定のカラーパレットからの複数の色を前記第１の画像群の色コンテンツに応じて少なくとも第１クラス及び第２クラスに分類するように構成される色選択部と
を備え、
前記システム制御部は、前記イメージングシステムに関心対象物の第２の画像群をキャプチャするように命令し、前記第２の画像群内に前記第１クラスの色があるときにユーザに通知し、その色が前記関心対象物内の異物を現すかどうかを示すユーザからの入力を前記ユーザインターフェースを介して受け取るように更に構成される、前記非一時的コンピュータ可読媒体。
［付記１９］
前記色選択部が、前記複数の色のうち前記第１の画像群に現れるすべての色を前記第２クラスに割り当て、前記複数の色のうちの他の色全てを前記第１クラスに割り当てるように構成される、付記１８に記載の非一時的コンピュータ可読媒体。
［付記２０］
前記第１クラスからのある色が異物に関連しないことを示すユーザからの入力に応答して、前記システム制御部が、前記第１クラスからの当該色を除去し、当該色を前記第２クラスに追加するように構成される、付記１９に記載の非一時的コンピュータ可読媒体。
【図１】
0006488366.tif 000002
【図２】
0006488366.tif 000003
【図３】
0006488366.tif 000004
【図４】
0006488366.tif 000005
【図５】
0006488366.tif 000006