正しい部品が選択されているかどうかを判定するためのシステムにおいて、複数の収納箱を保持するラックと、光の平面を前記ラックの前方に投射するための光源と、前記光の平面が物体によって遮られる位置を検出するための検出器と、前記検出された位置が所望の位置であるかどうかを判定するように構成されたコントローラとを備えた、システム。請求項1に記載のシステムにおいて、前記光の平面は、可視光または赤外光である、システム。請求項1に記載のシステムにおいて、前記コントローラは、三角測量を使用して前記光の平面が遮られている場所を判定する、システム。請求項1に記載のシステムにおいて、前記システムは、作業者が前記収納箱の1つから適切な部品を選択したかどうかを判定し、この場合前記検出器によって検出された前記物体は、前記作業者の腕または手である、システム。請求項4に記載のシステムにおいて、前記適切な部品が選択されているまたは選択されていないことの視覚的指示を、前記作業者に対して提供するための複数の光を含むライト組立体をさらに備えた、システム。請求項4に記載のシステムにおいて、前記作業者が前記適切な部品を選択していないことの可聴指示を提供するためのスピーカをさらに備えた、システム。請求項1に記載のシステムにおいて、前記検出器は、カメラである、システム。請求項1に記載のシステムにおいて、前記部品は、組立てライン上で車両に組み付けられる車両部品である、システム。作業者が、組み立てられる適切な部品を選択しているかどうかを無線で判定するためのエラー検出システムにおいて、いくつかの異なる部品を異なる場所に中に保持する提示デバイスと、前記適切な部品が選択されているかを判定するために、1つまたは複数の光線を前記提示デバイスに向かって投射し、前記提示デバイスから戻る、前記作業者が前記提示デバイスから部品を選択するときの前記作業者の場所を示す光信号を受け取るための視覚サブシステムとを備えた、システム。請求項9に記載のシステムにおいて、前記視覚サブシステムは、前記部品が選択されている場所を判定するために、前記作業者が前記提示デバイスから部品を選択するときに前記作業者のビデオ画像を撮影するビデオカメラの立体対を含む、システム。請求項10に掲載のシステムにおいて、前記視覚サブシステムは、前記作業者の手または腕の場所を三角測量によって判定する、システム。請求項10に記載のシステムにおいて、前記視覚サブシステムは、前記カメラによって受け取られた前記画像から背景を取り除くために背景デシメーションフィルタを使用する、システム。請求項9に記載のシステムにおいて、前記視覚サブシステムは、前記作業者の腕または手の場所を検出するために立体照明を使用する、システム。請求項13に記載のシステムにおいて、前記視覚サブシステムは、前記提示デバイスの前方に平坦な光線を投射するための光源と、前記光線が、前記作業者の腕または手によって遮られた領域を検出するための検出器とを含む、システム。請求項14に記載のシステムにおいて、前記検出器は、カメラである、システム。請求項9に記載のシステムにおいて、前記視覚サブシステムは、光パルスを前記提示デバイスに向かって放射するためのレーザと、前記作業者からの反射を検出するための検出カメラとを含み、前記視覚サブシステムは、前記提示デバイスに対する前記作業者の腕または手の場所を判定するために飛行時間型分析を使用する、システム。請求項9に記載のシステムにおいて、前記提示デバイスは、部品を保持するための複数の収納箱を含むラックである、システム。請求項17に記載のシステムにおいて、前記ラックは、各々の収納箱の近位に反射ストリップを含み、前記視覚サブシステムは、選択される前記適切な部品を含む前記収納箱の近位の前記反射ストリップに光線を投射するレーザを含む、システム。請求項9に記載のシステムにおいて、前記作業者が前記適切な部品を選択しているかどうかを前記作業者に示すインジケータをさらに備えた、システム。作業者が、組み立てられる適切な部品を選択しているかどうかを無線で判定するためのエラー検出機械視覚システムにおいて、複数の収納箱を保持するラックであって、前記収納箱は、複数の異なる部品を保持する、ラックと、光線を前記ラックに向かって投射し、前記ラックから戻る、前記作業者がどの収納箱から部品を選択しているかを示す光反射信号を受け取るための機械視覚サブシステムとを備える、システム。0005本発明の教示によれば、組立て工程中、適切な部品が提示デバイスから選択されたかどうかを判定するエラー検出視覚システムが、開示される。1つの実施形態では、提示デバイスは、複数の収納箱を含むラックであり、この場合収納箱は、複数の異なる部品を保持する。視覚システムは、提示デバイスに向かって光線を投射する1つまたは複数の投射デバイスと、作業者が部品を提示デバイスから選択するときに作業者から戻る反射を受け取る、カメラなどの検出器とを含む。エラー検出視覚システムは、ビデオカメラの立体対、立体照明三角測量を用いる視覚および赤外線飛行時間型距離測定などのさまざまな検出工程を使用することができる。0006本発明のさらなる特徴は、添付の図を併用して以下の説明および付属の特許請求の範囲から明らかになろう。0010正しい部品が組立体上に取り付けられるために選択されたかどうかを判定するためのエラー検出視覚システムに向けられた本発明の実施形態の以下の考察は、単に例示的な性質のものにすぎず、本発明またはその用途もしくは使用に限定することが意図されるものではない。たとえば、本発明は、特に車両組立てラインに適用される。しかし、当業者に理解されるように、本発明の感知システムは、他の組立て工程にも適用される。0011提案された本発明は、1つまたは複数の立体視覚を用いた三次元リアルタイム機械視覚、立体照明三角測量を用いた視覚および赤外線飛行時間型距離測定を使用して、作業者が、複数の場所のどの1つから部品を選択したかを検出する感知システムを含む。本発明はまた、部品を保持するデバイスと、作業者にどの部品を選ぶべきかを示す表示サブシステムと、その感知および表示を、組立てステーションを通る製造対象商品の進捗と連携させ、他の組立てライン制御デバイスと通信して適切な動作を記録し、またはエラーの注意を与えるためのコンピュータ制御ユニットとを含むこともできる。0012本発明はまた、制御ユニットおよび感知システムを使用してラック内の場所と何の部品であるかとの関連付けを素早く学習するための方法も含む。これは、このシステムを、多種多様なラックおよびラック上の部品の多様な構成と連動するように展開させることを簡単にする。0013以下の考察では、用語部品取上げゾーンは、提示ラック内またはその上の部品のすぐ前の空間volumeまたは収納箱またはそのようなものから部品を取り出すために作業者がそこを通って到達しなければならない空間を称する。本発明の出願では、複数のそのようなゾーンが定義され、各々のゾーン内で入手可能な部品は、感知システムに把握される。0014本発明は、作業者が、ラックなどの部品提示デバイスからどの部品を選択するかの感知に対する3つの方法を提案する。第1の方法では、ビデオカメラの立体対が、立体視野がラック全体およびラック前方の進入空間を網羅するように設けられる。知られている立体の機械視覚技術を用いて、システムは、作業者の手が進入空間内のどこに移動してもその場所を感知する。作業者の手が複数の所定のゾーンのいずれか1つに入った場合、そのゾーン内に位置する部品を作業者が選択しようとしたことが記録される。作業者が、正しい部品を含まない収納箱内に手を入れた場合、システムは、視覚的または可聴のエラーの合図によって作業者に警告することになり、同様に正しい選択には、肯定的な合図が伴い得る。1つの実施形態では、システムは、作業者の手の監視を続け、正しい部品がラックから取り出されることを確かめ、あるいは作業者が最初に間違った部品に近づいた場合、作業者の手が部品を取り上げずにゾーンを離れたかを確かめる。作業者が、システムの警告にもかかわらず間違った部品を取り上げ続けている場合、適切な是正処置が取られ得るようにエラーが組立てライン制御デバイスに伝達される。0015図1は、ビデオカメラ12、14の立体対を使用する、上記で論じられたタイプのエラー検出視覚システム10の平面図である。この図では、作業者16は、ラック20内に配置されたいくつかの収納箱18から部品を取り出している。作業者16は、収納箱18から、車両組立てラインを進行していく車両22上に組み立てられる部品を選択する。0016カメラ12、14は、ラック20の周りおよび前方の作業領域のビデオ映像を撮影し、映像の流れをコントローラ26に提供する。コントローラ26は、上記で論じられたように、知られている立体視覚技術を用いて、検出されている特定の車両22用の適切な収納箱18内に作業者16が手を置いているかどうかを判定する。作業者16が適切な部品を選択した場合、ライト組立体30上の緑色光28などの特定の光が、適切な部品が選択されたことを示すことができる。作業者16が適切な部品を保持する収納箱18内に手を入れていない場合、ライト組立体30上の赤色光32を点灯し、作業者16に誤りを通知することができる。さらに、または代替として、コントローラ26は、不適切な部品選択の可聴指示を与えるスピーカ34に信号を送ることができる。0017システム10は、さらに、ラック20に向かって低強度レーザ光線を投射することができるレーザ36を含む。コントローラ26からの信号は、車両22がライン上で検出されたとき、レーザ36が光線を特定の収納箱18の特定の1つに隣接するテープ38の特定の反射片に向けるようにし、その結果、作業者16は、どの収納箱18から部品を選択するべきかの視覚的指示を受け取ることができる。0018立体視覚による作業者の手の感知は、いくつかの方法で達成され得る。カメラ12および14の両方が共有点を見ているとき、その三次元の場所は、標準的な三角測量公式によって容易に算出される。主な難点は、2つのカメラ画像内で対応する点を識別し、これらのうちどれが作業者の手であるかを判定することである。1つの技術は、たとえば対比する輝度の領域間の境界などの、視界の物体の自然発生する視覚特徴を合致させることである。カメラで見られる光景は、作業者16の動きを除いて静的なものであるため、連続的なカメラ画像間で差を取ることにより、静的なクラッタが排除され、したがって、作業者16の動作速度および位置を識別する助けとなる。この技術、または静的光景の大部分を取り除いてから光景の残りの部分を分析して作業者の動作を検出する他の方法は、背景デシメーションフィルタと称されている。そのようなフィルタは、立体距離分析の画面書換速度を向上させる。作業者16のどこかの部分が、部品取上げゾーンに入っているかどうかを監視することが十分になり得るが、必要であれば、作業者の手をその場所の形態学モデルを用いて作業者の腕の端部に識別するために追加の処理が使用され得る。作業者16によって着用される手袋上の特徴的なマーキングなどの特に容易に認識される視覚特徴が使用されれば、より高い的中率およびより速い算出が得られ得る。同様に、色画像処理が、素早く手を識別し、それを三次元で位置付けることができるように、作業者16は、特徴的な色の手袋を着用することも求められ得る。これは、手袋の色と十分に異なるすべての色を排除することに基づいた、背景デシメーションフィルタになるはずである。0019立体視覚に対する代替策は、作業者の手を検出するために立体照明を使用することである。立体照明の簡単なバージョンは、可視線または赤外線の光の平面を投射し、それを、その平面部から離れた位置にあり平面に対して傾斜して向けられた単一のカメラを用いて監視することである。カメラは、平面を遮るあらゆる物体上に投射された光のストライプを感知し、それによって、どこで平面が貫かれているかを確かめる。光学フィルタまたは同様のものを使用することにより、カメラは、投射された光の狭帯域周りの周波数の狭帯域を感知し易くなり、したがって背景の光景を取り除くことができる。複数の光の平面は、平面的にスライスした集合体として物体の三次元画像を与える。あるいは、平面に配置された2つの線形配列のセンサが、二次元の立体三角測量によって平面内の物体の場所を与える。0020図2は、本発明の別の実施形態による、立体照明を用いる、上記で論じられたタイプのエラー検出視覚システム50の斜視図である。システム50は、ラック56の前方に平坦な光線54を投射する光源52を含む。ラック56は、複数の収納箱58を含み、ここでは、各々の収納箱58は異なる部品を保持する。作業者60が手を収納箱58の1つの中に挿入し、平坦な光線54を遮ったとき、カメラ62は、作業者の腕からの光の反射によって作業者の手の場所を検出し、したがってカメラ62が作業者の手の場所を検出することを可能にする。作業者の腕から出る光片の反射から、コントローラ66は、三角測量を用いて作業者の腕の場所、したがってどこで光の平面54が遮られているかを識別する。故に、システム50は、作業者60が、適切な部品を選択するために手を適切な収納箱38に置いていることを検証することができる。収納箱38はまた、垂直方向に互いの上方に重ね合わされ得る。0021システム50はまた、赤色光、および上記で論じられたように、適切な部品が選択されたことを示すための緑色光を含むライト組立体64も含む。さらに、ラック56は、各収納箱58近くに配置されたストリップ38などの反射ストリップを含むことができ、システム50は、反射テープからの反射をもたらして適切な収納箱を作業者60に対して識別するために、レーザ36などのプロジェクタを含むことができる。0022システム50が、作業者の手が光の平面54のどこに挿入されたかを把握することを可能にする技術は、Lumio、Incなどからの仮想キーボード技術に見出すことができる。Lumioは、テーブルなどのインターフェース表面上に配置され、キーボードのパターンを表面上に投射するためのレーザダイオードを含む仮想キーボードを開発した。キーボードなどのテンプレートは、特別に設計された極めて効率的なホログラフィック光学素子を赤色ダイオードレーザで照らすことによって生成される。テンプレートは、ユーザに対する基準としてのみ働き、検出工程には含まれない。固定された環境では、テンプレートは、インターフェース表面上に印刷され得る。0023赤外線レーザダイオードは、平面の赤外線照明をテンプレートすぐ上方のインターフェース表面に平行に投射する。光は、ユーザには見えず、表面の数ミリメートル上方に漂っている。ヒトの指が平坦な光線を貫通したとき、作業者の指からの反射が、カメラによって検出される。センサモジュールが、光の平面が遮られている場所に対して、どのキーストロークが投射されたテンプレート内で押されたかの表示をもたらす。言い換えれば、ユーザがインターフェース表面上のキー位置に触れたとき、光は、キー位置近傍のこの表面から反射され、センサモジュールに向かって方向付けられる。0024インターフェース表面との相互作用から反射された光は、赤外線フィルタを通され、センサモジュール内のCMOS画像センサ上に撮像される。仮想インターフェース処理コアなどのセンサモジュール内に埋め込まれたカスタムハードウエアが、反射された光の場所のリアルタイムの判定を行う。センサモジュール内のマイクロコントローラは、センサ処理コアからの光の閃光に対応する位置情報を受け取り、イベントを解釈し、これらを適切なインターフェースを通して外部デバイスに伝達する。処理コアは、複数の反射イベントを同時に追跡することができ、複数のキーストロークおよび重複するカーソル制御入力の両方を支持することができる。0025三次元視覚エラー検出システムに対する第3の代替策は、IR光の短パルスの放射から、光景からのその反射の受け取りまでの飛行時間を判定することである。これは、物体が部品取上げゾーンに入るまたはそこから出るときを検出することができるリアルタイムの距離画像を構築するために使用され得る。解像度を増大させるため、現在の製品では160×124画素に制限される距離画像を、従来のカメラからの画像と組み合わせることができる。飛行時間型の距離測定器rangerは、より解像度の高い立体視覚システムのための背景デシメーションフィルタとして使用され得る。0026図3は、飛行時間型放射パルスを使用して、作業者がどの場所から部品を選択するかを検出する、本発明の別の実施形態によるエラー検出視覚システム70の平面図である。システム10と同じ要素であるシステム70内の要素は、同じ参照番号によって識別される。システム70は、赤外線の光線パルスを収納箱18に向かって放射する赤外線レーザ72を含み、光線パルスの反射は、検出器74によって受け取られる。光線パルスがレーザ72から放射され、検出器74によって受け取られるのにかかる時間に基づいて、作業者の手の場所を判定して、作業者16がどの収納箱18から部品を選択しているかを把握する。コントローラ76は、レーザ72からのパルスの放射および検出器74から受け取った画像を制御するものであり、デシメーションフィルタとして飛行時間型の距離測定器を含むことができる。0027三次元立体視覚システムが、各種の収納箱からの部品の取上げを目に見える空間内のどのような場所でも監視できることが、当業者には理解されるであろう。単一の平面内に投射される立体照明を用いるシステムは、ほぼ平面的な構成で積み重ねられたラックまたは収納箱に主により良好に適合される。0028本発明の表示サブシステムの機能は、主に作業者に対してどの部品を取り上げるべきかを示すが、追加的に、複数ステップの組立てシーケンスにおける組立ての現状、またはエラープルーフ化システムの相互作用設定の一部としてなどの他の有用な情報を表示することができる。配設接続された指示灯を回避することが望ましい。この総合システムの主な利点の1つは、収納箱と物理的に接続しない遠隔感知および指示機能を有するという柔軟性である。これは、組立て工程を人間工学的に、または組立てステーション間の作業負荷の釣り合いに合わせて調整するために、収納箱を容易に移設することを可能にする。この目的に適合する表示をもたらすために、エラー検出視覚システムは、プロジェクタを使用して部品それ自体または部品に隣接する目標物上に可視光を光らせる。そのような目標物の反射特性は、インジケータの効果性を高めるように選択され得る。DLPプロジェクタおよびレーザプロジェクタを含めて、市販のいくつかの汎用の表示技術が本用途に適している。これらは、インジケータの光マーキングを投射するだけでなく、情報テキストまたは画像を、部品のラックに隣接して配置された目標スクリーン上に投射することができるように、PCタイプのコンピュータにインターフェース接続され得る。インジケータ機能に十分な簡単なレーザプロジェクタは、安価なレーザダイオードレーザポインタに一般的に使用されるものなどを用いて小さい皿形/傾斜鏡として構築され得る。0029本発明は、部品取上げゾーンを容易に画定するための方法を含むことができる。1つの方法は、部品が、明確な視覚マーキングを有する収納箱内に提示されている場合に適用可能である。カメラシステムは、次いで、収納箱の場所およびその内容物を機械視覚によって自動的に識別することができる。これがなければ、部品の識別は、システムをトレーニングモードに入れ、手ぶりで収納箱の場所を大まかに示すことによって行われることが可能であり、その後、キーボード上のタイピング、マウスまたは他のポインティングデバイスによる部品リストからの選択、バーコードリーダ、またはRFIDリーダを使用するなど、任意の適切なコンピュータインターフェース技術によって、関連付けられた部品が入力され得る。部品取上げゾーンはまた、ラックのカメラ画像をコンピュータスクリーン上に表示し、マウスまたは他のポインティングデバイスに基づくグラフィカルインターフェースで画象をクリックすることによっても識別され得る。そのようなオペレーションは、エラー検出システムを設定するときのみに必要であるため、そのような表示デバイスおよびインターフェースデバイスは、トレーニング中にシステムに接続されるだけになり得る。この接続は、標準的なPCポート、ブルートゥース無線などの既存の有線または無線のいくつかの技術のうち任意の1つによって達成されてよく、個々のPC付属装置の代わりにラップトップまたはタブレットPCに接続することによって設けられ得ることを理解されたい。ウェブベースの伝導率もまた使用され得る。0030本発明のカメラ、投射および処理要素は、小型の安価なモジュールにパッケージ化されることが意図される。このモジュールは、作業者の動きまたは収納箱および部品の柔軟な移設を妨害しないような方法で各々の組立てステーションにおいて装着され得る。モジュールは、デバイスネットワークを介してマスターのエラープルーフ化システムとインターフェース接続し、この場合モジュール状態は、より高機能なメッセージングネットワークのためにバイナリビット配列を介して伝達される。メッセージングインターフェースは、ステーション番号、そのステーションで処理されるスタイルおよびオプション、ならびにこれらのスタイルに関連付けられた部品番号を参照する部品割り当てマトリクスを含むエラープルーフ化サーバとやりとりを行う。標準的なロジックが、基本的なエラープルーフ化システムのオペレーション、およびステーションにおける車両に対する組立ての要件に基づいて、取り上げられた部品のモジュール確認の双方向状態を伝達するモジュールネットワークメッセージを伴うライン状態通知を制御する。モジュールプログラミング機能は、そのモジュールステーションに合わせてこの部品割り当てマトリクスを更新するメッセージをサーバに提供し、部品および収納箱との直感的関連付けをもたらす。この能力は、システムの柔軟性を大きく向上させるが、その理由は、エラープルーフ化システムの再プログラミングが、部品および収納箱が工程を設定または最適化するために移動されるときに自動的に行われるためである。0031前述の考察は、本発明の例示的な実施形態を開示し、説明するにすぎない。当業者は、そのような考察および添付の図および特許請求の範囲から、さまざまな変更、改変、および変形が、特許請求の範囲で定義された本発明の趣旨および範囲から逸脱することなく加えられ得ることを容易に認識するであろう。