(57)【要約】【課題】製品画像による検査対象製品の組み付け状態の正否検査をより適切に行うことができる製品検査システムを提供する。【解決手段】検査対象製品を撮影するとともに、撮影された画像情報を外部へ転送する携帯ターミナル１１と、その画像情報に基づき、検査対象製品の組み付け状態の正否を判定する完成検査コンピュータ１３とにより製品検査システムを構成する。完成検査コンピュータ１３は、製品画像に基づく検査対象製品の組み付け状態の正否判定が可能であるか否かを判定し、その判定が不可能であると判定したときには、製品画像の再取得要求を携帯ターミナル１１に対して送信する。【選択図】図１
2010223834.tif 000002
【特許請求の範囲】
【請求項１】
検査対象製品を作業者の操作により撮影するとともに、撮影された画像情報を外部へ転送する撮影手段と、
その画像情報に基づき、前記検査対象製品の組み付け状態の正否を判定する正否判定手段とを備えた製品検査システムにおいて、
前記正否判定手段は、前記画像情報に基づく前記検査対象製品の組み付け状態の正否判定が可能であるか否かを判定する予備判定手段と、前記予備判定手段が前記検査対象製品の組み付け状態の正否判定が不可能であると判定したときに、前記画像情報の再取得要求を前記撮影手段に対して出力する再取得要求手段を備えたことを特徴とする製品検査システム。
【請求項２】
前記撮影手段及び正否判定手段はそれぞれ通信手段を有し、それらの通信手段を介して前記画像情報及び再取得要求の送受信を行うことを特徴とする請求項１に記載の製品検査システム。
【請求項３】
前記正否判定手段は、検査履歴を記憶するための履歴記憶手段を設けたことを特徴とする請求項１または２に記載の製品検査システム。
【請求項４】
前記履歴記憶手段は、正常組み付け状態の検査対象製品の画像を検査順に記憶することを特徴とする請求項３に記載の製品検査システム。
【請求項５】
前記正否判定手段は、検査対象製品の搭載の有無に関する情報と、検査対象製品の画像情報とマスタ画像情報との比較とに基づいて正否を判断することを特徴とする請求項１〜４のうちのいずれか一項に記載の製品検査システム。
【請求項６】
前記正否判定手段は、検査対象製品の画像情報とマスタ画像情報との比較結果が検査対象製品の搭載の有無と対応しない場合に再取得要求を送信することを特徴とする請求項５に記載の製品検査システム。
【請求項７】
前記撮影手段は車両製造ラインの作業者が所有する端末により構成され、前記正否判定手段は正否判定機能を備えるとともに、前記端末の動作を制御する制御装置により構成されたことを特徴とする請求項１〜６のうちのいずれか一項に記載の製品検査システム。
【請求項８】
前記端末は複数台設けられ、前記制御装置は複数台の各端末の動作を制御することを特徴とする請求項７に記載の製品検査システム。
【発明の詳細な説明】
【技術分野】
【０００１】
この発明は、例えば車両の完成検査ライン上において検査対象製品の組み付け状態の正否を検査するための製品検査システムに関するものである。
【背景技術】
【０００２】
例えば、製品としての車両には、その仕様、顧客注文、ディーラオプション等により、装備品の有無や種類の違いが存在する。このため、車両メーカにおいては、車両の装備がその仕様等に合致したものとなっているか否か（以下、組み付け状態の正否という。）を確認する検査が行われている。このような検査は、通常組み付け指示一覧表に基づき、作業者が、一覧表内の記号と、車室内のリヤクーラ・スイッチ等の実際の装備とが合致しているか否かを目視によって判断することで行われている。このような作業者による検査作業には、勘違い等の人為的なミスが発生する虞があるため、そのようなミスの発生を防ぐために、前記一覧表の表記方法を工夫したり、二重、三重の検査工程を設けたりすることにより、仕様等に合致しない装備の車両の出荷が防止されている。
【０００３】
一方、車両への組み付け前の部品が仕様等に合致したものであるか否かを判定する検査には、一般に画像処理による検査方法が採用されている。すなわち、組み付け前の部品を撮影した画像の処理結果と、仕様等の情報とが照合されることにより、その部品がその情報に合致したものであるか否かが検査される。通常、このような部品の撮影は、部品の画像の画質を安定させるために、定置カメラや、ロボットに取り付けたカメラを用いて行われている。
【０００４】
このように画像処理を用いて製品の検査を行う技術としては、例えば特許文献１に開示されるものがある。この特許文献１の構成は、プリント基板上面を撮像した赤外線画像を用い、半田やチップ部品と配線パターンや基板本体との熱放射率の差に基づいて、プリント基板上における半田ボールや半田ブリッジの有無を検出するものである。
【先行技術文献】
【特許文献】
【０００５】
【特許文献１】特開平８−２８８６４２号公報
【発明の概要】
【発明が解決しようとする課題】
【０００６】
車両に対する装備品の組み付け状態の正否検査に、その装備品の製品画像に画像処理を用いた判定を採用すれば、勘違い等による人為的なミスを防ぐことができる上に、検査結果である画像を残すことができる。車両の車室内の装備品をロボットによって撮影するためには、ロボットを車室内に侵入させる必要がある。しかし、車室内においてロボットを移動させるためには車室内のスペースが足りないために無理があり、撮影は作業者による手作業に頼らざるを得ない。ところが、作業者の手作業による装備品の撮影では、手ぶれにより画像が不鮮明となる場合があり、画像処理による判定が困難となる虞がある。
【０００７】
この発明は、このような従来の技術に存在する問題点に着目してなされたものである。その目的とするところは、製品画像による検査対象製品の組み付け状態の正否検査をより適切に行うことができる製品検査システムを提供することにある。
【課題を解決するための手段】
【０００８】
上記の目的を達成するために、請求項１に記載の発明は、検査対象製品を作業者の操作により撮影するとともに、撮影された画像情報を外部へ転送する撮影手段と、その画像情報に基づき、前記検査対象製品の組み付け状態の正否を判定する正否判定手段とを備えた製品検査システムにおいて、前記正否判定手段は、前記画像情報に基づく前記検査対象製品の組み付け状態の正否判定が可能であるか否かを判定する予備判定手段と、前記予備判定手段が前記検査対象製品の組み付け状態の正否判定が不可能であると判定したときに、前記画像情報の再取得要求を前記撮影手段に対して出力する再取得要求手段を備えたことを特徴とする。
【０００９】
請求項２に記載の発明は前記撮影手段及び正否判定手段はそれぞれ通信手段を有し、それらの通信手段を介して前記画像情報及び再取得要求の送受信を行うことを特徴とする。
請求項３に記載の発明は、前記正否判定手段は、検査履歴を記憶するための履歴記憶手段を設けたことを特徴とする。
【００１０】
請求項４に記載の発明は、前記履歴記憶手段は、正常組み付け状態の検査対象製品の画像を検査順に記憶することを特徴とする。
請求項５に記載の発明は、前記正否判定手段は、検査対象製品の搭載の有無に関する情報と、検査対象製品の画像情報とマスタ画像情報との比較とに基づいて正否を判断することを特徴とする。
【００１１】
請求項６に記載の発明は、前記正否判定手段は、検査対象製品の画像情報とマスタ画像情報との比較結果が検査対象製品の搭載の有無と対応しない場合に再取得要求を送信することを特徴とする。
【００１２】
請求項７に記載の発明は、前記撮影手段は車両製造ラインの作業者が所有する端末により構成され、前記正否判定手段は正否判定機能を備えるとともに、前記端末の動作を制御する制御装置により構成されたことを特徴とする。
【００１３】
請求項８に記載の発明は、前記端末は複数台設けられ、前記制御装置は複数台の各端末の動作を制御することを特徴とする。
（作用）
この発明においては、作業者が操作する撮影手段により撮影された検査対象製品の画像情報に基づき、正否判定手段が、検査対象製品の組み付け状態の正否を判定する。加えて、正否判定手段の予備判定手段は、製品画像に基づく検査対象製品の組み付け状態の正否判定が可能であるか否かを判定する。さらに、再取得要求手段は、予備判定手段が検査対象製品の組み付け状態の正否判定が不可能であると判定したときに、製品画像の再取得要求を撮影手段に対して出力する。従って、製品画像に基づく検査対象製品の組み付け状態の正否判定が正否判定手段において不可能な場合には、撮影手段においてそのことが分かるため、作業者の再操作により製品画像の再撮影を行うことが可能となる。
【発明の効果】
【００１４】
この発明によれば、製品画像による検査対象製品の組み付け状態の正否検査をより適切に行うことができるという効果を発揮する。
【図面の簡単な説明】
【００１５】
【図１】第１実施形態の製品検査システムを示す模式構成図。
【図２】（ａ）携帯ターミナルを示す外観図、（ｂ）はその内部構成を示す模式図。
【図３】完成検査コンピュータと携帯ターミナルとの間のデータ通信を示す図。
【図４】携帯ターミナルにより実行される画像取得処理を示すフローチャート。
【図５】同じく画像取得処理を示すフローチャート。
【図６】完成検査コンピュータにより実行される正否判定処理を示すフローチャート。
【図７】同じく正否判定処理を示すフローチャート。
【図８】（ａ），（ｂ）は携帯ターミナルのディスプレィ部の表示を示す正面図。
【図９】（ａ），（ｂ）は携帯ターミナルのディスプレィ部の表示を示す正面図。
【図１０】携帯ターミナルのディスプレィ部の表示を示す正面図。
【図１１】（ａ），（ｂ）は空調コントロールパネルを示す正面図。
【図１２】（ａ），（ｂ）はリヤクーラ・スイッチの第２製品画像を示す正面図、（ｃ）は同じく第１製品画像を示す正面図。
【図１３】（ａ）〜（ｄ）はディスプレィのモニタ領域に表示されるリヤクーラ・スイッチの製品画像を示す正面図。
【図１４】完成検査コンピュータに蓄積される検査結果履歴を示す図。
【図１５】完成検査コンピュータにより実行される正否判定処理を示すフローチャート。
【図１６】同じく正否判定処理を示すフローチャート。
【図１７】第１及び第２製品画像に基づく検査対象製品の有無判定を示す表。
【図１８】（ａ），（ｂ）は第２実施形態における検査対象製品を示す正面図。
【図１９】（ａ），（ｂ）はシフトレバーゲートの製品画像を示す正面図。
【図２０】シフトレバーゲートの組み付け状態の正否判定処理を示すフローチャート。
【図２１】同じく正否判定処理を示すフローチャート。
【図２２】製品画像に基づく検査対象製品の識別判定を示す表。
【発明を実施するための形態】
【００１６】
（第１実施形態）
（システムの全体構成）
次に、この発明を具体化した第１実施形態について、図１〜図１７を参照して説明する。
【００１７】
図１に示すように、製品検査システムは、製品としての車両１０の完成検査を行う複数の作業者がそれぞれ携帯する撮影手段としての携帯ターミナル１１と、この各携帯ターミナル１１との間において無線ＬＡＮ(Local Aria Network)によるデータ通信を行う無線ＬＡＮ親機１２と、無線ＬＡＮ親機１２に接続された完成検査コンピュータ１３とにより構成されている。この実施形態では、完成検査コンピュータ１３が、正否判定手段、予備判定手段及び再取得要求手段である。
【００１８】
携帯ターミナル１１は、カメラと２次元コードリーダの機能を備え、図２（ａ），（ｂ）に示すように、カメラ部１４、ディスプレィ部１５、データ処理部１６及び無線ＬＡＮ子機１７等を備えている。データ処理部１６はコンピュータよりなり、予め記憶されたプログラムに従って動作する。この実施形態では、前記無線ＬＡＮ親機１２及び無線ＬＡＮ子機１７が通信手段である。
【００１９】
図８（ａ），（ｂ）に示すように、携帯ターミナル１１のディスプレィ部１５には、車種情報が表示される車両情報表示領域１５ａ、カメラ部１４により撮像される画像が表示されるモニタ領域１５ｂ、その携帯ターミナル１１に割り当てられた検査対象製品の名称リスト及びそれぞれの判定履歴が表示される検査部品表示領域１５ｃが設けられている。また、ディスプレィ部１５には、検査対象製品名が順に１つずつ表示され、かつ判定結果が表示される作業案内表示領域１５ｄ、検査対象製品に対する全検査作業の最終総合判定結果が表示される判定結果表示領域１５ｅ、及び、作業者に対する検査作業の指示が順に表示される作業指示表示領域１５ｆが設けられている。
【００２０】
完成検査コンピュータ１３は、予め記憶されたプログラムに従って作動し、図１に示すように、無線ＬＡＮ親機１２を介して各携帯ターミナル１１の無線ＬＡＮ子機１７との間でデータ通信を行う。完成検査コンピュータ１３は、制御装置としての制御部１３ａ、履歴記憶手段としての記憶部１３ｂ及びディスプレィ１３ｃを備えている。記憶部１３ｂには、後述の図４〜図７、図１５及び図１６に示すプログラムや、同じく後述の第１〜第３マスタ画像データが記憶されている。
【００２１】
（完成車両検査）
次に、上記構成の製品検査システムを使って行われる完成車両検査について説明する。
完成車両検査においては、図１に示すように、完成検査ライン２０を連続的に流れる車両に対し、携帯ターミナル１１をそれぞれ携帯した複数の作業者２１が、それぞれの携帯ターミナル１１に割り当てられた複数の装備品について携帯ターミナル１１を用いた検査を行う。この完成車両検査は、車両仕様、顧客注文、ディーラオプション等に対応した装備品（検査対象製品）の組み付け状態の正否、すなわち、組み付けるべき装備品が間違いなく組み付けられているか否か、また、組み付けるべきでない装備品が間違いなく組み付けられてないか否かを検査するために行われる。この完成車両検査における合格又は不合格の判定は、各車両に添付されているデータ記憶手段としての車両管理カード２２から取得する情報との照合に基づいて行われる。
【００２２】
車両管理カード２２には、その車両に関する車両情報（ボディー番号、車両型式及びフレーム番号等）、仕様情報、指定装備品の有無に関する装備情報等を含む各種情報が記憶された二次元コードが記載されている。作業者は、携帯ターミナル１１を用いて二次元コードを撮影することにより、上記各情報を携帯ターミナル１１に取得する。仕様情報とは、グレード（等級）や駆動方式（例えば、前輪駆動又は全輪駆動）により異なる装備品（例えば自動変速機）の有無やその種類（自動変速機における手動切換機能の有無）に関する情報等である。完成車両検査においては、実際の車両に組み付けられた装備品が、この仕様情報及び装備情報により指定される内容と一致しているか否かが判定される。
【００２３】
（各携帯ターミナル１１と完成検査コンピュータ１３との間で行われるデータ通信）
上記の製品検査システムによって行われる完成車両検査において完成検査コンピュータ１３と各携帯ターミナル１１との間で行われるデータ通信について図３に従って説明する。なお、図３においてＳ１０４，Ｓ２０３等の符号は、後述の図４等のフローチャートにおけるＳ１０４等のステップを示している。
【００２４】
完成車両検査においては、先ず、各携帯ターミナル１１から完成検査コンピュータ１３に対して、作業者が検査しようとする車両の車両管理カード２２から携帯ターミナル１１に取得した車両情報、仕様情報及び装備情報が送信される（Ｓ１０４→Ｓ２０３）。これに対し、完成検査コンピュータ１３からその携帯ターミナル１１に対し、前記仕様情報及び装備情報に含まれる複数の装備品の有無や種類に関する検査対象製品のうちから完成検査コンピュータ１３がその携帯ターミナル１１に割りあてた検査対象製品についての指示とともに撮影許可が送信される（Ｓ２０４→Ｓ１０６）。
【００２５】
次いで、各携帯ターミナル１１からは、それぞれに割り当てられた検査対象製品につき、作業者により撮影された検査対象製品の画像データが完成検査コンピュータ１３に送信される（Ｓ１０９→Ｓ２０５）。これに対し、完成検査コンピュータ１３において、この画像データに基づく検査対象製品の検査を行うことができなかった場合には、携帯ターミナル１１に対して再撮影要求が送信される（Ｓ２０９→Ｓ１１０）。また、完成検査コンピュータ１３において、画像データに基づく検査対象製品の検査を行うことができた場合には、その検査対象製品に対する検査結果が合格であるか不合格であるかの判定結果が送信される（Ｓ２１０→Ｓ１１２）。この携帯ターミナル１１と完成検査コンピュータ１３との間の画像データと判定結果とのやり取りは、携帯ターミナル１１に割り当てられた複数の検査対象製品毎に実行される。
【００２６】
１つの検査対象製品に関する画像データと判定結果とのやり取りが終了すると、次に携帯ターミナル１１から完成検査コンピュータ１３に対し、次の検査対象製品の画像データが送信される（Ｓ１０９→Ｓ２０５）。これに対し、完成検査コンピュータ１３から携帯ターミナル１１には、その画像データによる検査対象製品の検査結果に基づき、再撮影要求又は判定結果が送信される（Ｓ２０９→Ｓ１１０、Ｓ２１０→Ｓ１１２）。
【００２７】
携帯ターミナル１１に完成検査コンピュータ１３から割り当てられた全ての検査対象製品に対する判定が終了すると、完成検査コンピュータ１３から携帯ターミナル１１に対し、その全ての検査対象製品に対する判定結果に基づく総合判定結果が送信される（Ｓ２１３→Ｓ１１５）。
【００２８】
以上で、１台の車両に対する検査が終了する。
（各携帯ターミナル１１、完成検査コンピュータ１３において実行される処理）
次に、完成車両検査中に、各携帯ターミナル１１及び完成検査コンピュータ１３において実行される処理について、図４及び図５に示すフローチャートと、図６及び図７に示すフローチャートとに従って説明する。図４及び図５のフローチャートは、携帯ターミナル１１のデータ処理部１６において実行される画像取得処理を示し、図６及び図７のフローチャートは、完成検査コンピュータ１３の制御部１３ａにおいて実行される正否判定処理を示している。
【００２９】
（携帯ターミナル１１）
さて、作業者２１が自分の携帯ターミナル１１を起動させると、その作業者２１に検査を行わせるための画像取得処理が実行される。この画像取得処理においては、図４に示すように、先ず、ステップ（以下、Ｓと略記する）１０１において、初期待ち受け画面がディスプレィ部１５に表示される。この初期待ち受け画面では、図８（ａ）に示すように、ディスプレィ部１５の作業案内表示領域１５ｄに、例えば「二次元コードを読み込んでください」という作業者２１へのメッセージが表示される。このメッセージに従い、作業者２１は、車両に添付された車種情報カードの二次元コードを携帯ターミナル１１のカメラ部１４により撮影する。
【００３０】
次に、Ｓ１０２において、二次元コードが正確に取得できたか否かが二次元コード中の周知のチェックコードに基づいて判定される。このＳ１０２において肯定判定されると、次にＳ１０３において二次元コードが解析され、車両情報、仕様情報及び装備情報等が取得される。
【００３１】
次に、Ｓ１０４において、取得された車両情報、仕様情報及び装備情報等が、無線ＬＡＮ子機１７を介して無線ＬＡＮ親機１２に向かって無線送信される（図３参照）。続いてＳ１０５において、ディスプレィ部１５の車両情報表示領域１５ａに車両情報が表示される。
【００３２】
（完成検査コンピュータ１３）
一方、完成検査コンピュータ１３において実行される正否判定処理においては、図６に示すように、先ず、Ｓ２０１において、携帯ターミナル１１から車両情報、仕様情報及び装備情報を受信したか否かが判定される（図３参照）。このＳ２０１において肯定判定されると、次にＳ２０２において、取得された車両情報がディスプレィ１３ｃに表示される。
【００３３】
次に、Ｓ２０３において、この車両情報が、予め記憶部１３ｂに記憶されている生産予定車両リスト中の車両情報に一致するか否かが確認される。そして、一致が確認されたときには、次にＳ２０４において、車両情報を送信した携帯ターミナル１１に対し、仕様情報及び装備情報に含まれる複数の装備品の有無や種類に関する情報とともに撮影許可が送信される（図３参照）。なお、１つの携帯ターミナル１１に検査情報が送信される装備品の種類は、完成検査において検査される全ての検査対象製品の一部であり、それ以外の検査対象製品は、他の携帯ターミナル１１に割り当てられている。
【００３４】
（携帯ターミナル１１）
完成検査コンピュータ１３におけるＳ２０４の実行に対し、図４に示すように、携帯ターミナル１１では、前記処理のＳ１０６において、検査対象製品に関する情報と撮影許可とを受信したか否かが判定される。そして、Ｓ１０６において肯定判定されたときには、次に図５に示すＳ１０７において、ディスプレィ部１５の検査部品表示領域１５ｃに、その携帯ターミナル１１に割り当てられた複数の装備品のリストが作業順に表示される（図８（ｂ）参照）。また、作業案内表示領域１５ｄには、前記検査対象製品のうち１番目に検査される検査対象製品名（例えばリヤクーラ）が表示される。さらに、モニタ領域１５ｂには、カメラ部１４により取り込まれる製品画像が常時表示されるとともに、作業指示表示領域１５ｆには、例えば「リヤクーラを撮影してください」というようなメッセージが表示される。なお、ここでカメラ部１４に取り込まれた画像データは、データ処理部１ｓ６に保存されることにより携帯ターミナル１１に取得される。
【００３５】
このメッセージに従い、作業者２１は、図１１（ａ），（ｂ）及び図１２（ａ），（ｂ）に示すような空調コントロールパネル３０の一部の製品画像を撮影する。なお、空調コントロールパネル３０は、図示しないセンタコンソールパネル上に設けられている。リヤクーラは、車両仕様により設定されるか、又は、顧客の注文により設定される装備であって、空調コントロールパネル３０には、リヤクーラの有無に応じた２種類の仕様が存在する。すなわち、リヤクーラが装備された車両の空調コントロールパネル３０には、検査対象製品としてのリヤクーラ・スイッチ３１が設けられ、リヤクーラが装備されない車両の空調コントロールパネル３０には、リヤクーラ・スイッチ３１の代わりにダミーボタン３２が設けられている。そこで、リヤクーラ・スイッチ３１が指定通りに組み付けられているか否か、あるいは、リヤクーラ・スイッチ３１が指定通りに組み付けられていないか否か（以下、これらを組み付け状態の正否という）を判定するために、作業者の撮影により、リヤクーラ・スイッチ３１又はダミーボタン３２の領域を含む空調コントロールパネル３０の所定の一部領域の製品画像が取得される。
【００３６】
また、このとき図１３（ａ）に示すように、携帯ターミナル１１におけるディスプレィ部１５のモニタ領域１５ｂには、カメラ部１４の撮影範囲を、所定の製品領域に合わせるためのターゲットスケール３３がその装備品に応じた形態で表示されるようになっている。そして、装備品の撮影時に作業者２１がこのターゲットスケール３３を前記製品領域内に設定されたターゲットに合わせることにより、その製品領域に対応する製品画像を適切に撮影することができるようになっている。この例では、図１３（ｂ）に示すように、ターゲットスケール３３は、ターゲットに設定されたリヤクーラ・スイッチ３１の外形に合わせて設定されており、これにより図１３（ｃ）や図１３（ｄ）に示すような製品領域からの位置ずれは防止される。
【００３７】
次に実行されるＳ１０８においては、作業者２１によるシャッター操作に基づいて、モニタ領域１５ｂに表示されている製品領域が撮影され、その製品画像がファイル化される。次にＳ１０９においてその画像データが無線送信される（図３参照）。この画像データは、ＪＰＧ（Joint Photographic Experts Group）データである。
【００３８】
（完成検査コンピュータ１３）
携帯ターミナル１１におけるＳ１０９の実行に対し、完成検査コンピュータ１３では、図６に示すように、Ｓ２０５において、携帯ターミナル１１からの画像データを受信したか否かが判定され、ここで肯定判定されたときには、次にＳ２０６において、画像データがＪＰＧデータからＢＭＰ（Microsoft Windows Bitmap Image）データに変換される。
【００３９】
次に、Ｓ２０７において、このＢＭＰデータに基づいて検査対象製品の組み付け状態の正否判定が行われる。なお、判定方法に関しては後述する。次に、Ｓ２０８において、検査対象製品に対する組み付け状態の正否判定が可能であったか否かが判定され、ここで否定判定されたときには、次にＳ２０９において製品画像の再撮影要求が無線送信される（図３参照）。
【００４０】
（携帯ターミナル１１）
完成検査コンピュータ１３におけるＳ２０９の実行に対し、携帯ターミナル１１では、図５に示すように、Ｓ１１０において再撮影要求の有無が判定される。そして、Ｓ１１０で肯定判定されたときにはＳ１１１において、図９（ｂ）に示すように、ディスプレィ部１５の作業案内表示領域１５ｄに「判定不能」の表示がなされるとともに、作業指示表示領域１５ｆに再撮影を作業者２１に促すメッセージの表示が行われた後、改めてＳ２０５からの処理が実行される。従って、携帯ターミナル１１により撮影された製品画像が判定可能とならない限りは、製品画像の再撮影が作業者２１に促される。
【００４１】
（完成検査コンピュータ１３）
一方、完成検査コンピュータ１３において、図６に示すように、前記Ｓ２０８において肯定判定されたときには、次にＳ２１０において判定結果が無線送信される。Ｓ２１０の実行後、Ｓ２１１において携帯ターミナル１１に割り当てられた全ての装備品に対する組み付け状態の正否判定が終了したか否かが判定され、否定判定されたときには、前記Ｓ２０５からの処理が再び実行される。
【００４２】
（携帯ターミナル１１）
一方、携帯ターミナル１１において、図５に示すように、前記Ｓ１１０において否定判定されたときには、次にＳ１１２において完成検査コンピュータ１３から判定結果が受信される。続いてＳ１１３において、図９（ａ）に示すように、ディスプレィ部１５の検査部品表示領域１５ｃ及び作業案内表示領域１５ｄに、検査対象製品に対する判定結果が表示される。
【００４３】
次にＳ１１４において、その携帯ターミナル１１に割り当てられている全ての装備品に対する組み付け状態の正否判定が終了したか否かが判定され、否定判定されたときには、Ｓ１０７からの処理が再び実行される。
【００４４】
そして、Ｓ１０７においては、その携帯ターミナル１１に割り当てられた検査対象製品のうち、次に検査するように設定された検査対象製品の名称がディスプレィ部１５の作業案内表示領域１５ｄに表示される。このようにして、割り当てられた複数の検査対象製品毎にＳ１０７〜Ｓ１１４の処理が繰り返し実行される。
【００４５】
（完成検査コンピュータ１３）
完成検査コンピュータ１３では、図６及び図７に示すように、前記Ｓ２１１において肯定判定されたときには、次にＳ２１２において、その携帯ターミナル１１に割り当てられた全ての検査対象製品の組み付け正否に対する判定結果に基づく総合判定が行われる。すなわち、全ての検査対象製品の組み付け状態の正否判定結果が合格であるときには総合判定結果は合格とされ、少なくとも一つの検査対象製品に対する判定結果が不合格であったときには総合判定結果は不合格とされる。
【００４６】
次にＳ２１３において上記総合判定結果が携帯ターミナル１１に無線送信された後、次のＳ２１４において、図１４に示すように、各車両に対する総合判定結果が、車両情報に対応した検査履歴として保存される。この後、一台の車両１０に対する検査処理が終了される。
【００４７】
（携帯ターミナル１１）
携帯ターミナル１１においては、図５に示すように、前記Ｓ１１４において肯定判定されたときに、次にＳ１１５において完成検査コンピュータ１３から総合判定結果が受信され、次にＳ１１６において、図１０に示すように、この総合判定結果がディスプレィ部１５の総合判定結果表示領域１５ｅに表示された後、この処理が終了される。
【００４８】
（完成検査コンピュータ１３において実行される製品画像の組み付け状態の正否判定処理）
次に、前記正否判定処理のＳ２０７のサブルーチンにおいて実行される組み付け状態の正否判定処理について、主として図１５及び図１６に示すフローチャートと図１７に示す表を参照して説明する。
【００４９】
この正否判定処理では、例えば、図１１（ａ），（ｂ）に示すような前記空調コントロールパネル３０におけるリヤクーラ・スイッチ３１の有無を、携帯ターミナル１１により撮影された製品画像（図１２（ａ），（ｂ）に図示する画像Ｍ）により判定する。この正否判定処理においては、撮影された製品画像データからトリミングにより２つの画像データが取得される。この２つの画像データのうちの１つは、検査対象製品であるリヤクーラ・スイッチ３１の特徴部、この場合は、「ＲＥＡＲ」の文字列、を含むように予め設定された第１製品領域（図１１（ａ），（ｂ）に一点鎖線で囲まれた領域Ｐ）に対応する第１製品画像（図１２（ｃ）に図示する画像Ｓ）である。また、他方の１つは、この第１製品領域を含むように広角で設定された第２製品領域（図１１（ａ），（ｂ）に一点鎖線で囲まれた領域Ｑ）に対応する第２製品画像（図１２（ａ），（ｂ）に図示する画像Ｍ）である。
【００５０】
そして、この正否判定処理は、各装備品の第１製品画像に対して予め用意されている合致率判定用の１つの第１マスタ画像データと、第２製品画像に対して予め用意されている合致率判定用のそれぞれ１つの第２マスタ画像データ及び第３マスタ画像データを用いて行われる。そして、これらの第１、第２、第３マスタ画像データと第１及び第２製品画像データとのパターンマッチングの合致率が取得され、この合致率に基づいて正否が判定される。なお、このパターンマッチングによる合致率の取得は、周知の画像処理技術により行われる。
【００５１】
この３つのマスタ画像データのうち第１マスタ画像データは、ズームアップされた第１製品画像データとの合致率を判定するためのものであって、図１２（ｃ）に示す第１製品画像Ｓに対応している。また、第２マスタ画像データは、図１２（ａ）に示すように、リヤクーラ・スイッチ３１が設けられた状態の第２製品領域を撮影した第２製品画像Ｍに対応し、第３マスタ画像データは、図１２（ｂ）に示すように、リヤクーラ・スイッチ３１の代わりにダミーボタン３２が設けられた状態の第２製品領域を撮影した第２製品画像Ｍに対応している。各マスタ画像データは、第１及び第２製品画像データを外形エッジ処理して得られた処理画像データと比較され、その処理画像データとマスタ画像データとの合致率に基づいて正否判定が行われる。
【００５２】
さて、正否判定処理においては、図１５に示すように、先ず、Ｓ４０１において、検査対象の車両の車両管理カード２２から取得した仕様情報、装備情報等に基づき、検査対象製品、すなわちリヤクーラの有無の指定が「あり」であるか又は「なし」であるかが判定される。
【００５３】
（リヤクーラの指定がある場合）
Ｓ４０１において肯定判定されると、次にＳ４０２において、ズームアップされた第１製品画像データと第１マスタ画像データとの合致率が算出される。次に、Ｓ４０３において、判定された合致率が、予め設定されているしきい値α（例えば８０％）を越えているか否かが判定され、しきい値αを越えていたときには、第１製品画像中に「ＲＥＡＲ」の文字列が存在している（「あり」）と判定される。この場合、次にＳ４０４が実行される。
【００５４】
Ｓ４０４においては、広角の第２製品画像データと第２マスタ画像データとの合致率が算出される。この次にＳ４０５において、判定された合致率が、予め設定されているしきい値β（例えば７０％）を越えているか否かが判定され、しきい値βを越えていたときには、検査対象製品であるリヤクーラ・スイッチ３１を含む第２製品画像領域を撮影した第２製品画像は手ぶれがなく、画像認識状態が良好「○」であると判定されて、リヤクーラ・スイッチ３１が存在すると判定される。この場合、次にＳ４０６において、リヤクーラの指定が「あり」であることと、第２製品領域中にリヤクーラ・スイッチ３１が存在すると判定したこととに基づき、リヤクーラに対する有無検査の判定結果は「ＯＫ」であるとされる（図１７に示す表中の１−ａに該当）。そして、図６のＳ２１０においてその判定結果が「ＯＫ」として携帯ターミナル１１に送信され、この処理は終了される。従って、作業者は、携帯ターミナル１１における判定結果の表示により、検査結果が「ＯＫ」であり、リヤクーラが指定通りに組み付けられていることを確認できる。
【００５５】
一方、前記Ｓ４０５において、第２製品画像データと第２マスタ画像データとの合致率がしきい値β以下であったときには、検査対象製品であるリヤクーラ・スイッチ３１を含む第２製品画像領域を撮影した第２製品画像は手ぶれの影響があり、画像認識状態が不良「×」であると判定される。この場合、次にＳ４０７において、リヤクーラに対する有無検査の判定結果は「判定不能」であるとされる（図１７に示す表中の１−ｂに該当）。そして、図６のＳ２１０においてその判定結果が「判定不能」として携帯ターミナル１１に送信される。従って、作業者は、有無検査が正常に行われなかったことを認識でき、製品の再撮影を行うことができる。このように、第１製品画像データと第１マスタ画像データの合致率がしきい値αを越えているにも拘らず第２製品画像データと第２マスタ画像データとの合致率がしきい値β以下となる状況としては、例えば、車両外部から車室内に光が差し込んで空調コントロールパネル３０の表面に反射した像を「ＲＥＡＲ」と認識してしまった場合等がある。
【００５６】
また、前記Ｓ４０３において、第１製品画像データと第１マスタ画像データとの合致率がしきい値α以下であると判定されたときには、第１製品画像中に「ＲＥＡＲ」の文字列が存在していない（「なし」）と判定される。この場合、次にＳ４０８が実行される。
【００５７】
Ｓ４０８においては、第２製品画像データと第３マスタ画像データとの合致率が算出される。この次に、Ｓ４０９において、判定された合致率が前記しきい値βを越えているか否かが判定され、しきい値βを越えていたときには、第２製品画像データには手ぶれの影響がなく、画像認識状態が良好「○」であると判定されるとともに、リヤクーラ・スイッチ３１が存在しない（「なし」）と判定される。この場合、次にＳ４１０において、リヤクーラの指定が「あり」であることと、第２製品領域中にリヤクーラ・スイッチ３１が存在しないと判定したこととに基づき、リヤクーラに対する有無検査の判定結果は「ＮＧ」であるとされる（図１７に示す表中の１−ｃに該当）。そして、図６のＳ２１０においてその判定結果が「ＮＧ」として携帯ターミナル１１に送信され、この処理は終了される。従って、作業者は、携帯ターミナル１１における判定結果の表示により、検査結果が「ＮＧ」であり、車両にリヤクーラが指定通りに組み付けられていないことを認識できる。
【００５８】
一方、前記Ｓ４０９において、第２製品画像データと第３マスタ画像データとの合致率がしきい値β以下であったときには、検査対象製品であるリヤクーラ・スイッチ３１を含む第２製品画像領域を撮影した第２製品画像は手ぶれの影響があり、画像認識状態が不良（「×」）であると判定される（図１７に示す表中の１−ｄに該当）。この場合、次にＳ４０８において、リヤクーラに対する有無検査の判定結果は「判定不能」であるとされる。そして、図６のＳ２１０においてその判定結果が「判定不能」として携帯ターミナル１１に送信され、この処理は終了される。従って、作業者は、携帯ターミナル１１における判定結果の表示により、検査結果が「判定不能」であることを認識できる。
【００５９】
（リヤクーラの指定がない場合）
また、前記Ｓ４０１において、検査対象の車両の車両管理カード２２から取得した仕様情報、装備情報等に基づき、リヤクーラの指定が「なし」であると判定されたときには、図１６のフローチャートに示すように、次にＳ４５１において、第１製品画像データと第１マスタ画像データとの合致率が算出される。次に、Ｓ４５２において、判定された合致率が前記しきい値αを越えているか否かが判定され、しきい値αを越えていたときには、第１製品画像中に「ＲＥＡＲ」の文字列が存在している（「あり」）と判定される。この場合、次にＳ４５３が実行される。
【００６０】
Ｓ４５３においては、第２製品画像データと第２マスタ画像データとの合致率が算出される。この次にＳ４５４において、判定された合致率が前記しきい値βを越えているか否かが判定され、しきい値βを越えていたときには、検査対象製品であるリヤクーラ・スイッチ３１を含む第２製品画像領域を撮影した第２製品画像は手ぶれの影響がなく、画像認識状態が良好（「○」）であると判定されて、リヤクーラ・スイッチ３１が存在する（「○」）と判定される。この場合、次にＳ４５５において、リヤクーラの設定が「なし」であることと、第２製品領域中にリヤクーラ・スイッチ３１が存在すると判定したこととに基づき、リヤクーラに対する有無検査の判定結果は「ＮＧ」であるとされる（図１７に示す表中の２−ａに該当）。そして、図６のＳ２１０においてその判定結果が「ＮＧ」として携帯ターミナル１１に送信され、この処理は終了される。従って、作業者は、携帯ターミナル１１における判定結果の表示により、検査結果が「ＮＧ」であり、リヤクーラの指定がないにも拘らず組み付けられていることを認識できる。
【００６１】
一方、前記Ｓ４５４において、第２製品画像データと第２マスタ画像データとの合致率がしきい値β以下であったときには、第２製品画像は手ぶれの影響があり、画像認識状態が不良（「×」）であると判定される（図１７に示す表中の２−ｂに該当）。この場合、次にＳ４５６において、リヤクーラに対する有無検査の判定結果は「判定不能」であるとされた。そして、図６のＳ２１０においてその判定結果が「判定不能」として携帯ターミナル１１に送信され、この処理が終了される。従って、作業者は、携帯ターミナル１１における判定結果の表示により、検査結果が「判定不能」であることを認識できる。
【００６２】
また、前記Ｓ４５２において、第１製品画像データと第１マスタ画像データとの合致率がしきい値α以下であると判定されたときには、第１製品画像中に「ＲＥＡＲ」の文字列が存在している可能性が低いと判定される。この場合、次にＳ４５７が実行される。
【００６３】
Ｓ４５７においては、第２製品画像データと第３マスタ画像データとの合致率が算出される。この次に、Ｓ４５８において、判定された合致率が前記しきい値βを越えているか否かが判定され、しきい値βを越えていたときには、第２製品画像は手ぶれの影響がなく、画像認識状態が良好（「○」）であると判定され、リヤクーラ・スイッチ３１が存在しない（「なし」）と判定される。この場合、次にＳ４５９において、リヤクーラの設定が「なし」であることと、第２製品領域中にリヤクーラ・スイッチ３１が存在しないと判定したこととに基づき、リヤクーラに対する有無検査の判定結果は「ＯＫ」であるとされる（図１７に示す表中の２−ｃに該当）。そして、図６のＳ２１０においてその判定結果が「ＯＫ」として携帯ターミナル１１に送信され、この処理は終了される。従って、作業者は、携帯ターミナル１１における判定結果の表示により、検査結果が「ＯＫ」であり、指定通りにリヤクーラが組み付けられていないことを確認できる。
【００６４】
一方、前記Ｓ４５８において、第２製品画像データと第３マスタ画像データとの合致率がしきい値β以下であったときには、第２製品画像は手ぶれの影響があり、画像認識状態が不良（「×」）であると判定される。この場合、次にＳ４６０において、リヤクーラに対する有無検査の判定結果は「判定不能」であるとされる（図１７に示す表中の２−ｄに該当）。そして、図６のＳ２１０においてその判定結果が携帯ターミナル１１に送信され、この処理は終了される。従って、作業者は、携帯ターミナル１１における判定結果の表示により、検査結果が「判定不能」であることを認識できる。
【００６５】
以上のように実行される正否判定処理によれば、実際には車両にリヤクーラが装備されているときに、作業者による撮影時の手ぶれにより、第１マスタ画像データによるリヤクーラ・スイッチ３１の検出ができない場合には、第２製品画像データと第３マスタ画像データが合致しなくてもリヤクーラが存在しないとは判定されず、再撮影を促す「判定不能」が作業者に通知される。このため、実際にはリヤクーラが装備されているにも拘らず、リヤクーラが装備されていないとする検査間違いは防止される。
【００６６】
また、実際には車両にリヤクーラが装備されているときに、第１マスタ画像データによるリヤクーラ・スイッチ３１の検出ができた場合であっても、第２製品画像データと第２マスタ画像データが合致しないときには、再撮影を促す「判定不能」が作業者に通知される。このため、実際にはリヤクーラが装備されているにも拘らず、リヤクーラが装備されていないとする検査間違いは防止される。
【００６７】
また、実際には車両にリヤクーラが装備されていないときに、空調コントロールパネル３０の表面で反射した光によりリヤクーラ・スイッチ３１が存在すると判定された場合には、第２製品画像データと第２マスタ画像データとの非合致によりリヤクーラ・スイッチ３１が存在するとは判定されず、再撮影を促す「判定不能」が作業者に通知される。このため、実際にはリヤクーラが装備されていないにも拘らず、リヤクーラが装備されているとする検査間違いは防止される。
【００６８】
さらに、実際には車両にリヤクーラが装備されていないときに、第１マスタ画像データによりリヤクーラ・スイッチ３１が存在しないと判定された場合には、第２製品画像データと第３マスタ画像データとの非合致によりリヤクーラ・スイッチ３１が存在するとは判定されず、再撮影を促す「判定不能」が作業者に通知される。このため、実際にはリヤクーラが装備されていないにも拘らず、リヤクーラが装備されているとする検査間違いは防止される。
【００６９】
そして、以上のようにして、車両１０の各検査対象製品に対して組み付け状態の正否が検査され、その判定結果は製品画像とともに完成検査コンピュータ１３の記憶部１３ｂに検査順に検査履歴として保存される（図１４参照）。従って、生産した各車両１０に装備品が指定通りに装備されているという証拠が残されるため、不具合発生時の原因追求に活用できる。
【００７０】
以上詳述したこの実施形態は、以下の効果を奏する。
（１）リヤクーラ・スイッチ３１の特徴部（「ＲＥＡＲ」の文字列）が設けられる製品領域を含む第１製品画像の画像データと、この第１製品画像を含む第２製品画像の画像データとから、リヤクーラ・スイッチ３１の有無を判定するとともに、判定不能なときにはその旨を作業者に知らせて製品画像の再取得を行わせるようにした。従って、第１及び第２製品画像によるリヤクーラ・スイッチ３１の有無の判定が困難なときには、作業者の再撮影により製品画像を再取得してリヤクーラ・スイッチ３１の有無を判定することができる。このため、検査する車両におけるリヤクーラの装備の有無を能率良く検査することができる。
【００７１】
（２）車両の製品画像を撮影する携帯ターミナル１１に、二次元コードを解読して車両情報、仕様情報、装備情報等を取得するデータ処理部１６を一体化させた。このため、仮に、二次元コードから各情報を取得する機器を、カメラ機能のみを備えた携帯ターミナルとは別に設けた場合に比較して、製品検査システムの構成を簡素化することができる。
【００７２】
（３）完成検査コンピュータ１３と各携帯ターミナル１１との間において無線ＬＡＮによるデータ通信を行うように構成し、完成検査コンピュータ１３が送信した製品画像の再取得要求に基づいて、携帯ターミナル１１のデータ処理部１６が作業者に対して製品画像の再取得を要求するようにした。このため、各携帯ターミナル１１を使用する作業者に対して、製品画像の再取得要求を確実かつ迅速に伝えることができ、検査作業を迅速に行うことができる。
【００７３】
（４）車両１０の各検査対象製品に対する正否判定結果を、製品画像とともに完成検査コンピュータ１３の記憶部１３ｂに検査履歴として保存するようにした。従って、生産した各車両１０に装備品が指定通りに装備されているという証拠を残すことができるため、不具合発生時の原因追求に活用できる。
【００７４】
（第２実施形態）
次に、この発明を具体化した第２実施形態について、図１８〜図２２を参照して説明する。なお、この実施形態については、第１実施形態とは異なる点を中心に説明する。
【００７５】
この実施形態における検査対象製品は、図１８（ａ），（ｂ）に示すような自動変速機用の２種類のシフトレバーゲートであって、この２種類のシフトレバーゲートのうちのいずれかが車両に対して仕様等情報通りに装備されているか否かが検査される。すなわち、この実施形態における検査対象製品の検査では、第１実施形態における検査とは異なり、検査対象製品である装備品の有無が仕様情報、装備情報等の指定通りであるか否かが検査されるのではなく、検査対象製品である装備品の種類が仕様情報、装備情報等の指定通りであるか否かが検査される。なお、図１８（ａ）に示すシフトレバーゲートは、手動変速モード付きの自動変速機を備えた車両に装備され、図１８（ｂ）に示すシフトレバーゲートは、手動変速モードなしの自動変速機を備えた車両に装備される。
【００７６】
（正否判定処理）
次に、完成検査コンピュータ１３による前記正否判定処理のＳ２０７のサブルーチンにおいて実行される組み付け状態の正否判定処理について、図２０及び図２１に示すフローチャートと、図２２に示す表を参照して説明する。
【００７７】
この正否判定処理では、例えば、図１８（ａ），（ｂ）に示すような検査対象製品としての２種類のシフトレバーゲート４０の組み付け状態の正否を、そのシフトレバーゲート４０の特徴部を含むように予め設定された製品領域（図１８（ａ），（ｂ）において一点鎖線で囲まれた領域Ｔ）を撮影した製品画像（図１９（ａ），（ｂ）に示す画像Ｎ）に基づいて判定する。なお、この製品画像は、図１９（ａ），（ｂ）に示すように、インジケータとしての「Ｄ−Ｍ」及び「Ｄ−Ｓ」の文字列に合わせて設定されるターゲットスケール３３を用いて撮影される。
【００７８】
組み付け状態の正否判定は、各シフトレバーゲート４０の製品画像に対してそれぞれ用意されている合致率判定用の２つのマスタ画像データを用い、これらのマスタ画像データと、製品画像の画像データとのパターンマッチングの合致率の判定により行われる。２つのマスタ画像データのうち第１マスタ画像データは、シフトレバーゲート４０上のインジケータ記号「Ｄ−Ｍ」、「＋」及び「−」との合致率を判定するためのものであって、図１９（ａ）に示すように、手動変速モードが装備された自動変速機用のシフトレバーゲート４０の一部を撮影した製品画像Ｎに対応している。また、第２マスタ画像データは、シフトレバーゲート４０上の記号「Ｄ−Ｓ」との合致率を判定するためのものであって、図１９（ｂ）に示すように、手動変速モードを備えない自動変速機用のシフトレバーゲート４０の一部を撮影した製品画像Ｎに対応している。各マスタ画像データは、製品画像Ｎを外形エッジ処理して得られた処理画像データと比較され、その処理画像データとマスタ画像データとの合致率が求められる。そして、シフトレバーゲート４０に対する検査は、製品画像Ｎの画像データに対する第１マスタ画像データの合致率と、同画像データに対する第２マスタ画像データの合致率との差に基づいてなされる。
【００７９】
さて、シフトレバーゲートに関する組み付け状態の正否判定処理においては、図２０に示すように、先ず、Ｓ５０１において、検査対象の車両の車両管理カード２２から取得した仕様情報、装備情報等に基づき、シフトレバーゲートの種類の指定が、「Ｄ−Ｍ」タイプであるか又は「Ｄ−Ｓ」タイプであるかが判定される。
【００８０】
（シフトレバーゲートの指定が「Ｄ−Ｍ」タイプの場合）
Ｓ５０１においてシフトレバーゲートの指定が「Ｄ−Ｍ」タイプであると判定されると、次にＳ５０２において、製品画像データと第１マスタ画像データとの合致率（以下、第１合致率とする）が算出されるとともに、次のＳ５０３において、製品画像データと第２マスタ画像データとの合致率（以下、第２合致率とする）が算出される。
【００８１】
次に、Ｓ５０４において、第１合致率が第２合致率よりも大きいか否か、つまり、取得された製品画像データが第２マスタ画像データよりも第１マスタ画像データに近いか否かが判定される。そして、Ｓ５０４において肯定判定されたときには、次にＳ５０５において、第１合致率が、予め設定されているしきい値γ（例えば、８０％）よりも大きいか否かが判定される。
【００８２】
Ｓ５０５において肯定判定されたときには、次にＳ５０６において、車両に実際に装備されているシフトレバーゲートは「Ｄ−Ｍ」タイプであると判定され、設定が「Ｄ−Ｍ」タイプであることからその判定結果は「ＯＫ」であるとされる（図２２に示す表中の３−ａ，３−ｂ欄に該当）。すなわち、図６のＳ２１０においてその判定結果が「ＯＫ」として携帯ターミナル１１に送信され、この処理は終了される。従って、作業者は、携帯ターミナル１１における判定結果の表示により、検査結果が「ＯＫ」であり、指定通りのシフトレバーゲートであることを確認できる。
【００８３】
一方、前記Ｓ５０５において否定判定されたときには、製品画像データと第１マスタ画像データとの合致率が小さいため、実際に装備されているシフトレバーゲートが「Ｄ−Ｍ」タイプであるとの判定は行われず、次にＳ５０７において、その判定結果は「判定不能」であるとされる（図２２に示す表中の３−ｅ欄に該当）。そして、図６のＳ２１０においてその判定結果が「判定不能」として携帯ターミナル１１に送信され、この処理は終了される。従って、作業者は、携帯ターミナル１１における判定結果の表示により、検査結果が「判定不能」であることを認識できる。
【００８４】
また、前記Ｓ５０４において否定判定されたときには、次にＳ５０８において、第１合致率が第２合致率よりも小さいか否かが判定される。そして、Ｓ５０８において肯定判定されたときには、次にＳ５０９において、第２合致率がしきい値γよりも大きいか否かが判定される。
【００８５】
Ｓ５０９において肯定判定されたときには、次にＳ５１０において、車両に実際に装備されているシフトレバーゲートは「Ｄ−Ｓ」タイプであると判定され、指定が「Ｄ−Ｍ」タイプであることからその判定結果は「ＮＧ」であるとされる（図２２に示す表中の３−ｃ，３−ｄ欄に該当）。そして、図６のＳ２１０においてその判定結果が「ＮＧ」として携帯ターミナル１１に送信され、この処理は終了される。従って、作業者は、携帯ターミナル１１における判定結果の表示により、検査結果が「ＮＧ」であり、指定とは異なるシフトレバーゲートが組み付けられていることを認識できる。
【００８６】
一方、Ｓ５０９において否定判定されたときには、製品画像データと第２マスタ画像データデータとの合致率が小さいため、実際に装備されているシフトレバーゲートが「Ｄ−Ｓ」タイプであるとの判定は行われず、次にＳ５１１において、その判定結果は「判定不能」であるとしてこの処理は終了される（図２２に示す表中の３−ｅ欄に該当）。
【００８７】
また、前記Ｓ５０８において否定判定されたときには、第１合致率と第２合致率とが等しいと判断され、車両に実際に装備されているシフトレバーゲートの識別は行われず、前記Ｓ５１１において、その判定結果は「判定不能」であるとされる（図２２に示す表中の３−ｅ欄に該当）。そして、図６のＳ２１０においてその判定結果が「判定不能」として携帯ターミナル１１に送信され、この処理は終了される。従って、作業者は、携帯ターミナル１１における判定結果の表示により、検査結果が「判定不能」であることを認識できる。
【００８８】
（シフトレバーゲートの指定が「Ｄ−Ｓ」タイプの場合）
また、車両管理カード２２の情報により前記Ｓ５０１においてシフトレバーゲートの指定が「Ｄ−Ｓ」タイプであると判定されると、図２１に示すように、次にＳ５５１において、製品画像データと第１マスタ画像データとの第１合致率が算出されるとともに、次のＳ５５２において、製品画像データと第２マスタ画像データとの第２合致率が算出される。
【００８９】
次に、Ｓ５５３において、第１合致率が第２合致率よりも大きいか否かが判定される。そして、Ｓ５５３において肯定判定されたときには、次にＳ５５４において、第１合致率が前記しきい値γよりも大きいか否かが判定される。
【００９０】
Ｓ５５４において肯定判定されたときには、次にＳ５５５において、車両に実際に装備されているシフトレバーゲートは「Ｄ−Ｍ」タイプであると判定され、設定が「Ｄ−Ｓ」タイプであることからその判定結果は「ＮＧ」であるとされる（図２２に示す表中の４−ａ，４−ｂ欄に該当）。そして、図６のＳ２１０においてその判定結果が「ＯＫ」として携帯ターミナル１１に送信され、この処理は終了される。従って、作業者は、携帯ターミナル１１における判定結果の表示により、検査結果が「ＮＧ」であり、指定とは異なるシフトレバーゲートが組み付けられていることを認識できる。
【００９１】
一方、前記Ｓ５５４において否定判定されたときには、製品画像データと第１マスタ画像データとの合致率が小さいため、実際に装備されているシフトレバーゲートが「Ｄ−Ｍ」タイプであるとの判定は行われず、次にＳ５５６において、その判定結果は「判定不能」であるとされる（図２２に示す表中の４−ｅ欄に該当）。そして、図６のＳ２１０においてその判定結果が「判定不能」として携帯ターミナル１１に送信され、この処理は終了される。従って、作業者は、携帯ターミナル１１における判定結果の表示により、検査結果が「判定不能」であることを認識できる。
【００９２】
また、前記Ｓ５５３において否定判定されたときには、次にＳ５５７において、第１合致率が第２合致率よりも小さいか否かが判定される。そして、Ｓ５５７において肯定判定されたときには、次にＳ５５８において、第２合致率がしきい値γよりも大きいか否かが判定される。
【００９３】
Ｓ５５８において肯定判定されたときには、次にＳ５５９において、車両に実際に装備されているシフトレバーゲートは「Ｄ−Ｓ」タイプであると判定され、設定が「Ｄ−Ｓ」タイプであることからその判定結果は「ＯＫ」であるとしてこの処理は終了される（図２２に示す表中の４−ｃ，４−ｄ欄に該当）。そして、図６のＳ２１０においてその判定結果が「ＯＫ」として携帯ターミナル１１に送信され、この処理は終了される。従って、作業者は、携帯ターミナル１１における判定結果の表示により、検査結果が「ＯＫ」であり、指定通りのシフトレバーゲートが組み付けられていることを確認できる。
【００９４】
一方、Ｓ５５８において否定判定されたときには、製品画像データと第２マスタ画像データとの合致率が小さいため、実際に装備されているシフトレバーゲートが「Ｄ−Ｓ」タイプであるとの判定は行われず、次にＳ５６０において、その判定結果は「判定不能」であるとしてこの処理は終了される（図２２に示す表中の４−ｅ欄に該当）。
【００９５】
また、前記Ｓ５５７において否定判定されたときには、第１合致率と第２合致率とが等しいと判断され、車両に実際に装備されているシフトレバーゲートの識別は行われず、前記Ｓ５６０において、その判定結果は「判定不能」であるとされる（図２２に示す表中の４−ｅ欄に該当）。そして、図６のＳ２１０においてその判定結果が「判定不能」として携帯ターミナル１１に送信され、この処理は終了される。従って、作業者は、携帯ターミナル１１における判定結果の表示により、検査結果が「判定不能」であることを認識できる。
【００９６】
以上のように実行される正否判定処理によれば、第１合致率が第２合致率より大きく、かつ、第１合致率がしきい値γを越えているときには、シフトレバーゲートは「Ｄ−Ｍ」タイプであると判定される。また、第１合致率が第２合致率より大きくても、第１合致率がしきい値γ以下であるときには、シフトレバーゲートは「Ｄ−Ｍ」タイプであるとは判定されない。すなわち、製品画像撮影時の作業者の手ぶれにより製品画像が不鮮明となっており、このために、第１合致率がしきい値γ以下となっているときには、第１合致率が第２合致率より大きくても、シフトレバーゲートは「Ｄ−Ｍ」タイプであると判定されることは防止される。そして、作業者に「判定不能」の通知がなされるため、作業者は再度撮影を実行して正常な判定を得ることができる。
【００９７】
また、第１合致率が第２合致率より小さく、かつ、第２合致率がしきい値γを越えているときには、シフトレバーゲートは「Ｄ−Ｓ」タイプであると判定される。また、第１合致率が第２合致率より小さくても、第２合致率がしきい値γ以下であるときには、シフトレバーゲートは「Ｄ−Ｓ」タイプであるとは判定されない。すなわち、製品画像撮影時の作業者の手ぶれにより製品画像が不鮮明となっており、このために、第２合致率がしきい値γ以下となっているときには、第２合致率が第１合致率より大きくても、シフトレバーゲートは「Ｄ−Ｓ」タイプであると判定されることは防止される。そして、前記と同様に、作業者には「判定不能」の通知がなされる。
【００９８】
以上詳述したこの実施形態は、第１実施形態の（２），（３）の効果の他に以下の効果を奏する。
（５）車両に設定されているシフトレバーゲート４０の特徴部（「Ｄ−Ｍ」、「Ｄ−Ｓ」）を含むように取得した製品画像から、シフトレバーゲート４０の種類を判定するとともに判定不能な状態を判定し、判定不能なときには製品画像の再取得を作業者に行わせるようにした。従って、製品画像によるシフトレバーゲート４０の正否判定が困難なときには、作業者により撮影条件が変更された新たな製品画像によってシフトレバーゲート４０を正否判定することができるので、検査する車両に装備された自動変速機の検査を能率良く行うことができる。
【００９９】
（他の実施形態）
なお、この実施形態は、次のように変更して具体化することも可能である。
・携帯ターミナル１１と完成検査コンピュータ１３との間をケーブルにより接続し、このケーブルを介してデータ通信を行う構成とする。
【０１００】
・データ記憶手段としてのＩＣタグを車両に添付し、完成検査ライン２０の近傍に設けたＩＣタグリーダにより車両情報等を読み出し、これを携帯ターミナル１１に転送する構成とする。
【０１０１】
・第１製品画像と第２製品画像とを別々に撮影すること。
・第２実施形態において、３種類以上の検査対象製品の組み付け状態を正否判定する。
・ターゲットスケールの位置や大きさを変更する。例えば、第１実施形態において、ターゲットスケールを文字に合わせるように構成する。
【０１０２】
・この発明を、仕様や注文により装備品の有無や種類の検査が必要な車両以外の製品、例えばコンピュータの製品検査システムに具体化すること。
（他の技術的思想）
（１）検査対象を撮影した製品画像の第１製品画像に基づいて同検査対象製品の有無を判定する第１手順と、前記第１製品画像を含む第２製品画像に基づいて画像認識状態を判定する第２手順と、第１手順と第２手順の判定結果とに基づいて、前記検査対象製品の有無の判定が可能であるか否かを判定する第３手順と、検査対象製品毎に添付されたデータ記憶手段から、検査対象製品に関する情報を取得する第４手順と、前記第３手順の判定結果と、第４手順で得られた情報とに基づいて、前記検査対象製品の組み付け状態の正否を判定する第５手順とを行い、前記第３手順において前記検査対象製品の有無の判定が不可能であると判定したときに、前記作業者に対して製品画像の再撮影を促すことを特徴とする製品検査方法。
【符号の説明】
【０１０３】
１１…撮影手段としての携帯ターミナル、１２…通信手段としての無線ＬＡＮ親機、１３…正否判定手段、予備判定手段、再取得要求手段としての完成検査コンピュータ、１３ａ…制御装置としての制御部、１３ｂ…履歴記憶手段としての記憶部、１７…通信手段としての無線ＬＡＮ子機、２１…作業者、３１…検査対象製品としてのリヤクーラ・スイッチ、４０…検査対象製品としてのシフトレバーゲート、Ｍ…第２製品画像、Ｎ…製品画像、Ｓ…第１製品画像。
【図１】
2010223834.tif 000003
【図２】
2010223834.tif 000004
【図３】
2010223834.tif 000005
【図４】
2010223834.tif 000006
【図５】
2010223834.tif 000007
【図６】
2010223834.tif 000008
【図７】
2010223834.tif 000009
【図８】
2010223834.tif 000010
【図９】
2010223834.tif 000011
【図１０】
2010223834.tif 000012
【図１１】
2010223834.tif 000013
【図１２】
2010223834.tif 000014
【図１３】
2010223834.tif 000015
【図１４】
2010223834.tif 000016
【図１５】
2010223834.tif 000017
【図１６】
2010223834.tif 000018
【図１７】
2010223834.tif 000019
【図１８】
2010223834.tif 000020
【図１９】
2010223834.tif 000021
【図２０】
2010223834.tif 000022
【図２１】
2010223834.tif 000023
【図２２】
2010223834.tif 000024