(57)【要約】【課題】欠陥の識別精度を向上させることができる欠陥検査システム及び欠陥検査方法を提供する。【解決手段】光源２と撮像部３と搬送部４と画像処理部５とを備えた欠陥検査システム１において、２次元画像Ｆに含まれる欠陥の種別の識別に関する機械学習の結果を蓄積したデータに基づいて、画像処理部５により撮像部３で離散時間ごとに撮像された一連の２次元画像Ｆに含まれる欠陥の種別が識別されるために、離散時間ごとの２次元画像Ｆに機械学習を適用することによる識別精度の向上に加えて、撮像部３により２次元画像Ｆにおける搬送方向Ｘと合致する方向に輝度が変化する２次元画像Ｆが撮像されるため、離散時間ごとに２次元画像Ｆにおける搬送方向Ｘに沿った各部位で輝度が変化する２次元画像Ｆに機械学習が適用されることになり、欠陥Ｄの識別精度を向上させることができる。【選択図】図１
2019023587.tif 000002
【特許請求の範囲】
【請求項１】
検査対象に光を照射する光源と、
前記光源から前記検査対象に照射されて前記検査対象を透過又は反射した前記光による２次元画像を離散時間ごとに撮像する撮像部と、
前記光源及び前記撮像部に対して前記検査対象を搬送方向に相対的に搬送する搬送部と、
前記撮像部により撮像された前記２次元画像の画像データを処理する画像処理部と、
を備え、
前記撮像部は、
前記２次元画像における前記搬送方向と合致する方向に輝度が変化する前記２次元画像を撮像し、
前記画像処理部は、
前記２次元画像に含まれる欠陥の種別の識別に関する機械学習の結果を蓄積したデータに基づいて、前記撮像部で離散時間ごとに撮像された一連の前記２次元画像に含まれる欠陥の種別を識別する、欠陥検査システム。
【請求項２】
前記光源と前記検査対象との間に位置し、前記光源から前記検査対象に照射される前記光の一部を遮光することにより、前記撮像部で離散時間ごとに撮像される前記２次元画像に明部と暗部とを形成する遮光体をさらに備え、
前記搬送部は、前記光源、前記遮光体及び前記撮像部に対して前記検査対象を前記明部と前記暗部との境界線に交わる前記搬送方向に相対的に搬送する、請求項１に記載の欠陥検査システム。
【請求項３】
欠陥検査システムの光源から検査対象に光を照射する照射工程と、
前記欠陥検査システムの撮像部により、前記照射工程により前記光源から前記検査対象に照射されて前記検査対象を透過又は反射した前記光による２次元画像を離散時間ごとに撮像する撮像工程と、
前記欠陥検査システムの搬送部により、前記光源及び前記撮像部に対して前記検査対象を搬送方向に相対的に搬送する搬送工程と、
前記欠陥検査システムの画像処理部により、前記撮像工程で撮像された前記２次元画像の画像データを処理する画像処理工程と、
を備え、
前記撮像工程では、
前記２次元画像における前記搬送方向と合致する方向に輝度が変化する前記２次元画像を撮像し、
前記画像処理工程では、
前記２次元画像に含まれる欠陥の種別の識別に関する機械学習の結果を蓄積したデータに基づいて、前記撮像工程で離散時間ごとに撮像された一連の前記２次元画像に含まれる欠陥の種別を識別する、欠陥検査方法。
【請求項４】
前記照射工程では、
前記光源と前記検査対象との間に位置し、前記光源から前記検査対象に照射される前記光の一部を遮光する前記欠陥検査システムの遮光体により、前記撮像工程で離散時間ごとに撮像される前記２次元画像に明部と暗部とを形成し、
前記搬送工程では、
前記光源、前記遮光体及び前記撮像部に対して前記検査対象を前記明部と前記暗部との境界線に交わる前記搬送方向に相対的に搬送する、請求項３に記載の欠陥検査方法。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、欠陥検査システム及び欠陥検査方法に関する。
【背景技術】
【０００２】
検査対象の撮像画像に基づいて検査対象の欠陥を検査する欠陥検査システムとして、例えば、偏光フィルム及び位相差フィルム等の光学フィルム、電池のセパレータに用いられる積層フィルム等の欠陥を検出する欠陥検査システムが知られている。この種の欠陥検査システムは、搬送方向にフィルムを搬送し、フィルムの２次元画像を離散時間ごとに撮像し、撮像した２次元画像に基づいて欠陥検査を行う。例えば、特許文献１のシステムは、２次元画像を搬送方向に並列する複数のラインに分割し、離散時間ごとに撮像された２次元画像のそれぞれにおける同じ位置のラインを時系列順に並列させたライン分割画像を生成する。ライン分割画像は、輝度変化を強調した欠陥強調処理画像に処理される。欠陥強調処理画像により、フィルムの欠陥の有無や位置が容易に特定される。
【先行技術文献】
【特許文献】
【０００３】
【特許文献１】特許第４７２６９８３号明細書
【発明の概要】
【発明が解決しようとする課題】
【０００４】
ところで、上記技術のように検査対象の２次元画像が欠陥強調処理画像に処理されたとしても、最終的には欠陥の識別は人間による判定によって行われており、欠陥の識別精度には改善の余地がある。
【０００５】
そこで本発明は、欠陥の識別精度を向上させることができる欠陥検査システム及び欠陥検査方法を提供することを目的とする。
【課題を解決するための手段】
【０００６】
本発明は、検査対象に光を照射する光源と、光源から検査対象に照射されて検査対象を透過又は反射した光による２次元画像を離散時間ごとに撮像する撮像部と、光源及び撮像部に対して検査対象を搬送方向に相対的に搬送する搬送部と、撮像部により撮像された２次元画像の画像データを処理する画像処理部とを備え、撮像部は、２次元画像における搬送方向と合致する方向に輝度が変化する２次元画像を撮像し、画像処理部は、２次元画像に含まれる欠陥の種別の識別に関する機械学習の結果を蓄積したデータに基づいて、撮像部で離散時間ごとに撮像された一連の２次元画像に含まれる欠陥の種別を識別する欠陥検査システムである。
【０００７】
この構成によれば、検査対象に光を照射する光源と、光源から検査対象に照射されて検査対象を透過又は反射した光による２次元画像を離散時間ごとに撮像する撮像部と、光源及び撮像部に対して検査対象を搬送方向に相対的に搬送する搬送部と、撮像部により撮像された２次元画像の画像データを処理する画像処理部とを備えた欠陥検査システムにおいて、２次元画像に含まれる欠陥の種別の識別に関する機械学習の結果を蓄積したデータに基づいて、画像処理部により撮像部で離散時間ごとに撮像された一連の２次元画像に含まれる欠陥の種別が識別されるために、離散時間ごとの２次元画像に機械学習を適用することによる識別精度の向上に加えて、撮像部により２次元画像における搬送方向と合致する方向に輝度が変化する２次元画像が撮像されるため、離散時間ごとに２次元画像における搬送方向に沿った各部位で輝度が変化する２次元画像に機械学習が適用されることになり、欠陥の識別精度を向上させることができる。
【０００８】
この場合、光源と検査対象との間に位置し、光源から検査対象に照射される光の一部を遮光することにより、撮像部で離散時間ごとに撮像される２次元画像に明部と暗部とを形成する遮光体をさらに備え、搬送部は、光源、遮光体及び撮像部に対して検査対象を明部と暗部との境界線に交わる搬送方向に相対的に搬送することが好適である。
【０００９】
この構成によれば、光源と検査対象との間に位置する遮光体により、光源から検査対象に照射される光の一部が遮光されることにより撮像部で離散時間ごとに撮像される２次元画像に明部と暗部とが形成され、搬送部により、光源、遮光体及び撮像部に対して検査対象が明部と暗部との境界線に交わる搬送方向に相対的に搬送されるため、離散時間ごとに撮像された一連の２次元画像における検査対象の各部位が明部及び暗部の両方に入り、一連の２次元画像における検査対象の各部位の見え方が離散時間ごとにより大きく変化するため、欠陥の識別精度を向上させることができる。
【００１０】
一方、本発明は、欠陥検査システムの光源から検査対象に光を照射する照射工程と、欠陥検査システムの撮像部により、照射工程により光源から検査対象に照射されて検査対象を透過又は反射した光による２次元画像を離散時間ごとに撮像する撮像工程と、欠陥検査システムの搬送部により、光源及び撮像部に対して検査対象を搬送方向に相対的に搬送する搬送工程と、欠陥検査システムの画像処理部により、撮像工程で撮像された２次元画像の画像データを処理する画像処理工程とを備え、撮像工程では、２次元画像における搬送方向と合致する方向に輝度が変化する２次元画像を撮像し、画像処理工程では、２次元画像に含まれる欠陥の種別の識別に関する機械学習の結果を蓄積したデータに基づいて、撮像工程で離散時間ごとに撮像された一連の２次元画像に含まれる欠陥の種別を識別する欠陥検査方法である。
【００１１】
この場合、照射工程では、光源と検査対象との間に位置し、光源から検査対象に照射される光の一部を遮光する欠陥検査システムの遮光体により、撮像工程で離散時間ごとに撮像される２次元画像に明部と暗部とを形成し、搬送工程では、光源、遮光体及び撮像部に対して検査対象を明部と暗部との境界線に交わる搬送方向に相対的に搬送することが好適である。
【発明の効果】
【００１２】
本発明の欠陥検査システム及び欠陥検査方法によれば、欠陥の識別精度を向上させることができる。
【図面の簡単な説明】
【００１３】
【図１】実施形態に係る欠陥検査システムを示す斜視図である。
【図２】図１の欠陥検査システムの光源、撮像部、遮光体及び検査対象の配置を示す図である。
【図３】実施形態に係る欠陥検査方法の工程を示すフローチャートである。
【図４】撮像部により撮像された２次元画像を示す図である。
【図５】畳み込みニューラルネットワークを示す図である。
【発明を実施するための形態】
【００１４】
以下、図面を参照して本発明の欠陥検査システム及び欠陥検査方法の好適な実施形態について詳細に説明する。
【００１５】
図１及び図２に示すように、本発明の実施形態に係る欠陥検査システム１は、光源２、撮像部３、搬送部４、画像処理部５、遮光体６、平行光レンズ７及び表示装置８を備えている。本実施形態の欠陥検査システムは、偏光フィルム及び位相差フィルム等の光学フィルム、電池のセパレータに用いられる積層フィルム等のフィルムを検査対象Ｔとし、検査対象Ｔの欠陥を検出する。検査対象Ｔは、搬送部４の搬送方向Ｘに延在し、搬送方向Ｘに直交する幅方向Ｙに予め設定された幅を有する。検査対象Ｔに生じる欠陥とは、所望の状態とは異なる状態を指すものであり、例えば、異物、打痕、気泡（成形時に生じる物等）、異物気泡（異物の混入により生じる物等）、傷、クニック（折り目痕等により生じる物等）、及びスジ（厚さの違いにより生じる物等）が挙げられる。欠陥検査システム１は、これらの欠陥の種別を識別する。
【００１６】
図１及び図２に示すように、光源２は検査対象Ｔに光を照射する。光源２は、幅方向Ｙに平行な線状な光を照射するように配置されている。光源２としては、メタルハライドランプ、ハロゲン伝送ライト、蛍光灯など、検査対象Ｔであるフィルムの組成および性質に影響を与えない光を照射するものであれば、特に限定されない。
【００１７】
撮像部３は、光源２から検査対象Ｔに照射されて検査対象Ｔを透過又は反射した光による２次元画像を離散時間ごとに撮像する。撮像部３は、複数の光学部材と光電変換素子とを有している。光学部材は、光学レンズ、シャッター等から構成され、検査対象Ｔであるフィルムを透過した光を光電変換素子の表面に結像させる。光電変換素子は、２次元画像を撮像するＣＣＤ（Charge Coupled Device）またはＣＭＯＳ（ComplementaryMetal-Oxide Semiconductor）等の撮像素子で構成されるエリアセンサである。撮像部３は、色彩を有さない２次元画像及び色彩を有する２次元画像のいずれを撮像するものでもよい。
【００１８】
搬送部４は、光源２及び撮像部３に対して検査対象Ｔを搬送方向Ｘに相対的に搬送する。搬送部４は、例えば、検査対象Ｔであるフィルムを搬送方向Ｘに搬送する送出ローラと受取ローラを備え、ロータリーエンコーダなどにより搬送距離を計測する。本実施形態では、搬送部４による検査対象Ｔの搬送速度は、搬送方向Ｘに２〜１００ｍ／分程度に設定される。搬送部４における搬送速度は、画像処理部５等によって設定及び制御される。
【００１９】
画像処理部５は、撮像部３により撮像された２次元画像の画像データを処理する。画像処理部５は、２次元画像に含まれる欠陥の種別の識別に関する機械学習の結果を蓄積したデータに基づいて、撮像部３で離散時間ごとに撮像された一連の２次元画像に含まれる欠陥の種別を識別する。画像処理部５は、２次元画像データの画像処理を行うものであれば、特に限定されるものではなく、例えば、画像処理ソフトウェアがインストールされたＰＣ（パーソナルコンピュータ）、画像処理回路が記述されたＦＰＧＡ（Field Programmable Gate Array）を搭載する画像キャプチャボード等を適用することができる。機械学習の結果を蓄積したデータは、画像処理部５を含むＰＣのハードディスク等の記憶装置に記憶され、機械学習の結果に伴い更新される。
【００２０】
なお、本実施形態では、２次元画像に含まれる欠陥の種別の識別に関する機械学習の結果を蓄積したデータとは、欠陥検査システム１の内部の撮像部３で離散時間ごとに撮像された一連の２次元画像に含まれる欠陥の種別の識別に関する機械学習の結果を蓄積したデータの他に、欠陥検査システム１の外部で別途作成された２次元画像に含まれる欠陥の種別の識別に関する機械学習の結果を蓄積したデータも含まれる。つまり、本実施形態では、欠陥検査システム１の内部で機械学習がなされた状態で欠陥の種別が識別される態様の他に、欠陥検査システム１の内部では未だ機械学習がなされていない状態で欠陥検査システム１の外部で別途作成された機械学習の結果を蓄積したデータに基づいて欠陥の種別が識別される態様も含まれる。
【００２１】
遮光体６は、光源２と検査対象Ｔとの間に位置し、光源２から検査対象Ｔに照射される光の一部を遮光することにより、撮像部３で離散時間ごとに撮像される２次元画像に明部と暗部とを形成する。遮光体６により、撮像部３は、２次元画像における搬送方向Ｘと合致する方向に輝度が変化する２次元画像を撮像する。より具体的には、搬送部４は、光源２、平行光レンズ７、遮光体６、及び撮像部３に対して検査対象Ｔを明部と暗部との境界線に交わる搬送方向Ｘに相対的に搬送する。本実施形態では、境界線は搬送方向Ｘに垂直な幅方向Ｙに平行である。なお、撮像部３が２次元画像における搬送方向Ｘと合致する方向に輝度が変化する２次元画像を撮像することが可能であれば、遮光体６は備えなくてもよい。平行光レンズ７は、光源２から検査対象Ｔ及び遮光体６に照射される光の進行方向を平行にする。平行光レンズ７は、例えば、テレセントリック光学系により構成することができる。
【００２２】
画像処理部５に接続された表示装置８は、例えば、ＰＣ（パーソナルコンピュータ）等からなり、画像処理部５により識別された欠陥の種別をＬＣ（Liquid Crystal）表示パネル、プラズマ表示パネル、ＥＬ（ElectroLuminescence）表示パネル等に表示する。なお、画像処理部５が処理された画像を表示する表示装置を有していてもよい。
【００２３】
以下、本実施形態の欠陥検査方法について説明する。図３に示すように、欠陥検査システム１の光源２から検査対象Ｔに光を照射する照射工程が行われる（Ｓ１）。図４に示すように、照射工程では、光源２と検査対象Ｔとの間に位置し、光源２から検査対象Ｔに照射される光の一部を遮光する欠陥検査システム１の遮光体６により、撮像工程で離散時間ごとに撮像される２次元画像Ｆに明部ｌと暗部ｄとが形成される。
【００２４】
図３に示すように、欠陥検査システム１の撮像部３により、照射工程により光源２から検査対象Ｔに照射されて検査対象Ｔを透過又は反射した光による２次元画像を離散時間ごとに撮像する撮像工程が行われる（Ｓ２）。図４に示すように、撮像工程では、遮光体６により光源２から検査対象Ｔに照射される光の一部が遮光されるため、２次元画像Ｆにおける搬送方向Ｘと合致する方向に輝度が変化する２次元画像Ｆが撮像される。
【００２５】
また、図３に示すように、欠陥検査システム１の搬送部４により、光源２及び撮像部３に対して検査対象Ｔを搬送方向Ｘに相対的に搬送する搬送工程が行われる（Ｓ３）。図４に示すように、搬送工程では、光源２、平行光レンズ７、遮光体６及び撮像部３に対して検査対象Ｔを明部ｌと暗部ｄとの境界線ｂに交わる搬送方向Ｘに相対的に搬送する。本実施形態では、境界線ｂは搬送方向Ｘに直交する幅方向Ｙに平行であるが、境界線ｂと搬送方向Ｘとのなす角度は９０°以外でもよい。また、境界線ｂは必ずしも厳密なものではなく、境界線ｂとは、明部ｌが含まれる２次元画像Ｆの最も輝度が大きい部位と暗部ｄが含まれる２次元画像Ｆの最も輝度が小さい部位との中間の線を意味する。
【００２６】
図３に示すように、欠陥検査システム１の画像処理部５により、撮像工程で撮像された２次元画像Ｆの画像データを処理する画像処理工程が行われる（Ｓ４）。画像処理工程では、２次元画像Ｆに含まれる欠陥Ｄの種別の識別に関する機械学習の結果を蓄積したデータに基づいて、撮像工程で離散時間ごとに撮像された一連の２次元画像Ｆに含まれる欠陥Ｄの種別を識別する。機械学習は、例えば、畳み込みニューラルネットワークが行われる。なお、機械学習により欠陥の種別を識別可能であれば、畳み込みニューラルネットワーク以外のニューラルネットワークやその他の手法を用いることも可能である。
【００２７】
図５に示すように、畳み込みニューラルネットワーク１００は、入力層１１０、隠れ層１２０及び出力層１３０を備えている。入力層１１０には、欠陥検査システム１の画像処理部５により、撮像工程で離散時間ごとに撮像された一連の２次元画像Ｆが入力される。隠れ層１２０は、重みフィルタによる画像処理が行われる畳み込み層１２１，１２３と、畳み込み層１２１，１２３から出力された二次元配列を縦横に小さくして有効な値を残す処理を行うプーリング層１２２と、各層の重み係数ｎが更新される全結合層１２４とを有する。出力層１３０では、機械学習による欠陥Ｄの種別の識別結果が出力される。畳み込みニューラルネットワーク１００では、出力された識別結果と正解値との誤差を逆方向Ｒに逆伝播することによって各層の重みが学習される。
【００２８】
例えば、画像処理部５に予め複数の２次元画像Ｆを欠陥Ｄの種別の識別の正解とともに入力して学習させておくことにより、新たに入力された一連の２次元画像Ｆに含まれる物が特定の欠陥Ｄの種別であるかどうかが順次識別され、識別結果が順次出力される。順次出力された識別結果と正解との誤差は逆方向Ｒに逆伝播され、各層の重み係数ｎが順次更新され、データとして蓄積される。各相の重みが順次更新された状態で、さらに新たに入力された一連の２次元画像Ｆに含まれる物が特定の欠陥の種別であるかどうかが順次識別され、識別結果が順次出力され、順次出力された識別結果と正解との誤差に基づいて各層の重み係数ｎが順次更新され、データとして蓄積されることが繰り返されることにより、識別結果と正解との誤差が小さくなり、欠陥Ｄの種別の識別の精度が向上する。
【００２９】
本実施形態によれば、検査対象Ｔに光を照射する光源２と、光源２から検査対象Ｔに照射されて検査対象Ｔを透過又は反射した光による２次元画像Ｆを離散時間ごとに撮像する撮像部３と、光源２及び撮像部３に対して検査対象Ｔを搬送方向Ｘに相対的に搬送する搬送部４と、撮像部３により撮像された２次元画像Ｆの画像データを処理する画像処理部５とを備えた欠陥検査システム１において、２次元画像Ｆに含まれる欠陥Ｄの種別の識別に関する機械学習の結果を蓄積したデータに基づいて、画像処理部５により撮像部３で離散時間ごとに撮像された一連の２次元画像Ｆに含まれる欠陥Ｄの種別が識別されるために、離散時間ごとの２次元画像Ｆに機械学習を適用することによる識別精度の向上に加えて、撮像部３により２次元画像Ｆにおける搬送方向Ｘと合致する方向に輝度が変化する２次元画像Ｆが撮像されるため、離散時間ごとに２次元画像Ｆにおける搬送方向Ｘに沿った各部位で輝度が変化する２次元画像Ｆに機械学習が適用されることになり、欠陥Ｄの識別精度を向上させることができる。
【００３０】
また、本実施形態では、光源２と検査対象Ｔとの間に位置する遮光体６により、光源２から検査対象Ｔに照射される光の一部が遮光されることにより撮像部３で離散時間ごとに撮像される２次元画像Ｆに明部ｌと暗部ｄとが形成され、搬送部４により、光源２、遮光体６及び撮像部３に対して検査対象Ｔが明部ｌと暗部ｄとの境界線ｂに交わる搬送方向Ｘに相対的に搬送されるため、離散時間ごとに撮像された一連の２次元画像Ｆにおける検査対象Ｔの各部位が明部ｌ及び暗部ｄの両方に入り、一連の２次元画像Ｆにおける検査対象Ｔの各部位の見え方が離散時間ごとにより大きく変化するため、欠陥Ｄの識別精度を向上させることができる。
【００３１】
以上、本発明の実施形態について説明したが、本発明は上記実施形態に限定されることなく様々な形態で実施される。例えば、上記実施形態では、検査対象がフィルムである場合について中心に説明したが、本発明の欠陥検査システム及び欠陥検査方法は、例えば、生産ラインにおいて、容器に充填された液体の充填量検査に適用することができる。本実施形態の欠陥検査システム１及び欠陥検査方法により、容器内の所望の位置まで液体が到達していないか、あるいは、液体が容器内の所望の位置を超えていないか等の欠陥を検査することができる。
【００３２】
また、本実施形態の欠陥検査システム１及び欠陥検査方法は、生産ラインにおいて、ガラス製品等の割れやキズ等の外観検査に適用することができる。ガラス製品に照明を当てて撮影すると、撮影画像内の一部に欠陥が有る場合には輝度が他の部位よりも高くなることを利用して欠陥を抽出することができる。
【符号の説明】
【００３３】
１…欠陥検査システム、２…光源、３…撮像部、４…搬送部、５…画像処理部、６…遮光体、７…平行光レンズ、８…表示装置、１００…畳み込みニューラルネットワーク、１１０…入力層、１２０…隠れ層、１２１，１２３…畳み込み層、１２２…プーリング層、１２４…全結合層、１３０…出力層、Ｔ…検査対象、Ｘ…搬送方向、Ｙ…幅方向、Ｆ…２次元画像、ｌ…明部、ｄ…暗部、ｂ…境界線、Ｄ…欠陥、ｎ…重み係数、Ｒ…逆方向。
【図１】
2019023587.tif 000003
【図２】
2019023587.tif 000004
【図３】
2019023587.tif 000005
【図４】
2019023587.tif 000006
【図５】
2019023587.tif 000007