【手続補正書】
【提出日】平成27年9月24日(2015.9.24)
【手続補正１】
【補正対象書類名】明細書
【補正対象項目名】発明の名称
【補正方法】変更
【補正の内容】
【発明の名称】画像認識装置、画像認識方法及び画像認識プログラム
【手続補正２】
【補正対象書類名】明細書
【補正対象項目名】０００１
【補正方法】変更
【補正の内容】
【０００１】
本発明は、画像認識装置、画像認識方法及び画像認識プログラムに関し、特に、撮像による薬剤の認識処理に関する。
【手続補正３】
【補正対象書類名】明細書
【補正対象項目名】０００６
【補正方法】変更
【補正の内容】
【０００６】
また、薬剤の包装材に表示されている画像には、薬剤名以外にも薬剤の認識に有効な情報が含まれている場合もあるが、特許文献１において開示された技術ではそのような情報を有効に活用できていない。尚、このような課題はブリスタパックによって包装された薬剤に限定されたものではなく、包装材に薬剤を識別可能な情報が表示された薬剤であれば同様に課題となり得る。また、薬剤の認識にも限らず、入力された画像に表示されている対象物を画像処理によって認識するための画像認識処理全般において、認識精度の正確性及び認識処理の迅速性は重要な課題である。
【手続補正４】
【補正対象書類名】明細書
【補正対象項目名】０００７
【補正方法】変更
【補正の内容】
【０００７】
本発明は、上記実情を考慮してなされたものであり、入力された画像に基づく認識対象の認識精度を向上すると共に、認識対象の認識結果を迅速に得ることを目的とする。
【手続補正５】
【補正対象書類名】明細書
【補正対象項目名】０００８
【補正方法】変更
【補正の内容】
【０００８】
上記課題を解決するために、本発明の一態様は、入力された入力画像に基づいて画像中に表示されている認識対象を認識する画像認識装置であって、前記入力画像を取得する画像取得部と、前記入力画像から複数の局所特徴量を抽出し、認識され得る複数の認識対象の画像夫々について抽出された局所特徴量が前記複数の認識対象の画像夫々に関連付けられて登録されている登録画像データベースを参照し、前記入力画像から抽出された複数の局所特徴量を、前記登録画像データベースに登録されている局所特徴量のうち最も近い局所特徴量に関連付け、関連付けられた局所特徴量の数に従って前記複数の認識対象の画像を順位付けする順位付け部と、前記認識対象の画像と前記入力画像とが重ね合わせられるように、前記認識対象の画像及び前記入力画像の一方を変換するための変換情報を、前記認識対象の画像及び前記入力画像から夫々抽出された局所特徴量に基づいて求める変換情報取得部と、求められた前記変換情報を用いて前記認識対象の画像及び前記入力画像の一方を変換し、前記認識対象の画像と前記入力画像とを比較することにより前記認識対象の画像と前記入力画像とが同一であるか否かを判断する検証処理部とを含み、前記変換情報取得部は、順位付けされた前記複数の認識対象の順位の順に前記変換情報を求め、前記検証処理部は、順番に求められた変換情報を用いて前記認識対象の画像及び前記入力画像の一方を変換して前記認識対象の画像と前記入力画像とが同一であるか否かを判断し、同一であると判断した前記認識対象の画像に対応する認識対象を前記入力画像に対する認識対象の認識結果として出力することを特徴とする。
【手続補正６】
【補正対象書類名】明細書
【補正対象項目名】０００９
【補正方法】変更
【補正の内容】
【０００９】
また、本発明の他の態様は、入力された入力画像に基づいて画像中に表示されている認識対象を認識する画像認識方法であって、前記入力画像を取得し、前記入力画像から複数の局所特徴量を抽出し、認識され得る複数の認識対象の画像夫々について抽出された局所特徴量が前記複数の認識対象夫々に関連付けられて登録されている登録画像データベースを参照し、前記入力画像から抽出された複数の局所特徴量を、前記登録画像データベースに登録されている局所特徴量のうち最も近い局所特徴量に関連付け、関連付けられた局所特徴量の数に従って前記複数の認識対象を順位付けし、前記認識対象の画像と前記入力画像とが重ね合わせられるように、前記認識対象の画像及び前記入力画像の一方を変換するための変換情報を、順位付けされた前記複数の認識対象の順位の順に、前記認識対象の画像及び前記入力画像から夫々抽出された局所特徴量に基づいて求め、順位付けされた前記複数の認識対象の順位の順に求められた前記変換情報を用いて前記認識対象の画像及び前記入力画像の一方を変換し、前記認識対象の画像と前記読取画像とを比較することにより前記認識対象の画像と前記入力画像とが同一であるか否かを判断し、同一であると判断した前記認識対象の画像に対応する認識対象を前記入力画像に対する認識対象の認識結果として出力することを特徴とする。
【手続補正７】
【補正対象書類名】明細書
【補正対象項目名】００１０
【補正方法】変更
【補正の内容】
【００１０】
また、本発明の更に他の態様は、入力された入力画像に基づいて画像中に表示されている認識対象を認識する画像認識プログラムであって、前記入力画像を取得するステップと、前記入力画像から複数の局所特徴量を抽出するステップと、認識され得る複数の認識対象の画像夫々について抽出された局所特徴量が前記複数の認識対象夫々に関連付けられて登録されている登録画像データベースを参照し、前記入力画像から抽出された複数の局所特徴量を、前記登録画像データベースに登録されている局所特徴量のうち最も近い局所特徴量に関連付けるステップと、関連付けられた局所特徴量の数に従って前記複数の認識対象を順位付けるステップと、前記認識対象の画像と前記入力画像とが重ね合わせられるように、前記認識対象の画像及び前記入力画像の一方を変換するための変換情報を、順位付けされた前記複数の認識対象の順位の順に、前記認識対象の画像及び前記入力画像から夫々抽出された局所特徴量に基づいて求めるステップと、順位付けされた前記複数の認識対象の順位の順に求められた前記変換情報を用いて前記認識対象の画像及び前記入力画像の一方を変換し、前記認識対象の画像と前記入力画像とを比較することにより前記認識対象の画像と前記入力画像とが同一であるか否かを判断するステップと、同一であると判断した前記認識対象の画像に対応する認識対象を前記入力画像に対する認識対象の認識結果として出力するステップとを情報処理装置に実行させることを特徴とする。
【手続補正８】
【補正対象書類名】特許請求の範囲
【補正対象項目名】全文
【補正方法】変更
【補正の内容】
【特許請求の範囲】
【請求項１】
入力された入力画像に基づいて画像中に表示されている認識対象を認識する画像認識装置であって、
前記入力画像を取得する画像取得部と、
前記入力画像から複数の局所特徴量を抽出し、認識され得る複数の認識対象の画像夫々について抽出された局所特徴量が前記複数の認識対象の画像夫々に関連付けられて登録されている登録画像データベースを参照し、前記入力画像から抽出された複数の局所特徴量を、前記登録画像データベースに登録されている局所特徴量のうち最も近い局所特徴量に関連付け、関連付けられた局所特徴量の数に従って前記複数の認識対象の画像を順位付けする順位付け部と、
前記認識対象の画像と前記入力画像とが重ね合わせられるように、前記認識対象の画像及び前記入力画像の一方を変換するための変換情報を、前記認識対象の画像及び前記入力画像から夫々抽出された局所特徴量に基づいて求める変換情報取得部と、
求められた前記変換情報を用いて前記認識対象の画像及び前記入力画像の一方を変換し、前記認識対象の画像と前記入力画像とを比較することにより前記認識対象の画像と前記入力画像とが同一であるか否かを判断する検証処理部とを含み、
前記変換情報取得部は、順位付けされた前記複数の認識対象の順位の順に前記変換情報を求め、
前記検証処理部は、順番に求められた変換情報を用いて前記認識対象の画像及び前記入力画像の一方を変換して前記認識対象の画像と前記入力画像とが同一であるか否かを判断し、同一であると判断した前記認識対象の画像に対応する認識対象を前記入力画像に対する認識対象の認識結果として出力することを特徴とする画像認識装置。
【請求項２】
前記変換情報取得部は、前記順位付け部による前記局所特徴量の関連付けの結果に基づいて前記変換情報を求めることを特徴とする請求項１に記載の画像認識装置。
【請求項３】
前記登録画像データベースは、前記複数の認識対象夫々について、前記認識対象の画像のうち認識対象の認識において特徴となり得る部分の画像を関連付けて記憶しており、
前記変換情報取得部は、前記特徴となり得る部分の画像が、前記入力画像において対応する部分に重ね合わせられるように前記変換情報を求め、
前記検証処理部は、求められた前記変換情報を用いて前記特徴となり得る部分の画像を変換し、前記入力画像のうち前記特徴となり得る部分の画像が重ね合わせられた部分の画像と前記特徴となり得る部分の画像とを比較することを特徴とする請求項１に記載の画像認識装置。
【請求項４】
前記変換情報取得部は、前記特徴となり得る部分の画像が、前記入力画像において複数含まれる場合に、求められた変換情報の数に基づいて前記入力画像に含まれる前記特徴となり得る部分の画像の数を判断し、
前記検証処理部は、前記入力画像に含まれる前記特徴となり得る部分の画像の数に基づいて前記入力画像の生成に際して撮像された認識対象の量を判断することを特徴とする請求項３に記載の画像認識装置。
【請求項５】
前記登録画像データベースは、前記複数の認識対象夫々について、前記特徴となり得る部分の画像が含まれる数を関連付けて記憶しており、
前記変換情報取得部は、前記特徴となり得る部分の画像が、前記入力画像において複数含まれる場合に、求められた変換情報の数に基づいて前記入力画像に含まれる前記特徴となり得る部分の画像の数を判断し、
前記検証処理部は、前記入力画像に含まれる前記特徴となり得る部分の画像の数と、前記登録画像データベースに記憶されている前記特徴となり得る部分の画像が含まれる数とを比較して、前記認識対象の画像と前記入力画像とが同一であるか否かを判断することを特徴とする請求項３に記載の画像認識装置。
【請求項６】
前記変換情報取得部は、前記認識対象の画像から抽出された局所特徴量を、前記入力画像から抽出された局所特徴量のうち、差異が所定の範囲内である局所特徴量に関連付け、関連付けた局所特徴量を複数選択し、選択した局所特徴量が前記認識対象の画像及び前記入力画像の一方から他方に射影されるような変換情報を算出することを特徴とする請求項１に記載の画像認識装置。
【請求項７】
前記変換情報取得部は、選択した局所特徴量が前記認識対象の画像及び前記入力画像の一方から他方に射影されるような変換情報をアフィン変換またはユークリッド変換に従って算出することを特徴とする請求項６に記載の画像認識装置。
【請求項８】
前記検証処理部は、認識され得る複数の認識対象の画像のうち、類似している画像の組が登録されている類似画像データベースを参照し、同一であると判断した前記認識対象の画像が登録されている場合には、再検証を行うことを特徴とする請求項１に記載の画像認識装置。
【請求項９】
前記類似画像データベースは、類似している画像の組と、類似ている画像の組において異なる画像の部分を示す情報とを関連付けて記憶しており、
前記検証処理部は、同一であると判断した前記認識対象の画像が前記類似画像データベースに登録されている場合、前記異なる画像の部分について前記認識対象の画像及び前記入力画像とを比較することにより再検証を行うことを特徴とする請求項８に記載の画像認識装置。
【請求項１０】
入力された入力画像に基づいて画像中に表示されている認識対象を認識する画像認識方法であって、
前記入力画像を取得し、
前記入力画像から複数の局所特徴量を抽出し、
認識され得る複数の認識対象の画像夫々について抽出された局所特徴量が前記複数の認識対象夫々に関連付けられて登録されている登録画像データベースを参照し、前記入力画像から抽出された複数の局所特徴量を、前記登録画像データベースに登録されている局所特徴量のうち最も近い局所特徴量に関連付け、
関連付けられた局所特徴量の数に従って前記複数の認識対象を順位付けし、
前記認識対象の画像と前記入力画像とが重ね合わせられるように、前記認識対象の画像及び前記入力画像の一方を変換するための変換情報を、順位付けされた前記複数の認識対象の順位の順に、前記認識対象の画像及び前記入力画像から夫々抽出された局所特徴量に基づいて求め、
順位付けされた前記複数の認識対象の順位の順に求められた前記変換情報を用いて前記認識対象の画像及び前記入力画像の一方を変換し、前記認識対象の画像と前記読取画像とを比較することにより前記認識対象の画像と前記入力画像とが同一であるか否かを判断し、
同一であると判断した前記認識対象の画像に対応する認識対象を前記入力画像に対する認識対象の認識結果として出力することを特徴とする画像認識方法。
【請求項１１】
入力された入力画像に基づいて画像中に表示されている認識対象を認識する画像認識プログラムであって、
前記入力画像を取得するステップと、
前記入力画像から複数の局所特徴量を抽出するステップと、
認識され得る複数の認識対象の画像夫々について抽出された局所特徴量が前記複数の認識対象夫々に関連付けられて登録されている登録画像データベースを参照し、前記入力画像から抽出された複数の局所特徴量を、前記登録画像データベースに登録されている局所特徴量のうち最も近い局所特徴量に関連付けるステップと、
関連付けられた局所特徴量の数に従って前記複数の認識対象を順位付けるステップと、
前記認識対象の画像と前記入力画像とが重ね合わせられるように、前記認識対象の画像及び前記入力画像の一方を変換するための変換情報を、順位付けされた前記複数の認識対象の順位の順に、前記認識対象の画像及び前記入力画像から夫々抽出された局所特徴量に基づいて求めるステップと、
順位付けされた前記複数の認識対象の順位の順に求められた前記変換情報を用いて前記認識対象の画像及び前記入力画像の一方を変換し、前記認識対象の画像と前記入力画像とを比較することにより前記認識対象の画像と前記入力画像とが同一であるか否かを判断するステップと、
同一であると判断した前記認識対象の画像に対応する認識対象を前記入力画像に対する認識対象の認識結果として出力するステップとを情報処理装置に実行させることを特徴とする画像認識プログラム。