(57)【要約】  特定の部分領域に絞り込んで目的の車両を精度良く抽出できる車種識別装置、車種識別システムおよび車種識別方法を提供するために、車種識別システムは、撮像装置と、表示装置と、車種識別装置と、それらを接続するバスとを含み、車種識別装置は、入力装置と、記憶装置と、プロセッサとを有する。ユーザは、入力装置で検索を行い、プロセッサは当該検索条件から、第１のルールで第１の車両画像リストと車両画像と参照画像とを表示装置に表示させる。ユーザは参照画像を参照して、目的の車種の特徴を調べ、特徴のある部分領域を特定する。プロセッサは、特定された部分領域の部分特定情報を取得して、第２のルールに基づき検索し、第２の車両画像リストと車両画像を表示装置に表示させる。
2017169226.tif 000002
【特許請求の範囲】
【請求項１】
撮像装置により撮像された車両の車両画像に基づいて前記車両の車種を識別する車種識別装置であって、
当該車種識別装置は、プロセッサと、記憶装置と、を有し、
前記記憶装置には、前記車両画像と、前記車両画像中の前記車両が特定の車種であることの確からしさを示すスコアと、が記録されており、
前記プロセッサは、
車種を特定するための情報を含む検索条件を取得し、
前記検索条件および前記スコアに基づき、第１のルールを用いて前記検索条件に当てはまる第１の車両画像リストを抽出し、
前記第１の車両画像リストを表示装置に表示し、
前記車両画像の少なくとも一部分を特定する部分特定情報を取得し、
前記部分特定情報に基づいて第２のルールを生成し、
前記検索条件および前記スコアに基づき、前記生成した第２のルールを用いて前記検索条件に当てはまる第２の車両画像リストを抽出する、
車種識別装置。
【請求項２】
請求項１に記載の車種識別装置であって、
前記スコアが、前記車両画像内の複数の部分領域の各々に定義されており、
前記第２のルールが、少なくとも一つの部分領域のスコアの重みを、前記第１のルールに比べて大きくするルールである、車種識別装置。
【請求項３】
請求項２に記載の車種識別装置であって、
前記第２のルールが、前記少なくとも一つの部分領域のみのスコアを用いる、車種識別装置。
【請求項４】
請求項２に記載の車種識別装置であって、
前記第１のルールが、前記車両画像内のフロント画像の全部分領域を均等に重み付けして得られるスコアを用いるルールであり、
前記第２のルールが、前記フロント画像に含まれる少なくとも一つの部分領域のスコアの重みを、前記フロント画像に含まれる他の部分領域のスコアの重みに比べて大きくするルールである、車種識別装置。
【請求項５】
請求項２に記載の車種識別装置であって、
前記スコアが、各部分領域の特徴量に基づき算出される、車種識別装置。
【請求項６】
請求項５に記載の車種識別装置であって、
前記特徴量が、ｄｅｎｓｅ  ＳＩＦＴ（Scale-Invariant Feature Transform）により
算出される数値である、車種識別装置。
【請求項７】
請求項１に記載の車種識別装置であって、
前記プロセッサが、前記第２のルールを用いて、前記第１の車両画像リストを、より車両画像数の少ない前記第２の車両画像リストに絞り込む、車種識別装置。
【請求項８】
請求項１に記載の車種識別装置であって、
前記プロセッサが、前記検索条件に当てはまる車両画像の車両と同種の車両を撮像して得られる参照画像を、前記第１の車両画像リストまたは前記第２の車両画像リストとともに前記表示装置に表示する、車種識別装置。
【請求項９】
請求項１に記載の車種識別装置と、
車両を撮像するための前記撮像装置と、
前記車両画像、前記第１の車両画像リストと、前記第２の車両画像リストとを表示する表示装置と、
を備えた車種識別システム。
【請求項１０】
撮像装置により撮像された車両の車両画像に基づいて前記車両の車種を識別する車種識別方法であって、
車種識別方法は、
車両が撮像された画像である車両画像と、前記車両画像中の前記車両が特定の車種であることの確からしさを示すスコアと、を記録し、
車種を特定するための情報である検索条件を取得し、
前記検索条件および前記スコアに基づき、第１のルールを用いて前記検索条件に当てはまる第１の車両画像リストを抽出し、
前記第１の車両画像リストを表示装置に表示し、
前記車両画像の少なくとも一部分を特定する部分特定情報を取得し、
前記部分特定情報に基づいて第２のルールを生成し、
前記検索条件および前記スコアに基づき、前記生成した第２のルールを用いて前記検索条件に当てはまる第２の車両画像リストを抽出する、
車種識別方法。
【発明の詳細な説明】
【技術分野】
【０００１】
本開示は、車両をカメラ等で撮像した撮像画像に基づいて車両を識別する車種識別装置、車種識別システムおよび車種識別方法に関する。
【背景技術】
【０００２】
カメラ等の撮像装置で撮像した車両の撮像画像を処理し、その車両の車名を判別する車両認識装置が知られている（特許文献１参照）。【０００３】
特許文献１には、撮像画像から車両のフロントグリルの特徴量を抽出する特徴量抽出手段と、車両の車種毎に対応したフロントグリルの特徴量を記憶する特徴量記憶手段とを備え、特徴量抽出手段の特徴量と特徴量記憶手段の特徴量とを照合し、その類似度が最大で且つ予め定めた閾値を超えている車名を撮像画像に撮像されている車両の車名であることを判別する車両認識装置が開示されている。
【先行技術文献】
【特許文献】
【０００４】
【特許文献１】特許第５３３８２５５号公報
【発明の概要】
【０００５】
特許文献１には、車両のナンバープレート、左右のヘッドランプ、左右のフォッグランプ、フロントスポイラー、およびエンブレムの相対位置関係、およびこれらの外形形状を含むフロントグリルの特徴量を抽出することが記載されている。しかしながら、目的の車種を検索する場合、フロントグリル全般の特徴で判定するため、フロントグリルのみを捉えれば目的の車種に似ているもののその他の部分は目的の車種に似ていない画像を含む、多くの候補画像が抽出され作業が大変になるという課題がある。
【０００６】
本開示は、特定の部分領域に絞り込んで目的の車両を精度良く抽出できる車種識別装置、車種識別システムおよび車種識別方法を提供することを目的とする。
【０００７】
本開示の車種識別装置は、撮像装置により撮像された車両の車両画像に基づいて前記車両の車種を識別する車種識別装置であって、当該車種識別装置は、プロセッサと、記憶装置と、を有し、前記記憶装置には、前記車両画像と、前記車両画像中の前記車両が特定の車種であることの確からしさを示すスコアと、が記録されており、前記プロセッサは、車種を特定するための情報を含む検索条件を取得し、前記検索条件および前記スコアに基づき、第１のルールを用いて前記検索条件に当てはまる第１の車両画像リストを抽出し、前記第１の車両画像リストを表示装置に表示し、前記車両画像の少なくとも一部分を特定する部分特定情報を取得し、前記部分特定情報に基づいて第２のルールを生成し、前記検索条件および前記スコアに基づき、前記生成した第２のルールを用いて前記検索条件に当てはまる第２の車両画像リストを抽出する。
【０００８】
本開示の車種識別システムは、前記車種識別装置と、車両を撮像するための前記撮像装置と、前記車両画像、前記第１の車両画像リストと、前記第２の車両画像リストとを表示する表示装置と、を備える。
【０００９】
本開示の車種識別方法は、撮像装置により撮像された車両の車両画像に基づいて前記車両の車種を識別する車種識別方法であって、車両が撮像された画像である車両画像と、前記車両画像中の前記車両が特定の車種であることの確からしさを示すスコアと、を記録するステップと、車種を特定するための情報である検索条件を取得するステップと、前記検索条件および前記スコアに基づき、第１のルールを用いて前記検索条件に当てはまる第１の車両画像リストを抽出するステップと、前記第１の車両画像リストを表示装置に表示するステップと、前記車両画像の少なくとも一部分を特定する部分特定情報を取得するステップと、前記部分特定情報に基づいて第２のルールを生成するステップと、前記検索条件および前記スコアに基づき、前記生成した第２のルールを用いて前記検索条件に当てはまる第２の車両画像リストを抽出するステップと、を有する。
【００１０】
本開示によれば、部分特定情報による第２のルールに基づいて検索を絞り込むことで候補の車両画像を少なくすることができ、検索効率が向上し、目的の車両を早期に発見しやすくなる車種識別装置、車種識別システムおよび車種識別方法を提供できる。
【図面の簡単な説明】
【００１１】
【図１】図１は、本開示の一実施形態に係る車種識別システムのブロック図である。
【図２】図２は、本開示の車種識別システムに係る車両画像ＤＢの一例を示すリスト表を示す図である。
【図３】図３は、本開示の車種識別システムに係るスコアＤＢの一例を示すリスト表を示す図である。
【図４】図４は、本開示の車種識別システムに係る車両画像ＤＢの作成手順の一例を示すフローチャートである。
【図５Ａ】図５Ａは、本開示の車種識別システムで割り当てられる部分領域の一例を示す概念図である。
【図５Ｂ】図５Ｂは、本開示の車種識別システムで割り当てられる部分領域の一例を示す概念図である。
【図６】図６は、本開示の車種識別システムに係る検索手順の一例を示すフローチャートである。
【図７】図７は、本開示の車種識別システムの第１のルールにより表示されるリストと車両画像の一例を示す概念図である。
【図８】図８は、本開示の車種識別システムで表示される参照画像の一例を示す概念図である。
【図９】図９は、本開示の車種識別システムの第２のルールにより表示されるリストと車両画像の一例を示す概念図である。
【図１０Ａ】図１０Ａは、絞込み手順の概要を示す図であり、図７と同様の第１の車両画像リストＬ１に対応する車両画像の図である。
【図１０Ｂ】図１０Ｂは、絞込み手順の概要を示す図であり、図５Ｂに対応しユーザにより特定部分領域を指定して、更に絞り込み検索を行うことを示す図である。
【図１０Ｃ】図１０Ｃは、絞込み手順の概要を示す図であり、図９に対応する絞り込み検索結果の表示の図である。
【発明を実施するための形態】
【００１２】
以下、適宜図面を参照しながら、本開示に係る車種識別装置、車種識別システムおよび車種識別方法を具体的に開示した実施形態（以下、「本実施形態」という）を詳細に説明する。但し、必要以上に詳細な説明は省略する場合がある。例えば、既によく知られた事項の詳細説明や実質的に同一の構成に対する重複説明を省略する場合がある。これは、以下の説明が不必要に冗長になるのを避け、当業者の理解を容易にするためである。なお、添付図面および以下の説明は、当業者が本開示を十分に理解するために提供されるのであって、これらにより請求の範囲に記載の主題を限定することは意図されていない。
【００１３】
以下、本開示を実施するための好適な本実施形態について、図面を参照して詳細に説明する。
【００１４】
＜構成＞
図１から図５を用いて車種識別システムの一例の構成を説明する。
【００１５】
図１は、本開示の車種識別システムを実現するためのハードウェア構成を示すブロック図である。
【００１６】
本開示に係る車種識別装置、車種識別システムおよび車種識別方法は、撮像装置により撮像された車両の画像に車両が特定の車種であることの確からしさを示すスコアが記録されたデータベースを参照し、かつ、ユーザによる車両の部分領域の指定を受け付けることで、目的の車種を識別する装置、システムおよび方法である。
【００１７】
本開示で述べる車両とは、道路交通法で定める、普通自動車を主に指す。本開示は、フロント部に特徴のある車両に対しても広く適用可能である。車種とは、車両の種類を特定する情報である。車種を示す情報の例としては型式が挙げられる。また、車種を示す情報として年式、一般的に知られている車名（通称名）、車両の製造メーカ名、グレード、等を利用してもよい。型式を用いずに車両の種類を特定する表現とは、例えば「ＡＡ社のＹＹ年式のＺＺＺ（通称名）」という表現である。車種識別とは車両が撮像された画像である車両画像から車種を特定することである。
【００１８】
図１に示すように、本開示に係る車種識別システム１を実現するためのハードウェア構成は、撮像装置２と、表示装置３と、車種識別装置４と、それらを接続するバス５とを含む。車種識別装置４は、入力装置６と、記憶装置７と、プロセッサ８とを有する。
【００１９】
撮像装置２は、撮像画像を撮像するＣＣＤカメラ等である。撮像装置２は、主に交通状態の把握やスピード違反車を取り締まるために道路上に配置される。撮像装置２は、走行する車両を略正面（略前方）から撮像する。尚、撮像装置２は、駐車場や施設の入出ゲートの近傍に設置されていても良い。撮像装置２で車両が撮像された画像である車両画像は、記憶装置７の車両画像ＤＢに登録される。なお、撮像装置２は、車両を略正面から撮像可能な限りにおいて、その形態、機能、配置、数量等については、特に限定されるものではなく種々の変更が可能である。
【００２０】
表示装置３は、モニタ（ディスプレイ）等である。表示装置３は、検索結果の基づくリストや車両画像を表示する表示画面を有する。表示装置３は、表示画面を指等で操作可能なタッチパネルでも良い。
【００２１】
車種識別装置４の入力装置６は、例えば、キーボードやマウス等の入力デバイスで車種識別装置４を操作する操作部である。入力装置６は、ユーザが車種識別装置４に各種の命令を入力したり、データベース（ＤＢ）の情報を変更または更新したりするのに使用される。
【００２２】
車種識別装置４の記憶装置７は、例えばＲＡＭ、ＲＯＭ、ハードディスク等である。記憶装置７は、車種識別システム１の各機能を実現するための各種プログラムおよび各種データ、ならびに、車種識別処理に用いられ、後述する車両基本ＤＢ、車両画像ＤＢ、スコアＤＢ等を格納している。
【００２３】
図２、図３に基づいて、記憶装置７に格納されている車両画像ＤＢおよびスコアＤＢのリストを説明する。
【００２４】
図２は、記憶装置７に格納されている車両画像ＤＢの一例を示す。車両画像ＤＢには、撮像装置２が撮像しデータベースのキーとなる車両画像の番号である「画像名」、「画像名」に対応して撮像装置２が撮像した年月日時刻の「撮影時刻」、各車両画像を撮影した各撮像装置２に付与されている撮像装置２の番号である「撮像装置ＩＤ」が登録される。また、車両情報として撮像された車両の「ナンバープレート」、フロント画像を抽出し部分領域Ｒを特定するための「ナンバープレート座標（Ｘ，Ｙ）」、等も登録されている。
【００２５】
図３は、記憶装置７に格納されているスコアＤＢの一例を示す。スコアＤＢでは、車両画像ＤＢに対応する「画像名」、各部分領域Ｒの「部分領域Ｎｏ」が自動生成される。スコアＤＢでは、各部分領域Ｒにおいて、各車種に対するスコアが定義されている。スコアとは、当該部分領域が特定の車種の部分領域であることの確からしさを示す値である。スコアは、各部分領域Ｒにおいて自動的に算出された特徴量を、予め車種毎の部分領域Ｒ毎に定義され車両基本ＤＢに登録されているスコア算出モデルにあてはめることで、算出される。自動的に算出される特徴量の一例としては、例えば、ＨＯＧ（Histograms of Oriented Gradients）特徴量、またはｄｅｎｓｅ  ＳＩＦＴ（Scale-Invariant Feature Transform）特徴量などが挙げられる。
【００２６】
本実施形態では、「車種Ａスコア」、「車種Ｂスコア」、「車種Ｃスコア」等が各車両画像の部分領域Ｒ毎に算出された結果を一例として示している（車種Ａスコアとは当該部分領域がＡ車種の部分領域であることの確からしさを示す値である）。
【００２７】
図４は、スコアＤＢを作成する一例を示すフローチャートである。図４に基づいてスコアＤＢの作成手順を説明する。
【００２８】
プロセッサ８は、記憶装置７に格納されている車両画像ＤＢに記載の画像名に基づいて記憶装置７から車両画像を１枚抽出する（ＳＴ１０１）。次に、プロセッサ８は、車両画像（例えばｉｍｇ００００１）から、例えば、車両画像ＤＢに登録されているナンバープレート位置（例えばＸ１，Ｙ１）に基づいてフロント画像を抽出し（ＳＴ１０２）、抽出したフロント画像を分割することで車両画像に部分領域Ｒを設定する。本実施形態では、図５Ａに示されるように、フロント画像を６つの部分領域Ｒに分割している（図５Ａ、Ｒ０〜Ｒ５参照）。全部分領域Ｒは、車両画像内のフロント画像内で指定され、ナバープレートを中心として車両の左右外側および左右のヘッドランプを含む領域である。そして、プロセッサ８は、フロント画像における部分領域Ｒ毎の特徴量を、例えばｄｅｎｓｅ  ＳＩＦＴを用いて算出する（ＳＴ１０３）。
【００２９】
次に、プロセッサ８は、当該算出された部分領域Ｒ毎の特徴量を、予め車種毎の部分領域Ｒ毎に定義され車両基本ＤＢに登録されているスコア算出モデルにあてはめることで、スコアを算出する（ＳＴ１０４）。
【００３０】
そして、プロセッサ８は、算出されたスコア（例えば０．８６）を、画像ｉｍｇ００００１の部分領域Ｒ０の車種Ａのスコアとして登録し、順次、画像毎、部分領域毎に算出したスコア値を車種スコアとして記憶装置７に格納されているスコアＤＢに登録する（ＳＴ１０５）。
【００３１】
車種識別装置４のプロセッサ８は、ＣＰＵ等であり、記憶装置７から各種プログラムを読み出し、検索条件を取得して車両画像リストを抽出し、車両の部分領域Ｒにおける特徴量の演算やデータ処理を行い、車種識別システム１全体を制御する。
【００３２】
＜動作＞
図６から図１０Ｃに基づいて、本開示の車種識別装置４の具体的な動作について説明する。以下の説明においてはユーザが特定の車両画像を、それまでに撮像した車両画像から検索する流れと併せて車種識別装置４の具体的な動作を説明する。
【００３３】
図６は、車種を検索する一例を示すフローチャートである。
【００３４】
ユーザは、入力装置６に検索条件を入力する。検索条件とは、例えば、車種、撮像装置ＩＤ、撮影時刻の範囲等である。検索条件は、目的の車両画像を特定するための情報ということができる。例えばユーザが「ＡＡＡという車種を撮像した画像であって、○月○日の○時ごろにＡ交差点付近の撮像装置によって撮影された画像」という車両画像を検索したい場合は、検索条件の入力を用いてそのような条件を表現すれば良い。本実施の形態において検索条件は車種を少なくとも含む。検索条件の一部はワイルドカードであってもよい。プロセッサ８は当該検索条件を取得する（ＳＴ２０１）。
【００３５】
プロセッサ８は、検索条件に基づき検索対象画像リストを抽出（ＳＴ２０２）する。検索対象画像リストとは記憶装置７に記録された車両画像を、検索条件に基づいて絞り込んだ結果得られるリストである。ここでの絞り込みは検索条件のうちでも、撮像装置ＩＤ、撮影時刻の範囲などの形式的な条件に基づいて行われる。
【００３６】
プロセッサ８は、部分領域Ｒと部分領域毎（Ｒ０、Ｒ１、・・）の重みからなるルールであるスコア算出ルールを設定する（ＳＴ２０３）。ＳＴ２０３で設定される算出ルールは、検索条件における車種に基づく１次的な絞込みに用いられるルール（第１のルール）である。第１のルールは普遍的なルールであることが望ましい。例えば、第１のルールは、全部分領域Ｒに対して均等に重みを持たせるルールとすることができる。全部分領域Ｒに対して均等に重みを持たせるルールを数式的に表現すればスコア＝（Ｒ０＋Ｒ２＋Ｒ３＋Ｒ４＋Ｒ５）／６）となる。
【００３７】
次に、プロセッサ８は、スコアＤＢから検索対象画像リスト内の車両画像のスコアを読み出す（ＳＴ２０４）。
【００３８】
プロセッサ８は、ＳＴ２０４で読み出した車両画像のスコア、算出ルールに応じて判別スコアを算出する（ＳＴ２０５）。判別スコアとは、車両画像のスコアを算出ルールにあてはめて算出されるスコアである。ＳＴ２０５においては、検索条件となりうる全ての車種について車両画像毎に判別スコアが算出される。本実施の形態では第１のルールは全部分領域Ｒに対して均等に重みを持たせるルールなので、ｉｍｇ００００１の車種「Ａ」についての判別スコアは（０．８６＋０．０１＋０．７７＋０．４５＋０．２３＋０．６５）を６で割った値となる。
【００３９】
そして、プロセッサ８は、判別スコアに基づいて車両画像がどの車種の画像かを判別する車種判別を行う（ＳＴ２０６）。プロセッサ８に判別スコアに基づいて車両画像がどの車種の画像かを判別させるためのルールは様々なものが考えられる。例えば、プロセッサ８に、判別スコアの最も高い車種が「Ａ」である車両画像はＡ車種の画像であると判別させてもよい。また、プロセッサ８に、判別スコアが所定の値を超える車種が「Ａ」である車両画像はＡ車種の画像であると判別させてもよい。なお、プロセッサ８に、判別スコアが所定値未満であれば「どの車種の画像でもない」と判別させてもよい。
【００４０】
次に、プロセッサ８は、車種判別の結果に基づき表示対象画像リストを更新する（ＳＴ２０７）。プロセッサ８は、車両画像に対して判別された車種が、検索対象車種ならば当該車両画像を表示対象画像リストに追加する。表示対象画像リストは車両画像が撮像された日時、車両画像を撮像した撮像装置ＩＤなど車両画像ＤＢに存在する情報を含む情報からなるリストである。
【００４１】
そして、プロセッサ８は、表示対象画像リストと、表示対象画像リストに対応する複数の車両画像を表示装置３に表示する（ＳＴ２０８）（図７参照）。本実施の形態では表示対象画像リストの一例として第１の車両画像リストＬ１を表示装置３に表示する。本実施の形態では、表示対象画像リストに対応する複数の車両画像の一例として第１の車両画像リストＬ１に対応する複数の車両画像を表示装置３に表示する。
【００４２】
更に、プロセッサ８は検索対象車種の参照用画像（例えばカタログ画像：図８参照）を表示する（ＳＴ２０９）。ユーザが参照画像と第１の車両画像リストＬ１に対応する複数の車両画像とを比較することにより、ユーザはＳＴ２０８で表示された車両画像のうちでも明らかに参照画像と相違を感じる車両画像を「目的の車種とは違う」と判断できる。また、ユーザは参照画像に近いと感じる車両画像を「目的の車種らしい」と判断することができる。参照画像は、目的の車種を選定するためのガイドラインとして機能する。ユーザ（操作者）の技量によっては細かな車種の相違に気づかない場合もあり、また、初心者でも目的の車種を探すことが容易に可能となるため、参照画像を表示することでよりユーザが効率的に検索を行うことができる。なお、ユーザの技量が高い場合は参照画像を参照せずとも、目的の車種を判別することができるので、参照画像を表示装置３に表示しないことも可能である。
【００４３】
以上のように、表示された複数の車両画像を視認したユーザは、表示された複数の車両画像は、目的の車種らしい車両を含む車両画像と、目的の車種とは違う車両を含む車両画像との双方を含むことを認識する。次にユーザは、表示される複数の車両画像における目的の車種らしい車両を含む車両画像が含まれる割合を高めるために、次の作業を行う。
【００４４】
まず、ユーザは目的の車種らしい車両を含む車両画像と、目的の車種とは違う車両を含む車両画像との違いが車両画像中のどの箇所に表れているのかを認識する。例えば「ヘッドランプの形状が目的の車種とは異なる車両を含む車両画像が、目的の車種とは違う車両を含む車両画像に多く含まれる」とユーザが感じたとする。これは換言すれば、目的の車種らしい車両を含む車両画像と、目的の車種とは違う車両を含む車両画像との違いはヘッドランプの箇所に表れているとユーザが認識したことになる。
【００４５】
次にユーザは、目的の車種らしい車両を含む車両画像において予め分割された複数の部分領域Ｒ（図５Ａ参照）の中から、入力装置６を用いて、ヘッドランプ近辺を特定部分領域Ｒ０として指定する（図５Ｂ斜線部分参照）。当該指定は、車両画像の一部分をクリックするなどして行われる。また、当該指定は、部分領域を特定するものであればよい。例えば車両画像以外の画像の一部分を指定してもよい。また、キーボード操作による文字入力、音声操作などで部分領域を特定することで画像の一部分を指定してもよい。また、車両画像が分割されていることをユーザに明示する必要は無いが、図５Ｂに示すようにグリッドを用いて明示した場合はユーザにとっての使用性が向上する。
【００４６】
プロセッサ８は、ユーザの指定を、車両画像の少なくとも一部分領域Ｒを特定する絞り込み情報として取得する（ＳＴ２１０がＹＥＳ）。
【００４７】
また、プロセッサ８は、検索対象画像リスト（第１の車両画像リストＬ１）を表示対象画像リストに更新（ＳＴ２１１）する。これにより、後の処理で検索対象となる母集団が、直近のＳＴ２０２で抽出された母集団である検索対象画像リストよりも絞り込まれる。なお、本開示において、検索対象画像リストを表示対象画像リストに更新することは必須ではない。本実施の形態のように検索対象画像リストを表示対象画像リストに更新することによれば、表示結果を２段階でフィルタリングできるため表示件数を削減することができるという利点がある。しかし、後述するように定める第２のルールに基づいて、第１のルールと同様の母集団（またはその他の母集団）に対して車種判別を行うようにしても、第１のルールよりも精度の良い判別結果を得ることができるという利点がある。
【００４８】
そして、プロセッサ８は、絞り込み情報に基づいてスコア算出ルールを第２のルールとして更新する（ＳＴ２１２）。絞り込み情報に基づいて第２のルールを定める方法は様々なものが挙げられる。例えば（１）絞り込み情報で指定された部位が存在する特定部分領域Ｒのみを、第２のルール（算出ルール）で用いる部分領域Ｒに設定することができる。これは第１のルールを、特定部分領域Ｒの重みを１として、他の部分領域を０とするように変更したものを第２のルールとすることを意味する。また、（２）特定部分領域Ｒの重みを、他の部分領域よりも増す（例えば、特定部分領域Ｒ０の重みを０．５、その他の部分領域Ｒ１、Ｒ２・・の重みを０．１とするまたは特定部分領域Ｒ０の重みを１、その他の部分領域Ｒ１、Ｒ２・・の重みを０とする）ことも考えられる。そのほかには、特定部分領域Ｒのスコアの重みを、第１のルールに比べて大きくすることも考えられる。
【００４９】
ＳＴ２０３で設定された第１のルールは、部分領域の場所によらず普遍的に得られるスコアを算出するルールである。それに対して、ＳＴ２１２で設定される第２のルールは、特定部分領域Ｒのスコアに偏りをもたせることでスコアを算出するルールである。
【００５０】
プロセッサ８は、第２のルールを生成してＳＴ２０５の判別スコアを算出して、第２のルールに基づく判別スコアで車種判別を行い（ＳＴ２０６）、第２の車両画像リストＬ２と第２の車両画像リストにＬ２に対応する車両画像を表示装置３に表示する（ＳＴ２０８）（図９参照）。表示結果を参照して、ユーザは目的の車種が撮像されている車両画像の特定を行い、目的の車種を早期に発見できる。
【００５１】
ＳＴ２１０において、絞り込み情報を取得できなかった場合（ＳＴ２１０がＮＯ）、ＳＴ２１３に進み、ユーザが別の検索（例えば、同車種の別の撮像装置２や撮像時刻、他の車種等）を続行する場合（ＳＴ２１３がＹＥＳ）ＳＴ２０１の検索条件受付に戻り、検索終了の場合（ＳＴ２１３がＮＯ）はプログラムが終了する。
【００５２】
上述の絞り込み手順の概要を、図１０Ａ,Ｂ,Ｃに示す。図１０Ａは、図７と同様であり、ユーザの第１の車両画像リストＬ１に対応する車両画像として表示される。図１０Ｂは、図５Ｂに対応しユーザにより特定部分領域（例えばＲ０）を指定して、更に絞り込み検索を行うことを示している。図１０Ｃは、図９に対応する絞り込み検索結果の表示であり、車両画像が絞り込まれる。尚、絞り込み検索結果において検索された車両画像が多いと判断した場合は、更に別の特定部分領域（例えばＲ２）を指定して、再度絞り込み検索を行うことも可能である。
【００５３】
以上により、本実施形態の車種識別装置４は、撮像装置２により撮像された車両の車両画像に基づいて前記車両の車種を識別する車種識別装置４であって、当該車種識別装置４は、プロセッサ８と、記憶装置７と、を有し、記憶装置７には、車両が撮像された画像である車両画像と、車両が特定の車種であることの確からしさを示すスコアと、が記録されており、プロセッサ８は、車種を特定するための情報である検索条件を取得し、検索条件およびスコアに基づき、第１のルールを用いて検索条件に当てはまる第１の車両画像リストＬ１を抽出し、第１の車両画像リストＬ１を表示装置３に表示し、車両画像の少なくとも一部分を特定する部分特定情報を取得し、部分特定情報に基づいて第２のルールを生成し、検索条件およびスコアに基づき、生成した第２のルールを用いて検索条件に当てはまる第２の車両画像リストＬ２を抽出する。
【００５４】
これにより、部分特定情報による第２のルールに基づいて検索を絞り込むことで検索効率が向上し、目的の車両を早期に発見できる。
【００５５】
以上により、本実施形態の車種識別装置４は、スコアが、車両画像内の複数の部分領域Ｒの各々に定義されており、第２のルールが、少なくとも一つの部分領域（例えばＲ０）のスコアの重みを、第１のルールに比べて大きくするルールである。これにより、車種の特徴ある部分領域Ｒで絞り込みができ、より精度のある絞り込みが可能となる。
【００５６】
以上により、本実施形態の車種識別装置４は、第２のルールが、少なくとも一つの部分領域のみのスコアを用いる。これにより、車種の特徴ある部分領域Ｒで比較が容易となり、効率の良い検索が可能となる。
【００５７】
以上により、本実施形態の車種識別装置４は、第１のルールが、車両画像内のフロント画像の全部分領域Ｒを均等に重み付けして得られるスコアを用いるルールであり、第２のルールが、フロント画像に含まれる少なくとも一つの部分領域Ｒのスコアの重みを、フロント画像に含まれる他の部分領域Ｒのスコアの重みに比べて大きくするルールである。これにより、車種の特徴のある部分領域Ｒでの絞り込み検索ができ、目的の車種の早期発見に繋げることが可能となる。
【００５８】
以上により、本実施形態の車種識別装置４は、スコアが、各部分領域Ｒの特徴量に基づき算出される。これにより、各部分領域Ｒでのスコアの相違が得られ、部分領域Ｒの絞り込みが容易となる。
【００５９】
以上により、本実施形態の車種識別装置４は、特徴量が、ｄｅｎｓｅ  ＳＩＦＴ（Scale-Invariant Feature Transform）により算出される数値である。これにより、特徴量の算出が容易となる。
【００６０】
以上により、本実施形態の車種識別装置４は、プロセッサ８が、第２のルールを用いて、第１の車両画像リストＬ１を、より車両画像数の少ない第２の車両画像リストＬ２に絞り込む。これにより、検索される車両画像がより絞り込まれ、目的の車種を早期に発見できる。
【００６１】
以上により、本実施形態の車種識別装置４は、プロセッサ８が、検索条件に当てはまる車両画像の車両と同種の車両を撮像して得られる参照画像を、第１の車両画像リストＬ１または第２の車両画像リストＬ２とともに表示装置３に表示する。これにより、車両の部分領域Ｒにおける特徴が不慣れな人でも見つけやすくなり、絞り込みが容易となる。
【００６２】
以上により、本実施形態の車種識別システム１は、車種識別装置４と、車両を撮像するための撮像装置２と、車両画像、第１の車両画像リストＬ１と、第２の車両画像リストＬ２とを表示する表示装置３と、を備える。これにより、特定の部分領域に絞り込んで目的の車両を精度良く抽出できるシステムを構築できる。
【００６３】
以上により、本実施形態の車種識別方法は、撮像装置２により撮像された車両の車両画像に基づいて車両の車種を識別する車種識別方法であって、車両が撮像された画像である車両画像と、車両が特定の車種であることの確からしさを示すスコアと、を記録するステップと、車種を特定するための情報である検索条件を取得するステップと、検索条件およびスコアに基づき、第１のルールを用いて検索条件に当てはまる第１の車両画像リストＬ１を抽出するステップと、第１の車両画像リストＬ１を表示装置３に表示するステップと、車両画像の少なくとも一部分を特定する部分特定情報を取得するステップと、部分特定情報に基づいて第２のルールを生成するステップと、検索条件およびスコアに基づき、生成した第２のルールを用いて検索条件に当てはまる第２の車両画像リストＬ２を抽出するステップと、を有する。
【００６４】
これにより、部分特定情報による第２のルールに基づいて検索を絞り込むことで候補の車両画像を少なくすることができ、検索効率が向上し、目的の車両を早期に発見できる。
【００６５】
以上、図面を参照して本開示に係る車種識別装置、車種識別システムおよび車種識別方法の実施形態について説明したが、本開示はかかる例に限定されない。当業者であれば、請求の範囲に記載された範疇内において、各種の変更例、修正例、置換例、付加例、削除例、均等例に想到し得ることは明らかであり、それらについても当然に本開示の技術的範囲に属するものと了解される。
【産業上の利用可能性】
【００６６】
本開示の車種識別装置、車種識別システムおよび車種識別方法は、多数の車両画像の中から目的の車両を早期に発見できる用途に有用である。
【符号の説明】
【００６７】
１  車種識別システム
２  撮像装置
３  表示装置
４  車種識別装置
５  バス
６  入力装置
７  記憶装置
８  プロセッサ
Ｌ１  第１の車両画像リスト
Ｌ２  第２の車両画像リスト
Ｒ  部分領域
【図１】
2017169226.tif 000003
【図２】
2017169226.tif 000004
【図３】
2017169226.tif 000005
【図４】
2017169226.tif 000006
【図５Ａ】
2017169226.tif 000007
【図５Ｂ】
2017169226.tif 000008
【図６】
2017169226.tif 000009
【図７】
2017169226.tif 000010
【図８】
2017169226.tif 000011
【図９】
2017169226.tif 000012
【図１０Ａ】
2017169226.tif 000013
【図１０Ｂ】
2017169226.tif 000014
【図１０Ｃ】
2017169226.tif 000015
【国際調査報告】
2017169226.tif 000016
2017169226.tif 000017
2017169226.tif 000018
2017169226.tif 000019