(57)【要約】【課題】この発明は、容易且つ確実にリアルタイムで人物の顔画像を画像処理できる画像処理システムを提供することを課題とする。【解決手段】画像処理システム１は、有名人や犯罪者などの特定人物を撮影するカメラ２、特定人物の顔画像を入力する読取装置４、読取装置４を介して入力した特定人物の顔画像を記憶する顔画像データベース６、およびサーバ８を有する。サーバ８は、顔照合技術を用いて、読取装置４で読み取った特定人物の顔画像とカメラ２で撮影しているリアルタイム映像の中の人物の顔画像とを照合し、特定人物以外の他の人物の顔画像にモザイク処理を施す。【選択図】　　　図１
2004126712.tif 000002
【特許請求の範囲】
【請求項１】
特定人物を含む被処理画像を入力する被処理画像入力部と、
特定人物の少なくとも顔を含む画像を入力する顔画像入力部と、
この顔画像入力部を介して入力された特定人物の少なくとも顔を含む画像と上記被処理画像入力部を介して入力された被処理画像の中の全ての人物の少なくとも顔を含む画像とを照合し、特定人物以外の人物の顔画像を画像処理する顔照合・画像処理部と、
を備えていることを特徴とする画像処理システム。
【請求項２】
特定人物を含む被処理画像を入力する被処理画像入力部と、
特定人物の少なくとも顔を含む画像を入力する顔画像入力部と、
この顔画像入力部を介して入力された特定人物の少なくとも顔を含む画像と上記被処理画像入力部を介して入力された被処理画像の中の全ての人物の少なくとも顔を含む画像とを照合し、特定人物以外の画像を画像処理する顔照合・画像処理部と、
を備えていることを特徴とする画像処理システム。
【請求項３】
特定人物を含む被処理画像を入力する被処理画像入力部と、
特定人物の少なくとも顔を含む画像を入力する顔画像入力部と、
この顔画像入力部を介して入力された特定人物の少なくとも顔を含む画像と上記被処理画像入力部を介して入力された被処理画像の中の全ての人物の少なくとも顔を含む画像とを照合し、特定人物の顔画像を画像処理する顔照合・画像処理部と、
を備えていることを特徴とする画像処理システム。
【請求項４】
特定人物を含むリアルタイム映像を撮影するカメラと、
特定人物の少なくとも顔を含む画像を入力する顔画像入力部と、
この顔画像入力部を介して入力された特定人物の少なくとも顔を含む画像と上記カメラを介して撮影しているリアルタイム映像の中の全ての人物の少なくとも顔を含む画像とを照合し、特定人物以外の人物の顔画像を画像処理する顔照合・画像処理部と、
を備えていることを特徴とする画像処理システム。
【請求項５】
特定人物を含むリアルタイム映像を撮影するカメラと、
特定人物の少なくとも顔を含む画像を入力する顔画像入力部と、
この顔画像入力部を介して入力された特定人物の少なくとも顔を含む画像と上記カメラを介して撮影しているリアルタイム映像の中の全ての人物の少なくとも顔を含む画像とを照合し、特定人物以外の画像を画像処理する顔照合・画像処理部と、
を備えていることを特徴とする画像処理システム。
【請求項６】
特定人物を含むリアルタイム映像を撮影するカメラと、
特定人物の少なくとも顔を含む画像を入力する顔画像入力部と、
この顔画像入力部を介して入力された特定人物の少なくとも顔を含む画像と上記カメラを介して撮影しているリアルタイム映像の中の全ての人物の少なくとも顔を含む画像とを照合し、特定人物の顔画像を画像処理する顔照合・画像処理部と、
を備えていることを特徴とする画像処理システム。
【請求項７】
上記顔照合・画像処理部における画像処理には、モザイク処理、塗り潰し処理、およびぼかし処理の少なくとも１つが含まれることを特徴とする請求項１乃至６のいずれかに記載の画像処理システム。
【請求項８】
上記顔画像入力部を介して入力された特定人物の少なくとも顔を含む画像を記憶する記憶部をさらに有し、
上記顔照合・画像処理部は、この記憶部に記憶されている特定人物の顔画像を照合することを特徴とする請求項１乃至６のいずれかに記載の画像処理システム。
【発明の詳細な説明】
【０００１】
【発明の属する技術分野】
この発明は、特定人物が映っている画像を処理する画像処理システムに関する。
【０００２】
【従来の技術】
一般に、犯罪者や有名人などの特定人物を撮影した映像（写真、ビデオ映像等）を公開する場合、特定人物以外に映っている他の人物の顔画像にモザイク処理を施したり目の部分を黒く塗りつぶしたりしていた。
【０００３】
また、例えば、凶悪事件の容疑者を撮影した映像を公開する場合、容疑者の顔画像に上述したような画像処理を施していた。
【０００４】
【発明が解決しようとする課題】
しかし、このような画像処理は、手作業によってなされており、特に、動画を処理する場合などには膨大な処理時間が必要となり、作業負担が大きかった。
【０００５】
また、手作業によって画像処理するため、リアルタイム映像を画像処理することは困難とされていた。リアルタイム映像を画像処理する場合、モザイク処理を施す場所がずれたりして、正確に画像処理することができなかった。
【０００６】
この発明は、以上の点に鑑みなされたもので、その目的は、容易且つ確実にリアルタイムで人物の顔画像を画像処理できる画像処理システムを提供することにある。
【０００７】
【課題を解決するための手段】
上記目的を達成するため、本発明の画像処理システムは、特定人物を含む被処理画像を入力する被処理画像入力部と、特定人物の少なくとも顔を含む画像を入力する顔画像入力部と、この顔画像入力部を介して入力された特定人物の少なくとも顔を含む画像と上記被処理画像入力部を介して入力された被処理画像の中の全ての人物の少なくとも顔を含む画像とを照合し、特定人物以外の人物の顔画像を画像処理する顔照合・画像処理部と、を備えている。
【０００８】
また、本発明の画像処理システムは、特定人物を含む被処理画像を入力する被処理画像入力部と、特定人物の少なくとも顔を含む画像を入力する顔画像入力部と、この顔画像入力部を介して入力された特定人物の少なくとも顔を含む画像と上記被処理画像入力部を介して入力された被処理画像の中の全ての人物の少なくとも顔を含む画像とを照合し、特定人物以外の画像を画像処理する顔照合・画像処理部と、を備えている。
【０００９】
また、本発明の画像処理システムは、特定人物を含む被処理画像を入力する被処理画像入力部と、特定人物の少なくとも顔を含む画像を入力する顔画像入力部と、この顔画像入力部を介して入力された特定人物の少なくとも顔を含む画像と上記被処理画像入力部を介して入力された被処理画像の中の全ての人物の少なくとも顔を含む画像とを照合し、特定人物の顔画像を画像処理する顔照合・画像処理部と、を備えている。
【００１０】
また、本発明の画像処理システムは、特定人物を含むリアルタイム映像を撮影するカメラと、特定人物の少なくとも顔を含む画像を入力する顔画像入力部と、この顔画像入力部を介して入力された特定人物の少なくとも顔を含む画像と上記カメラを介して撮影しているリアルタイム映像の中の全ての人物の少なくとも顔を含む画像とを照合し、特定人物以外の人物の顔画像を画像処理する顔照合・画像処理部と、を備えている。
【００１１】
また、本発明の画像処理システムは、特定人物を含むリアルタイム映像を撮影するカメラと、特定人物の少なくとも顔を含む画像を入力する顔画像入力部と、この顔画像入力部を介して入力された特定人物の少なくとも顔を含む画像と上記カメラを介して撮影しているリアルタイム映像の中の全ての人物の少なくとも顔を含む画像とを照合し、特定人物以外の画像を画像処理する顔照合・画像処理部と、を備えている。
【００１２】
更に、本発明の画像処理システムは、特定人物を含むリアルタイム映像を撮影するカメラと、特定人物の少なくとも顔を含む画像を入力する顔画像入力部と、この顔画像入力部を介して入力された特定人物の少なくとも顔を含む画像と上記カメラを介して撮影しているリアルタイム映像の中の全ての人物の少なくとも顔を含む画像とを照合し、特定人物の顔画像を画像処理する顔照合・画像処理部と、を備えている。
【００１３】
上記発明によると、特定人物を含む画像を処理して、特定人物以外の人物の顔画像、特定人物以外の画像全体、或いは特定人物の顔画像を選択的に容易且つ確実に加工できる。これにより、手作業による画像処理が不要となり、画像処理にかかる処理時間を大幅に短縮でき、且つリアルタイム映像の画像処理が可能となる。
【００１４】
【発明の実施の形態】
以下、図面を参照しながらこの発明の実施の形態について詳細に説明する。
【００１５】
図１には、この発明の実施の形態に係る画像処理システム１（以下、単にシステム１と称する）の概略構成をブロック図にして示してある。
【００１６】
システム１は、有名人や犯罪者などの特定の人物（以下、特定人物と称する）を撮影するカメラ２、特定人物の顔画像をシステム１に予め入力するための読取装置４、読取装置４を介して入力した特定人物の顔画像を記憶する顔画像データベース６、サーバ８、およびオペレータによる各種操作入力を受け付ける操作端末１０を有する。
【００１７】
カメラ２は、本発明の被処理画像入力部として機能し、特定人物を含むリアルタイム映像を撮影する。本実施の形態のシステム１では、カメラ２で特定人物を含む静止画像を撮影して被処理画像としてシステム１に入力しても良い。また、読取装置４を介して、特定人物が映っている写真を読み取り、被処理画像としてシステム１に入力しても良い。尚、カメラ２で撮影された映像（或いは読取装置４で読み取った写真）、すなわち被処理画像は、サーバ８で記憶される。
【００１８】
読取装置４は、本発明の顔画像入力部として機能し、特定人物が映っている写真の投入を受け付けてその画像を読み取る。或いは、特定人物の少なくとも顔を含む画像データが直接入力される。読み取った少なくとも顔を含む画像は、操作端末１０を介してサーバ８に送信され、顔画像データベース６に記憶される。なお、以後、少なくとも顔を含む画像のことを顔画像という。
【００１９】
サーバ８は、本発明の顔照合・画像処理部として機能し、読取装置４で読み取って顔画像データベース６に記憶した特定人物の顔画像とカメラ２で撮影しているリアルタイム映像の中の全ての人物の顔画像とを照合し、特定人物以外の他の人物の顔画像、特定人物以外の全ての画像領域、或いは特定人物の顔画像に所定の画像処理（例えばモザイク処理）を施す。また、サーバ８は、画像処理した映像を記憶する。
【００２０】
ここで、上記システム１の動作について、図２のフローチャートを参照してより詳細に説明する。ここでは、カメラ２で特定人物を撮影しているリアルタイム映像にリアルタイムで所定の画像処理を施す動作について説明する。
【００２１】
まず、システム１の顔画像データベース６に当該特定人物の顔画像が予め記憶されているか否かが判断される（ステップ１）。顔画像データベース６に当該特定人物の顔画像データが記憶されていない場合（ステップ１；ＮＯ）、読取装置４を介して当該特定人物の写真を投入し、特定人物の顔画像を取得する（ステップ２）。ステップ２で取得した特定人物の顔画像は、顔画像データベース６に記憶される（ステップ３）。
【００２２】
この後、サーバ８にて、カメラ２で撮影しているリアルタイム映像の中の全ての人物の顔画像が検出され（ステップ４）、顔画像データベース６に記憶している特定人物の顔画像のデータと照合される。これにより、特定人物の顔画像が検出される（ステップ５）。尚、このとき、顔画像データベース６に複数の人物の顔画像が特定人物の顔画像データとして記憶されている場合、各人の顔画像が検出される。
【００２３】
このとき、サーバ８は、例えば、特開２００２−１９１０４４号公報に開示されている人物検出技術を用いてリアルタイム映像の中の全ての人物を検出し、例えば、特開２００１−２５６４９６号公報に開示されている顔照合技術を用いて検出した人物の顔画像と顔画像データベース６に記憶されている特定人物の顔画像とを照合する。
【００２４】
上記人物検出技術によると、カメラ２で撮影したリアルタイム映像の連続する２枚の画像の差分から人物の領域を検出する。そして、その領域の大きさや形状から人物を検出する。
【００２５】
また、上記顔照合技術によると、検出した人物の画像から顔領域を検出し、顔の方向を判定し、目、鼻、口等の顔の部位を検出し、顔の傾きや大きさを正規化する。そして、この正規化された顔画像と顔画像データベース６に記憶されている特定人物の顔画像それぞれの特徴量の類似度が計算され、顔画像が照合されて人物が特定される。
【００２６】
そして、ステップ５で特定人物の顔画像を検出した後、サーバ８は、リアルタイムで撮影している映像に所定の画像処理を施す。例えば、特定人物以外の他の人物の顔画像をぼかして見えなくする場合（ステップ６；ＹＥＳ）、ステップ４で検出した映像の中の全ての人物の顔画像からステップ５で検出した特定人物の顔画像を除いた他の人物の顔画像にぼかし処理を施す（ステップ７）。
【００２７】
また、例えば、特定人物以外の画像全てをぼかして見えなくする場合（ステップ６；ＮＯ）、ステップ５で検出した特定人物の顔画像を除いた全ての画像にぼかし処理を施す（ステップ８）。
【００２８】
或いは、特定人物の顔画像をぼかして見えなくしたい場合、ステップ５で検出した特定人物の顔画像にぼかし処理を施す。尚、ここでは、画像処理としてぼかし処理をする場合を例にとって説明したが、この他に、例えば、特定の画像領域にモザイクを施すモザイク処理、特定の画像領域を特定の色で塗り潰す塗り潰し処理などがある。
【００２９】
いずれにしても、サーバ８は、所定の画像処理を施した映像を保存する（ステップ９）。
【００３０】
以上のように、本実施の形態によると、特定人物の顔画像を予めシステム１のデータベース６に記憶しておき、カメラ２で撮影したリアルタイム映像の中に映っている特定人物を顔照合により検出し、特定人物以外の人物の顔画像、特定人物以外の全ての画像、或いは特定人物の顔画像に対し、選択的且つ自動的に所定の画像処理を施す。このため、従来のように手作業によって画像処理をする必要がなく、作業負担を大幅に低減でき、画像処理を容易且つ確実にでき、リアルタイム映像に対する画像処理も可能となった。
【００３１】
尚、この発明は、上述した実施の形態に限定されるものではなく、この発明の範囲内で種々変形可能である。
【００３２】
例えば、上述した実施の形態では、カメラで撮影したリアルタイム映像を画像処理する場合について説明したが、これに限らず、サーバ８で一旦記憶した映像や静止画像に所定の画像処理を施すこともできる。
【００３３】
また、上述した実施の形態では、特定人物、或いはそれ以外の人物の顔画像を画像処理するようにしたが、被処理画像から人物を検出するステップを含むことから、所望する人物の全身に画像処理を施すこともできる。
【００３４】
また、顔画像を処理する際、目の部分だけを黒く塗ったり、髭、眼鏡、かつら等を付けたり、顔の輪郭部分だけぼかしたりすることも容易にできる。
【００３５】
さらに、リアルタイム映像を一旦録画したものを放送する時点で、上述したシステム１の顔照合技術を用いたフィルターを通した映像を放送するようにしても良い。
【００３６】
【発明の効果】
以上説明したように、この発明の画像処理システムは、上記のような構成および作用を有しているので、容易且つ確実にリアルタイムで人物の顔画像を画像処理できる。
【図面の簡単な説明】
【図１】この発明の実施の形態に係る画像処理システムを示すブロック図。
【図２】図１のシステムにおける動作を説明するためのフローチャート。
【符号の説明】
１…画像処理システム、２…カメラ、４…読取装置、６…顔画像データベース、８…サーバ、１０…操作端末。
【図１】
2004126712.tif 000003
【図２】
2004126712.tif 000004