(57)【要約】【課題】領域分割に要する手間や時間を軽減し、画像を複数の領域に分割する装置を提供する。【解決手段】画像から第一領域と第二領域とを分離する画像処理装置５は、指定画像を指示することにより画像における第一領域を指定する画像指定部２０と、指定画像を包含する近傍画像を形成する近傍画像形成部２２と、画像から近傍画像を除外した背景画像を決定する背景画像決定部２４と、指定画像および背景画像の画素値を比較することにより、指定画像のうち第二領域に含まれる推定画像を推定する不要指定画像推定部２６と、指定画像から推定画像を除外した第二指定画像を生成する第二指定画像生成部２８と、所定の領域分割方法を適用し、第二指定画像および背景画像の画素値に基づいて、画像から第一領域および第二領域を抽出する領域分割部３０と、を備える。【選択図】図１
2016151911.tif 000002
【特許請求の範囲】
【請求項１】
画像から第一領域と第二領域とを分離する画像処理装置であって、
指定画像を指示することにより前記画像における前記第一領域を指定する画像指定部と、
前記指定画像を包含する第一画像を形成する第一画像形成部と、
前記画像から前記第一画像を除外した背景画像を決定する背景画像決定部と、
前記指定画像および前記背景画像の画素値を比較することにより、前記指定画像のうち前記第二領域に含まれる推定画像を推定する推定部と、
前記指定画像から前記推定画像を除外した第二指定画像を生成する生成部と、
所定の領域分割方法を適用し、前記第二指定画像および前記背景画像の前記画素値に基づいて、前記画像から前記第一領域および前記第二領域を抽出する領域分割部と、を備えることを特徴とする画像処理装置。
【請求項２】
請求項１に記載の画像処理装置において、
前記推定部は、前記指定画像を構成する参照画像の前記画素値と、前記参照画像に対応し、前記背景画像を構成する比較画像の前記画素値と、の差分を示す差分値を算出し、前記差分値が基準値以下である場合、前記参照画像は前記推定画像であると推定することを特徴とする画像処理装置。
【請求項３】
請求項２に記載の画像処理装置において、
前記画素値は、画素を複数の色成分で分離した情報を示すチャンネル値であり、
前記差分値は、複数の前記チャンネル値におけるユークリッド距離であることを特徴とする画像処理装置。
【請求項４】
請求項２乃至３のいずれかに記載の画像処理装置において、
前記比較画像は、前記第一画像の外縁を構成する画像のうち、前記参照画像との距離が最短な画像であることを特徴とする画像処理装置。
【請求項５】
請求項１乃至４のいずれか１項に記載の画像処理装置において、
前記所定の領域分割方法は、Watershed方法であることを特徴とする画像処理装置。
【請求項６】
請求項１乃至５のいずれか１項に記載の画像処理装置において、
前記画像指定部が指定した前記指定画像を修正する指定画像修正部を備えることを特徴とする画像処理装置。
【請求項７】
請求項１乃至６のいずれか１項に記載の画像処理装置において、
前記第一画像を修正する第一画像修正部を備えることを特徴とする画像処理装置。
【請求項８】
画像から第一領域と第二領域とを分離する画像処理方法であって、
指定画像を指示することにより前記画像における前記第一領域を指定する画像指定工程と、
前記指定画像を包含する第一画像を形成する第一画像形成工程と、
前記画像から前記第一画像を除外した背景画像を決定する背景画像決定工程と、
前記指定画像および前記背景画像の画素値を比較することにより、前記指定画像のうち前記第二領域に含まれる推定画像を推定する推定工程と、
前記指定画像から前記推定画像を除外した第二指定画像を生成する生成工程と、
所定の領域分割方法を適用し、前記第二指定画像および前記背景画像の前記画素値に基づいて、前記画像から前記第一領域および前記第二領域を抽出する領域分割工程と、を有することを特徴とする画像処理方法。
【請求項９】
画像から第一領域と第二領域とを分離する画像処理プログラムであって、
指定画像を指示することにより前記画像における前記第一領域を指定する画像指定機能と、
前記指定画像を包含する第一画像を形成する第一画像形成機能と、
前記画像から前記第一画像を除外した背景画像を決定する背景画像決定機能と、
前記指定画像および前記背景画像の画素値を比較することにより、前記指定画像のうち前記第二領域に含まれる推定画像を推定する推定機能と、
前記指定画像から前記推定画像を除外した第二指定画像を生成する生成機能と、
所定の領域分割方法を適用し、前記第二指定画像および前記背景画像の前記画素値に基づいて、前記画像から前記第一領域および前記第二領域を抽出する領域分割機能と、をコンピューターに実行させることを特徴とする画像処理プログラム。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、画像処理装置、画像処理方法および画像処理プログラムに関する。
【背景技術】
【０００２】
近年、スマートフォンの高性能化により、スマートフォンが備えるカメラ機能を用いて、撮影から加工までをスマートフォン上で処理できるようになった。ところが、このようなスマートフォンでは、手指を移動させてタッチパネル操作を行う場合、加工する領域を指定する際に手指が領域を遮蔽し、領域を詳細に指定することが困難であった。
そこで、詳細な領域指定を可能にすべく、例えば、特許文献１に記載されているように、所望の領域分割を大まかな領域指定で達成できる画像処理装置が開示されている。この装置では、詳細な領域指定が困難なタッチパネル操作であっても、種々の領域分割方法（例えば、グラフカット方法やグラブカット方法）を利用することにより、少ない操作と時間で所望の領域指定を実現している。これらの方法は、分割したい二つの領域の一部の画像を、それぞれの領域の候補画像とし、この候補画像を基に画像を領域分割するものである。
【先行技術文献】
【特許文献】
【０００３】
【特許文献１】特開２０１３−２９９３０号公報
【発明の概要】
【発明が解決しようとする課題】
【０００４】
しかしながら、特許文献１に記載の画像処理装置では、分割したい一方の画像の一部を大まかに指定するため、例えば、図４に示す人物像を指定する場合、図１２に示すように分割したい他方の画像の一部も含まれてしまい、領域分割における分割精度が低下するという課題があった。従って、操作者は、期待する分割結果を得るために、分割された画像に基づいて分割領域を修正するのに多くの手間と時間を要した。
【課題を解決するための手段】
【０００５】
本発明は、上述の課題の少なくとも一部を解決するためになされたものであり、以下の形態又は適用例として実現することが可能である。
【０００６】
［適用例１］
本適用例にかかる画像処理装置は、画像から第一領域と第二領域とを分離する画像処理装置であって、指定画像を指示することにより前記画像における前記第一領域を指定する画像指定部と、前記指定画像を包含する第一画像を形成する第一画像形成部と、前記画像から前記第一画像を除外した背景画像を決定する背景画像決定部と、前記指定画像および前記背景画像の画素値を比較することにより、前記指定画像のうち前記第二領域に含まれる推定画像を推定する推定部と、前記指定画像から前記推定画像を除外した第二指定画像を生成する生成部と、所定の領域分割方法を適用し、前記第二指定画像および前記背景画像の前記画素値に基づいて、前記画像から前記第一領域および前記第二領域を抽出する領域分割部と、を備えることを特徴とする。
【０００７】
このような構成によれば、指定画像を指示することにより画像における第一領域を指定した場合、指定画像を包含する第一画像を画像から除外した背景画像と、指定画像と、の画素値を比較することで、第二領域に含まれる指定画像を推定画像として推定し、指定画像から推定画像を除外した第二指定画像と、背景画像と、の画素値に基づいて、画像から第一領域および第二領域を抽出する。
従って、利用者が領域を分割する場合に、誤って第二領域を含めて指定した場合であっても、第二領域に含まれる領域が除外されるため、指定座標の指定をやり直すことなく、所望の領域分割を行うことができることから、領域分割に要する手間や時間を軽減できる。
【０００８】
［適用例２］
上記適用例にかかる画像処理装置において、前記推定部は、前記指定画像を構成する参照画像の前記画素値と、前記参照画像に対応し、前記背景画像を構成する比較画像の前記画素値と、の差分を示す差分値を算出し、前記差分値が基準値以下である場合、前記参照画像は前記推定画像であると推定することが好ましい。
【０００９】
このような構成によれば、第二領域を示す背景画像の画素値と、指定画像の画素値と、の差分に基づいて、２つの画像の特徴が類似しているか、否かが判定でき、指定画像と、第二領域と、が重畳しているか、否かを容易に特定できる。
【００１０】
［適用例３］
上記適用例にかかる画像処理装置において、前記画素値は、画素を複数の色成分で分離した情報を示すチャンネル値であり、前記差分値は、複数の前記チャンネル値におけるユークリッド距離であっても良い。
【００１１】
［適用例４］
上記適用例にかかる画像処理装置において、前記比較画像は、前記第一画像の外縁を構成する画像のうち、前記参照画像との距離が最短な画像であっても良い。
【００１２】
［適用例５］
上記適用例にかかる画像処理装置において、前記所定の領域分割方法は、Watershed方法であっても良い。
【００１３】
［適用例６］
上記適用例にかかる画像処理装置において、前記画像指定部が指定した前記指定画像を修正する指定画像修正部を備えることが好ましい。
【００１４】
このような構成によれば、指定画像を修正することで、第一領域の指定精度を向上させることができる。
【００１５】
［適用例７］
上記適用例にかかる画像処理装置において、前記第一画像を修正する第一画像修正部を備えることが好ましい。
【００１６】
このような構成によれば、背景画像の決定精度を向上させることができる。
【００１７】
［適用例８］
本適用例にかかる画像処理方法は、画像から第一領域と第二領域とを分離する画像処理方法であって、指定画像を指示することにより前記画像における前記第一領域を指定する画像指定工程と、前記指定画像を包含する第一画像を形成する第一画像形成工程と、前記画像から前記第一画像を除外した背景画像を決定する背景画像決定工程と、前記指定画像および前記背景画像の画素値を比較することにより、前記指定画像のうち前記第二領域に含まれる推定画像を推定する推定工程と、前記指定画像から前記推定画像を除外した第二指定画像を生成する生成工程と、所定の領域分割方法を適用し、前記第二指定画像および前記背景画像の前記画素値に基づいて、前記画像から前記第一領域および前記第二領域を抽出する領域分割工程と、を有することを特徴とする。
【００１８】
このような方法によれば、指定画像を指示することにより画像における第一領域を指定した場合、指定画像を包含する第一画像を画像から除外した背景画像と、指定画像と、の画素値を比較することで、第二領域に含まれる指定画像を推定画像として推定し、指定画像から推定画像を除外した第二指定画像と、背景画像と、の画素値に基づいて、画像から第一領域および第二領域を抽出する。
従って、利用者が領域を分割する場合に、誤って第二領域を含めて指定した場合であっても、第二領域に含まれる領域が除外されるため、指定座標の指定をやり直すことなく、所望の領域分割を行うことができることから、領域分割に要する手間や時間を軽減できる。
【００１９】
［適用例９］
本適用例にかかる画像処理プログラムは、画像から第一領域と第二領域とを分離する画像処理プログラムであって、指定画像を指示することにより前記画像における前記第一領域を指定する画像指定機能と、前記指定画像を包含する第一画像を形成する第一画像形成機能と、前記画像から前記第一画像を除外した背景画像を決定する背景画像決定機能と、前記指定画像および前記背景画像の画素値を比較することにより、前記指定画像のうち前記第二領域に含まれる推定画像を推定する推定機能と、前記指定画像から前記推定画像を除外した第二指定画像を生成する生成機能と、所定の領域分割方法を適用し、前記第二指定画像および前記背景画像の前記画素値に基づいて、前記画像から前記第一領域および前記第二領域を抽出する領域分割機能と、をコンピューターに実行させることを特徴とする。
【００２０】
このような構成によれば、指定画像を指示することにより画像における第一領域を指定した場合、指定画像を包含する第一画像を画像から除外した背景画像と、指定画像と、の画素値を比較することで、第二領域に含まれる指定画像を推定画像として推定し、指定画像から推定画像を除外した第二指定画像と、背景画像と、の画素値に基づいて、画像から第一領域および第二領域を抽出する。
従って、利用者が領域を分割する場合に、誤って第二領域を含めて指定した場合であっても、第二領域に含まれる領域が除外されるため、指定座標の指定をやり直すことなく、所望の領域分割を行うことができることから、領域分割に要する手間や時間を軽減できる。
【図面の簡単な説明】
【００２１】
【図１】本発明の実施形態に係る画像処理装置の概構成を示すブロック図。
【図２】制御部の詳細な機能構成を示すブロック図。
【図３】画像処理装置による画像の領域分割処理を示すフローチャート。
【図４】領域分割処理を行う対象画像を示す図。
【図５】第一領域および第二領域を示す図。
【図６】利用者が手指を移動して指示した任意の部分の軌跡を示す図。
【図７】近傍画像の一例を示す図。
【図８】背景画像を示す図。
【図９】外郭背景画像を示す図。
【図１０】最近傍の外郭背景画像を示す図。
【図１１】第二指定画像を示す図。
【図１２】従来の領域分割結果を示す図。
【発明を実施するための形態】
【００２２】
以下、本発明の実施形態について図面を参照して説明する。
【００２３】
（実施形態）
図１は、本実施形態に係る画像処理装置５の概構成を示すブロック図である。この画像処理装置５は、画像を領域分割処理するための機能を備え、スマートデバイスやパーソナルコンピューター等を想定する。
画像処理装置５は、制御部１０、記憶部１６、操作部１２、表示部１８および画像取得部１４を備える。
【００２４】
制御部１０は、例えば、ＣＰＵ（Central Processing Unit）のようなプログラム制御デバイスとしてのハードウェアと、記憶部１６に格納されたソフトウェアと、が協働することで各機能を実現する。
この制御部１０は、処理対象の画像を画像取得部１４、または記憶部１６から取得し、処理した画像を表示部１８に表示させるべく出力する。また、この制御部１０は、操作部１２を介して指示された画像を取得し、当該画像を含む所定の範囲の領域を形成する。更に、制御部１０は、形成領域の周囲の画像を背景画像とし、指定画像と背景画像とを用いて領域分割を実行し、画像を二つの領域に分離する。尚、制御部１０が備える機能の詳細は後述する。
【００２５】
表示部１８は、例えば、液晶ディスプレイパネルを想定し、制御部１０から入力する指示に従い、画像を表示する。
操作部１２は、例えば、液晶ディスプレイパネルに積層された透明のタッチパネルや、マウス等のポインティングデバイスを想定する。この操作部１２は、利用者が触れるなどして指示した位置を表す情報を生成し、制御部１０に出力する。
画像取得部１４は、例えば、カメラのような撮像により画像情報を取得する撮像部、あるいは、ネットワークインタフェイス、ＵＳＢ（Universal Serial Bus）インタフェイス等外部の装置との通信により画像を取得する通信部の少なくとも一方を含む。この画像取得部１４は、取得した画像を制御部１０に出力する。
【００２６】
記憶部１６は、ＲＡＭ（Random Access Memory）、ＲＯＭ（Read Only Memory）およびフラッシュメモリー等のメモリーデバイスを想定し、制御部１０によって実行されるプログラム（ソフトウェア）を記憶する。尚、記憶部１６が記憶するプログラムは、他の記録媒体に格納されていたプログラムを複写したものであってもよい。
また、この記憶部１６は、制御部１０のワークメモリーとしても動作する。更に、この記憶部１６は、画像取得部１４から制御部１０を介して画像を取得および記憶し、制御部１０の指示に従って処理対象の画像を出力してもよい。
図２は、制御部１０の詳細な機能構成を示すブロック図である。この制御部１０は、画像指定部２０、近傍画像形成部２２、背景画像決定部２４、不要指定画像推定部２６、第二指定画像生成部２８および領域分割部３０を備える。
【００２７】
尚、不要指定画像推定部２６は推定部に相当し、第二指定画像生成部２８は生成部に相当する。
画像指定部２０は、表示部１８が表示している処理対象の対象画像を第一領域と、第二領域と、に分割する場合、第一領域における任意の領域を指定し、指定した指定画像の位置情報を出力する。
本実施形態では、画像指定部２０は、利用者の手指が触れたタッチパネルの位置や、ポインティングデバイスが指示する位置に対応する画像の位置情報を出力する。出力した位置情報は、指定画像として記憶部１６に作成される指定画像リストに格納される。
また、画像指定部２０は、指定画像リストに格納された指定画像に対して、利用者が手指で指示することにより、指定画像を修正する指定画像修正部としての機能も備える。
【００２８】
近傍画像形成部２２は、第一画像形成部に相当し、指定画像リストから指定画像の位置情報を参照し、その位置を中心に所定の範囲の領域を近傍画像（第一画像）として形成し、記憶部１６に記憶する。
背景画像決定部２４は、対象画像のうち、近傍画像形成部２２で定義した近傍画像を除いた領域を背景画像として決定し、記憶部１６に記憶する。
不要指定画像推定部２６は、第一領域を示す指定画像のうち、誤って指定したと推測される第二領域の領域を推定画像として推定する。
本実施形態では、不要指定画像推定部２６は、指定画像のうち、着目する参照画像において、最も近傍に位置する背景画像である近傍背景画像を探索する。そして、参照画像と、近傍背景画像と、の赤色、緑色および青色毎に色を成分で分離した情報を示すチャンネル値の差分値、即ち、ユークリッド距離を算出し、算出したユークリッド距離と、所定の基準値である閾値と、を比較する。
尚、参照画像および近傍背景画像は、１つの画素であってもよく、また、複数の画素で構成されてもよい。
【００２９】
比較した結果、ユークリッド距離が閾値以下である場合、不要指定画像推定部２６は、着目した参照画像は推定画像であると決定する。
第二指定画像生成部２８は、不要指定画像推定部２６が推定画像であると決定した参照画像を指定画像から除外した第二指定画像を生成する。
領域分割部３０は、所定の領域分割方法を適用し、第二指定画像生成部２８が生成した第二指定画像と、背景画像と、に基づいて、領域分割を実行し、対象画像を第一領域と第二領域の二つの領域に分割し、それぞれの領域を抽出する。
所定の領域分割方法は、例えば、Watershed方法やGraphCut方法を採用できる。各方法については、以下のリンク先の文献に詳しい説明が記載されており、ここでは説明を省略する。
【００３０】
Watershed方法・・・http://www.cs.tut.fi/~selinumm/biolab/pfefferkorn.pdf
GraphCut方法・・・http://www.riken.jp/brict/Ijiri/study/GraphCut.htm
【００３１】
図３は、画像処理装置５による画像の領域分割処理を示すフローチャートである。この領域分割処理に関して理解を容易にすべく、図４〜図１１も適宜参照して説明する。
図４は領域分割処理を行う対象画像を示している。画像処理装置５は領域分割処理を実行することにより、図５に示すように、対象画像から被写体を示す第一領域（白抜き領域）と、背景像を示す第二領域（ドットパターン領域）と、に分割するものである。
最初に、利用者は、表示部１８に表示された対象画像を視認し、分割したい一方の領域である第一領域の任意の部分を指示する。図６は、利用者が手指を移動して指示した任意の部分の軌跡を太線で示す。
制御部１０は、利用者が指示した座標を読み取り、読み取った座標を記録すると共に、座標により規定される領域の画像を指定画像として定義する（ステップＳ１００）＜画像指定工程＞。
【００３２】
次に、制御部１０は、指定画像の座標を含めた領域の近傍画像を生成する（ステップＳ１０２）＜第一画像形成工程＞。
次に、制御部１０は、生成した近傍画像を対象画像において指定画像に対応する位置に重畳して表示する（ステップＳ１０３）。図７は、本実施形態における近傍画像の一例を左下がり斜線で示している。即ち、この近傍画像は、所定の円形領域を指定画像に沿って移動させることにより、指定画像を包含するように生成され、指定画像の位置に重畳して表示されている。
【００３３】
次に、制御部１０は、利用者の指示が終了し、指定画像の定義が終了したか、否かを判定する（ステップＳ１０４）。ここで、指定画像の定義が終了していないと判定した場合（ステップＳ１０４でＮｏ）、ステップＳ１００に戻る。
他方で、指定画像の定義が終了したと判定した場合（ステップＳ１０４でＹｅｓ）、制御部１０は、近傍画像以外の領域を背景画像として定義する（ステップＳ１０５）＜背景画像決定工程＞。ここで、図８は、本実施形態における背景画像を右下がり斜線で示す。
次に、制御部１０は、近傍画像の外郭に隣接、即ち、外縁を構成する背景画像を外郭背景画像と定義し、外郭背景画像を取得する（ステップＳ１０６）。図９は、本実施形態における外郭背景画像の範囲を点線で示す。尚、外郭背景画像は、後述する工程において、不要指定画像の推定や領域分割において、分割したい第二領域の候補として利用する。
【００３４】
次に、制御部１０は、指定画像のうち第二領域と推定される領域を推定する。即ち、制御部１０は、指定画像の１つを参照画像として参照し（ステップＳ１０７）、参照画像に対して最近傍の外郭背景画像を取得する（ステップＳ１０８）。
即ち、制御部１０は、参照画像と、外郭背景画像のうちの１つと、の座標距離を求め、順次座標距離が最小かを比較していくことで最近傍の外郭背景画像を取得する。図１０は、本実施形態における最近傍の外郭背景画像を示す図である。
次に、制御部１０は、外郭背景画像の全てを参照して座標距離を求めたか、否かを判定する（ステップＳ１０９）。
【００３５】
ここで、外郭背景画像の全てを参照していないと判定した場合（ステップＳ１０９でＮｏ）、ステップＳ１０８に戻る。
他方で、外郭背景画像の全てを参照したと判定した場合（ステップＳ１０９でＹｅｓ）、制御部１０は、最近傍の外郭背景画像が複数あればその平均値を求めこれを比較画像と定義する（ステップＳ１１０）。
次に、制御部１０は、参照画像と、比較画像と、の画素値のユークリッド距離を算出する（ステップＳ１１１）。
次に、制御部１０は、ユークリッド距離を閾値と比較し、閾値以下であれば、参照画像は第二領域であると推定し＜推定工程＞、指定画像から参照画像を除外することで、第二指定画像を生成する（ステップＳ１１２）＜生成工程＞。図１１は、本実施形態における第二指定画像を示す。この第二指定画像は指定画像から逸脱しないように生成される。
【００３６】
即ち、ユークリッド距離が閾値よりも長い場合、参照画像と比較画像は異なる領域の画像である。従って、参照画像は第一領域である。
他方で、ユークリッド距離が閾値以下の場合、参照画像と比較画像は同一の領域の画像である。従って、参照画像が属する指定画像は第一領域を示すものであり、第二領域である参照画像は、利用者が誤って指定したと判断できる。
次に、制御部１０は、指定画像の全てを参照したか、否かを判定する（ステップＳ１１３）。ここで、指定画像の全てを参照していないと判定した場合（ステップＳ１１３でＮｏ）、ステップＳ１０７に戻る。
他方で、指定画像の全てを参照していたと判定した場合（ステップＳ１１３でＹｅｓ）、
制御部１０は、得られた第二指定画像と外郭背景画像を領域分割方法に入力し、画像を第一領域と第二領域とに領域分割する処理を行う（ステップＳ１１４）＜領域分割工程＞。
【００３７】
ここで、領域分割方法は、例えばWatershed方法である。Watershed方法は、画像のうち一方の領域のサンプル画像と他方の領域のサンプル画像を基に画像全体の領域分割を行う方法であり、本実施形態では、各サンプル画像は第二指定画像と外郭背景画像である。
次に、制御部１０は、領域分割の結果を対象画像に重ねて表示し（ステップＳ１１６）、一連の処理を終了する。
【００３８】
以上述べたように、本実施形態に係る画像処理装置５によれば、以下の効果を得ることができる。
領域分割したい一方の領域を利用者が大まかに指定することにより、誤って他方の領域を含めて指定されたとしても、他方の領域を指定した領域を推定し除去することで、領域分割の精度が向上する。これにより利用者は期待する領域分割結果を修正することなく領域分割が完了できる。
なお、本発明は上述した実施形態に限定されず、上述した実施形態に種々の変更や改良を加えることが可能である。変形例を以下に述べる。
【００３９】
（１）指定画像は、指定した画像に限らない。即ち、指定画像に隣接し、かつ近傍画像の外郭より内側である領域を含んだ画像であってもよい。
（２）近傍画像の形状は、円形領域に限らず、矩形領域であってもよいし、外郭が周期的な形状の領域であってもよい。
（３）制御部１０は、近傍画像を修正する第一画像修正部を更に備え、第一画像修正部は、近傍画像の領域の範囲の大きさを、近傍画像の形成前後で変更してもよい。
（４）近傍画像の表示方法は、近傍画像の領域の画像に半透明の単色を重ねて配してもよく、また、近傍画像の外郭を線で表示してもよいし、近傍画像以外の画像の明度を下げてもよい。
【００４０】
（５）参照画像と画素値を比較する比較画像は、最近傍の外郭背景画像に限らず、参照画像との距離が近い所定の順位までの外郭背景画像を取得し、その平均値を比較画像としてもよい。また、外郭背景画像の近傍の背景画像を含めて、その平均値を比較画像としてもよい。また、参照画像と比較画像との比較は、例えば明度などを用いて比較してもよい。
（６）領域分割方法は、二つの領域のサンプルを基に領域分割を行うGraphCut方法でもよい。
（７）領域分割結果の表示方法は、各領域で異なる半透明の単色を画像に配してもよいし、他方の領域にのみ半透明の単色を画像に配してもよいし、他方の領域の画像の明度を下げてもよい。
【００４１】
（８）利用者による座標入力から領域分割まで実行する一連の動作は、図３のフローに限定されるものではない。例えば、タッチデバイスであればタッチとドラッグによって座標が連続入力される場合において、座標の更新毎に領域分割まで実行してもよいし、画像の指定が終了して指を離した時点で領域分割まで実行してもよい。また、指定画像の指定の工程を記録し、工程を遡り、その時点での指定画像を基に領域分割を行うなどしてもよい。
（９）領域分割の分割数は、第一領域と第二領域の二分割に限るものではない。分割した結果から新たな第一領域を指定し、元の第一領域と第二領域を新たな第二領域として領域分割を行い、領域分割結果で得られた新たな第一領域と新たな第二領域、元の第一領域として二つ以上に領域分割してもよい。
また、以上のような手法を実施する装置は、単独の装置によって実現される場合もあれば、複数の装置を組み合わせることによって実現される場合もあり、各種の態様を含むものである。
【符号の説明】
【００４２】
５…画像処理装置、１０…制御部、１２…操作部、１４…画像取得部、１６…記憶部、１８…表示部、２０…画像指定部、２２…近傍画像形成部、２４…背景画像決定部、２６…不要指定画像推定部、２８…第二指定画像生成部、３０…領域分割部。
【図１】
2016151911.tif 000003
【図２】
2016151911.tif 000004
【図３】
2016151911.tif 000005
【図４】
2016151911.tif 000006
【図５】
2016151911.tif 000007
【図６】
2016151911.tif 000008
【図７】
2016151911.tif 000009
【図８】
2016151911.tif 000010
【図９】
2016151911.tif 000011
【図１０】
2016151911.tif 000012
【図１１】
2016151911.tif 000013
【図１２】
2016151911.tif 000014