(57)【要約】      （修正有）【課題】部分領域の切出画像を解析する際に、処理の効率化を図ることが可能な画像切出装置、画像解析装置及びプログラムを提供する。【解決手段】画像解析装置２−１において、入力画像から被写体を含む部分領域の画像を切り出す画像切出装置１−１は、入力画像からＭ個（Ｍは１以上の整数）の部分領域の画像を第一切出画像として切り出し、さらに入力画像から第二切出領域で指定されるＮ個（Ｎは１以上の整数）の部分領域の画像を第二切出画像として切り出す画像切出部１０−１と、第一切出画像に基づいて、被写体を含む部分領域を、画像切出部１０−１による指定の際に用いる第二切出領域として設定する注視領域設定部１１を備える。【選択図】図１
2020126523.tif 000002
【特許請求の範囲】
【請求項１】
入力画像から被写体を含む部分領域の画像を切り出す画像切出装置において、
前記入力画像から、Ｍ個（Ｍは１以上の整数）の部分領域の画像を第一切出画像として切り出し、前記入力画像から、第二切出領域で指定されるＮ個（Ｎは１以上の整数）の部分領域の画像を第二切出画像として切り出す画像切出部と、
前記第一切出画像に基づいて、前記被写体を含む部分領域を、前記画像切出部による指定の際に用いる前記第二切出領域として設定する切出領域設定部と、
を備えたことを特徴とする画像切出装置。
【請求項２】
請求項１に記載の画像切出装置において、
前記画像切出部は、
前記入力画像から前記Ｍ個の部分領域の画像を切り出し、当該画像の解像度変換を行い前記第一切出画像を生成し、
前記入力画像から、前記切出領域設定部により設定された前記第二切出領域で指定される前記Ｎ個の部分領域の画像を切り出し、当該画像を前記第二切出画像として生成するか、または当該画像の解像度変換を行い前記第二切出画像を生成する、ことを特徴とする画像切出装置。
【請求項３】
請求項２に記載の画像切出装置において、
前記画像切出部は、
前記第二切出画像の分解能が前記第一切出画像よりも高くなるように、前記第一切出画像及び前記第二切出画像を生成する、ことを特徴とする画像切出装置。
【請求項４】
請求項１から３までのいずれか一項に記載の画像切出装置において、
前記画像切出部は、
前記第一切出画像及び前記第二切出画像を空間分割的または時分割的に多重化し、多重画像を生成する、ことを特徴とする画像切出装置。
【請求項５】
入力画像から被写体を含む部分領域の画像を切り出し、前記部分領域の切出画像を解析する画像解析装置において、
請求項１から３までのいずれか一項の画像切出装置と、
前記画像切出装置により切り出された前記第二切出画像に基づいて、当該第二切出画像に含まれる前記被写体の属性を求める画像解析部と、
を備えたことを特徴とする画像解析装置。
【請求項６】
入力画像から被写体を含む部分領域の画像を切り出し、前記部分領域の切出画像を解析する画像解析装置において、
請求項４の画像切出装置と、
前記画像切出装置により生成された前記多重画像から前記第二切出画像を分離し、当該第二切出画像に含まれる前記被写体の属性を求める画像解析部と、
を備えたことを特徴とする画像解析装置。
【請求項７】
コンピュータを、請求項１から４までのいずれか一項に記載の画像切出装置として機能させるためのプログラム。
【請求項８】
コンピュータを、請求項５または６に記載の画像解析装置として機能させるためのプログラム。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、入力画像から複数の部分領域を切り出す画像切出装置、部分領域の画像を解析する画像解析装置、及びこれらのプログラムに関する。
【背景技術】
【０００２】
従来、入力画像を所定の解像度で取り込み、当該解像度の画像に対して画像解析処理を行う装置が知られている。この画像解析処理の演算コストと演算精度を両立させる手法としては、入力画像を低解像化することで低解像画像に対して荒い処理を行い、入力画像である高解像画像に対してより高精度な処理を行う多重解像度解析手法がある。
【０００３】
また、高解像画像内において、まず注視点（ＲＯＩ：Region of Interest）を設定し、当該注視点付近の画像を高分解能な画像として切り出し、これを解析する注視点設定解析手法もある。
【０００４】
例えば、デジタルカメラまたはスマートフォンのアプリケーションソフトウェアには、被写体検出（特に、顔検出）手法を用いて注視点を設定し、当該注視点において露出またはフォーカス等の設定のための解析を行うものがある。さらには、人物を特定するための処理を行うものもある（例えば、非特許文献１を参照）。また、多重解像度解析手法と注視点設定解析手法を併用するものもある（例えば、特許文献１を参照）。
【先行技術文献】
【特許文献】
【０００５】
【特許文献１】特許第６３９３２３０号公報
【非特許文献】
【０００６】
【非特許文献１】Paul Viola and Michael Jones，“Rapid Object Detection using a Boosted Cascade of Simple Features”，Proceeding of the 2001 IEEE Computer Society Conference on Computer Vision and Pattern Recognition，pp.511-518，2001.
【発明の概要】
【発明が解決しようとする課題】
【０００７】
このような従来の画像解析処理において、解析精度を向上させるためには、画像の解像度が高いことが望ましい。しかし、画像の解像度を高くすればするほど、画像解析処理に要する演算コストも高くなる。つまり、所要演算装置規模が大きくなり、所要記憶領域が広くなる。
【０００８】
前述の多重解像度解析手法または注視点設定解析手法を用いることにより、演算コスト及び演算精度の両立がある程度可能となるが、画像解析装置の入力部には、依然として高解像画像の入力が必要である。このため、超高精細度画像（例えば、７６８０×３８４０画素の画像）を入力しようとすると、入力インターフェース部の広帯域化が必要となり、装置全体の製作コストが上がってしまう。したがって、前述の多重解像度解析手法または注視点設定解析手法では、演算コスト及び演算精度の両立が不十分であるという問題があった。
【０００９】
このため、入力画像から被写体を含む部分領域を切り出し、部分領域の切出画像を解析する際に、入力インターフェース部の広帯域化を抑え、装置全体の製作コストを低減するために、切出処理及び解析処理の効率化が所望されていた。
【００１０】
そこで、本発明は前記課題を解決するためになされたものであり、その目的は、入力画像から被写体を含む部分領域を切り出し、部分領域の切出画像を解析する際に、処理の効率化を図ることが可能な画像切出装置、画像解析装置及びプログラムを提供することにある。
【課題を解決するための手段】
【００１１】
前記課題を解決するために、請求項１の画像切出装置は、入力画像から被写体を含む部分領域の画像を切り出す画像切出装置において、前記入力画像から、Ｍ個（Ｍは１以上の整数）の部分領域の画像を第一切出画像として切り出し、前記入力画像から、第二切出領域で指定されるＮ個（Ｎは１以上の整数）の部分領域の画像を第二切出画像として切り出す画像切出部と、前記第一切出画像に基づいて、前記被写体を含む部分領域を、前記画像切出部による指定の際に用いる前記第二切出領域として設定する切出領域設定部と、を備えたことを特徴とする。
【００１２】
請求項１の発明によれば、第二切出領域を、注視すべき被写体を含む画像を切り出すための領域として設定し、また、第二切出画像を、注視すべき被写体の属性を解析するための画像として抽出することができる。その結果、分解能よりも画角の広さが重視される第二切出画像の切出処理と、画角の広さよりも分解能が重視される、第二切出画像を用いた解析処理とを効率的に実行することが可能となる。
【００１３】
また、請求項２の画像切出装置は、請求項１に記載の画像切出装置において、前記画像切出部が、前記入力画像から前記Ｍ個の部分領域の画像を切り出し、当該画像の解像度変換を行い前記第一切出画像を生成し、前記入力画像から、前記切出領域設定部により設定された前記第二切出領域で指定される前記Ｎ個の部分領域の画像を切り出し、当該画像を前記第二切出画像として生成するか、または当該画像の解像度変換を行い前記第二切出画像を生成する、ことを特徴とする。
【００１４】
請求項２の発明によれば、第一切出画像及び第二切出画像を異なる分解能となるように生成することができる。つまり、第一切出画像を用いて第二切出領域を設定する際の処理負荷を考慮して、所定の分解能の第一切出画像を生成するための解像度変換を行うことができる。また、第二切出画像を用いて解析を行う際の処理精度を考慮して、所定の分解能の第二切出画像を生成するための解像度変換を行うことができる。
【００１５】
また、請求項３の画像切出装置は、請求項２に記載の画像切出装置において、前記画像切出部が、前記第二切出画像の分解能が前記第一切出画像よりも高くなるように、前記第一切出画像及び前記第二切出画像を生成する、ことを特徴とする。
【００１６】
請求項３の発明によれば、低分解能の第一切出画像を用いて第二切出領域が設定されるから、この処理は低負荷で済む。また、高分解能の第二切出画像は解析処理に用いることができるから、高精度な解析を実現することができる。
【００１７】
また、請求項４の画像切出装置は、請求項１から３までのいずれか一項に記載の画像切出装置において、前記画像切出部が、前記第一切出画像及び前記第二切出画像を空間分割的または時分割的に多重化し、多重画像を生成する、ことを特徴とする。
【００１８】
請求項４の発明によれば、多重画像を一映像信号として構成することができるため、信号線の総数すなわち信号線のインターフェースの総数を減ずることが可能となり、運用性の向上及びコストの削減が可能となる。
【００１９】
さらに、請求項５の画像解析装置は、入力画像から被写体を含む部分領域の画像を切り出し、前記部分領域の切出画像を解析する画像解析装置において、請求項１から３までのいずれか一項の画像切出装置と、前記画像切出装置により切り出された前記第二切出画像に基づいて、当該第二切出画像に含まれる前記被写体の属性を求める画像解析部と、を備えたことを特徴とする。
【００２０】
請求項５の発明によれば、画像切出装置が、被写体を含む領域を限定した第二切出画像を切り出し、画像解析部が、高分解能の第二切出画像を用いて被写体の属性を求めることで、演算負荷を削減しつつ解析精度を向上させることができる。
【００２１】
また、請求項６の画像解析装置は、入力画像から被写体を含む部分領域の画像を切り出し、前記部分領域の切出画像を解析する画像解析装置において、請求項４の画像切出装置と、前記画像切出装置により生成された前記多重画像から前記第二切出画像を分離し、当該第二切出画像に含まれる前記被写体の属性を求める画像解析部と、を備えたことを特徴とする。
【００２２】
請求項６の発明によれば、画像切出装置が、被写体を含む領域を限定した第二切出画像を切り出し、画像解析部が、多重画像から分離した高分解能の第二切出画像を用いて被写体の属性を求めることで、演算負荷を削減しつつ解析精度を向上させることができる。
【００２３】
さらに、請求項７のプログラムは、コンピュータを、請求項１から４までのいずれか一項に記載の画像切出装置として機能させることを特徴とする。
【００２４】
また、請求項８のプログラムは、コンピュータを、請求項５または６に記載の画像解析装置として機能させることを特徴とする。
【発明の効果】
【００２５】
以上のように、本発明によれば、入力画像から被写体を含む部分領域を切り出し、部分領域の切出画像を解析する際に、切出処理の負荷を低減し、かつ解析処理の高精度化を実現することができ、結果として処理の効率化を図ることができる。また、装置の入力インターフェース部の広帯域化を抑え、装置全体の製作コストを低減することが可能となる。
【図面の簡単な説明】
【００２６】
【図１】実施例１の画像切出装置及び画像解析装置の構成の一例を示すブロック図である。
【図２】実施例１における画像切出部の構成の一例を示す図である。
【図３】実施例１における画像切出装置の処理の一例を示すフローチャートである。
【図４】入力画像Ｉの一例を示す図である。
【図５】第一切出領域Ａm及び第二切出領域Ｂnの一例を示す図である。
【図６】実施例２の画像切出装置及び画像解析装置の構成の一例を示すブロック図である。
【図７】実施例２における画像切出部の構成の一例を示す図である。
【図８】実施例２における画像切出装置の処理の一例を示すフローチャートである。
【図９】切出多重画像Ｌのレイアウトの一例を示す図である。
【図１０】切出多重画像Ｌの一例を示す図である。
【発明を実施するための形態】
【００２７】
以下、本発明を実施するための形態について図面を用いて詳細に説明する。本発明は、入力画像内において被写体を含む部分領域を設定し、入力画像から、設定した部分領域の画像を切り出す際に、入力画像から、切り出し対象の部分領域を直接設定するのではなく、入力画像から低解像画像を生成し、低解像画像から部分領域を設定し、入力画像から部分領域の画像を切り出すことを特徴とする。また、本発明は、部分領域の切出画像を解析する。
【００２８】
これにより、切り出し対象の部分領域は低解像画像を用いて設定されるから、切出処理は、入力画像を用いるよりも低負荷で実現することができる。また、解析処理は、入力画像から切り出された部分領域の切出画像を用いるから、高精度で実現することができる。つまり、切出処理及び解析処理の効率化を図ることができ、装置の入力インターフェース部の広帯域化を抑え、装置全体の製作コストを低減することが可能となる。
【００２９】
〔実施例１〕
まず、実施例１について説明する。実施例１は、入力画像Ｉから第一切出領域Ａ1〜ＡMで指定される第一切出画像Ｊ1〜ＪMを切り出し、第一切出画像Ｊ1〜ＪMを用いて第二切出領域Ｂ1〜ＢNを設定し、第二切出領域Ｂ1〜ＢNで指定される第二切出画像Ｋ1〜ＫNを切り出し、第二切出画像Ｋ1〜ＫN（及び第一切出画像Ｊ1〜ＪM）を用いて解析を行う例である。Ｍ，Ｎは１以上の整数である。
【００３０】
図１は、実施例１の画像切出装置及び画像解析装置の構成の一例を示すブロック図である。この画像切出装置１−１は、画像切出部１０−１及び注視領域設定部（切出領域設定部）１１を備えている。画像解析装置２−１は、画像切出装置１−１及び画像解析部１２−１を備えている。
【００３１】
（画像切出装置１−１／構成）
画像切出装置１−１の画像切出部１０−１は、入力画像Ｉを入力すると共に、予め設定されたＭ個の第一切出領域Ａ1〜ＡMを入力する。そして、画像切出部１０−１は、入力画像Ｉから、第一切出領域Ａ1〜ＡMで指定されるＭ個の部分領域の画像（第一切出画像）Ｊ1〜ＪMを切り出す。画像切出部１０−１は、Ｍ個の第一切出画像Ｊ1〜ＪMを注視領域設定部１１（及び画像解析部１２−１）に出力する。
【００３２】
ここで、第一切出領域Ａ1〜ＡMは、予め設定された固定の領域であっても構わないし、ユーザにより手動で設定される領域であっても構わない。第一切出領域Ａ1〜ＡM及び後述する第二切出領域Ｂ1〜ＢNは、入力画像Ｉ内の位置及び大きさにより定められる。
【００３３】
画像切出部１０−１は、注視領域設定部１１からＮ個の第二切出領域Ｂ1〜ＢNを入力し、入力画像Ｉから、第二切出領域Ｂ1〜ＢNで指定されるＮ個の部分領域の画像（第二切出画像）Ｋ1〜ＫNを切り出す。画像切出部１０−１は、Ｎ個の第二切出画像Ｋ1〜ＫNを画像解析部１２−１に出力する。
【００３４】
尚、画像切出部１０−１は、第一切出画像Ｊ1〜ＪMの各々の解像度（画素数）を、第一切出領域Ａ1〜ＡMの各々の大きさに応じて可変としても構わないし、各第一切出領域Ａ1〜ＡMの縦横比を保った上で水平または垂直方向の解像度を固定値としても構わない。入力画像Ｉにおける各第一切出領域Ａ1〜ＡMの解像度と、各第一切出画像Ｊ1〜ＪMとが異なる場合には、補間処理（例えば、移動平均フィルタ、双三次補間、双一次補間、Lanczos（ランチョス）補間、最近傍補間等）を施して、解像度変換を行うものとする。
【００３５】
また、Ｍ個の第一切出画像Ｊ1〜ＪMは、全て同じ解像度であっても、異なる解像度であっても構わないし、時間的に解像度を変化させても、変化させなくても構わない。好適には、第一切出画像Ｊ1〜ＪMの各々の解像度は、時間的に不変とする。
【００３６】
さらに、画像切出部１０−１は、第二切出画像Ｋ1〜ＫNの各々の解像度を、第二切出領域Ｂ1〜ＢNの各々の大きさに応じて可変としても構わないし、各第二切出領域Ｂ1〜ＢNの縦横比を保った上で水平または垂直方向の解像度を固定値としても構わない。入力画像Ｉにおける各第二切出領域Ｂ1〜ＢNの解像度と、各第二切出画像Ｋ1〜ＫNとが異なる場合には、前述と同様の補間処理を施して、解像度変換を行うものとする。
【００３７】
また、Ｎ個の第二切出画像Ｋ1〜ＫNは、全て同じ解像度であっても、異なる解像度であっても構わないし、時間的に解像度を変化させても、変化させなくても構わない。好適には、第二切出画像Ｋ1〜ＫNの各々の解像度は、時間的に不変とする。後述する画像切出部１０−２についても同様である。
【００３８】
図２は、図１に示した画像切出部１０−１の構成の一例を示す図である。この画像切出部１０−１は、第一切出手段２０及び第二切出手段２１を備えている。
【００３９】
第一切出手段２０は、入力画像Ｉを入力すると共に、予め設定されたＭ個の第一切出領域Ａ1〜ＡMを入力する。そして、第一切出手段２０は、入力画像Ｉから第一切出領域Ａ1〜ＡMで指定される第一切出画像Ｊ1〜ＪMを切り出し、Ｍ個の第一切出画像Ｊ1〜ＪMを注視領域設定部１１（及び画像解析部１２−１）に出力する。
【００４０】
例えば、第一切出手段２０は、入力画像Ｉから第一切出領域Ａ1〜ＡMで指定される画像をそれぞれ切り出し、切り出したそれぞれの画像に対して前述の補間処理を施すと共に、解像度変換処理を施すことで、第一切出画像Ｊ1〜ＪMを生成する。これにより、例えば入力画像Ｉよりも低い解像度の第一切出画像Ｊ1〜ＪMが得られる。
【００４１】
第二切出手段２１は、注視領域設定部１１により注視領域として設定されたＮ個の第二切出領域Ｂ1〜ＢNを入力し、入力画像Ｉから第二切出領域Ｂ1〜ＢNで指定される第二切出画像Ｋ1〜ＫNを切り出す。そして、第二切出手段２１は、Ｎ個の第二切出画像Ｋ1〜ＫNを画像解析部１２−１に出力する。
【００４２】
例えば、第二切出手段２１は、入力画像Ｉから第二切出領域Ｂ1〜ＢNで指定される画像をそれぞれ切り出し、切り出したそれぞれの画像に対して前述の補間処理を施すと共に、解像度変換処理を施し、第二切出画像Ｋ1〜ＫNを生成する。
【００４３】
図１に戻って、注視領域設定部１１は、画像切出部１０−１からＭ個の第一切出画像Ｊ1〜ＪMを入力する。そして、注視領域設定部１１は、第一切出画像Ｊ1〜ＪMを解析することで、第一切出画像Ｊ1〜ＪMに基づき、画像切出部１０−１が切り出すべき第二切出画像Ｋ1〜ＫNの位置及び大きさを注視領域に設定し、これを第二切出領域Ｂ1〜ＢNとする。注視領域設定部１１は、Ｎ個の第二切出領域Ｂ1〜ＢNを画像切出部１０−１に出力する。
【００４４】
例えば、注視領域設定部１１は、第一切出画像Ｊ1〜ＪMに含まれる所定の被写体（例えば、人物、人物の顔、物体（ボールまたは自動車等））を検出する。そして、注視領域設定部１１は、入力画像Ｉにおける第一切出領域Ａ1〜ＡMの位置及び大きさを考慮して、入力画像Ｉにおける所定の被写体の位置及び大きさを求め、被写体の位置及び大きさに基づいて第二切出領域Ｂ1〜ＢNを設定する。
【００４５】
具体的には、注視領域設定部１１は、例えば公知のクロマキーまたは背景差分法を用いて、第一切出画像Ｊ1〜ＪMから前景領域（前景領域が複数の連結領域からなる場合には、そのうちＮ個以下の各連結領域）を分離し、この前景領域を所定の被写体を含む領域として第二切出領域Ｂ1〜ＢNを設定する。
【００４６】
また、注視領域設定部１１は、例えばＨaar-like（ハールライク）特徴に基づくBoosting Cascade（ブースティングカスケード）識別器による顔検出手法（前述の非特許文献１）を用いて、第一切出画像Ｊ1〜ＪMから特定の被写体（複数の被写体を検出した場合には、そのうちＮ個以下の各被写体）を検出し、被写体の位置及び大きさに基づいて第二切出領域Ｂ1〜ＢNを設定する。
【００４７】
ここで、注視領域設定部１１は、第二切出領域Ｂ1〜ＢNを設定する際に、好ましくは、ある過去の時点（例えばｔ−１）における第一切出画像Ｊ1〜ＪMを解析し、現時点（例えばｔ）における第二切出領域Ｂ1〜ＢNを設定する。
【００４８】
画像切出装置１−１の起動直後等のように、注視領域設定部１１が過去の時点の第一切出画像Ｊ1〜ＪMを得ることができない場合には、注視領域設定部１１は、現時点の第二切出領域Ｂ1〜ＢNを画像切出部１０−１に出力しなくても構わない。また、注視領域設定部１１は、予め設定された固定の領域を、現時点の第二切出領域Ｂ1〜ＢNとして出力しても構わない。
【００４９】
尚、入力画像Ｉ内の被写体の移動速度が速い場合には、注視領域設定部１１により第一切出画像Ｊ1〜ＪMに基づき設定される第二切出領域Ｂ1〜ＢNと、画像切出部１０−１により入力画像Ｉから切り出される第二切出領域Ｂ1〜ＢNの第二切出画像Ｋ1〜ＫNとが時間的に対応しないことがあり得る。これは、現時点の第二切出画像Ｋ1〜ＫNを切り出す際に、過去の時点の第二切出領域Ｂ1〜ＢNを用いることとなるからである。
【００５０】
この場合、注視領域設定部１１は、過去の時点と現時点の時刻差を考慮し、第一切出画像Ｊ1〜ＪMの解析結果に対して時間方向の予測処理を適用し、その予測結果を第二切出領域Ｂ1〜ＢNとして設定しても構わない。
【００５１】
例えば、注視領域設定部１１は、入力画像Ｉ内における第二切出領域Ｂ1〜ＢNの位置、大きさ及びこれらの時間微分（速度）（または時間差分）を状態量とし、第一切出画像Ｊ1〜ＪMを観測値とするフィルタ（例えばカルマンフィルタ）を用いる。注視領域設定部１１は、当該フィルタにより状態量を予測し、予測した状態量のうち、位置及び大きさを第二切出領域Ｂ1〜ＢNとして設定する。
【００５２】
これにより、入力画像Ｉ内の被写体が動いている場合に、その動きを考慮した現時点の第二切出領域Ｂ1〜ＢNが予測される。したがって、入力画像Ｉ内の被写体の移動速度が速い場合であっても、注視領域設定部１１は、精度の高い現時点の第二切出領域Ｂ1〜ＢNを設定することができる。
【００５３】
（画像切出装置１−１／処理）
次に、図１に示した画像切出装置１−１の処理について詳細に説明する。図３は、図１に示した画像切出部１０−１の処理の一例を示すフローチャートである。画像切出部１０−１は、入力画像Ｉを入力すると共に（ステップＳ３０１）、第一切出領域Ａ1〜ＡMを入力する（ステップＳ３０２）。
【００５４】
画像切出部１０−１の第一切出手段２０は、入力画像Ｉから、第一切出領域Ａ1〜ＡMで指定される第一切出画像Ｊ1〜ＪMを切り出す（ステップＳ３０３）。
【００５５】
ここで、入力画像Ｉにおける時刻ｔ及び画像座標（ｘ，ｙ）の画素値をＩ（ｔ，ｘ，ｙ）とする。また、Ｍ個の第一切出領域Ａ1〜ＡMを構成するｍ番目の領域をＡmとし、Ｍ個の第一切出画像Ｊ1〜ＪMを構成するｍ番目の画像をＪmとする（ｍは１以上Ｍ以下の整数）。また、入力画像Ｉの解像度をＰ×Ｑ画素とし、ｍ番目の第一切出領域Ａmを左上頂点座標(ｒm，ｓm)の大きさＲm×Ｓm画素の領域とし、さらに、ｍ番目の第一切出画像Ｊmの解像度をＴm×Ｕm画素とし、補間関数をφとする。
【００５６】
第一切出手段２０は、以下の式にて、入力画像Ｉから第一切出画像Ｊmを切り出す。
【数１】
2020126523.tif 000003
【００５７】
総和をとる領域Ｖ（ｘ，ｙ）は、少なくとも以下の式を満たすものとする。
【数２】
2020126523.tif 000004
Ｌx及びＬyは、補間関数φの非ゼロの値が定義されている水平方向及び垂直方向の範囲（半径）をそれぞれ表すものとする。
【００５８】
補間関数φとして、例えば２次元Lanczos-3関数を用いる。
【数３】
2020126523.tif 000005
尚、前記式（３）の補間関数φを用いる場合、Ｌx＝Ｌy＝３である。
【００５９】
例えば、入力画像Ｉの解像度を７６８０×４３２０画素、第一切出領域Ａmの数をＭ＝１、第一切出領域Ａ1を左上頂点座標（０，９６０）の大きさ７６８０×２４００画素の領域とする。また、第一切出画像Ｊ1の解像度を１９２０×６００画素とし、補間関数φを、移動平均フィルタを用いた場合の関数とする。
【００６０】
この場合、第一切出手段２０は、以下の式にて、入力画像Ｉから第一切出画像Ｊ1を切り出す。
【数４】
2020126523.tif 000006
【００６１】
注視領域設定部１１は、画像切出部１０−１の第一切出手段２０により切り出された第一切出画像Ｊ1〜ＪMを解析することで、第一切出画像Ｊ1〜ＪMに基づき注視領域である第二切出領域Ｂ1〜ＢNを設定する（ステップＳ３０４）。
【００６２】
画像切出部１０−１の第二切出手段２１は、入力画像Ｉから、注視領域設定部１１により設定された第二切出領域Ｂ1〜ＢNで指定される第二切出画像Ｋ1〜ＫNを切り出す（ステップＳ３０５）。そして、第二切出手段２１は、第二切出画像Ｋ1〜ＫNを画像解析部１２−１に出力する（ステップＳ３０６）。
【００６３】
ここで、Ｎ個の第二切出領域Ｂ1〜ＢNを構成するｎ番目の領域をＢnとし、Ｎ個の第二切出画像Ｋ1〜ＫNを構成するｎ番目の画像をＫnとする（ｎは１以上Ｎ以下の整数）。また、入力画像Ｉの解像度をＰ×Ｑ画素とし、ｎ番目の第二切出領域Ｂnを左上頂点座標(ｒ’n，ｓ’n)の大きさＲ’n×Ｓ’n画素の領域とし、さらに、ｎ番目の第二切出画像Ｋnの解像度をＴ’m×Ｕ’m画素とし、補間関数をφとする。
【００６４】
第二切出手段２１は、以下の式にて、入力画像Ｉから第二切出画像Ｋnを切り出す。
【数５】
2020126523.tif 000007
【００６５】
総和をとる領域Ｖ’（ｘ，ｙ）は、少なくとも以下の式を満たすものとする。
【数６】
2020126523.tif 000008
【００６６】
（画像解析部１２−１）
図１に戻って、画像解析装置２−１の画像解析部１２−１は、画像切出装置１−１から第二切出画像Ｋ1〜ＫN（及び第一切出画像Ｊ1〜ＪM）を入力する。そして、画像解析部１２−１は、第二切出画像Ｋ1〜ＫN（及び第一切出画像Ｊ1〜ＪM）を解析することで、第二切出画像Ｋ1〜ＫN（及び第一切出画像Ｊ1〜ＪM）に基づき、解析結果を生成する。画像解析部１２−１は、解析結果を外部へ出力する。
【００６７】
例えば、画像解析部１２−１は、第二切出画像Ｋ1〜ＫNに含まれる被写体の属性を求めるための解析を行う。この場合、画像解析部１２−１は、第二切出画像Ｋ1〜ＫN（及び第一切出画像Ｊ1〜ＪM）に基づいて、個人を特定する識別子、顔の表情（喜怒哀楽等）を分類する識別子、被写体の姿勢（例えば顔の向き）を表す角度情報、被写体の形状（例えば人物の仕草）を分類する識別子、スポーツ選手のゼッケンの数字等の属性を求める。第二切出画像Ｋ1〜ＫN（及び第一切出画像Ｊ1〜ＪM）に基づいて被写体の属性を求める手法は既知であるため、ここでは詳細な説明を省略する。
【００６８】
尚、画像解析部１２−１は、画像切出装置１−１から第二切出画像Ｋ1〜ＫN（及び第一切出画像Ｊ1〜ＪM）に加え、注視領域設定部１１により設定された第二切出領域Ｂ1〜ＢNも入力するようにしてもよい。この場合、画像解析部１２−１は、第二切出画像Ｋ1〜ＫNに含まれる被写体の属性を求めると共に、第二切出領域Ｂ1〜ＢNに基づいて、入力画像Ｉ内における被写体の位置を特定し、解析結果として、被写体の属性及び位置を出力する。後述する図６に示す画像解析部１２−２についても同様である。
【００６９】
（入力画像Ｉ、第一切出領域Ａm及び第二切出領域Ｂnの例）
次に、入力画像Ｉ、第一切出領域Ａm及び第二切出領域Ｂnの例について説明する。図４は、入力画像Ｉの一例を示す図であり、図５は、第一切出領域Ａm及び第二切出領域Ｂnの一例を示す図であり、Ｍ＝１及びＮ＝４の場合を示している。入力画像Ｉの解像度は７６８０×４３２０画素であり、第一切出領域Ａmの画像の解像度は７６８０×２４００画素であるものとする。
【００７０】
画像切出装置１−１の画像切出部１０−１に備えた第一切出手段２０により、図４に示す入力画像Ｉから、図５に示す第一切出領域Ａ1の画像（被写体である人間を含む画像）が切り出され、当該画像の画素値列に対し、必要に応じて補間処理及び解像度変換処理が施され、所定の解像度に変換される。これにより、入力画像Ｉから第一切出領域Ａ1の第一切出画像Ｊ1が切り出される。
【００７１】
また、画像切出部１０−１に備えた第二切出手段２１により、図４に示す入力画像Ｉから、図５に示す第二切出領域Ｂ1〜Ｂ4の画像（被写体である人間を含む画像）が切り出され、当該画像の画素値列に対し、必要に応じて補間処理及び解像度変換処理が施され、所定の解像度に変換される。これにより、入力画像Ｉから第二切出領域Ｂ1〜Ｂ4の第二切出画像Ｋ1〜Ｋ4が切り出される。
【００７２】
以上のように、本発明の実施形態の画像切出装置１−１によれば、画像切出部１０−１は、入力画像Ｉから、予め設定された第一切出領域Ａ1〜ＡMの画像を切り出し、切り出した画像に対し必要に応じて補間処理及び解像度変換処理を施すことで、第一切出画像Ｊ1〜ＪMを生成する。
【００７３】
注視領域設定部１１は、画像切出部１０−１により生成された第一切出画像Ｊ1〜ＪMを解析することで、例えば第一切出画像Ｊ1〜ＪMに含まれる被写体を検出し、被写体の位置及び大きさに基づいて、注視領域である第二切出領域Ｂ1〜ＢNを設定する。
【００７４】
画像切出部１０−１は、入力画像Ｉから、注視領域設定部１１により設定された第二切出領域Ｂ1〜ＢNで指定される画像を切り出し、切り出した画像に対し必要に応じて補間処理及び解像度変換処理を施すことで、第二切出画像Ｋ1〜ＫNを生成する。
【００７５】
ここで、画像切出部１０−１は、第二切出画像Ｋ1〜ＫNの分解能が第一切出画像Ｊ1〜ＪMよりも高くなるように、解像度変換処理を行うことが望ましい。つまり、第一切出画像Ｊ1〜ＪMの分解能は、入力画像Ｉ及び第二切出画像Ｋ1〜ＫNよりも低く、第二切出画像Ｋ1〜ＫNの分解能は、入力画像Ｉと同じまたはこれよりも低く、かつ第一切出画像Ｊ1〜ＪMよりも高いことが望ましい。尚、解像度は、画像を構成する画素の密度を示し、分解能は、画像内の対象を識別可能な能力を示す。
【００７６】
第二切出画像Ｋ1〜ＫNの分解能が第一切出画像Ｊ1〜ＪMよりも高いことから、注視領域設定部１１は、低分解能の第一切出画像Ｊ1〜ＪMを用いて第二切出領域Ｂ1〜ＢNを設定すればよく、低負荷な処理で済む。また、画像切出部１０−１により第二切出領域Ｂ1〜ＢNを用いて切り出された高分解能の第二切出画像Ｋ1〜ＫNは、解析処理に用いることができ、高精度な解析を実現することができる。
【００７７】
したがって、分解能よりも画角の広さが重視される切出処理と、画角の広さよりも分解能が重視される解析処理とを、効率的に実行することができる。つまり、切出処理の負荷を低減し、かつ解析処理の高精度化を実現することができ、結果として処理の効率化を図ることができる。また、装置の入力インターフェース部の広帯域化を抑え、装置全体の製作コストを低減することが可能となる。
【００７８】
また、本発明の実施形態の画像解析装置２−１によれば、画像解析部１２−１は、画像切出部１０−１により生成された第二切出画像Ｋ1〜ＫN（及び第一切出画像Ｊ1〜ＪM）を解析することで、第二切出画像Ｋ1〜ＫNに含まれる被写体の属性を求め、被写体毎の属性を解析結果として生成する。
【００７９】
ここで、前述のように第二切出画像Ｋ1〜ＫNの分解能が第一切出画像Ｊ1〜ＪMよりも高い場合に、注視領域設定部１１は、低分解能の第一切出画像Ｊ1〜ＪMを用いて、第一切出領域Ａ1〜ＡMよりも限定された第二切出領域Ｂ1〜ＢNを設定する。そして、画像解析部１２−１は、第二切出領域Ｂ1〜ＢNに対応する高分解能の第二切出画像Ｋ1〜ＫNを解析する。
【００８０】
これにより、入力画像Ｉを直接解析するよりも第二切出画像Ｋ1〜ＫNを解析する方が、解析範囲が狭いから、処理負荷を削減することができる。つまり、画像解析装置２−１全体として処理負荷を削減しつつ、解析精度を向上させることができる。したがって、切出処理及び解析処理の負荷を低減し、かつ解析処理の高精度化を実現することができ、結果として処理の効率化を図ることができる。また、装置の入力インターフェース部の広帯域化を抑え、装置全体の製作コストを低減することが可能となる。
【００８１】
〔実施例２〕
次に、実施例２について説明する。実施例２は、実施例１と同様の処理にて切り出した第一切出画像Ｊ1〜ＪM及び第二切出画像Ｋ1〜ＫNを多重化して切出多重画像Ｌを生成し、切出多重画像Ｌを用いて解析を行う例である。
【００８２】
図６は、実施例２の画像切出装置及び画像解析装置の構成の一例を示すブロック図である。この画像切出装置１−２は、画像切出部１０−２及び注視領域設定部１１を備えている。画像解析装置２−２は、画像切出装置１−２及び画像解析部１２−２を備えている。
【００８３】
（画像切出装置１−２／構成）
画像切出装置１−２の画像切出部１０−２は、図１に示した画像切出部１０−１と同様に、入力画像Ｉ及び第一切出領域Ａ1〜ＡMを入力し、入力画像Ｉから、第一切出領域Ａ1〜ＡMで指定される第一切出画像Ｊ1〜ＪMを切り出す。そして、画像切出部１０−２は、第一切出画像Ｊ1〜ＪMを注視領域設定部１１に出力する。
【００８４】
画像切出部１０−２は、図１に示した画像切出部１０−１と同様に、注視領域設定部１１から第二切出領域Ｂ1〜ＢNを入力し、入力画像Ｉから、第二切出領域Ｂ1〜ＢNで指定される第二切出画像Ｋ1〜ＫNを切り出す。
【００８５】
画像切出部１０−２は、第一切出画像Ｊ1〜ＪM及び第二切出画像Ｋ1〜ＫNを空間分割的に１系統の画像に多重化し、切出多重画像Ｌを生成する。そして、画像切出部１０−２は、切出多重画像Ｌを画像解析部１２−２に出力する。
【００８６】
図７は、図６に示した画像切出部１０−２の構成の一例を示す図である。この画像切出部１０−２は、第一切出手段２０、第二切出手段２１及び多重手段２２を備えている。
【００８７】
第一切出手段２０及び第二切出手段２１は、図２に示したものと同様であるから、ここでは説明を省略する。第一切出手段２０は、第一切出画像Ｊ1〜ＪMを多重手段２２及び注視領域設定部１１に出力し、第二切出手段２１は、第二切出画像Ｋ1〜ＫNを多重手段２２に出力する。
【００８８】
多重手段２２は、第一切出手段２０から第一切出画像Ｊ1〜ＪMを入力すると共に、第二切出手段２１から第二切出画像Ｋ1〜ＫNを入力する。そして、多重手段２２は、第一切出画像Ｊ1〜ＪM及び第二切出画像Ｋ1〜ＫNを空間分割的に１系統の画像に多重化し、切出多重画像Ｌを生成する。多重手段２２は、切出多重画像Ｌを画像解析部１２−２に出力する。
【００８９】
図６に戻って、注視領域設定部１１は、画像切出部１０−２から第一切出画像Ｊ1〜ＪMを入力し、第一切出画像Ｊ1〜ＪMを解析することで、第一切出画像Ｊ1〜ＪMに基づき第二切出領域Ｂ1〜ＢNを設定する。そして、注視領域設定部１１は、第二切出領域Ｂ1〜ＢNを画像切出部１０−２に出力する。注視領域設定部１１については、図１にて説明済みであるから、ここでは詳細な説明を省略する。
【００９０】
（画像切出装置１−２／処理）
次に、図６に示した画像切出装置１−２の処理について詳細に説明する。図８は、図６に示した画像切出部１０−２の処理の一例を示すフローチャートである。図８において、ステップＳ８０１〜Ｓ８０５は、図３に示したステップＳ３０１〜Ｓ３０５と同様であるから、ここでは説明を省略する。
【００９１】
画像切出部１０−２の多重手段２２は、第一切出手段２０によりステップＳ８０３にて切り出された第一切出画像Ｊ1〜ＪM、及び第二切出手段２１によりステップＳ８０５にて切り出された第二切出画像Ｋ1〜ＫNを多重化し、１つの画像である切出多重画像Ｌを生成する（ステップＳ８０６）。そして、多重手段２２は、切出多重画像Ｌを画像解析部１２−２に出力する（ステップＳ８０７）。
【００９２】
（画像解析部１２−２）
図６に戻って、画像解析装置２−２の画像解析部１２−２は、画像切出装置１−２から切出多重画像Ｌを入力する。そして、画像解析部１２−２は、切出多重画像Ｌから第二切出画像Ｋ1〜ＫN及び第一切出画像Ｊ1〜ＪMを分離する。
【００９３】
画像解析部１２−２は、図１に示した画像解析部１２−１と同様に、第二切出画像Ｋ1〜ＫN（及び第一切出画像Ｊ1〜ＪM）を解析することで、第二切出画像Ｋ1〜ＫN（及び第一切出画像Ｊ1〜ＪM）に基づき、解析結果を生成する。画像解析部１２−２は、解析結果を外部へ出力する。
【００９４】
（切出多重画像Ｌの例）
次に、画像切出装置１−２の画像切出部１０−２に備えた多重手段２２により生成される切出多重画像Ｌの例について説明する。
【００９５】
図９は、切出多重画像Ｌのレイアウトの一例を示す図である。第一切出手段２０により、１９２０×６００画素からなる第一切出画像Ｊ1が切り出され、第二切出手段２１により、それぞれが４８０×４８０画素からなる第二切出画像Ｋ1〜Ｋ4が切り出されたものとする。
【００９６】
多重手段２２により、１９２０×６００画素からなる第一切出画像Ｊ1及びそれぞれが４８０×４８０画素からなる第二切出画像Ｋ1〜Ｋ4が多重化される。そして、図９に示す１９２０×１０８０画素からなる切出多重画像Ｌが生成される。
【００９７】
これにより、画像切出装置１−２は、例えば３Ｇ−ＳＤＩ信号のような既存の普及した汎用のインターフェースを用いることで、第一切出画像Ｊ1及び第二切出画像Ｋ1〜Ｋ4を切出多重画像Ｌとして同時に出力することができる。また、切出多重画像Ｌを入力する画像解析部１２−２の入力部に、汎用のインターフェースを用いることができる。
【００９８】
図１０は、切出多重画像Ｌの一例を示す図である。第一切出手段２０により、図５に示した７６８０×４３２０画素からなる入力画像Ｉから、第一切出領域Ａ1の画像が切り出され、当該画像に補間処理及び解像度変換処理が施され、図１０に示す１９２０×６００画素からなる第一切出画像Ｊ1が生成されたものとする。また、第二切出手段２１により、図５に示した７６８０×４３２０画素からなる入力画像Ｉから、第二切出領域Ｂ1〜Ｂ4の画像が４８０×４８０画素からなる第二切出画像Ｋ1〜Ｋ4として切り出されたものとする。
【００９９】
多重手段２２により、１９２０×６００画素からなる第一切出画像Ｊ1及びそれぞれが４８０×４８０画素からなる第二切出画像Ｋ1〜Ｋ4が多重化され、図１０に示す１９２０×１０８０画素からなる切出多重画像Ｌが生成される。つまり、８Ｋの解像度を有する入力画像Ｉから、２Ｋの解像度を有する切出多重画像Ｌが生成される。この２Ｋの解像度を有する切出多重画像Ｌは、１９２０×６００画素からなる低分解能の第一切出画像Ｊ1と、それぞれが４８０×４８０画素からなる高分解能の第二切出画像Ｋ1〜Ｋ4から構成される。
【０１００】
このように、図１０に示した切出多重画像Ｌにおいて、上側５／９の領域には、入力画像Ｉの中央付近の広範な領域が縮小された画像として、低分解能の第一切出画像Ｊ1が配置される。また、下側４／９の領域には、入力画像Ｉ内の被写体が切り出された画像として、高分解能の第二切出画像Ｋ1〜Ｋ4が配置される。
【０１０１】
尚、典型的には、図１０に示した切出多重画像Ｌにおいて、上側５／９の領域に配置される第一切出画像Ｊ1の第一切出領域Ａ1は、画像解析部１２−２による解析処理の開始前に設定され、解析処理中に変更されることは原則としてない。
【０１０２】
一方、下側４／９の領域に配置される第二切出画像Ｋ1〜Ｋ4の第二切出領域Ｂ1〜Ｂ4は、第一切出画像Ｊ1の時々刻々の変化に応じて、注視領域設定部１１により随時変更される。したがって、入力画像Ｉから切り出された第一切出画像Ｊ1内において、被写体の動きに追従した第二切出画像Ｋ1〜Ｋ4を得ることができる。
【０１０３】
以上のように、本発明の実施形態の画像切出装置１−２によれば、画像切出部１０−２は、入力画像Ｉから、予め設定された第一切出領域Ａ1〜ＡMの画像を切り出し、切り出した画像に対し必要に応じて補間処理及び解像度変換処理を施すことで、第一切出画像Ｊ1〜ＪMを生成する。
【０１０４】
注視領域設定部１１は、画像切出部１０−２により生成された第一切出画像Ｊ1〜ＪMを解析することで、例えば第一切出画像Ｊ1〜ＪMに含まれる被写体を検出し、被写体の位置及び大きさに基づいて、注視領域である第二切出領域Ｂ1〜ＢNを設定する。
【０１０５】
画像切出部１０−２は、入力画像Ｉから、注視領域設定部１１により設定された第二切出領域Ｂ1〜ＢNで指定される画像を切り出し、切り出した画像に対し必要に応じて補間処理及び解像度変換処理を施すことで、第二切出画像Ｋ1〜ＫNを生成する。そして、画像切出部１０−２は、第一切出画像Ｊ1〜ＪM及び第二切出画像Ｋ1〜ＫNを多重化し、切出多重画像Ｌを生成する。
【０１０６】
ここで、画像切出部１０−２は、実施例１の画像切出部１０−１と同様に、第二切出画像Ｋ1〜ＫNの分解能が第一切出画像Ｊ1〜ＪMよりも高くなるように、解像度変換処理を行うことが望ましい。つまり、第一切出画像Ｊ1〜ＪMの分解能は、入力画像Ｉ及び第二切出画像Ｋ1〜ＫNよりも低く、第二切出画像Ｋ1〜ＫNの分解能は、入力画像Ｉと同じまたはこれよりも低く、かつ第一切出画像Ｊ1〜ＪMよりも高いことが望ましい。
【０１０７】
これにより、実施例１と同様に、切出処理の負荷を低減し、かつ解析処理の高精度化を実現することができ、結果として処理の効率化を図ることができる。また、装置の入力インターフェース部の広帯域化を抑え、装置全体の製作コストを低減することが可能となる。
【０１０８】
また、画像切出部１０−２が、第一切出画像Ｊ1〜ＪM及び第二切出画像Ｋ1〜ＫNを切り出し、これらを多重化する際に、例えば３Ｇ−ＳＤＩ信号のような既存の普及した汎用のインターフェースの規格に適合するように、切出多重画像Ｌを生成することができる。したがって、汎用のインターフェースを用いて切出多重画像Ｌを入出力することができるから、入出力信号線の総数すなわち信号線のインターフェースの総数を減少させることができ、運用性を向上させると共にコストの削減が可能となる。
【０１０９】
また、本発明の実施形態の画像解析装置２−２によれば、画像解析部１２−２は、画像切出装置１−２により生成された切出多重画像Ｌから第二切出画像Ｋ1〜ＫN及び第一切出画像Ｊ1〜ＪMを分離する。そして、画像解析部１２−２は、第二切出画像Ｋ1〜ＫN（及び第一切出画像Ｊ1〜ＪM）を解析することで、第二切出画像Ｋ1〜ＫNに含まれる被写体の属性を求め、被写体毎の属性を解析結果として生成する。
【０１１０】
ここで、実施例１と同様に、第二切出画像Ｋ1〜ＫNの分解能が第一切出画像Ｊ1〜ＪMよりも高い場合に、注視領域設定部１１は、低分解能の第一切出画像Ｊ1〜ＪMを用いて、第一切出領域Ａ1〜ＡMよりも限定された第二切出領域Ｂ1〜ＢNを設定する。そして、画像解析部１２−２は、第二切出領域Ｂ1〜ＢNに対応する高分解能の第二切出画像Ｋ1〜ＫNを解析する。
【０１１１】
これにより、入力画像Ｉを直接解析するよりも第二切出画像Ｋ1〜ＫNを解析する方が、解析範囲が狭いから、処理負荷を削減することができる。つまり、画像解析装置２−２全体として処理負荷を削減しつつ、解析精度を向上させることができる。したがって、切出処理及び解析処理の負荷を低減し、かつ解析処理の高精度化を実現することができ、結果として処理の効率化を図ることができる。また、装置の入力インターフェース部の広帯域化を抑え、装置全体の製作コストを低減することが可能となる。
【０１１２】
以上、実施例１，２を挙げて本発明を説明したが、本発明は前記実施例１，２に限定されるものではなく、その技術思想を逸脱しない範囲で種々変形可能である。例えば、実施例２の画像切出装置１−２において、図７に示した画像切出部１０−２の多重手段２２は、第一切出画像Ｊ1〜ＪM及び第二切出画像Ｋ1〜ＫNを空間分割的に多重化し、切出多重画像Ｌを生成して出力するようにした。これに対し、多重手段２２は、第一切出画像Ｊ1〜ＪM及び第二切出画像Ｋ1〜ＫNのうちの一部または全部を時分割的に多重化し、多重画像として出力するようにしてもよい。
【０１１３】
図１０に示した例を参照して、入力画像Ｉのフレーム周波数が６０Ｈｚであり、第一切出画像Ｊ1及び第二切出画像Ｋ1〜Ｋ4の解像度が全て同一（例えば６４０×４８０画素）であるとする。この場合、多重手段２２は、解像度が同一の第一切出画像Ｊ1及び第二切出画像Ｋ1〜Ｋ4を、Ｊ1，Ｋ1，Ｋ2，Ｋ3，Ｋ4の順序の繰り返しで時分割的に多重化する。そして、多重手段２２は、この順序で繰り返された６４０×４８０画素のフレーム周波数３００Ｈｚの映像信号（多重画像）を出力する。
【０１１４】
尚、本発明の実施例１の画像切出装置１−１及び画像解析装置２−１、並びに実施例２の画像切出装置１−２及び画像解析装置２−２のハードウェア構成としては、通常のコンピュータを使用することができる。画像切出装置１−１，１−２及び画像解析装置２−１，２−２は、ＣＰＵ、ＲＡＭ等の揮発性の記憶媒体、ＲＯＭ等の不揮発性の記憶媒体、及びインターフェース等を備えたコンピュータによって構成される。
【０１１５】
画像切出装置１−１に備えた画像切出部１０−１及び注視領域設定部１１の各機能は、これらの機能を記述したプログラムをＣＰＵに実行させることによりそれぞれ実現される。また、画像解析装置２−１に備えた画像切出装置１−１及び画像解析部１２−１の各機能も、これらの機能を記述したプログラムをＣＰＵに実行させることによりそれぞれ実現される。
【０１１６】
さらに、画像切出装置１−２に備えた画像切出部１０−２及び注視領域設定部１１の各機能は、これらの機能を記述したプログラムをＣＰＵに実行させることによりそれぞれ実現される。また、画像解析装置２−２に備えた画像切出装置１−２及び画像解析部１２−２の各機能も、これらの機能を記述したプログラムをＣＰＵに実行させることによりそれぞれ実現される。
【０１１７】
これらのプログラムは、前記記憶媒体に格納されており、ＣＰＵに読み出されて実行される。また、これらのプログラムは、磁気ディスク（フロッピー（登録商標）ディスク、ハードディスク等）、光ディスク（ＣＤ−ＲＯＭ、ＤＶＤ等）、半導体メモリ等の記憶媒体に格納して頒布することもでき、ネットワークを介して送受信することもできる。
【符号の説明】
【０１１８】
１−１，１−２  画像切出装置
２−１，２−２  画像解析装置
１０−１，１０−２  画像切出部
１１  注視領域設定部（切出領域設定部）
１２−１，１２−２  画像解析部
２０  第一切出手段
２１  第二切出手段
２２  多重手段
Ｉ  入力画像
Ａ1〜ＡM，Ａm  第一切出領域
Ｂ1〜ＢN，Ｂn  第二切出領域
Ｊ1〜ＪM，Ｊm  第一切出画像
Ｋ1〜ＫN，Ｋn  第二切出画像
Ｌ  切出多重画像Ｌ
【図１】
2020126523.tif 000009
【図２】
2020126523.tif 000010
【図３】
2020126523.tif 000011
【図４】
2020126523.tif 000012
【図５】
2020126523.tif 000013
【図６】
2020126523.tif 000014
【図７】
2020126523.tif 000015
【図８】
2020126523.tif 000016
【図９】
2020126523.tif 000017
【図１０】
2020126523.tif 000018