(57)【要約】【課題】被写体の一部分を拡大して撮影した画像に対して、被写体の情報を関連付けることができるようにする。【解決手段】拡大部分・被写体画像関連付け部１０７は、入力された拡大画像の拡大部分が、被写体画像のどの部分にあたるかを関連付け、被写体認識部１０８は、被写体画像に写っている被写体が何であるかについての被写体情報を抽出し、さらに被写体画像のどの部分がその被写体のどの部分であるかを認識する。そして、被写体部分情報抽出部１０９は、被写体画像における拡大部分が被写体のどの部分であるかについての被写体部分情報を抽出し、拡大部分情報関連付け部１１０は、被写体部分情報を拡大画像と関連付ける。【選択図】図１
2014078846.tif 000002
【特許請求の範囲】
【請求項１】
被写体の一部分を拡大した拡大画像を取得する拡大画像取得手段と、
前記被写体の拡大部分を包含し、前記拡大画像よりも広範囲の前記被写体が写っている被写体画像を取得する被写体画像取得手段と、
前記拡大部分が、前記被写体画像のどの部分にあたるかを関連付ける第１の関連付け手段と、
前記被写体画像の被写体を認識する認識手段と、
前記第１の関連付け手段による関連付けに基づいて、前記被写体画像における前記拡大部分が、前記認識手段によって認識された被写体のどの部分であるかの被写体部分情報を抽出する抽出手段と、
前記抽出手段によって抽出された被写体部分情報を前記拡大画像と関連付ける第２の関連付け手段と、
を備えることを特徴とする画像認識装置。
【請求項２】
前記被写体は人体であることを特徴とする請求項１に記載の画像認識装置。
【請求項３】
前記拡大画像取得手段は、前記被写体の一部分を構図の中央に配置して取得し、
前記被写体画像取得手段は、前記拡大部分を構図の中央に配置して取得し、
前記第１の関連付け手段は、前記拡大部分が、前記被写体画像の中央部分であるものと関連付けることを特徴とする請求項１又は２に記載の画像認識装置。
【請求項４】
前記拡大画像及び被写体画像の撮影範囲を確認するための画像を表示する画像表示手段を更に備え、
前記画像表示手段は、画面の中央に、中央位置を示す印を表示することを特徴とする請求項３に記載の画像認識装置。
【請求項５】
前記被写体画像のどの部分を拡大画像として取得したかを指定する指定手段を更に備え、
前記第１の関連付け手段は、前記拡大部分が、前記指定手段によって指定された部分であるものと関連付けることを特徴とする請求項１又は２に記載の画像認識装置。
【請求項６】
前記拡大画像取得手段は、前記被写体画像の一部を前記拡大画像として切り出すことにより、前記拡大画像を取得することを特徴とする請求項１又は２に記載の画像認識装置。
【請求項７】
前記拡大画像取得手段及び被写体画像取得手段は、焦点距離を変更することが可能なレンズを備えたカメラを用いて撮影することにより、前記拡大画像と前記被写体画像とを取得することを特徴とする請求項１乃至６の何れか１項に記載の画像認識装置。
【請求項８】
前記拡大画像取得手段及び被写体画像取得手段は、焦点距離が互いに異なるレンズを備えた複数のカメラを用いて撮影することにより、前記拡大画像と前記被写体画像とを取得することを特徴とする請求項１乃至６の何れか１項に記載の画像認識装置。
【請求項９】
前記拡大画像取得手段及び被写体画像取得手段は、焦点距離が異なる複数のレンズを備えたカメラを用いて撮影することにより、前記拡大画像と前記被写体画像とを取得することを特徴とする請求項１乃至６の何れか１項に記載の画像認識装置。
【請求項１０】
前記拡大画像及び被写体画像の撮影範囲を確認するための画像を表示する画像表示手段を更に備え、
前記画像表示手段は、前記拡大画像取得手段により取得される拡大画像を表示することを特徴とする請求項１乃至３の何れか１項に記載の画像認識装置。
【請求項１１】
前記拡大画像及び被写体画像の撮影範囲を確認するための画像を表示する画像表示手段を更に備え、
前記画像表示手段は、前記拡大画像取得手段により取得される拡大画像と前記被写体画像取得手段により取得される被写体画像とを表示することを特徴とする請求項１乃至３の何れか１項に記載の画像認識装置。
【請求項１２】
前記拡大画像及び被写体画像の撮影範囲を確認するための画像を表示する画像表示手段を更に備え、
前記画像表示手段は、前記拡大画像取得手段により取得される拡大画像と前記被写体画像取得手段により取得される被写体画像とを所定時間ごとに切り替えて表示することを特徴とする請求項１乃至３の何れか１項に記載の画像認識装置。
【請求項１３】
前記拡大画像及び被写体画像の撮影範囲を確認するための画像を表示する画像表示手段と、
前記画像表示手段に表示される画像を切り替える切り替え手段と、を更に備え、
前記画像表示手段は、前記切り替え手段による切り替えにより、前記拡大画像取得手段により取得される拡大画像と前記被写体画像取得手段により取得される被写体画像とを切り替えて表示することを特徴とする請求項１乃至３の何れか１項に記載の画像認識装置。
【請求項１４】
被写体の一部分を拡大した拡大画像を取得する拡大画像取得手段と、
前記被写体の拡大部分を包含し、前記拡大画像よりも広範囲の前記被写体が写っている被写体画像を取得する被写体画像取得手段と、
前記被写体画像の被写体を認識する認識手段と、
前記認識手段によって認識された被写体に関する被写体情報を前記拡大画像と関連付ける関連付け手段と、
を備えることを特徴とする画像認識装置。
【請求項１５】
被写体の一部分を拡大した拡大画像を取得する拡大画像取得工程と、
前記被写体の拡大部分を包含し、前記拡大画像よりも広範囲の前記被写体が写っている被写体画像を取得する被写体画像取得工程と、
前記拡大部分が、前記被写体画像のどの部分にあたるかを関連付ける第１の関連付け工程と、
前記被写体画像の被写体を認識する認識工程と、
前記第１の関連付け工程における関連付けに基づいて、前記被写体画像における前記拡大部分が、前記認識工程において認識された被写体のどの部分であるかの被写体部分情報を抽出する抽出工程と、
前記抽出工程において抽出された被写体部分情報を前記拡大画像と関連付ける第２の関連付け工程と、
を備えることを特徴とする画像認識方法。
【請求項１６】
被写体の一部分を拡大した拡大画像を取得する拡大画像取得工程と、
前記被写体の拡大部分を包含し、前記拡大画像よりも広範囲の前記被写体が写っている被写体画像を取得する被写体画像取得工程と、
前記被写体画像の被写体を認識する認識工程と、
前記認識工程において認識された被写体に関する被写体情報を前記拡大画像と関連付ける関連付け工程と、
を備えることを特徴とする画像認識方法。
【請求項１７】
被写体の一部分を拡大した拡大画像を取得する拡大画像取得工程と、
前記被写体の拡大部分を包含し、前記拡大画像よりも広範囲の前記被写体が写っている被写体画像を取得する被写体画像取得工程と、
前記拡大部分が、前記被写体画像のどの部分にあたるかを関連付ける第１の関連付け工程と、
前記被写体画像の被写体を認識する認識工程と、
前記第１の関連付け工程における関連付けに基づいて、前記被写体画像における前記拡大部分が、前記認識工程において認識された被写体のどの部分であるかの被写体部分情報を抽出する抽出工程と、
前記抽出工程において抽出された被写体部分情報を前記拡大画像と関連付ける第２の関連付け工程と、
をコンピュータに実行させることを特徴とするプログラム。
【請求項１８】
被写体の一部分を拡大した拡大画像を取得する拡大画像取得工程と、
前記被写体の拡大部分を包含し、前記拡大画像よりも広範囲の前記被写体が写っている被写体画像を取得する被写体画像取得工程と、
前記被写体画像の被写体を認識する認識工程と、
前記認識工程において認識された被写体に関する被写体情報を前記拡大画像と関連付ける関連付け工程と、
をコンピュータに実行させることを特徴とするプログラム。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、特に、被写体情報を関連付けるために用いて好適な画像認識装置、画像認識方法及びプログラムに関する。
【背景技術】
【０００２】
医療現場では、通常のカメラ（デジタルカメラ）で患部を撮影する行為が日常的に行われている。そして、それらの撮影画像を、人体の部位名称や人体モデル（シェーマ等）を指し示すことにより検索したいという要望がある。そこで、非特許文献１には、人体の部位ごとの認識器と、それらの部位との位置関係をもとに、人体の部位を認識する方法が開示されている。また、特許文献１には、人体の一部分が隠れていても人体の姿勢を推定することが可能な方法が開示されている。
【先行技術文献】
【特許文献】
【０００３】
【特許文献１】特開２００７−３１０７０７号公報
【非特許文献】
【０００４】
【非特許文献１】Ｐ．  Ｆ．  Ｆｅｌｚｅｎｓｚｗａｌｂ  ａｎｄ  Ｄ．  Ｐ．  Ｈｕｔｔｅｎｌｏｃｈｅｒ．  Ｐｉｃｔｏｒｉａｌ  ｓｔｒｕｃｔｕｒｅｓ  ｆｏｒ  ｏｂｊｅｃｔ  ｒｅｃｏｇｎｉｔｉｏｎ．  ＩＪＣＶ，  ６１（１）：５５−７９，  ２００５．
【非特許文献２】Ｐ．  Ｆｅｌｚｅｎｓｚｗａｌｂ，  Ｄ．  ＭｃＡｌｌｅｓｔｅｒ，  ａｎｄ  Ｄ．  Ｒａｍａｎａｎ．  Ａ  ｄｉｓｃｒｉｍｉｎａｔｉｖｅｌｙ  ｔｒａｉｎｅｄ，  ｍｕｌｔｉｓｃａｌｅ，  ｄｅｆｏｒｍａｂｌｅ  ｐａｒｔ  ｍｏｄｅｌ．  ＣＶＰＲ，  ２００８．
【発明の概要】
【発明が解決しようとする課題】
【０００５】
しかし、これらの手法では、人体のある程度の範囲が撮影されている必要がある。いずれの手法を用いても、例えば１０センチメートル四方程度の患部を拡大して撮影したときは、人体のどの部位を撮影したのか、その画像だけで認識するのは不可能である。人体のみならず、車、動物などの一般的な被写体に対しても同様である。一方、非特許文献２には、部分的に認識した結果を統合して一般物体を認識する手法が開示されている。しかし、部分的に認識できる範囲よりも狭い範囲を撮影したときは、その画像だけでその物体が何であり、その物体のどの部分を撮影したのかを認識するのは不可能である。
【０００６】
本発明は前述の問題点に鑑み、被写体の一部分を拡大して撮影した画像に対して、被写体の情報を関連付けることができるようにすることを目的としている。
【課題を解決するための手段】
【０００７】
本発明の画像認識装置は、被写体の一部分を拡大した拡大画像を取得する拡大画像取得手段と、前記被写体の拡大部分を包含し、前記拡大画像よりも広範囲の前記被写体が写っている被写体画像を取得する被写体画像取得手段と、前記拡大部分が、前記被写体画像のどの部分にあたるかを関連付ける第１の関連付け手段と、前記被写体画像の被写体を認識する認識手段と、前記第１の関連付け手段による関連付けに基づいて、前記被写体画像における前記拡大部分が、前記認識手段によって認識された被写体のどの部分であるかの被写体部分情報を抽出する抽出手段と、前記抽出手段によって抽出された被写体部分情報を前記拡大画像と関連付ける第２の関連付け手段と、を備えることを特徴とする。
【発明の効果】
【０００８】
本発明によれば、人体、車体などの被写体の一部分を拡大して撮影した画像に対して、被写体の情報を関連付けることができる。
【図面の簡単な説明】
【０００９】
【図１】第１の実施形態における拡大画像認識装置の機能構成例を示すブロック図である。
【図２】第１の実施形態において、拡大画像を認識する処理手順の一例を示すフローチャートである。
【図３】第１及び第３の実施形態において、人体を撮影した被写体画像及び拡大画像の一例を示す図である。
【図４】第１及び第３の実施形態において、車を撮影した被写体画像及び拡大画像の一例を示す図である。
【図５】画面の中央に中央位置を示す印が表示された例を示す図である。
【図６】第２の実施形態における拡大画像認識装置の機能構成例を示すブロック図である。
【図７】第２の実施形態において、拡大画像を認識する処理手順の一例を示すフローチャートである。
【図８】第２及び第４の実施形態において、人体を撮影した被写体画像及び拡大画像の一例を示す図である。
【図９】第２及び第４の実施形態において、車を撮影した被写体画像及び拡大画像の一例を示す図である。
【図１０】第３の実施形態における拡大画像認識装置の機能構成例を示すブロック図である。
【図１１】第３の実施形態において、拡大画像を認識する処理手順の一例を示すフローチャートである。
【図１２】第４の実施形態において、拡大画像を認識する処理手順の一例を示すフローチャートである。
【図１３】第２及び第４の実施形態において、人体を撮影した被写体画像の拡大部分を指定する様子を説明する図である。
【図１４】第２及び第４の実施形態において、車を撮影した被写体画像の拡大部分を指定する様子を説明する図である。
【発明を実施するための形態】
【００１０】
（第１の実施形態）
以下、本発明の第１の実施形態について、図面を参照しながら説明する。本実施形態では、焦点距離を変更することが可能なレンズを備えたカメラや、焦点距離が互いに異なるレンズを備えた複数のカメラを用いて、拡大画像と被写体画像とを順次撮影する例について説明する。
【００１１】
図１は、本実施形態における拡大画像認識装置１０１の機能構成例を示すブロック図である。図１に示す各構成における動作の詳細については、図２のフローチャートを参照しながら後述する。
図１において、本実施形態の拡大画像認識装置１０１は、被写体の一部分を拡大した画像に対して、被写体の情報を関連付ける。画像入力装置１０２は、被写体画像及びその拡大画像を入力するデジタルカメラ等である。
【００１２】
拡大画像取得部１０３及び被写体画像取得部１０４は、画像入力装置１０２とのインタフェースの役割を果たすものであり、拡大画像及び被写体画像をそれぞれ取得する。画像表示部１０５は、拡大画像取得部１０３及び被写体画像取得部１０４が取得する画像における撮影範囲や構図を確認するための画像を表示する。また、画像表示部１０５には、タッチパネルが搭載されており、操作部としての機能も有している。記憶部１０６は処理中のデータを記憶するメモリ・ＨＤＤ等である。
【００１３】
拡大部分・被写体画像関連付け部１０７は第１の関連付け手段として機能し、入力された拡大画像の拡大部分が、被写体画像のどの部分にあたるかを関連付ける。被写体認識部１０８は、被写体画像に写っている被写体が何であるかについての被写体情報を抽出し、さらに被写体画像のどの部分がその被写体のどの部分であるかを認識する。被写体部分情報抽出部１０９は、被写体画像における拡大部分が被写体のどの部分であるかについての被写体部分情報を抽出する。拡大部分情報関連付け部１１０は第２の関連付け手段として機能し、被写体部分情報を拡大画像と関連付ける。なお、これら各構成は、不図示のＣＰＵにより統括的に制御されている。
【００１４】
図２は、拡大画像認識装置１０１による拡大画像を認識する処理手順の一例を示すフローチャートである。
まず、ステップＳ２０１において、画像入力装置１０２を用いて拡大して撮影したい被写体の一部分を構図の中央に配置して拡大撮影し、拡大画像取得部１０３により、撮影した拡大画像を拡大画像認識装置１０１に入力する。ここで、図３には、人体の一部分を拡大して撮影した拡大画像３０１の例を示す。また、図４には、車の一部分を拡大して撮影した拡大画像４０１の例を示す。
【００１５】
次に、ステップＳ２０２において、画像入力装置１０２を用いて、拡大撮影した部分を構図の中央に配置し、被写体が拡大画像よりも広範囲に写るよう広角で撮影し、被写体画像取得部１０４により、撮影した被写体画像を拡大画像認識装置１０１に入力する。ここで、図３には、人体を広角で撮影した被写体画像３０２の例を示す。また、図４には、車を広角で撮影した被写体画像４０２の例を示す。
【００１６】
なお、ステップＳ２０１及びＳ２０２で撮影する際には、画像表示部１０５に、撮影範囲や構図を確認するための画像を表示する。また、入力された画像は記憶部１０６の作業用メモリに記憶される。
【００１７】
次に、ステップＳ２０３において、拡大部分・被写体画像関連付け部１０７は、入力された拡大画像の拡大部分が、被写体画像のどの部分にあたるかを関連付ける。本実施形態では、拡大画像を撮影する時に構図の中央に配置した拡大部分を、被写体画像を撮影する際に構図の中央に配置して撮影を行う。したがって、拡大画像の拡大部分は、被写体画像の中央部分であると関連付ける。
【００１８】
ここで、図５に示すように、画像表示部１０５には、画面の中央に中央位置を示す印が表示される。この表示に従うことにより、拡大画像を撮影する時に構図の中央に配置した拡大部分を、被写体画像を撮影する際にも構図の中央に配置して撮影を行うことが容易となる。なお、図５に示した表示に限定するものではなく、中央の位置を把握することが可能な表示であればどのような表示であっても構わない。
【００１９】
次に、ステップＳ２０４において、被写体認識部１０８は、被写体画像に写っている被写体を認識する。被写体認識には、前述した従来技術における姿勢認識の方法を適宜用いることができる。特に、被写体が人体の場合は、非特許文献１などに記載されている手法を用いることによって、被写体が人体であることを認識するとともに、人体の頭部、腕部、胴体部、足部等を認識することが可能である。一方、被写体が車や動物などの一般物体である場合は、非特許文献２などに記載されている手法を用いることによって、被写体が車や動物などであることを認識することが可能である。さらに、被写体が車である場合には、タイヤ、窓、バンパーなどを認識することが可能であり、被写体が動物である場合は、頭部、胴体部、足部などを認識することが可能である。
【００２０】
次に、ステップＳ２０５において、被写体部分情報抽出部１０９は、被写体画像における拡大部分が、ステップＳ２０４で認識された被写体のどの部分であるかに関する被写体部分情報を抽出する。本実施形態では、ステップＳ２０３において、拡大画像の拡大部分は被写体画像の中央部分であると関連付けられている。したがって、被写体画像の中央部分が、どの部分と認識されたかに関する被写体部分情報を抽出する。
【００２１】
この被写体部分情報は、頭部、胴体部、タイヤ、などの名称で抽出することができる。その場合は、更に、その部分の中でどの辺りに位置するのかの情報を抽出することも可能である。例えば、人体の場合は、足部の中央（すなわち、ひざ周辺）であるという情報を抽出することも可能である。名称で抽出することにより、人体の部位名称や車の部品をもとに検索することが可能となる。また、被写体部分情報を、人体モデル（シェーマ等）、車モデル上の位置として抽出してもよい。その場合は、人体モデル上の部位や、車モデル上の一部を指し示すことにより、検索することが可能となる。
【００２２】
次に、ステップＳ２０６において、拡大部分情報関連付け部１１０は、ステップＳ２０４で抽出された被写体情報と、ステップＳ２０５で抽出された被写体部分情報とを、拡大画像に関連付ける。
【００２３】
以上のように本実施形態によれば、拡大画像の拡大部分が、被写体画像のどの部分にあたるかを関連付け、被写体画像の被写体を認識して被写体画像における拡大部分が被写体のどの部分であるかについての被写体部分情報を抽出するようにした。これにより、人体、車体などの被写体の一部分を拡大して撮影した画像に対して、被写体の情報及び被写体のどの部分かを関連付けることができる。
【００２４】
（第２の実施形態）
本実施形態では、第１の実施形態と同様に拡大画像と被写体画像とを順次撮影する他の例について説明する。
【００２５】
図６は、本実施形態における拡大画像認識装置６０１の機能構成例を示すブロック図である。なお、図６に示す各構成における動作の詳細については、図７のフローチャートを参照しながら後述する。
図６において、画像入力装置１０２〜拡大部分情報関連付け部１１０は図１と同様の構成であるため、説明は省略する。本実施形態の拡大画像認識装置６０１は、拡大画像取得位置指定部６１１をさらに備えており、拡大画像取得位置指定部６１１は、被写体画像取得部１０４に入力された被写体画像のどの部分を拡大画像として取得したかを指定する。
【００２６】
図７は、拡大画像認識装置６０１による拡大画像を認識する処理手順の一例を示すフローチャートである。
まず、ステップＳ７０１において、画像入力装置１０２を用いて、被写体の一部分を拡大して撮影し、拡大画像取得部１０３により、撮影した拡大画像を拡大画像認識装置６０１に入力する。ここで、図８には、人体の一部分を拡大して撮影した拡大画像８０１の例を示す。また、図９には、車の一部分を拡大して撮影した拡大画像９０１の例を示す。
【００２７】
次に、ステップＳ７０２において、画像入力装置１０２を用いて、拡大して撮影した部分を包含して被写体が拡大画像よりも広範囲に写るよう広角で撮影し、被写体画像取得部１０４により、撮影した被写体画像を拡大画像認識装置６０１に入力する。ここで、図８には、人体を広角で撮影した被写体画像８０２の例を示す。また、図９には、車を広角で撮影した被写体画像９０２の例を示す。そして、画像表示部１０５に、撮影した被写体画像を表示する。
【００２８】
次に、ステップＳ７０３において、拡大画像取得位置指定部６１１は、被写体画像取得部１０４に入力された被写体画像のどの部分を拡大画像として取得したかを指定する。図１３や図１４で示すように、被写体画像が表示されている画像表示部１０５の上でのタッチ操作等に応じて被写体画像のどの部分かを指定することができる。なお、ステップＳ７０１で拡大画像の撮影を行う際に、撮影範囲が指定されていることから、この処理はタッチ操作により被写体画像のどの部分を撮影したかを確認する処理である。
【００２９】
次に、ステップＳ７０４において、拡大部分・被写体画像関連付け部１０７は、入力された拡大画像の拡大部分が、被写体画像のどの部分にあたるかを関連付ける。本実施形態では、ステップＳ７０３で指定した位置が、拡大画像の拡大部分であると関連付ける。次のステップＳ７０５は、第１の実施形態で説明した図２のステップＳ２０４と同様の処理を行う。
【００３０】
次に、ステップＳ７０６において、被写体部分情報抽出部１０９は、被写体画像における拡大部分が、ステップＳ７０５で認識された被写体のどの部分であるかに関する被写体部分情報を抽出する。本実施形態では、ステップＳ７０４において関連付けられている被写体画像の中の位置が、どの部分と認識されたかに関する被写体部分情報を抽出する。次のステップＳ７０７は、第１の実施形態で説明した図２のステップＳ２０６と同様の処理を行う。
【００３１】
以上のように本実施形態によれば、表示画面から指定して被写体画像のどの部分を拡大画像として取得したかを関連付けるようにした。これにより、人体、車体などの被写体の一部分を拡大して撮影した画像に対して、被写体の情報及び被写体のどの部分かを関連付けることができる。
【００３２】
（第３の実施形態）
本実施形態では、高解像度の撮像センサを持つカメラや、焦点距離が互いに異なる複数のレンズを備えたカメラを用いて、拡大画像と被写体画像とを所定時間内に、最良の手法としては同時に、撮影、取得する例について説明する。
【００３３】
図１０は、本実施形態における拡大画像認識装置１００１の機能構成例を示すブロック図である。図１０に示す各構成における動作の詳細については、図１１のフローチャートを参照しながら後述する。
図１０において、画像入力装置１０２〜拡大部分情報関連付け部１１０は、図１と同様の構成であるため、説明は省略する。本実施形態の拡大画像認識装置１００１は、さらに画面表示切り替え部１０１２を備えている。画面表示切り替え部１０１２は、拡大画像取得部１０３に入力された拡大画像と、被写体画像取得部１０４に入力された被写体画像とのどちらの画像を画像表示部１０５に表示するかを切り替える。
【００３４】
図１１は、拡大画像認識装置１００１による拡大画像を認識する処理手順の一例を示すフローチャートである。
まず、ステップＳ１１０１において、拡大画像及び被写体画像の構図を決定し、撮影を開始する。具体的には、画像入力装置１０２から拡大画像取得部１０３を介して拡大画像認識装置１００１にリアルタイムの画像として拡大画像を入力する。また、画像入力装置１０２から被写体画像取得部１０４を介して拡大画像認識装置１００１にリアルタイムの画像として被写体画像を入力する。そして、画面表示切り替え部１０１２の指示に従って、拡大画像と被写体画像とのどちらかの画像を画像表示部１０５に表示する。
【００３５】
本実施形態では、画面表示切り替え部１０１２の指示に従って、画像表示部１０５に表示する画像を切り替えているが、画面表示切り替え部１０１２を持たない構成にしてもよい。その場合は、拡大画像のみを表示する、拡大画像と被写体画像を同時に表示する、所定時間ごとに拡大画像と被写体画像とを切り替えて表示する、などにより構図を確認することが可能である。
【００３６】
また、本実施形態では、拡大して撮影したい部分を構図の中央に配置することにより撮影構図を決定し、撮影を開始する。高解像度の撮像センサを持つカメラを用いて撮影する場合は、被写体画像を高解像度で撮影し、拡大画像は被写体画像の一部分を切り出すことにより取得する。焦点距離が互いに異なる複数のレンズを備えたカメラを用いて撮影した場合は、拡大画像と被写体画像とを所定時間内に、最良の手法としては同時に、撮影する。
【００３７】
次に、ステップＳ１１０２において、撮影により、拡大画像取得部１０３を介して拡大画像認識装置１００１に拡大画像を入力する。そして、ステップＳ１１０３において、撮影により、被写体画像取得部１０４を介して拡大画像認識装置１００１に被写体画像を入力する。撮影した画像の例としては、第１の実施形態と同様、図３及び図４に示したようなものである。次のステップＳ１１０４〜Ｓ１１０７は、第１の実施形態で説明した図２のステップＳ２０３〜Ｓ２０６と同様の処理を行うため、説明は省略する。
【００３８】
以上のように本実施形態によれば、人体、車体などの被写体の一部分を拡大して撮影した画像に対して、被写体の情報及び被写体のどの部分かを関連付けることができる。
【００３９】
（第４の実施形態）
本実施形態では、高解像度の撮像センサを備えたカメラを用いて、拡大画像と被写体画像とを取得するときの他の例について説明する。本実施形態における拡大画像認識装置の構成については、第２の実施形態で説明した図６と同様の構成である。ただし、本実施形態における拡大画像取得位置指定部６１１は、被写体画像取得部１０４に入力された被写体画像のどの部分を拡大画像として取得するかを指定する点で第２の実施形態とは異なっている。
【００４０】
図１２は、本実施形態における拡大画像を認識する処理手順の一例を示すフローチャートである。
まず、ステップＳ１２０１において、画像入力装置１０２を用いて、拡大撮影する部分を包含した被写体を広角で撮影し、被写体画像取得部１０４により、撮影した被写体画像を拡大画像認識装置６０１に入力する。そして、画像表示部１０５に撮影した被写体画像を表示する。
【００４１】
次に、ステップＳ１２０２において、拡大画像取得位置指定部６１１は、被写体画像取得部１０４に入力された被写体画像のどの部分を拡大画像として取得するかを指定する。この指定は、図１３や図１４に示すように、被写体画像が表示されている画像表示部１０５の上でのタッチ操作等に応じて指定する。
【００４２】
次に、ステップＳ１２０３において、ステップＳ１２０２で指定された範囲を被写体画像から切り出した拡大画像を、拡大画像取得部１０３により拡大画像認識装置６０１に入力する。撮影した画像の例は、第２の実施形態と同様、図８及び図９に示したようなものである。次のステップＳ１２０４〜Ｓ１２０７は、第２の実施形態で説明した図７のステップＳ７０４〜Ｓ７０７と同様の処理を行うため、説明は省略する。
【００４３】
以上のように本実施形態によれば、被写体画像のどの部分を拡大画像として取得するかを指定することによって、人体、車体などの被写体の一部分を拡大して撮影した画像に対して、被写体の情報及び被写体のどの部分かを関連付けることができる。
【００４４】
（その他の実施形態）
なお、本発明は複数の機器（例えば、ホストコンピュータ、インタフェース機器、デジタルカメラなど）から構成されるシステムに適用してもよい。さらには、１つの機器からなる装置（例えば、多機能デジタルカメラ、カメラ付き携帯電話、スマートフォンなど）に適用してもよい。
【００４５】
また、本発明は、以下の処理を実行することによっても実現される。即ち、上述した実施形態の機能を実現するソフトウェア（プログラム）を、ネットワーク又は各種記憶媒体を介してシステム或いは装置に供給し、そのシステム或いは装置のコンピュータ（またはＣＰＵやＭＰＵ等）がプログラムを読み出して実行する処理である。
【符号の説明】
【００４６】
１０３  拡大画像取得部
１０４  被写体画像取得部
１０７  拡大画像・被写体画像関連付け部
１０８  被写体認識部
１０９  被写体部分情報抽出部
１１０  拡大部分情報関連付け部
【図１】
2014078846.tif 000003
【図２】
2014078846.tif 000004
【図３】
2014078846.tif 000005
【図４】
2014078846.tif 000006
【図５】
2014078846.tif 000007
【図６】
2014078846.tif 000008
【図７】
2014078846.tif 000009
【図８】
2014078846.tif 000010
【図９】
2014078846.tif 000011
【図１０】
2014078846.tif 000012
【図１１】
2014078846.tif 000013
【図１２】
2014078846.tif 000014
【図１３】
2014078846.tif 000015
【図１４】
2014078846.tif 000016