【手続補正書】
【提出日】平成30年5月24日(2018.5.24)
【手続補正１】
【補正対象書類名】明細書
【補正対象項目名】０００２
【補正方法】変更
【補正の内容】
【０００２】
従来、撮像装置によって撮像を行う際に、画像内に個人が含まれているか否かを特定するために、顔画像の認識を利用する方法が知られている。ところが、このような方法では、顔画像を認識する上で画像認識精度が十分でないという問題や、撮像装置に予め顔画像を登録しておかなければならず、プライバシー保護の観点から望ましくないといった問題があった。
ここで、特許文献１には、撮影した画角の領域（撮影位置）において検出された識別子のうち、識別子と関連づけて記憶された特徴情報と一致する被写体が撮影画像内に存在するか否かを判定することによって、個人を特定する方法が記載されている。
【手続補正２】
【補正対象書類名】明細書
【補正対象項目名】０００６
【補正方法】変更
【補正の内容】
【０００６】
前記目的を達成するため、本発明の撮像装置の一態様は、
撮像手段と、
前記撮像手段による撮像時の自装置の位置の情報を取得する第１の情報取得手段と、
前記撮像手段によって撮像された画像における被写体の方向を取得する第２の情報取得手段と、
前記撮像手段による撮像時の前記被写体が有する無線装置の位置の情報を取得する第３の情報取得手段と、
前記撮像手段によって撮像された前記画像の前記被写体の前記自装置からの距離を取得する第４の情報取得手段と、
前記第１の情報取得手段によって取得された前記自装置の位置の情報と、前記第２の情報取得手段によって取得された前記画像における前記被写体の方向と、前記第４の情報取得手段によって取得した前記被写体の前記自装置からの距離と、に基づいて前記被写体の位置を算出するとともに、算出された前記被写体の位置と、前記第３の情報取得部によって取得された前記無線装置の位置と、が所定の範囲内である場合に、前記被写体が前記無線装置を有する被写体であると特定する、特定手段と、
を備える、
ことを特徴とする。
また、前記目的を達成するため、本発明の撮像制御方法の一態様は、
撮像手段を備える撮像装置において実行される撮像制御方法であって、
前記撮像手段による撮像時の前記撮像装置の位置の情報を取得する第１の情報取得ステップと、
前記撮像手段によって撮像された画像における被写体の方向を取得する第２の情報取得ステップと、
前記撮像手段による撮像時の前記被写体が有する無線装置の位置の情報を取得する第３の情報取得ステップと、
前記撮像部によって撮像された前記画像の前記被写体の前記撮像装置からの距離を取得する第４の情報取得ステップと、
前記第１の情報取得ステップにおいて取得された前記撮像装置の位置の情報と、前記第２の情報取得ステップにおいて取得された前記画像における前記被写体の方向と、前記第４の情報取得ステップにおいて取得された前記被写体の前記撮像装置からの距離と、に基づいて前記被写体の位置を算出するとともに、算出された前記被写体の位置と、前記第３の情報取得ステップにおいて取得された前記無線装置の位置と、が所定の範囲内である場合に、前記被写体が前記無線装置を有する被写体であると特定する特定ステップと、
を含む、
ことを特徴とする。
また、前記目的を達成するため、本発明のプログラムの一態様は、
コンピュータに、
撮像手段による撮像時の前記撮像装置の位置の情報を取得する第１の情報取得機能と、
前記撮像手段によって撮像された画像における被写体の方向を取得する第２の情報取得機能と、
前記撮像手段による撮像時の前記被写体が有する無線装置の位置の情報を取得する第３の情報取得機能と、
前記撮像部によって撮像された前記画像の前記被写体の前記撮像装置からの距離を取得する第４の情報取得機能と、
前記第１の情報取得機能によって取得された前記撮像時の位置の情報と、前記第２の情報取得機能によって取得された前記画像における前記被写体の方向と、前記第４の情報取得機能において取得された前記被写体の前記撮像装置からの距離と、に基づいて前記被写体の位置を算出するとともに、算出された前記被写体の位置と、前記第３の情報取得機能において取得された前記無線装置の位置と、が所定の範囲内である場合に、前記被写体が前記無線装置を有する被写体であると特定する特定機能と、
を実現させる、
ことを特徴とする。
【手続補正３】
【補正対象書類名】明細書
【補正対象項目名】００２５
【補正方法】変更
【補正の内容】
【００２５】
図５は、被写体までの地表距離を示す模式図である。
図５に示すように、距離取得部５４は、距離センサ部２０によって検出された被写体までの距離ｄに対して、撮像装置２の俯角（または仰角）θの余弦を取得することにより、被写体までの距離（地表距離）を取得する（被写体までの距離＝ｄｃｏｓθ）。
図４に戻り、装置情報取得部５５は、通信部２４を介して無線装置３に関する情報（無線装置３のＩＤ、通信時刻、位置情報等）を取得する。
被写体特定部５６は、撮像装置２において撮影が行われた際の撮像装置２の位置、方位角及び仰角または俯角と、撮像装置２における画角の情報（レンズの焦点距離等）と、撮影画像における被写体の位置と、に基づいて、被写体の方向を算出し、算出された方向と、距離取得部５４によって取得された距離（地表距離）と、から、被写体の位置を算出する。
また、被写体特定部５６は、算出された被写体の位置と、無線装置３に関する情報（無線装置３の位置）と、が一致するか否か（具体的には、設定された範囲内にあるか否か）を判定し、一致している場合に、撮影画像に写されている被写体が無線装置３を備えた被写体（無線装置３の所有者）として特定される。
これにより、撮影画像において無線装置３を備えた被写体が、遮蔽物の陰に隠れる等のために、写されていない状況を判定することができる。
【手続補正４】
【補正対象書類名】明細書
【補正対象項目名】００２６
【補正方法】変更
【補正の内容】
【００２６】
図６は、無線装置３を備えた被写体が遮蔽されることなく撮影画像に撮影された状態を示す模式図である。
図６に示すように、撮像装置２における撮影画像の範囲において、無線装置３を備えた被写体が含まれる場合、撮影が行われた際の撮像装置２の位置、方位角及び仰角または俯角と、撮像装置２における画角の情報（レンズの焦点距離等）と、撮影画像における被写体の画像位置と、に基づいて、被写体の方向が算出され、算出された方向と、距離取得部５４によって取得された距離（地表距離）と、から、被写体の位置を算出される。そして、算出された被写体の位置と、無線装置３に関する情報（無線装置３の位置）とが一致するか否かが判定され、一致している場合に、撮影画像に写されている被写体が無線装置３を備えた被写体（無線装置３の所有者）として特定される。図６に示す例では、被写体となっているユーザＡ及びユーザＢまでの距離が、距離取得部５４によって取得された各被写体までの距離（地表距離）と、無線装置３の位置と撮像装置２の位置とから算出される距離と、で一致しているため、ユーザＡ及びユーザＢが撮影画像に写されているものと判定される。
【手続補正５】
【補正対象書類名】明細書
【補正対象項目名】００２７
【補正方法】変更
【補正の内容】
【００２７】
図７は、無線装置３を備えた被写体の一部が撮影画像において遮蔽されている状態を示す模式図である。
図７に示すように、撮像装置２における撮影画像の範囲において、無線装置３を備えた被写体が含まれる場合、撮影が行われた際の撮像装置２の位置、方位角及び仰角または俯角と、撮像装置２における画角の情報（レンズの焦点距離等）と、撮影画像における被写体の画像位置とに基づいて、被写体の方向が算出され、算出された方向と、距離取得部５４によって取得された距離（地表距離）とから、被写体の位置を算出される。そして、算出された被写体の位置と、無線装置３に関する情報（無線装置３の位置）とが一致するか否かが判定され、一致している場合に、撮影画像に写されている被写体が無線装置３を備えた被写体（無線装置３の所有者）として特定される。図７に示す例では、被写体となっているユーザＡまでの距離が、距離取得部５４によって取得された被写体までの距離（地表距離）と、無線装置３の位置と撮像装置２の位置とから算出される距離と、で一致しているため、ユーザＡが撮影画像に写されているものと判定される。一方、ユーザＢまでの距離が、距離取得部５４によって取得された被写体（遮蔽物）までの距離（地表距離）と、無線装置３の位置と撮像装置２の位置とから算出される距離とで一致していないため、ユーザＢは撮影画像に写されていないものと判定される。
【手続補正６】
【補正対象書類名】明細書
【補正対象項目名】００２９
【補正方法】変更
【補正の内容】
【００２９】
図８は、図４の機能的構成を有する図２の撮像装置２が実行する被写体特定処理の流れを説明するフローチャートである。
被写体特定処理は、ユーザによる入力部２１への被写体特定処理の開始の操作により開始される。なお、本実施形態においては、被写体特定処理がインターバル撮影において実行される場合を例として説明する。
【手続補正７】
【補正対象書類名】明細書
【補正対象項目名】００３０
【補正方法】変更
【補正の内容】
【００３０】
ステップＳ１において、装置情報取得部５５は、無線装置３に関する情報を取得する。なお、無線装置３に関する情報は、逐次受信され、装置情報記憶部６２に記憶される。
ステップＳ２において、撮影制御部５８は、撮影を実行する。
ステップＳ３において、撮影制御部５８は、撮影画像、撮影時刻、画角の情報、撮像装置２の位置、方位角及び仰角または俯角を記憶する。
【手続補正８】
【補正対象書類名】明細書
【補正対象項目名】００３１
【補正方法】変更
【補正の内容】
【００３１】
ステップＳ４において、被写体特定部５６は、撮影時刻と、無線装置３に関する情報における通信時刻と、が一致するか否かの判定を行う。
撮影時刻と、無線装置３に関する情報における通信時刻と、が一致する場合、ステップＳ４においてＹＥＳと判定されて、処理はステップＳ５に移行する。
一方、撮影時刻と、無線装置３に関する情報における通信時刻と、が一致しない場合、ステップＳ４においてＮＯと判定されて、処理はステップＳ９に移行する。
【手続補正９】
【補正対象書類名】明細書
【補正対象項目名】００３２
【補正方法】変更
【補正の内容】
【００３２】
ステップＳ５において、被写体特定部５６は、撮影時刻と通信時刻とが一致する時刻における撮像装置２の位置、方位角及び仰角または俯角と、撮像装置２における画角の情報（レンズの焦点距離等）と、撮影画像における被写体の画像位置と、に基づいて、被写体の方向を算出する。
【手続補正１０】
【補正対象書類名】明細書
【補正対象項目名】００３６
【補正方法】変更
【補正の内容】
【００３６】
このような処理により、撮影が行われた際の撮像装置２の位置、方位角及び仰角または俯角と、撮像装置２における画角の情報（レンズの焦点距離等）と、撮影画像における被写体の画像位置とに基づいて、被写体の方向が算出され、算出された方向と、距離取得部５４によって取得された距離（地表距離）と、から、被写体の位置を算出される。そして、算出された被写体の位置と、無線装置３に関する情報（無線装置３の位置）とが一致するか否かが判定され、一致している場合に、撮影画像に写されている被写体が無線装置３を備えた被写体（無線装置３の所有者）として特定される。
そのため、撮影画像において無線装置３を備えた被写体が、遮蔽物の陰に隠れる等のために、写されていない状況を判定することができる。
したがって、撮像を行う際に、特定の個人が撮像画像に含まれているか否かをより容易に判定することができる。
なお、このように被写体のＩＤが付加された撮影画像とすることにより、記憶された画像が検索される場合、無線装置３のＩＤを指定することによって、ＩＤを付加して記憶された画像のみが索出される。即ち、ユーザは自らが写った画像のみを選択することができる。
【手続補正１１】
【補正対象書類名】明細書
【補正対象項目名】００３７
【補正方法】変更
【補正の内容】
【００３７】
［変形例１］
上述の実施形態において、被写体特定部５６における被写体の特定処理は、以下のような処理とすることも可能である。
即ち、被写体特定部５６は、撮像装置２において撮影が行われた際の撮像装置２の位置、方位角及び仰角または俯角と、撮像装置２における画角の情報（レンズの焦点距離等）と、撮影画像における被写体の画像位置と、に基づいて、被写体の方向を算出する。
また、被写体特定部５６は、撮像装置２の位置と、無線装置３に関する情報（無線装置３の位置）とに基づいて、撮像装置２から無線装置３までの方向及び距離を算出する。
そして、被写体特定部５６は、算出された被写体の方向と、距離取得部５４によって取得された距離（地表距離）とが、算出された撮像装置２から無線装置３までの方向及び距離と一致するか否かを判定し、一致している場合に、撮影画像に写されている被写体が無線装置３を備えた被写体（無線装置３の所有者）として特定される。
このような処理によっても、撮影画像において無線装置３を備えた被写体が、遮蔽物の陰に隠れる等のために、写されていない状況を判定することができる。
【手続補正１２】
【補正対象書類名】明細書
【補正対象項目名】００４３
【補正方法】変更
【補正の内容】
【００４３】
また、撮像装置２は、姿勢取得部５３を備える。
姿勢取得部５３は、撮像装置２の仰角または俯角のいずれかを取得する。
方位取得部５２は、被写体が位置する方位を取得する。
画像の方向は、仰角または俯角のいずれか及び方位角によって表される。
これにより、撮像時に撮像装置２が仰角あるいは俯角をもって撮像を行った場合であっても、適切に被写体を特定することが可能となる。
【手続補正１３】
【補正対象書類名】明細書
【補正対象項目名】００４４
【補正方法】変更
【補正の内容】
【００４４】
また、被写体特定部５６は、被写体が位置する方向を、画像の方向と、撮像部１６によって撮像された画像内の被写体の画像位置と、から算出する。
これにより、撮像装置２において検出される情報に基づいて、被写体の方向を算出する
【手続補正１４】
【補正対象書類名】明細書
【補正対象項目名】００４５
【補正方法】変更
【補正の内容】
【００４５】
また、無線装置３には、無線装置３を識別できる識別番号が設定されている。
撮像装置２は、特定された被写体が含まれる撮影画像を、該識別番号と共に記録する。
これにより、撮影画像において、被写体を識別して記録することができる。
【手続補正１５】
【補正対象書類名】特許請求の範囲
【補正対象項目名】全文
【補正方法】変更
【補正の内容】
【特許請求の範囲】
【請求項１】
撮像手段と、
前記撮像手段による撮像時の自装置の位置の情報を取得する第１の情報取得手段と、
前記撮像手段によって撮像された画像における被写体の方向を取得する第２の情報取得手段と、
前記撮像手段による撮像時の前記被写体が有する無線装置の位置の情報を取得する第３の情報取得手段と、
前記撮像手段によって撮像された前記画像の前記被写体の前記自装置からの距離を取得する第４の情報取得手段と、
前記第１の情報取得手段によって取得された前記自装置の位置の情報と、前記第２の情報取得手段によって取得された前記画像における前記被写体の方向と、前記第４の情報取得手段によって取得した前記被写体の前記自装置からの距離と、に基づいて前記被写体の位置を算出するとともに、算出された前記被写体の位置と、前記第３の情報取得部によって取得された前記無線装置の位置と、が所定の範囲内である場合に、前記被写体が前記無線装置を有する被写体であると特定する、特定手段と、
を備える、
ことを特徴とする撮像装置。
【請求項２】
前記第２の情報取得手段によって取得する前記画像における前記被写体の方向は、仰角または俯角のいずれか及び方位角によって表されることを特徴とする請求項１に記載の撮像装置。
【請求項３】
前記特定手段は、前記被写体の位置を、前記画像における前記被写体の方向と、前記撮像手段によって撮像された前記画像内の前記被写体の位置と、画角の情報と、から算出することを特徴とする請求項１又は２に記載の撮像装置。
【請求項４】
前記無線装置には、前記無線装置を識別できる識別番号が設定されており、
前記自装置は、特定された前記被写体が含まれる前記画像を、前記識別番号と共に記録することを特徴とする請求項１から３のいずれか１項に記載の撮像装置。
【請求項５】
前記特定手段は、算出された前記被写体の位置と、前記第３の情報取得部によって取得された前記無線装置の位置と、が前記所定の範囲内でない場合に、前記被写体が遮蔽物によって遮蔽されている被写体であると特定する、
請求項１から４のいずれか１項に記載の撮像装置。
【請求項６】
前記第１の情報取得手段は、ＧＰＳ部を有し、ＧＰＳ衛星から受信したＧＰＳ信号に基づいて、前記撮像部による撮像時における、前記自装置の緯度、経度、高度を含む位置の情報及び現在時刻を検出する、
請求項１に記載の撮像装置。
【請求項７】
前記第２の情報取得手段は、地磁気センサ部を有し、前記地磁気センサ部によって検出された地磁気の向きに基づいて、前記撮像部による撮像時における前記自装置が向いている方位を取得する、
請求項１に記載の撮像装置。
【請求項８】
前記第２の情報取得手段は、加速度センサ部を有し、前記加速度センサ部によって検出された３軸方向の加速度に基づいて、前記撮像手段による撮像時における前記自装置の姿勢を取得する、
請求項１に記載の撮像装置。
【請求項９】
前記第３の情報取得手段は、通信部を有し、前記通信部を介して前記無線装置の識別番号、通信時刻、位置情報を含む前記無線装置に関する情報を取得する、
請求項１に記載の撮像装置。
【請求項１０】
前記第４の情報取得手段は、距離センサ部を有し、前記自装置の画角内における複数の前記被写体について、前記撮像部による撮像時における前記被写体の前記自装置からの前記距離を検出する、
請求項１に記載の撮像装置。
【請求項１１】
前記距離センサ部は、距離画像センサ又はステレオカメラ又は前記撮像部の自動焦点制御機能を実現する測距センサである、
請求項１０に記載の撮像装置。
【請求項１２】
前記第４の情報取得手段は、距離センサ部を有し、前記撮像手段によって撮像された前記画像の前記被写体の前記自装置からの距離と、前記第２の情報取得手段によって取得された前記画像における前記被写体の方向と、から前記被写体の前記自装置からの地表距離を取得する、
請求項１に記載の撮像装置。
【請求項１３】
前記第４の情報取得手段は、前記距離センサ部によって検出された前記被写体までの前記距離ｄと、前記自装置の俯角又は仰角θの余弦と、から、前記被写体までの前記地表距離ｄ・ｃｏｓθを取得する、
請求項１２に記載の撮像装置。
【請求項１４】
前記画像のデータを記憶する記憶手段と、
前記記憶手段を制御する記録制御手段と、
を更に備え、
前記記録制御手段は、前記自装置において撮影された前記画像のデータに対して、前記特定手段によって前記無線装置を備えた前記被写体であると特定された場合に、前記無線装置の識別番号、画角内の位置を含む前記無線装置に関する情報を付加して、前記記憶手段に前記画像のデータを記憶する、
請求項１に記載の撮像装置。
【請求項１５】
撮像手段を備える撮像装置において実行される撮像制御方法であって、
前記撮像手段による撮像時の前記撮像装置の位置の情報を取得する第１の情報取得ステップと、
前記撮像手段によって撮像された画像における被写体の方向を取得する第２の情報取得ステップと、
前記撮像手段による撮像時の前記被写体が有する無線装置の位置の情報を取得する第３の情報取得ステップと、
前記撮像部によって撮像された前記画像の前記被写体の前記撮像装置からの距離を取得する第４の情報取得ステップと、
前記第１の情報取得ステップにおいて取得された前記撮像装置の位置の情報と、前記第２の情報取得ステップにおいて取得された前記画像における前記被写体の方向と、前記第４の情報取得ステップにおいて取得された前記被写体の前記撮像装置からの距離と、に基づいて前記被写体の位置を算出するとともに、算出された前記被写体の位置と、前記第３の情報取得ステップにおいて取得された前記無線装置の位置と、が所定の範囲内である場合に、前記被写体が前記無線装置を有する被写体であると特定する特定ステップと、
を含む、
ことを特徴とする撮像制御方法。
【請求項１６】
コンピュータに、
撮像手段による撮像時の前記撮像装置の位置の情報を取得する第１の情報取得機能と、
前記撮像手段によって撮像された画像における被写体の方向を取得する第２の情報取得機能と、
前記撮像手段による撮像時の前記被写体が有する無線装置の位置の情報を取得する第３の情報取得機能と、
前記撮像部によって撮像された前記画像の前記被写体の前記撮像装置からの距離を取得する第４の情報取得機能と、
前記第１の情報取得機能によって取得された前記撮像時の位置の情報と、前記第２の情報取得機能によって取得された前記画像における前記被写体の方向と、前記第４の情報取得機能において取得された前記被写体の前記撮像装置からの距離と、に基づいて前記被写体の位置を算出するとともに、算出された前記被写体の位置と、前記第３の情報取得機能において取得された前記無線装置の位置と、が所定の範囲内である場合に、前記被写体が前記無線装置を有する被写体であると特定する特定機能と、
を実現させる、
ことを特徴とするプログラム。
【手続補正１６】
【補正対象書類名】図面
【補正対象項目名】図４
【補正方法】変更
【補正の内容】
【図４】
2017005395.tif 000001
【手続補正１７】
【補正対象書類名】図面
【補正対象項目名】図５
【補正方法】変更
【補正の内容】
【図５】
2017005395.tif 000002
【手続補正１８】
【補正対象書類名】図面
【補正対象項目名】図８
【補正方法】変更
【補正の内容】
【図８】
2017005395.tif 000003