【手続補正書】
【提出日】平成27年3月6日(2015.3.6)
【手続補正１】
【補正対象書類名】特許請求の範囲
【補正対象項目名】全文
【補正方法】変更
【補正の内容】
【特許請求の範囲】
【請求項１】
撮像部から画像を取り込むとともに、音入力部から音を入力し、取り込んだ画像を利用して、入力した音から特定の音を検出する音検出装置であって、
特定の音を検出するための基準を用いて、前記音入力部から入力した音から前記特定の音を検出する音検出手段と、
前記撮像部が撮像した画像を記録する画像記録手段と、
前記画像記録手段で記録した画像と前記撮像部が撮像した現在の画像とに基づいて、前記現在の画像から、動体を検出する動体検出手段と、
前記音検出手段は、前記動体検出手段によって動体が検出された場合には、前記撮像部が撮像する画像中の特定位置と前記特定位置で発生し得る特定の音との対応関係に基づいて、前記動体が検出された箇所で発生し得る特定の音を検出するための基準を設定し、前記設定された基準を用いて、前記音入力部から入力した音から特定の音を検出する
ことを特徴とする音検出装置。
【請求項２】
前記音検出手段は、前記動体検出手段によって動体が検出された場合には、予め前記動体が検出された箇所に対応する特定の音を検出するための基準として設定された第１の基準を変更した第２の基準を設定する
ことを特徴とする請求項１に記載の音検出装置。
【請求項３】
前記特定の音を検出するための基準とは、前記特定の音が前記音入力部から入力された場合に満たされるべき基準であり、
前記音検出手段は、前記動体検出手段によって動体が検出された場合には、前記動体が検出された箇所から発生する音が前記音入力部から入力された場合に満たされるべき基準を変更することによって、変更前よりも満たされ易い基準を設定する
ことを特徴とする請求項１または２に記載の音検出装置。
【請求項４】
前記音検出手段は、前記動体が検出された画像中の位置に対応付けられている特定の音以外の音を検出するための閾値を上げ、前記動体検出手段によって動体が検出されない場合には、前記撮像部が撮像する画像中の特定位置に対応付けられている全ての特定の音を検出するための閾値すべてを上げる
ことを特徴とする請求項３に記載の音検出装置。
【請求項５】
更に、前記撮像部が撮像する画像中の特定位置を示す情報と、前記特定位置で発生し得る音を示す情報との対応関係を管理する管理手段を有し、
前記管理手段は、前記撮像部が撮像する画像中の複数の特定位置のそれぞれについて、前記特定位置で発生し得る１以上の種類の特定の音を対応付けた情報を管理し、
前記音検出手段は、前記管理手段によって管理される対応関係を参照して、前記複数の特定位置の内、前記動体が検出された箇所で発生し得る１以上の特定の音を検出するための基準を設定する
ことを特徴とする請求項１乃至４のいずれか１項に記載の音検出装置。
【請求項６】
前記音入力部が入力した音を記録する音記録手段を更に有し、
前記音検出手段は、前記動体検出手段によって動体が検出された場合、前記動体が検出される一定時間前から現在までの時間帯の前記音記録手段に記録されている音から、前記特定の音を検出する
ことを特徴とする請求項１に記載の音検出装置。
【請求項７】
前記音検出手段は、更に、物体を示す情報と、前記物体によって発生し得る特定の音を示す情報との対応関係に基づいて認識される物体によって発生し得る特定の音を検出するための基準を設定し、前記設定された基準を用いて、前記音入力部から入力した音から特定の音を検出する
ことを特徴とする請求項１に記載の音検出装置。
【請求項８】
前記撮像部は、パン・チルト・ズーム機能を有し、
前記画像記録手段は、前記撮像部が前記パン・チルト・ズーム機能によって撮像可能な方向について撮像した画像を記録し、
前記動体検出手段は、前記画像記録手段で記録した画像と、前記画像記録手段による記録から一定時間後に前記撮像部が前記パン・チルト・ズーム機能によって撮像可能な方向について撮像した現在の画像との差分をとることで、前記現在の画像中の動体を検出する
ことを特徴とする請求項１乃至７のいずれか１項に記載の音検出装置。
【請求項９】
前記撮像部は、全方位カメラであり、
前記動体検出手段は、前記全方位カメラが撮像した全方位画像から得られるパノラマ画像について、任意のフレーム単位で、動体を検出する
ことを特徴とする請求項１乃至７のいずれか１項に記載の音検出装置。
【請求項１０】
前記管理手段は、動体を検出しない場合を示す情報とその場合に発生し得る音を示す情報との対応、及び動体を検出した場合を示す情報とその場合に前記画像中のどの位置でも発生し得る音を示す情報との対応も更に管理し、
音響モデルを選択する音響モデル選択手段として、
（１）前記動体検出手段によって動体が検出されない場合には、前記動体を検出しない場合に発生し得る音の音響モデルを選択し、
（２）前記動体検出手段によって動体が検出された場合には、前記動体を検出した位置で発生し得る音の音響モデルを選択する
音響モデル選択手段を更に有し、
前記音検出手段は、前記音響モデル選択手段で選択された音響モデルを用いて、前記音入力部から入力した音から特定の音を検出する
ことを特徴とする請求項５に記載の音検出装置。
【請求項１１】
前記音入力部が入力した背景音を、動体を検出しない場合の背景音、動体を検出した場合の背景音、前記管理手段に登録されている特定位置を含む領域で動体を検出した場合の背景音のいずれかに分類して、背景音データとして記録する背景音記録手段と、
前記背景音記録手段で分類して記録された背景音データから、動体検出なしの背景音モデル、動体検出ありの背景音モデル、領域毎の背景音モデルを作成するモデル作成手段を更に有し、
前記音響モデル選択手段は、
（１）前記動体検出手段によって動体が検出されない場合には、前記動体を検出しない場合に発生し得る音の音響モデルに加えて、前記動体検出なしの背景音モデルを選択し、
（２）前記動体検出手段によって動体が検出された場合には、前記動体を検出した場合どの位置でも発生し得る音の音響モデルに加えて、前記動体検出ありの背景音モデルを選択し、
（３）前記動体検出手段によって前記特定位置を含む領域で動体が検出された場合は、前記領域に対応する音の音響モデルに加えて、前記領域に対応する音の背景音モデルを選択し、
前記音検出手段は、前記音響モデル選択手段で選択された音響モデルと背景音を用いて、前記音入力部から入力した音から特定の音を検出する
ことを特徴とする請求項１０に記載の音検出装置。
【請求項１２】
音検出装置であって、
音を入力する音入力手段と、
撮像部が撮像した画像を入力する画像入力手段と、
前記画像から、動体を検出する動体検出手段と、
特定の音を検出するための基準を用いて、前記音入力手段から入力した音から前記特定の音を検出する音検出手段と、を有し、
前記音検出手段は、前記動体検出手段によって動体が検出された場合には、前記撮像部が撮像する画像中の特定位置と前記特定位置で発生し得る特定の音との対応関係に基づいて、前記動体が検出された箇所で発生し得る特定の音を検出するための基準を設定し、前記設定された基準を用いて、前記音入力手段から入力した音から特定の音を検出する
ことを特徴とする音検出装置。
【請求項１３】
前記音検出手段は、前記動体検出手段によって動体が検出された場合には、予め前記動体が検出された箇所に対応する特定の音を検出するための基準として設定された第１の基準を変更した第２の基準を設定する
ことを特徴とする請求項１２に記載の音検出装置。
【請求項１４】
前記特定の音を検出するための基準とは、前記特定の音が前記音入力手段から入力された場合に満たされるべき基準であり、
前記音検出手段は、前記動体検出手段によって動体が検出された場合には、前記動体が検出された箇所から発生する音が前記音入力手段から入力された場合に満たされるべき基準を変更することによって、変更前よりも満たされ易い基準を設定する
ことを特徴とする請求項１２または１３に記載の音検出装置。
【請求項１５】
前記音検出手段は、前記動体が検出された画像中の位置に対応付けられている音以外の音を検出するための閾値を上げ、前記動体検出手段によって動体が検出されない場合には、前記撮像部が撮像する画像中の特定位置に対応付けられている全ての特定の音を検出するための閾値すべてを上げる
ことを特徴とする請求項１４に記載の音検出装置。
【請求項１６】
撮像部から画像を取り込むとともに、音入力部から音を入力し、取り込んだ画像を利用して、入力した音から特定の音を検出する音検出装置の制御方法であって、
特定の音を検出するための基準を用いて、前記音入力部から入力した音から前記特定の音を検出する音検出工程と、
前記撮像部が撮像した画像を記録媒体に記録する画像記録工程と、
前記画像記録工程で前記記録媒体に記録した画像と前記撮像部が撮像した現在の画像とに基づいて、前記現在の画像から、動体を検出する動体検出工程と、
前記音検出工程は、前記動体検出工程によって動体が検出された場合には、前記撮像部が撮像する画像中の特定位置と前記特定位置で発生し得る特定の音との対応関係に基づいて、前記動体が検出された箇所で発生し得る特定の音を検出するための基準を設定し、前記設定された基準を用いて、前記音入力部から入力した音から特定の音を検出する
ことを特徴とする音検出装置の制御方法。
【請求項１７】
音検出装置の制御方法であって、
音を入力する音入力工程と、
撮像部が撮像した画像を入力する画像入力工程と、
前記画像から、動体のある箇所を検出する動体検出工程と、
特定の音を検出するための基準を用いて、前記音入力工程から入力した音から前記特定の音を検出する音検出工程と、を有し、
前記音検出工程は、前記動体検出工程によって動体が検出された場合には、前記撮像部が撮像する画像中の特定位置と前記特定位置で発生し得る特定の音との対応関係に基づいて、前記動体が検出された箇所で発生し得る特定の音を検出するための基準を設定し、前記設定された基準を用いて、前記音入力工程から入力した音から特定の音を検出する
ことを特徴とする音検出装置の制御方法。
【請求項１８】
撮像部から画像を取り込むとともに、音入力部から音を入力し、取り込んだ画像を利用して、入力した音から特定の音を検出する音検出装置の制御をコンピュータに機能させるためのプログラムであって、
前記コンピュータを、
特定の音を検出するための基準を用いて、前記音入力部から入力した音から前記特定の音を検出する音検出手段と、
前記撮像部が撮像した画像を記録する画像記録手段と、
前記画像記録手段で記録した画像と前記撮像部が撮像した現在の画像とに基づいて、前記現在の画像から、動体を検出する動体検出手段として機能させ、
前記音検出手段は、前記動体検出手段によって動体が検出された場合には、前記撮像部が撮像する画像中の特定位置と前記特定位置で発生し得る特定の音との対応関係に基づいて、前記動体が検出された箇所で発生し得る特定の音を検出するための基準を設定し、前記設定された基準を用いて、前記音入力部から入力した音から特定の音を検出する
ことを特徴とするプログラム。
【請求項１９】
音検出装置の制御をコンピュータに機能させるためのプログラムであって、
前記コンピュータを、
音を入力する音入力手段と、
撮像部が撮像した画像を入力する画像入力手段と、
前記画像から、動体を検出する動体検出手段と、
特定の音を検出するための基準を用いて、前記音入力手段から入力した音から前記特定の音を検出する音検出手段として機能させ、
前記音検出手段は、前記動体検出手段によって動体が検出された場合には、前記撮像部が撮像する画像中の特定位置と前記特定位置で発生し得る特定の音との対応関係に基づいて、前記動体が検出された箇所で発生し得る特定の音を検出するための基準を設定し、前記設定された基準を用いて、前記音入力手段から入力した音から特定の音を検出する
ことを特徴とするプログラム。
【手続補正２】
【補正対象書類名】明細書
【補正対象項目名】０００８
【補正方法】変更
【補正の内容】
【０００８】
上記の目的を達成するための本発明による音検出装置は以下の構成を備える。即ち、
撮像部から画像を取り込むとともに、音入力部から音を入力し、取り込んだ画像を利用して、入力した音から特定の音を検出する音検出装置であって、
特定の音を検出するための基準を用いて、前記音入力部から入力した音から前記特定の音を検出する音検出手段と、
前記撮像部が撮像した画像を記録する画像記録手段と、
前記画像記録手段で記録した画像と前記撮像部が撮像した現在の画像とに基づいて、前記現在の画像から、動体を検出する動体検出手段と、
前記音検出手段は、前記動体検出手段によって動体が検出された場合には、前記撮像部が撮像する画像中の特定位置と前記特定位置で発生し得る特定の音との対応関係に基づいて、前記動体が検出された箇所で発生し得る特定の音を検出するための基準を設定し、前記設定された基準を用いて、前記音入力部から入力した音から特定の音を検出する。