【手続補正書】
【提出日】平成29年1月6日(2017.1.6)
【手続補正１】
【補正対象書類名】特許請求の範囲
【補正対象項目名】全文
【補正方法】変更
【補正の内容】
【特許請求の範囲】
【請求項１】
デバイスによって実行される方法であって、前記方法は、
シーンにおいて記録されたオーディオから複数の音響認識特徴を計算することと、
オブジェクトの音源のタイプを判断するために前記音響認識特徴を１つまたは複数のオブジェクトに対応する所定の音響認識特徴と比較することと、
前記音源のタイプに基づいて前記オブジェクトに対応するキーポイントを選択することと、
前記選択されたキーポイントおよび前記音源のタイプに基づいて前記オブジェクトを識別することとを備える、方法。
【請求項２】
前記シーンにおいて記録されたオーディオに基づいて、１つまたは複数のオブジェクトに対応する１つまたは複数のキーポイントシグネチャを選択することと、
前記シーンの画像中の複数のキーポイントを識別することと、
前記オブジェクトを識別するために前記キーポイントを前記キーポイントシグネチャと比較することとをさらに備える、請求項１に記載の方法。
【請求項３】
前記シーンにおいて記録された前記オーディオに基づいてシーン画像の一部分を選択することと、
前記画像の前記一部分内からのみ前記キーポイントを選択することとをさらに備える、請求項１に記載の方法。
【請求項４】
前記シーンにおいて記録された前記オーディオに基づいて前記画像の一部分を選択することが、
前記オーディオからオーディオ到来方向（ＤＯＡ）を判断することと、
前記オーディオＤＯＡに基づいて前記画像の前記一部分を選択することとを含む、請求項３に記載の方法。
【請求項５】
前記オーディオＤＯＡを判断することが、
前記シーンに位置する複数のマイクロフォンにおいて前記オーディオを受信し、それによって複数のマイクロフォン信号を生成することと、
前記マイクロフォン信号に基づいて前記オーディオＤＯＡを判断することとを含む、請求項４に記載の方法。
【請求項６】
前記シーンのビデオ記録から複数の局所動きベクトルを計算することと、
前記局所動きベクトルを１つまたは複数のオブジェクトに対応する所定の局所動きベクトルのデータベースと比較することによって、および前記キーポイントを１つまたは複数のキーポイントシグネチャと比較することによって前記オブジェクトを識別することとをさらに備える、請求項１に記載の方法。
【請求項７】
前記オブジェクトを識別することは、前記キーポイントを１つまたは複数のキーポイントシグネチャと比較することに基づく、請求項１に記載の方法。
【請求項８】
前記音響認識特徴がメル周波数ケプストラム係数を含む、請求項７に記載の方法。
【請求項９】
画像中に現れる１つまたは複数のオブジェクトについての範囲情報を判断することと、
前記範囲情報に基づいて前記キーポイントを分析することとをさらに備える、請求項１に記載の方法。
【請求項１０】
範囲情報を判断することが、オートフォーカスカメラを使用して範囲情報を判断することと、マルチカメラ画像視差推定を使用して範囲情報を判断することと、上記の任意の組合せとからなるグループから選択される、請求項９に記載の方法。
【請求項１１】
シーンにおいて記録されたオーディオから複数の音響認識特徴を計算するように構成されたオーディオプロセッサと、
音源のタイプに基づいてオブジェクトに対応するキーポイントを選択するように構成されたキーポイントセレクタと、
前記選択されたキーポイントに基づいて前記オブジェクトを識別し、前記オブジェクトの前記音源のタイプを判断するために前記音響認識特徴を１つまたは複数のオブジェクトに対応する所定の音響認識特徴と比較するように構成された整合デバイスとを備える、装置。
【請求項１２】
シーンの画像中の複数のキーポイントを識別するように構成されたキーポイント検出器をさらに備え、
前記キーポイントセレクタが、前記シーンにおいて記録されたオーディオに基づいて、１つまたは複数のオブジェクトに対応する１つまたは複数のキーポイントシグネチャを選択するように構成され、
前記整合デバイスが、前記シーン中のオブジェクトを識別するために前記キーポイントを前記キーポイントシグネチャと比較するように構成された、請求項１１に記載の装置。
【請求項１３】
前記シーンにおいて記録された前記オーディオに基づいて前記シーンの画像の一部分を選択するように構成された第１のセレクタと、
前記画像の前記一部分内からのみ前記キーポイントを選択するように構成された第２のセレクタとをさらに備える、請求項１１に記載の装置。
【請求項１４】
前記第１のセレクタが、
前記オーディオからオーディオ到来方向（ＤＯＡ）を判断するように構成された検出器と、
前記オーディオＤＯＡに基づいて前記画像の前記一部分を選択するように構成された第３のセレクタとを含む、請求項１３に記載の装置。
【請求項１５】
前記検出器が、
前記オーディオを受信して、複数のマイクロフォン信号を生成するための、前記シーンに位置する複数のマイクロフォンと、
前記マイクロフォン信号に基づいて前記オーディオＤＯＡを判断するように構成されたオーディオプロセッサとを含む、請求項１４に記載の装置。
【請求項１６】
前記シーンのビデオ記録から複数の局所動きベクトルを計算するように構成されたビデオプロセッサをさらに備え、
前記整合デバイスが、前記局所動きベクトルを１つまたは複数のオブジェクトに対応する所定の局所動きベクトルのデータベースと比較することによって、および前記キーポイントを１つまたは複数のキーポイントシグネチャと比較することによって前記オブジェクトを識別するように構成された、請求項１１に記載の装置。
【請求項１７】
前記整合デバイスは、前記キーポイントを１つまたは複数のキーポイントシグネチャと比較することによって前記オブジェクトを識別するように構成される、請求項１１に記載の装置。
【請求項１８】
前記音響認識特徴がメル周波数ケプストラム係数を含む、請求項１７に記載の装置。
【請求項１９】
画像中に現れる１つまたは複数のオブジェクトについての範囲情報を判断するように構成された範囲検出器と、
前記範囲情報に基づいて前記キーポイントを分析するように構成されたキーポイント検出器とをさらに備える、請求項１１に記載の装置。
【請求項２０】
前記範囲検出器が、オートフォーカスカメラと、マルチカメラアレイと、上記の任意の組合せとからなるグループから選択される検出器を含む、請求項１９に記載の装置。
【請求項２１】
シーンにおいて記録されたオーディオから複数の音響認識特徴を計算するための手段と、
オブジェクトの音源のタイプを判断するために前記音響認識特徴を１つまたは複数のオブジェクトに対応する所定の音響認識特徴と比較するための手段と、
前記音源のタイプに基づいて前記オブジェクトに対応するキーポイントを選択するための手段と、
前記選択されたキーポイントおよび前記音源のタイプに基づいて前記オブジェクトを識別するための手段とを備える、装置。
【請求項２２】
前記シーンにおいて記録されたオーディオに基づいて、１つまたは複数のオブジェクトに対応する１つまたは複数のキーポイントシグネチャを選択するための手段と、
前記シーンの画像中の複数のキーポイントを識別するための手段と、
前記シーン中の前記オブジェクトを識別するために前記キーポイントを前記キーポイントシグネチャと比較するための手段とをさらに備える、請求項２１に記載の装置。
【請求項２３】
前記シーンにおいて記録された前記オーディオに基づいて前記シーンの画像の一部分を選択するための手段と、
前記画像の前記一部分内からのみ前記キーポイントを選択するための手段とをさらに備える、請求項２１に記載の装置。
【請求項２４】
前記シーンにおいて記録された前記オーディオに基づいて前記画像の一部分を選択するための前記手段が、
前記オーディオからオーディオ到来方向（ＤＯＡ）を判断するための手段と、
前記オーディオＤＯＡに基づいて前記画像の前記一部分を選択するための手段とを含む、請求項２３に記載の装置。
【請求項２５】
前記オーディオＤＯＡを判断するための手段が、
前記シーンに位置する複数のマイクロフォンにおいて前記オーディオを受信し、それによって複数のマイクロフォン信号を生成するための手段と、
前記マイクロフォン信号に基づいて前記オーディオＤＯＡを判断するための手段とを含む、請求項２４に記載の装置。
【請求項２６】
前記シーンのビデオ記録から複数の局所動きベクトルを計算するための手段と、
前記局所動きベクトルを１つまたは複数のオブジェクトに対応する所定の局所動きベクトルのデータベースと比較することによって、および前記キーポイントを１つまたは複数のキーポイントシグネチャと比較することによって前記オブジェクトを識別するための手段とをさらに備える、請求項２１に記載の装置。
【請求項２７】
前記キーポイントを１つまたは複数のキーポイントシグネチャと比較するための手段をさらに備える、請求項２１に記載の装置。
【請求項２８】
前記音響認識特徴がメル周波数ケプストラム係数を含む、請求項２７に記載の装置。
【請求項２９】
画像中に現れる１つまたは複数のオブジェクトについての範囲情報を判断するための手段と、
前記範囲情報に基づいて前記キーポイントを分析するための手段とをさらに備える、請求項２１に記載の装置。
【請求項３０】
範囲情報を判断するための手段が、オートフォーカスカメラを使用して範囲情報を判断するための手段と、マルチカメラ画像視差推定を使用して範囲情報を判断するための手段と、上記の任意の組合せとからなるグループから選択される、請求項２９に記載の装置。
【請求項３１】
シーンにおいて記録されたオーディオから複数の音響認識特徴を計算するためのコードと、
オブジェクトの音源のタイプを判断するために前記音響認識特徴を１つまたは複数のオブジェクトに対応する所定の音響認識特徴と比較するためのコードと、
前記音源のタイプに基づいて前記オブジェクトに対応するキーポイントを選択するためのコードと、
前記選択されたキーポイントおよび前記音源のタイプに基づいて前記オブジェクトを識別するためのコードとを備える、１つまたは複数のプロセッサによって実行可能な命令のセットを具備する非一時的有形コンピュータ可読媒体。
【請求項３２】
前記シーンにおいて記録されたオーディオに基づいて、１つまたは複数のオブジェクトに対応する１つまたは複数のキーポイントシグネチャを選択するためのコードと、
前記シーンの画像中の複数のキーポイントを識別するためのコードと、
前記シーン中の前記オブジェクトを識別するために前記キーポイントを前記キーポイントシグネチャと比較するためのコードとをさらに備える、請求項３１に記載のコンピュータ可読媒体。
【請求項３３】
前記シーンにおいて記録された前記オーディオに基づいて画像の一部分を選択するためのコードと、
前記画像の前記一部分内からのみ前記キーポイントを選択するためのコードとをさらに備える、請求項３１に記載のコンピュータ可読媒体。
【請求項３４】
前記シーンにおいて記録された前記オーディオに基づいて前記画像の一部分を選択するための前記コードが、
前記オーディオからオーディオ到来方向（ＤＯＡ）を判断するためのコードと、
前記オーディオＤＯＡに基づいて前記画像の前記一部分を選択するためのコードとを含む、請求項３３に記載のコンピュータ可読媒体。
【請求項３５】
前記オーディオＤＯＡを判断するためのコードが、
前記シーンに位置する複数のマイクロフォンにおいて前記オーディオを受信し、それによって複数のマイクロフォン信号を生成するためのコードと、
前記マイクロフォン信号に基づいて前記オーディオＤＯＡを判断するためのコードとを含む、請求項３４に記載のコンピュータ可読媒体。
【請求項３６】
前記シーンのビデオ記録から複数の局所動きベクトルを計算するためのコードと、
前記局所動きベクトルを１つまたは複数のオブジェクトに対応する所定の局所動きベクトルのデータベースと比較することによって、および前記キーポイントを１つまたは複数のキーポイントシグネチャと比較することによって前記オブジェクトを識別するためのコードとをさらに備える、請求項３１に記載のコンピュータ可読媒体。
【請求項３７】
前記キーポイントを１つまたは複数のキーポイントシグネチャと比較するためのコードをさらに備える、請求項３１に記載のコンピュータ可読媒体。
【請求項３８】
前記音響認識特徴がメル周波数ケプストラム係数を含む、請求項３７に記載のコンピュータ可読媒体。
【請求項３９】
画像中に現れる１つまたは複数のオブジェクトについての範囲情報を判断するためのコードと、
前記範囲情報に基づいて前記キーポイントを分析するためのコードとをさらに備える、請求項３１に記載のコンピュータ可読媒体。
【請求項４０】
範囲情報を判断するためのコードが、オートフォーカスカメラを使用して範囲情報を判断するためのコードと、マルチカメラ画像視差推定を使用して範囲情報を判断するためのコードと、上記の任意の組合せとからなるグループから選択される、請求項３９に記載のコンピュータ可読媒体。