(57)【要約】【課題】カメラ撮影制御方法を提供する。【解決手段】本発明は通信の技術分野に適用し、音源対象の音声データを収集することと、前記音源対象の音声データに基づいて、音声特徴を抽出することと、抽出される音声特徴及び予め設定される音声シーンに対応する音声特徴に基づいて、現在の音声シーンを確定することと、前記現在の音声シーンに対応する撮影モードを取得し、かつ前記現在の音声シーンに対応する撮影モードに基づいてカメラのステアリングを制御することとを含むカメラ撮影制御方法、装置、インテリジェント装置およびコンピュータ記憶媒体を提供する。上記方法によって頻繁な振れを回避することができ、撮影の効率およびユーザーエクスペリエンスを向上させることができる。【選択図】図１
2019186931.tif 000002
【特許請求の範囲】
【請求項１】
音源対象の音声データを収集することと、
前記音源対象の音声データに基づいて、音声特徴を抽出することと、
抽出される音声特徴及び予め設定される音声シーンに対応する音声特徴に基づいて、現在の音声シーンを確定することと、
前記現在の音声シーンに対応する撮影モードを取得し、かつ前記現在の音声シーンに対応する撮影モードに基づいてカメラの移動を制御することと、を含むことを特徴とするカメラ撮影制御方法。
【請求項２】
前記音声特徴は音声時間、音声間隔時間、音源角度、音声音響インテンシティや音声周波数のうちの一つ以上を含むことを特徴とする請求項１に記載のカメラ撮影制御方法。
【請求項３】
上述した前記現在の音声シーンに対応する撮影モードを取得し、かつ前記現在の音声シーンに対応する撮影モードに基づいて前記カメラの移動を制御するステップは、
前記現在の音声シーンが円卓会議シーンであると確定する時、第一音源対象の第一音声データが検出された場合、前記第一音声データの第一音源角度を取得することと、
前記第一音源角度に基づいて前記カメラを前記第一音源角度に対応する第一音源対象に移動させるように制御することと、
前記第一音声データが終了する時、前記円卓会議シーンに対応するスケジューリングモードに基づいて、次の音声データを出す第二音源対象を予め確定することと、
前記第二音源対象の音源角度に基づいて前記カメラを前記第二音源対象に移動させるように事前に制御することと、
または、前記第一音声データが終了する時、前記円卓会議シーンに対応するスケジューリングモードに基づいて、音声データを出す第二音源対象および音声データを出す第三音源対象を事前に確定することと、
前記第二音源対象の音源角度および前記第三音源対象の音源角度に基づいて、前記カメラを前記第二音源対象と前記第三音源対象との中間位置に移動させるように事前に制御することと、を含むことを特徴とする請求項２に記載のカメラ撮影制御方法。
【請求項４】
前記の抽出される音声特徴及び予め設定される音声シーンに対応する音声特徴に基づいて、現在の音声シーンを確定するステップは、
所定数の音声データの音声特徴を抽出することと、
前記所定数の音声データの音声特徴を訓練された機械学習モデルに入力し、現在の音声シーンを確定することと、を含むことを特徴とする請求項１に記載のカメラ撮影制御方法。
【請求項５】
前記の機械学習モデルの訓練ステップは、
所定数のサンプル音声データを取得し、かつ前記サンプル音声データに基づいてサンプル音声データセットを確定することと、ここで、前記サンプル音声データに音声シーンが標記され、各音声シーンのサンプル音声データの数は各音声シーンのサンプル音声データの平均数以上であり、
前記サンプル音声データに基づいて音声特徴を抽出し、かつ抽出される音声特徴に基づいて特徴ベクトルセットを確立することと、
前記特徴ベクトルセットに基づいて前記サンプル音声データセットの決定木を訓練し、前記決定木の実出力値と好ましい出力値が同一になるまで、訓練を完成させることと、を含むことを特徴とする請求項４に記載のカメラ撮影制御方法。
【請求項６】
前記の抽出される音声特徴及び予め設定される音声シーンに対応する音声特徴に基づいて、現在の音声シーンを確定するステップは、
所定数のサンプル音声データを取得することと、
前記サンプル音声データの音源角度の分布、音声時間の分布および音声間隔時間を確定することと、
前記サンプル音声データの音源角度の分布、音声時間分布および音声間隔時間に基づいて決定木を構築することと、
構築される決定木および抽出される音声特徴に基づいて、現在の音声シーンを確定することと、を含むことを特徴とする請求項１に記載のカメラ撮影制御方法。
【請求項７】
前記の前記現在の音声シーンに対応する撮影モードを取得し、かつ前記現在の音声シーンに対応する撮影モードに基づいて前記カメラの移動を制御するステップは、
前記現在の音声シーンがビデオ会話シーンである場合、ビデオ会議から現在の時刻までの音声データを取得することと、
取得される前記音声データの音源角度に基づいて発言領域を分割し、かつ分割された発言領域の領域角度を確定することと、
新しい音声データが検出された場合、前記新しい音声データの音源角度を取得することと、
前記新しい音声データの音源角度が所属する発言領域を確定することと、
確定される発言領域の領域角度に基づいてカメラのステアリング角度を制御ことと、を含むことを特徴とする請求項１に記載のカメラ撮影制御方法。
【請求項８】
前記の確定される発言領域の領域角度に基づいて前記カメラのステアリング角度を制御するステップは、
ビデオ会議から現在の時刻までの音声データの本数ｎ、各音声データに対応する音声時間Ｔｉおよび音源角度Ａｉを取得することと、
下式に基づいて前記カメラのステアリングする角度Ａｃ
【数１】
2019186931.tif 000016
を確定することと、を含むことを特徴とする請求項７に記載のカメラ撮影制御方法。
【請求項９】
前記の確定される発言領域の領域角度に基づいて前記カメラのステアリング角度を制御するステップは、
ビデオ会議から現在の時刻までの音声データの本数ｎおよび音源角度Ａｉを取得することと、
下式に基づいて前記カメラのステアリングする角度Ａｃ
【数２】
2019186931.tif 000017
を確定することと、を含むことを特徴とする請求項７に記載のカメラ撮影制御方法。
【請求項１０】
音源対象の音声データを収集するための音声収集ユニットと、
前記音源対象の音声データに基づいて、音声特徴を抽出するための特徴抽出ユニットと、
抽出される音声特徴および予め設定される音声シーンに対応する音声特徴に基づいて、現在の音声シーンを確定するためのシーン確定ユニットと、
前記現在の音声シーンに対応する撮影モードを取得し、かつ前記現在の音声シーンに対応する撮影モードに基づいてカメラの移動を制御するためのステアリング制御ユニットと、を含むことを特徴とするカメラ撮影制御装置。
【請求項１１】
前記音声特徴は音声時間、音声間隔時間、音源角度、音声音響インテンシティや音声周波数のうちの一つ又は複数を含むことを特徴とする請求項１０に記載のカメラ撮影制御装置。
【請求項１２】
前記シーン確定ユニットは、
所定数の音声データの音声特徴を抽出するための特徴抽出モジュールと、
前記所定数の音声データの音声特徴を訓練された機械学習モデルに入力し、現在の音声シーンを確定するための第一シーン確定モジュールと、を含むことを特徴とする請求項１０に記載のカメラ撮影制御装置。
【請求項１３】
前記シーン確定ユニットは、
所定数のサンプル音声データを取得し、かつ前記サンプル音声データに基づいてサンプル音声データセットを確定するためのサンプルセット確立モジュールと、ここで、前記サンプル音声データに音声シーンが標記され、各音声シーンのサンプル音声データの数は各音声シーンのサンプル音声データの平均数以上であり、
前記サンプル音声データに基づいて音声特徴を抽出し、かつ抽出される音声特徴に基づいて特徴ベクトルセットを確立するための特徴ベクトルセット確立モジュールと、
前記特徴ベクトルセットに基づいて前記サンプル音声データセットの決定木を訓練し、前記決定木の実出力値と好ましい出力値が同一になるまで、訓練を完成させるための訓練モジュールと、を含むことを特徴とする請求項１０に記載のカメラ撮影制御装置。
【請求項１４】
前記シーン確定ユニットは、
所定数のサンプル音声データを取得するためのサンプル取得モジュールと、
前記サンプル音声データの音源角度の分布、音声時間分布および音声間隔時間を確定するための特徴確定モジュールと、
前記サンプル音声データの音源角度の分布、音声時間分布および音声間隔時間に基づいて決定木を構築するための決定木構築モジュールと、
構築される決定木および抽出される音声特徴に基づいて、現在の音声シーンを確定するための第二シーン確定モジュールと、を含むことを特徴とする請求項１０に記載のカメラ撮影制御装置。
【請求項１５】
前記ステアリング制御ユニットは、
前記音声シーンがビデオ会話シーンである場合、ビデオ会議から現在の時刻までの音声データを取得するための第一音声取得モジュールと、
取得される前記音声データの音源角度に基づいて発言領域を分割し、かつ分割された発言領域の領域角度を確定するための領域分割モジュールと、
新しい音声データが検出された場合、前記新しい音声データの音源角度を取得するための音声検出モジュールと、
前記新しい音声データの音源角度が所属する発言領域を確定するための角度整合モジュールと、
確定される発言領域の領域角度に基づいてカメラのステアリング角度を制御するための第一ステアリング制御モジュールと、を含むことを特徴とする請求項１０に記載のカメラ撮影制御装置。
【請求項１６】
前記第一ステアリング制御モジュールは、ビデオ会議から現在の時刻までの音声データの本数ｎ、各音声データに対応する音声時間Tiおよび音源角度Aiを取得し、下式に基づいて前記カメラのステアリングする角度Ａｃ
【数３】
2019186931.tif 000018
を確定するために用いられることを特徴とする請求項１５に記載のカメラ撮影制御装置。
【請求項１７】
前記第一ステアリング制御モジュールはさらに、下式に基づいて前記カメラのステアリングする角度Ａｃ
【数４】
2019186931.tif 000019
を確定するために用いられることを特徴とする請求項１５に記載のカメラ撮影制御装置。
【請求項１８】
前記ステアリング制御ユニットは、
前記現在の音声シーンが円卓会議シーンであると確定する時、第一音声データが検出された場合、前記第一音声データの第一音源角度を取得するための第二音声取得モジュールと、
前記第一音源角度に基づいて前記カメラを前記第一音源角度に対応する第一音源対象に移動させるように制御するための第二ステアリングモジュールと、
前記第一音声データが終了する時、前記円卓会議シーンに対応するスケジューリングモードに基づいて、次の音声データを出す第二音源対象を予め確定するための第一予測モジュールと、
前記第一音声データが終了する時、前記円卓会議シーンに対応するスケジューリングモードに基づいて、音声データを出す第二音源対象および音声データを出す第三音源対象を事前に確定するための第二予測モジュールと、
前記第二音源対象の音源角度および前記第三音源対象の音源角度に基づいて、前記カメラを前記第二音源対象と前記第三音源対象との中間位置に移動させるように事前に制御するための第三ステアリングモジュールと、を含むことを特徴とする請求項１０に記載のカメラ撮影制御装置。
【請求項１９】
メモリと、プロセッサと、前記メモリに記憶され、前記プロセッサで実行可能なコンピュータプログラムとを含むインテリジェント装置であって、前記プロセッサは前記コンピュータプログラムを実行する時、請求項１〜９のいずれか一項に記載のカメラ撮影制御方法のステップを実現することを特徴とするインテリジェント装置。
【請求項２０】
コンピュータプログラムが記憶されるコンピュータ読み取り可能な記憶媒体であって、前記コンピュータプログラムがプロセッサによって実行される時、請求項１〜９のいずれか一項に記載のカメラ撮影制御方法のステップを実現することを特徴とするコンピュータ読み取り可能な記憶媒体。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は通信の技術分野に属し、特にカメラ撮影制御方法、装置、インテリジェント装置およびコンピュータ記憶媒体に関する。
【背景技術】
【０００２】
現在、マイクロホンアレイが配置されるインテリジェント装置がますます多くなっており、マイクロホンアレイにより発言者が発言する時の音声角度情報を取得することができ、これらの角度情報により、移動カメラを駆使して発言中の発言者を撮影することができる。従来技術には以下の二つの問題がある。
【０００３】
１）、高速音源定位および低速撮影制御であり、
音場の切り替えは瞬間的に完了するが、カメラはマイクロホンアレイ角度に基づいて算出される音源の方位を必要とし、そしてモーターを始動してカメラを所定の位置まで回転させ、この過程は一定の時間がかかる。回転速度を速くすると、カメラにより録画されたビデオのフレームレートが不足するため、撮影された画面にスミアがあり、また遅延も発生し、オーディオとビデオは同期しないことを引き起こし、発言者に不快感を与えてしまう。
【０００４】
２）、例えば会社でビデオ会議を行う場合、参加者が頻繁に討論することがあり、一人の参加者Ａが観点を発表すると、システムはＡの位置を算出して撮影制御を立ち上げるが、カメラがＡまで回転しないうちに、Ａの発言はもう終わり、その時他の参加者Ｂは引き続き観点の発表を開始する可能性があり、システムはさらにＢの位置を算出し、カメラもＢ方位に向かって回転し、このように従来の簡単なカメラ追従ポリシーを採用すれば、カメラは異なる参加者の間に振れることを引き起こすおそれがある。この場合、ビデオ会議は非常につらく、受け入れにくい。
【０００５】
要約すると、従来の撮影制御は単一の追跡方法を採用し担当シーンのスケジューリング需要を満たしにくく、ビデオとオーディオによる同期交流の場合における音声高速切り替えとカメラ回転との間の矛盾を解消できず、複数の発言者が交流する場合、カメラは高速で頻繁に移動するため複数の発言者の間に振れ、撮影制御効率が低下することを引き起こす。
【発明の概要】
【０００６】
これに鑑みて、本発明の実施例はカメラ撮影制御方法、装置、インテリジェント装置およびコンピュータ記憶媒体を提供し、従来の撮影制御では単一の追跡方法を採用して担当シーンのスケジューリング需要を満たしにくく、ビデオとオーディオによる同期交流の場合における音声高速切り替えとカメラ回転との間の矛盾を解消できず、複数の発言者が交流する場合、カメラは高速で頻繁に移動するため複数の発言者の間に振れ、撮影制御効率が低下することを引き起こすという問題を解決する。
【０００７】
本発明の第一態様はカメラ撮影制御方法を提供し、前記カメラ撮影制御方法は、
音源対象の音声データを収集することと、
前記音源対象の音声データに基づいて、音声特徴を抽出することと、
抽出される音声特徴および予め設定される音声シーンに対応する音声特徴に基づいて、現在の音声シーンを確定することと、
前記現在の音声シーンに対応する撮影モードを取得し、かつ前記現在の音声シーンに対応する撮影モードに基づいて前記カメラの移動を制御することと、を含む。
【０００８】
本発明の第二態様はカメラ撮影制御装置を提供し、前記カメラ撮影制御装置は、
音源対象の音声データを収集するための音声収集ユニットと、
前記音源対象の音声データに基づいて、音声特徴を抽出するための特徴抽出ユニットと、
抽出される音声特徴および予め設定される音声シーンに対応する音声特徴に基づいて、現在の音声シーンを確定するためのシーン確定ユニットと、
前記現在の音声シーンに対応する撮影モードを取得し、かつ前記現在の音声シーンに対応する撮影モードに基づいて前記カメラの移動を制御するためのステアリング制御ユニットと、を含む。
【０００９】
本発明の第三態様はインテリジェント装置を提供し、それは、メモリと、プロセッサと、前記メモリに記憶されて前記プロセッサで実行可能なコンピュータプログラムとを含んでおり、前記プロセッサは前記コンピュータプログラムを実行する時、以上の第一態様に記載のカメラ撮影制御方法のステップを実行する。
【００１０】
本発明の第四態様はコンピュータ読み取り可能な記憶媒体を提供し、前記コンピュータ読み取り可能な記憶媒体にはコンピュータプログラムが記憶されており、前記コンピュータプログラムはプロセッサにより実行される時、以上の第一態様に記載のカメラ撮影制御方法のステップを実行する。
【００１１】
本発明の実施例は従来技術と比較して、以下の有益な効果を有する、すなわち、音源対象の音声データを収集し、そして前記音源対象の音声データに基づいて、音声特徴を抽出し、さらに抽出される音声特徴および予め設定される音声シーンに対応する音声特徴に基づいて、現在の音声シーンを確定し、最後に前記現在の音声シーンに対応する撮影モードを取得し、かつ前記現在の音声シーンに対応する撮影モードに基づいてカメラの移動を制御することによって、カメラは異なる音声シーンに基づいて異なる撮影モードを採用してカメラの移動やステアリングを制御し、複数の音源対象が交流する場合、カメラの頻繁な高速移動による振れを回避し、撮影の需要を満たすことができ、さらに撮影の効率およびユーザーエクスペリエンスを向上させることができる。
【図面の簡単な説明】
【００１２】
本発明の実施例における技術的解決手段をより明確に説明するために、以下、実施例または従来技術の説明で使用される図面を簡単に紹介する。当然のことながら、以下の説明における図面は、本発明のいくつかの実施例に過ぎず、当業者であれば、創造的労働を要することなく、これらの図面に基づく他の図面を得ることができる。
【００１３】
【図１】本発明の実施例に係るカメラ撮影制御方法を実現するフローチャートである。
【図２】本発明の実施例に係るカメラ撮影制御方法のステップＳ１０３を具体化するフローチャートである。
【図３】本発明の実施例に係る講演者シーンの模式図である。
【図４】本発明の実施例に係るカメラ撮影制御方法の円卓会議シーンでのステップＳ１０４を具体化するフローチャートである。
【図４ａ】本発明の実施例に係る円卓会議シーンの模式図である。
【図５】本発明の実施例に係るカメラ撮影制御方法のビデオ会話シーンでのステップＳ１０４を具体化するフローチャートである。
【図５ａ】本発明の実施例に係るビデオ会議シーンの模式図である。
【図６】本発明の実施例に係るカメラ撮影制御装置の構造を示すブロック図である。
【図７】本発明の実施例に係るインテリジェント装置の模式図である。
【発明を実施するための形態】
【００１４】
以下の説明では、本発明の実施例を完全に理解するために提供される特定のシステム構造、技術などの詳細は、単なる例示に過ぎず、本発明を制限するものではない。しかしながら、当業者には、これらの具体的な詳細なしに他の実施例において本発明を実施できることが明らかであろう。その他の場合、本発明の説明を妨害しないために、周知のシステム、装置、回路および方法の詳細は省略する。
【００１５】
本発明の実施例は、複数のシーンでの追跡撮影を実現し、カメラの頻繁なステアリングに起因する振れにより撮影効率が低下することを回避するために、カメラ撮影制御方法、装置、インテリジェント装置およびコンピュータ記憶媒体を提供し、それは主に音源対象の音声データを収集し、そして前記音源対象の音声データに基づいて、音声特徴を抽出し、さらに抽出される音声特徴および予め設定される音声シーンに対応する音声特徴に基づいて、現在の音声シーンを確定し、最後に前記現在の音声シーンに対応する撮影モードを取得し、かつ前記現在の音声シーンに対応する撮影モードに基づいて前記カメラの移動を制御する。上記カメラ撮影制御方法、装置、インテリジェント装置およびコンピュータ記憶媒体を具体的に説明するために、以下、具体的な実施例を挙げて説明する。
本発明に記載の技術的解決手段を説明するために、以下、具体的な実施例を挙げて説明する。
【００１６】
実施例一
図１は本発明の実施例に係るカメラ撮影制御方法の実現フローを示し、該方法フローはステップＳ１０１乃至Ｓ１０４を含む。各ステップの具体的な実現原理は以下のとおりである。
ステップＳ１０１では、音源対象の音声データを収集する。
【００１７】
具体的には、現在のシーンにおいて、ユーザーはインテリジェント装置を始動してから音源対象の音声データを収集し始める。ここで、前記音源対象は現在のシーンでの発言者である。前記音声データはある区間での音声の開始時間および終了時間を含み、本発明の実施例において、マイクロホンアレイにより音声をあらゆる方向にリアルタイムでピックアップし、音声データを受信し、さらにマイクロホンアレイアルゴリズムを用いてピックアップされた音声の音源方向を取得する。単一のマイクロホンは音声情報のみを取得できるが、複数のマイクロホンにより一定の幾何学的位置に応じて配置されたマイクロホンアレイは、音声情報だけでなく音声の空間的情報を取得することもできる。
【００１８】
ステップＳ１０２では、前記音源対象の音声データに基づいて、音声特徴を抽出する。
具体的には、収集された音源対象の音声データに基づいて、音声特徴を抽出し、本発明の実施例において、前記音声特徴は音声時間、音声間隔時間、音源角度、音声音響インテンシティや音声周波数のうちの一つ又は複数を含む。類似的には、音声特徴はさらに音の高さおよび音の大きさを含むことができる。
【００１９】
本発明の実施例において、前記音声データの音声開始時間および音声終了時間に基づいて前記音声データの音声時間を算出する。収集された音声データについては音声開始時間を
【数１】
2019186931.tif 000003
音声終了時間を
【数２】
2019186931.tif 000004
として記録すると、音声時間は
【数３】
2019186931.tif 000005
音声間隔時間は
【数４】
2019186931.tif 000006
である。収集された音声データの音源角度の数を統計し、かつ前記音源角度の数に基づいて音源対象の数を確定する。音源角度Aiを記録し、一般的には音源対象がある方位に固定されると思われるため、音源角度Aiの数を統計することによって音源対象の数を確定する。音声音響インテンシティ又は音声周波数を取得し、音源角度が同じ、かつ音声音響インテンシティIiおよび音声周波数Fiも同じであるものを同一の音源対象として確定する。当然のことながら、音源対象は交流の便宜上、あちこち動き回る可能性があり、人によって音声周波数が異なり、音響インテンシティも異なるため、音声音響インテンシティおよび音声周波数を取得することによって同一の音源対象であるか否かを判断することができる。本発明の実施例において、ユーザーの数を確定することは、振れを除去した後の音源角度の数を統計することであり、振れ除去とは、その差分値が予め設定される差分値よりも小さい音源角度を除去し、即ち差分値が予め設定される差分値より小さい音源角度を同一の音源対象からの音源角度と見なすことを説明すべきである。
【００２０】
任意選択的に、音声データを統計して分析することによって、より多くのほかの音声特徴を抽出し、例えば、ユーザー対話頻度は、ユーザー音声切り替え回数を総時間で割ることによって確定することができ、平均音声時間は、総音声時間を音声本数で割ることによって確定することができ、平均待ち時間は、総アイドル時間を音声本数で割ることによって確定することができ、音声時間分布状況は、音声時間分散で示すことができ、ユーザー角度分布は、ユーザー角度分散で示すことができる。
【００２１】
ステップＳ１０３では、抽出される音声特徴および予め設定される音声シーンに対応する音声特徴に基づいて、現在の音声シーンを確定する。
ここで、予め設定される音声シーンは、講演シーン（Ｃが講座を担当し、Ａ、Ｂが時々質問する）、円卓会議シーン（Ａ、Ｂ、Ｃは順に話す）およびビデオ会話シーン（Ａ、Ｂは遠隔端末のユーザーと近距離交流する）を含むが、それらに制限されない。
【００２２】
本発明の一つの実施例として、図２は本発明の実施例に係るカメラ撮影制御方法Ｓ１０３の具体的な実現フローを示し、以下のように詳しく説明する。
【００２３】
Ａ１、所定数の音声データの音声特徴を抽出する。
Ａ２、前記所定数の音声データの音声特徴を訓練された機械学習モデルに入力し、
現在の音声シーンを確定する。前記訓練された機械学習モデルとは、サンプルデータとして種々の音声シーンでの音声データを予め収集し、かつ機械学習アルゴリズムを用いて訓練されて生成された機械学習モデルである。機械学習モデルの訓練結果に影響を与えないように、各音声シーンのサンプルデータを均等化にする必要があることを注意すべきである。前記機械学習アルゴリズムは、決定木、ランダムフォレストアルゴリズム、ＳＶＭｓ、ナイーブベイズ、ロジスティック回帰またはほかの機械学習アルゴリズムであってもよく、ここでは制限されない。
【００２４】
本発明の実施例において、インテリジェント装置のマイクロホンアレイは一定期間での記録に基づいて、該時間内の音源角度を取得し、かつ音源対象の数、音声時間、音声間隔時間および音声交流切り替え頻度などの音声特徴を抽出し、抽出される音声特徴を訓練された機械学習モデルに入力してシーン照合を行い、該訓練された機械学習モデルにより講演者シーン、円卓会議シーンであろうか、またはビデオ会話シーン、家庭会話シーンであろうか、これらの音声特徴に対応する音声シーンを出力する。
【００２５】
任意選択的に、本発明の実施例において、決定木アルゴリズムを用いて機械学習モデルを訓練することができ、機械学習モデルの訓練ステップは以下のとおりである。
【００２６】
Ａ２１、所定数のサンプル音声データを取得し、かつ前記サンプル音声データに基づいてサンプル音声情報セットを確立し、ここで、前記サンプル音声データに音声シーンが標記され、各音声シーンのサンプル音声データの数は各音声シーンのサンプル音声データの平均数以上である。
【００２７】
Ａ２２、前記サンプル音声データに基づいて音声特徴を抽出し、かつ抽出される音声特徴に基づいて特徴ベクトルセットを確立する。
Ａ２３、前記特徴ベクトルセットに基づいて前記サンプル音声情報セットの決定木を訓練し、前記決定木の実出力値と好ましい出力値が同一になるまで、訓練は完成する。
【００２８】
具体的には、決定木アルゴリズムを用いて機械学習モデルを訓練する過程は、訓練データに基づいて一本の決定木を構築する過程である。本発明の実施例において、サンプルデータにおける音声特徴、例えば音声開始時間
【数５】
2019186931.tif 000007
音声終了時間
【数６】
2019186931.tif 000008
音声時間
【数７】
2019186931.tif 000009
音声間隔時間
【数８】
2019186931.tif 000010
および音声音響インテンシティIi周波数Fi等を抽出し、抽出される音声特徴を特徴ベクトルセット、即ち
【数９】
2019186931.tif 000011
として構築し、特徴ベクトルセットに基づいて前記サンプル音声情報セットの決定木を訓練し、類似的には、本発明の実施例において、特徴ベクトルセットを確立するための音声特徴はさらにユーザー対話頻度、平均音声時間、平均待ち時間、音声時間分布状況およびユーザー角度分布等を含むことができる。
【００２９】
任意選択的に、前記抽出される音声特徴および予め設定される音声シーンに対応する音声特徴に基づいて、現在の音声シーンを確定するステップは、
所定数のサンプル音声データを取得することと、
前記サンプル音声データの音源角度の分布、音声時間分布および音声間隔時間を確定することと、
前記サンプル音声データの音源角度の分布、音声時間分布および音声間隔時間に基づいて決定木を構築することと、
構築される決定木および抽出される音声特徴に基づいて、現在の音声シーンを確定することと、を含む。
【００３０】
具体的には、音源角度の分布状況を用いて決定木ヘッドノードを構築し、前記サンプル音声データの音源角度の分布が予め設定される角度分布範囲、例えば９０°より小さい場合、現在の音声シーンがビデオ会話シーンであると判定し、前記サンプル音声データの音源角度の分布が予め設定される角度分布範囲、例えば９０°以上であれば、音声時間分布をさらに分析し、音声時間分布には同一音源対象が予め設定される時間を超える音声があれば、現在の音声シーンが講演者モードであると判定し、同一音源対象が予め設定される時間を超える音声はなければ、音声間隔時間をさらに分析し、前記音声間隔時間が均一であれば、現在の音声シーンが円卓会議シーンであると判定し、均一でなければ、現在の音声シーンが家庭会話シーンであると判定する。
【００３１】
任意選択的に、音声時間の分布状況を用いて決定木ヘッドノードを構築し、音声時間分布には同一音源対象の音声時間が現在の総音声時間の予め設定される百分比（例えば９０％）に達する場合、音声間隔分散を取得し、音声間隔分散が予め設定される間隔分散閾値より小さい場合、現在の音声シーンが円卓会議シーンであると判定し、音声間隔分散が予め設定される間隔分散閾値の以上であれば、音源角度の分布範囲を取得し、音源角度の分布が予め設定される角度分布範囲未満であれば、現在の音声シーンがビデオ会話シーンであると判定し、音源角度の分布が予め設定される角度分布範囲に達すれば、現在の音声シーンが家庭会話シーンであると判定する。
【００３２】
ステップＳ１０４、前記現在の音声シーンに対応する撮影モードを取得し、かつ前記現在の音声シーンに対応する撮影モードに基づいて前記カメラの移動を制御する。
【００３３】
本発明の実施例において、各音声シーンにそれぞれ対応する撮影モードがあり、撮影モードによって異なる撮影ポリシーが選択され、例えばスピーカーのみを撮影し、または、発言領域に応じて前記カメラの移動を制御し、あるいは、カメラを時計回りまたは逆時計回りに移動させるように制御することができる。
【００３４】
任意選択的に、本発明の実施例において、講演者シーンは図３に示すように、講演者シーンは音源角度の分布が大きいが、音声時間分布の相違度が極めて大きいという特徴が示され、一般的には、ほとんどの時間（９０％の時間）はスピーカーが一人で講壇で発言し、この場合、一般的にはスピーカーの情報が最も重要であると思われ、撮影ポリシーとしてスピーカーを追従し、一貫性を保持し、司会者または視聴者による時折の中断を無視することができる。
【００３５】
本発明の一つの実施例として、前記現在の音声シーンが円卓会議シーンであると確定する場合、図４は本発明の実施例に係るカメラ撮影制御方法Ｓ１０４の具体的な実現フローを示し、詳細には、
Ｂ１、前記現在の音声シーンが円卓会議シーンであると確定する時、第一音声データが検出された場合、前記第一音声データの第一音源角度を取得し、
Ｂ２、前記第一音源角度に基づいて前記カメラを前記第一音源角度に対応する第一音源対象に移動させるように制御し、
Ｂ３、前記第一音声データが終了する時、前記円卓会議シーンに対応するスケジューリングモードに基づいて、次の音声データを出す第二音源対象を予め確定し、円卓会議シーンに対応するスケジューリングモードは前記カメラの移動を時計回りまたは逆時計回りに制御することを含み、
Ｂ４、前記第二音源対象の音源角度に基づいて前記カメラを前記第二音源対象に移動させるように事前に制御する。
【００３６】
または、前記Ｓ１０４は、
Ｂ５、前記第一音声データが終了する時、前記円卓会議シーンに対応するスケジューリングモードに基づいて、音声データを出す第二音源対象および音声データを出す第三音源対象を事前に確定することと、
Ｂ６、前記第二音源対象の音源角度および前記第三音源対象の音源角度に基づいて、前記カメラを前記第二音源対象と前記第三音源対象との中間位置に移動させるように事前に制御することと、をさらに含む。
【００３７】
本発明の実施例において、円卓会議シーンは図４ａに示すように、円卓会議シーンは音源角度の分布が大きく、音声間隔が均一であり、音声時間および間隔時間の分布が比較的均一であり、各人の情報が等しく重要であるという特徴が示され、音声角度の変化に応じて可能な限り追従するカメラ撮影ポリシーは適する。さらに、音声間隔時間が大きい場合、次の音源対象を予測し、カメラをステアリングさせるように事前に制御し、例えばＡの発言が終了してから一般的にはＢまたはＣが引き続き発言し、それならカメラをＢとＣとの中間に事前にスケジューリングすればよい。
【００３８】
例示的には、一定数の音声データを収集し、かつ音声データの音源角度に対して振れ除去処理を行い、例えばマイクロホンアレイの音声角度精度が１０度であると、１０度以内の音声を同一の音源対象由来の音声と見なすことができる。図４ａのようにＡを０度である起点として、音源角度は時計回り８５−９５度由来であれば、Ｄが発言していると考えられる。今回の音声と前回の音声の音源角度変化を比較し、音源角度が変化しなければ、前の音源対象は発言し続けると考えられ、処理しなく、角度が変化すると発見すれば、一回の切り替えが発生し、発言順序を標記する変数を設定し、即ち現在の音源対象が発言し終わった直後、同一の音源対象が発言する回数を標記し、例えばＤが発言し終わってＣが続く場合、Ｄの発言が終わってからＣが続くことを標記する変数に１を足す。前記標記は一つの二次元配列またはスケールで記憶することができる。一定数の音声データ（例えば１００回の音声切り替え）を累積した後、発言順序を標記するすべての変数を検索することによって、変数値が最大の変数に対応する音源対象を次の音声データ（発言）を出す可能性が最も大きい次の音源対象として選択し、カメラを該確定された次の音源対象へステアリングさせるように制御する。または、変数値が最大の変数に対応する音源対象および変数値が二番目に大きい変数に対応する音源対象を発言の可能性が最も大きい二つの音源対象として選択し、かつカメラを二つの音源対象の間にステアリングさせるように事前に制御する。
【００３９】
本発明の一つの実施例として、図５は本発明の実施例に係るカメラ撮影制御方法Ｓ１０４の具体的な実現フローを示し、詳細には、
Ｃ１、前記音声シーンがビデオ会話シーンである場合、ビデオ会議から現在の時刻までの音声データを取得し、
Ｃ２、取得される前記音声データの音源角度に基づいて発言領域を分割し、かつ分割された発言領域の領域角度を確定し、具体的には、複数の音源角度を二つずつ減算し、差分値が予め設定される角度差分値の範囲にあるものを同一の発言領域に分割し、同一発言領域の音源角度を加重平均することで得られた角度値を該発言領域の領域角度とすることができる。さらに、音源角度の数を統計し音源対象の数を確定し、音源角度および音源対象の数に基づいて発言領域を分割し、
Ｃ３、新しい音声データが検出された場合、前記新しい音声データの音源角度を取得し、新しい音声データとは発言領域を分割した後検出された音声データを指し、
Ｃ４、前記新しい音声データの音源角度が所属する発言領域を確定し、具体的には、発言領域の領域角度および検出された新しい音声データの音源角度に基づいて、前記新しい音声データの音源角度が所属する発言領域を確定し、前記新しい音声データの音源角度と分割された発言領域における音源角度を合わせることによって、新しい音声データの音源角度が所属する発言領域を検索し、
Ｃ５、確定される発言領域の領域角度に基づいてカメラのステアリング角度を制御し、前記新しい音声データの音源角度が所属する発言領域の領域角度は現在のカメラの向き角度であれば、いかなる調整もしなく、前記新しい音声データの音源角度が所属する発言領域の領域角度は現在のカメラの向き角度でなければ、カメラの現在の向き角度および前記新しい音声データの音源角度が所属する発言領域の領域角度に基づいて、前記カメラの移動を制御し、ステアリングの角度はカメラの現在の向き角度と前記新しい音声の音源角度が所属する発言領域の領域角度との差分値（絶対値である）である。
【００４０】
任意選択的に、分割された発言領域の領域角度を確定するために、前記ステップＤ５は、具体的には、
Ｃ５１、ビデオ会議から現在の時刻までの音声データの本数ｎ、各音声データに対応する音声時間Ｔｉおよび音源角度Ａｉを取得することと、
Ｃ５２、下式に基づいて前記カメラのステアリングする角度Ａｃ
【数１０】
2019186931.tif 000012
を確定することと、
または、Ｃ５３、下式に基づいて前記カメラのステアリングする角度Ａｃ
【数１１】
2019186931.tif 000013
を確定することと、を含む。
【００４１】
本発明の実施例において、ビデオ会話シーンは図５ａに示すように、ビデオ会話シーンは音声角度の分布が小さく、音声時間が異なり、一般的な音声間隔が短いが、一定の範囲で音源角度の変化が大きいという特徴が示され、この場合、カメラを簡単に追従させるように制御すれば、ビデオの激しい振れを引き起こし、本発明の実施例において、討論ホットスポット領域を設定し、単一の音源対象の音源角度の変化を無視することによって、カメラの頻繁なステアリングによるビデオの激しい振れを回避する。
【００４２】
任意選択的に、本発明の実施例において、現在の音声シーンを持続的に判断し、音声シーンが変化するが撮影モードを変更しないことを回避し、ある講演者はその話を終わってから、卓へ他の人と一緒に問題を討論し、一定の時間後、アルゴリズムは現在のモードが円卓会議モードに変わると判定し、即ち一つの音声シーンからほかのシーンへの切り替えを実現する。
【００４３】
本発明の第一実施例において、音源対象の音声データを収集し、そして前記音源対象の音声データに基づいて、音声特徴を抽出し、さらに抽出される音声特徴および予め設定される音声シーンに対応する音声特徴に基づいて、現在の音声シーンを確定し、最後に前記現在の音声シーンに対応する撮影モードを取得し、かつ前記現在の音声シーンに対応する撮影モードに基づいてカメラの移動を制御することによって、カメラは異なる音声シーンに基づいて異なる撮影モードを採用してカメラの移動やステアリングを制御し、複数の音源対象が交流する場合、カメラの頻繁な高速移動による振れを回避し、撮影の需要を満たすことができ、さらに撮影の効率およびユーザーエクスペリエンスを向上させることができる。
【００４４】
上記実施例における各ステップの順番の大きさは実行順序の優位性を意味するものではなく、各過程の実行順序はその機能および内部論理によって確定され、本発明の実施例の実施過程を制限するものではないことを理解すべきである。
【００４５】
実施例二
以上の実施例に記載のカメラ撮影制御方法に対応して、図６は本発明の実施例に係るカメラ撮影制御装置の構造を示すブロック図であり、該装置はインテリジェント装置に応用することができ、該インテリジェント装置は無線アクセスネットワークＲＡＮを経由して一つまたは複数のコアネットワークと通信するユーザー装置を含むことができ、該ユーザー装置は携帯電話（または「セル」電話と呼ばれる）またはモバイル機器を備えるコンピュータ等であってよく、例えば、ユーザー装置は携帯式、コンパクト式、手持ち式、コンピュータ内蔵装置であってもよく、それらは無線アクセスネットワークと音声および／またはデータを交換することができる。なお、例えば、該ユーザー装置は知能スピーカー、知能ロボット等であってもよい。説明の便宜上、本発明の実施例に関連する部分のみを示す。
【００４６】
図６を参照し、該カメラ撮影制御装置は、音声収集ユニット６１、特徴抽出ユニット６２、シーン確定ユニット６３、ステアリング制御ユニット６４を含み、ここで、
音声収集ユニット６１は音源対象の音声データを収集するために用いられ、
特徴抽出ユニット６２は前記音源対象の音声データに基づいて、音声特徴を抽出するために用いられ、
シーン確定ユニット６３は抽出される音声特徴および予め設定される音声シーンに対応する音声特徴に基づいて、現在の音声シーンを確定するために用いられ、
ステアリング制御ユニット６４は前記現在の音声シーンに対応する撮影モードを取得し、かつ前記現在の音声シーンに対応する撮影モードに基づいて前記カメラの移動を制御するために用いられる。
【００４７】
任意選択的に、前記音声特徴は音声時間、音声間隔時間、音源角度、音声音響インテンシティや音声周波数のうちの一つ以上を含む。
【００４８】
任意選択的に、前記シーン確定ユニット６３は、
所定数の音声データの音声特徴を抽出するための特徴抽出モジュールと、
前記所定数の音声データの音声特徴を訓練された機械学習モデルに入力し、現在の音声シーンを確定するための第一シーン確定モジュールと、を含む。
【００４９】
任意選択的に、前記シーン確定ユニット６３は、
所定数のサンプル音声データを取得し、かつ前記サンプル音声データに基づいてサンプル音声データセットを確定するためのサンプルセット確立モジュールと、ここで、前記サンプル音声データに音声シーンが標記され、各音声シーンのサンプル音声データの数は各音声シーンのサンプル音声データの平均数以上であり、前記サンプル音声データに基づいて音声特徴を抽出し、かつ抽出される音声特徴に基づいて特徴ベクトルセットを確立するための特徴ベクトルセット確立モジュールと、
前記特徴ベクトルセットに基づいて前記サンプル音声データセットの決定木を訓練し、前記決定木の実出力値と好ましい出力値が同一になるまで、訓練を完成させるための訓練モジュールと、をさらに含む。
【００５０】
任意選択的に、前記シーン確定ユニット６３は、
所定数のサンプル音声データを取得するためのサンプル取得モジュールと、
前記サンプル音声データの音源角度の分布、音声時間分布および音声間隔時間を確定するための特徴確定モジュールと、
前記サンプル音声データの音源角度の分布、音声時間分布および音声間隔時間に基づいて決定木を構築するための決定木構築モジュールと、
構築される決定木および抽出される音声特徴に基づいて、現在の音声シーンを確定するための第二シーン確定モジュールと、を含む。
【００５１】
任意選択的に、前記ステアリング制御ユニット６４は、
前記音声シーンがビデオ会話シーンである場合、ビデオ会議から現在の時刻までの音声データを取得するための第一音声取得モジュールと、
取得される前記音声データの音源角度に基づいて発言領域を分割し、かつ分割された発言領域の領域角度を確定するための領域分割モジュールと、
新しい音声データが検出された場合、前記新しい音声データの音源角度を取得するための音声検出モジュールと、
前記新しい音声データの音源角度が所属する発言領域を確定するための角度整合モジュールと、
確定される発言領域の領域角度に基づいてカメラのステアリング角度を制御するための第一ステアリング制御モジュールと、を含む。
【００５２】
任意選択的に、前記第一ステアリング制御モジュールは、具体的には、ビデオ会議から現在の時刻までの音声データの本数ｎ、各音声データに対応する音声時間Ｔｉおよび音源角度Ａｉを取得し、下式に基づいて前記カメラのステアリングする角度Ａｃ
【数１２】
2019186931.tif 000014
を確定するために用いられ、
または、前記第一ステアリング制御モジュールはさらに、下式に基づいて前記カメラのステアリングする角度Ａｃ
【数１３】
2019186931.tif 000015
を確定するために用いられる。
【００５３】
任意選択的に、前記ステアリング制御ユニット６４は、
前記現在の音声シーンが円卓会議シーンであると確定する時、第一音声データが検出された場合、前記第一音声データの第一音源角度を取得するための第二音声取得モジュールと、
前記第一音源角度に基づいて前記カメラを前記第一音源角度に対応する第一音源対象に移動させるように制御するための第二ステアリングモジュールと、
前記第一音声データが終了する時、前記円卓会議シーンに対応するスケジューリングモードに基づいて、次の音声データを出す第二音源対象を予め確定するための第一予測モジュールと、
前記第二ステアリングモジュールは、さらに前記第二音源対象の音源角度に基づいて前記カメラを前記第二音源対象に移動させるように事前に制御するために用いられ、
前記第一音声データが終了する時、前記円卓会議シーンに対応するスケジューリングモードに基づいて、音声データを出す第二音源対象および音声データを出す第三音源対象を事前に確定するための第二予測モジュールと、
前記第二音源対象の音源角度および前記第三音源対象の音源角度に基づいて、前記カメラを前記第二音源対象と前記第三音源対象との中間位置に移動させるように事前に制御するための第三ステアリングモジュールと、を含む。
【００５４】
本発明の第二実施例において、音源対象の音声データを収集し、そして前記音源対象の音声データに基づいて、音声特徴を抽出し、さらに抽出される音声特徴および予め設定される音声シーンに対応する音声特徴に基づいて、現在の音声シーンを確定し、最後に前記現在の音声シーンに対応する撮影モードを取得し、かつ前記現在の音声シーンに対応する撮影モードに基づいて前記カメラの移動を制御することによって、カメラは異なる音声シーンに基づいて異なる撮影モードを採用してカメラの移動やステアリングを制御し、複数の音源対象が交流する場合、カメラの頻繁な高速移動による振れを回避し、撮影の需要を満たすことができ、さらに撮影の効率およびユーザーエクスペリエンスを向上させることができる。
【００５５】
実施例三
図７は本発明の一つの実施例に係るインテリジェント装置の模式図である。図７に示すように、該実施例のインテリジェント装置７は、プロセッサ７０と、メモリ７１と、前記メモリ７１に記憶され、前記プロセッサ７０で実行可能なコンピュータプログラム７２、例えば撮影制御プログラムとを含む。前記プロセッサ７０は前記コンピュータプログラム７２を実行する時、上記各カメラ撮影制御方法の実施例におけるステップ、例えば図１に示すステップ１０１乃至１０４を実現する。または、前記プロセッサ７０は前記コンピュータプログラム７２を実行する時、上記各装置実施例における各モジュール／ユニットの機能、例えば図６に示すユニット６１乃至６４の機能を実現する。
【００５６】
例示的には、前記コンピュータプログラム７２は一つまたは複数のモジュール／ユニットに分割されてよく、前記一つ又は複数のモジュール／ユニットは前記メモリ７１に記憶され、かつ前記プロセッサ７０によって実行され、本発明に至った。前記一つ又は複数のモジュール／ユニットは、特定の機能を達成できる一連のコンピュータプログラム命令セグメントであってよく、該命令セグメントは前記コンピュータプログラム７２の前記インテリジェント装置７での実行過程を記述するためのものである。例えば、前記コンピュータプログラム７２は音声収集ユニット、特徴抽出ユニット、シーン確定ユニット、ステアリング制御ユニットに分割されてよく、各ユニットの具体的な機能について、
音声収集ユニットは音源対象の音声データを収集するために用いられ、
特徴抽出ユニットは前記音源対象の音声データに基づいて、音声特徴を抽出するために用いられ、
シーン確定ユニットは抽出される音声特徴および予め設定される音声シーンに対応する音声特徴に基づいて、現在の音声シーンを確定するために用いられ、
ステアリング制御ユニットは前記現在の音声シーンに対応する撮影モードを取得し、かつ前記現在の音声シーンに対応する撮影モードに基づいて前記カメラの移動を制御するために用いられる。
【００５７】
前記インテリジェント装置７はカメラ付きの知能スピーカー、マイクロホンアレイを有するスマートカメラおよび知能ロボット等のインテリジェント装置であってもよい。前記インテリジェント装置７は、プロセッサ７０と、メモリ７１とを含むが、それらに制限されない。当業者であれば、図７はインテリジェント装置７を例示するためのものに過ぎず、インテリジェント装置７を制限するものではなく、図示よりも多くの部品又は少ない部品、またはある部品の組み合わせ、または異なる部品を含んでよく、例えば前記インテリジェント装置はさらに入出力装置、ネットワークアクセスデバイス、バス等を含んでよい、ということを理解すべきである。
【００５８】
所謂プロセッサ７０は中央処理装置（Ｃｅｎｔｒａｌ  Ｐｒｏｃｅｓｓｉｎｇ  Ｕｎｉｔ、ＣＰＵ）であってよく、ほかの汎用プロセッサ、ディジタル信号プロセッサ（Ｄｉｇｉｔａｌ  Ｓｉｇｎａｌ  Ｐｒｏｃｅｓｓｏｒ、ＤＳＰ）、特定用途向け集積回路（Ａｐｐｌｉｃａｔｉｏｎ  Ｓｐｅｃｉｆｉｃ  Ｉｎｔｅｇｒａｔｅｄ  Ｃｉｒｃｕｉｔ、ＡＳＩＣ）、フィールドプログラマブルゲートアレイ（Ｆｉｅｌｄ−Ｐｒｏｇｒａｍｍａｂｌｅ  Ｇａｔｅ  Ａｒｒａｙ、ＦＰＧＡ）又はほかのプログラマブルロジックデバイス、ディスクリートゲートやトランジスタロジックデバイス、ディスクリートハードウェアコンポーネント等であってもよい。汎用プロセッサはマイクロプロセッサであってよく、または該プロセッサは任意の通常のプロセッサ等であってもよい。
【００５９】
前記メモリ７１は前記インテリジェント装置７の内部ストレージユニット、例えばインテリジェント装置７のハードディスクまたは内部メモリであってよい。前記メモリ７１は前記インテリジェント装置７の外部ストレージ装置、例えば前記インテリジェント装置７に配置される差し込み接続式ハードディスク、スマートメディアカード（Ｓｍａｒｔ  Ｍｅｄｉａ（登録商標）  Ｃａｒｄ、ＳＭＣ）、セキュアデジタル（Ｓｅｃｕｒｅ  Ｄｉｇｉｔａｌ、ＳＤ）カード、フラッシュカード（Ｆｌａｓｈ  Ｃａｒｄ）等であってもよい。さらに、前記メモリ７１は前記インテリジェント装置７の内部ストレージユニットを含み、さらに外部ストレージ装置を含んでもよい。前記メモリ７１は前記コンピュータプログラムおよび前記インテリジェント装置に必要なほかのプログラムおよびデータを記憶するために用いられる。前記メモリ７１はさらに出力済みまたは出力しようとするデータを一時記憶するために用いられる。
【００６０】
当業者であれば、説明しやすくおよび簡潔にするために、上述の各機能ユニット、モジュールの分けのみが例示されているが、実際の応用で、需要に応じて上記機能配分は異なる機能ユニット、モジュールによって完成されて分け、即ち前記装置の内部構造を異なる機能ユニットやモジュールに分けして上述機能の全部または一部を実現できることは明確に理解できるであろう。実施例における各機能ユニット、モジュールは一つの処理ユニットに統合されていてもよく、物理的に別々に存在していてもよく、二つ以上のユニットが一つのユニットに統合されてもよいが、上記統合ユニットは、ハードウェアの形態またはソフトウェア機能ユニットの形態を採用できる。また、各機能ユニット、モジュールの具体的な名称は、互いに区別することのみを目的とし、本出願の保護範囲を制限するものではない。上述のシステムにおけるユニット、モジュールの具体的な作業プロセスについては、前記の方法実施例における対応するプロセスを参照することができ、ここで再度の説明を省略する。
【００６１】
上記の実施例では、各実施例にそれぞれ重点を置いて説明したが、ある実施例では詳しく説明または記載しない部分について、ほかの実施例の関連説明を参照することができる。
【００６２】
当業者は、本説明書に開示される実施例と関連付けて説明した各例示的なユニットおよびアルゴリズムステップは、電子ハードウェア、またはコンピュータソフトウェアおよび電子ハードウェアの組み合わせによって実現することができる、ということを意識することができる。これらの機能はいったいハードウェア方式またはソフトウェア方式で実行しているか否かということに関して、技術的解決手段の特定の応用および設計上の制約条件に依存する。当業者は各特定の応用につき、異なる方法によって説明された機能を実現することができるが、これらの実現は本発明の範囲を逸脱するものと思われるべきではない。
【００６３】
本発明が提供する実施例において、開示される装置および方法はほかの方式で実行され得ることを理解すべきである。例えば、以上に記載のシステムの実施例は例示に過ぎず、例えば、前記モジュールまたはユニットの分割はただ論理機能の分割であり、実際に実現する場合、例えば複数のユニットまたはコンポーネントを組み合わせたり、ほかのシステムに集積したり、一部の特徴を無視したり、実行したりしないなど、ほかの分割方法も採用できる。さらに、表示または討論される相互の結合または直接結合または通信接続はあるインターフェース、装置またはユニットを経由する間接結合または通信接続であり、電気的、機械的またはほかの形式であってもよい。
【００６４】
前記分割部品として説明されるユニットは物理的に分離されてもよいし、物理的に分離されなくてもよいが、ユニットとして表示される部品は物理ユニットであってもなくてもよく、即ちある場合に位置してよく、または複数のネットワークユニットに分布してもよい。実際の需要に応じてそのユニットの一部または全部を選択して本実施例の解決手段の目的を実現することができる。
【００６５】
また、本発明の各実施例における各機能ユニットは一つのプロセシングユニットに集積されてよく、各ユニットは単独で物理的に存在してもよく、二つまたは二つ以上のユニットは一つのユニットに集積されてもよい。上記集積されるユニットはハードウェアの形式で実現してよく、ソフトウェア機能ユニットの形式で実現してもよい。
【００６６】
前記集積されるユニットはソフトウェア機能ユニットの形式で実現しかつ独立製品として販売または使用する場合、一つのコンピュータ読み取り可能な記憶媒体に記憶することができる。これらの理解に基づいて、本発明の上記実施例を実現する方法における全部または一部のフローは、コンピュータプログラムによって関連するハードウェアを命令して完成させてもよく、前記コンピュータプログラムはコンピュータ読み取り可能な記憶媒体に記憶することができ、該コンピュータプログラムはプロセッサにより実行される時、上記各方法の実施例のステップを実現することができる。そのうち、前記コンピュータプログラムはコンピュータプログラムコードを含み、前記コンピュータプログラムコードはソースコード形式、目的コード形式、実行ファイルまたはある中間型等であってよい。前記コンピュータ可読媒体は前記コンピュータプログラムコードを携帯可能な任意の実体または装置、記録媒体、Ｕディスク、携帯型ハードディスク、磁気ディスク、光ディスク、コンピュータメモリ、読み出し専用メモリ（ＲＯＭ、Ｒｅａｄ−Ｏｎｌｙ  Ｍｅｍｏｒｙ）、ランダムアクセスメモリ（ＲＡＭ、Ｒａｎｄｏｍ  Ａｃｃｅｓｓ  Ｍｅｍｏｒｙ）、電気搬送波信号、電気信号およびソフトウェア分散媒体等を含んでよい。前記コンピュータ可読媒体に含まれる内容は裁判管轄区での法規および特許実施上の要求に基づいて適当に増減することができ、例えばある裁判管轄区では、法規および特許実施に基づいて、コンピュータ可読媒体は電気搬送波信号および電気通信信号を含まない、ということを説明すべきである。
【００６７】
以上に記載の実施例は本発明の技術的解決手段を説明するものであって、これを制限するものではなく、前記実施例を参照しながら本発明を詳細に説明したが、当業者であれば、それは依然として前記各実施例に記載の技術的解決手段を修正し、又はそのうち一部の技術特徴に対して均等物による置換を行うことができるが、これらの修正又は置換は、対応する技術的解決手段の本質を本発明の各実施例の技術的解決手段の精神と範疇から逸脱させるものではなく、それらは全て本発明の保護範囲に属する、ということを理解すべきである。
【符号の説明】
【００６８】
７  インテリジェント装置
６１  音声収集ユニット
６２  特徴抽出ユニット
６３  シーン確定ユニット
６４  ステアリング制御ユニット
７０  プロセッサ
７１  メモリ
７２  コンピュータプログラム
【図１】
2019186931.tif 000020
【図２】
2019186931.tif 000021
【図３】
2019186931.tif 000022
【図４】
2019186931.tif 000023
【図４ａ】
2019186931.tif 000024
【図５】
2019186931.tif 000025
【図５ａ】
2019186931.tif 000026
【図６】
2019186931.tif 000027
【図７】
2019186931.tif 000028