(57)【要約】【課題】映像データと共に入力された音声データを音声処理し変換したテキストデータまたはキーワードを基に映像データの検索が行えるようにする。【解決手段】映像データと音声データをネットワークに出力する撮像装置と、映像データと音声データを取得して、記録装置に記録して監視を行う監視装置とから成る映像監視システムにおいて、撮像装置は、音声情報を入力する音声入力手段と、音声入力手段から入力された音声情報を音声認識して、１ないし複数のキーワードまたはテキストデータに変換する変換手段と、画像データをネットワークへ送信する際に、変換手段で変換されたキーワードまたはテキストデータを、送信すべき画像データに付加して送信する送信手段と、を備え、監視装置は、撮像装置から送信され、記録装置に記録された映像データの中から、キーワードまたはテキストデータ中の文言をキーにして所望の映像データを検索する。【選択図】  図１
2014053717.tif 000002
【特許請求の範囲】
【請求項１】
監視領域内の映像情報と音声情報を取得し、取得した映像情報と音声情報を映像信号と音声信号に変換し、更に、映像データと音声データにデジタル変換してネットワークに出力する撮像装置と、前記映像データと音声データをネットワークを介して取得して、記録装置に記録して監視を行う監視装置とから成る映像監視システムにおいて、
前記撮像装置は、前記音声情報を入力する音声入力手段と、前記音声入力手段から入力された音声情報を音声認識して、１ないし複数のキーワードまたはテキストデータに変換する変換手段と、前記画像データを前記ネットワークへ送信する際に、前記変換手段で変換されたキーワードまたはテキストデータを、送信すべき画像データに付加して送信する送信手段と、を備えることを特徴とする映像監視システム。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、監視カメラ側から送信された映像及び音声データを録画装置で記録し、記録した映像データから所望の映像を検索して監視を行う映像監視システムに関する。
【背景技術】
【０００２】
監視カメラを用いた映像監視システムでは、監視カメラ側から送信された映像及び音声データを録画装置で記録し、記録した映像データの中から検索を行い、検索した映像データを再生表示して監視するのが一般的である。
【０００３】
一般的な映像監視システムの例として、特許文献１には、入力された音声パターンと予め登録された音声パターンとを比較して、特定の音声パターンを含んだ映像及び音声データのみを端末に伝送することが記載されており、また、特許文献２には、伝送された音声データを映像データとともに記録装置に記録することが記載されている。
【先行技術文献】
【特許文献】
【０００４】
【特許文献１】特開２００７−２９５４８４号公報
【特許文献２】特開２００７−２４３５３３号公報
【発明の概要】
【発明が解決しようとする課題】
【０００５】
最近では、監視カメラ数の増大、記録期間の長期化によってデータ量が非常に多くなっており、記録装置に記録した映像データの中から、いかに早く、また、効率的に検索が行えるかが求められている。
【０００６】
これまで、記録装置に記録した記録映像を検索する方法としては、日時・時刻をキーにする方法しかなく、日時・時刻を指定して検索を行い、再生画像を表示装置に表示することで映像・音声状況を確認していた。
このような方法では、検索及び確認に非常に多くの時間を要し、効率的でないという問題があった。
【０００７】
本発明は、上記事情に鑑みてなされたものであって、映像データとともに入力された音声データを音声処理し変換したテキストデータまたはキーワードを基に映像データの検索が行えるようにした映像監視システムおよび映像監視方法を提供することを目的とする。
【課題を解決するための手段】
【０００８】
上記目的を達成するための本発明は、監視領域内の映像情報と音声情報を取得し、取得した映像情報と音声情報を映像信号と音声信号に変換し、更に、映像データと音声データにデジタル変換してネットワークに出力する撮像装置と、前記映像データと音声データをネットワークを介して取得して、記録装置に記録して監視を行う監視装置とから成る映像監視システムにおいて、前記撮像装置は、前記音声情報を入力する音声入力手段と、前記音声入力手段から入力された音声情報を音声認識して、１ないし複数のキーワードまたはテキストデータに変換する変換手段と、前記画像データを前記ネットワークへ送信する際に、前記変換手段で変換されたキーワードまたはテキストデータを、送信すべき画像データに付加して送信する送信手段と、を備えることを特徴とする。
【０００９】
また、上記目的を達成するための本発明は、前記監視装置は、前記撮像装置から送信され、前記記録装置に記録された前記映像データの中から、前記キーワードまたは前記テキストデータ中の文言をキーにして所望の映像データを検索することを特徴とする。
【００１０】
また、上記目的を達成するための本発明は、監視領域内の映像情報と音声情報を取得し、取得した映像情報と音声情報を映像信号と音声信号に変換し、更に、映像データと音声データにデジタル変換してネットワークに出力する撮像装置と、前記映像データと音声データをネットワークを介して取得して、記録装置に記録して監視を行う監視装置とから成る映像監視システムの映像監視方法であって、撮像された映像情報が画像入力手段に入力されると、当該画像入力手段に入力された前記画像情報に関する音声情報が音声入力手段に入力され、当該音声入力手段に入力された音声情報を変換手段が音声認識して１ないし複数のキーワードまたはテキストデータに変換し、送信手段が当該キーワードまたはテキストデータを前記映像情報に組み込んでネットワークに出力することを特徴とする。
【００１１】
また、上記目的を達成するための本発明は、前記監視装置は、前記撮像装置から送信され、前記記録装置に記録された前記映像データの中から、前記キーワードまたは前記テキストデータ中の文言をキーにして所望の映像データを検索することを特徴とする。
【発明の効果】
【００１２】
本発明によれば、日時・時刻をキーにした検索以外に、映像データとともに入力された音声データを音声処理し変換したテキストデータまたはキーワードを使って検索が行えるので、映像監視システムの操作性の向上を図ることができる。
【図面の簡単な説明】
【００１３】
【図１】本発明の実施形態１の映像監視システムのシステム構成図である。
【図２】図１に示す音声処理部の構成の一例を示すブロック構成図である。
【図３】図１に示す音声処理部の動作の一例を示すフローチャートである。
【図４】図２に示す音声処理部のキーワード設定テーブルのデータ構成の一例を示すデータ構成図である。
【図５】図１に示す伝送部から送出される映像データのデータ構成の一例を示すデータ構成図である。
【図６】監視装置での映像データの検索方法を説明するための説明図である。
【図７】監視装置での映像データの検索方法を説明するための他の説明図である。
【発明を実施するための形態】
【００１４】
＜実施形態１＞
以下に、本発明の実施形態１の映像監視システムについて、図面を参照して詳細に説明する。  
【００１５】
（実施形態１のシステム構成）
図１は、本発明の実施形態１の映像監視システムのシステム構成図である。
図１において、１は撮像装置、１０はＴＶカメラ等の撮像部、２０はアナログ映像信号をデジタル映像信号に変換するアナログ−デジタル変換部（Ａ／Ｄ）、３０はデジタル変換された映像データを蓄積する映像データ記録部、６０はマイク等の集音部（ＭＩＣ）、７０は集音部６０により入力される音声信号を電気的に増幅する増幅部（ＡＭＰ）、８０はアナログ音声信号をデジタル信号に変換するアナログ−デジタル変換部（Ａ／Ｄ）、９０はデジタルサンプリングされた音声データを蓄積する音声データ記録部、４０は映像データをネットワークの規格に合わせて変換するプロトコル変換部、１００は音声データを処理してテキストデータに変換する音声処理部、１１０は音声データ及びテキストデータをネットワークの規格に合わせて変換するプロトコル変換部、５０はネットワーク３へ伝送する伝送部、１２０は撮像装置１の各構成要素（例えば、撮像部１０、アナログ−デジタル変換部２０、映像データ記録部３０、集音部６０、増幅部７０、アナログ−デジタル変換部８０、音声データ記録部９０、プロトコル変換部４０、音声処理部１００、プロトコル変換部１１０、及び伝送部５０）を制御するためのＣＰＵ（Ｃｅｎｔｒａｌ  Ｐｒｏｃｅｓｓｉｎｇ  Ｕｎｉｔ）である。
また、２は監視装置であり、３は撮像装置１と監視装置２を接続するネットワークである。
また、監視装置２内には、ＬＡＮ４を介して、モニタ５と、ネットワーク録画装置７と、モニタ５とネットワーク録画装置７を操作及び制御するための操作・制御部６が接続されている。
【００１６】
図１において、撮像部１０は、視野範囲内を撮像し、取得した被写体像をアナログ映像信号に変換して、アナログ−デジタル変換部２０に出力する。アナログ−デジタル変換部２０は、入力されたアナログ映像信号をデジタル変換し、映像データ記録部３０に映像データとして出力する。映像データ記録部３０は、入力された映像データを一時的に蓄積する。映像データ記録部３０では、フレーム単位で複数フレームを蓄積する場合もある。
【００１７】
集音部６０は、周囲の音を捉え、アナログ音声信号として増幅部７０に出力する。
増幅部７０は、入力されたアナログ音声信号を可聴音レベルまで増幅し、アナログ−デジタル変換部８０に出力する。アナログ−デジタル変換部８０は、入力されたアナログ音声信号をデジタルサンプリングしてデジタル音声データとして音声データ記録部９０に出力する。
音声データ記録部９０は、入力されたデジタル変換された音声データを一時的に蓄積する。
【００１８】
音声処理部１００は、音声データ記録部９０から出力された音声データを処理してテキストデータに変換し、音声データとテキストデータをプロトコル変換部１１０に出力する。
プロトコル変換部４０は、必要に応じて映像データ記録部３０から映像データを読み出し、伝送するネットワーク３に合わせ、プロトコルに則って変換して伝送部５０に出力する。同様に、プロトコル変換部１１０は、必要に応じて音声処理部１００から音声データ及びテキストデータを読み出し、伝送するネットワークに合わせ、プロトコルに準じて変換して伝送部５０に出力する。
プロトコル変換部４０と１１０はそれぞれ、映像データ、音声データ及びテキストデータを必要に応じて伝送後に映像と音声の同期が取れるように変換する。
【００１９】
伝送部５０は、プロトコル変換部４０および１１０によりプロトコル変換された映像データ、音声データ及びテキストデータをネットワーク３に送出する。
監視装置２は、ネットワーク３を介して撮像装置１からの映像データ、音声データ及びテキストデータを受信する。受信したデータは、操作・制御部６からの指示によって、監視装置２のモニタ５に表示されたり、ネットワーク録画装置７のデータベース８に記録される。
【００２０】
ＣＰＵ１２０は、撮像装置１内の実行プログラムに応じて撮像装置１内の各構成要素（ 例えば、撮像部１０、アナログ−デジタル変換部２０、映像データ記録部３０、集音部６０、増幅部７０、アナログ−デジタル変換部８０、音声データ記録部９０、プロトコル変換部４０、音声処理部１００、プロトコル変換部１１０、及び伝送部５０）
を制御する。
【００２１】
次に、音声処理部１００の具体的な構成について図２を用いて説明する。図２は、図１に示す音声処理部の構成の一例を示すブロック構成図である。
図２に示すように、音声処理部１００は、少なくとも制御部１０１とキーワード設定テーブル１０６とを備えて構成され、また、制御部１０１は、音量・音声解析手段１０２と、キーワードＴｅｘｔ変換手段１０３と、音声認識手段１０４と、Ｔｅｘｔ変換手段１０５を備える構成となっている。
【００２２】
次に、音声処理部１００で行われる処理について、図３のフローチャートを参照して説明する。
図３は、図１に示す音声処理部の処理の一例を示すフローチャートである。
音声処理部１００では、ステップＳ１０１において、音声データ記憶部９０から音声データが入力されると、ステップＳ１０２において、音量・音質解析手段１０２によって、音量・音質の解析を行う。
次に、ステップＳ１０３において、キーワードＴｅｘｔ変換手段１０３によって、ステップＳ１０２の解析結果を基に、図４のキーワード設定テーブル１０６を参照してキーワードの設定を行う。
例えば、音声データの中に、キーワード設定テーブル１０６に登録されている“キャー”という内容の音声データがあれば、キーワードとして“悲鳴”を設定し、また、音声データの中に、キーワード設定テーブル１０６に登録されている“バカヤロー”という内容の音声データがあれば、キーワードとして“怒号”の設定を行う。
【００２３】
次に、ステップＳ１０４において、音声認識手段１０４によって、音声データの音声認識を行う。
次に、ステップＳ１０５において、Ｔｅｘｔ変換手段１０５によって、ステップＳ１０４で音声認識された音声データをＴｅｘｔ変換し登録を行う。
次に、ステップＳ１０６において、音声データとともに、当該音声データに附随したキーワードとＴｅｘｔデータをプロトコル変換部１１０に送出する。
【００２４】
従って、伝送部５０では、プロトコル変換部４０から入力された映像データに、プロトコル変換部１１０から入力されたキーワード及びＴｅｘｔデータを組み込み、音声データとともにネットワーク３へ送出する。
ここで、映像データにキーワード及びＴｅｘｔデータを組み込む方法について、図を参照して、その一例を説明する。
図５は、図１に示す伝送部から送出される映像データのデータ構成の一例を示すデータ構成図である。
図５に示す映像データ４１はＪＰＥＧファイルを示しており、ＪＰＥＧファイルは、イメージ開始を示すＳＯＩ４２と、ＪＰＥＧのファイル情報を種類別に分けて示す複数のセグメント４３〜４５と、イメージデータ４６と、イメージの終了を示すＥＯＩ４７とから構成されている。
そこで、上記した複数のセグメントの中でアプリケーションデータセグメントとして定義されている領域（ＡＰＰ０（０ｘＦＦＥ０））にキーワード及びＴｅｘｔデータを組み込み、ＪＰＥＧファイル情報として利用する。
なお、Ｈ．２６４のようなストリームの場合も同様にＧＯＰ（Ｇｒｏｕｐ  Ｏｆ  Ｐｉｃｔｕｒｅｓ）単位で組み込むことが可能である。
【００２５】
次に、本発明の実施形態１の映像監視システムの監視装置２で行う記録映像の検索方法について、図１を参照して詳細に説明する。
上述したように、撮像装置１からネットワーク３を介して送出された映像データには、音声データを基にしたキーワード及びＴｅｘｔデータが組み込まれており、監視装置２のネットワーク録画装置７内のデータベース８に音声データとともに蓄積される。
そして、操作・制御部６からの指示により、データベース８に蓄積された映像データの中から所望の映像データを検索する場合、従来と同様に、（１）日時・時刻をキーにして検索を行う方法、以外に、（２）音声データを基に登録されたキーワード、または、音声データから変換したＴｅｘｔデータをキーにして検索を行う方法がある。
【００２６】
そこで、監視員が、監視装置２内の操作・制御部６を操作して、データベース８に蓄積された記録映像の中から所望の映像データを検索する場合の動作について、図を参照して説明する。
図６は、監視装置での映像データの検索方法を説明するための説明図である。
図６に示すように、監視員は、操作・制御部６を操作し、ステップＳ２０１において、検索条件として、キーワード“悲鳴”を入力すると、ステップＳ２０２において、検索結果として、“１．カメラ１  ２０１２年１月１日  ０時１５分０５秒”の映像データが抽出され、更に、当該映像データを選択操作することにより、ステップＳ２０３において、モニタ５の画面上に映像が表示される。
【００２７】
また、図７は、監視装置での映像データの検索方法を説明するための他の説明図である。
図７に示すように、監視員は、操作・制御部６を操作し、ステップＳ３０１において、検索条件として、キーワード“お金”を入力すると、ステップＳ３０２において、検索結果として、“１．カメラ３  ２０１２年３月２日  １４時０５分１０秒”の映像データが抽出され、更に、当該映像データを選択操作することにより、ステップＳ３０３において、モニタ５の画面上に映像が表示される。
【００２８】
以上説明したように、本発明の実施形態１の映像監視システムによれば、日時・時刻をキーにした検索以外に、映像データとともに入力された音声データを音声処理し変換したテキストデータまたはキーワードを使って検索が行えるので、映像監視システムの操作性の向上を図ることができる。
【符号の説明】
【００２９】
１：撮像装置、２：監視装置、３：ネットワーク、４：ＬＡＮ、５：モニタ、６：操作・制御部、７：ネットワーク録画装置、８：データベース、１０：撮像部、２０：アナログ−デジタル変換部、３０：映像データ記録部、４０：プロトコル変換部、４１：映像データ、４２：ＳＯＩ、４３〜４５：セグメント、４６：イメージデータ、４７：ＥＯＩ、５０：伝送部、６０：集音部、７０：増幅部、８０：アナログ−デジタル変換部、９０：音声データ記録部、１００：音声処理部、１０１：制御部、１０２：音量・音声解析手段、１０３：キーワードＴｅｘｔ変換手段、１０４：音声認識手段、１０５：Ｔｅｘｔ変換手段、１０６：キーワード設定テーブル、１１０：プロトコル変換部、１２０：ＣＰＵ。
【図１】
2014053717.tif 000003
【図２】
2014053717.tif 000004
【図３】
2014053717.tif 000005
【図４】
2014053717.tif 000006
【図５】
2014053717.tif 000007
【図６】
2014053717.tif 000008
【図７】
2014053717.tif 000009