(57)【要約】【課題】表示された収音領域の画像と収音領域で収音された音声の指向性が形成された位置とを対応付け、表示部に表示された画像の切替に応じて、音声の指向性が形成された位置を追従して切り替える。【解決手段】指向性制御システム５では、マイクアレイ２０は、収音領域の音声を収音する。カメラ１０は、収音領域の画像を撮像する。ディスプレイ６３は、カメラ１０により撮像された収音領域の画像を表示する。演算装置５１は、ディスプレイ６３に表示された収音領域の画像上の指定位置に対応する指向方向に、マイクアレイ２０により収音された音声の音声データの指向性を形成する際、収音領域の画像を切り替えるための入力操作に応じて、切替後の画像上の所定位置に対応する指向方向に指向性を形成する。【選択図】図４
2016119620.tif 000002
【特許請求の範囲】
【請求項１】
収音領域の音声を収音する収音部と、
前記収音領域の画像を撮像する撮像部と、
前記撮像部により撮像された前記収音領域の画像を表示する表示部と、
前記表示部に表示された前記収音領域の画像上の指定位置に対応する指向方向に、前記収音部により収音された前記音声の音声データの指向性を形成する指向性形成部と、を備え、
前記指向性形成部は、前記収音領域の画像を切り替えるための入力操作に応じて、切替後の前記収音領域の画像上の所定位置に対応する指向方向に前記指向性を形成する、
指向性制御システム。
【請求項２】
請求項１に記載の指向性制御システムであって、
前記指向性形成部は、前記入力操作に応じて、前記表示部に表示された前記収音領域の画像が拡大される程、前記指向性の形成範囲を狭まるように前記指向性を形成する、
指向性制御システム。
【請求項３】
請求項１又は２に記載の指向性制御システムであって、
前記所定位置は、前記入力操作に応じて前記表示部に表示された前記収音領域の画像上の略中心位置である、
指向性制御システム。
【請求項４】
請求項１から３のうちいずれか一項に記載の指向性制御システムであって、
前記入力操作は、ズームイン、ズームアウト及びドラッグ操作の少なくとも１つを含む、
指向性制御システム。
【請求項５】
収音部と撮像部とを含む指向性制御システムにおける指向性制御方法であって、
収音領域の音声を前記収音部において収音するステップと、
前記収音領域の画像を前記撮像部において撮像するステップと、
前記撮像部により撮像された前記収音領域の画像を表示部に表示するステップと、
前記表示部に表示された前記収音領域の画像上の指定位置に対応する指向方向に、前記収音部により収音された前記音声の音声データの指向性を形成するステップと、を有し、
前記指向性の形成では、
前記収音領域の画像を切り替えるための入力操作に応じて、切替後の前記収音領域の画像上の所定位置に対応する指向方向に前記指向性を形成する、
指向性制御方法。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、収音された音声の指向性を形成する指向性制御システム及び指向性制御方法に関する。
【背景技術】
【０００２】
従来、マイクアレイとカメラとを一体的又は別体として用いて、リアルタイムにモニタリング或いは予め収音しておいた音声を後で再生して確認する際に、カメラの画像上の任意の位置が選択されると、マイクアレイから選択された位置に対応する実際の位置に向かう方向に音声の指向性を形成し、指向性が形成された音声を再生する装置が知られている（例えば、特許文献１参照）。
【先行技術文献】
【特許文献】
【０００３】
【特許文献１】特開２０１４−１４３６７８号公報
【発明の概要】
【発明が解決しようとする課題】
【０００４】
しかし、特許文献１の構成では、画角が固定されたカメラの画像に対し、音声の指向性を形成し、カメラの画像に対してズームインやズームアウト等の操作を行った場合には、どのように音声の指向性を形成するかについては何も考慮されていない。同様に、カメラがパン方向やチルト方向に駆動自在で光軸を変更可能なＰＴＺ（Pan Tilt Zoom）カメラである場合には、ＰＴＺカメラの駆動によりディスプレイに表示される画像が切り替えられるが、そのような場合に、音声の指向性がどのように形成されるかについても検討されていない。
【０００５】
従って、カメラにより撮像された画像に対してズーム操作等が行われた場合には、ディスプレイに表示された撮像画像と音声の指向性が形成された位置（音声位置）とが整合しなくなる（つまり、１対１に対応しなくなる）。例えばディスプレイに表示された複数の人物が会話をしている時、使用者が、特定の人物にズームインして、この人物の顔を画面に大きく表示しても、スピーカからはこの人物でない別の声が出力され、或いはこの人物の声でも音量が小さいまま出力されるため、操作者は違和感を覚える可能性が高い。
【０００６】
このように、特許文献１では、ディスプレイの画面に表示された画像と、スピーカから出力された音声の指向性が形成された位置とは関連性がなく連動していない。従って、ディスプレイに表示された画面が切り替わると、使用者は、その都度、切替後の画面に表示された画像上で所望の位置を指定し、この位置に対応する方向に音声の指向性を形成し直す必要があり、ユーザの操作が煩雑になる可能性があった。
【０００７】
本発明は、上述した従来の状況に鑑みて案出され、表示された収音領域の画像と収音領域で収音された音声の指向性が形成された位置とを対応付け、表示された画像の切替に応じて、音声の指向性が形成された位置を追従して切り替える指向性制御システム及び指向性制御方法を提供することを目的とする。
【課題を解決するための手段】
【０００８】
本発明は、収音領域の音声を収音する収音部と、前記収音領域の画像を撮像する撮像部と、前記撮像部により撮像された前記収音領域の画像を表示する表示部と、前記表示部に表示された前記収音領域の画像上の指定位置に対応する指向方向に、前記収音部により収音された前記音声の音声データの指向性を形成する指向性形成部と、を備え、前記指向性形成部は、前記収音領域の画像を切り替えるための入力操作に応じて、切替後の前記収音領域の画像上の所定位置に対応する指向方向に前記指向性を形成する、指向性制御システムである。
【０００９】
また、本発明は、収音部と撮像部とを含む指向性制御システムにおける指向性制御方法であって、収音領域の音声を前記収音部において収音するステップと、前記収音領域の画像を前記撮像部において撮像するステップと、前記撮像部により撮像された前記収音領域の画像を表示部に表示するステップと、前記表示部に表示された前記収音領域の画像上の指定位置に対応する指向方向に、前記収音部により収音された前記音声の音声データの指向性を形成するステップと、を有し、前記指向性の形成では、前記収音領域の画像を切り替えるための入力操作に応じて、切替後の前記収音領域の画像上の所定位置に対応する指向方向に前記指向性を形成する、指向性制御方法である。
【発明の効果】
【００１０】
本発明によれば、表示された収音領域の画像と収音領域で収音された音声の指向性が形成された位置とを対応付けできるので、表示部に表示された画像の切替に応じて、音声の指向性が形成された位置を追従して切り替えできる。
【図面の簡単な説明】
【００１１】
【図１】本実施形態の指向性制御システムのシステム構成の一例を示すブロック図
【図２】（Ａ）ディスプレイの画面に対してマイクアレイにより収音された音声の指向性が形成された範囲を説明する図、（Ｂ）音声の指向性が形成された範囲を示すガウス分布を表すグラフ
【図３】本実施形態の指向性制御システムにおいてズーム操作やドラッグ操作が行われた場合の指向性の形成動作手順の一例を説明するフローチャート
【図４】（Ａ），（Ｂ），（Ｃ）ユーザのマウスを用いた入力操作に応じて変化する、ディスプレイの画面に表示された画像、及び音声の指向性範囲を説明する図
【図５】（Ａ），（Ｂ）図４に続くディスプレイの画面に表示される画像、及び音声指向性範囲を説明する図
【図６】（Ａ），（Ｂ）ズーム倍率に対応する大きさに音声指向性範囲が変更された場合に、ディスプレイの画面に表示された撮像画像及び音声指向性範囲を説明する図
【発明を実施するための形態】
【００１２】
以下、本発明に係る指向性制御システム及び指向性制御方法を具体的に開示した実施形態（以下、「本実施形態」という）について、図面を参照して説明する。本実施形態の指向性制御システムは、例えばカメラ及びマイクアレイの両方を用いた監視システムや警備システムに適用される。
【００１３】
図１は、本実施形態の指向性制御システム５のシステム構成の一例を示すブロック図である。図１に示す指向性制御システム５は、カメラ１０と、マイクアレイ２０と、レコーダ４０と、ＰＣ（Personal Computer）５０とがネットワーク２５を介して相互に接続された構成を有する。
【００１４】
指向性制御システム５は、カメラ１０で撮像された画像の画像データ及びマイクアレイ２０で収音された音声の音声データをリアルタイムに取得してもよいし、事前に撮像及び収音されてレコーダ４０に記録された画像データ及び音声データを改めて取得してもよい。なお、レコーダ４０は、指向性制御システム５に含まれてもよいし、含まれなくてもよい。
【００１５】
収音部の一例としてのマイクアレイ２０は、収音領域（対象エリア）である例えばホテルのロビーの天井に設置され、複数のマイクロホン２２（図４参照）が一様に設けられた筐体を有する。マイクアレイ２０は、各々のマイクロホン２２を用いて、監視対象の地点（場所）周囲の音声を収音し、各々のマイクロホン２２により収音された音声の音声データを、ネットワーク２５を介してＰＣ５０にリアルタイムに送信し、また、レコーダ４０に送信する。
【００１６】
なお、マイクアレイ２０に搭載される各マイクロホンは、無指向性マイクロホンでも良いし、双指向性マイクロホン、単一指向性マイクロホン、鋭指向性マイクロホン、超指向性マイクロホン（例えばガンマイク）又はこれらを組み合わせものでも良い。
【００１７】
撮像部の一例としてのカメラ１０は、マイクアレイ２０と同様、例えばホテルのロビーの天井に設置され、前面に魚眼レンズを搭載した全方位画像を撮像可能な全方位カメラであり、周囲の映像（静止画及び動画を含む）を撮像する。カメラ１０は、撮像した画像データを、ネットワーク２５を介してＰＣ５０やレコーダ４０に送信する。なお、カメラ１０は、ＰＣ５０から遠隔操作が可能なパンチルト機能、ズームイン機能及びズームアウト機能（以下、ＰＴＺ（Pan Tilt Zoom）機能という）を有するＰＴＺカメラであってもよいし、画角が固定された固定カメラであってもよい。
【００１８】
ＰＣ５０は、例えば監視室等に設置されており、演算装置５１、ディスプレイ６３、スピーカ６５、タッチパネル６７及びマウス６８を有し、マイクアレイ２０で収音された音声をスピーカ６５から出力させ、カメラ１０で撮像された画像（映像）をディスプレイ６３に表示させる。
【００１９】
演算装置５１は、例えばＣＰＵ（Central Processing Unit）、ＭＰＵ（Micro Processing Unit）又はＤＳＰ（Digital Signal Processor）を用いて構成され、ＰＣ５０の各部の動作を全体的に統括するための制御処理、他の各部との間のデータの入出力処理、データの演算（計算）処理及びデータの記憶処理を実行する。
【００２０】
指向性形成部の一例としての演算装置５１は、マイクアレイ２０から直接転送された、或いはレコーダ４０に記録された音声データを用いて、音声データの指向性制御処理によって各々のマイクロホン２２（図４（Ａ）参照）により収音された各音声データを加算し、マイクアレイ２０の各マイクロホン２２の位置から特定方向への音声（音量レベル）を強調（増幅）するために特定方向への指向性を形成した音声データを生成する。特定方向とは、マイクアレイ２０から、マウス６８等で指定されたディスプレイ６３に表示された画像上の任意の指定位置に対応する実際の音声位置（音源）に向かう方向であり、音声データの音量レベルを強調（増幅）するためにユーザにより指定される方向である。なお、マイクアレイ２０によって収音される音声の指向性を形成するための音声データの指向性制御処理に関する技術は、例えば特許文献１（特開２０１４−１４３６７８号公報）等に示されるように、公知の技術である。
【００２１】
演算装置５１は、全方位カメラであるカメラ１０によって撮像された映像データ（全方位画像）の座標系（例えばｘ軸，ｙ軸，ｚ軸のうち２次元又は３次元の座標変換）の変換処理を行い、パノラマ２次元画像に変換処理した後の映像データをディスプレイ６３に表示させる。
【００２２】
操作部の一例としてのマウス６８は、ユーザによって操作され、音声データの音量レベルを強調する指定位置（具体的には、ディスプレイ６３に表示された画像上の座標データ）の指定操作を受け付け、演算装置５１に出力する。また、マウス６８は、ディスプレイ６３に表示された収音領域（対象エリア）の画像に対し、画像を切り替えるための入力操作（例えばズームイン、ズームアウト、ドラッグ（スクロール））を行うために用いられる。なお、マウスの代わりに、キーボードやトラックボール等のポインティングデバイスを用いてもよい。
【００２３】
表示部の一例としてのディスプレイ６３は、カメラ１０で撮像された映像データ（画像データ）等を表示する。タッチパネル６７は、情報又はデータの表示要素と入力操作の検出要素とが重ね合わされた構造を有し、表示された画像に対してユーザの入力操作（例えばタッチ操作）を検出可能である。なお、タッチパネル６７を使って、前述したディスプレイ６３とマウス６８の機能を実現してもよく、この場合、タッチパネル６７は、ユーザがディスプレイ６３に表示された画像を見ながら行ったタッチ操作を直接検出可能となり、ユーザの操作性が向上する。
【００２４】
音声出力部の一例としてのスピーカ６５は、マイクアレイ２０によって収音され、ネットワーク２５を介して転送された音声データ、レコーダ４０に記録された音声データ、若しくはその音声データを基にして演算装置５１で特定方向への強調処理を行った音声データに基づく音声を出力する。
【００２５】
レコーダ４０は、データの記録等の各処理を制御するための制御部（不図示）と、映像データ及び音声データを格納するための記録部（不図示）とを含む構成を有し、ネットワーク２５を介して転送されたカメラ１０で撮像された画像データ及びマイクアレイ２０で収音された音声データを記録する。
【００２６】
図２（Ａ）は、ディスプレイ６３の画面に対してマイクアレイ２０により収音された音声の指向性が形成された範囲を説明する図である。本実施形態では、演算装置５１は、例えばズームイン、ズームアウト、ドラッグのうちいずれかの操作によりディスプレイ６３に表示されていた画像が切り替えられた場合には、例えば切替後にディスプレイ６３に表示された画像の中心位置に対応する指向方向に、音声の指向性を形成する。この場合、ディスプレイ６３に表示された画像中で音声の指向性が形成される範囲（以下、「音声指向性範囲」という）は、図２（Ｂ）のグラフに示すように、ディスプレイ６３に表示された画像の中心位置をピーク位置とするガウス分布で表現される。図２（Ｂ）は、音声の指向性が形成された範囲を示すガウス分布を表すグラフである。
【００２７】
例えば、音量がピーク値から５％の値に下がるまでの領域が音声指向性範囲ａであると想定する。ディスプレイ６３に表示された画像がズームイン或いはズームアウトよって切り替わっても、音声指向性範囲ａの大きさは固定のため、ズームインによって画像が拡大されると、音声指向性範囲ａも大きくなり、一方、ズームアウトによって画像が縮小されると、音声指向性範囲ａも小さくなる（図４（Ｂ）及び（Ｃ）参照）。
【００２８】
なお、図２（Ａ）の説明では、説明を簡単にするために、ズームイン、ズームアウト、ドラッグの操作に応じてディスプレイ６３の画面（言い換えると、ディスプレイ６３に表示された画像）の中心位置に対応する指向方向に音声の指向性が形成されることを説明した。しかし、上述したように、ディスプレイ６３に表示された画像上の任意の位置がユーザにより指定された場合には、マイクアレイ２０から、その画像上の指定位置に対応する実際の音声位置（音源）に向かう方向（指向方向）に音声の指向性が形成される。
【００２９】
次に、上記した構成を有する指向性制御システム５の動作について、図３を参照して説明する。
【００３０】
図３は、本実施形態の指向性制御システム５においてズーム操作やドラッグ操作が行われた場合の指向性の形成動作手順の一例を説明するフローチャートである。先ず、演算装置５１は、カメラ１０で撮像された収音領域（対象エリア）全体の画像をディスプレイ６３に表示し、また、マイクアレイ２０で収音された音声を無指向でスピーカ６５から出力する（Ｓ１）。
【００３１】
演算装置５１は、ユーザによるマウス６８を用いたズーム操作が行われたか否かを判別する（Ｓ２）。ズーム操作が行われていない場合、演算装置５１の処理はステップＳ１に戻る。一方、ステップＳ２でズーム操作が行われた場合、演算装置５１は、ズーム操作に応じて、ディスプレイ６３に表示される画像を拡大若しくは縮小し、更に、ディスプレイ６３の画面に表示された画像の中心位置に対応する方向に音声の指向性を形成する（Ｓ３）。これにより、ディスプレイ６３の画面に拡大若しくは縮小表示された画像の中心から発せられる音声が強調される。
【００３２】
演算装置５１は、ユーザによるマウス６８を用いたズーム操作又はドラッグ操作（スクロール操作）が行われたか否かを判別する（Ｓ４）。ズームイン操作が行われた場合、演算装置５１の処理はステップＳ３に戻り、ステップＳ３の処理が再度実行される。一方、ズームアウト操作が行われた場合には、演算装置５１は、ズームアウト操作の結果、全画面表示になったか否かを判別する（Ｓ５）。全画面表示になっていない場合、演算装置５１の処理はステップＳ３に戻り、ステップＳ３の処理が実行される。ステップＳ５で全画面表示になった場合には、演算装置５１の処理はステップＳ１に戻る。
【００３３】
一方、ステップＳ４でドラッグ操作が行われた場合には、演算装置５１は、ディスプレイ６３に表示された画像をドラッグ方向に切り替え、切替後の画面に表示された画像の中心位置に対応する方向に音声の指向性を形成する（Ｓ６）。この後、演算装置５１の処理はステップＳ４に戻る。
【００３４】
図４（Ａ）〜（Ｃ）及び図５（Ａ），（Ｂ）は、ユーザのマウス６８を用いた入力操作に応じて変化する、ディスプレイ６３の画面に表示された画像、及び音声指向性範囲ａを説明する図である。図４（Ａ）に示す初期状態のディスプレイ６３の画面には、カメラ１０で撮像された収音領域（対象エリア）であるホテルのロビーが表示される。この場合、マイクアレイ２０で収音された音声は、無指向でスピーカ６５から出力される。
【００３５】
例えばユーザがマウス６８を用いて人物９１，９４を中心としてズームイン操作を行うと、図４（Ｂ）に示すように、ディスプレイ６３の画面に表示された画像が切り替えられる。切替後の画面には、ソファ８４の付近の画像が拡大表示される。また、音声の指向性が切替後の画面に表示された画像の中心位置に対応する方向に形成され、ソファ８４の略中央に音声指向性範囲ａが設定される。この場合、ソファ８４に座る人物９１と人物９４の会話が演算装置５１により強調処理されてスピーカ６５から出力される。
【００３６】
更に、ユーザがマウス６８を用いて人物９１を中心としてズームイン操作を行うと、図４（Ｃ）に示すように、ディスプレイ６３の画面に表示された画像が切り替えられる。切替後の画面には、ソファ８４の右側に座る人物９１の画像が拡大表示される。また、切替後の画面に表示された画像の中心位置に対応する方向に音声の指向性が新たに形成され、人物９１を覆うように音声指向性範囲ａが設定される。この場合、人物９１の話す声が演算装置５１により強調処理されてスピーカ６５から出力される。
【００３７】
また、この場合、音声指向性範囲ａは、ディスプレイ６３の画面内に収まらず、画面の表示領域（表示枠）を超えて広がっている。つまり、画面の枠外に対応する位置から発せられた音声もその音量は抑圧されて小さくなるが、スピーカ６５から出力される。従って、人物９１の隣に座る人物９４の声も音声として小さく出力される。ユーザは、この状態で隣に座る人物９４の声が気になる場合、マウス６８を用いて人物９４に音声指向性範囲ａを合わせるようにドラッグ操作すれば、人物９４が発する声が演算装置５１により強調処理されるので、はっきりと聞くことができる。
【００３８】
つまり、図４（Ｃ）に示すように、人物９１にズームインしていた場合に人物９４の声が聞こえても、人物９４が画面に表示されていないので、このままでは人物９４に音声の指向性を形成することはできない。このため、例えば特許文献１の方法では、人物９４が表示されている図４（Ｂ）に示す画面までズームアウトし、更に、ズームアウト後に表示された画面上で音声の強調位置を改めて指定し直す必要があった。
【００３９】
ところが、本実施形態では、図４（Ｃ）に示す画面のまま（言い換えると、図４（Ｃ）に示す画面から図４（Ｂ）に示す画面へズームアウト操作を必要とすることなく）、ユーザが人物９４の方向に画面をドラッグ操作するだけで、演算装置５１は、音声の指向性を形成する方向を人物９４に向けることができる。
【００４０】
更に、図４（Ｃ）に示す画面から、ユーザがマウス６８を用いてドラッグ操作を行うと、図５（Ａ）に示すように、ディスプレイ６３の画面に表示された画像が切り替えられる。切替後の画面には、ソファ８５に座る人物９２の画像が表示される。また、切替後の画面に表示された画像の中心位置に対応する方向に音声の指向性が新たに形成され、人物９２を覆うように音声指向性範囲ａが設定される。この場合、人物９２の話す声が演算装置５１により強調処理されてスピーカ６５から出力される。また、音声指向性範囲ａは、ディスプレイ６３の画面内に収まらず、画面の表示範囲（表示枠）を超えて広がっている。つまり、画面の枠外に対応する位置から発せられた音声もその音量は抑圧されて小さくなるが、スピーカ６５から出力される。
【００４１】
更に、ユーザがマウス６８を用いてズームアウト操作を行うと、図５（Ｂ）に示すように、ディスプレイ６３の画面に表示された画像が切り替えられる。切替後の画面には、ソファ８５の付近の画像が縮小表示される。また、切替後の画面に表示された画像の中心位置に対応する方向に音声の指向性が新たに形成され、ソファ８５の略中央に音声指向性範囲ａが画面内に収まるように設定される。この場合、ソファ８５に座る人物９２と人物９３の会話が演算装置５１により強調処理されてスピーカ６５から出力される。
【００４２】
以上により、本実施形態の指向性制御システム５は、ディスプレイ６３に表示されたカメラ１０の撮像画像とマイクアレイ２０が収音領域で収音した音声の指向性が形成される位置（音声指向性範囲ａ）とが対応付けする。これにより、ＰＣ５０は、ディスプレイ６３の画面に表示された画像と音声を強調するべき位置とが１対１に対応するように整合できる。
【００４３】
また、指向性制御システム５では、ユーザがディスプレイ６３の画面に表示された画像を見ながら画像上の所望の位置に照準を合わせて、ズームイン、ズームアウト、ドラッグのうちいずれかの簡易な操作によって画面を切り替えることで、ＰＣ５０は、マイクアレイ２０から、切替後の画面に表示された画像上の所定位置（中心位置）に対応する位置に向かう方向（指向方向）に音声の指向性を簡易に形成できるので、ユーザが聞き取りたいと考える音声の指向性範囲の切替を簡易な操作で円滑に行うことができる。
【００４４】
また、指向性制御システム５は、ディスプレイ６３に表示された画像の略中心位置と音声を強調するべき位置とを合わせることで、上述したズームイン、ズームアウト、ドラッグのうちいずれかの操作により切り替えられた後に表示された画像の中心位置に音声の指向性を形成できるように指向方向の中心位置を追従でき、更に、指向方向の中心位置を指向性のピーク値となるように指向性を形成するので、音声指向性範囲ａの表示範囲以外からの音声を抑制できる。
【００４５】
なお、本実施形態では、ディスプレイ６３の画面の中心位置（画面に表示される画像上の中心位置）に対応する方向に、音声の指向性が形成されたが、中心位置に限らず、中心から外れた任意の位置に対応する方向に、音声の指向性が形成されてもよく、例えば画面の上部、下部、左部及び右部或いは四隅に対応する方向に、音声の指向性が形成されてもよい。これにより、ユーザによる操作性が向上する。
【００４６】
（本実施形態の変形例）
上記実施形態では、画面を切り替えても、音声の指向性を形成する範囲（音声指向性範囲ａの大きさ）は一定であったが、本実施形態の変形例では、画面を切り替えると、ズーム倍率に応じて音声指向性範囲ａの大きさを変化させる場合を示す。本実施形態の変形例の指向性制御システムの構成は前記実施形態と同一である。
【００４７】
前述した図３に示す指向性形成動作におけるステップＳ３の処理において、演算装置５１は、ズーム操作に応じてディスプレイ６３の画面に表示される画像を拡大又は縮小する際、音声指向性範囲ａをズーム倍率に対応する大きさに変更する。
【００４８】
図６（Ａ），（Ｂ）は、ズーム倍率に対応する大きさに音声指向性範囲ａが変更された場合に、ディスプレイの画面に表示された撮像画像及び音声指向性範囲を説明する図である。図６（Ａ）は、図４（Ｂ）に対応するディスプレイ６３の画面を示し、図６（Ｂ）は図４（Ｃ）に対応するディスプレイ６３の画面を示す。図６（Ａ）から図６（Ｂ）の画面になるように、ズームイン操作が行われた場合、音声指向性範囲ａが狭まるように設定される。つまり、ズーム倍率が大きくなる程、収音位置を中心とする範囲である音声指向性範囲ａが狭くなるように変更される。
【００４９】
これにより、図６（Ｂ）示すように、画像が拡大表示されても、音声指向性範囲ａが画面の枠外にはみ出ることは無くなり、人物９１から発せられる音声だけを集中して収音することができる。つまり、ユーザが画像上の特定の位置から発せられる音声を聞きたいと欲した時、その位置を含む画像領域を拡大表示させると、それと連動してその位置を含むように音声指向性範囲ａが狭まるので、拡大した画像からの音声を集中して聞くことができる。この結果、カメラ１０とマイクアレイ２０を用いた監視能力が高まる。また、画面からはみ出た領域で収音された音声を再生しないようにすることができ、使用者は違和感無く、収音された音声を聞くことができる。
【００５０】
以上、図面を参照しながら実施形態について説明したが、本発明はかかる例に限定されないことは言うまでもない。当業者であれば、特許請求の範囲に記載された範疇内において、各種の変更例又は修正例に想到し得ることは明らかであり、それらについても当然に本発明の技術的範囲に属するものと了解される。
【００５１】
例えば、上記実施形態では、画面を切り替えると新たに指向性を形成したが、画面を切り替えた場合に指向性を形成しなくてもよい。例えば、ステップＳ４で対象エリアの全画面表示に切り替えた場合には、ステップＳ１に戻り、指向性を形成する制御は行われず、無指向で音声は出力される。
【産業上の利用可能性】
【００５２】
本発明は、表示された収音領域の画像と収音領域で収音された音声の指向性が形成された位置とを対応付け、表示部に表示された画像の切替に応じて、音声の指向性が形成された位置を追従して切り替える指向性制御システム及び指向性制御方法として有用である。
【符号の説明】
【００５３】
５  指向性制御システム
１０  カメラ
２０  マイクアレイ
２５  ネットワーク
４０  レコーダ
５０  ＰＣ
５１  演算装置
６３  ディスプレイ
６５  スピーカ
６７  タッチパネル
６８  マウス
８３  テーブル
８４、８５  ソファ
９１、９２、９３、９４  人物
【図１】
2016119620.tif 000003
【図２】
2016119620.tif 000004
【図３】
2016119620.tif 000005
【図４】
2016119620.tif 000006
【図５】
2016119620.tif 000007
【図６】
2016119620.tif 000008