(57)【要約】【課題】音声データに対し、指定された収音対象領域及び収音時刻に対応する音声の内容を分析する。【解決手段】音声分析システム５では、マイクアレイ２０は、複数の収音対象エリア４５が指定された対象エリアで音声を収音する。レコーダ４０は、対象エリアの音声の音声データを収音時刻と対応付けて記憶する。演算装置５１は、レコーダ４０に記憶される音声データに対し、収音対象エリア４５に対応する方向に順次、指向性を形成して音声データを読み取る。ＵＩ画面８０は、音声データの抽出条件の指定を受け付ける。演算装置５１は、指向性が形成された音声データが指定された抽出条件を満たすか否かを判定する。データベース５２Ａは、音声データが抽出条件を満たすと判定された場合に、収音時刻と指定された収音対象エリア４５と指定された抽出条件とを含む抽出結果を登録する。【選択図】図１
2016118713.tif 000002
【特許請求の範囲】
【請求項１】
複数の収音対象領域を含む収音領域の音声の音声データを前記音声の収音時刻と対応付けて記憶する記憶部と、
前記記憶部に記憶された前記音声データに対し、前記収音領域からいずれかの前記収音対象領域に対応する方向に順次、指向性を形成する指向性形成部と、
前記記憶部に記憶された前記音声データの抽出条件の指定を受け付ける条件指定部と、
前記指向性が形成された前記音声データが前記抽出条件を満たすか否かを判定する判定部と、
前記指向性が形成された前記音声データが前記抽出条件を満たすと判定された場合に、前記音声の収音時刻と指定された前記収音対象領域と指定された前記抽出条件とを含む抽出結果を対応付けて前記記憶部に登録する登録部と、を備える、
音声分析装置。
【請求項２】
請求項１に記載の音声分析装置であって、
前記抽出条件は、前記音声データに、語彙、性別、年齢、感情及び発話頻度の少なくとも１つが含まれる、
音声分析装置。
【請求項３】
請求項１又は２に記載の音声分析装置であって、
前記抽出結果を表示する表示部と、
前記表示部に表示された抽出結果に対する所定操作を受け付ける操作受付部と、
前記所定操作に応じて、前記抽出結果に対応する前記音声データを再生する再生部と、を備える、
音声分析装置。
【請求項４】
収音装置と記録装置と音声分析装置とが接続された音声分析システムであって、
前記収音装置は、
複数の収音対象領域を含む収音領域の音声を収音し、
前記記録装置は、
前記収音装置によって収音された前記収音領域の音声の音声データを前記音声の収音時刻と対応付けて記憶し、
前記音声分析装置は、
前記記録装置に記憶された前記音声データに対し、前記収音領域からいずれかの前記収音対象領域に対応する方向に順次、指向性を形成する指向性形成部と、
前記記録装置に記憶された前記音声データの抽出条件の指定を受け付ける条件指定部と、
前記指向性が形成された前記音声データが前記抽出条件を満たすか否かを判定する判定部と、
前記指向性が形成された前記音声データが前記抽出条件を満たすと判定された場合に、前記音声の収音時刻と指定された前記収音対象領域と指定された前記抽出条件とを含む抽出結果を対応付けて登録する登録部と、を備える、
音声分析システム。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、音声データを分析する音声分析装置及び音声分析システムに関する。
【背景技術】
【０００２】
従来、音声データの分析として、例えばレコーダに一定時間収録された音声データから、キーワード等を含む特定の音声部分を聞きたい場合、その部分が音声データのどの時間帯にあるのかを特定することが難しかった。このため、使用者は音声データ全体を聞き返すしかなかった。また、聞き返す場合、通常、音声データの早送りが行われるが、早送りにも限界があり、聞き返しは非常に時間のかかる作業であった。
【０００３】
また、先行技術として、使用者が所定の位置で発せられた音声を聞きたい場合、使用者によって指定された方向に音声の指向性を形成し、全方位の音を収音可能なマイクアレイによって収音された音声のうち、使用者によって指定された方向の音声を強調する音声データの指向性制御に関する技術が知られている（特許文献１参照）。
【先行技術文献】
【特許文献】
【０００４】
【特許文献１】特開２０１４−１４３６７８号公報
【発明の概要】
【発明が解決しようとする課題】
【０００５】
しかしながら、特許文献１では、特定された位置から発せられる音声を強調して出力することは可能であるが、音声の内容を分析することはなされておらず、例えばいずれの位置及び時間で収録した音声データの中にどのようなキーワードが含まれているかを把握することはできなかった。このため、例えば収録した音声データを分析してマーケティング等の用途に利用することが難しかった。
【０００６】
本発明は、上述した従来の状況に鑑みて、収音領域において収音された音声データに対し、収音領域を構成する複数の収音対象領域のうち指定されたいずれかの収音対象領域及び収音時刻に対応する音声の内容を分析する音声分析装置及び音声分析システムを提供することを目的とする。
【課題を解決するための手段】
【０００７】
本発明は、複数の収音対象領域を含む収音領域の音声の音声データを前記音声の収音時刻と対応付けて記憶する記憶部と、前記記憶部に記憶された前記音声データに対し、前記収音領域からいずれかの前記収音対象領域に対応する方向に順次、指向性を形成する指向性形成部と、前記記憶部に記憶された前記音声データの抽出条件の指定を受け付ける条件指定部と、前記指向性が形成された前記音声データが前記抽出条件を満たすか否かを判定する判定部と、前記指向性が形成された前記音声データが前記抽出条件を満たすと判定された場合に、前記音声の収音時刻と指定された前記収音対象領域と指定された前記抽出条件とを含む抽出結果を対応付けて前記記憶部に登録する登録部と、を備える、音声分析装置である。
【０００８】
また、本発明は、収音装置と記録装置と音声分析装置とが接続された音声分析システムであって、前記収音装置は、複数の収音対象領域を含む収音領域の音声を収音し、前記記録装置は、前記収音装置によって収音された前記収音領域の音声の音声データを前記音声の収音時刻と対応付けて記憶し、前記音声分析装置は、前記記録装置に記憶された前記音声データに対し、前記収音領域からいずれかの前記収音対象領域に対応する方向に順次、指向性を形成する指向性形成部と、前記記録装置に記憶された前記音声データの抽出条件の指定を受け付ける条件指定部と、前記指向性が形成された前記音声データが前記抽出条件を満たすか否かを判定する判定部と、前記指向性が形成された前記音声データが前記抽出条件を満たすと判定された場合に、前記音声の収音時刻と指定された前記収音対象領域と指定された前記抽出条件とを含む抽出結果を対応付けて登録する登録部と、を備える、音声分析システムである。
【発明の効果】
【０００９】
本発明によれば、収音領域において収音された音声データに対し、収音領域を構成する複数の収音対象領域のうち指定されたいずれかの収音対象領域及び収音時刻に対応する音声の内容を分析できる。
【図面の簡単な説明】
【００１０】
【図１】本実施形態の音声分析システムのシステム構成の一例を示すブロック図
【図２】音声分析システムが設置されたファストフード店の店舗内の状況の一例を示す斜視図
【図３】店舗内において区画された収音対象エリアの一例を示す図
【図４】ディスプレイに表示されたＵＩ画面を示す図
【図５】本実施形態の音声分析システムにおける音声データ分析登録手順の一例を説明するフローチャート
【図６】対象エリアに対して指向性が形成された音声データの読み取り順序を説明する図
【図７】抽出条件に従って抽出された音声データに対してデータベースに登録されたレコードの登録内容の一例を示すテーブルの例示図
【図８】図７と異なる抽出条件に従って抽出された音声データに対してデータベースに登録されたレコードの登録内容の一例を示すテーブルの例示図
【図９】（Ａ）図７に示すテーブルにおいて「日付」の項目にハイパーリンクが貼られたテーブル、（Ｂ）特定のレコードが選択された場合に再生される音声データの信号波形を表す図
【発明を実施するための形態】
【００１１】
以下、本発明に係る音声分析装置及び音声分析システムを具体的に開示した実施形態（以下、「本実施形態」という）について、図面を参照して説明する。
【００１２】
図１は、本実施形態の音声分析システム５のシステム構成の一例を示すブロック図である。図１に示す音声分析システム５は、カメラ１０と、マイクアレイ２０と、レコーダ４０と、ＰＣ（Personal Computer）５０とがネットワーク２５を介して相互に接続された構成を有する。なお、カメラ１０は、音声分析システム５に必要とされなくてもよい。また、ＰＣ５０は、レコーダ４０に記録（収録）された音声データだけを分析する場合、ネットワーク２５に接続されることなく、レコーダ４０との間で直接接続されてもよい。
【００１３】
収音装置の一例としてのマイクアレイ２０は、収音領域（対象エリア（例えばファストフード店））の天井に設置され、複数のマイクロホン（図示せず）が円周方向に等間隔で一様に設けられた筐体を有する。マイクアレイ２０は、筐体内の各々のマイクロホンを用いて、監視対象である収音領域の地点（場所）周囲の音声を収音し、各々のマイクロホンにより収音された音声のデータ（音声データ）を、ネットワーク２５を介してレコーダ４０に送信する。また、マイクアレイ２０は、リアルタイムに音声分析を行う場合、ＰＣ５０にも音声データを送信する。
【００１４】
なお、マイクアレイ２０に搭載される各マイクロホンは、無指向性マイクロホンでも良いし、双指向性マイクロホン、単一指向性マイクロホン、鋭指向性マイクロホン、超指向性マイクロホン（例えばガンマイク）又はこれらを組み合わせものでも良い。
【００１５】
記録装置の一例としてのレコーダ４０は、データの記録等の各処理を制御するための制御部（不図示）と、映像データ及び音声データを格納するための記録部（不図示）とを含む構成である。また、レコーダ４０は、マイクアレイ２０により収音された多チャンネルの音声データを収音時刻（現在日時）等の属性データとともに記録する。この収音時刻は、レコーダ４０内のタイマで計時される現在日時であってもよいし、マイクアレイ２０から送信される音声データに属性データとして含まれていてもよい。また、多チャンネルの音声データとは、複数のマイクホンで収音される音声データを表す。また、レコーダ４０は、音声分析システム５にカメラ１０が設けられた場合には、カメラ１０により撮像された映像データと、撮像のタイミングと同時刻にマイクアレイ２０により収音された音声データとを対応付けて記録する。
【００１６】
音声分析装置の一例としてＰＣ５０は、例えば店舗のバックヤードに設置されており、演算装置５１、メモリ５２、入力部６６、ディスプレイ６３及びスピーカ６５を有し、マイクアレイ２０で収音されてレコーダ４０に記録された音声データを分析する。
【００１７】
演算装置５１は、例えばＣＰＵ（Central Processing Unit）、ＭＰＵ（Micro Processing Unit）又はＤＳＰ（Digital Signal Processor）を用いて構成され、ＰＣ５０の各部の動作を全体的に統括するための制御処理、他の各部との間のデータの入出力処理、データの演算（計算）処理及びデータの記憶処理を実行する。
【００１８】
指向性形成部の一例としての演算装置５１は、レコーダ４０に記録された音声データを用いて、音声データの指向性制御処理によって各々のマイクロホンにより収音された各音声データを加算し、マイクアレイ２０の各マイクロホンの位置から特定方向への音声（例えば音量レベル、音圧レベル）を強調（増幅）するために、特定方向への指向性を形成した音声データを生成する。なお、マイクアレイ２０によって収音された音声の指向性を形成するための音声データの指向性制御処理に関する技術は、例えば特開２０１４−１４３６７８号公報等に示されるように、公知の技術である。また、演算装置５１は、音声データの指向性を形成する際、レコーダ４０から読み込まれる音声データに対し、指向性を形成してもよいし、レコーダ４０から収音時刻を含む音声データを一旦全て読み出してメモリ５２に記憶し、このメモリ５２に記憶された音声データに対し、指向性を形成してもよい。
【００１９】
また、演算装置５１は、リアルタイムに音声データを分析する場合、マイクアレイ２０から直接送信された音声データに収音時刻（現在日時）を対応付け、この音声データを用いて、マイクアレイ２０から特定方向（指向方向）への音声の音量レベルを強調（増幅）するために、特定方向への指向性を形成した音声データを生成しても良い。なお、特定方向とは、マイクアレイ２０から、入力部６６で指定されたディスプレイ６３の表示内容上に対する指定箇所に対応する実際の音声位置（即ち、音源）に向かう方向であり、音声データの音量レベルを強調（増幅）するためにユーザにより指定された方向である。
【００２０】
また、判定部の一例としての演算装置５１は、指定された時間及び位置に対応する音声データをテキスト化し、音声データがユーザインタフェース（ＵＩ）を示すＵＩ画面８０（図４参照）で設定された抽出条件を満たしているか否かを判定する。演算装置５１は、音声データに含まれるテキストを調べ、テキストの内容から人物の特徴を識別する。演算装置５１は、例えばテキスト化された音声データに「うれしい」、「楽しい」等の文言が含まれた場合、音声を発した人物の感情は「喜び」であると判断する。また、演算装置５１は、例えばテキスト化された音声データに「おいちい」、「ママ」等の文言が含まれる場合、音声を発した人物の年齢は「幼児」であると判断する。
【００２１】
なお、演算装置５１は、人物が言葉を発した時の音量や発音時間、さらには、その言葉を連呼しているか、或いはその前後の文言等によっても、人物の特徴を識別してもよい。また、演算装置５１は、音声データそのものに対し、公知の感性制御技術等を使って人物の特徴を識別してもよい。いずれにせよ、識別された人物の特徴は、後述する抽出条件を満たすか否かの判定に用いられる。
【００２２】
入力部６６は、ユーザの操作によって指定された、音声データの音量レベルを強調する指定箇所（座標データ）を受け付け、演算装置５１に出力する。また、入力部６６は、ユーザ操作による抽出条件の設定を受け付け、演算装置５１に出力する。なお、入力部６６は、マウス又はキーボード等のポインティングデバイスを用いて構成されても良いし、ディスプレイ６３と一体化されたタッチパネルで構成されてもよい。
【００２３】
ディスプレイ６３は、音声データを分析するための各種の抽出条件を設定するためのＵＩ画面（図４参照）、音声データの信号波形、さらには、カメラ１０が接続されている場合にカメラ１０で撮像された映像データ等を表示する。
【００２４】
スピーカ６５は、マイクアレイ２０によって収音され、ネットワーク２５を介して転送された音声データ、レコーダ４０に記録された音声データ、若しくはその音声データを基にして演算装置５１で特定方向への強調処理を行った音声データに基づく音声を出力する。
【００２５】
記憶部の一例としてのメモリ５２は、各種データを記憶する揮発性メモリ及び不揮発性メモリ、ハードディスクドライブ、ＳＳＤ（Solid State Drive）等の記憶媒体であり、音声データや抽出結果等が登録されるデータベース５２Ａ（登録部の一例）を記憶する。
【００２６】
カメラ１０は、例えばファストフード店の天井に設置され、前面に魚眼レンズを搭載した全方位画像を撮像可能な全方位カメラであり、周囲の映像（静止画及び動画を含む）を撮像する。カメラ１０は、撮像した映像データを、ネットワーク２５を介してＰＣ５０やレコーダ４０に送信する。
【００２７】
図２は、音声分析システム５が設置されたファストフード店の店舗７０内の状況を示す斜視図である。図２には、マイクアレイ２０の収音領域（対象エリア）である店舗７０内において、３人の店員７３が、カウンタ７１を挟んで、３列に並んでいる先頭のお客様７５と向かい合い、お客様７５からの注文を受けている様子が示される。カウンタ７１の上部には、各種メニューを表示するモニタ７４が設置されている。また、お客様７５が並んでいるフロア７７の天井７８には、マイクアレイ２０が設置されており、お客様７５が発する音声を収音している。
【００２８】
図３は、店舗７０内において区画された収音対象エリア４５を示す図である。マイクアレイ２０の収音領域（対象エリア）である店舗７０内の空間は、天井７８に設置されたマイクアレイ２０からフロア７７を視た場合に、３×６のマス目状に区画された複数の収音対象エリア４５に分かれている。ここでは、各収音対象エリア４５は、Ａ１〜Ａ５、Ｂ１〜Ｂ５、Ｃ１〜Ｃ５、Ｄ１〜Ｄ３と識別可能に番号付けされる。マイクアレイ２０で収音された音声データに対し、ＰＣ５０内の演算装置５１は、区画された各々の収音対象エリア４５の方向に、音声の指向性を形成し、各々の収音対象エリア４５で収音された音声データを強調して分析する。
【００２９】
図４は、ディスプレイ６３に表示されたＵＩ画面８０を示す図である。条件指定部の一例としてのＵＩ画面８０は、レコーダ４０に記録された音声データに対し、抽出条件を設定するためのユーザインタフェースである。ＵＩ画面８０には、語彙（キーワード）を入力するための入力ボックス８１、及び抽出条件に従って音声データを検索するための検索ボタン８８が設けられている。また、ＵＩ画面８０には、検索オプションとして、人物（ここではお客様７５）の特徴を表す「感情」、「年齢」、「性別」、「発話頻度」、その他として、「曜日」、「時間帯」を設定可能である。
【００３０】
「感情」のプルダウンメニュー８２では、「怒り」、「喜び」、「笑い」、「驚き」等が選択可能である。「年齢」のプルダウンメニュー８３では、「幼児」、「小学生」、「中高生」、「２０代」が選択可能である。「性別」のラジオボタン８４では、「男性」又は「女性」が選択可能である。「発話頻度」のラジオボタン８５では、「一回」又は「複数」が選択可能である。「曜日」のプルダウンメニュー８６では、「週末（土日）」、「祝祭日」等が選択可能である。「時間帯」のプルダウンメニュー８７では、「１０−１１時」、「１１−１２時」、「１２−１３時」等が選択可能である。なお、検索オプションのうち、特に指定されない項目には、空白若しくはデフォルト値が設定される。また、語彙（キーワード）が空白である場合、検索オプションだけで示される抽出条件に従って、音声データの中から該当する音声データが抽出される。
【００３１】
なお、検索オプションとしての属性は、上記の例に限られず、例えば異音の種類、声の大きさ、特定日（クリスマス、ＧＷ等）、国籍、客か店員か、発話レーン（複数ある場合）、応対時間、接客ルール遵守、商品名等が挙げられる。
【００３２】
図４において抽出条件が設定され、ユーザによって検索ボタン８８が押下されると、演算装置５１は、この抽出条件に従って、音声データを検索する。この抽出条件に合致した音声データ及び抽出結果（収音対象エリア、収音時刻及び抽出条件を含む）は対応付けてデータベース５２Ａに登録される。また、ＵＩ画面８０には、抽出条件に合致した音声データの信号波形８９が時系列に（例えば図中下側から順に）表示される。なお、ＵＩ画面８０に、収音対象エリア（ブロック）を選択する選択部を設けてもよく、選択されたブロックに絞って、音声データを分析することも可能である。
【００３３】
次に、上記構成を有する音声分析システム５の動作について、図５以降の各図面を参照して説明する。
【００３４】
図５は、本実施形態の音声分析システム５における音声データ分析登録手順の一例を説明するフローチャートである。この音声データの分析登録手順では、演算装置５１は、収音領域（対象エリア）内で、予め指定された時間内で時間スロットを順にずらして音声データの読み取り位置（言い換えると、収音対象エリア）を順次シフトさせながら、１つの収音対象エリアに対して指向性を形成して音声データを読み取る。
【００３５】
まず、演算装置５１は、１つの時間及び位置に対応する音声データを読み込む（Ｓ１）。演算装置５１は、レコーダ４０に記憶された、指定された時間内Ｔの時刻ｔの音声データに対し、指定された位置に対応する音声の指向性を形成し、この指向性が形成された音声データを読み込む。この読み込みに際し、演算装置５１は、レコーダ４０から読み込まれた音声データに指向性を形成してもよいし、ユーザにより指定された時間Ｔ内の全ての音声データをレコーダ４０から一旦読み込んでメモリ５２に記憶しておき、メモリ５２に対し、１つの時間及び位置に対応する音声データを読み込むようにしてもよい。演算装置５１は、ステップＳ１で読み込んだ音声データをテキストに変換する処理（公知技術）を行い、テキスト化された音声データをメモリ５２に一時的に記憶する。
【００３６】
演算装置５１は、ＵＩ画面８０を介してユーザによる抽出条件が設定されるまで待機する（Ｓ２）。抽出条件が設定されると、演算装置５１は、ステップＳ１で読み込んだ音声データが抽出条件に合致する音声データであるか否かを判別する（Ｓ３）。音声データが抽出条件に合致するか否かの判定では、前述したように、テキスト化された音声データに抽出条件に合致する文言が含まれているか否か、或いは音声データそのものが抽出条件に合致するか否かが判断される。抽出条件に合致しない音声データである場合、演算装置５１は、ステップＳ５の処理に進む。
【００３７】
一方、抽出条件に合致した音声データである場合、演算装置５１は、この音声データをデータベース５２Ａに登録し、更に、ＵＩ画面８０で指定された語彙（キーワード）及び検索オプションに含まれる項目をリスト化し、１つのレコード（図７参照）としてデータベース５２Ａに登録する（Ｓ４）。
【００３８】
演算装置５１は、指定された位置を１つインクリメントして次の収音対象エリアに移行し（Ｓ５）、対象エリアである店舗７０内の全ての位置（収音対象エリア）に対して音声データを解析したか否かを判別する（Ｓ６）。全ての位置に対して解析し終えていない場合には、演算装置５１の処理はステップＳ１に戻る。一方、全ての位置に対して解析し終えた場合には、演算装置５１は、ＵＩ画面８０で指定された時間Ｔのうち、時刻ｔをインクリメントして次の時間スロットに移行する（Ｓ７）。
【００３９】
演算装置５１は、指定された時間Ｔ内の全ての時間スロットで音声データを解析したか否かを判別する（Ｓ８）。全ての時間スロットで音声データを解析した場合、演算装置５１は図５に示す動作を終了する。一方、まだ音声データを解析していない時間スロットがある場合、演算装置５１は、指定された位置を初期の位置にリセットし（Ｓ９）、その後、演算装置５１の処理はステップＳ１に戻り、同様の処理が繰り返される。
【００４０】
図６は、対象エリアに対して指向性が形成された音声データの読み取り順序を説明する図である。指定された時間Ｔのうち、最初の時間スロットである時刻ｔ＝ｔ０において、演算装置５１は、矢印ａに示すように、対象エリア内で指定された位置（収音対象エリア）を順次シフトさせ、指向性が形成された音声データを読み取り、解析する。なお、矢印ａに示す順序に限らず、任意の順序で読み取りが行われてもよい。
【００４１】
時間スロットｔ０における対象エリア内の全ての位置に対して音声データの読み取りが終了すると、演算装置５１は、次の時間スロットである時刻ｔ＝ｔ１に移り、矢印ｂに示すように、時間スロットｔ０の場合と同様、指定された位置を順次シフトさせ、指向性が形成された音声データを読み取り、解析する。以後の時間スロットにおいても、同様の読み取り走査が行われ、演算装置５１は、最後の時間スロットｔｎで、音声データの読み取り走査及び解析を終える。
【００４２】
なお、本実施形態では、対象エリア全体、つまり店舗７０内の全ての位置（収音対象エリア）にシフトさせて、上記音声データの読み取り走査及び解析を行ったが、ユーザによって読み取り走査の範囲が限定されている場合には、限定された範囲内で位置をシフトさせてもよい。これにより、ＰＣ５０が行う処理の負荷を軽減できる。
【００４３】
図７は、抽出条件に従って抽出された音声データに対してデータベース５２Ａに登録されたレコードの登録内容の一例を示すテーブルの例示図である。図７には、語彙（キーワード）が「ポテト」である場合の抽出結果がテーブル９１として示されている。このテーブル９１には、「日付」、「曜日」、「時刻」、「ブロック」、「語彙」、「性別」、「年齢」、「感情」及び「頻度」の項目が列挙されている。ここで、ブロックとは、指定された収音対象エリア４５に相当する。例えば、１番目のレコードには、「２０１４／０１／２３」、「水」、「１１−１２」、「Ｂ２」、「ポテト」、「男」、「幼児」、「喜び」及び「４」が登録されている。このように、語彙「ポテト」を含む音声データに関する情報が登録されている。このテーブル９１では、午前中に「ポテト」と発音するお客様には、幼児と中高生が多いので、水曜の午前中にポテトが良く売れるようなキャンペーンを打つと効果的であることが分かる。なお、データベース５２Ａに登録されたテーブルの項目は、これらに限定されるものではなく、その他の項目、例えば「天候」等の項目が追加されてもよい。
【００４４】
図８は、図７と異なる抽出条件に従って抽出された音声データに対してデータベース５２Ａに登録されたレコードの登録内容の一例を示すテーブルの例示図である。図８には、語彙（キーワード）が空白であり、検索オプションである「感情」が「怒り」である場合の抽出結果がテーブル９３として示されている。テーブル９３に列挙された項目は、前述したテーブル９１と同様である。このテーブル９３では、何らかの理由で怒りの感情を持つお客様には、２０代と４０代の人が多く、幼児や中高生がいないことが分かる。また、位置がブロックＡ１，Ｂ１で、怒りの感情を持つお客様が多いことが分かる。
【００４５】
このように、本実施形態の音声分析システム５では、マイクアレイ２０は、複数の収音対象エリア４５が指定された対象エリアで音声を収音する。レコーダ４０は、対象エリアの音声の音声データを収音時刻と対応付けて記憶する。演算装置５１は、レコーダ４０に記憶される音声データに対して、ユーザにより指定された収音対象エリア４５に対応する方向に指向性を形成する。ＵＩ画面８０は、音声データの抽出条件の設定を受け付ける。演算装置５１は、指向性が形成された音声データが設定された抽出条件を満たすか否かを判定する。データベース５２Ａは、音声データが抽出条件を満たすと判定された場合に、収音時刻と指定された収音対象エリア４５と設定された抽出条件とを含む抽出結果を登録する。
【００４６】
これにより、音声分析システム５は、マイクアレイ２０が収音領域において収音した音声データに対し、収音領域を構成する複数の収音対象領域のうち指定されたいずれかの収音対象エリア及び収音時刻に対応する音声の内容を分析できる。また、音声分析システム５においてデータベース５２Ａに登録された抽出結果は、種々の用途に利用できる。また、抽出条件は、ユーザがＵＩ画面を介して、任意に人物の特徴を設定可能であるので、ユーザの要求に応じて音声データの分析を行うことができ、音声を発した人物の特徴が分かる。
【００４７】
また、抽出条件は、マイクアレイ２０が収音領域において収音した音声データに、語彙、性別、年齢、感情及び発話頻度の少なくとも１つが含まれる。これにより、音声分析システム５は、ユーザの要求に応じて音声データの分析を行うことができ、音声を発した人物の特徴が分かる。
【００４８】
以上、図面を参照しながら各種の実施形態について説明したが、本発明はかかる例に限定されないことは言うまでもない。当業者であれば、特許請求の範囲に記載された範疇内において、各種の変更例又は修正例に想到し得ることは明らかであり、それらについても当然に本発明の技術的範囲に属するものと了解される。
【００４９】
例えば、図９（Ａ）は、図７に示すテーブルにおいて「日付」の項目にハイパーリンクが貼られたテーブルである。このテーブル９５では、日付の項目は、ハイパーリンクが貼られていることを表すために、網点表示となっている。ディスプレイ６３の画面にテーブル９５が表示されている状態で、ユーザが入力部６６を介して所望のレコードの日付を選択すると、ディスプレイ６３の画面が切り替わり、図９（Ｂ）に示す画面に遷移する。
【００５０】
図９（Ｂ）は、特定のレコードが選択された場合に再生される音声データの信号波形９６を表す図である。演算装置５１は、入力部６６から所望のレコードが選択されたことを受け付けると、データベース５２Ａに記憶された該当する音声データを読み出し、スピーカ６５から音声を出力させ、更に、ディスプレイ６３の画面に再生された音声データの信号波形９６を表示させる。これにより、ユーザは、表示部に表示された抽出結果を見ながら、所望の音声データを再生させて音声を確認できる。
【００５１】
また、上記実施形態では、音声分析装置としてＰＣが用いられる場合を示したが、携帯端末であってもよく、この場合、ユーザは店舗内に移動しその様子を見ながら音声分析による抽出結果を確認することができる。これにより、リアルタイムに店舗内の状況を把握し、改善することが可能である。また、上記実施形態では、レコーダ４０は、ＰＣ５０と別体に設けられていたが、ＰＣ５０の記憶装置として内部又は外部に設けられてもよい。
【産業上の利用可能性】
【００５２】
本発明は、収音領域において収音された音声データに対し、収音領域を構成する複数の収音対象領域のうち指定されたいずれかの収音対象領域及び収音時刻に対応する音声の内容を分析する音声分析装置及び音声分析システムとして有用である。
【符号の説明】
【００５３】
５  音声分析システム
１０  カメラ
２０  マイクアレイ
２５  ネットワーク
４０  レコーダ
５０  ＰＣ
５１  演算装置
５２  メモリ
５２Ａ  データベース
６３  ディスプレイ
６５  スピーカ
６６  入力部
７０  店舗
７１  カウンタ
７３  店員
７４  モニタ
７５  お客様
７７  フロア
７８  天井
８０  ＵＩ画面
８１  入力ボックス
８２、８３、８６、８７  プルダウンメニュー
８４、８５  ラジオボタン
８８  検索ボタン
８９、９６  信号波形
９１、９３、９５  テーブル
【図１】
2016118713.tif 000003
【図２】
2016118713.tif 000004
【図３】
2016118713.tif 000005
【図４】
2016118713.tif 000006
【図５】
2016118713.tif 000007
【図６】
2016118713.tif 000008
【図７】
2016118713.tif 000009
【図８】
2016118713.tif 000010
【図９】
2016118713.tif 000011