(57)【要約】【課題】  特定の方向に音を伝えるスピーカアレイを有する装置において、当該装置使用ユーザー以外の方向に音が漏れ聞こえてしまう。【解決手段】  課題を解決するために、本発明のスピーカアレイは、スピーカ素子から出力する音を制御する特性制御部を有し、スピーカ素子は、予め定める１以上の聴取点で再生音が一定音圧以上となるように再生音を出力し、聴取点以外に予め設定された１以上の非聴取点で、再生音が再生音以外の音に対して一定音圧比以下となるようにマスキング音を出力するよう制御することを特徴とする。【選択図】  図６
2011211266.tif 000002
【特許請求の範囲】
【請求項１】
再生音及びマスキング音を出力する複数のスピーカ素子から構成されるスピーカアレイと、
任意の点において任意の音圧になる出力を算出し、前記複数のスピーカ素子から出力する音を制御する特性制御部を有し、
前記特性制御部は、予め定める１以上の聴取点で前記再生音が一定音圧以上となるように算出された出力に基づいて、前記再生音の指向特性を制御し、
前記特性制御部は、前記聴取点以外に予め設定された１以上の非聴取点で、前記再生音が前記再生音以外の音に対して一定音圧比以下となるように算出された出力に基づいて、前記マスキング音の指向特性を制御することを特徴とする情報出力装置。
【請求項２】
請求項１の情報出力装置であって、
当該装置の周辺音を採取するマイクロホン端子を有し、
前記特性制御部は、前記周辺音の音圧に基づいて、前記マスキング音の出力を制御することを特徴とする情報出力装置。
【請求項３】
請求項１または２の情報出力装置であって、
前記特性制御部は、前記非聴取点で、前記再生音が前記再生音以外の音に対して一定音圧比以下となるように第１の音圧で前記マスキング音を出力する第１の状態と、前記再生音が第１の状態よりも小さい音圧比となるように第２の音圧で前記マスキング音を出力する第２の状態とを、切り替えながら前記再生音及び前記マスキング音を制御し、
前記特性制御部は、当該装置が特定情報を出力する際には第２の音圧でマスキング音を出力し、当該装置が特定情報以外の情報を出力する際には第１の音圧でマスキング音を出力するよう制御することを特徴とする情報出力装置。
【請求項４】
請求項３の情報出力装置であって、
前記マスキング音の第１の音圧は０であることを特徴とする情報出力装置。
【請求項５】
請求項１、２又は３の情報出力装置であって、
当該装置の周辺音を採取するマイクロホン端子を有し、
前記マスキング音に、前記周辺音を用いることを特徴とした情報出力装置。
【請求項６】
請求項１、２又は３の情報出力装置であって、
他の情報出力装置が特定情報を出力しているか否かの信号を入力可能な特定情報出力信号受領部を有し、
前記情報信号出力信号受領部に信号が入力されている場合に、特定情報を出力しないことを特徴とする情報出力装置。
【請求項７】
請求項１、２又は３の情報出力装置であって、
他の情報出力装置が出力している出力音を採取するマイクロホンアレイを有し、
前記他の情報出力装置が特定情報を出力しているか否かを前記出力音に基づいて判断する判断部と、
前記判断部で前記他の情報出力装置が特定情報を出力中であると判断された場合に、特定情報を出力しないことを特徴とする情報出力装置。
【請求項８】
請求項１、２又は３の情報出力装置であって、
装置周辺に存在する人物とその位置情報を認識するカメラを備え、
前記位置情報を元に、前記１以上の非聴取点を設定することを特徴とする情報出力装置。
【請求項９】
請求項１、２又は３の情報出力装置であって、ＡＴＭ装置または自動券売装置。
【請求項１０】
再生音及びマスキング音を出力する複数のスピーカ素子から構成されるスピーカアレイであって、
当該スピーカアレイに入力する再生音が特定情報であるか否かを入力可能な特定情報信号受領部と、
任意の点において任意の音圧になる出力を算出し、前記複数のスピーカ素子から出力する音を制御する特性制御部を有し、
前記特性制御部は、予め定める１以上の聴取点で前記再生音が一定音圧以上となるように算出された出力に基づいて、前記再生音の指向特性を制御し、
前記聴取点以外に予め設定された１以上の非聴取点で、前記再生音が前記再生音以外の音に対して一定音圧比以下となるように第１の音圧で前記マスキング音を出力する第１の状態と、前記再生音が第１の状態よりも小さい音圧比となるように第２の音圧で前記マスキング音を出力する第２の状態とを、切り替えながら前記再生音及び前記マスキング音を制御し、
当該装置が特定情報を出力する際には第２の音圧でマスキング音を出力し、当該装置が特定情報以外の情報を出力する際には第１の音圧でマスキング音を出力するよう制御することを特徴とするスピーカアレイ。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、特定の方向に音を伝えることを目的とするスピーカ装置に関する。
【背景技術】
【０００２】
特定の方向に音を伝える指向性スピーカは、展示会場、駅のホーム、街角のデジタルサイネージなど様々なシーンで活用可能なデバイスである。これまで、特定の方向に音を伝える技術として、指向性が強い超音波で変調した可聴域信号を空間内で復調することを特徴とするパラメトリックスピーカが検討されてきている（例えば特許文献１参照）。また、超音波を使用せず、可聴域信号のみを放射するスピーカを複数用いた指向性スピーカ（以下、スピーカアレイ）も検討されてきている（例えば特許文献２参照）。スピーカアレイは、超音波を使わずに特定の方向（以下、聴取方向）に音を強調して放射することが可能であるという利点はあるものの、聴取方向以外の方向（以下、非聴取方向）に対する音の漏れは、パラメトリックスピーカと比べて大きいという問題が存在する。聴取方向と非聴取方向の音圧比は、用いるスピーカアレイのスピーカ数やスピーカアレイ全体の物理的な大きさに依存して変わる。アレイ長が１ｍ程度のスピーカアレイは、聴取方向と非聴取方向でおおよそ10〜20dB程度の音圧比が実現できる。しかし、聴取方向と非聴取方向の音圧比が20dB程度では、非聴取方向への音の漏れが十分に小さいとは言えず、周りの環境音の強さによって、または出力音の強さによっては、非聴取方向でも再生内容が聞き取れてしまうことがある。特に音の漏れの大きさと、音の漏れ以外の周囲雑音との音圧比率が、非聴取方向における再生内容が聞き取れるかどうかに大きく寄与する。音の漏れが大きかったとしても、それ以上に周囲雑音も大きければ、非聴取方向の人には聞こえないという生理現象（以下、聴覚マスキング）が生じる。
【０００３】
聴覚マスキングを応用して、マスキング音を付加することで、漏れる音を聞こえないように制御する工夫が検討されてきている。例えば、壁を挟んで複数の会議室が存在する環境で、一方の会議室（会議室Ａ）の音が他方の会議室で漏れた場合であっても、他方の会議室（会議室Ｂ）で聞きとりにくくなるように、会議室Ｂのスピーカから雑音を放射するシステムなどが検討されている（例えば特許文献３参照）。しかしながら、券売機にスピーカアレイを配置し、指向性を付けて券売機使用ユーザーに放射するような利用シーンにおいては、隣接した装置と必ずしも空間が壁などで仕切られているわけではない。したがって、隣接した装置付近に漏れた音をマスクするためにマスキング音を放射すると、当該装置の使用ユーザーにもそのマスキング音が聞こえてしまい、聴取すべき使用ユーザーにとって聞くべき音が聞こえなくなってしまうという問題が起こる。
【先行技術文献】
【特許文献】
【０００４】
【特許文献１】特開２００４−１４７３１１号
【特許文献２】特開２００９−２１９１０１号
【特許文献３】特開２００８−１２４９１８号
【発明の概要】
【発明が解決しようとする課題】
【０００５】
特定の方向に音を伝えるスピーカアレイを有する装置において、当該装置使用ユーザー以外の方向に音が漏れ聞こえてしまう。
【課題を解決するための手段】
【０００６】
課題を解決するために、本発明のスピーカアレイは、スピーカ素子から出力する音を制御する特性制御部を有し、
スピーカ素子は、予め定める１以上の聴取点で再生音が一定音圧以上となるように再生音を出力し、聴取点以外に予め設定された１以上の非聴取点で、再生音が再生音以外の音に対して一定音圧比以下となるようにマスキング音を出力するよう制御することを特徴とする。
【発明の効果】
【０００７】
情報出力装置において、特定点に音を伝えるとともに、他の特定点においては音を聞こえにくくすることが可能となる。
【図面の簡単な説明】
【０００８】
【図１】本発明の第一実施例のハードウェア構成図
【図２】本発明の券売機での使用シーンを示した図
【図３】本発明における聴取点と非聴取点の設定例
【図４】本発明におけるスピーカアレイ出力信号の指向特性制御のソフトウェアブロック図
【図５】本発明における聴取点及び非聴取点の両方を設定した指向特性制御のソフトウェアブロック図
【図６】推定した背景雑音レベルを利用した出力音量制御のソフトウェア構成図
【図７】本発明の第二実施例のハードウェア構成図
【図８】第二実施例における背景雑音レベル推定の詳細なブロック構成図
【図９】背景雑音レベルの推定を指向特性情報を利用して行う出力音量制御のソフトウェア構成図
【図１０】指向特性情報を利用して行う背景雑音レベル推定の詳細なブロック構成図
【図１１】指向特性情報に応じたエコー消去フィルタの切り替え処理フロー図
【図１２】指向特性情報を利用して行う背景雑音信号と背景雑音レベル推定を用いた出力音量制御のソフトウェアブロック図
【図１３】背景雑音信号と背景雑音レベル推定の詳細ブロック構成図
【図１４】カメラ情報を利用した非聴取点情報切り替えを特徴とする指向特性制御システムのハードウェア構成図
【図１５】顔画像認識を利用した非聴取点情報切り替えを特徴とする指向特性制御システムのソフトウェア構成図
【図１６】端末を跨いだ再生音のタイミング調整を行う指向特性制御システムのソフトウェアおよびハードウェア連携図
【図１７】再生音の発生内容及び再生方法を属性として持つ再生音データのデータ構造
【図１８】再生音の再生方法に応じたマスキング再生の制御フローチャート
【図１９】予め与えるシグナル音をトリガーとした周囲端末のマスキング音再生タイミングの検出のソフトウェア構成図
【図２０】券売機毎のマスキング再生・通常再生のタイミングチャートの一例
【図２１】スピーカアレイから非聴取点までの伝達関数を非聴取点からの発話情報から推定することを特徴とする指向特性制御システムのソフトウェア構成図
【図２２】再生音の再生方法に応じたマスキング再生の制御及び再生音声の延伸制御のフローチャート
【図２３】券売機でのカード取り忘れ者への通知システムのソフトウェア構成図
【図２４】本発明を券売機に応用した際の設置環境のハードウェア構成図
【図２５】本発明を券売機に応用した際の使用シーンの一例
【図２６】本発明のマスキング再生中かどうかの判別を行う処理のフローチャート
【発明を実施するための形態】
【０００９】
本発明の第一実施例のハードウェア構成を図１に示す。スピーカアレイ１０１は、複数のスピーカから構成されるとする。D/A変換装置１０２は、中央演算装置１０３で生成したスピーカ出力音をデジタル信号からアナログ信号に変換する。中央演算装置１０３は、スピーカ出力音の生成処理をデジタル信号処理で行う。また、デジタル信号処理のプログラム及びスピーカ配置などのデータは、不揮発性メモリ１０４上に保存する。また、ワークメモリなどは、揮発性メモリ１０５内に保存する。ただし、プログラム及びスピーカ配置などのデータを揮発性メモリ１０５に置くような構成を取っても良い。不揮発性メモリ１０４をワークメモリとして使用しても良い。また、中央演算装置１０３で不揮発性メモリ１０４から読み出されたプログラムによって生成するスピーカ出力音は、ネットワーク１０６を通して、外部のコンピュータから与えられるような構成を取っても良い。
【００１０】
図２は、横一列に配置したスピーカアレイ２０１を保持する情報出力装置である券売機２０２のイメージ図である。スピーカアレイ２０１は、水平面上に、券売機の筺体に横一列に配置する。横一列に配置することで、券売機使用ユーザーの顔の高さが変化するような場合であっても、ユーザーに対してほとんど同じ音圧レベルで音声を聴かせることが可能となる。また、この図と異なり、スピーカは横二列以上であってもよい。スピーカを複数列配置した場合においては、任意の聴取点における指向性をより高めることができる。
【００１１】
図３は、スピーカアレイの放射音の指向特性制御のための聴取点及び非聴取点の設定例を示した図である。本図は、平面図である。スピーカアレイ３０１の周囲に、聴取点と非聴取点とをそれぞれ複数点配置する。聴取点および非聴取点とスピーカアレイの距離は任意であるが、情報出力装置が券売機装置である場合には1m程度に設定することが妥当と考えられる。聴取点/非聴取点の設定間隔は任意であるが、10度刻みまたは5度刻みに設定することが妥当と考えられる。この刻みは中央演算装置の処理量に応じて変更しても良い。
【００１２】
図４は、本発明において中央演算装置内及びD/A変換装置内で行うスピーカアレイ出力音の制御処理のブロック構成を示した図である。出力音生成401では、中央演算装置内でスピーカアレイ出力音の生成処理を行う。券売機などに取り付ける場合は、ユーザーの券売機操作内容に応じて、事前にプリセットされた音声ファイルの中から特定の一つのファイルを選択して再生するような構成を取っても良い。また、操作内容を、ネットワークを介してサーバー等に送信し、サーバー等で再生するファイルを選択し、端末にそのファイルを送信するような構成を取っても良い。また、出力音生成401では、マスキング音の生成処理も必要に応じて行う。予めプリセットされたマスキング音の一を選択しても良いし、装置外から取得する構成をとっても良い。さらに、装置外から取得する場合においては、装置にマイクロホン端子を設け、そのマイクロホン端子を通じて取得した周囲の環境雑音をマスキング音として使用しても良い。指向特性制御フィルタ生成４０２は、中央演算装置内でスピーカアレイから出力しようとする出力音が特定方向にのみ強調されて聞こえるようなスピーカ毎の指向特性制御フィルタhp(t)を生成する。ここで、pはスピーカアレイ上のスピーカ番号を表すインデックスとする。tはスピーカ出力音の時間インデックスとする。スピーカアレイから出力する出力音をx(t)と表記する。指向特性制御403では、中央演算装置内でx(t)に指向特性制御フィルタhp(t)を畳み込み、スピーカ毎の出力信号op(t)を出力する。x(t)は、少なくとも出力音とマスキング音の2音源以上が用意され、音源毎に指向特性制御フィルタを用意し、音源毎に音源毎の指向特性制御フィルタを畳み込んだ信号を、スピーカ毎に加算した後、その加算信号をop(t)として出力しても良い。例えば、聴取点に向けて聞かせたい音と、逆に非聴取点に向けて聞かせたい音の2種類を用意し、各方向に指向性を向けた指向特性制御フィルタを重畳した信号を加算して出力することで、聴取点に向けて流した音が非聴取点に向けて多少漏れたとしても、非聴取点に向けて流した音の存在により、非聴取点では漏れた音がマスキングされて聞こえにくくなるという効果が期待できる。
D/A変換処理404は、D/A変換装置内でスピーカ毎の出力信号をデジタル信号からアナログ信号に変換した後、スピーカアレイで出力する。
【００１３】
図５は、指向特性制御フィルタ生成のブロック構成のより詳細なブロック構成を示した図である。指向特性制御フィルタは、聴取点設定501では、空間上の複数の点を聴取点として設定し、その聴取点を出力する。この設定はスピーカアレイ301からの相対的な座標位置が好ましいが、これに限られない。非聴取点設定502では、空間上の複数の点を非聴取点と設定し、その非聴取点を出力する。指向特性制御フィルタ生成503は、聴取点501で設定した聴取点の情報と、非聴取点設定502で設定した非聴取点の情報を用いて、指向特性制御用フィルタhp(f)を求める。
【００１４】
以下で、指向特性制御用フィルタhp(f)の算出方法の一例を述べる。以下に述べる方法以外の方法で指向特性制御用フィルタを求めても良い。ここで、各聴取点および非聴取点は、それぞれ空間上の1点として与えられる。ここで、空間上の1点をu=[ux uy uz]、また各スピーカ素子の座標をSp=[Sp,x Sp,y Sp,z]と定義する。単位は[m]とする。ここで、uとSpの3次元ユークリッド距離をD(u,Sp)と定義する。ここで、各スピーカ素子Spから空間上の一点uまで音が伝わるまでの時間は、D(u,Sp)/c [s]となる。ここでcは音速とし、340m/sとする。
【００１５】
また、音量が距離の２乗に反比例して減衰すると仮定すると、各スピーカ素子Spから空間上の一点uまで音が伝わるまでに、音の振幅は、c/ D(u,Sp)倍となる。ここで、空間上の一点uで観測される音を仮想的にデジタル変換した信号をYu,p(t)と表記する。さらに、Yu,p(t)に短時間フーリエ変換を施した信号を、Yu,p(f,τ)と表記する。ここで、fは短時間フーリエ変換後の離散化された周波数、τはフレームインデックスとする。Yu,p(f,τ)は、スピーカ素子Spの出力信号op(t)の短時間フーリエ変換信号op(f,τ)とD(u,Sp)を用いて、数１で近似的に表すことができる。D(u,Sp)は、スピーカ配置が決まれば求めることができる。指向特性制御フィルタ生成503は予め定めるスピーカ配置504を利用してD(u,Sp)を求める。ここで、expは指数関数とする。jは-1の平方根とする。
【００１６】
【数１】
2011211266.tif 000003
【００１７】
さらに全てのスピーカ素子から音を出した時のu点での仮想的な音信号は、 Yu(f,τ)=ΣYu,p(f,τ)となる。さらにop(f,τ)は数２で近似的にあらわすことができる。ここで、x(f,τ)は、x(t)の短時間フーリエ変換後の信号とする。hp(f)はhp(t)のフーリエ変換後の信号とする。したがって、Yu(f,τ)は、数３で表すことができる。*はベクトルや行列の共役転を施す演算子とする。h(ｆ)は、p番目の要素がhp(f)となるようなベクトルとする。また、au(f)は、数７で表されるau,p(f)をp番目の要素として持つベクトルとする。ここで空間上の聴取点集合をΩsとする。また非聴取点集合をΩnとする。聴取点の平均音圧レベルPs(f,τ)は、数４で表すことができる。Ｌ（Ωs）は、聴取点の数とする。更にPs(f,τ)は、数５に変形できる。同様に非聴取点での平均音圧レベルPｎ(f,τ)は数６で表すことができる。指向特性制御フィルタ生成503は、聴取点と非聴取点の音圧レベル比Ps(f,τ)/Pn((f,τ) を最大化するようなh(f)を算出する。このようなh(f)は、数８で与えられる。またRs(f)及びRn(f)はそれぞれ数９及び数１０で表すことができる。更に、h(f)を数１１で補正したh2(f)をh(f)の代わりに用いても良い。ここで、λは数１２で算出するものとする。h(f)の各要素hp(f)に逆フーリエ変換を施したものをhp(t)として、指向特性制御フィルタ生成503は出力する。
【００１８】
【数２】
2011211266.tif 000004
【００１９】
【数３】
2011211266.tif 000005
【００２０】
【数４】
2011211266.tif 000006
【００２１】
【数５】
2011211266.tif 000007
【００２２】
【数６】
2011211266.tif 000008
【００２３】
【数７】
2011211266.tif 000009
【００２４】
【数８】
2011211266.tif 000010
【００２５】
【数９】
2011211266.tif 000011
【００２６】
【数１０】
2011211266.tif 000012
【００２７】
【数１１】
2011211266.tif 000013
【００２８】
【数１２】
2011211266.tif 000014
【００２９】
また、指向特性制御フィルタ生成503は、非聴取点に向けて、音圧レベルを高く設定し、聴取点に向けて音圧レベルを低くするような指向特性制御フィルタを生成し、その指向特性制御フィルタも合わせて出力する。その際、聴取点に向けて出力した音が非聴取点に漏れて聞こえる音量と非聴取点に向けて出力した音の非聴取点における音量の比率が一定以下になるように各指向特性制御フィルタをスカラー倍して用いる構成を取る。
【００３０】
図６は、聴取点に出力音を放射する一方で、その出力音が非聴取点で漏れて聞こえる影響を軽減する目的で、推定した背景雑音レベルに応じて非聴取点に向けてマスキング音を放射することを特徴とする本発明の実施例のソフトウェアブロック構成を示した図である。ハードウェア構成は図７に示している。聴取点出力音生成６０１は、聴取点に向けて放射するスピーカアレイ出力音の生成処理を行う。券売機などに取り付ける場合は、ユーザーの券売機操作内容に応じて、事前にプリセットされた音声ファイルの中から特定の一つのファイルを選択して再生するような構成を取っても良い。聴取点指向特性制御フィルタ生成６０２は、上記で示した指向特性制御フィルタと同一の処理を行い、聴取点で音が大きく聞こえ、非聴取点で音が小さくなるようなフィルタを出力する。聴取点指向特性制御６０３は、聴取点指向特性制御フィルタ生成６０２が生成する指向特性制御フィルタを聴取点出力音生成６０１が出力するスピーカアレイ出力音に畳み込み、スピーカ毎の再生音を生成する。Ａ／Ｄ変換処理６０９は、筐体に取り付けたマイクロホンアレイで取り込んだスピーカ音再生環境の周囲の音をアナログ信号からデジタル信号に変換したものを出力する。背景雑音レベル推定６１０は、A/D変換処理６０９が出力するデジタル信号からスピーカ音再生環境の背景雑音の音量レベル推定を行う。ここで、デジタル信号中には、スピーカの再生音が混入しており、スピーカの再生音を誤って背景雑音とみなさないような処理がなされる。この具体的な処理については後述する。スピーカ音再生環境の背景雑音の音量レベルは、非聴取点出力音生成６０４に送られる。非聴取点出力音生成６０４は、推定した背景雑音の音量レベルから非聴取点で出力する音の音量を制御する。非聴取点で出力する音は音楽や広告情報などネットワーク経由もしくは予めプリセットされた音を流すような構成を取る。調整の仕方は後述する。非聴取点指向特性制御フィルタ生成６０５は、非聴取点で音が大きく聞こえ、非聴取点で音が小さく聞こえるような指向特性制御フィルタを生成し出力する。生成の方法は、第一実施例で示した聴取点制御フィルタの生成方法と同種の処理であり、非聴取点が強調方向となっている点が異なるフィルタである。非聴取点指向特性制御６０６は、非聴取点指向特性制御フィルタを非聴取点出力音に重畳した信号をスピーカ素子毎に生成する。混合６０７では、聴取点指向特性制御６０３と非聴取点指向特性制御６０６が出力する各スピーカ素子毎の信号を混合したものをスピーカ素子毎に出力する。D/A変換処理６０８は、各スピーカ素子毎にデジタル信号をアナログ信号に変換した後、スピーカアレイから出力する。前述の非聴取点出力音生成６０４での、推定した背景雑音の音量レベルから非聴取点で出力する音の音量を制御は、聴取点方向に強調して出力した音が非聴取点方向にもれこむ音量の時間平均値と非聴取点方向に強調して出力した音の非聴取点方向での音量の時間平均値の比率が予め定める閾値以下になるように非聴取点出力音の音量を調整する。
【００３１】
図７は本発明の第二実施例のハードウェア構成を示した図である。第一実施例と同様に第二実施例は複数のスピーカから構成されるスピーカアレイ７０１を有し、各スピーカから音を出力する。D/A変換装置７０２は、中央演算装置７０３内で生成するスピーカ毎の出力音をデジタル信号からアナログ信号に変換する。また揮発性メモリ７０５は、プログラム実行に伴うワークメモリを確保するためなどに使用する。不揮発性メモリ７０４は、スピーカアレイの配置や、中央演算装置７０３で実行するプログラムなどを保持する。マイクロホンアレイ７０７は、複数のマイクロホン素子から構成され、スピーカ音再生環境周辺の音を収録する。マイクロホンアレイはマイクロホン単体であってもよい。収録したアナログ信号はA/D変換装置７０８で、デジタル信号に変換され、中央演算装置７０３に送られる。ネットワーク７０６は、再生音の原信号などを転送するために用いる。
【００３２】
図８は、本発明の第二実施例の背景雑音レベル推定の詳細なブロック構成を示した図である。背景雑音レベル推定８０１は、スピーカアレイから出力されるスピーカアレイ出力音の原信号とマイクロホンアレイから取り込まれるマイクロホンアレイ入力音とからスピーカ音再生環境の背景雑音音量を推定して出力する。まず、スピーカアレイから出力する出力音の原信号に短時間周波数分解８０２−１を施し、スピーカアレイ出力音の原信号を時間周波数領域の信号x(f,τ)に変換する。またマイクロホン入力音も同様に短時間周波数分解802-2を施し、時間周波数領域の信号q(f,τ)に変換される。音量比較８０３では、時間・周波数毎にx(f,τ)の音量が予め定める一定値を超えているかどうかをチェックする。背景雑音/スピーカ出力音判定８０４は音量比較８０３で、x(f,τ)の音量が予め定める一定値を超えている場合には、スピーカ出力音が存在すると判定し、それ以外の場合は、背景雑音が存在すると判定する。背景雑音音量更新８０５では、背景雑音が存在すると判定された時間帯のみq(f,τ)の音量を数１３で移動平均処理したq2(f,τ)を算出する。ここで、αは予め定める移動平均係数とする。スピーカ出力音が存在すると判定された場合は、q2(f,τ)= q2(f,τ-1)とする。また本移動平均処理のほか、ＭＣＲＡ法などを使って背景雑音レベルをマイクロホン信号から推定するような構成を取っても良い。背景雑音音量更新８０５では、更新した背景雑音音量q2(f,τ)を出力して処理を終了する。
【００３３】
【数１３】
2011211266.tif 000015
【００３４】
図９は、背景雑音レベル推定９１０を、聴取点指向特性情報などを用いて行うブロック構成を示した図である。聴取点出力音生成９０１、聴取点指向特性制御フィルタ生成９０２、聴取点指向特性制御９０３、非聴取点出力音生成９０４、非聴取点指向特性制御フィルタ生成９０５、非聴取点指向特性制御９０６、混合９０７、D/A変換処理９０８、A/D変換処理９０９の各ブロックの構成は、図６の対応するブロックと同一構成となる。背景雑音レベル推定９１０では、マイクロホン入力音とスピーカアレイ出力音のほか、非聴取点指向特性情報、及び聴取点指向特性情報を利用して背景雑音レベルを推定する。背景雑音レベルを推定するために、マルチスピーカ対応の音響エコーキャンセラを用いる構成とする。一般にはマルチチャンネルスピーカ対応の音響エコーキャンセラは、各スピーカ素子間の出力音間に相関が存在し、その相関が急激に変化した場合にエコー消去性能が大きく劣化する。この問題を避けるために、各スピーカ素子の出力音が互いに無相関となるように、スピーカ素子毎の出力音に相互に独立非線形処理を施すことや、相互に無相関な白色雑音を混入するなどの手段がとられる。本構成においてもそのような手段を混合９０７内で利用しても良い。また、そのような構成を利用せずとも、聴取点指向特性と非聴取点の指向特性が変化しない限りは、各スピーカ素子間の出力音間に相関が一定となり、マルチチャンネルスピーカ対応の音響エコーキャンセラで十分エコーが消去可能である。本発明の構成では、聴取点指向特性及び非聴取点指向特性は稀にしか変化しない構成となっており、聴取点指向特性及び非聴取点指向特性ごとに音響エコー消去用のフィルタ毎に音響エコーキャンセラ用のフィルタを保持しておき、聴取点指向特性及び非聴取点指向特性が変化した場合は、保持しているフィルタを引き出して用いるような構成と鳴っている。
【００３５】
背景雑音レベル推定９１０の具体的な処理構成は、図１０に示す。背景雑音レベル推定１００１は、スピーカアレイ出力音とマイクロホン入力音及び聴取点/非聴取点指向特性情報を用いて、背景雑音音量を推定して出力する。音響エコーキャンセラ１００２では、マイクロホン入力音からスピーカアレイ出力音の影響を数１４で除去する。そして音響エコーキャンセル後の信号y(f,τ)を出力する。ここで、w(f,τ)はエコー成分消去用のフィルタである。w(f,τ)は揮発性メモリまたは不揮発性メモリ内に確保された領域に保存される。聴取点/非聴取点指向特性情報が変化した際に、フィルタ切り替え１００６では、エコー成分消去用フィルタw(f,τ)を置き換える。フィルタ切り替え１００６では、エコーキャンセルフィルタ１００５では、聴取点/非聴取点指向特性情報ごとにw(f,τ)を保持し、フィルタ切り替え１００６の要求に従い切り替える。エコーキャンセルフィルタ更新１００３では、数１５でw(f,τ)を求める。ここで、Eは数学的な期待値を算出するためのオペレータである。期待値計算をサンプル平均で置き換え、さらにサンプル平均を移動平均に置き換えて、Roo(f,τ)=E[O(f,τ) O(f,τ)*]及びRoq(f,τ)=E[[O(f,τ) q(f,τ)*]を数１６及び数１７で算出する。ここでβは移動平均係数とする。Roo(f,τ), Roq(f,τ)からw(f,τ)を数１８で求める。エコーキャンセルフィルタw(f,τ)及びRoo(f,τ)、 Roq(f,τ)は、エコーキャンセルフィルタ更新の後、聴取点/非聴取点指向特性情報に関連つけて、エコーキャンセルフィルタ１００５に保存される。背景雑音音量更新１００４では、音響エコーキャンセル後の信号y(f,τ)から背景雑音の音量を求める。これは、y(f,τ)の音量を移動平均して求めても良いし、MCRA法などの方法を用いて求めても良い。
【００３６】
【数１４】
2011211266.tif 000016
【００３７】
【数１５】
2011211266.tif 000017
【００３８】
【数１６】
2011211266.tif 000018
【００３９】
【数１７】
2011211266.tif 000019
【００４０】
【数１８】
2011211266.tif 000020
【００４１】
図１１は、エコー消去フィルタの切り替え処理の処理フローを示した図である。始めに聴取点/非聴取点指向特性情報を参照し、指向特性に変化があったかどうかを確かめる。変化が無かった場合は、既に設定されている音響エコー消去フィルタを使い続ける。変化があった場合は、変化後の聴取点/非聴取点指向特性情報に紐付いたエコー消去フィルタを探索する１１０２。探索した結果フィルタが存在するかどうかを判定（１１０３）し、存在した場合は、エコー消去フィルタを見つかったフィルタに切り替えて終了する。存在しなかった場合は、エコー消去フィルタをゼロリセットまたはランダムな値に設定（１１０５）し終了する。
【００４２】
図１２は、背景雑音信号に応じて非聴取点方向に放射する出力音の音量を調整するとともに、非聴取点方向に放射する出力音事態を推定した背景雑音信号に差し替えることを特徴とするシステム構成のソフトウェア構成を示した図である。聴取点出力音生成１２０１、聴取点指向特性制御フィルタ生成１２０２、聴取点指向特性制御１２０３、非聴取点指向特性制御フィルタ生成１２０５、非聴取点指向特性制御１２０６、混合１２０７、D/A変換処理１２０８、A/D変換処理１２０９の各ブロックの構成は、図９の対応するブロックと同一構成となる。背景雑音信号/レベル推定１２１９は、マイクロホン入力信号、スピーカアレイ出力音、聴取点指向特性情報及び非聴取点指向特性情報を元に背景雑音信号を推定し、さらにその音量を推定する、非聴取点出力音生成１２０４は、背景雑音信号/レベル推定１２１０が出力する背景雑音信号及び背景雑音レベルからまず非聴取点方向に強調して放射する出力音を背景雑音信号に設定すると共に、その音圧レベルを背景雑音レベルに応じて切り替える。具体的な切り替え方法は非聴取点出力音生成９０４と同一とする。
【００４３】
背景雑音信号/レベル推定１２１０の具体的なブロック構成を図１３に示す。背景雑音レベル指定１３０１の構成要素のうち、音響エコーキャンセラ１３０２、エコーキャンセルフィルタ更新１３０３、背景雑音音量更新１３０４、エコーキャンセルフィルタ１３０５、フィルタ切り替え１３０６の処理内容は、全て図１０の対応するブロックと同一である。ただし、音響エコーキャンセラで推定した背景雑音信号をそのまま、出力する点が異なる。
【００４４】
図１４は、非聴取点や聴取点方向の設定をカメラ画像から得た情報を用いて行うことを特徴とするシステムのハードウェア構成を示した図である。複数のスピーカから構成されるスピーカアレイ１４０１を有し、各スピーカから音を出力する。D/A変換装置１４０２は、中央演算装置１４０３内で生成するスピーカ毎の出力音をデジタル信号からアナログ信号に変換する。また揮発性メモリ１４０５は、プログラム実行に伴うワークメモリを確保するためなどに使用する。不揮発性メモリ１４０４は、スピーカアレイの配置や、中央演算装置１４０３で実行するプログラムなどを保持する。近接端末向きカメラ１４０７は、隣接した券売機端末の方向を向くように設定されたカメラとし、中央演算装置１４０３内で、隣接した券売機端末近くに人がいるかどうかを、顔画像認識を用いてその位置と共に判別する。また、スピーカアレイ出力音の原信号はネットワーク１４０６を経由してやり取りされてもよい。
【００４５】
図１５は、カメラで撮影した画像情報から顔画像を認識し、その方向を非聴取点として設定することを特徴とするスピーカアレイの指向特性制御フィルタ生成のブロック構成を示した図である。聴取点設定１５０１は、予め定めるシステム使用ユーザーの方向を設定する。顔画像認識１５０５は、隣接した券売機端末の方向を向くように設定したカメラで撮影した画像情報に一般的な顔画像認識処理を施し、顔が存在する方向を同定する。そしてその方向を出力し、非聴取点設定１５０２では、顔の方向及びその方向近傍の位置を非聴取点として設定する。指向特性制御フィルタ生成１５０３では、スピーカ配置１５０４の情報と設定した聴取点及び非聴取点の情報を利用し、聴取点方向で音が大きく聞こえ、非聴取点で音が小さく聞こえるようにスピーカアレイの指向特性を制御するフィルタを生成して出力する。  図１６は、本発明は全ての実施例にて使用可能な端末毎のスピーカ出力音の設定方法に関するハードウェア及びソフトウェアの各機能構成を示した図である。本発明では端末毎に非聴取方向にマスキング音を流すことを想定しているが、常にマスキング音を流すと、環境全体の背景雑音が上がってしまい、さらに端末毎の出力音を大きくする必要が出てくるといった問題が起こる。この問題を軽減するため、端末毎にマスキングするべき再生音の場合はマスキング音を流すが、マスキングする必要の無い再生音の場合はマスキング音を流さないという構成を提供する。この場合、マスキング音に重畳する指向特性制御フィルタのｊ係数を０にするか、マスキング音そのものを０に設定することで実現可能である。更に、隣接端末がマスキング音を流している場合は、マスキング音を必要とする発話の再生を遅延させ、マスキング音が重ならないように制御する。サーバー１６０１は、一般的なコンピュータでよい。ここでは、各端末１６０５−１〜ｎまでの端末毎の端末操作歴がネットワーク１６０４を介してサーバーに送られる（ユーザー操作送信１６０６−１〜ｎ）。サーバー１６０１では操作歴から端末毎の再生音を端末毎再生音決定部１６０２で決定する。例えば操作歴と再生音を一体一で対応させて管理しても良いし、ユーザーの操作歴からユーザー固有の情報、例えば残高情報などをデータベースから引き出しその情報を、音声合成などを使って読み上げたものを再生音としても良い。さらにその再生音は、再生内容から人手で「通常再生かマスキング再生」かのラベルが付けられて管理されている物とする。
【００４６】
データ構造の一例を図１７に示す。例えば図１７に示すように「いらっしゃいませ」「取引を選択してください」など特に隣接端末にもれ聞こえても問題が無い発話に関してはマスキングせずに通常再生で再生し、「残高は○○円です」など隣接端末にもれ聞こえることが問題となるような発話に関してはマスキングして再生するような設定が成されているものとする。端末毎再生音調整部１６０３では、端末毎の再生音の再生タイミングを相互に調整した後、再生するタイミングになったらその再生音は、ネットワーク１６０４を解して各端末に送られる。各端末では送られてきた再生音に指向特性制御フィルタを重畳しスピーカアレイからの出力音を生成する（出力音生成１６０７−１〜n）。そしてスピーカアレイを通してその再生音を再生する。
【００４７】
図１８に、端末毎再生音調整部１６０３の処理フローチャートの一例を示す。これは端末毎、及び再生音毎の処理フローとなっている。まず入力された再生音がマスキング再生音かどうかを判定する（１８０１）。マスキング再生音で無い場合、その発話はマスキングをせずにすぐに再生するように該当する端末に指示し処理を終了する。この場合、該当する端末では非聴取点方向向けにマスキング音が出力されない。マスキング再生音である場合、次に該当する端末の周囲でマスキング再生が行われているかどうかを判定する（１８０２）。行われていない場合、マスキング再生１８０３にてマスキング再生で再生を行うように端末に指示を投げる。この場合、該当端末では、マスキング音を非聴取点方向向けに再生しない。周囲の端末でマスキング再生が行われている場合は、周囲のマスキング再生が終了するまで再生処理を待機（１８０４）した後、マスキング再生を行うように該当する端末に指示を出し処理を終了する。この処理により、各端末で周囲においてマスキング音が再生されている際に、さらにマスキング音を再生することで、聞き取りにくくなる問題を軽減することが可能になる。マスキング再生が行われているかどうかの確認は、例えばサーバーサイドで管理する端末毎の再生音を確認することで実現できる。
【００４８】
図２６は、マスキング再生が行われているかどうかの判別を行う処理のフローチャートを示した図である。前述の通り、各端末を制御するサーバーでは、それぞれの端末の再生音を決定する機能を保持するため、逆に、現在どの端末がマスキング再生中かどうかを知ることができる。周囲端末リストアップ（２６０１）では、マスキング再生するかどうかを決定する端末の周囲に存在する端末を記憶装置などから読み出す。「周囲」であるかどうかは、例えば、マスキング再生するかどうかを決定する端末の二つ隣までを「周囲」することや、半径３ｍ以内を周囲とみなすといったような判断基準及び閾値を予めセットすることで判定する。次にリストアップされた端末がマスキング再生中かどうかを端末毎にチェックする。初期化（２６０２）では、端末を表すインデックスiを初期値１に設定する。これは、リストアップした結果、最初に見つかった端末からチェックすることを意味する。「全ての周囲端末を調べたか？」分岐部（２６０３）では、端末を表すインデックスがリストアップした全ての周囲端末の最終インデックスとなっているかどうか確認し、最終インデックスである場合、マスキング再生中の端末は存在しないと判断して、処理を終了する。最終インデックスでない場合は、「i番目の端末がマスキング再生中か？」分岐部（２６０４）において確認を行い、i番目の端末がマスキング再生中である場合は、マスキング再生中の端末が存在すると判断して処理を終了する。再生中でない場合、iが次の端末を指すように値を変更して分岐部２６０３に戻る。ここで、マスキング再生中か否かは、サーバーサイドで保持する端末毎の再生音データ構造を閲覧することで判断可能である。
【００４９】
図１９は、サーバーを解さずに、マスキング再生を行うタイミングを端末のみで判断するための端末における出力音声性４０１を拡張する構成を示した図である。本構成は、第二実施例のハードウェア構成で有効となる。周囲端末の音源分離１９０１では、端末に備え付けたマイクロホンアレイ７０７を用いて、周囲端末方向の音を分離し抽出する。予め周囲端末方向は既知であるため、その方向にビームを向け、それ以外の方向で音源が存在する方向に死角を向ける適応ビームフォーマにより実現可能となる。周囲端末の音源分離１９０１は周囲端末の音を分離して出力する。ここで、周囲端末毎に音の分離処理をして出力するような構成を取っても良い。その場合、後段の処理は出力音の数だけ実行することになる。パターンマッチング１９０２では、ＤＰマッチングやＨＭＭを使ったマッチングまたはスペクトル距離が予め定めるシグナル音のスペクトルと近いかどうかの情報に基づき、予め定めるマスキングシグナル音のデータ蓄積１９０５と入力信号とのパターンマッチングを実行する。ここで予め定めるマスキングシグナル音は周囲端末のマスキング音再生が開始されるというシグナルと、終了したというシグナルの２種類が存在する。それぞれのシグナルに対してパターンマッチング処理を実行する。周囲端末のマスキング再生状態判別１９０３は、パターンマッチングの実行結果を閾値処理する。マスキング音再生が開始されるというシグナルが検出された場合、周囲端末でマスキング音が再生されたと判定し、マスキング音再生が終了したというシグナルが検出された場合、周囲端末でマスキング音が終了したと判定する。さらに両方のシグナルが検出された場合、マッチング度合いが大きいシグナルが検出されたと判定する。また、両方のシグナル共に検出されなかった場合、過去の状態を保持する。つまり、一つ前の処理でマスキング音が再生されたと判定した場合は再生されたと判定し、それ以外の場合は再生していないと判定する。また、再生時間に閾値を設け、閾値以上に再生している場合は、終了シグナルが検出されなかったとしても終了したと判定するようにしても良い。出力音再生１９０４では、図１８で示した処理フローに基づき、出力音を再生する。つまり周囲端末がマスキング音を再生している場合かつ自端末でマスキング音を再生しようとしている場合は、周囲端末のマスキング音再生が終了するまで待機した後に再生する。それ以外のケースで、マスキング音再生の場合は、マスキング音の出力を伴い聴取点向けに音を再生する。通常再生の場合は、マスキング音の出力を伴わずに再生するが、マスキング音再生時には、通常再生も待機させる構成をとっても良い。
【００５０】
図２０は端末ごとの通常再生とマスキング再生のタイミングチャートの一例を示した図である。端末ごとにマスキング再生を行う時間帯が重なることが内容に通常再生をずらすなどする。また端末再生音を先読み可能な場合で、先にマスキング再生を行うことが分かり、かつ隣接端末でマスキング音を再生していることが分かった場合は、現在再生しようとしている音を、話速変換技術などを使って延伸して再生するような構成を取っても良い。
【００５１】
この構成の具体的な処理フローを図２２に示す。各端末において、再生音ごとに次に再生音を先読みし（２２０１）、次の再生音がマスキング再生であるかどうかを判定する（２２０２）。マスキング再生でない場合は、現在の音声を通常再生する。マスキング再生であった場合は、隣接端末でマスキング再生されているかどうかを確認する（２２０３）。マスキング再生されていない場合は、現在の音声をそのまま再生する。マスキング再生されている場合は、現在の再生音を、話速変換技術などを使って延伸し（２２０５）、出力する。
【００５２】
以下は、上記実施例に共通して追加することができる機能の実施例について解説する。
【００５３】
図２１は、カメラを有するハードウェア構成の場合に顔画像認識情報を用いて、非聴取点毎のスピーカから空間上の一点までの伝達関数ap(f)を高精度に求めるためのソフトウェア構成を示している。顔画像認識２１０６は、カメラの画像から顔が存在する方向を探索し、その方向を出力する。非聴取点設定２１０２では、顔が存在する方向を非聴取点として設定する。発話からの伝達関数推定２１０５は、複数のマイクロホンで取得した情報を独立成分分析などを用いて分離処理する。そしてその分離信号の中から、分離信号の音源方向が設定した非聴取点方向に近い音を取り出す。そして分離に使ったフィルタの情報から非聴取点方向からの音の伝達関数を抽出する。抽出した伝達関数をその非聴取点の伝達関数ap(f)として用いる。指向特性制御フィルタ生成２１０３では、得た非聴取点の伝達関数と聴取点方向の情報から聴取点で大きく聞こえ、非聴取点で小さく聞こえるような指向特性制御フィルタを生成して出力する。この際スピーカ配置２１０４、及び設定された聴取点（２１０１）を利用する。
【００５４】
図２３は、画像処理を使って、券売機のカードを取り忘れた人に対してのみ警告音を発することができる構成を示している。顔画像認識２３０８、非聴取点設定２３０６、発話からの伝達関数推定２３０７、指向特性制御フィルタ生成２３０４、スピーカ配置２３０５については、図２１で示した同機能ブロックと同一とする。カード取り忘れ検出２３０３は、券売機などに標準的に装備されているカード取り忘れ情報を検出する。画像追跡２３０２は、券売機使用ユーザーの顔や服の色の情報から券売機使用ユーザーの動きを画像処理で追跡する。追跡した券売機使用ユーザーの方向を出力する。聴取点設定２３０１では、その方向を聴取点に設定する。このような構成を取ることで、券売機使用ユーザーが動く場合であっても、その方向に音を強調して出力することが可能となる。
【００５５】
図２４は、実際に券売機を並べた状況で、本発明を適用する際に必要となるハードウェアを図示した図である。端末は二つに限定されるものではないが、簡略化のため、本図においては端末は二つのみ記載している。券売機２４０１は、本発明を保持する券売機とする。少なくとも、ユーザーが情報を入力するための入力装置２４０１−３、情報を表示するためのディスプレイ２４０１−２、情報を再生するためのスピーカアレイ２４０１−１を保持し、再生音のやり取りをサーバーと行うために、ＬＡＮケーブル２４０１−４でつながっている。ＬＡＮケーブルは、ＨＵＢ２４０３につながっており、ネットワークを介して、サーバーとつながっている。ここで、入力装置２４０１−３は、ユーザーが操作する機能別にボタン化されているような装置でも良いし、キーボード、マウスといった構成を取っても良い。スピーカアレイ２４０１−１からガイダンス音が放射され、目の前のユーザーがガイダンス音を聞くことができる構成となっている。同様に券売機２４０２は、ユーザーが情報を入力するための入力装置２４０２−３、情報を表示するためのディスプレイ２４０２−２、情報を再生するためのスピーカアレイ２４０２−１を保持し、再生音のやり取りをサーバーと行うために、ＬＡＮケーブル２４０１−４でつながっている。
【００５６】
以下、本発明の代表的な実施例を適用した際の外観イメージを示す。
【００５７】
図２５は、前述の構成の券売機が横一列に３台並んだシーンにおける再生音の再生イメージを記した図である。図２における券売機２０２がそれぞれ券売機２５０１、２５０２、２５０３と対応している。各券売機は、同一機能となっており、サーバー経由で再生音を受信し、各券売機から放射する。ここで券売機２５０２からクリティカルな発話が放射される際には、人物２５１１、人物２５１３が漏れた音を聞くことができないように、マスキングするための発話を人物２５１１、人物２５１３に向けて放射するような動きとなる。図３における聴取点と非聴取点と各人物の対応関係については、聴取点に人物２５１２がおり、非聴取点に人物２５１１、人物２５１３がいる。
【符号の説明】
【００５８】
101…スピーカアレイ、102…D/A変換装置、103…中央演算装置、104…不揮発性メモリ、105…揮発性メモリ、106…ネットワーク、201…スピーカアレイ、202…券売機、301…スピーカアレイ、401…出力音生成、402…指向特性制御フィルタ生成、403…指向特性制御、404…D/A変換処理、501…聴取点設定、502…非聴取点設定、503…指向特性制御フィルタ生成、504…スピーカ配置、601…聴取点出力音生成、602…聴取点指向特性制御フィルタ生成、603…聴取点指向特性制御、604…聴取点出力音生成、605…非聴取点指向特性制御フィルタ生成、606…非聴取点指向特性制御、607…混合、608…D/A変換処理、609…A/D変換処理、610…背景雑音レベル推定、701…スピーカアレイ、702…D/A変換装置、703…中央演算装置、704…不揮発性メモリ、705…揮発性メモリ、706…ネットワーク、707…マイクロホンアレイ、708…A/D変換装置、801…背景雑音レベル推定、802-1…短時間周波数分解、802-2…短時間周波数分解、803…音量比較、804…背景雑音/スピーカアレイ出力音判定、805…背景雑音音量更新、901…聴取点出力音生成、902…聴取点指向特性制御フィルタ生成、903…聴取点指向特性制御、904…聴取点出力音生成、905…非聴取点指向特性制御フィルタ生成、906…非聴取点指向特性制御、907…混合、908…D/A変換処理、909…A/D変換処理、910…背景雑音レベル推定、1001…背景雑音レベル推定、1002…音響エコーキャンセラ、1003…エコーキャンセルフィルタ更新、1004…背景雑音音量更新、1005…エコーキャンセルフィルタ、1006…フィルタ切り替え、1101…指向特性変化判定、1102…エコー消去フィルタ探索、1103…フィルタ存在判定、1104…エコー消去フィルタ切り替え、1105…エコー消去フィルタ初期化、1201…聴取点出力音生成、1202…聴取点指向特性制御フィルタ生成、1203…聴取点指向特性制御、1204…聴取点出力音生成、1205…非聴取点指向特性制御フィルタ生成、1206…非聴取点指向特性制御、1207…混合、1208…D/A変換処理、1209…A/D変換処理、1210…背景雑音信号/レベル推定、1301…背景雑音レベル推定、1302…音響エコーキャンセラ、1303…エコーキャンセルフィルタ更新、1304…背景雑音音量更新、1305…エコーキャンセルフィルタ、1306…フィルタ切り替え、1401…スピーカアレイ、1402…D/A変換装置、1403…中央演算装置、1404…不揮発性メモリ、1405…揮発性メモリ、1406…ネットワーク、1407…近接端末向きカメラ、1501…聴取点設定、1502…非聴取点設定、1503…指向特性制御フィルタ生成、1504…スピーカ配置、1505…顔画像認識、1601…サーバー、1602…端末毎再生音決定部、1603…端末毎再生音調整部、1604…ネットワーク、1605…端末、1606…ユーザー操作送信、1607…出力音生成、1801…マスキング再生判定、1802…周囲端末のマスキング再生判定、1803…マスキング再生、1804…周囲の再生終了まで待機、1901…周囲端末の音源分離、1902…パターンマッチング、1903…周囲端末のマスキング再生状態判別、1904…出力音生成、2101…聴取点設定、2102…非聴取点設定、2103…指向特性制御フィルタ生成、2104…スピーカ配置、2105…発話からの伝達関数推定、2106…顔画像認識、2201…再生音の先読み、2202…マスキング再生であるかどうかの判定、2203…周囲端末でマスキング音の再生が行われているかどうかの判定、2204…マスキング再生の設定、2205…現在の再生音を延伸、2301…聴取点設定、2302…画像追跡、2303…カード取���忘れ検出、2304…指向特性制御フィルタ生成、2305…スピーカ配置、2306…非聴取点設定、2307…発話からの伝達関数推定、2308…顔画像認識、2401…券売機、2401-1…スピーカアレイ、2401-2…ディスプレイ、2401-3…入力装置、2401-4…LANケーブル、2402…券売機、2402-1…スピーカアレイ、2402-2…ディスプレイ、2402-3…入力装置、2402-4…LANケーブル、2403…HUB、2501…券売機、2502…券売機、2503…券売機、2511…人物、2512…人物、2513…人物、2601…周囲端末リストアップ、2602…初期化、2603…全ての周囲端末を調べたか、2604…i番目の端末がマスキング再生中か
【図１】
2011211266.tif 000021
【図２】
2011211266.tif 000022
【図３】
2011211266.tif 000023
【図４】
2011211266.tif 000024
【図５】
2011211266.tif 000025
【図６】
2011211266.tif 000026
【図７】
2011211266.tif 000027
【図８】
2011211266.tif 000028
【図９】
2011211266.tif 000029
【図１０】
2011211266.tif 000030
【図１１】
2011211266.tif 000031
【図１２】
2011211266.tif 000032
【図１３】
2011211266.tif 000033
【図１４】
2011211266.tif 000034
【図１５】
2011211266.tif 000035
【図１６】
2011211266.tif 000036
【図１７】
2011211266.tif 000037
【図１８】
2011211266.tif 000038
【図１９】
2011211266.tif 000039
【図２０】
2011211266.tif 000040
【図２１】
2011211266.tif 000041
【図２２】
2011211266.tif 000042
【図２３】
2011211266.tif 000043
【図２４】
2011211266.tif 000044
【図２５】
2011211266.tif 000045
【図２６】
2011211266.tif 000046