(57)【要約】      （修正有）【課題】設置される周囲の状態を勘案し、音声による情報を確実に伝達させるコンテンツ再生装置を提供する。【解決手段】画像情報と、該画像情報に対応した複数の音声情報と、を含むコンテンツ情報に基づいた表示を行なう投影画像駆動部２１、マイクロミラー素子２２、光源部２３、ミラー２４及び投影レンズ部２５からなる投影系と、投影系に対して異なる方向に向けて設置されたスピーカSPL、SPRと、投影系に対応した所定の範囲内における周囲の状態を取得する撮影レンズ２７、ＣＭＯＳイメージセンサ２８、Ａ／Ｄ変換器２９及び撮影画像処理部３０からなる撮像部IMと、撮像部IMで得た周囲の状態に応じて、複数の音声情報を複数のスピーカSPL、SPRにより放音させるＣＰＵ32とを備える。【選択図】図３
2017147512.tif 000002
【特許請求の範囲】
【請求項１】
画像情報と、該画像情報に対応した複数の音声情報と、を含むコンテンツ情報に基づいた表示を行なう表示部と、
上記表示部に対して異なる方向に向けて設置された複数のスピーカと、
上記表示部に対応した所定の範囲内における周囲の状態を取得する状態取得部と、
上記状態取得部で取得した周囲の状態に応じて、上記複数の音声情報を上記複数のスピーカにより放音させる制御部と、
を備えることを特徴とするコンテンツ再生装置。
【請求項２】
上記コンテンツ情報を取得するコンテンツ取得部を備え、
上記表示部が表示を行なう画像情報は、上記コンテンツ取得部で得た画像情報であり、
上記スピーカは、それぞれ放音範囲が重複しないように設置された指向性スピーカである
ことを特徴とする請求項１記載のコンテンツ再生装置。
【請求項３】
上記状態取得部は、
上記複数の指向性スピーカの放音範囲に存在する人物を撮影する撮影部を備え、
上記撮影部で得た画像中の人物の顔認識を行なって、当該人物の数、性別、表情、年齢層、及び人種の少なくとも１つの属性を推定する
ことを特徴とする請求項２記載のコンテンツ再生装置。
【請求項４】
上記状態取得部は、上記複数の指向性スピーカの放音範囲毎の人物の数を取得し、
上記制御部は、上記状態取得部で取得した上記複数の指向性スピーカの放音範囲毎の人物の数と偏りの度合いとに応じて上記複数の指向性スピーカでの放音を制御する
ことを特徴とする請求項３記載のコンテンツ再生装置。
【請求項５】
上記制御部は、上記状態取得部で取得した周囲の状態に応じ、上記コンテンツ取得部から異なる複数の言語の音声情報を得て上記複数の指向性スピーカにより放音させることを特徴とする請求項２乃至４いずれか記載のコンテンツ再生装置。
【請求項６】
画像情報と、該画像情報に対応した複数の音声情報と、を含むコンテンツ情報に基づいた表示を行なう表示部と、上記表示部に対して異なる方向に向けて設置された複数のスピーカと、
を備えた装置でのコンテンツ再生方法であって、
上記表示部に対応した所定の範囲内における周囲の状態を取得する状態取得工程と、
上記状態取得工程で取得した周囲の状態に応じて、上記複数の音声情報を上記複数のスピーカにより放音させる制御工程と、
を有することを特徴とするコンテンツ再生方法。
【請求項７】
画像情報と、該画像情報に対応した複数の音声情報と、を含むコンテンツ情報に基づいた表示を行なう表示部と、上記表示部に対して異なる方向に向けて設置された複数のスピーカと、
を備えた装置が内蔵したコンピュータが実行するプログラムであって、上記コンピュータを、
上記表示部に対応した所定の範囲内における周囲の状態を取得する状態取得部、及び
上記状態取得部で取得した周囲の状態に応じて、上記複数の音声情報を上記複数のスピーカにより放音させる制御部、
として機能させることを特徴とするプログラム。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、例えば店舗等で不特定多数の顧客に商品の説明を実施する必要がある状態に好適なコンテンツ再生装置、コンテンツ再生方法及びプログラムに関する。
【背景技術】
【０００２】
閲覧者に対し、印象を高めることができる映像出力装置を提供するべく、例えば人型形状のスクリーンに人物を投影するようにした技術が提案されている。（例えば、特許文献１）
【先行技術文献】
【特許文献】
【０００３】
【特許文献１】特開２０１１−１５０２２１号公報
【発明の概要】
【発明が解決しようとする課題】
【０００４】
上記特許文献に記載された技術も含め、人型など何らかのキャラクタの形状を模したスクリーンを用いる表示装置では、投影面積の多くを人やキャラクタの画像が占めるため、実際に訴求したい情報、例えば商品の情報等を表示するための領域が狭くなり、その分だけ音声コンテンツでそれらの情報を表現する必要性が生じるが、閲覧者に対して十分に情報を伝えることができないという問題があった。
【０００５】
本発明は上記のような実情に鑑みてなされたもので、その目的とするところは、設置される周囲の状態を勘案し、音声による情報を確実に伝達させることが可能なコンテンツ再生装置、コンテンツ再生方法及びプログラムを提供することにある。
【課題を解決するための手段】
【０００６】
本発明の一態様は、画像情報と、該画像情報に対応した複数の音声情報と、を含むコンテンツ情報に基づいた表示を行なう表示部と、上記表示部に対して異なる方向に向けて設置された複数のスピーカと、上記表示部に対応した所定の範囲内における周囲の状態を取得する状態取得部と、上記状態取得部で取得した周囲の状態に応じて、上記複数の音声情報を上記複数のスピーカにより放音させる制御部と、を備えることを特徴とする。
【発明の効果】
【０００７】
本発明によれば、設置される周囲の状態を勘案し、音声による情報を確実に伝達させることが可能となる。
【図面の簡単な説明】
【０００８】
【図１】本発明の一実施形態に係るサイネージシステム全体の構成を示す図。
【図２】同実施形態に係るサイネージ装置の外観構成を示す斜視図。
【図３】同実施形態に係るサイネージ装置の電子回路の機能構成を示すブロック図。
【図４】同実施形態に係るサイネージ装置による第１の動作例の処理内容を示すフローチャート。
【図５】同実施形態に係るサイネージ装置筐体前に位置する人物と指向性スピーカの可聴範囲との関係を例示する図。
【図６】同実施形態に係るサイネージ装置による第２の動作例の処理内容を示すフローチャート。
【図７】同実施形態に係るボタン選択に対応する言語の例を示す図。
【図８】同実施形態に係るボタン選択に対応する商品情報の例を示す図。
【図９】同実施形態に係る顔認識結果に応じた設定例を示す図。
【発明を実施するための形態】
【０００９】
以下、本発明を店舗で使用されるサイネージシステムに適用した場合の一実施形態について、図面を参照して説明する。
【００１０】
［構成］  
図１は、同システム全体の接続構成を示すブロック図である。店舗フロア内に複数のサイネージ装置１０，１０，‥‥が設置される。これらサイネージ装置１０，１０，‥‥が、無線ＬＡＮやインターネットを含むネットワークＮＷを介して、外部の販売支援サーバＳＶと接続される。
【００１１】
販売支援サーバＳＶは、各サイネージ装置１０，１０，‥‥で再生するための複数のコンテンツデータを記憶するデータベース（ＤＢ）を備える。
【００１２】
図２は、上記サイネージ装置１０の外観構成を示す斜視図である。サイネージ装置１０はプロジェクタ技術を用いた電子マネキンであり、装置筐体１０Ａの上面前端側に、交換可能なサイネージボードＳＢが立設される。このサイネージボードＳＢは、サイネージ１０の本来は矩形の投影可能領域内に収まるように設置された、任意形状を有する半透過板状の構成を有する。このサイネージボードＳＢは、サイネージ装置１０に対して着脱可能である。
【００１３】
サイネージボードＳＢは、装置筐体１０Ａの上面に設けられた、ここでは図示しないリアプロジェクション方式の投影レンズから出射された光像が背面側から投影されることで、形状に合致した画像を表示する。
【００１４】
このサイネージボードＳＢの下部には複数、ここでは４個の操作ボタンＢ１〜Ｂ４を合わせて投影しており、当該ボタン中のいずれかを来店客がタッチ操作した場合、ボード取付け基部に配列された、それぞれが指向性を有するライン状の赤外線センサアレイ（不図示）により当該操作位置が検知可能となっている。
【００１５】
さらに装置筐体１０Ａの前面の略中央には、このサイネージ装置１０の前面側の状態を撮影するための超広角光学系の撮像部（撮影部）ＩＭを備える。
【００１６】
さらに装置筐体１０Ａの前面下部の左右端側には指向性スピーカＳＰＬ，ＳＰＲを備える。これら指向性スピーカＳＰＬ，ＳＰＲは、出力する音声の可聴領域が互いに重複することがないように設置された、例えば３０°程度の超指向性を有するスピーカである。
【００１７】
この種の指向性スピーカは、例えばオーディオ・スポットライト（登録商標）やハイパーソニック・サウンド（ＨＳＳ）（登録商標）とも呼称され、超音波の振動により可聴域の音を生成するパラメトリック・スピーカ技術により実現される。
【００１８】
次に図３によりサイネージ１０の主として電子回路の機能構成を説明する。コンテンツメモリ２０には上記販売支援サーバＳＶから受信したコンテンツデータが記憶される。このコンテンツデータは、複数の画像データと第１の音声データ、及び第２の音声データ、制御データ等から構成される。コンテンツデータ中の画像データは、後述するＣＰＵ３２により読出され、バスＢを介して投影画像駆動部２１に送られる。
【００１９】
投影画像駆動部２１は、送られてきた画像データに応じて、所定のフォーマットに従ったフレームレート、例えば１２０［フレーム／秒］と色成分の分割数、及び表示階調数を乗算した、より高速な時分割駆動により、表示素子であるマイクロミラー素子２２を表示駆動する。
【００２０】
このマイクロミラー素子２２は、アレイ状に配列された複数個、例えばＷＸＧＡ（横１２８０画素×縦７６８画素）分の微小ミラーの各傾斜角度を個々に高速でオン／オフ動作して表示動作することで、その反射光により光像を形成する。
【００２１】
一方で、光源部２３から時分割でＲ，Ｇ，Ｂの原色光が循環的に出射される。光源部２３は、半導体発光素子であるＬＥＤを有し、Ｒ，Ｇ，Ｂの原色光を時分割で繰返し出射する。光源部２３が有するＬＥＤは、広義でのＬＥＤとして、ＬＤ（半導体レーザ）や有機ＥＬ素子を含むものとしても良い。
【００２２】
この光源部２３からの原色光が、ミラー２４で全反射して上記マイクロミラー素子２２に照射される。そして、マイクロミラー素子２２での反射光で光像が形成され、形成された光像が投影レンズ部２５を介して上記サイネージボードＳＢに背面側から投射される。
【００２３】
上記撮像部ＩＭは、サイネージ装置１０の正面方向を向いた超広角系の撮影レンズ部２７、及びこの撮影レンズ部２７の焦点位置に配設された固体撮像素子であるＣＭＯＳイメージセンサ２８を含む。
【００２４】
ＣＭＯＳイメージセンサ２８で得られる画像信号は、Ａ／Ｄ変換器２９でデジタル化された後、撮影画像処理部３０に送られる。
【００２５】
この撮影画像処理部３０は、画像処理専用のプロセッサで構成されるもので、上記ＣＭＯＳイメージセンサ２８を走査駆動して撮影動作を実行させ、撮影により得た画像データをデータファイル化して、後述するＣＰＵ３２に送出する。
【００２６】
加えて撮影画像処理部３０は、撮影により得た画像データに対する顔認識処理を実行し、顔全体の輪郭、顔を構成する各パーツである眉、目、鼻、口、耳の形状と配置バランス、目の下の涙袋やほうれい線、肌の色素の量、瞳の色などを認識、抽出することで、画像中の人物の数、各人物の性別、表情、年齢層、人種等を算出する。
【００２７】
上記各回路の動作すべてをＣＰＵ３２が制御する。このＣＰＵ３２は、メインメモリ３３及びプログラムメモリ３４と直接接続される。メインメモリ３３は、例えばＳＲＡＭで構成され、ＣＰＵ３２のワークメモリとして機能する。プログラムメモリ３４は、電気的書換可能な不揮発性メモリ、例えばフラッシュＲＯＭで構成され、ＣＰＵ３２が実行する動作プログラムや各種定型データ等を記憶する。
【００２８】
ＣＰＵ３２は、上記プログラムメモリ３４に記憶されている動作プログラムや定型データ等を読出し、メインメモリ３３に展開して記憶させた上で当該プログラムを実行することにより、このサイネージ１０を統括して制御する。
【００２９】
上記ＣＰＵ３２は、操作部３５からの操作信号に応じて各種投影動作を実行する。この操作部３５は、サイネージ１０の本体に備える、電源キーを含むいくつかの操作キーのキー操作信号、または上記サイネージボードＳＢの一部に仮想的に投影する上記操作ボタンＢ１〜Ｂ４への操作を検出する、上記赤外線センサアレイからの検出信号を受付け、受付けた操作に応じた信号を上記ＣＰＵ３２へ送出する。
【００３０】
上記ＣＰＵ３２はさらに、上記バスＢを介して音処理部３６、無線ＬＡＮインタフェース（Ｉ／Ｆ）３８と接続される。  
音処理部３６は、ＰＣＭ音源等の音源回路を備え、投影動作時に上記コンテンツメモリ２０から読出されるコンテンツデータ中の第１の音声データ及び第２の音声データをそれぞれアナログ化し、上記指向性スピーカＳＰＬ，ＳＰＲを個別に駆動して放音させる。
【００３１】
無線ＬＡＮインタフェース３８は、無線ＬＡＮアンテナ３９を介して図示しない最寄りの無線ＬＡＮルータと接続し、データの送受を行なうもので、上記図１の販売支援サーバＳＶと交信する。
【００３２】
［第１の動作例］  
次に上記実施形態の第１の動作例について説明する。  
なお本動作例にあっては、コンテンツメモリ２０にその時点で選択されたコンテンツデータとして、例えば推薦商品を紹介する画像データと、当該商品を宣伝するための第１の言語、例えば英語の音声データと、第２の言語、例えば中国語の音声データとが予め記憶されているものとする。
【００３３】
図４は、主として端末側の装置であるサイネージ装置１０で実行される、コンテンツの再生に係る動作を示すフローチャートである。
【００３４】
その処理当初にＣＰＵ３２は、コンテンツメモリ２０に予め記憶されている、選択されたコンテンツデータの第１の言語の音声を、図２に示す装置筐体１０Ａの向かって左側の指向性スピーカＳＰＬ用として、第２の言語の音声を同右側の指向性スピーカＳＰＲ用として設定する（ステップＳ１０１）。
【００３５】
そして、この設定した条件に基づき、ＣＰＵ３２はコンテンツメモリ２０から選択したコンテンツデータを順次読出させて、上記投影画像駆動部２１、マイクロミラー素子２２、光源部２３、ミラー２４、及び投影レンズ部２５からなる投影系によるサイネージボードＳＢへの画像投影と、音処理部３６による放音、ここでは指向性スピーカＳＰＬの第１の言語の音声の出力、及び指向性スピーカＳＰＲの第２の言語の音声の出力とを実行させる（ステップＳ１０２）。
【００３６】
同時にＣＰＵ３２は、上記撮像部ＩＭによるサイネージ装置１０前方の撮影と撮影画像処理部３０による撮影画像中の人物の顔認識とを実行させる（ステップＳ１０３）。この顔認識処理の結果から、ＣＰＵ３２は少なくとも一人分の顔認識を行なうことができたか否かにより、サイネージ装置１０の正面に人がいるか否かを判断する（ステップＳ１０４）。
【００３７】
ここで一人分の顔認識を行なうこともできず、サイネージ装置１０の正面には人がいないと判断した場合（ステップＳ１０４のＮｏ）、ＣＰＵ３２は上記ステップＳ１０２からの処理に戻り、その時点の条件でのコンテンツ再生を継続する。
【００３８】
また上記ステップＳ１０４において、少なくとも一人分の顔認識を行なうことができ、サイネージ装置１０の正面に人がいると判断した場合、次にＣＰＵ３２は撮影した画像中の人物の顔が写り込んでいる位置から、指向性スピーカＳＰＬによる第１の言語の音声の可聴領域にいる人物の数と、指向性スピーカＳＰＲによる第２の言語の音声の可聴領域にいる人物の数とを比較して、その偏りが一定の値以下であるか否かを判断する（ステップＳ１０５）。
【００３９】
上記一定の値としては、例えば左右の各領域に共に少なくとも一人の人物がいるものとして、一方の人数が他方の人数の３倍以内であるか否かを基準とする。また、一方の領域には一人も人物がいない場合は、他方の領域の人数に拘わらず、上記一定の値を超えているものと判断する。
【００４０】
上記ステップＳ１０６において、左右の可聴領域にいる人物の偏りが一定の値以下であると判断した場合（ステップＳ１０５のＹｅｓ）、ＣＰＵ３２は左右の可聴領域にいる各人数に応じて一意に、指向性スピーカＳＰＬでの放音による音圧と、指向性スピーカＳＰＲでの放音による音圧とを個別に設定した上で（ステップＳ１０６）、上記ステップＳ１０２からの処理に戻ってコンテンツの再生を継続する。
【００４１】
また上記ステップＳ１０５において、左右の可聴領域にいる人物の偏りが一定の値より大きいと判断した場合（ステップＳ１０５のＮｏ）、ＣＰＵ３２はその大きく偏っている側で再生している音声での言語を、左右の指向性スピーカＳＰＬ，ＳＰＲ共に用いて出力するものとして設定し直した上で（ステップＳ１０７）、上記ステップＳ１０２からの処理に戻ってコンテンツの再生を継続する。
【００４２】
図５は、サイネージ装置１０の装置筐体１０Ａ前に位置する人物と指向性スピーカＳＰＬ，ＳＰＲの可聴範囲との関係を例示する図である。同図では、上記指向性スピーカＳＰＬの出力する音声の可聴領域Ｌに存在する人物がおらず、一方で指向性スピーカＳＰＲの出力する音声の可聴領域Ｒに存在する人物が２名である状態を示す。
【００４３】
このような状態で、指向性スピーカＳＰＬから英語の音声が、指向性スピーカＳＰＲから中国語の音声がそれぞれ出力されていた場合、ＣＰＵ３２は上記ステップＳ１０５において、左右各領域における人物の数の偏りが大きいものと判断する（ステップＳ１０５のＮｏ）。
【００４４】
したがって、ＣＰＵ３２は続くステップＳ１０７で大きく偏っている側の音声の言語である中国語を上記指向性スピーカＳＰＬ，ＳＰＲの双方で出力するものとして設定をし直した上で、上記ステップＳ１０２からの処理に戻り、コンテンツの再生を継続することになる。
【００４５】
本動作例によれば、指向性スピーカＳＰＬ，ＳＰＲの各可聴領域毎に存在する人物の数の偏り度合いに応じて音声による情報を確実に伝達させることが可能となる。
【００４６】
［第２の動作例］  
次に上記実施形態の第２の動作例について説明する。  
なお本動作例にあっては、コンテンツメモリ２０にデフォルトのコンテンツデータとして、言語と商品情報の選択を上記操作ボタンＢ１〜Ｂ４への操作により促すガイドメッセージが数カ国語で記載された画像データが予め記憶しているものとする。
【００４７】
図６は、主として端末側の装置であるサイネージ装置１０で実行される、コンテンツの再生に係る動作を示すフローチャートである。
【００４８】
その処理当初にＣＰＵ３２は、コンテンツメモリ２０に予め記憶されているデフォルトのコンテンツデータの画像データを読出し、上記投影画像駆動部２１、マイクロミラー素子２２、光源部２３、ミラー２４、及び投影レンズ部２５からなる投影系によるサイネージボードＳＢへの画像投影を実行させる（ステップＳ２０１）。
【００４９】
このボタン操作を促すガイドメッセージを記載した画像を投影した状態で、ＣＰＵ３２は実際に操作ボタンＢ１〜Ｂ４への操作により言語と商品情報の選択が順次なされたか否かを判断する（ステップＳ２０２）。
【００５０】
言語と商品情報の選択にあたっては、まず図７に示すように操作ボタンＢ１〜Ｂ４で「日本語」「Ｅｎｇｌｉｓｈ」「中文」のように言語の選択を促す画像を投影させる。それらのいずれかが操作された時点で、次に図８に示すように商品情報の選択を促す画像を投影させる。
【００５１】
そして、商品情報を選択する操作がなされたと判断すると（ステップＳ２０２のＹｅｓ）、ＣＰＵ３２は選択された言語と商品情報に対応したコンテンツデータを配信するように、ネットワークＮＷを介して上記販売支援サーバＳＶにリクエストする（ステップＳ２０３）。
【００５２】
このリクエストに応答して販売支援サーバＳＶは、選択された言語に応じた画像データと、選択された言語での音声データを含んで、他の言語への切換え等も考慮した各種バリエーションの音声データ一式を取り纏めてコンテンツデータとし、該当するサイネージ装置１０へ送信する。
【００５３】
サイネージ装置１０のＣＰＵ３２は、上記リクエストに応答して販売支援サーバＳＶから送られてくるコンテンツデータを受信し、受信したコンテンツデータをコンテンツメモリ２０に記憶させた上で、その画像データと、指向性スピーカＳＰＬ，ＳＰＲの双方で放音するための選択された言語の音声データを読出し対象として設定する（ステップＳ２０４）。
【００５４】
そして、その設定した条件に基づき、ＣＰＵ３２はコンテンツメモリ２０から順次コンテンツデータを読出させて、上記投影画像駆動部２１、マイクロミラー素子２２、光源部２３、ミラー２４、及び投影レンズ部２５からなる投影系によるサイネージボードＳＢへの画像投影と、音処理部３６による放音（ここでは指向性スピーカＳＰＬ，ＳＰＲの双方による音声データの放音）と、を実行させる（ステップＳ２０５）。
【００５５】
その後にＣＰＵ３２は、その時点で選択しているコンテンツデータの再生が終了したか否かを判断する（ステップＳ２０６）。
【００５６】
コンテンツデータの再生途中であり、まだ終了していないと判断した場合（ステップＳ２０６のＮｏ）、ＣＰＵ３２は上記撮像部ＩＭによるサイネージ装置１０前方の撮影と、撮影画像処理部３０による撮影画像中の人物の顔認識と、を実行させる（ステップＳ２０７）。
【００５７】
この顔認識処理の結果から、ＣＰＵ３２は少なくとも一人分の顔認識を行なうことができたか否かにより、サイネージ装置１０の正面に人がいるか否かを判断する（ステップＳ２０８）。
【００５８】
ここで一人分の顔認識を行なうこともできず、サイネージ装置１０の正面には人がいないと判断した場合（ステップＳ２０８のＮｏ）、ＣＰＵ３２は上記ステップＳ２０５からの処理に戻り、その時点の条件でのコンテンツ再生を継続する。
【００５９】
また上記ステップＳ２０８において、少なくとも一人分の顔認識を行なうことができ、サイネージ装置１０の正面に人がいると判断した場合、次にＣＰＵ３２は、上記撮影画像処理部３０による上記顔認識の結果に対する追加処理として、認識できた顔部分それぞれに対応して、顔全体の輪郭、顔を構成する各パーツである眉、目、鼻、口、耳の形状と配置バランス、肌の色素の量、瞳の色などを認識、抽出することで、画像中の人物の性別、年齢層、人種を判定する（ステップＳ２０９）。
【００６０】
ここで複数の来店者が認識されていた場合には、撮影画像中の来店客の顔位置により、指向性スピーカＳＰＬの音声の可聴領域と指向性スピーカＳＰＲの音声の可聴領域とに区分して上記判定を実施する。
【００６１】
ＣＰＵ３２は、指向性スピーカＳＰＬで放音するための音声データと指向性スピーカＳＰＲで放音するための音声データを、それぞれ多数派となる判定結果に基づいて設定し直した上で（ステップＳ２１０）、上記ステップＳ２０５からの処理に戻って、コンテンツの再生を継続する。
【００６２】
図９は、このとき判定結果に応じて新たに設定する音声データの例を示す。例えば性別が「男性」で年齢層が「２０才代」乃至「６０才代」である場合に、当該商品のスペックに関する音声データを追加設定する。
【００６３】
また性別が「女性」である場合に、当該商品に女性向けのカラーバリエーションモデルが存在することを示す音声データがあれば、その音声データを追加設定する。
【００６４】
年齢層が「５才未満」である場合には、基本となる音声のトーンを高く、且つ読み上げるペースをスローに設定する。
【００６５】
反対に年齢層が「７０才以上」である場合には、音圧を大きくし、且つ読み上げるペースをスローに設定する。
【００６６】
「人種」に関しては、日本国内の店舗では例えば「アジア人」であれば日本語、「白人」「黒人」であれば英語というように、人種毎に最大の多数派となると思われる言語を、指向性スピーカＳＰＬの音声の可聴領域と指向性スピーカＳＰＲの音声の可聴領域とに区分して設定する。
【００６７】
また上記ステップＳ２０６において、その時点で選択しているコンテンツデータの再生が終了したと判断した場合（ステップＳ２０６のＹｅｓ）、ＣＰＵ３２は新たに来店客に所望するコンテンツデータを提供するべく、上記ステップＳ２０１からの処理に戻る。
【００６８】
本動作例によれば、当初に来店客自身が選択した言語と商品情報に基づくコンテンツデータの再生を開始しながらも、サイネージ装置１０の前に位置する来店客の内容に対応して動的に音声コンテンツの設定を可変設定し、より訴求力のあるコンテンツを提示できる。
【００６９】
なお上記実施形態では、サイネージ装置１０の装置筐体１０Ａ前面に指向性スピーカＳＰＬ，ＳＰＲを設けた場合について説明したが、上記指向性スピーカＳＰ１，ＳＰ２の２つに限らず、放音範囲が重複しないように、３つ以上の指向性スピーカを設置しても良い。
【００７０】
また上記実施形態では、撮像部ＩＭで撮影した画像に対する顔認識処理を撮像部ＩＭを構成する撮影画像処理部３０により行なうものとして説明したが、本発明はこれに限らず、撮影した画像データをサイネージ装置１０からネットワークＮＷを経由して販売支援サーバＳＶに送信し、販売支援サーバＳＶ側で各種属性の顔認識処理を行ない、認識結果、あるいは認識結果に基づいたコンテンツデータをサイネージ装置１０にフィードバックするようにしても良い。
【００７１】
この場合、例えば１つの店舗内で複数台のサイネージ装置１０，１０，…を設置しているような場合、特に複数台のサイネージ装置１０，１０，…が並べて配置されるような場合には、販売支援サーバＳＶがシステムを統括するコントローラとして個々のサイネージ装置１０に対する割当てを行ない、意図してそれぞれ異なる商品情報や言語のコンテンツデータを選択して配信し、再生させることも考えられる。
【００７２】
以上詳述した如く本実施形態によれば、設置される周囲の状態を勘案し、音声による情報を確実に伝達させることが可能となる。
【００７３】
また上記実施形態では、サイネージ装置１０の周囲の状態を判定する手段として、上記複数の指向性スピーカの放音範囲に存在する人物を撮影し、その撮影画像に対する顔認識処理を行なうことで、人物の数や性別、表情、年齢層、及び人種属性を判断するものとしたので、装置を利用する人物の側に負担をかけることなく、経時的な変化にも対応して常に最適と思われるコンテンツデータを提供できる。
【００７４】
さらに上記実施形態では、互いに可聴領域が重複しないように設置された複数の指向性スピーカにより、各可聴領域毎に異なる言語での音声データを再生させるようにしたので、指向性を有するスピーカを有効に活用し、多数の言語が混じって聞こえることなく、明瞭な音声で再生させることができる。
【００７５】
なお上記実施形態は、サイネージ装置１０をＤＬＰ（登録商標）（Ｄｉｇｉｔａｌ  Ｌｉｇｈｔ  Ｐｒｏｃｅｓｓｉｎｇ）方式のプロジェクタ技術を用いて構成した場合について説明したが、本実施形態は投影装置や投影方式等を限定するものではなく、例えばカラー液晶パネルを用いたタブレット状のコンテンツ再生装置としても良い。
【００７６】
その他、本発明は上述した実施形態に限定されるものではなく、実施段階ではその要旨を逸脱しない範囲で種々に変形することが可能である。また、上述した実施形態で実行される機能は可能な限り適宜組み合わせて実施しても良い。上述した実施形態には種々の段階が含まれており、開示される複数の構成要件による適宜の組み合せにより種々の発明が抽出され得る。例えば、実施形態に示される全構成要件からいくつかの構成要件が削除されても、効果が得られるのであれば、この構成要件が削除された構成が発明として抽出され得る。
【００７７】
以下に、本願出願の当初の特許請求の範囲に記載された発明を付記する。  
［請求項１］  
画像情報と、該画像情報に対応した複数の音声情報と、を含むコンテンツ情報に基づいた表示を行なう表示部と、  
上記表示部に対して異なる方向に向けて設置された複数のスピーカと、  
上記表示部に対応した所定の範囲内における周囲の状態を取得する状態取得部と、  
上記状態取得部で取得した周囲の状態に応じて、上記複数の音声情報を上記複数のスピーカにより放音させる制御部と、  
を備えることを特徴とするコンテンツ再生装置。  
［請求項２］  
上記コンテンツ情報を取得するコンテンツ取得部を備え、  
上記表示部が表示を行なう画像情報は、上記コンテンツ取得部で得た画像情報であり、  
上記スピーカは、それぞれ放音範囲が重複しないように設置された指向性スピーカである  
ことを特徴とする請求項１記載のコンテンツ再生装置。  
［請求項３］  
上記状態取得部は、  
上記複数の指向性スピーカの放音範囲に存在する人物を撮影する撮影部を備え、  
上記撮影部で得た画像中の人物の顔認識を行なって、当該人物の数、性別、表情、年齢層、及び人種の少なくとも１つの属性を推定する  
ことを特徴とする請求項２記載のコンテンツ再生装置。  
［請求項４］  
上記状態取得部は、上記複数の指向性スピーカの放音範囲毎の人物の数を取得し、  
上記制御部は、上記状態取得部で取得した上記複数の指向性スピーカの放音範囲毎の人物の数と偏りの度合いとに応じて上記複数の指向性スピーカでの放音を制御する  
ことを特徴とする請求項３記載のコンテンツ再生装置。  
［請求項５］  
上記制御部は、上記状態取得部で取得した周囲の状態に応じ、上記コンテンツ取得部から異なる複数の言語の音声情報を得て上記複数の指向性スピーカにより放音させることを特徴とする請求項２乃至４いずれか記載のコンテンツ再生装置。  
［請求項６］  
画像情報と、該画像情報に対応した複数の音声情報と、を含むコンテンツ情報に基づいた表示を行なう表示部と、上記表示部に対して異なる方向に向けて設置された複数のスピーカと、  
を備えた装置でのコンテンツ再生方法であって、  
上記表示部に対応した所定の範囲内における周囲の状態を取得する状態取得工程と、  
上記状態取得工程で取得した周囲の状態に応じて、上記複数の音声情報を上記複数のスピーカにより放音させる制御工程と、  
を有することを特徴とするコンテンツ再生方法。  
［請求項７］  
画像情報と、該画像情報に対応した複数の音声情報と、を含むコンテンツ情報に基づいた表示を行なう表示部と、上記表示部に対して異なる方向に向けて設置された複数のスピーカと、  
を備えた装置が内蔵したコンピュータが実行するプログラムであって、上記コンピュータを、  
上記表示部に対応した所定の範囲内における周囲の状態を取得する状態取得部、及び  
上記状態取得部で取得した周囲の状態に応じて、上記複数の音声情報を上記複数のスピーカにより放音させる制御部、  
として機能させることを特徴とするプログラム。
【符号の説明】
【００７８】
１０…サイネージ装置、
１０Ａ…装置筐体、
２０…コンテンツメモリ、
２１…投影画像駆動部、
２２…マイクロミラー素子、
２３…光源部、
２４…ミラー、
２５…投影レンズ部、
２７…撮影レンズ部、
２８…ＣＭＯＳイメージセンサ、
２９…Ａ／Ｄ変換器、
３０…撮影画像処理部、
３２…ＣＰＵ、
３３…メインメモリ、
３４…プログラムメモリ、
３５…操作部、
３６…音処理部、
３８…無線ＬＡＮインタフェース（Ｉ／Ｆ）、
３９…無線ＬＡＮアンテナ、
Ｂ…バス、
Ｂ１〜Ｂ４…操作ボタン、
ＩＭ…撮像部、
ＮＷ…ネットワーク、
ＳＢ…サイネージボード、
ＳＰＬ，ＳＰＲ…指向性スピーカ（パラメトリック・スピーカ）、
ＳＶ…販売支援サーバ。
【図１】
2017147512.tif 000003
【図２】
2017147512.tif 000004
【図３】
2017147512.tif 000005
【図４】
2017147512.tif 000006
【図５】
2017147512.tif 000007
【図６】
2017147512.tif 000008
【図７】
2017147512.tif 000009
【図８】
2017147512.tif 000010
【図９】
2017147512.tif 000011