(57)【特許請求の範囲】
【請求項１】
所定の範囲内にいる視聴者を撮像した撮像画像データを入力する情報入力手段と、
前記情報入力手段により入力された撮像画像データに基づき視聴者の人数を判定する人数判定手段と、
前記人数判定手段により判定された視聴者の人数が、第１の所定数と当該第１の所定数より小さな第２の所定数との閾値で定まる３つの数値範囲の何れに属するかに応じて、視聴者のグループの判定方法を選択する判定方法選択手段と、
前記判定方法選択手段により選択された前記判定方法に基づき視聴者のグループを判定するグループ判定手段と、
前記グループ判定手段により判定された視聴者のグループに基づき表示するコンテンツを選択するコンテンツ選択手段と、
前記コンテンツ選択手段により選択された前記コンテンツを表示部に表示する表示手段と、
を備え、
前記第１の所定数及び前記第２の所定数には、前記撮像画像データ中に表示される各視聴者が、前記判定方法の各々で判定を行いうる大きさで表示される際の人数に基づいた値が設定される情報表示装置。
【請求項２】
前記視聴者の性別を判定する性別判定手段を更に備え、
前記判定方法選択手段は、前記人数判定手段により判定された視聴者の人数が前記第１の所定数より少なく前記第２の所定数以上の場合に、前記性別判定手段による判定方法を選択し、
前記グループ判定手段は、前記人数判定手段により判定された視聴者の人数と、前記性別判定手段により判定された視聴者の性別とに基づき視聴者のグループの種類を判定する請求項１記載の情報表示装置。
【請求項３】
前記視聴者の年齢層を判定する年齢層判定手段を更に備え、
前記判定方法選択手段は、前記人数判定手段により判定された視聴者の人数が前記第２の所定数より少ない場合に、前記性別判定手段による判定方法と前記年齢層判定手段による判定方法とを選択し、
前記グループ判定手段は、前記人数判定手段により判定された視聴者の人数と、前記性別判定手段により判定された視聴者の性別と、前記年齢層判定手段により判定された視聴者の年齢層とに基づき視聴者のグループの種類を判定する請求項２記載の情報表示装置。
【請求項４】
前記コンテンツ選択手段は、視聴者のグループに応じて複数のコンテンツを選択可能であり、
前記表示手段は、前記コンテンツ選択手段により選択された複数のコンテンツを同時に表示可能である請求項１乃至３の何れかに記載の情報表示装置。
【請求項５】
前記表示手段は、複数の前記コンテンツの内容に応じて各コンテンツの表示位置を変える請求項４記載の情報表示装置。
【請求項６】
前記人数判定手段は、前記情報入力手段により前記視聴者の情報として入力された撮像画像データ中から、人体を構成するパーツが連続した領域を人物のシルエットとして認識し、当該シルエットに基づき視聴者の人数を判定する請求項１乃至５の何れかに記載の情報表示装置。
【請求項７】
コンピュータを、
所定の範囲内にいる視聴者を撮像した撮像画像データを入力する情報入力手段と、
前記情報入力手段により入力された撮像画像データに基づき視聴者の人数を判定する人数判定手段と、
前記人数判定手段により判定された視聴者の人数が、第１の所定数と当該第１の所定数より小さな第２の所定数との閾値で定まる３つの数値範囲の何れに属するかに応じて、視聴者のグループの判定方法を選択する判定方法選択手段と、
前記判定方法選択手段により選択された前記判定方法に基づき視聴者のグループを判定するグループ判定手段と、
前記グループ判定手段により判定された視聴者のグループに基づき表示するコンテンツを選択するコンテンツ選択手段と、
前記コンテンツ選択手段により選択された前記コンテンツを表示部に表示する表示手段と、
して機能させ、
前記第１の所定数及び前記第２の所定数には、前記撮像画像データ中に表示される各視聴者が、前記判定方法の各々で判定を行いうる大きさで表示される際の人数に基づいた値が設定されるプログラム。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明の実施形態は、情報表示装置およびプログラムに関する。
【背景技術】
【０００２】
従来、ショッピングモール等の商業施設や、地下街等においては、デジタルサイネージ端末装置による広告やイベント情報等のコンテンツ表示が行われている。デジタルサイネージ端末装置では、視聴者の性別や年齢等に合わせたコンテンツを表示することが好ましい。
【０００３】
そこで、センサを用いて視聴者が親子連れである等の判断を行い、判断結果に応じてコンテンツを選択するデジタルサイネージ端末がある（特許文献１参照）。
【０００４】
また、音声等に基づいて視聴者の性別比を算定し最適なコンテンツを選択するデジタルサイネージ端末がある（特許文献２参照）。
【発明の概要】
【発明が解決しようとする課題】
【０００５】
ところで、上述したデジタルサイネージ端末装置においては、視聴者毎にコンテンツを選択して表示することが行われているが、視聴者情報の把握は常に同じ方法を用いて行われているため、必ずしも視聴者に最適なコンテンツを表示することができるとは限らない。
【課題を解決するための手段】
【０００６】
本実施形態に係る情報表示装置は、所定の範囲内にいる視聴者を撮像した撮像画像データを入力する情報入力手段と、前記情報入力手段により入力された撮像画像データに基づき視聴者の人数を判定する人数判定手段と、前記人数判定手段により判定された視聴者の人数が、第１の所定数と当該第１の所定数より小さな第２の所定数との閾値で定まる３つの数値範囲の何れに属するかに応じて、視聴者のグループの判定方法を選択する判定方法選択手段と、前記判定方法選択手段により選択された前記判定方法に基づき視聴者のグループを判定するグループ判定手段と、前記グループ判定手段により判定された視聴者のグループに基づき表示するコンテンツを選択するコンテンツ選択手段と、前記コンテンツ選択手段により選択された前記コンテンツを表示部に表示する表示手段と、を備える。また、前記第１の所定数及び前記第２の所定数には、前記撮像画像データ中に表示される各視聴者が、前記判定方法の各々で判定を行いうる大きさで表示される際の人数に基づいた値が設定される。
【図面の簡単な説明】
【０００７】
【図１】図１は、実施形態のデジタルサイネージ端末装置を適用するショッピングモールの概略図である。
【図２】図２は、実施形態のデジタルサイネージ端末装置の外観正面図である。
【図３】図３は、実施形態のデジタルサイネージ端末装置の概要構成ブロック図である。
【図４】図４は、グループとコンテンツとが関連付けられて記憶されている様子を示すデータ構造を示す図である。
【図５】図５は、ＭＰＵの機能ブロック図である。
【図６】図６は、本実施形態に係るデジタルサイネージ端末装置におけるコンテンツの表示手順を示すフローチャートである。
【図７】図７は、デジタルサイネージ端末装置のカメラユニットによる撮像範囲内にいる視聴者を示す図であり、（Ａ）は撮像範囲と視聴者との位置関係を、（Ｂ）は撮像画像データ中の視聴者のシルエットを示している。
【図８】図８は、本実施形態に係るデジタルサイネージ端末装置におけるグループの判定手順の例を示すフローチャートである。
【図９】図９は、ディスプレイユニットに複数のコンテンツが表示された状態を示す図である。
【発明を実施するための形態】
【０００８】
以下、本実施形態に係るデジタルサイネージ端末装置について図面を参照して説明する。なお、本実施形態の情報処理システムは、ショッピングモールで用いられるデジタルサイネージ端末装置として構築されている。
【０００９】
図１は、本実施形態に係るデジタルサイネージ（Ｄｉｇｉｔａｌ  ｓｉｇｎａｇｅ）端末装置１４を適用するショッピングモールの概略図を示す。広告コンテンツ等を表示する複数のデジタルサイネージ端末装置１４は、各種データの記憶を行い、商品の広告情報等をデジタルサイネージ端末装置１４に配信するサーバ１０に、ＬＡＮ１１を介して接続されている。
【００１０】
図２は、デジタルサイネージ端末装置の外観正面図である。デジタルサイネージ端末装置１４は、液晶ディスプレイあるいはプラズマディスプレイであって、タッチパネルとして構成された表示部としてのディスプレイユニット２１と、各種チケット、クーポン等を印刷し、発行するプリンタユニット２２と、会員カード等の記憶媒体からの顧客ＩＤ等の情報の読み取りを行う読取装置２３と、ディスプレイユニット２１、プリンタユニット２２及び読取装置２３を支持する筐体部２４と、を備えている。
【００１１】
筐体部２４には、操作者を撮影して画像認識を行い、後述する操作画面の表示位置の決定等の用途に用いられる撮像画像データを生成するカメラユニット２５と、ＢＧＭや広告音声等の各種音響出力を行うスピーカユニット２６が内蔵されている。なお、画像認識等の処理は、デジタルサイネージ端末装置１４で行うことなく、サーバ１０等で行うようにすることも可能である。
【００１２】
プリンタユニット２２としては、例えば、ロール紙を記録媒体とする感熱記録方式のプリンタ装置が用いられ、必要に応じてロール紙を自動的にカットするカット機構を備えている。
【００１３】
図３は、デジタルサイネージ端末装置の概要構成ブロック図である。デジタルサイネージ端末装置１４は、上述したディスプレイユニット２１、プリンタユニット２２、撮像範囲内にいる視聴者の情報を入力する情報入力手段としてのカメラユニット２５、スピーカユニット２６の他、当該デジタルサイネージ端末装置１４全体を制御するコントローラ３１と、オペレータあるいはユーザが各種操作を行うための操作部３２と、ＬＡＮ１１を介してサーバ１０との間で通信を行うためのネットワーク通信インタフェース（ＩＦ）３３と、コンテンツ等の各種データを記憶する外部記憶装置３５と、を備えている。
【００１４】
図４は、グループとコンテンツとが関連付けられて記憶されている様子を示すデータ構造を示す図である。各コンテンツは、図４のデータテーブルに示すように、視聴者の各グループにそれぞれ関連付けられて外部記憶装置３５に記憶されている。例えば、視聴者のグループが「男児」である場合には、コンテンツとして「男児向けアニメ関連商品」が関連付けられている。また、グループが「２０代前半女性」である場合には「女性向けファッション」が関連付けられている。
【００１５】
図３に戻り、コントローラ３１は、当該コントローラ３１全体を制御するＭＰＵ３６と、ＭＰＵ３６が動作するための制御プログラム等を格納したＲＯＭ３７と、各種データを一時的に記憶するＲＡＭ３８と、を備えている。
【００１６】
また、操作部３２は、各種スイッチ、ボタン等で構成したり、タッチパネルとして液晶ディスプレイ等のディスプレイユニット２１と一体に構成したりすることも可能である。
【００１７】
さらに、外部記憶装置３５として、サーバ１０に設けられている記憶部を用いることも可能である。
【００１８】
図５は、ＭＰＵ３６の機能ブロック図である。ＭＰＵ３６は、カメラユニット２５が得た視聴者の画像を元に視聴者の人数を判定する人数判定部３６２と、人数判定部３６２により判定された視聴者の人数が第１の所定数より少ない場合に視聴者の性別を判定する性別判定部３６３と、人数判定部３６２により判定された視聴者の人数が第２の所定数より少ない場合に視聴者の年齢層を判定する年齢層判定部３６４と、人数判定部３６２により判定された視聴者の人数、性別判定部３６３により判定された視聴者の性別および年齢層判定部３６４により判定された視聴者の年齢層に基づき視聴者のグループの判定方法を選択し、選択した判定方法に基づき視聴者のグループを判定するグループ判定部３６５と、グループ判定部３６５により判定された視聴者のグループに基づき表示するコンテンツを選択し、外部記憶装置３５から呼び出すコンテンツ選択部３６６と、コンテンツ選択部３６６により選択され呼び出されたコンテンツをディスプレイユニット２１に表示させる表示部３６７と、を備えている。
【００１９】
次に、上述した本実施形態に係るデジタルサイネージ端末装置におけるコンテンツの表示手順について説明する。図６は、本実施形態に係るデジタルサイネージ端末装置におけるコンテンツの表示手順を示すフローチャートである。
【００２０】
まず、カメラユニット２５により視聴者の画像が得られると、ＭＰＵ３６の人数判定部３６２が、得られた視聴者の画像に基づいて視聴者の人数判定を行う（ステップＳ１）。
【００２１】
図７は、デジタルサイネージ端末装置のカメラユニットによる撮像範囲内にいる視聴者を示す図であり、（Ａ）は撮像範囲と視聴者との位置関係を、（Ｂ）は撮像画像データ中の視聴者のシルエットを示している。
【００２２】
図７（Ａ）に示すように、カメラユニット２５による撮像範囲Ｆ内に、複数の人物Ａ、Ｂ、Ｃがいる場合、図７（Ｂ）に示すように、撮像画像データ中には、Ａ、Ｂ、Ｃの３名が存在することになる。この場合、カメラユニット２５による撮像画像データはＭＰＵ３６へと送信され、ＭＰＵ３６の人数判定部３６２により、視聴者のシルエットに基づく人数判定が行われる。本実施形態においてはＡ、Ｂ、Ｃの３名分のシルエットが認識されることになる。
【００２３】
人物のシルエットの認識は、例えば、撮像画像データ中に人間の頭部、胴体および手足に相当する部分がある場合には、人数判定部３６２がそれらに連続した領域を人物のシルエットであると認識することで行われる。あるいは、撮像画像データ中に人間の顔面、すなわち目、鼻、口に相当する部分がある場合には、人数判定部３６２がその顔面に連続した領域を人物のシルエットであると認識することで人物のシルエットの認識が行われる。人数判定部３６２は、こうして認識した人物のシルエットに基づき、撮像範囲Ｆ内にいる視聴者の人数を判定する。
【００２４】
図６のフローチャートに戻り、人数判定部３６２により視聴者の人数が把握されると、次に、ＭＰＵ３６のグループ判定部３６５により視聴者のグループの判定が行われる（ステップＳ２）。ここで行われるグループの判定の詳細については後述することにして、ここでは以下のステップについての説明を行う。
【００２５】
ステップＳ２においてグループの判定が行われると、次にＭＰＵ３６のコンテンツ選択部３６６により、図４に示すデータテーブルを用いてグループの判定結果に応じたコンテンツの選択がされ（ステップＳ３）、選択されたコンテンツがＭＰＵ３６の表示部３６７によりディスプレイユニット２１に表示される（ステップＳ４）。
【００２６】
次に、ＭＰＵ３６は、コンテンツの表示の終了後、更に次のコンテンツの表示が継続されるか否かの判断を行う（ステップＳ５）。コンテンツの表示が継続される場合（ステップＳ５：Ｙｅｓ）、ステップＳ１に戻り、次のコンテンツの表示のために、人数判定部３６２により再度視聴者の人数判定が行われる。
【００２７】
一方、コンテンツの表示が継続されない場合（ステップＳ５：Ｎｏ）、一連のコンテンツ表示は終了する。
【００２８】
次に、図６のステップＳ２、すなわちグループ判定部３６５によるグループの判定の例について図８を用いて詳述する。図８は、本実施形態に係るデジタルサイネージ端末装置におけるグループの判定手順の例を示すフローチャートである。
【００２９】
まず、図６のステップＳ１においてＭＰＵ３６の人数判定部３６２により得られた視聴者の人数について、ＭＰＵ３６は、第１の所定値より小さいか否かについて判定する（ステップＳ２１）。なお、第１の所定値は、図７（Ｂ）に示す画像に表示される各視聴者が、後述する性別判定部３６３による各視聴者の性別の判定を行いうる大きさで表示される範囲内で任意の人数を定めることができる。本実施形態においては、第１の所定値は１０人であるとする。
【００３０】
視聴者の人数が１０人より少ない場合（ステップＳ２１：Ｙｅｓ）、ＭＰＵ３６は、当該人数が第２の所定値より小さいか否かについて判定する（ステップＳ２２）。第２の所定値としては、第１の所定値より少ない人数であれば任意の人数を定めることができるが、本実施形態においては５人であるとする。なお、第２の所定値は、図７（Ｂ）に示す画像に表示される各視聴者が、後述する年齢層判定部３６４による各視聴者の年齢層の判定を行いうる大きさで表示される範囲内で任意の人数を定めることができる。本実施形態においては、第２の所定値は５人であるとする。
【００３１】
ここで、本実施形態においては、年齢層判定部３６４により行われる年齢層の判定は、性別判定部３６３による性別の判定よりも大きく詳細な視聴者の画像を要するものとする。また、図７（Ｂ）に示す画像に表れる視聴者の人数が少なくなるほど、各視聴者は大きく詳細に表示される。そのため、第２の所定値は、第１の所定値よりも少ない人数となっていて、各視聴者がより大きく詳細に表示されるようになっている。
【００３２】
図８のフローチャートに戻り、視聴者の人数が５人より少ない場合（ステップＳ２２：Ｙｅｓ）、ＭＰＵ３６の性別判定部３６３は、視聴者の性別判定を行う（ステップＳ２３）。性別判定部３６３による視聴者の性別の判定は、カメラユニット２５による撮像画像データに基づいて行われる。
【００３３】
次に、ＭＰＵ３６の年齢層判定部３６４は、視聴者の年齢層の判定を行う（ステップＳ２４）。年齢層判定部３６４による視聴者の年齢層の判定は、カメラユニット２５による撮像画像データに基づいて行われる。
【００３４】
次に、ＭＰＵ３６のグループ判定部３６５は、人数判定部３６２により得られた視聴者の人数、性別判定部３６３による視聴者の性別の判定結果および年齢層判定部３６４による視聴者の年齢層の判定結果に基づき、視聴者のグループの判定を行う（ステップＳ２５）。
【００３５】
例えば、グループ判定部３６５は、視聴者が１名である場合には、「２０代前半男性」、「３０代後半女性」等と判定する。また、グループ判定部３６５は、視聴者が２名の男女で年齢層が１０代後半から２０代前半である場合には「カップル」、２名の男女で年齢層が２０代後半以上である場合には「夫婦」であると判定する。また、グループ判定部３６５は、２名以上のグループであって、その中に少なくとも１名の幼児や児童と、少なくとも１名の成年が含まれる場合には「家族」であると判定する。また、グループ判定部３６５は、２名以上の同じ年齢層の男性のみまたは女性のみのグループである場合には「友人」と判定する。
【００３６】
一方、ステップＳ２１において視聴者の人数が１０人以上である場合（ステップＳ２１：Ｎｏ）、ステップＳ２５に進む。視聴者が１０人以上である場合には、図７（Ｂ）に現れる画像において、視聴者は小さく不鮮明に表示されるため、性別判定部３６３による性別の判定や年齢層判定部３６４による年齢層の判定を行うことができない。そのため、ステップＳ２５においてグループ判定部３６５は、グループを「不特定多数」と判定する。
【００３７】
また、ステップＳ２２において視聴者の人数が５人以上である場合（ステップＳ２２：Ｎｏ）、ＭＰＵ３６の性別判定部３６３は、視聴者の性別判定を行い（ステップＳ２６）、ステップＳ２５へと進む。視聴者の人数が５人以上１０人未満である場合には、図７（Ｂ）に現れる画面において、視聴者は性別判定部３６３による性別の判定を行いうる程度の大きさと鮮明さで表示されるものの、年齢層判定部３６４による年齢層の判定を行いうる程度の大きさと鮮明さでは表示されない。そのため、視聴者の人数が５人以上１０人未満である場合には、視聴者の性別判定のみが行われ、年齢層の判定は行われない。
【００３８】
そして、グループ判定部３６５は、ステップＳ２６による視聴者の性別の判定結果に応じて「男性主体」、「女性主体」および「不特定多数」の３つのグループ分けを行う（ステップＳ２５）。
【００３９】
上述したように、グループ判定部３６５は、視聴者の人数や性別、年齢層に応じて、視聴者を「２０代前半男性」、「３０代後半女性」、「カップル」、「夫婦」、「家族」、「友人」、「男性主体」、「女性主体」、「不特定多数」等のグループに分類する。そして、コンテンツ選択部３６６は、外部記憶装置３５に記憶されている図４に示すデータテーブルを参照し、各グループに関連付けて記憶されているコンテンツを選択して呼び出す。そして、コンテンツ選択部３６６により呼び出されたコンテンツは、表示部３６７によりディスプレイユニット２１に表示される。すなわち、本実施形態に係るデジタルサイネージ端末によると、視聴者の人数に応じてグループの判定方法を変えてグループの判定を行うことができるため、グループの判定を精度良く行うことができ、グループに応じた適切なコンテンツを表示することができる。
【００４０】
なお、本発明の実施形態は、例として提示したものであり、発明の範囲を限定することは意図していない。この新規な実施形態は、その他の様々な形態で実施されることが可能であり、発明の要旨を逸脱しない範囲で、種々の省略、置き換え、変更を行うことができる。この実施形態やその変形は、発明の範囲や要旨に含まれるとともに、特許請求の範囲に記載された発明とその均等の範囲に含まれる。
【００４１】
例えば、表示部３６７によりディスプレイユニット２１に表示されるコンテンツは１つに限らず、複数のコンテンツが表示されるようにしてもよい。図９は、ディスプレイユニットに複数のコンテンツが表示された状態を示す図である。
【００４２】
図９に示す例では、ディスプレイユニット２１の上側にコンテンツ２１１が、下側にコンテンツ２１２が表示されている。このように複数のコンテンツを表示可能とすることで、例えばグループ判定部３６５により視聴者のグループが「家族」と判定された場合には、表示部３６７はコンテンツ２１１として保護者向けのコンテンツを表示するとともに、子供が見やすい位置である下側のコンテンツ２１２として子供向けのコンテンツを表示してもよい。このように、ディスプレイユニット２１に複数のコンテンツを表示可能とすることで、グループに含まれる各視聴者に対しても個人単位で適切なコンテンツ表示を可能とすることができる。
【００４３】
また、図９に示すように複数のコンテンツが表示される場合には、各コンテンツの表示画面を、視聴者によるタッチパネルのドラッグ等の操作により移動可能としてもよい。各表示画面を移動可能とすることで、１台のデジタルサイネージ端末を用いて複数の視聴者が複数のコンテンツを閲覧する場合でも、各視聴者はそれぞれ見やすい位置に表示画面を移動することができ、コンテンツの閲覧を快適に行うことができる。
【００４４】
また、上述した実施形態においては視聴者の情報を入力する情報入力手段として、撮像範囲内にいる視聴者を撮影するカメラユニット２５が用いられていたが、本発明においてはこれに限らず、ＲＦＩＤリーダを用いてもよい。この場合、視聴者が所持している会員カードや携帯電話等の記憶媒体に、顧客ＩＤとともに顧客の性別や年齢等の情報が記憶されている。そして、ＲＦＩＤリーダが無線通信の通信範囲内にいる顧客の記憶媒体から視聴者の記憶媒体から視聴者の性別や年齢層等の情報を読み出す。こうして読み出された視聴者の情報に基づき、上述した実施形態と同様に、視聴者の人数、性別および年齢層等が判定され、グループ判定部３６５が視聴者のグループを判定する。そして、判定された視聴者のグループに基づき、コンテンツ選択部３６６が表示するコンテンツを選択し、外部記憶装置３５から読み出す。
【００４５】
本実施形態の情報表示装置で実行されるプログラムは、上述した各部（人数判定部３６２、性別判定部３６３、年齢層判定部３６４、グループ判定部３６５、コンテンツ選択部３６６、表示部３６７）を含むモジュール構成となっており、実際のハードウェアとしてはＭＰＵやＣＰＵ（プロセッサ）が上記ＲＯＭからプログラムを読み出して実行することにより上記人数判定部３６２、性別判定部３６３、年齢層判定部３６４、グループ判定部３６５、コンテンツ選択部３６６、表示部３６７が主記憶装置上にロードされ、各部が主記憶装置上に生成されるようになっている。
【符号の説明】
【００４６】
１４  デジタルサイネージ端末装置
２１  ディスプレイユニット
２５  カメラユニット
３１  コントローラ
３６  ＭＰＵ
３７  ＲＯＭ
３８  ＲＡＭ
【先行技術文献】
【特許文献】
【００４７】
【特許文献１】特開２００８−２４９７８４号公報
【特許文献２】特開２０１０−２２４３２９号公報
【図１】
0005797549.tif 000002
【図２】
0005797549.tif 000003
【図３】
0005797549.tif 000004
【図４】
0005797549.tif 000005
【図５】
0005797549.tif 000006
【図６】
0005797549.tif 000007
【図７】
0005797549.tif 000008
【図８】
0005797549.tif 000009
【図９】
0005797549.tif 000010