(57)【要約】【課題】訴求効果の高い広告を表示できる、合成プログラム、記録媒体及び合成装置を提供する。【解決手段】身体認識プログラムによって認識された身体部位の位置情報を基に、カメラで撮像された消費者１３の画像中の身体部位である顔に、広告情報１６であるコーヒー缶の画像が合成されたり、身体認識プログラムによって認識された身体部位の位置情報を基に、カメラで撮像された消費者１３の画像中の身体部位である胴体に、広告情報１６であるチョコレート箱の画像が合成されたりする。【選択図】図２
2009109887.tif 000002
【特許請求の範囲】
【請求項１】
電子計算機にインストールされて、画像を合成する合成プログラムであって、
前記電子計算機に、
撮像された画像のうち撮像対象物の位置情報を認識する認識機能と、
該認識機能によって認識された撮像対象物の位置情報を基に、撮像された画像中の撮像対象物の少なくとも一部に広告情報を合成するよう指示する合成指示信号を発する合成指示機能とを付与する
ことを特徴とする合成プログラム。
【請求項２】
前記電子計算機に、前記合成指示信号に従って合成を行なう合成機能を付与する
ことを特徴とする請求項１に記載の合成プログラム。
【請求項３】
前記電子計算機に、前記合成機能によって合成された合成情報を、通信回線を介して送信する送信機能を付与する
ことを特徴とする請求項２に記載の合成プログラム。
【請求項４】
前記撮像対象物は、人間である
ことを特徴とする請求項１に記載の合成プログラム。
【請求項５】
広告情報が合成される前記撮像対象物の一部は、人間の顔である
ことを特徴とする請求項１に記載の合成プログラム。
【請求項６】
前記広告情報は、音声情報を含む
ことを特徴とする請求項１に記載の合成プログラム。
【請求項７】
電子計算機に、
撮像された画像のうち撮像対象物の位置情報を認識する認識機能と、
該認識機能によって認識された撮像対象物の位置情報を基に、撮像された画像中の撮像対象物の少なくとも一部に広告情報を合成するよう指示する合成指示信号を発する合成指示機能とを付与する、画像を合成する合成プログラムを記録した電子計算機読み取り可能な記録媒体。
【請求項８】
撮像された画像のうち撮像対象物の位置情報を認識する認識手段と、
該認識手段によって認識された撮像対象物の位置情報を基に、撮像された画像中の撮像対象物の少なくとも一部に広告情報を合成する合成手段とを備える
合成装置。
【請求項９】
前記合成手段によって合成された合成情報を記録する合成情報記録手段を備える
請求項８に記載の合成装置。
【請求項１０】
前記認識手段によって認識された撮像対象物の位置情報を経時的に複数の動画フレームとして保存する動画フレーム保存手段と、
該動画フレーム保存手段に保存された複数の動画フレームのうち、第１の動画フレーム内の認識された撮像対象物の少なくとも一部を含む所定領域の中心位置と、第２の動画フレーム内の認識された撮像対象物の少なくとも一部を含む所定領域の中心位置との間の距離を算出して、この距離が所定値以下の場合、これら２つの動画フレーム内の認識された撮像対象物は同一であると判断して前記合成手段へ認識された複数の撮像対象物の位置情報を送る動画フレーム処理手段とを備える
請求項８に記載の合成装置。
【請求項１１】
撮像された画像のうち撮像対象物の位置情報を認識する認識手段と、
広告情報を記録する広告情報記録手段と、
前記認識手段によって認識された撮像対象物の位置情報を基に、撮像された画像中の撮像対象物の少なくとも一部に前記広告情報記録手段に記録された広告情報を合成する合成手段とを備える
合成装置。
【請求項１２】
撮像手段と、
該撮像手段によって撮像された画像のうち撮像対象物の位置情報を認識する認識手段と、
広告情報を記録する広告情報記録手段と、
前記認識手段によって認識された撮像対象物の位置情報を基に、撮像された画像中の撮像対象物の少なくとも一部に前記広告情報記録手段に記録された広告情報を合成する合成手段とを備える
合成装置。
【請求項１３】
撮像された画像のうち撮像対象物の位置情報を認識する認識手段と、
広告情報を記録する広告情報記録手段と、
前記認識手段によって認識された撮像対象物の位置情報を基に、撮像された画像中の撮像対象物の少なくとも一部に前記広告情報記録手段に記録された広告情報を合成する合成手段と、
該合成手段によって合成された合成情報を表示する表示手段とを備える
合成装置。
【請求項１４】
撮像された画像のうち撮像対象物の位置情報を認識する認識手段と、
広告情報を記録する広告情報記録手段と、
前記認識手段によって認識された撮像対象物の位置情報を基に、撮像された画像中の撮像対象物の少なくとも一部に前記広告情報記録手段に記録された広告情報を合成するよう指示する合成指示信号を発する合成指示手段と、
前記合成指示信号に従って合成された合成情報を表示する表示手段とを備える
合成装置。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は合成プログラム、記録媒体及び合成装置に関する。詳しくは、消費者の目を広告に向けやすくする、合成プログラム、記録媒体及び合成装置に係るものである。
【背景技術】
【０００２】
百貨店や駅構内等において各種商品の情報を提供したり、映画館やイベントホール等において番組やイベントの情報を来訪者に提供したりするために、様々な広告方法が採用されている。
例えば、ポスターを使って文字や絵で情報を提供する方法や、大型モニターを使って映像と音を提供することで情報を提供する方法が採用されている。そして、このような商品情報やイベント情報等を、消費者に知ってもらうための広告宣伝方法としては、消費者の注意を惹くような高い訴求効果のあるものが求められている。
【０００３】
このような広告宣伝方法として、例えば特許文献１−３に記載されているものが挙げられる。即ち、特許文献１には、広告シートを挿入した透明な保護シートからなる広告板を装着可能な広告表示板を使用し、これを店舗等の窓ガラスに掲示したり店頭においてスタンドで掲示したりする方法が記載されている。
また、特許文献２には、店内で商品を入れる手提げカゴや商品を運ぶカートに広告板を装着する方法が記載されている。
そして特許文献３には、図７に示すようなヘッドマウントディスプレイ装置が記載されており、このヘッドマウントディスプレイ装置１０１は、操作入力部からの入力により、画像出力部１０５に、アイコン像を視線検出部により検出された視線位置となるように表示させ、提示対象者の目には、窓部１０２から見える現実の視界に、アイコン像が重なって観察され、提示対象者は視線を視界中の所望の箇所にもっていき、操作入力部からの指示で確定し、例えば、現実の目の前にある文章を観察し、その文章中にある領域を指定すると、指定された領域中の文章あるいは単語を、ＣＣＤカメラ部１０３から入力された画像情報から画像処理部において判読し、任意の言語に翻訳し、そのデータを画像出力部に表示する旨記載されている。これにより、架空像としてアイコンのようなイメージ像を、現実の視界と重ね合わせ、視線により、アイコン像を移動させ、視界中の所望の位置を指定することができる。
【０００４】
【特許文献１】特開２００２−８２６２１号公報
【特許文献２】特開平７−２１０１０５号公報
【特許文献３】特開２０００−１５２１２５号公報
【発明の開示】
【発明が解決しようとする課題】
【０００５】
しかしながら、特許文献１の広告宣伝方法は、広告情報を表示した広告シートを入れ替えることにより、提供する情報を容易に変更することができるという利点はあるが、広告シートを挿入するための広告板とその広告板を装着するための広告保持板を必要とするので、広告シートのサイズが限られると共に、設置場所や表示機能の点からは一般の広告板との差が余りなく、訴求効果が不充分である。
【０００６】
また、特許文献２の広告宣伝方法は、広告板が常に消費者の近くにあると同時に他の消費者にも訴えかけるという訴求効果はあるものの、広告板の装着位置が消費者の目線より低い位置にあって、非常に見づらいといった欠点がある。また、カゴやカートは消費者と共に常に動き回るため、注視しにくいという問題があり、また、カゴ内に装着した広告板は、商品が入っていくに連れて見にくくなっていくという問題もある。
【０００７】
また、特許文献３の広告宣伝方法は、ヘッドマウントディスプレイ装置を消費者が装着する必要があるため、消費者に煩わしさがあると共に、用途が限定されてしまうという問題がある。
【０００８】
本発明は、以上の点に鑑みて創案されたものであり、訴求効果の高い広告を表示できる、合成プログラム、記録媒体及び合成装置を提供することを目的とする。
【課題を解決するための手段】
【０００９】
上記の目的を達成するために、本発明の合成プログラムは、電子計算機にインストールされて、画像を合成する合成プログラムであって、前記電子計算機に、撮像された画像のうち撮像対象物の位置情報を認識する認識機能と、該認識機能によって認識された撮像対象物の位置情報を基に、撮像された画像中の撮像対象物の少なくとも一部に広告情報を合成するよう指示する合成指示信号を発する合成指示機能とを付与することを特徴とする。
【００１０】
ここで、認識機能によって認識された撮像対象物の位置情報を基に、撮像された画像中の撮像対象物の少なくとも一部に広告情報を合成するよう指示する合成指示信号を発する合成指示機能によって、撮像対象物の少なくとも一部例えば顔や胴体の画像に商品画像が合成されるので、撮像された消費者は自分を見たいという欲求と、顔や胴体が商品画像になっているという意外性から、商品画像に注目するようになる。
また、合成指示機能によって、電子計算機の外部において合成することも可能となる。
【００１１】
また、本発明の合成プログラムにおいて、電子計算機に、合成指示信号に従って合成を行なう合成機能を付与してもよい。
【００１２】
また、本発明の合成プログラムにおいて、電子計算機に、合成機能によって合成された合成情報を、通信回線を介して送信する送信機能を付与する場合、例えばインターネットを介して携帯電話機へ合成画像を配信することもできる。
【００１３】
また、本発明の合成プログラムにおいて、撮像対象物は、人間である場合、特に広告情報に注目される。
【００１４】
また、本発明の合成プログラムにおいて、広告情報が合成される撮像対象物の一部は、人間の顔である場合、特に広告情報に注目される。
【００１５】
また、本発明の合成プログラムにおいて、広告情報は、音声情報を含む場合、広告情報は、より派手でインパクトのあるものとなり、より高い広告効果を期待できる。
【００１６】
また、上記の目的を達成するために、本発明の記録媒体は、電子計算機に、撮像された画像のうち撮像対象物の位置情報を認識する認識機能と、該認識機能によって認識された撮像対象物の位置情報を基に、撮像された画像中の撮像対象物の少なくとも一部に広告情報を合成するよう指示する合成指示信号を発する合成指示機能とを付与する、画像を合成する合成プログラムを記録した電子計算機読み取り可能なものである。
【００１７】
ここで、認識機能によって認識された撮像対象物の位置情報を基に、撮像された画像中の撮像対象物の少なくとも一部に広告情報を合成するよう指示する合成指示信号を発する合成指示機能によって、撮像対象物の少なくとも一部例えば顔や胴体の画像に商品画像が合成されるので、撮像された消費者は自分を見たいという欲求と、顔や胴体が商品画像になっているという意外性から、商品画像に注目するようになる。
【００１８】
また、上記の目的を達成するために、本発明の合成装置は、撮像された画像のうち撮像対象物の位置情報を認識する認識手段と、該認識手段によって認識された撮像対象物の位置情報を基に、撮像された画像中の撮像対象物の少なくとも一部に広告情報を合成する合成手段とを備える。
【００１９】
ここで、認識手段によって認識された撮像対象物の位置情報を基に、撮像された画像中の撮像対象物の少なくとも一部に広告情報を合成する合成手段によって、撮像対象物の少なくとも一部例えば顔や胴体の画像に商品画像が合成されるので、撮像された消費者は自分を見たいという欲求と、顔や胴体が商品画像になっているという意外性から、商品画像に注目するようになる。
【００２０】
また、本発明の合成装置において、合成手段によって合成された合成情報を記録する合成情報記録手段を備える場合、広告効果を確かめるための解析に用いることができる。
【００２１】
また、本発明の合成装置において、認識手段によって認識された撮像対象物の位置情報を経時的に複数の動画フレームとして保存する動画フレーム保存手段と、動画フレーム保存手段に保存された複数の動画フレームのうち、第１の動画フレーム内の認識された撮像対象物の少なくとも一部を含む所定領域の中心位置と、第２の動画フレーム内の認識された撮像対象物の少なくとも一部を含む所定領域の中心位置との間の距離を算出して、この距離が所定値以下の場合、これら２つの動画フレーム内の認識された撮像対象物は同一であると判断して合成手段へ認識された複数の撮像対象物の位置情報を送る動画フレーム処理手段とを備える場合、撮像対象物の動きに合わせた演出を行なうことができる。
なお、ここでいう「所定値」とは、ほとんど同位置と判断できる程度の距離の上限である。
【００２２】
また、本発明の合成装置は、撮像された画像のうち撮像対象物の位置情報を認識する認識手段と、広告情報を記録する広告情報記録手段と、前記認識手段によって認識された撮像対象物の位置情報を基に、撮像された画像中の撮像対象物の少なくとも一部に前記広告情報記録手段に記録された広告情報を合成する合成手段とを備える。
【００２３】
また、本発明の合成装置は、撮像手段と、該撮像手段によって撮像された画像のうち撮像対象物の位置情報を認識する認識手段と、広告情報を記録する広告情報記録手段と、前記認識手段によって認識された撮像対象物の位置情報を基に、撮像された画像中の撮像対象物の少なくとも一部に前記広告情報記録手段に記録された広告情報を合成する合成手段とを備える。
【００２４】
また、本発明の合成装置は、撮像された画像のうち撮像対象物の位置情報を認識する認識手段と、広告情報を記録する広告情報記録手段と、前記認識手段によって認識された撮像対象物の位置情報を基に、撮像された画像中の撮像対象物の少なくとも一部に前記広告情報記録手段に記録された広告情報を合成する合成手段と、該合成手段によって合成された合成情報を表示する表示手段とを備える。
【００２５】
また、本発明の合成装置は、撮像された画像のうち撮像対象物の位置情報を認識する認識手段と、広告情報を記録する広告情報記録手段と、前記認識手段によって認識された撮像対象物の位置情報を基に、撮像された画像中の撮像対象物の少なくとも一部に前記広告情報記録手段に記録された広告情報を合成するよう指示する合成指示信号を発する合成指示手段と、前記合成指示信号に従って合成された合成情報を表示する表示手段とを備える。
【００２６】
ここで、合成指示信号に従って合成された合成情報を表示する表示手段によって、例えば、装置の外部にある複数のプロジェクタが、装置からの合成指示信号に従って合成することも可能となる。
【発明の効果】
【００２７】
本発明に係る合成プログラムによって、合成プログラムがインストールされた装置は、訴求効果の高い広告を示すことができる。
本発明に係る記録媒体によって、合成プログラムが読み取られた装置は、訴求効果の高い広告を示すことができる。
本発明に係る合成装置は、訴求効果の高い広告を示すことができる。
【発明を実施するための最良の形態】
【００２８】
以下、本発明の実施の形態について図面を参照しながら説明し、本発明の理解に供する。
図１は、本発明を適用した合成プログラムがインストールされた広告表示装置の一例を説明する概略図である。図１において本発明の広告表示装置１は、消費者１３や建物等を撮像するカメラ（撮像手段の一例である。）２と、カメラ２によって撮像された画像を受けると共に広告情報が付加された広告画像を発する電子計算機３と、電子計算機３から送られる広告情報（広告画像）を投影するプロジェクタ１０と、プロジェクタ１０が投影した広告画像を表示する大型スクリーン（表示手段の一例である。）１１と、電子計算機３から送られる広告情報に含まれる音声情報（例えば音楽や効果音）を再生するスピーカー１２とを備える。
また、電子計算機３は、カメラ２によって撮像された画像のうち身体部位（撮像対象物の一部の一例である。）の位置情報を認識する身体認識プログラム（認識手段の一例である。）４と、広告情報を記録する広告情報データベース（広告情報記録手段の一例である。）５と、身体認識プログラム４によって認識された身体部位の位置情報を基に、カメラ２によって撮像された画像中の身体部位例えば顔や胴体に、広告情報データベース５に記録された広告情報を合成する合成プログラム（合成手段の一例である。）６と、合成プログラム６によって合成された合成情報を記録する合成情報データベース（合成情報記録手段の一例である。）７と、身体認識プログラム４によって認識された身体部位の位置情報を経時的に複数の動画フレームとして保存する動画フレーム保存手段８と、動画フレーム保存手段８に保存された複数の動画フレームのうち、第１の動画フレーム内の認識された身体部位の中心位置と、第２の動画フレーム内の認識された身体部位の中心位置との間の距離を算出して、この距離が所定値以下（例えば、大人やお年寄り等といった動きの遅い撮像対象物であれば数ｃｍ以下、子供や動物等といった動きの速い撮像対象物であれば数十ｃｍ以下、動く大人や乗り物等といった更に動きの速い撮像対象物であれば数ｍ〜数十ｍ）の場合、これら２つの動画フレーム内の認識された身体部位は同一であると判断して合成プログラム６へ認識された複数の身体部位の位置情報を送る動画フレーム処理手段９とを備える。また、合成情報は、インターネット（通信回線の一例である。）１５を介して、通信端末例えば携帯電話機１４へ送信される。
【００２９】
ここで、身体認識プログラム、広告情報データベース、合成プログラム及び合成情報データベースが電子計算機に具備されているが、本発明の合成プログラムがインストールされた広告表示装置が、前述のような、認識手段と、合成手段とを備えるのであれば、必ずしも身体認識プログラム、広告情報データベース、合成プログラム、合成情報データベース、動画フレーム保存手段及び動画フレーム処理手段のすべてが一つの電子計算機に具備されていなくてもよく、例えば身体認識プログラムが、電子計算機とは別の装置であるカメラに備え付けられたセンサに具備されていてもよく、また逆に、身体認識プログラムのみが電子計算機に具備され、合成プログラムが、電子計算機とは別のプロダクションスイッチャーに具備されたり、広告情報データベースが、電子計算機とは別のＤＶＤプレイヤー等の広告情報再生装置に具備されたり、また、合成指示信号に従って、複数のプロジェクタから投影される画像を重ねることで合成を行なってもよい。
また、合成の方法としては、デジタル合成や光学合成等も挙げられる。
また、身体認識プログラム、広告情報データベース、合成プログラム、合成情報データベース、動画フレーム保存手段及び動画フレーム処理手段がそれぞれ個別の電子計算機等の機材に具備されている場合、各情報は、ネットワークを通じて送られる。
【００３０】
また、センサはカメラから分離していてもよく、また、センサは複数設置されていてもよい。また、センサとして、赤外線センサ、超音波センサ、感圧センサ、加速度センサ、エックス線センサ、温度センサ、光学センサ等を用いてもよい。
また、センサによる身体部位の位置情報の認識を、複数台のセンサで行なう場合、例えば壁一面に複数台のセンサを配置し、センサの検知位置と撮像するカメラの画像中の位置情報との校正をとっておくことで、身体部位に反応したセンサから撮像された画像中のどの位置に身体部位が存在するのか判断する。
【００３１】
また、本発明の合成プログラムがインストールされた広告表示装置が、前述のような、認識手段と、合成手段とを備えるのであれば、必ずしもカメラ、スピーカー、広告情報データベース、大型スクリーン、合成情報データベース、動画フレーム保存手段及び動画フレーム処理手段を備えていなくてもよく、また、プロジェクタと大型スクリーンによって画像を表示しているが、必ずしもプロジェクタと大型スクリーンを用いなくてもよく、液晶表示装置、プラズマ表示装置、有機エレクトロルミネッセンス表示装置等を用いてもよく、また、プロジェクタから大型スクリーン以外へ投影してもよく、また、印刷表示であってもよい。
【００３２】
また、本発明の合成プログラムがインストールされた広告表示装置が、前述のような、認識手段と、合成手段とを備えるのであれば、例えば、電子計算機に認識手段が組み込まれて認識処理を行ない、デジタル特殊効果装置で画像処理を行ない、プロダクションスイッチャーで合成処理を行なうことも可能である。
また、認識手段としては、ＦＰＧＡ（書込みゲートアレー）やＤＳＰ（デジタル信号処理装置）等の電子回路を用いてもよい。
【００３３】
また、合成情報記録手段のその他の例としては、メモリ、磁気テープ、ディスクに類するデジタル記憶媒体が挙げられる。
また、広告情報には、文字、音声、イラスト、写真及び映像が含まれる。
【００３４】
また、本発明の合成プログラムがインストールされた広告表示装置が、前述のような、認識手段と、合成手段とを備えるのであれば、認識手段によって認識処理された後のデータや、合成処理前の画像を、インターネット等を介して配信することができるようにしてもよい。
また、図１には、カメラ、プロジェクタ、大型スクリーンはそれぞれ１台しか記載されていないが、本発明の合成プログラムがインストールされた広告表示装置が、前述のような、認識手段と、合成手段とを備えるのであれば、カメラ、プロジェクタ、大型スクリーンはそれぞれ複数台設置されていてもよく、また、複数の異なる場所にカメラ、プロジェクタ及び大型スクリーンの一式がそれぞれ設置され、遠隔地にある身体認識プログラム等を具備した電子計算機とネットワークを介してデータをやり取りしてもよい。
【００３５】
図２は、大型スクリーンに表示された合成画像の例を示す概略図である。図２（ａ）は、カメラ２で撮像された消費者１３の画像中の身体部位である顔に、広告情報１６であるコーヒー缶の画像が合成されて大型スクリーン１１に表示された例を示しており、図２（ｂ）は、カメラ２で撮像された消費者１３の画像中の身体部位である胴体に、広告情報１６であるチョコレート箱の画像が合成されて大型スクリーンに表示された例を示している。
ここで、合成画像が表示されるのであれば、合成される身体部位が、顔から胴体、胴体から手、手から顔というように、所定の間隔で変化してもよいし、また、撮像された撮像対象物の全体に合成されてもよい。また、注目度が高いことから、撮像対象物の一部である人の顔に広告情報が合成される方が好ましい。
【００３６】
図３は、本発明の合成プログラムがインストールされた広告表示装置のデータフローの第１の例を説明する図である。図３に示すように、カメラ２で撮像された画像は、電子計算機３内の身体認識プログラム４と合成プログラム６へ転送される。
次に、身体認識プログラム４が、撮像された画像を基に身体部位の位置情報を認識し、その位置情報が合成プログラム６に転送される。
そして、合成プログラム６は、カメラ２で撮像された画像と、電子計算機３内の広告情報データベース５から転送される広告情報を、身体認識プログラム４から転送された身体部位の位置情報を基に合成し、合成された画像をプロジェクタ１０に送り、プロジェクタ１０は大型スクリーン１１に合成画像を投影して合成画像を表示する。
また、カメラ２からの映像信号は、ネットワークを通じて身体認識プログラム４と合成プログラム６へ送られることも可能である。
ここで、合成プログラム６が、合成された画像をプロジェクタ１０に送っているが、ネットワークを通じて合成画像を他の装置に送信することも可能である。
【００３７】
また、図３に示す例では、身体認識プログラム４、広告情報データベース５及び合成プログラム６が電子計算機３内に備わっており、電子計算機３内で情報のやり取りが行なわれているが、例えば、合成プログラム６を電子計算機３とは別の第２の電子計算機にインストールして、カメラ２からの映像信号、身体認識プログラム４からの身体部位の位置情報及び広告情報データベース５からの広告情報を、ネットワークを通じて第２の電子計算機内の合成プログラム６へ送り、第２の電子計算機において合成を行なうことも可能である。
【００３８】
また、身体認識プログラム４は、画像に含まれる身体部位の位置情報を検出する機能を備えるが、この機能は、例えばｈｔｔｐ：／／ｓｏｕｒｃｅｆｏｒｇｅ．ｎｅｔ／ｐｒｏｊｅｃｔｓ／ｏｐｅｎｃｖｌｉｂｒａｒｙ／に公開されているインテル社のＯｐｅｎＣＶ等の公開プログラムを用いて実現できる。
また、身体認識プログラム４は、事前に学習した身体部位についての情報を基に、撮像された画像から身体部位についての位置、大きさ、形、色等の情報を抽出する。このとき、色や形の情報から、人物の身長、人物の肌の色、人物の衣服の色等を抽出することも可能である。また、抽出された情報から、性別、年齢、人種等の個人の社会的情報も抽出することも可能である。そして、このように抽出した情報を参考にして、抽出された人物が興味を持ちそうな商品情報を広告情報として、画像中の身体部位に合成する。
【００３９】
また、身体部位についての位置情報を逐次追跡することにより、身体の動きについての情報を抽出することも可能である。例えば、手の動きを逐次追跡する場合、往復運動を検出することで、「窓拭き」や「バイバイ」といった動きを検出できる。具体的には、往復運動の検出は、手の位置を数秒分記憶しておき、現在検出されている手の位置Ａが数秒の間に過去に何度も検出されているかどうか、という作業で行なわれる。
例えば、洗剤の広告において身体部位の位置情報を逐次追跡する場合、最初は汚れた広告を表示しておき、「窓拭き」動作を長く行なうことで、表示された広告の汚れが取れていく、といった演出も可能である。
【００４０】
また、身体部位についての位置情報の追跡は、先ず、（１）認識手段によって認識された身体部位の位置情報を経時的に数秒分の複数の動画フレームとして保存し、（２）保存された複数の動画フレームのうち、古い（撮像時刻が先の）動画フレームから探索して、古い動画フレーム内の認識された身体部位の中心位置と、新しい（撮像時刻が後の）動画フレーム内の認識された身体部位の中心位置との間の距離を算出して、この距離が所定値以下（例えば、大人やお年寄り等といった動きの遅い撮像対象物であれば数ｃｍ以下、子供や動物等といった動きの速い撮像対象物であれば数十ｃｍ以下、動く大人や乗り物等といった更に動きの速い撮像対象物であれば数ｍ〜数十ｍ）の場合、これら２つの動画フレーム内の認識された身体部位は同一であると判断し、最新の身体部位の位置情報から古い身体部位の位置情報までの複数の身体部位の位置情報を、合成手段へ通知することによって行なわれる。また、中心位置の距離が大きい場合は、フレーム欠落の可能性もあるので、更に新しい動画フレームに対して同じ処理を行なう。
これにより、合成手段が受取る身体部位の位置情報は、身体の動きに連動したものとなり、身体の動きに伴って広告情報を身体部位に重ね続ける。
【００４１】
図４は、本発明の合成プログラムがインストールされた広告表示装置のデータフローの第２の例を説明する図である。図４に示すように、カメラ２で撮像された画像は、電子計算機３内の合成プログラム６に転送され、また、センサ（認識手段の一例である。）１７で認識された身体部位の位置情報も、電子計算機３内の合成プログラム６に転送される。
そして、合成プログラム６は、カメラ２で撮像された画像と、電子計算機３内の広告情報データベース５から転送される広告情報を、センサ１７から転送された身体部位の位置情報を基に合成し、合成された画像をプロジェクタ１０に送り、プロジェクタ１０は大型スクリーン１１に合成画像を投影して合成画像を表示する。
【００４２】
ここで、センサ１７が、直接、身体部位の位置情報を認識できない場合、図示していないセンサ情報処理プログラムを経由して、身体部位の位置情報を転送することも可能である。センサ情報処理プログラムとは、センサを一つだけ用いる場合、センサが反応しているかどうかを定期的に確認し、センサが反応していれば、合成プログラムに通知するという処理を行ない、格子状に並んだセンサといったセンサを複数用いる場合、全センサが反応しているかどうかを定期的に確認し、反応しているセンサをグルーピングして、反応しているセンサグループの大きさや位置を合成プログラムに通知するという処理を行なうプログラムである。
【００４３】
図５は、本発明の合成プログラムがインストールされた広告表示装置のデータフローの第３の例を説明する図である。図５に示すように、カメラ２で撮像された画像は、電子計算機３内の身体認識プログラム４に転送されると共に、プロダクションスイッチャー（合成手段の一例である。）１９にも転送される。
次に、身体認識プログラム４が、撮像された画像を基に身体部位の位置情報を認識し、その位置情報がプロダクションスイッチャー１９に転送される。
また、広告情報は、広告情報が記録されていると共に広告情報を再生する広告情報再生装置（広告情報記録手段の一例である。）１８からプロダクションスイッチャー１９に転送される。
そして、プロダクションスイッチャー１９は、カメラ２で撮像された画像と、広告情報再生装置１８から転送された広告情報を、身体認識プログラム４から転送された身体部位の位置情報を基に合成し、合成された画像をプロジェクタ１０に送り、プロジェクタ１０は大型スクリーン１１に合成画像を投影して合成画像を表示する。
【００４４】
図６は、本発明の合成プログラムがインストールされた広告表示装置のデータフローの第４の例を説明する図である。図６に示すように、カメラ２で撮像された画像は、電子計算機３内の身体認識プログラム４に転送されると共に、広告情報再生装置１８に転送される。
次に、身体認識プログラム４が、撮像された画像を基に身体部位の位置情報を認識し、その位置情報が広告情報再生装置１８に転送され、また、広告情報再生装置１８からは、カメラ２で撮像された画像と広告情報が第２のプロジェクタ１０Ｂ及び身体認識プログラム４に転送される。
そして、合成指示信号に従って、第１のプロジェクタ１０Ａと第２のプロジェクタ１０Ｂは、カメラ２で撮像された画像と広告情報を、身体認識プログラム４から転送された身体部位の位置情報を基に、大型スクリーン１１上において合成して表示する。
ここで、カメラで撮像された画像は、必ずしも広告情報再生装置へ転送されなくてもよく、また、位置情報は第１のプロジェクタへ転送されてもよい。
【００４５】
このように、本発明の合成プログラムがインストールされた広告表示装置は、認識手段によって認識された撮像対象物の位置情報を基に、撮像された画像中の撮像対象物の少なくとも一部に広告情報を合成するので、被撮像者の身体部位例えば顔や胴体の画像に商品画像が合成されるので、撮像された消費者は自分を見たいという欲求と、顔や胴体が商品画像になっているという意外性から、商品画像に注目するようになり、訴求効果を高めることができる。
【００４６】
また、認識手段はセンサであるため、照明が暗くてカメラでは認識率が下がるような場合でも認識率を高めることができる。
【００４７】
また、合成情報が通信回線を介して送信可能であるため、例えばインターネットを介して携帯電話機へ合成画像を配信するというサービスをビジネス展開することもできる。
【００４８】
また、動画フレーム保存手段と動画フレーム処理手段によって、身体部位についての位置情報を逐次追跡するので、最初は汚れた広告を表示しておき、手を往復運動させる「窓拭き」動作を長く行なうことで、表示された広告の汚れが取れていく、といった演出も可能である。
【００４９】
また、例えば、通勤や通学等で多くの人が通る場所例えば駅構内の通路、エスカレーター、エレベーター、駅のホームまたは屋外の信号待ち場所において、通行人例えばサラリーマンや学生をカメラで撮影し、予め用意した複数の広告主の広告情報を、朝、昼、夜といった時間帯に分けて例えば朝はヨーグルトや栄養ドリンクに関する広告情報を、昼はランチメニューや弁当に関する広告情報を、そして夜はビール、ラーメン、居酒屋またはファミリーレストランに関する広告情報を、通行人の特徴に合わせて通行人の顔に合成し、合成画像を壁に設置した液晶ディスプレイやプロジェクタによってショーウィンドウの中に映し出すことができる。
【図面の簡単な説明】
【００５０】
【図１】本発明を適用した合成プログラムがインストールされた広告表示装置の一例を説明する概略図である。
【図２】大型スクリーンに表示された合成画像の例を示す概略図である。
【図３】本発明の合成プログラムがインストールされた広告表示装置のデータフローの第１の例を説明する図である。
【図４】本発明の合成プログラムがインストールされた広告表示装置のデータフローの第２の例を説明する図である。
【図５】本発明の合成プログラムがインストールされた広告表示装置のデータフローの第３の例を説明する図である。
【図６】本発明の合成プログラムがインストールされた広告表示装置のデータフローの第４の例を説明する図である。
【図７】ヘッドマウントディスプレイ装置の外観と内部構造を説明する概略図である。
【符号の説明】
【００５１】
１    広告表示装置
２    カメラ
３    電子計算機
４    身体認識プログラム
５    広告情報データベース
６    合成プログラム
７    合成情報データベース
８    動画フレーム保存手段
９    動画フレーム処理手段
１０    プロジェクタ
１０Ａ  第１のプロジェクタ
１０Ｂ  第２のプロジェクタ
１１    大型スクリーン
１２    スピーカー
１３    消費者
１４    携帯電話機
１５    インターネット
１６    広告情報
１７    センサ
１８    広告情報再生装置
１９    プロダクションスイッチャー
【図１】
2009109887.tif 000003
【図２】
2009109887.tif 000004
【図３】
2009109887.tif 000005
【図４】
2009109887.tif 000006
【図５】
2009109887.tif 000007
【図６】
2009109887.tif 000008
【図７】
2009109887.tif 000009