(57)【特許請求の範囲】
【請求項１】
前方の対象物体を撮影する撮像手段と、
前記撮影された画像をフレーム画像として記憶するフレームメモリと、
前記記憶されたフレーム画像を解析し撮影した対象物体の位置を検出し記憶しておく位置検出手段と、
前記対象物体が時間経過に伴って変化する位置を前記記憶されている対象物体の位置からその変化を解析する動き検出手段と、
あらかじめ複数の表示用画像が記憶されている表示用画像メモリと、
前記表示用画像メモリに記憶されている特定の２枚の画像から前記解析された対象物体の動きに応じて合成画像を作成する合成画像作成手段と、
前記作成された合成画像を表示する表示手段と、を備え、
前記動き検出手段は、前記位置検出手段に記憶されている対象物体の位置情報を読み出し、対象物体が撮像範囲内に入り、フレーム画像の中心線付近における特定範囲の位置で、一定時間静止したときに、その位置を初期位置として前記位置検出手段に記憶させることを特徴とする画像表示装置。
【請求項２】
前方の対象物体を撮影する撮像手段と、
前記撮影された画像をフレーム画像として記憶するフレームメモリと、
前記記憶されたフレーム画像を解析し撮影した対象物体の位置を検出し記憶しておく位置検出手段と、
前記対象物体が時間経過に伴って変化する位置を前記記憶されている対象物体の位置からその変化を解析する動き検出手段と、
あらかじめ複数の表示用画像が記憶されている表示用画像メモリと、
前記表示用画像メモリに記憶されている特定の２枚の画像から前記解析された対象物体の動きに応じて合成画像を作成する合成画像作成手段と、
前記作成された合成画像を表示する表示手段と、を備え、
前記合成画像作成手段は、前記位置検出手段によって対象物体の初期位置が規定されている場合、前記位置検出手段に記憶されている初期位置と現在位置とから対象物体の移動量を算出するとともに、該対象物体が前記初期位置より左右いずれの位置に移動したかを判断し、前記表示用画像メモリにあらかじめ記憶されている初期位置及び移動方向の最大移動量の位置での表示用画像に関して、初期位置での画像の画素値と移動方向の最大移動量の位置での画像の画素値を現在の座標に基づいて規定し、現在の座標での合成画像の画素値が、初期値での画像の画素値と最大移動量の位置での画像の画素値との合成値として表現され、移動量が大きくなるにつれ、初期値での画像の画素値の寄与分が小さくなり、最大移動量の位置での画像の画素値の寄与分が大きくなるように、それぞれ移動量に対して重み付けを行うことで合成画像の画素値を算出し、合成画像を作成することを特徴とする画像表示装置。
【請求項３】
前方の対象物体を撮影する撮像手段と、
前記撮影された画像をフレーム画像として記憶するフレームメモリと、
前記記憶されたフレーム画像を解析し撮影した対象物体の位置を検出し記憶しておく位置検出手段と、
前記対象物体が時間経過に伴って変化する位置を前記記憶されている対象物体の位置からその変化を解析する動き検出手段と、
あらかじめ複数の表示用画像が記憶されている表示用画像メモリと、
前記表示用画像メモリに記憶されている特定の２枚の画像から前記解析された対象物体の動きに応じて合成画像を作成する合成画像作成手段と、
前記作成された合成画像を表示する表示手段と、を備え、
前記合成画像作成手段は、前記位置検出手段によって対象物体の初期位置が規定されず、あらかじめ定められた複数の参照位置の間に対象物体の重心があると判定された場合、その隣り合う任意の参照位置から前記対象物体に対する参照基準位置を規定し、前記表示用画像メモリにあらかじめ記憶されている前記参照位置の各々に対応した表示用画像から、前記参照基準位置での画像の画素値と隣り合う参照位置での画像の画素値を重心の座標に基づいて規定し、現在の重心の座標の合成画像の画素値が、参照基準位置での画像の画素値と隣り合う参照位置での画像の画素値との合成値として表現され、移動量が大きくなるにつれ、参照基準位置での画像の画素値の寄与分が小さくなり、隣り合う参照位置での画像の画素値の寄与分が大きくなるように、それぞれ移動量に対して重み付けを行うことで合成画像の画素値を算出し、合成画像を作成することを特徴とする画像表示装置。
【請求項４】
前記位置検出手段は、対象物体が映っていない背景のみの画像と前記フレームメモリ内に記憶されているフレーム画像とを比較し、対象物体が存在しているか否かを判断し、対象物体が存在していない場合には、前記表示手段に何も表示させず、対象物体が存在している場合には、その対象物体の領域のみを抽出し、記憶することを特徴とする請求項１ないし３のいずれかに記載の画像表示装置。
【請求項５】
対象物体の位置を検出する位置検出手段と、
参照位置に対応した画像を複数記憶する表示用画像メモリと、
前記参照位置と対象物体の現在位置との差分を対象物体の移動量として検出する動き検出手段と、
前記表示用画像メモリに記憶した複数の画像に対して前記移動量が小さいほど画素値の寄与分が大きくなるように重み付けを行って、前記複数の画像から合成画像を作成する合成画像作成手段と、
前記作成された合成画像を表示する表示手段と、を備えたことを特徴とする画像表示装置。
【請求項６】
前記合成画像作成手段は、各画像の寄与分の合計が１であるように寄与分を設定して各座標における画素値を一次結合することを特徴とする請求項５に記載の画像表示装置。
【請求項７】
前記合成画像表示手段は、前記参照位置に隣接する２枚の画像から合成画像を作成することを特徴とする請求項５または６に記載の画像表示装置。
【請求項８】
前記位置検出手段は、対象物体が特定の位置で一定時間以上静止したときに、当該位置を対象物体の初期位置として記憶し、
前記動き検出手段は、初期位置と現在位置との差分を対象物体の移動量として検出することを特徴とする請求項５ないし７のいずれかに記載の画像表示装置。
【請求項９】
対象物体を撮像する撮像手段をさらに有し、
前記位置検出手段は、前記撮像手段の検出範囲の中心線付近における特定範囲の位置で、一定時間以上静止したときに、前記表示手段によって画像の表示を開始することを特徴とする請求項８に記載の画像表示装置。
【発明の詳細な説明】
【０００１】
【発明の属する技術分野】
本発明は、複数の画像を切替えて表示する広告宣伝やインテリアを用途とする画像表示装置に関するもので、特に対象物体の動きに応じた画像を表示することを可能とした画像表示装置に関するものである。
【０００２】
【従来の技術】
従来より、広告宣伝など用途用に、種々の画像や文字を一定間隔で切替えて表示する表示装置が使用されている。このような表示装置は、一定時間が経過すると表示内容が切り替わってしまうため、内容によってはよく確認できないという問題が生じる。このような問題を回避するための技術として特開平２−７４９８８号公報（発明の名称が「表示装置」）や、実公平７−３６３８８号公報（発明の名称が「画像表示装置」）が開示されている。これらに記載されている技術は、人間が表示装置の前に立ったときに、表示の切替えを行わずに、内容をよく確認できるようにしようと試みたものである。
【０００３】
【発明が解決しようとする課題】
しかしながら、上記記載の技術においてもなお以下のような課題を有している。
【０００４】
例えば、表示情報が一画面に収まらない場合には、やはり画像を切替えて表示する必要があるため、これらの手法を用いることはできない。
【０００５】
また、特に近年の広告宣伝などの用途用の表示装置は、一連の静止画像を繰り返し表示するか、ビデオ映像を繰り返し表示するものが一般的である。この種の表示装置の問題として、通行人が表示装置の前を通り過ぎたときには、一連の静止画、もしくは動画像の一部分しか見ることができず、内容を完全に把握するためには、立ち止まって最初の部分が表示されるまで待って、最初から見直さなければならないといったわずらわしさがある。そのため、表示内容が通行人にとってよほど魅力的な物でない限り、十分な宣伝効果が得られない。
【０００６】
一方、インテリアの用途用としての表示装置は、眺める方向によって、複数の画像が除々に切り替わって見えたり、３次元形状の表示物体を別の視点から観察できたり、表示物体に動きが生じているように見えるホログラフィック映像が知られている。しかし、ホログラフィック映像は、あらかじめ用意された複数の画像を特殊な表示装置や印刷手法によって合成表示したものである。そのため、複数の画像をあらかじめ用意したり、特殊な装置や手法を必要とする問題を有している。
【０００７】
本発明は、上記問題点を解決するためになされたものであって、その目的とするところは、通行人の位置を検出することによって、位置に応じた表示内容を表示する画像表示装置を提供することである。
【０００８】
この本発明の画像表示装置を実現することで、通行人が表示内容を見るという行為により積極的に係われるようにすることによって、従来の画面に表示されているものを一方的に受容するだけのものよりも表示内容を把握し易くなり、見る行為自体に楽しみを感じることができるため、宣伝効果としても非常に大きいものが期待できる。
【０００９】
また、通行人の動きを検出することによって、通行人が表示内容をよく見ずに表示装置の前から立ち去ろうとする動きを示したときには、音声によって呼び止めることで、不意に人間以外のものに呼び止められた驚きと、自身の動きによって表示内容が変化することの驚きの相乗効果によって、より通行人を引き付けることができる。
【００１０】
また、ビデオ映像を繰り返し表示する宣伝手法をとる場合においても、人物の動きを検出することによって、通行人が表示装置の前方に立った時点から再生を開始することによって、常に冒頭部分からビデオ映像を見せることができ、通行人がビデオ映像の再生途中で立ち去ろうとした場合には、音声によって呼び止めることにより、最後まで見せることが期待できる。
【００１１】
また、本発明の画像表示装置では、観察者の頭の位置によって２枚の画像を合成する割合を変化させることにより、一般的なコンピュータ用のＣＲＴや液晶ディスプレイ上で、ホログラフィック映像と同様に、観察者の眺める方向に応じて２枚の画像が除々に変化する感覚を与えることができ、さらに、この合成画像は２枚の静止画像から自動的に作成されるため、各視点に応じた合成画像をあらかじめ用意しておく必要がない。
【００１２】
【課題を解決するための手段】
本発明は、上記目的を達成するためのものであって、以下のような構成によって実現される。
【００１３】
本発明の画像表示装置は、前方の対象物体を撮影する撮像手段と、前記撮影された画像をフレーム画像として記憶するフレームメモリと、前記記憶されたフレーム画像を解析し撮影した対象物体の位置を検出し記憶しておく位置検出手段と、  前記対象物体が時間経過に伴って変化する位置を前記記憶されている対象物体の位置からその変化を解析する動き検出手段と、あらかじめ複数の表示用画像が記憶されている表示用画像メモリと、前記表示用画像メモリに記憶されている特定の２枚の画像から前記解析された対象物体の動きに応じて合成画像を作成する合成画像作成手段と、前記作成された合成画像を表示する表示手段と、を備えたことを特徴とするものである。
【００１４】
さらに、本発明の画像表示装置における前記位置検出手段は、対象物体が映っていない背景のみの画像と前記フレームメモリ内に記憶されているフレーム画像とを比較し、対象物体が存在しているか否かを判断し、対象物体が存在していない場合には、前記表示手段に何も表示させず、対象物体が存在している場合には、その対象物体の領域のみを抽出し、記憶することを特徴とするものである。
【００１５】
さらに、本発明の画像表示装置における前記動き検出手段は、前記位置検出手段に記憶されている対象物体の位置情報を読み出し、対象物体が撮像範囲内に入り、フレーム画像の中心線付近における特定範囲の位置で、一定時間静止したときに、その位置を初期位置として前記位置検出手段に記憶させることを特徴とするものである。
【００１６】
さらに、本発明の画像表示装置における前記合成画像作成手段は、前記位置検出手段によって対象物体の初期位置が規定されている場合、前記位置検出手段に記憶されている初期位置と現在位置とから対象物体の移動量を算出するとともに、該対象物体が前記初期位置より左右いずれの位置に移動したかを判断し、前記表示用画像メモリにあらかじめ記憶されている初期位置及び移動方向の最大移動量の位置での表示用画像に関して、初期位置での画像の画素値と移動方向の最大移動量の位置での画像の画素値を現在の座標に基づいて規定し、初期位置での画像に関しては濃くなる方向に、最大移動量の位置での画像に関しては薄くなる方向に、それぞれ移動量に対して重み付けを行うことで合成画像の画素値を算出し、合成画像を作成することを特徴とするものである。
【００１７】
さらに、本発明の画像表示装置における前記合成画像作成手段は、前記位置検出手段によって対象物体の初期位置が規定されず、あらかじめ定められた複数の参照位置の間に対象物体の重心があると判定された場合、その隣り合う任意の参照位置から前記対象物体に対する参照基準位置を規定し、前記表示用画像メモリにあらかじめ記憶されている前記参照位置の各々に対応した表示用画像から、前記参照基準位置での画像の画素値と隣り合う参照位置での画像の画素値を重心の座標に基づいて規定し、参照基準位置での画像に関しては濃くなる方向に、隣り合う参照位置での画像に関しては薄くなる方向に、それぞれ移動量に対して重み付けを行うことで合成画像の画素値を算出し、合成画像を作成することを特徴とするものである。
【００１８】
本発明の画像表示装置は、あらかじめ複数の音声用のデータを記憶した音声メモリと、前記音声用のデータを制御し音声に変換する音声制御手段と、前記変換された音を出力する音出力手段と、をさらに備えたことを特徴とするものである。
【００１９】
さらに、本発明の画像表示装置における前記音声制御手段は、前記動き検出手段によって対象物体が撮像範囲内から外れると判断された場合、前記音声メモリより特定の音声用データを読み出し、音声に変換し、その音声を前記音出力手段から出力させることを特徴とするものである。
【００２０】
さらに、本発明の画像表示装置における前記音声制御手段は、前記動き検出手段によって対象物体が静止したことが検出された際には前記表示用画像メモリに記憶されている特定の表示用画像を前記表示手段で再生表示を開始しながら、前記音声メモリより挨拶用のデータを、前記特定の表示用画像を前記表示手段で再生表示中に、前記動き検出手段によって対象物体が撮像範囲内から外れることが検出された際には前記音声メモリより呼び止め用のデータを、特定の表示用画像を前記表示手段で再生表示終了後に、前記動き検出手段によって対象物体が撮像範囲内から外れることが検出された際には前記音声メモリより謝礼用のデータを、それぞれ読み出すことを特徴とするものである。
【００２１】
さらに、本発明の画像表示装置における前記表示用画像メモリに記憶されている複数の表示用画像は、静止画像あるいは動画像であることを特徴とするものである。
【００２２】
【発明の実施の形態】
以下に、本発明における画像表示装置の実施形態に関して図面を用いて詳細に説明する。
【００２３】
図１は、本発明における画像表示装置のシステム全体の一構成例を表したシステムブロック図である。
【００２４】
図示しているように、本発明における画像表示装置は以下の構成要素によって成り立っている。１は例えばＣＣＤカメラなどからなる物体を撮影するための撮像装置で、２は撮像装置１で撮影された画像データを格納しておくフレームメモリで、３は撮影した対象物体の位置を検出する位置検出部で、４は撮影した対象物体の動きを検出する動き検出部で、５は表示手段（後述のディスプレイ８）を制御するための表示制御部で、６は複数の画像データを合成するための合成画像作成部で、７は表示手段（後述のディスプレイ８）に表示するための撮像装置１で撮影された画像データを含む画像データやその他の各種データを表示用データとして格納しておくための表示用画像メモリで、８は画像データを表示するためのディスプレイで、９は音の強弱や音色を含めコード情報を音声変換する機能を含めて音を発生させる手段（後述のスピーカー１１）を制御するための音声制御部で、１０は音を発生させる手段（後述のスピーカー１１）から発生させる音のデータ（例えばコード情報や発音するための条件情報など）を格納しておくための音声メモリで、１１は音を発生するためのスピーカーである。
【００２５】
以降、わかりやすくするために上記図１で説明した本発明における画像表示装置はパーソナルコンピュータ（以降ＰＣと呼ぶ）とＣＣＤカメラとから構成されたものとして実施形態の説明を記載する。
【００２６】
図２は、一般的なＰＣとカメラから構成された画像表示装置の一例を表したイメージ図である。
【００２７】
図示しているように、１００はＣＣＤカメラで、ＰＣ２００のディスプレイ２１０の上部に設置された構成になっている。ＣＣＤカメラ１００は上記図１での撮像装置１に相当しており、このＣＣＤカメラ１００が通行人３００を撮影し、その撮影された映像がＰＣ２００のディスプレイ２１０に表示される。尚、上記図１のディスプレイ８は図２のディスプレイ２１０に相当し、上記図１のその他のフレームメモリ２、位置検出部３、動き検出部４、表示制御部５、合成画像作成部６、表示用画像メモリ７、音声制御部９、音声メモリ１０、スピーカー１１は図２のＰＣ本体２２０にソフトウェアもしくはハードウェアとして組み込まれている。
【００２８】
このカメラ１００付きＰＣ２００は、カメラ１００によって通行人３００が撮影され、この撮影されたデータから撮像画像中の通行人の位置が検出される。ただし、撮像される人物像に関しては、全身が映っている必要はなく、頭部が完全に映っていればよいものとする。
【００２９】
次に、通行人がカメラ付きＰＣの前を通行する際に、ＰＣのディスプレイに表示されている画像データがどのように遷移するかについて説明する。
【００３０】
図３は、通行人が画像表示装置の前を通行する際に表示される表示画像の一例を示した図である。
【００３１】
撮像画像中の通行人３００が、撮像画像の中心線に近い位置で静止したときは、例えば図３の（Ｃ）のような画像がディスプレイ２１０に表示される（「新製品」という文字列がはっきり表示されている）。この状態、つまり通行人３００が撮像画像の中心線から左方向に少し頭を動かした場合には、今まで表示されていた（Ｃ）の画像が薄くなり（「新製品」という文字列が薄くなる）、別の画像、この場合は（Ｂ）のような画像が薄く浮かび上り、ディスプレイ２１０に表示される（「ＣＰＵ」と「２ＧＨＺ」の文字列が浮かび上がってくる）。さらに、左方向に頭を動かすと、（Ｃ）の画像は完全に消滅し、別の画像、この場合は（Ａ）のような画像が明確に表示される（「新製品」という文字列が完全に消滅し、「ＣＰＵ」と「２ＧＨＺ」の文字列がはっきり表示されている）。逆に、通行人３００が撮像画像の中心線から右方向に頭を動かした場合には、今まで表示されていた（Ｃ）の画像が薄くなり（「新製品」という文字列が薄くなる）、別の画像、この場合は（Ｄ）のような画像が薄く浮かび上り、ディスプレイ２１０に表示される（「ＨＤＤ」と「１００ＧＢ」の文字列が浮かび上がってくる）。さらに、左方向に頭を動かすと、（Ｃ）の画像は完全に消滅し、別の画像、この場合は（Ｅ）のような画像が明確に表示される（「新製品」という文字列が完全に消滅し、「ＨＤＤ」と「１００ＧＢ」の文字列がはっきり表示されている）。
【００３２】
尚、表示画像に関しては、上記図３で示したような文字画像に限定するものではなく、風景写真等を用いれば、視点方向によって、映像が変化するホログラフィック映像と同様の効果が得られ、室内用のインテリアとして利用することもできる。
【００３３】
（実施例１）
まず、初期位置からの移動量に応じた重み付けを行い合成画像を作成する処理に関して説明する。
【００３４】
図４は、初期位置からの移動量に応じた重み付けを行い合成画像を作成し画像の表示処理を示したフローチャートである。このフローチャートに基づいて、本画像表示装置の具体的な詳細内容に関して説明する。
【００３５】
図１の画像表示装置のシステム構成を踏まえて順に説明する。
【００３６】
まず、撮像装置１の働きについて説明する。画像表示装置は、前方の人物の位置を検出する手段を備えることを特徴としている。前方の人物を捉えるためのセンサとして、例えばＣＣＤカメラ等の撮像装置１を用いることができる。撮像装置１のＣＣＤカメラから、例えば１秒間に３０枚のフレーム画像が入力される。入力されたフレーム画像は、フレームメモリ２に記憶される。尚、人物を検出するためのセンサは撮像装置に限定するわけではなく、例えば複数個の赤外線センサを表示装置の下方、もしくは上方に水平方向に並べて配置し、反応したセンサの位置から、人物の位置を検出するようにしてもよい。
【００３７】
次に、位置検出部３の働きについて説明する。位置検出部３は、フレームメモリ２中の、フレーム画像の内容を解析することによって、フレーム画像中の人物の位置を検出する（Ｓ４０１）。具体的な方法としては、例えば文献“内藤、竹内「ビジョンを備えたインターフェースとのインタラクション」,情処研究報告,ＣＶＩＭ，ｐｐ３９−４６（１９９６）”に記述されている手法を用いることができる。これは、まずあらかじめ人物が映っていない背景のみの画像を取得し、メモリに記憶しておく。この背景画像と、順次入力されるフレーム画像との差分を計算する。この計算結果に基づいて、人物が存在してるか否かを判断する（Ｓ４０２）。ここで人物が存在する場合は人物領域のみが抽出される。この抽出された領域の重心のｘ座標，ｙ座標を求め、その値を該当フレームにおける人物の位置として合成画像作成部６に入力すると同時に、位置検出部３の内部メモリに記憶する。一方、人物が検出されなかった場合は、画像を表示しないようにすることによって、消費電力の削減及びディスプレイの劣化防止が期待できる。
【００３８】
次に、動き検出部４の働きについて説明する。動き検出部４は、位置検出部３に記憶されている人物の位置情報を読み出し、経過した時間に伴う位置の変化を解析することによって、人物の動きを検出する。特に、人物が撮像範囲に入り、フレーム画像の中心線付近における特定の範囲の位置で、一定時間静止したとき、その位置を人物の初期位置として、位置検出部３の内部メモリに記憶するようにする（Ｓ４０３）。
【００３９】
次に、合成画像作成部６の働きについて説明する。合成画像作成部６は、位置検出部３から人物の位置情報を読み出し、各フレーム画像における人物の位置に応じた合成画像を表示用画像メモリ７に記憶されている特定の２枚の画像から作成する。まず、人物の初期位置と現在位置とから人物の移動量を計算する（Ｓ４０４）。
【００４０】
初期位置のｘ座礁をｘ０、現在位置のｘ座標をｘ１とすると、移動量ｖは、
ｖ＝｜ｘ０−ｘ１｜／δ  …（式１）
となる。ここで、δは検出位置の分解能を決定するための正の定数である。
【００４１】
図３の例では、（Ａ）と（Ｃ）、（Ｃ）と（Ｅ）のそれぞれの中間の状態を、それぞれ１種類の画像（Ｂ）と（Ｄ）でしか示していないが、実際は人物の検出位置の分解能に応じた複数の状態が存在するものとする。移動量の計算とともに、人物が初期位置より左右いずれの位置に移動したかを検出し判断する（Ｓ４０５、Ｓ４０６）。
【００４２】
例えば、通行人が左方向に頭を動かした場合、人物の頭が初期位置より右にあることから（Ｓ４０５）、任意の座標（ｉ，ｊ）における（Ｃ）の画像の画素値をｃ（ｉ，ｊ）とし、同座標における（Ａ）の画像の画素値をａ（ｉ，ｊ）とすると、合成画像の画素値ｇ（ｉ，ｊ）は、
ｇ（ｉ，ｊ）＝ｖ／α×ａ（ｉ，ｊ）＋（１−ｖ／α）×ｃ（ｉ，ｊ）…（式２−１）
で決定することができる（Ｓ４０７）。つまり、本来の初期位置での画像（Ｃ）と移動量の最大値での画像（Ａ）に関する画素値を現在の座標（ｉ，ｊ）に基づいてｃ（ｉ，ｊ）、ａ（ｉ，ｊ）とし、画像（Ａ）に関しては濃くなる方向に、画像（Ｃ）に関しては薄くなる方向に、それぞれ移動量に対して重み付けを行うことで合成画像の画素値を算出している。
【００４３】
一方、通行人が右方向に頭を動かした場合、人物の頭が初期位置より左にあることから（Ｓ４０６）、任意の座標（ｉ，ｊ）における（Ｃ）の画像の画素値をｃ（ｉ，ｊ）とし、同座標における（Ｅ）の画像の画素値をｅ（ｉ，ｊ）とすると、合成画像の画素値ｈ（ｉ，ｊ）は、
ｇ（ｉ，ｊ）＝ｖ／α×ｅ（ｉ，ｊ）＋（１−ｖ／α）×ｃ（ｉ，ｊ）…（式２−２）
で決定することができる（Ｓ４０８）。つまり、本来の初期位置での画像（Ｃ）と移動量の最大値での画像（Ｅ）に関する画素値を現在の座標（ｉ，ｊ）に基づいてｃ（ｉ，ｊ）、ｅ（ｉ，ｊ）とし、画像（Ｅ）に関しては濃くなる方向に、画像（Ｃ）に関しては薄くなる方向に、それぞれ移動量に対して重み付けを行うことで合成画像の画素値を算出している。
【００４４】
ここで、αはｖのとり得る最大値とする。また、（Ａ）、（Ｃ）、（Ｅ）の各画像の画素値は、黒い文字の領域が２５５、白い背景部分が０とする。尚、移動量ｖが大きくなるほど、（Ａ）の画像もしくは（Ｅ）の画像に対する重みが大きくなる。
【００４５】
その後、合成画像作成部６によって作成された合成画像は、表示制御部５に送られ、表示制御部５によって、ディスプレイ８が駆動され表示される（Ｓ４０９）。
【００４６】
尚、特に終了命令が発せられない限り、上記Ｓ４０１からＳ４１０までの処理が繰り返し実行される。
【００４７】
以上が、初期位置からの移動量に応じた重み付けを行い合成画像を作成する処理に関してである。
【００４８】
（実施例２）
次は、初期位置を検出しない実施例について説明する。
【００４９】
図６は、本画像表示装置においてフレーム画像中で検出された人物領域と表示画像の参照位置との関係を示した図である。ここではフレーム画像中で検出された人物領域と３本の破線による表示画像の参照位置を示している。
【００５０】
人物領域中の“＋”印は、重心位置を示しているものとする。つまり、人物の重心位置が、３本の破線上にあるときは、合成画像は作成されず、それぞれに対応した画像Ｐ、Ｑ、Ｒが表示される。一方、それ以外の位置に人物の重心位置がある場合は合成画像が作成される。
【００５１】
例えば、図示しているように、画像Ｑと画像Ｐの間の位置に人物が存在するときは、画像Ｑの参照位置からの移動量ｖに基づき、上記式２−１に従って画像Ｐと画像Ｑとから合成画像が作成される。一方、図示していないが反対の画像Ｑと画像Ｒの間の位置に人物が存在するときは、画像Ｑの参照位置からの移動量ｖに基づき、上記式２−２に従って画像Ｒと画像Ｑとから合成画像が作成される。つまり、３つの参照線から基準となる参照線を規定し、この参照基準線から重心までの移動量に基づいて合成画像が作成されてもよいし、あるいは２つの参照線間のいずれの位置に重心が存在しているかを判断し、その重心はいずれの参照に近いかを判断し、参照線間の基準線を規定し、この参照基準線から重心までの移動量に基づいて合成画像が作成されてもよい。
【００５２】
その後、合成画像作成部６によって作成された合成画像は、表示制御部５に送られ、表示制御部５によって、ディスプレイ８が駆動され表示される。
【００５３】
尚、特に終了命令が発せられない限り、上記実施例１と同様にＳ４０１からＳ４１０までの処理が繰り返し実行される。
【００５４】
以上、実施例１及び２では、人物のｘ軸方向の移動量に応じた合成画像を作成する例を挙げたが、ｙ軸方向の移動によって合成画像が作成されるものであってもよい。もしくは、ｘ、ｙ両方向の移動に応じて、２次元的に変化する合成画像が作成されるものであってもよい。
【００５５】
（実施例３）
次に、音声制御部９の働きについて説明する。
【００５６】
図５は、画像表示装置が行う音声の発声処理のフローチャートである。
【００５７】
まず、上記実施例１の図４の場合と同様に、人物の位置検出を行い（Ｓ５０１：Ｓ４０１と同じ）、人物が検出されたか否かの判断を行う（Ｓ５０２：Ｓ４０２と同じ）。次に、人物の動きを実施例１のＳ４０３からＳ４０４までの処理を行うことで人物の位置を検出する（Ｓ５０３）。この検出した位置に基づいて、動き検出部４によって、人物が撮像範囲外へ外れているか否かを判断する（Ｓ５０４）。
【００５８】
その後、動き検出部４によって、人物が撮像範囲外へ外れる動きが検出されると、音声制御部９に音声の発声命令が入力される。この結果、音声制御部９は音声メモリ１０から、特定の音声用のデータ（例えばコード情報や発音するための条件情報などのデータも含む）を読み出し、音として出力できる状態に変換し、スピーカー１１を通して出力する（Ｓ５０５）。
【００５９】
尚、特に終了命令が発せられない限り、Ｓ５０１からＳ５０６までの処理が繰り返し実行される。
【００６０】
ここで、特定の音声とは人物を呼び止めるための音声（例えば、注意を引いたり、警告を発する音声であってもよい）であり、例えば、
「ちょっと、待った！」
「もう少し、見ていって下さい。」
などである。尚、音声の出力は、人物を呼び止める以外にも、人物が画像表示装置の前で静止したときに、
「こんにちは」
と挨拶したりすることにも応用できる。
【００６１】
以上、各実施例の中で人物の存在を検出する手法と、人物を呼び止めるための手法は、宣伝用のビデオ映像を繰り返し表示する画像表示装置にも応用することができる。
【００６２】
即ち、位置検出部３によって人物の存在が検出されるとビデオ映像の再生を開始する。したがって、人物は常にビデオ映像を冒頭部分からみることができる。
【００６３】
また、ビデオ映像の再生途中で、動き検出部４によって、人物が撮像範囲から外れる動きが検出された場合には、音声制御部９によって、人物を呼び止めるための音声を発生する。呼び止められた人物が、戻って来ない場合を考慮して、一定時間以上人物が検出されないときには、ビデオ映像の再生を終了し、別の人物が来るまで待機する。
【００６４】
また、人物がビデオ映像の再生中、終始検出され、再生が終了して以降、撮像範囲から外れた場合には、最後まで映像を見たことに謝礼するための音声（例えば、「ありがとう」や「ありがとうございました」といったような言葉）を出力する。
【００６５】
また、音声メモリ１０に音の強弱や音色を含めた発声に関する各種属性情報をコード情報としておき、音声制御部９によってこれらの属性情報を含めた音声出力の制御をできるようにしておけば、スピーカー１１からは味気ない単なる言葉の出力というのではなく、感情等を含めた人にとって心地よい音声が出力することができる。
【００６６】
以上をまとめると、本発明の画像表示装置においては、
１）画像表示装置を見る人物は、自身の位置の変化に伴って変化する合成画像が表示されるため、見る行為自体に楽しみを見出すことができる。この結果、表示内容に対して意志を持って確認しようとするため、宣伝用の画像表示装置として非常に大きな効果が得られる。同時に、ホログラフィック映像を擬似的に、簡易な構成の装置で実現できる。
２）人物の移動量に応じて連続的に変化する合成画像が表示できる。
３）消費電力の削減及びディスプレイの劣化防止が実現できる。
４）画像表示装置の前方を通過した大部分の通行人に、表示内容を欠かさず見せることが期待できる。
５）画像表示装置を見る人物に対して、表示される動画を常に冒頭部分から見せることができ、かつ再生途中で見ることを止めることを抑制することができる。といった特徴及び効果を得ることができる。
【００６７】
尚、上記実施例の説明では主に静止画像について行ったが、動画像が静止画像の連続であることを考えれば本発明の技術的思想は、その主旨に反しない範囲で動画像に適用できることは明らかである。
【００６８】
以上、ここまで挙げた実施形態における内容は、本発明の主旨を変えない限り、上記記載内容に限定されるものではない。
【００６９】
【発明の効果】
本発明による画像表示装置では、以下の効果がもたらされる。
【００７０】
本発明によれば、画像表示装置を見る人物は、自身の位置の変化に伴って変化する合成画像が表示されるため、見る行為自体に楽しみを見出すことができる。この結果、表示内容に対して意志を持って確認しようとするため、宣伝用の画像表示装置として非常に大きな効果が得られる。同時に、ホログラフィック映像を擬似的に、簡易な構成の装置で実現できる。
【００７１】
さらに、人物の移動量に応じて連続的に変化する合成画像が表示できる。
【００７２】
さらに、消費電力の削減及びディスプレイの劣化防止が実現できる。
【００７３】
さらに、画像表示装置の前方を通過した大部分の通行人に、表示内容を欠かさず見せることが期待できる。
【００７４】
さらに、画像表示装置を見る人物に対して、表示される動画を常に冒頭部分から見せることができ、かつ再生途中で見ることを止めることを抑制することができる。
【図面の簡単な説明】
【図１】本発明における画像表示装置のシステム全体の一構成例を表したシステムブロック図である。
【図２】本発明における画像表示装置の概観と通行人を示したイメージ図である。
【図３】本発明における画像表示装置が表示する表示画像の一例を示した図である。
【図４】本発明における画像表示装置が行う画像の表示処理を示したフローチャートである。
【図５】本発明における画像表示装置が行う音声の発声処理を示したフローチャートである。
【図６】本発明における画像表示装置が表示するフレーム画像中で検出された人物領域と表示画像の参照位置を説明した図である。
【符号の説明】
１  撮像装置
２  フレームメモリ
３  位置検出部
４  動き検出部
５  表示制御部
６  合成画像作成部
７  表示用画像メモリ
８  ディスプレイ
９  音声制御部
１０  音声メモリ
１１  スピーカー
２００  パーソナルコンピュータ（ＰＣ）
２１０  ＰＣのディスプレイ
２２０  ＰＣの本体
３００  通行人
【図１】
0003770374.tif 000002
【図２】
0003770374.tif 000003
【図３】
0003770374.tif 000004
【図４】
0003770374.tif 000005
【図５】
0003770374.tif 000006
【図６】
0003770374.tif 000007