(57)【特許請求の範囲】
【請求項１】
広告用画像を表示する表示手段と、
前記表示手段の近傍の人が発する音声の言語を認識する認識手段と、
前記認識手段で認識された言語が公用語として予め設定された言語でないとき、前記広告用画像に関わる字幕画像を前記認識手段で認識された言語の文字を用いて生成するとともに、前記公用語で前記字幕画像に関わる音声を生成する生成手段と、
前記生成手段で生成される字幕画像を前記表示手段で表示するとともにこの字幕表示の最中に前記公用語での音声をスピーカから発する制御手段と、
を備えることを特徴とする情報提供装置。
【請求項２】
前記制御手段は、前記生成手段で生成される字幕画像を、前記表示手段で表示中の広告用画像に重ねて、かつスクロールしながら、表示する、
ことを特徴とする請求項１に記載の情報提供装置。
【請求項３】
前記生成手段は、前記認識手段で公用語と公用語以外の言語とが認識された場合、前記広告用画像に関わる字幕画像をその認識された前記公用語と前記公用語以外の言語ごとに各々の言語の文字を用いて複数生成するとともに、その認識された前記公用語と前記公用語以外の言語とで前記字幕画像に関わる音声を生成し、
前記制御手段は、前記生成手段で生成される前記公用語の字幕画像を前記表示手段で表示するときにはこの字幕表示の最中に前記公用語以外の言語での音声をスピーカから発し、前記公用語以外の字幕画像を前記表示手段で表示するときにはこの字幕表示の最中に前記公用語の言語での音声をスピーカから発する
ことを特徴とする請求項１に記載の情報提供装置。
【請求項４】
前記制御手段は、前記生成手段で複数の字幕画像が生成された場合、その複数の字幕画像を、前記表示手段で表示中の前記広告用画像に重ねて、かつスクロールしながら、順次に表示する、
ことを特徴とする請求項３に記載の情報提供装置。
【請求項５】
広告用画像の表示手段およびコンピュータを含む情報提供装置において、
前記コンピュータを、
前記表示手段の近傍の人が発する音声の言語を認識する認識手段と、
前記認識手段で認識された言語が公用語として予め設定された言語でないとき、前記広告用画像に関わる字幕画像を前記認識手段で認識される言語の文字を用いて生成するとともに、前記公用語で前記字幕画像に関わる音声を生成する生成手段と、
前記生成手段で生成される字幕画像を前記表示手段で表示するとともにこの字幕表示の最中に前記公用語での音声をスピーカから発する制御手段と、
して機能させるためのプログラム。
【請求項６】
広告用画像を表示する表示手段を備えた情報提供装置およびサーバを含む情報提供システムにおいて、
前記情報提供装置の近傍の人が発する人の音声の言語を認識する認識手段と、
前記認識手段で認識された言語が公用語として予め設定された言語でないとき、前記広告用画像に関わる字幕画像を前記認識手段で認識される言語の文字を用いて生成する生成手段と、
前記生成手段で生成される字幕画像を前記表示手段で表示するとともにこの字幕表示の最中に前記公用語での音声をスピーカから発する制御手段と、
を備え、
前記認識手段、前記生成手段、前記制御手段のうち、少なくとも１つの手段を前記サーバが含み、そのサーバが含む手段を除く残りの手段を前記情報提供装置が含むことを特徴とする情報提供システム。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明の実施形態は、商品等の広告用画像を表示する情報提供装置とそのプログラムおよび情報提供システムに関する。
【背景技術】
【０００２】
商品等の広告用画像をディスプレイで表示して公衆に知らせるディジタル・サイネージ（Digital Signage）が知られている。
【先行技術文献】
【特許文献】
【０００３】
【特許文献１】特開２０１１−２１０２３８号公報
【発明の概要】
【発明が解決しようとする課題】
【０００４】
上記のディジタル・サイネージは不特定多数の人を広告の対象としており、表示を見る人に情報が的確に伝わらないことがある。この場合、十分な広告効果が得られない。
【０００５】
本発明の実施形態の目的は、表示を見る人に情報を的確に伝えることができ、高い広告効果が得られる情報提供装置とそのプログラムおよび情報提供システムを提供することである。
【課題を解決するための手段】
【０００６】
一実施形態の情報提供装置は、表示手段、認識手段、生成手段、および制御手段を備える。表示手段は、広告用画像を表示する。認識手段は、前記表示手段の近傍の人が発する音声の言語を認識する。生成手段は、前記認識手段で認識された言語が公用語として予め設定された言語でないとき、前記広告用画像に関わる字幕画像を前記認識手段で認識される言語の文字を用いて生成するとともに、前記公用語で前記字幕画像に関わる音声を生成する。制御手段は、前記生成手段で生成される文字画像を前記表示手段で表示するとともにこの字幕表示の最中に前記公用語での音声をスピーカから発する。
【図面の簡単な説明】
【０００７】
【図１】一実施形態の構成を示すブロック図。
【図２】一実施形態の制御を示すフローチャート。
【図３】一実施形態の液晶ディスプレイで表示される広告用画像と日本語の字幕画像を示す図。
【図４】一実施形態の液晶ディスプレイで表示される広告用画像と英語の字幕画像を示す図。
【図５】一実施形態の変形例を示す図。
【発明を実施するための形態】
【０００８】
以下、一実施形態について図面を参照して説明する。  
図１において、１はディスプレイユニットで、広告用画像を表示する液晶ディスプレイ（表示手段）２、音収集用のマイクロフォン３、および音出力用のスピーカ４を前面に有し、商品の宣伝用として建物の壁面や車両の荷台などに設置される。商品を販売する店舗では、レジカウンタに設置されるＰＯＳ端末の客面側ディスプレイをこのディスプレイユニット１の一部として兼用する場合もある。
【０００９】
マイクロフォン３は、ディスプレイユニット１の近傍の音を収集する。ディスプレイユニット１の近傍の音として、人が発する音声、自動車や自転車の走行音、店舗が発する音楽、スピーカ４が発する音などがある。
【００１０】
１０は制御部で、この制御部１０に画像形成部１１、音声認識部１２、音響処理部１３、記憶部１４、操作部１５、ネットワークインタフェース１６が接続される。画像生成部１１は、制御部１０の指令に応じた広告用画像を周知のディジタル画像処理技術を利用して生成する。音声認識部１２は、マイクロフォン３の収集音から人の音声およびその音声の言語を周知の音声認識処理技術を利用して認識する。例えば、日本語・英語・中国語・韓国語・ドイツ語など、複数の言語を認識する。音響処理部１３は、制御部１０の指令に応じた音声および音楽を周知のディジタル音響処理技術を利用して生成する。記憶部１４は、制御部１０の制御に必要なプログラムを記憶するとともに、広告用画像および音声・音楽の生成に必要な各種データを記憶する。操作部１５は、広告用画像および音声・音楽の出力に関する動作条件を設定するための種々の操作手段を含む。ネットワークインタフェース１６は、通信ネットワーク２０を介してサーバ２１に接続される。サーバ２１は、広告用画像およびその広告用画像に関わる音声の生成に必要なデータを通信ネットワーク２０を介して制御部１０に転送する。転送されるデータは、記憶部１４に記憶される。
【００１１】
上記ディスプレイユニット１、制御部１０、画像生成部１１、音声認識部１２、音響処理部１３、記憶部１４、操作部１５、およびネットワークインタフェース１６により、広告用画像およびその広告用画像に関わる音声・音楽を生成してそれを公衆に知らせるディジタル・サイネージ（Digital Signage）用の情報提供装置が構成される。また、この情報提供装置およびサーバ２１により、情報提供システムが構成される。
【００１２】
なお、情報提供装置はコンピュータを含み、そのコンピュータの機能により制御部１０、画像生成部１１、音声認識部１２、音響処理部１３、記憶部１４、操作部１５、ネットワークインタフェース１６の構成が実現される。
【００１３】
そして、制御部１０は、記憶部１４内のプログラムに基づく主要な機能として、次の（１）〜（７）の手段を有する。  
（１）サーバ２１から指定される広告に対応する広告用画像、または記憶部１４に予め登録されている複数の広告のうち表示タイミングが訪れた広告に対応する広告用画像を、画像形成部１１により生成する第１生成手段。
【００１４】
（２）上記生成する広告用画像に関わる音声や音楽を音響処理部１３により生成する第２生成手段。
【００１５】
（３）上記広告用画像の生成に際し、予め定められた一定時間内に音声認識部１２で音声が認識されない場合、上記生成する広告用画像・音声・音楽のいずれかに関わる字幕画像を予め定められている言語の文字を用いて画像生成部１１により生成する第３生成手段。予め定められている言語とは、当該情報提供装置が利用される地域の言語、あるいは当該情報提供装置が利用される地域で公用語として使用される言語である。
【００１６】
（４）上記広告用画像の生成に際し、予め定められた一定時間内に音声認識部１２で１つまたは複数の音声が認識され且つその音声から１つの言語が認識された場合、上記生成する広告用画像・音声・音楽のいずれかに関わる字幕画像を上記認識された１つの言語の文字を用いて画像生成部１１により生成する第４生成手段。
【００１７】
（５）上記広告用画像の生成に際し、予め定められた一定時間内に音声認識部１２で複数の音声が認識され且つその各音声から複数の言語が認識された場合、上記生成する広告用画像・音声・音楽のいずれかに関わる字幕画像を上記認識された複数の言語ごとに各々の言語の文字を用いて画像生成部１１により複数生成する第５生成手段。
【００１８】
（６）上記生成した広告用画像を液晶ディスプレイ２で表示するとともに、上記生成した音声および音楽をスピーカ４から出力する第１制御手段。
【００１９】
（７）上記生成した字幕画像を、液晶ディスプレイ２で表示中の広告用画像に重ねて、かつ表示画面上でスクロールしながら、液晶ディスプレイ２で表示する第２制御手段。
【００２０】
つぎに、制御部１０が実行する制御を図２のフローチャートを参照しながら説明する。  
サーバ２１から指定される広告または記憶部１４に予め登録されている複数の広告のうち表示タイミングが訪れた広告に対応する広告用画像を、画像形成部１１により生成する（ステップ１０１）。この広告用画像の生成に伴い、必要に応じて、その広告用画像に関わる音声や音楽を音響処理部１３により生成する（ステップ１０２）。
【００２１】
この広告用画像および音声・音楽の生成に際し、一定時間内に音声認識部１２で音声が認識されるかどうかを監視する（ステップ１０３）。
【００２２】
ディスプレイユニット１の近傍に人がいない場合、あるいはディスプレイユニット１の近傍に人がいたとしてもだれも音声を発しない場合、音声認識部１２の認識結果は“音声なし”となる（ステップ１０３のＹＥＳ）。この場合、上記生成する広告用画像や音声・音楽に関わる字幕画像を予め定められている言語たとえば日本語の文字を用いて画像生成部１１により生成する（ステップ１０４）。そして、生成した広告用画像を液晶ディスプレイ２で表示するとともに、必要に応じて生成した音声や音楽をスピーカ４から出力する（ステップ１０５）。さらに、生成した字幕画像を、液晶ディスプレイ２で表示中の広告用画像に重ねて、かつ表示画面上でスクロールしながら、液晶ディスプレイ２で表示する（ステップ１０６）。
【００２３】
例えば、図３に示すように、商品である衣服の写真・店舗名・ブランド名などが含まれる広告用画像を生成しそれを液晶ディスプレイ２で表示するとともに、字幕画像３１を表示中の広告用画像の上に重ねて且つ表示画面の図示右端位置から図示左端位置へとスクロールしながら表示する。字幕画像３１は、表示中の広告用画像より面積が小さい矩形状枠の内側に“セール中！”という日本語の文字を入れたもので、広告用画像に含まれる商品や店舗がセール中であることを液晶ディスプレイ２の表示を見る人にアピールする。しかも、字幕画像３１が表示画面上で移動するので、表示中の広告用画像が多くの色を使っていたり複雑な動きを含んでいても、字幕画像３１の表示そのものを液晶ディスプレイ２の表示を見る人に高い注目度をもって気づかせることができる。
【００２４】
この図３の例では、広告用画像と日本語の字幕画像３１とを液晶ディスプレイ２でスクロール表示することに加え、例えば“Now On Sale！”という英語の音声を生成しそれを字幕画像３１のスクロール表示の最中にスピーカ４から発する。この英語音声の発生時、日本語の字幕画像３１の表示は、広告用画像の表示をサポートすると同時に、発生した英語音声の内容を同時通訳的に日本人の聴衆に伝える役目をする。
【００２５】
スピーカ４から音声が発せられると、その音声がマイクロフォン３で収集されて音声認識部１２で認識されてしまうが、その時点では音声認識部１２で音声が認識されているかどうかを監視するステップ１０３の処理がすでに終了しているので、スピーカ４からの発生音声をディスプレイユニット１の近傍にいる人の音声として誤認識することはない。
【００２６】
なお、字幕画像３１の表示は、対応する広告用画像を表示している期間内であれば、一度だけ現れて消えるスクロールに限らず、何度も現れて消える繰り返しのスクロールであってもよい。スクロールの方向については、右端位置から左端位置へのスクロールに限らず、左端位置から右端位置へのスクロール、上端位置から下端位置へのスクロール、下端位置から上端位置へのスクロール、斜め方向のスクロールなど、そのいずれでもよい。例えば、広告用画像に含まれる商品の種類、広告用画像の色使い、広告用画像の動きなどに合せて、スクロールの方向を選定する。
【００２７】
一方、広告用画像の生成および必要に応じた音声・音楽の生成に際し、ディスプレイユニット１の近傍にいる人が音声を発すると、その音声がマイクロフォン３で収集され、その収集音に含まれる音声およびその音声の言語が音声認識部１２で認識される（ステップ１０３のＮＯ）。このとき、認識された言語の数が１つであれば（ステップ１０７のＹＥＳ）、生成する広告用画像や音声・音楽のいずれかに関わる字幕画像を上記認識された１つの言語の文字を用いて画像生成部１１により生成する（ステップ１０８）。そして、生成した広告用画像を液晶ディスプレイ２で表示するとともに、生成した音声および音楽をスピーカ４から出力する（ステップ１０５）。さらに、生成した字幕画像を、表示中の広告用画像に重ねて、かつ表示画面上でスクロールしながら、液晶ディスプレイ２で表示する（ステップ１０６）。
【００２８】
例えば、上記認識された１つの言語が日本語であれば、ディスプレイユニット１の近傍に日本人がいてその人が液晶ディスプレイ２を見ることが可能な状況にあるとの判断の下に、図３の例と同じく、商品である衣服の写真・店舗名・ブランド名などが含まれる広告用画像を生成しそれを液晶ディスプレイ２で表示するとともに、その表示中の広告用画像の上に重ねて日本語の字幕画像３１をスクロール表示する。液晶ディスプレイ２を見る日本人にとっては、日本語の字幕画像３１が現れるので、その字幕画像３１が伝える情報を的確に把握することができる。
【００２９】
上記認識された１つの言語が英語であれば、ディスプレイユニット１の近傍に英語圏の人がいてその人が液晶ディスプレイ２を見ることが可能な状況にあるとの判断の下に、図４のように、商品である衣服の写真・店舗名・ブランド名などが含まれる広告用画像を生成しそれを液晶ディスプレイ２で表示するとともに、その表示中の広告用画像の上に重ねて英語の字幕画像３２をスクロール表示する。字幕画像３２は、表示中の広告用画像より面積が小さい矩形状枠の内側に“Now On Sale！”という英語の文字を入れたもので、広告用画像に含まれる商品や店舗がセール中であることを液晶ディスプレイ２の表示を見る英語圏の人にアピールする。
【００３０】
この図４の例では、広告用画像と英語の字幕画像３２を液晶ディスプレイ２で表示することに加え、例えば“セール中！”という日本語の音声を生成しそれを字幕画像３２のスクロール表示の最中にスピーカ４から発する。この日本語音声の発生時、英語の字幕画像３２の表示は、広告用画像の表示をサポートすると同時に、発生した日本語音声の内容を同時通訳的に英語圏の聴衆に伝える役目をする。
【００３１】
なお、字幕画像３２の表示についても、字幕画像３１の表示と同じく、対応する広告用画像を表示している期間内であれば、一度だけ現れて消えるスクロールに限らず、何度も現れて消える繰り返しのスクロールであってもよい。スクロールの方向についても、右端位置から左端位置へのスクロールに限らず、左端位置から右端位置へのスクロール、上端位置から下端位置へのスクロール、下端位置から上端位置へのスクロール、斜め方向のスクロールなど、そのいずれでもよい。例えば、広告用画像に含まれる商品の種類、広告用画像の色使い、広告用画像の動きなどに合せて、スクロールの方向を選定する。
【００３２】
上記認識された１つの言語が中国語の場合は、ディスプレイユニット１の近傍に中国語圏の人がいてその人が液晶ディスプレイ２を見ることが可能な状況にあるとの判断の下に、中国語の文字を用いて字幕画像を生成し、それを表示中の広告用画像の上に重ねてスクロール表示する。上記認識された１つの言語が韓国語の場合は、ディスプレイユニット１の近傍に韓国語圏の人がいてその人が液晶ディスプレイ２を見ることが可能な状況にあるとの判断の下に、韓国語の文字を用いて字幕画像を生成し、それを表示中の広告用画像の上に重ねてスクロール表示する。上記認識された１つの言語がドイツ語の場合は、ディスプレイユニット１の近傍にドイツ語圏の人がいてその人が液晶ディスプレイ２を見ることが可能な状況にあるとの判断の下に、ドイツ語の文字を用いて字幕画像を生成し、それを表示中の広告用画像の上に重ねてスクロール表示する。
【００３３】
また、広告用画像および音声・音楽の生成に際し、音声認識部１２で一定時間内に複数の言語が認識された場合には（ステップ１０３のＮＯ、ステップ１０７のＮＯ）、生成する広告用画像や音声・音楽のいずれかに関わる字幕画像を音声認識部１２で認識された複数の言語ごとに各々の言語の文字を用いて画像生成部１１により複数生成する（ステップ１０９）。そして、生成した広告用画像を液晶ディスプレイ２で表示するとともに、必要に応じて生成した音声や音楽をスピーカ４から出力する（ステップ１１０）。さらに、生成した複数の字幕画像を、液晶ディスプレイ２で表示中の広告用画像に重ねて、かつ表示画面上でスクロールしながら、液晶ディスプレイ２で順次に表示する（ステップ１１１）。
【００３４】
例えば、複数の言語として日本語と英語が認識された場合には、ディスプレイユニット１の近傍に日本人と英語圏の人がいてその人たちが液晶ディスプレイ２を見ることが可能な状況にあるとの判断の下に、商品である衣服の写真・店舗名・ブランド名などが含まれる広告用画像を生成しそれを液晶ディスプレイ２で表示するとともに、その表示中の広告用画像の上に、先ず図３のように日本語の“セール中！”という字幕画像３１をスクロール表示し、この字幕画像３１のスクロール表示が終わったところで、続いて図４のように英語の“Now On Sale！”という字幕画像３２をスクロール表示する。最初の日本語の字幕画像３１のスクロール表示はセール中であることを日本人にアピールし、続いての英語の字幕画像３２のスクロール表示はセール中であることを英語圏の人にアピールする。
【００３５】
また、“Now On Sale！”という英語の音声を生成するとともに“セール中！”という日本語の音声を生成し、英語の音声を日本語の字幕画像３１のスクロール表示の最中にスピーカ４から発し、日本語の音声を英語の字幕画像３２のスクロール表示の最中にスピーカ４から発する。英語音声の発生時、日本語の字幕画像３１の表示は、広告用画像の表示をサポートすると同時に、発生した英語音声の内容を同時通訳的に日本人の聴衆に伝える役目をする。日本語音声の発生時、英語の字幕画像３２の表示は、広告用画像の表示をサポートすると同時に、発生した日本語音声の内容を同時通訳的に英語圏の聴衆に伝える役目をする。
【００３６】
なお、字幕画像３１，３２のスクロール表示の移動方向については、互いに同じもよいし、互いに異なっていてもよい。
【００３７】
複数の言語として中国語と韓国語が認識された場合には、ディスプレイユニット１の近傍に中国語圏の人と韓国語圏の人がいてその人たちが液晶ディスプレイ２を見ることが可能な状況にあるとの判断の下に、セール中という意味の中国語の文字を用いた字幕画像を生成するとともにセール中という意味の韓国語の文字を用いた字幕画像を生成し、先ず中国語の字幕画像をスクロール表示し、次に韓国語の字幕画像をスクロール表示する。この場合、セール中という意味の中国語の音声を生成するとともにセール中という意味の韓国語の音声を生成し、中国語の音声を韓国語の字幕画像のスクロール表示の最中にスピーカ４から発し、韓国語の音声を中国語の字幕画像のスクロール表示の最中にスピーカ４から発する。中国語音声の発生時、韓国語の字幕画像の表示は、広告用画像の表示をサポートすると同時に、発生した中国語音声の内容を同時通訳的に韓国語圏の聴衆に伝える役目をする。韓国語音声の発生時、中国語の字幕画像の表示は、広告用画像の表示をサポートすると同時に、発生した韓国語音声の内容を同時通訳的に中国語圏の聴衆に伝える役目をする。
【００３８】
なお、中国語の字幕画像の内容を日本人が理解できるよう、中国語の字幕画像のスクロール表示と同時に、セール中という日本語音声をスピーカ４から発してもよい。韓国語の字幕画像の内容を日本人が理解できるよう、韓国語の字幕画像のスクロール表示と同時に、セール中という日本語音声をスピーカ４から発してもよい。
【００３９】
複数の言語として日本語・英語・ドイツ語の３つが認識された場合には、“セール中！”という日本語の字幕画像３１、“Now On Sale！”という英語の字幕画像３２、セール中という意味のドイツ語の文字を用いた字幕画像をそれぞれ生成し、最初に日本語の字幕画像３１をスクロール表示し、次に英語の字幕画像３２をスクロール表示し、続いてドイツ語の字幕画像をスクロール表示する。この場合、セール中という意味のドイツ語の音声、“Now On Sale！”という英語の音声、“セール中！”という日本語の音声をそれぞれ生成し、そのドイツ語音声および英語音声を日本語の字幕画像３１のスクロール表示の最中にスピーカ４から連続的に発し、日本語音声を英語の字幕画像３２のスクロール表示の最中およびドイツ語の字幕画像のスクロール表示の最中にそれぞれスピーカ４から発する。
【００４０】
ドイツ語音声の発生時、日本語の字幕画像３１の表示は、広告用画像の表示をサポートすると同時に、発生したドイツ語音声の内容を同時通訳的に日本人の聴衆に伝える役目をする。日本語音声の発生時、ドイツ語の字幕画像の表示は、広告用画像の表示をサポートすると同時に、発生した日本語音声の内容を同時通訳的にドイツ語圏の聴衆に伝える役目をする。
【００４１】
以上のように、ディスプレイユニット１の近傍の人が発する音声およびその音声の言語を認識し、認識した言語の文字を用いた字幕画像を生成し、その字幕画像を広告用画像と共に液晶ディスプレイ２で表示することにより、液晶ディスプレイ２の表示を見る人に対し、表示中の広告用画像に関わる情報を的確に伝えることができる。すなわち、外国人の場合、広告用画像の表示を見るだけでは広告の内容をよく理解できないことがあるが、日常使用している言語の文字を用いた字幕画像が広告用画像の上に表示されるので、広告の内容を的確に把握することができる。
【００４２】
外国人に限らず、日本人であっても、字幕画像が表示されることで、広告用画像の表示だけを見る場合よりも、広告の内容をより的確に把握することができる。
【００４３】
なお、上記実施形態では、字幕画像の内容として“セール中！”および“Now On Sale！”を例に説明したが、字幕画像の内容としては、商品名、店舗名、ブランド名、店舗の開店日時、店舗へのアクセス情報などいずれでもよい。認識する言語として日本語、英語、中国語、韓国語、ドイツ語を例に説明したが、他の言語についても同様に実施可能である。複数の字幕画像を順次にスクロール表示したが、複数の字幕画像を互いに並んだ状態で同時にスクロール表示してもよい。スクロール表示に限らず、字幕画像を広告用画像の所定位置に固定的に表示してもよい。
【００４４】
当該情報提供装置の機能や構成の一部を外部のサーバに設けることも可能である。このシステムを構築する場合、例えばクラウドコンピューティングを利用できる。より具体的には、ＳａａＳ（software as a service）と称されるソフトウェア提供形態が適する。このクラウドシステムを利用する場合の構成を図５に示す。情報提供システム２００は、クラウド２０１、複数の端末２０２および複数の通信ネットワーク２０３、および互いに通信接続された複数のサーバ２０４を有する。これら端末２０２、通信ネットワーク２０３、およびサーバ２０４は、それぞれ１つのみでもよい。端末２０２は、通信ネットワーク２０３を介してクラウド２０１と通信可能である。端末２０２としては、当該情報提供装置、デスクトップタイプやノートブックタイプなどの種々のコンピュータ、携帯電話装置、携帯情報端末（ＰＤＡ）、あるいはスマートフォンなどを適宜に利用できる。通信ネットワーク２０３としては、インターネット、プライベートネットワーク、次世代ネットワーク（ＮＧＮ）、あるいはモバイルネットワークなどを適宜に利用できる。
【００４５】
この画像表示システム２００において、当該情報提供装置が持つ機能や構成のうち、少なくとも１つをサーバ２０４に設け、そのサーバ２０４に設けない残りの機能や構成を端末２０２に設ける。サーバ２０４に設ける機能や構成は、１つのサーバ２０４に配置してもよいし、複数のサーバ２０４に分散して配置してもよい。
【００４６】
その他、上記実施形態および変形例は、例として提示したものであり、発明の範囲を限定することは意図していない。この新規な実施形態および変形例は、その他の様々な形態で実施されることが可能であり、発明の要旨を逸脱しない範囲で、種々の省略、書き換え、変更を行うことができる。これら実施形態や変形は、発明の範囲は要旨に含まれるとともに、特許請求の範囲に記載された発明とその均等の範囲に含まれる。  
以下に、本願出願の当初の特許請求の範囲に記載された発明を付記する。  
［１］広告用画像を表示する表示手段と、前記表示手段の近傍の人が発する音声の言語を認識する認識手段と、前記広告用画像に関わる字幕画像を前記認識手段で認識される言語の文字を用いて生成する生成手段と、前記生成手段で生成される字幕画像を前記表示手段で表示する制御手段と、を備えることを特徴とする情報提供装置。
［２］前記制御手段は、前記生成手段で生成される字幕画像を、前記表示手段で表示中の広告用画像に重ねて、かつスクロールしながら、表示する、ことを特徴とする付記［１］に記載の情報提供装置。
［３］前記生成手段は、前記認識手段で１つの言語のみ認識された場合、前記広告用画像に関わる字幕画像をその認識された１つの言語の文字を用いて生成し、前記認識手段で複数の言語が認識された場合、前記広告用画像に関わる字幕画像をその認識された複数の言語ごとに各々の言語の文字を用いて複数生成する、ことを特徴とする付記［１］に記載の情報提供装置。
［４］前記制御手段は、前記生成手段で複数の字幕画像が生成された場合、その複数の字幕画像を、前記表示手段で表示中の前記広告用画像に重ねて、かつスクロールしながら、順次に表示する、ことを特徴とする付記［３］に記載の情報提供装置。
［５］広告用画像の表示手段およびコンピュータを含む情報提供装置において、前記コンピュータを、前記表示手段の近傍の人が発する音声の言語を認識する認識手段と、前記広告用画像に関わる字幕画像を前記認識手段で認識される言語の文字を用いて生成する生成手段と、前記生成手段で生成される字幕画像を前記表示手段で表示する制御手段と、して機能させることを特徴とするプログラム。
［６］広告用画像を表示する情報提供装置およびサーバを含む情報提供システムにおいて、前記情報提供装置の近傍の人が発する人の音声の言語を認識する認識手段と、前記広告用画像に関わる字幕画像を前記認識手段で認識される言語の文字を用いて生成する生成手段と、前記生成手段で生成される字幕画像を前記表示手段で表示する制御手段と、を備え、前記認識手段、前記生成手段、前記制御手段のうち、少なくとも１つの手段を前記サーバが含み、そのサーバが含む手段を除く残りの手段を前記情報提供装置が含むことを特徴とする情報提供システム。
【符号の説明】
【００４７】
１…ディスプレイユニット、２…液晶ディスプレイ、３…マイクロフォン、４…スピーカ、１０…制御部、１１…画像生成部、１２…音声認識部、１３…音響処理部、１４…記憶部、１５…操作部、１６…ネットワークインタフェース、２０…通信ネットワーク、２１…サーバ
【図１】
0005668017.tif 000002
【図２】
0005668017.tif 000003
【図３】
0005668017.tif 000004
【図４】
0005668017.tif 000005
【図５】
0005668017.tif 000006