(57)【要約】 【課題】  画像表示装置自体に、画像コンテンツの補正領域を指定する。【解決手段】  実施形態の画像表示装置によれば、受信部が送信デバイスから送信された画像コンテンツを受信し、補正領域受信部が、受信された画像コンテンツに対する補正領域を決定するための補正領域データを受信する。補正部は、受信した補正領域データに基づいて、受信した画像コンテンツの補正領域を補正する。出力部は、受信した画像コンテンツ又は補正された画像コンテンツを出力する。記補正領域データは、出力された画像コンテンツ又は補正された画像コンテンツに対して、ユーザによって指示された領域に基づく。【選択図】図１
2017161857.tif 000002
【特許請求の範囲】
【請求項１】
送信デバイスから送信された画像コンテンツを受信する受信部と、
前記受信された画像コンテンツに対する補正領域を決定するための補正領域データを受信する補正領域受信部と、
前記受信した補正領域データに基づいて、前記受信した画像コンテンツの補正領域を補正する補正部と、
前記受信した画像コンテンツ又は前記補正された画像コンテンツを出力する出力部と
を具備し、
前記補正領域データは、前記出力された画像コンテンツ又は前記補正された画像コンテンツに対して、ユーザによって指示された領域に基づく、
画像表示装置。
【請求項２】
前記補正領域は、撮像されたユーザのジェスチャーに基づいて認識された領域である、請求項１記載の画像表示装置。
【請求項３】
前記補正領域は、ユーザのタッチパネル操作に基づいて認識された領域である、請求項１記載の画像表示装置。
【請求項４】
前記ユーザが複数の場合、選択されたユーザのジェスチャーに基づいて認識された領域である、請求項２記載の画像表示装置。
【請求項５】
前記ユーザが複数の場合、選択されたユーザのタッチパネル操作に基づいて認識された領域である、請求項３記載の画像表示装置。
【請求項６】
前記補正領域は、撮像された複数のユーザの画像に基づいて、所定の動作をしているユーザの数を認識し、前記認識されたユーザの数に基づいて特定された領域である、請求項１記載の画像表示装置。
【請求項７】
前記補正領域は、タッチパネル操作と、前記出力された画像コンテンツとから認識された前記画像コンテンツの構造物とに基づいて特定される領域である、請求項１記載の画像表示装置。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明の実施形態は、画像表示装置に関する。
【背景技術】
【０００２】
パーソナルコンピュータや映像プレイヤなどの送信デバイスから画像コンテンツを送信し、この送信された画像コンテンツを受信し、閲覧者に提示するプロジェクタやディスプレイデバイスなどの画像表示装置がある。
【０００３】
このような送信デバイスから送信される画像コンテンツを表示する画像表示装置には、画像表示装置自体の備える画像補正や画像合成の機能を固定的に施して表示するものである。
【０００４】
また、送信デバイスから送信された画像コンテンツが画像表示装置に入力される前に、画像表示装置によって表示された画像コンテンツに対する人物の反応を認識し、認識結果を画像コンテンツに表示する技術がある。
【先行技術文献】
【特許文献】
【０００５】
【特許文献１】特開２００１−６７４８２号公報
【発明の概要】
【発明が解決しようとする課題】
【０００６】
例えば、プレゼンターが聴衆に対してプロジェクタを使用してプレゼンテーションを行なう場面において、プレゼンテーション画面中の着目箇所を指示したいといった場合、送信デバイスにおいて画像コンテンツそのものに操作を加えてポインタを表示するか、指示棒やレーザポインタなどを使用して、表示された画像コンテンツを指示する必要がある。したがって、画像コンテンツの操作権を持たない者や、指示を行なうための道具を持ち合わせていない者が、表示された画像コンテンツの着目点を指し示すことができない。
【課題を解決するための手段】
【０００７】
実施形態の画像表示装置によれば、受信部が送信デバイスから送信された画像コンテンツを受信し、補正領域受信部が、受信された画像コンテンツに対する補正領域を決定するための補正領域データを受信する。補正部は、受信した補正領域データに基づいて、受信した画像コンテンツの補正領域を補正する。出力部は、受信した画像コンテンツ又は補正された画像コンテンツを出力する。記補正領域データは、出力された画像コンテンツ又は補正された画像コンテンツに対して、ユーザによって指示された領域に基づく。
【図面の簡単な説明】
【０００８】
【図１】図１は、本実施形態の画像表示装置がプロジェクタの場合の配置を示す図である。
【図２】図２は、本実施形態の画像表示装置がディスプレイの場合の配置を示す図である。
【図３】図３は、第１実施形態のプロジェクションシステムＰＳを示す図である。
【図４】図４は、第１実施形態のプロジェクションシステムＰＳの構成を示す図である。
【図５】図５は、第２実施形態のディスプレイシステムＤの使用環境を示す図である。
【図６】図６は、第２実施形態のディスプレイシステムＤの構成を示す図である。
【図７】図７は、第３実施形態のプロジェクションシステムＰＳが使用されるマルチディスプレイ会議の様子を示す図である。
【図８】図８は、第３実施形態のマルチディスプレイ会議において使用されるプロジェクションシステムＰＳの構成を示す図である。
【図９】図９は、第４実施形態のプロジェクションシステムＰＳを示す図である。
【図１０】図１０は、第４実施形態のプロジェクションシステムＰＳの構成を示す図である。
【図１１】図１１は、第５実施形態のプロジェクションシステムＰＳが使用されるマルチディスプレイ会議の様子を示す図である。
【図１２】図１２は、第５実施形態のマルチディスプレイ会議において使用されるプロジェクションシステムＰＳの構成を示す図である。
【図１３】図１３は、第６実施形態の体を揺する鑑賞者Ｑの数に比例して、画像コンテンツに、画質補正機能を用いて音符のマークを合成した映像を作成し、スクリーンＳＣに投影するプロジェクションシステムＰＳのプロジェクタＰＪを示す図である。
【図１４】図１４は、第６実施形態の鑑賞者Ｑの挙手の数に比例して、画像コンテンツに、画像補正機能を用いて合成した映像を作成し、スクリーンＳＣに投影する、プロジェクションシステムＰＳのプロジェクタＰＪを示す図である。
【図１５】図１５は、第６実施形態のインタラクティブなプロジェクションシステムＰＳの構成を示す図である。
【図１６】図１６は、第７実施形態のプロジェクションシステムＰＳによって補正された画像コンテンツが表示されるスクリーンＳＣを示す図である。
【図１７】図１７は、第７実施形態のプロジェクションシステムＰＳの構成を示す図である。
【図１８】図１８は、実施形態の画像補正回路１３の画素毎に補正を行なう補正方法を説明するための図である。
【図１９】図１９は、実施形態の画像補正回路１３の画素毎に画素補正及び画像強度補正を行なう補正方法を説明するための図である。
【図２０】図２０は、実施形態の画像補正回路１３の画像補正方法３を説明するための図である。
【図２１】図２１は、実施形態の画像補正回路１３の画像補正方法４を説明するための図である。
【図２２】図２２は、実施形態の画像補正回路１３の画像補正方法５を説明するための図である。
【図２３】図２３は、実施形態の画像補正回路１３の画像補正方法５を説明するための図である。
【発明を実施するための形態】
【０００９】
以下、実施の形態について、図面を参照して説明する。
１  実施形態の画像表示装置の配置関係
図１は、本実施形態の画像表示装置がプロジェクタの場合の配置を示す図である。図２は、本実施形態の画像表示装置がディスプレイの場合の配置を示す図である。
【００１０】
図１及び図２において、パーソナルコンピュータＰＣ、映像プレイヤなどの送信デバイス１、５から送信された画像コンテンツは、画像表示装置（プロジェクタ２、ディスプレイ６）に入力される。
【００１１】
一方、画像表示装置（プロジェクタ２、ディスプレイ６）には、画像コンテンツを補正する領域を決定するための補正領域データが入力される。なお、補正領域の認識機能は、画像表示装置（プロジェクタ２、ディスプレイ６）が有していても良い。
【００１２】
画像表示装置（プロジェクタ２、ディスプレイ６）は、入力された画像コンテンツのうち、補正領域データに基づく補正領域に対して所定の補正を施す。画像表示装置がプロジェクタ２の場合には、補正された画像コンテンツをスクリーン３に投影する。画像表示装置がディスプレイ６の場合には、補正された画像コンテンツを画像表示装置であるディスプレイ６に表示する。
【００１３】
すなわち、実施形態の画像表示装置は、送信デバイスからの画像コンテンツが入力され、かつ補正領域データに基づいて決定された補正領域に対して所定の補正を施す。補正領域データは、画像コンテンツに対する補正領域を決定するためのものであり、表示された画像コンテンツ又は補正された画像コンテンツに対する聴衆の反応などが反映されて決定される（インタラクティブ機能）。
【００１４】
なお、実施形態の画像表示装置は、プロジェクタ２、ディスプレイ６に限られるものではない。
２  実施形態
２−１  第１実施形態
図３は、第１実施形態のプロジェクションシステムＰＳを示す図である。
【００１５】
同図において、画像表示装置であるプロジェクタＰＪには、パーソナルコンピュータＰＣが接続されている。プロジェクタＰＪは、パーソナルコンピュータＰＣから画像コンテンツを受信すると、その受信した画像コンテンツをスクリーンＳＣに表示する。プレゼンテータＰによりスクリーンＳＣに表示されている画像コンテンツに対してジェスチャーが行なわれると、受信した画像コンテンツに対して補正処理を施す。そして、補正された画像コンテンツをスクリーンＳＣに投影する。
【００１６】
聴衆者Ｓ−１〜Ｓ−６は、スクリーンＳＣに投影された画像コンテンツをプレゼンテータＰのプレゼンテーションにより視聴している状況である。なお、実施形態において、聴衆者Ｓ−１、Ｓ−２、…、Ｓ−６を区別して説明する必要がない場合には、ハイフンを省略して「聴衆者Ｓ」として説明する。他の構成要素についても同様に説明する。
【００１７】
第１実施形態では、プレゼンテータＰが指で示したスクリーンＳＣの箇所を、スクリーンＳＣに設けられたジェスチャー認識部Ｒが認識する。ジェスチャー認識部Ｒは、認識したプレゼンテータＰが指で示したスクリーンＳＣの箇所を画像コンテンツの座標に変換し、プロジェクタＰＪにネットワークを介して送信する。なお、ジェスチャー認識部Ｒは、プロジェクタＰＪにあっても良い。他の実施形態においても同様である。
【００１８】
プロジェクタＰＪは、ジェスチャー認識部Ｒにより認識された画像コンテンツの座標について補正処理（ハイライト表示、ポインタ表示など）を行ない、補正された画像コンテンツをスクリーンＳＣに投影する。
【００１９】
これにより、プレゼンテータＰが指で指示した領域を認識し、その領域にハイライト表示などを行なうように画像コンテンツを補正し、補正された画像コンテンツをスクリーンＳＣに投影する。従って、パーソナルコンピュータＰＣを操作することなく、プロジェクタＰＪは、プレゼンテータＰが指示した範囲がハイライト表示された画像を表示することができる。
【００２０】
図４は、第１実施形態のプロジェクションシステムＰＳの構成を示す図である。なお、図３と同一部分には、同一符号を付して説明する。
【００２１】
同図において、ジェスチャー認識部ＲはスクリーンＳＣに設けられたセンサー１１及びジェスチャー認識モジュール１２を有する。
【００２２】
センサー１１は、イメージセンサーやでデプスセンサーなどであり、プレゼンテータＰを含む画像を撮像する。
【００２３】
ジェスチャー認識モジュール１２は、センサー１１によって撮像された画像からプレゼンテータＰのジェスチャーを認識し、この認識されたプレゼンテータＰのジェスチャーに基づいて、画像コンテンツの補正領域を特定する（例えば、画像コンテンツのｘ，ｙ座標）。第１実施形態では、プレゼンテータＰの指先の範囲を認識し、この認識されたプレゼンテータＰの指先の範囲に対応する画像コンテンツの補正領域を特定する。
【００２４】
ジェスチャー認識モジュール１２によって特定された補正領域を示す補正領域データは、ネットワークを介してプロジェクタＰＪに送信される。
【００２５】
なお、ジェスチャー認識モジュール１２におけるジェスチャー認識処理は、公知の画像処理技術を使用するので、ここでは詳述しない。また、認識されたジェスチャーと、画像コンテンツの補正領域との対応は、例えば、これらの対応関係をテーブルに格納しておき、テーブルを参照して求めるなど、その方法は問わない。
【００２６】
プロジェクタＰＪは、画像補正回路１３、補正領域形状パラメータ設定部１４、補正パラメータ設定部１５を具備する。
【００２７】
補正領域形状パラメータ設定部１４は、星形、ポインタなどの形状の他、形状のサイズ、数、範囲などの補正領域形状に関する補正領域形状パラメータ情報を格納する。
【００２８】
補正パラメータ設定部１５には、補正領域データ及び／又は補正領域形状パラメータ設定部１４によって設定された補正領域の形状に対してどのような補正、例えば、ハイライト表示、点滅表示、グラデーションなどの補正パラメータ情報を格納する。
【００２９】
画像補正回路１３は、ジェスチャー認識モジュール１２からの補正領域を示す補正領域データ、補正領域形状パラメータ設定部１４に格納された補正領域形状を示す補正領域パラメータ情報及び補正パラメータ設定部１５に格納された補正領域に対する補正の程度を示す補正パラメータ情報に基づいて、入力される画像コンテンツを補正する。
【００３０】
そして、補正した画像コンテンツをスクリーンＳに投影する。例えば、表示された画像コンテンツの指定された補正領域にポインターの合成表示や、スポットライトをあてたような補正を行なう。
【００３１】
なお、第１実施形態ではプロジェクタＰＪにおける画像コンテンツの補正を補正領域データ、補正領域形状パラメータ及び補正パラメータに基づいて補正を行なう場合について説明したが、補正の方法はこれに限られるものではない。補正の方法は種々考えられる。例えば、補正領域データ及び補正パラメータに基づいて画像コンテンツの補正を行なっても良い。他の実施形態においても同様である。
【００３２】
従って、第１実施形態によれば、プロジェクションシステムＰＳを用いたプレゼンテーションの場面において、パーソナルコンピュータＰＣなどの送信デバイスにおいて画像コンテンツそのものに操作を加えることなく、また、プレゼンテータＰがポインターなどの道具を用いることなく、プレゼンテーションコンテンツの所望の位置をインタラクティブに指し示すことができる。
２−２  第２実施形態
図５は、第２実施形態のディスプレイシステムＤの使用環境を示す図である。図６は、第２実施形態のディスプレイシステムＤの構成を示す図である。なお、図４と同一部分には、同一符号を付し、その説明を省略する。
【００３３】
図５においては、ディスプレイシステムＤのディスプレイに表示された画像コンテンツを視聴者Ｖ−１、Ｖ−２が視聴している状況を示している。ディスプレイシステムＤは、プロジェクションシステムＰＳと、ディスプレイＤＳとを具備する。第２実施形態では、プロジェクタＰＪ内に、センサー１１及びジェスチャー認識モジュール１２を有する。
【００３４】
センサー１１は、イメージセンサーやでデプスセンサーなどであり、視聴者Ｖ−１、Ｖ−２を含む画像を撮像する。
【００３５】
ジェスチャー認識モジュール１２は、センサー１１によって撮像された画像から視聴者Ｖ−１、Ｖ−２のジェスチャーを認識し、この認識された視聴者Ｖ−１、Ｖ−２のジェスチャーに基づいて、画像コンテンツの補正領域を特定する（例えば、画像コンテンツのｘ，ｙ座標）。第２実施形態では、視聴者Ｖ−１又はＶ−２の指先の範囲を認識し、この認識された視聴者Ｖ−１又はＶ−２の指先の範囲に対応する画像コンテンツの補正領域を特定する。
【００３６】
ジェスチャー認識モジュール１２によって特定された補正領域を示す補正領域データは、プロジェクタＰＪの画像補正回路１３に送信される。
【００３７】
画像補正回路１３は、ジェスチャー認識モジュール１２からの補正領域を示す補正領域データ、補正領域形状パラメータ設定部１４に格納された補正領域形状を示す補正領域パラメータ情報及び補正パラメータ設定部１５に格納された補正領域に対する補正の程度を示す補正パラメータ情報に基づいて、入力される画像コンテンツを補正する。そして、補正した画像コンテンツをディスプレイＤＳに出力する。
【００３８】
従って、第２実施形態によれば、視聴者Ｖ−１、Ｖ−２がディスプレイＤＳから少し離れて閲覧している際でも、リモコンなどを用いることなくディスプレイに表示された画像コンテンツの所望の位置をインタラクティブに指し示すことができる。
２−３  第３実施形態
図７は、第３実施形態のプロジェクションシステムＰＳが使用されるマルチディスプレイ会議の様子を示す図である。図８は、第３実施形態のマルチディスプレイ会議において使用されるプロジェクションシステムＰＳの構成を示す図である。
【００３９】
第３実施形態では、プロジェクタＰＪから出力される画像コンテンツが、スクリーンＳＣや複数のディスプレイＤ（Ｄ−１、Ｄ−２、・・・、Ｄ８、・・・）に表示される。
【００４０】
複数のディスプレイＤは、タッチパネル２０を有する。タッチパネル２０は、タッチパネルセンサー２１及びタッチパネル操作認識モジュール２２を有する。参加者ＰのいずれかがディスプレイＤをタッチすると、そのタッチされた箇所の画像コンテンツが補正されて、全てのディスプレイＤ及びスクリーンＳＣに補正が行なわれた画像コンテンツが表示される。図７においては、参加者Ｐ−３がディスプレイＤ−７をタッチし、このタッチされた箇所に星マークがハイライト表示される例を示している。
【００４１】
図８において、タッチパネルセンサー２１は、タッチパネル上で操作された操作データを出力する。タッチパネル操作認識モジュール２２は、タッチパネルセンサー２１からの操作データに基づいてタッチパネル操作を認識し、この認識されたタッチパネル操作に基づいて、画像コンテンツの補正領域を特定する（例えば、画像コンテンツのｘ，ｙ座標）。
【００４２】
タッチパネル操作認識モジュール２２によって特定された補正領域を示す補正領域データは、ネットワークを介してプロジェクタＰＪに送信される。
【００４３】
なお、タッチパネル操作認識モジュール２２におけるタッチパネル操作認識処理は、公知の画像処理技術を使用するので、ここでは詳述しない。また、認識されたタッチパネル操作と、画像コンテンツの補正領域との対応は、例えば、これらの対応関係をテーブルに格納しておき、テーブルを参照して求めるなど、その方法は問わない。また、タッチパネル操作認識モジュール２２はプロジェクタＰＪにあっても良い。他の実施形態も同様である。
【００４４】
画像補正回路１３は、タッチパネル認識モジュール２２からの補正領域データによって特定される補正領域、補正領域形状パラメータ設定部１４によって指定される補正領域形状及び補正パラメータ設定部１５によって指定される補正領域に対する補正の程度に基づいて、入力される画像コンテンツを補正する。そして、補正した画像コンテンツをスクリーンＳＣ及び複数のディスプレイＤに出力する。
【００４５】
従って、第３実施形態によれば、プロジェクションシステムＰＳを用いたマルチディスプレイ会議の場面において、ある参加者の指し示した箇所をインタラクティブに共有することができる。
２−４  第４実施形態
図９は、第４実施形態のプロジェクションシステムＰＳを示す図である。なお、図３と同一部分には、同一符号を付して説明する。
【００４６】
第１実施形態では、プレゼンテータＰが指で示したスクリーンＳＣの箇所を、スクリーンＳＣに設けられたジェスチャー認識部  Ｒが認識する。ジェスチャー認識部Ｒは、認識したプレゼンテータＰが指で示したスクリーンＳＣの箇所を画像コンテンツの座標に変換し、プロジェクタＰＪにネットワークを介して送信する。
【００４７】
第４実施形態では、聴衆者Ｓ−１〜Ｓ−６のうち、選択された聴衆者（図８においては聴衆者Ｓ−２が選択された場合を示している。）が指で示したスクリーンＳＣの箇所を、スクリーンＳＣに設けられたジェスチャー認識部Ｒが認識する。ジェスチャー認識部Ｒは、認識した聴衆者Ｓ−２が指で示したスクリーンＳＣの箇所を画像コンテンツの座標に変換し、プロジェクタＰＪにネットワークを介して送信する。
【００４８】
プロジェクタＰＪは、ジェスチャー認識部Ｒにより認識された画像コンテンツの座標について補正処理（ハイライト表示、ポインタ表示など）を行ない、補正された画像コンテンツをスクリーンＳＣに投影する。
【００４９】
これにより、選択された聴衆者Ｓが指で指示した領域を認識し、その領域にハイライト表示などを行なうように画像コンテンツを補正し、補正された画像コンテンツをスクリーンＳＣに投影する。従って、パーソナルコンピュータＰＣを操作することなく、プロジェクタＰＪが選択された聴衆者Ｓが指示した範囲がハイライト表示された画像を表示することができる。
【００５０】
図１０は、第４実施形態のプロジェクションシステムＰＳの構成を示す図である。なお、図３及び図４と同一部分には、同一符号を付して説明する。
【００５１】
図１０に示すように、第４実施形態では、ジェスチャー認識部Ｒには、スクリーンＳＣに設けられたセンサー１１及びジェスチャー認識モジュール１２に加えて、ジェスチャー選択モジュール３１が設けられる。
【００５２】
ジェスチャー選択モジュール３１は、プレゼンテータＰからのジェスチャー選択に基づいて、複数の聴衆者Ｓのうち、どの聴衆者Ｓのジェスチャーを選択するかを決定する。
【００５３】
センサー１１は、イメージセンサーやでデプスセンサーなどであり、ジェスチャー選択モジュール３１によって選択された聴衆者Ｓのジェスチャーを含む画像を撮像する。
【００５４】
ジェスチャー認識モジュール１２は、センサー１１によって撮像された画像からプレゼンテータＰによって選択された聴衆者Ｓのジェスチャーを認識し、この認識された聴衆者Ｓのジェスチャーに基づいて、画像コンテンツの補正領域を特定する（例えば、画像コンテンツのｘ，ｙ座標）。第４実施形態では、選択された聴衆者Ｓの指先の範囲を認識し、この認識された聴衆者Ｓの指先の範囲に対応する画像コンテンツの補正領域を特定する。
【００５５】
ジェスチャー認識モジュール１２によって特定された補正領域を示す補正データは、ネットワークを介してプロジェクタＰＪに送信される。プロジェクタＰＪにおける処理は、第１実施形態で述べた通りである。
【００５６】
従って、第４実施形態によれば、プレゼンテータＰが特定の聴衆者Ｓのジェスチャーを認識するように、ジェスチャー認識モジュール３１に指定することで、特定の聴衆者Ｓが指で指示した箇所にスポットライトを当てる等の効果を得ることができる。
２−５  第５実施形態
図１１は、第５実施形態のプロジェクションシステムＰＳが使用されるマルチディスプレイ会議の様子を示す図である。図１２は、第５実施形態のマルチディスプレイ会議において使用されるプロジェクションシステムＰＳの構成を示す図である。なお、図７及び図８と同一部分には、同一符号を付して説明する。
【００５７】
図１１において、図７と異なる点は、参加者Ｐ−２、Ｐ−３それぞれが同時にディスプレイＤ−５、Ｄ−７のタッチパネルを操作している点である。
【００５８】
図１２において、図８と異なる点は、複数のタッチパネル２０−１〜２０−３のタッチパネル操作認識モジュール２２−１−２２−３から入力される複数の画像コンテンツの補正領域（例えば、画像コンテンツのｘ，ｙ座標）を選択するタッチパネル選択モジュール４１を設けたことにある。
【００５９】
タッチパネル選択モジュール４１は、会議司会者からのタッチパネル選択指示に基づいて、どのパッチパネル２０からの補正領域を有効にするかを選択し、この選択されたタッチパネル２０からの補正領域を示す補正領域データをプロジェクタＰＪの画像補正回路１３に出力する。プロジェクタＰＪにおける処理は、第３実施形態で述べた通りである。
【００６０】
従って、第５実施形態によれば、プロジェクションシステムＰＳを用いたマルチディスプレイ会議の場面において、会議司会者が複数の参加者のうち、どの参加者のタッチパネルのタッチを有効にするかを指定することが可能となる。
２−６  第６実施形態
図１３は、第６実施形態の体を揺する鑑賞者Ｑの数に比例して、画像コンテンツに、画質補正機能を用いて音符のマークを合成した映像を作成し、スクリーンＳＣに投影するプロジェクションシステムＰＳのプロジェクタＰＪを示す図である。図１４は、第６実施形態の鑑賞者Ｑの挙手の数に比例して、画像コンテンツに、画像補正機能を用いて合成した映像を作成し、スクリーンＳＣに投影する、プロジェクションシステムＰＳのプロジェクタＰＪを示す図である。
【００６１】
図１５は、第６実施形態のインタラクティブなプロジェクションシステムＰＳの構成を示す図である。第６実施形態のプロジェクションシステムＰＳは、例えば、映画館に備え付けられる。
【００６２】
センサー５１は、イメージセンサーやでデプスセンサーなどであり、複数の鑑賞者Ｑを含む画像を撮像する。
【００６３】
ジェスチャー認識モジュール５２は、センサー５１によって撮像された画像から複数の鑑賞者Ｑのジェスチャーを認識し、この認識された複数の鑑賞者Ｑのうち、体を揺らしている鑑賞者Ｑの数をプロジェクションシステムＰＳの補正領域形状パラメータ設定部５３に出力する。なお、ジェスチャー認識モジュール５２は、挙手をしている鑑賞者Ｑの数など、他のジェスチャーを行なっている鑑賞者Ｑの数を出力しても良い。
【００６４】
補正領域形状パラメータ設定部５３は、ジェスチャー認識モジュール５２によって認識された体を揺らしている鑑賞者の数に基づいて、音符のマークの形状や星形のマークの形状を所定の数だけ、所定の位置に出力する。例えば、体を揺らしている鑑賞者の数に比例して、音符のマークの形状や星形のマークの形状の数を変化する。
【００６５】
画像補正回路１３は、画像コンテンツを補正領域形状パラメータ設定部５３からのパラメータに基づいて、入力された画像コンテンツを補正する。また、画像補正回路１３は、補正を行なう際に、補正パラメータ設定部１５に格納された補正領域に対する補正の程度を示す補正パラメータ情報を使用する。
【００６６】
従って、第６実施形態によれば、予め鑑賞者にどのような機能があるかを周知しておくことにより、鑑賞者参加型の映画鑑賞環境を提供することができる。
【００６７】
なお、第６実施形態において、ジェスチャー認識モジュール５２によって認識された所定のジェスチャーを行なった鑑賞者Ｑの数をコンテンツ送信デバイスのシステム側に通知しても良い。これにより、画像コンテンツに対するアドホックな画像加工のみならず、コンテンツ送信デバイスが画像コンテンツそのものをインタラクティブに変更することが可能となる。
２−７  第７実施形態
図１６は、第７実施形態のプロジェクションシステムＰＳによって補正された画像コンテンツが表示されるスクリーンＳＣを示す図である。  同図において、パーソナルコンピュータＰＣに接続されたプロジェクションシステムＰＳは、スクリーンにＳＣに投影されたコンテンツに対して、画像認識機能を用いて構造物解析を行なう。そして、プレゼンターＰによって指さしされた構造物がどの構造物であるかを検出し、検出された構造物を補正して表示する（例えば、ハイライト表示）。図１７は、第７実施形態のプロジェクションシステムＰＳの構成を示す図である。なお、図４と同一部分には、同一符号を付して説明する。
【００６８】
図１７に示すように、第１実施形態の図４に示したプロジェクションシステムＰＳと異なる点は、画像認識モジュール６１を設けたことにある。
【００６９】
画像認識モジュール６１は、ジェスチャー認識モジュール１２によって特定された補正領域（例えば、画像コンテンツのｘ，ｙ座標）を示す補正領域データと、出力画像コンテンツとを受信する。画像認識モジュール６１は、入力された画像コンテンツの構造解析、レイアウト解析を行ない、画像コンテンツを構造物に分解する。そして、入力された補正領域が、解析された構造物のうち、どの構造物を示すかを決定する。そして、決定された構造物を示す補正領域指定パラメータを画像補正回路１３に出力する。
【００７０】
なお、画像認識モジュール６１における構造解析、レイアウト解析については公知の画像処理技術を使用するので、ここでは詳述しない。また、画像認識モジュール６１は、プロジェクタＰＪにあっても良い。
【００７１】
画像補正回路１３は、補正領域指定パラメータによって指定された構造物に補正を行ない、補正された画像コンテンツを出力する。また、画像補正回路１３は、補正を行なう際に、補正領域形状パラメータ設定部１４に格納された補正領域形状を示す補正領域パラメータ情報及び補正パラメータ設定部１５に格納された補正領域に対する補正の程度を示す補正パラメータ情報を使用しても良い。
【００７２】
従って、第７実施形態によれば、第１実施形態に比して、補正領域指定パラメータをデータ数の少ないパラメータ群により作成することができる。このため、「画像コンテンツのある構造物をハイライト表示する」などの効果を少ない入力パラメータから得ることができる。
【００７３】
なお、補正領域指定パラメータに加えて、補正強度を示すパラメータを加えても良い。これにより、「画像コンテンツのある構造物を、中心は薄く、淵に行くほど濃くなるような方式でハイライト表示する」などの効果を、少ない入力パラメータから得ることができる。
３  画像補正回路１３について
上述のように、実施形態の画像表示装置は、外部から入力される補正領域を決定するための補正領域データに基づいて画像コンテンツの補正を行なうものであり、補正の方法は問わない。画像補正回路１３が、補正領域を特定した場合、例えば、下記の方法で画像コンテンツの補正を行なう。
【００７４】
なお、上述の実施形態において、補正領域は補正領域データ及び／又は補正領域形状パラメータ設定部１４に格納された補正領域形状パラメータ情報に基づいて定められる。また、補正パラメータは、補正パラメータ設定部１５に格納された補正パラメータ情報に基づく。
３−１  画像補正方法１（領域指定による画像加工機能）
画像補正方法１は、入力画素毎に補正を行なう方法である。
【００７５】
図１８は、実施形態の画像補正回路１３の画素毎に補正を行なう補正方法を説明するための図である。
【００７６】
同図に示すように、入力画素データ（実施形態の画像コンテンツ）の画素には、画素補正回路７１により画素補正パラメータによる画素補正が行なわれる。画素補正パラメータは、画素毎に設定されている。すなわち、画素補正パラメータは、表示領域全領域に相当する「ライン当たりの画素数」×「ライン数」の画素補正パラメータを有する。
【００７７】
画素補正パラメータは、実施形態では、補正パラメータ設定部１５に格納された補正パラメータ情報である。
【００７８】
画素補正有効・無効パラメータは、画素毎に設定されており、補正のＯＮ／ＯＦＦが２値で設定される。スイッチ７２は、画素補正有効・無効パラメータの値に基づいて、画素毎に、補正のＯＮ／ＯＦＦを切り替える。画素補正有効・無効パラメータは、実施形態では、補正領域データ及び／又は補正領域形状パラメータ設定部１４に格納された補正領域形状パラメータ情報に基づいて、画像補正回路１３により特定された補正領域に基づく。
【００７９】
スイッチ７２は、画素補正有効・無効パラメータに基づいて、画素毎に補正のＯＮ／ＯＦＦを行ない、補正が行なわれた画素データ及び補正が行なわれていない画素データを出力画素データ（実施形態の補正された画像コンテンツデータ）として出力する。
【００８０】
このような補正方法によれば、自由な形状の領域に対して画像コンテンツを補正することができる。
３−２  画像補正方法２（強度指定よる画像加工機能）
図１９は、実施形態の画像補正回路１３の画素毎に画素補正及び画像強度補正を行なう補正方法を説明するための図である。なお、図１８と同一部分には同一符号を付して説明する。
【００８１】
同図に示すように、入力画素データ（実施形態の画像コンテンツ）の画素には、画素補正回路７１により画素補正パラメータによる画素補正が行なわれる。画素補正パラメータは、画素毎に設定されている。すなわち、画素補正パラメータは、表示領域全領域に相当する「ライン当たりの画素数」×「ライン数」の画素補正パラメータを有する。
【００８２】
画素補正パラメータは、実施形態では、補正パラメータ設定部１５に格納された補正パラメータ情報である。
【００８３】
画像補正強度パラメータは、画素毎に設定されており、実施形態では、補正パラメータ設定部１５に格納された強度の補正パラメータ情報である。強度の補正パラメータ情報は、例えば、全画素に対して補正強度を示す多値データである。
【００８４】
マルチプレクサ８１は、補正が行なわれた画素に対して、強度の補正パラメータをマルチプレックスして、加算器８３に出力する。マルチプレクサ８２は、補正が行なわれていない画素に対して、（１−強度の補正パラメータ）をマルチプレックスして、加算器８３に出力する。
【００８５】
加算器８３は、マルチプレクサ８１からの補正が行なわれた画素データと、マルチプレクサ８２から出力された画素を加算して、出力画像データとして出力する。
【００８６】
このような補正方法によれば、画質補正の強度を指定したり、自由な形状の領域に対して自由な強度で画質補正を加えることが可能となる。
３−３  画像補正方法３（座標指定による画像加工機能）
画像補正方法１では、入力画素データの補正範囲は画素毎の画素補正パラメータで指定する場合について説明した。画像補正方法３では、座標及び補正領域形状パラメータにより、補正領域を決定し、この決定された補正領域を補正領域として補正する場合について説明する。
【００８７】
図２０は、実施形態の画像補正回路１３の画像補正方法３を説明するための図である。
【００８８】
同図に示すように、画像補正方法３では、入力される座標と、補正領域形状パラメータとにより、画素補正パラメータを決定するものである。そして、補正方法１において説明した方法により、決定された画素補正パラメータを使用して、入力画像データの補正を行なう。
【００８９】
ここで、「座標」とは、出力画像表示領域中のどこの座標に画像加工を施すかを示すパラメータである。また、「補正領域形状パラメータ」とは、星形、ポインタなどの形状の他、形状のサイズ、数、範囲などの補正領域形状に関する補正領域形状パラメータ情報を示す。
【００９０】
なお、「補正領域形状パラメータ」に関しては、必ずしもシステム外部から指定される必要はなく、特定サイズのまるい形状のみ指定可能などといった形でシステムで固定化する方法でも良い。
【００９１】
従って、画像補正方法３によれば、補正領域を指定するためのデータに補正領域形状パラメータを使用するので、画像補正方法１に比べて、データ数を低減することができる。例えば、「ある特定の座標を中心に、星形のスポットライトを当てたような画像加工を施す」などの効果を少ない入力パラメータから得ることができる。
３−４  画像補正方法４（座標指定及び補正強度指定パラメータによる画像加工機能）
図２１は、実施形態の画像補正回路１３の画像補正方法４を説明するための図である。
【００９２】
同図に示すように、画像補正方法４では、入力される座標、補正領域形状パラメータ及び強度指定パラメータにより、画素補正パラメータ及び画像補正強度パラメータを決定するものである。そして、補正方法２において説明した方法により、決定された画素補正パラメータ及び画像補正強度パラメータを使用して、入力画像データの補正を行なう。
【００９３】
ここで、「強度指定パラメータ」には、システムで１つの強度を指定する方法や、座標点からの距離に応じて強度を変化させる方法などがある。例えば、座標点からの距離に対して、座標点の強度値からの変化量を比例させる場合、座標点の強度値と、比例係数がパラメータとなる。
【００９４】
従って、画像補正方法４によれば、画像補正強度パラメータを使用するので、画像補正方法２に比べて、データ数を低減することができる。例えば、「ある特定の座標を中心に、中心が濃くて、周りにいくほど薄くなるような、星形のスポットライトを当てたような画像を施す」などの効果を少ない入力パラメータから得ることができる。
３−５  画像補正方法５（領域認識による画像加工機能）
図２２は、実施形態の画像補正回路１３の画像補正方法５を説明するための図である。
【００９５】
同図に示すように、画像補正方法５では、入力画像データに対して構造分析及びレイアウト解析を行ない構成物に分解する画像認識回路９１を設ける。なお、画像認識における構造分析及びレイアウト解析については、公知の画像処理技術を使用するので、ここでは詳述しない。
【００９６】
画像認識回路９１は、入力される座標が解析された構造物のうち、どの構造物を示すかを決定する。そして、決定された構造物を示す画素補正パラメータを画像補正回路１３に出力する。
【００９７】
従って、画像補正方法５によれば、画像認識回路により決定された構造物を示す画素補正パラメータを使用するので、画像補正方法１に比べて、データ数を低減することができる。例えば、「入力データ画像中のある構造物の一部をハイライト表示する」などの効果を少ない入力パラメータから得ることができる。
３−６  画像補正方法６（領域認識による画像加工機能）
図２３は、実施形態の画像補正回路１３の画像補正方法５を説明するための図である。なお、図２２と同一部分には同一符号を付して説明する。
【００９８】
同図において、画像認識回路９１により決定された構造物を示す画素補正パラメータ及び強度指定パラメータが画像補正強度パラメータとして入力される。そして、補正方法２において説明した方法により、画素補正パラメータ及び画像補正強度パラメータを使用して、入力画像データの補正を行なう。
【００９９】
従って、画像補正方法６によれば、決定された補正領域に対する補正強度を指定することができる。例えば、「画像コンテンツのある座標の示す構造物を、中心は薄く、淵に行くほど濃くなるような方式でハイライト表示する」などの効果を、少ない入力パラメータから得ることができる。
【０１００】
種々の画像補正方法について説明したが、実施形態の画像補正方法はこれに限られるものではない。第１実施形態乃至第６実施形態における画像補正方法には、種々の画像補正方法を使用することができる。
【０１０１】
したがって、実施形態によれば、画像表示装置自体に、画像コンテンツの補正領域を指定することができる。これにより、画像コンテンツの操作権を持たない者や、指示を行なうための道具を持ち合わせていない者が、表示された画像コンテンツの着目点を指し示すことができる。
【０１０２】
また、実施形態における処理は、ハードウェア及びソフトウェアの組み合わせにより行なう場合について説明したが、ハードウェアによる処理はソフトウェアによる処理により実現しても良いし、ソフトウェアによる処理はハードウェアによる処理により実現しても良い。また、実施形態における処理の一部又は全てをハードウェア又はソフトウェアによる処理に変更しても良い。
【０１０３】
また、実施形態に記載した手法は、計算機（コンピュータ）に実行させることができるプログラムとして、例えば磁気ディスク（フロッピー（登録商標）ディスク、ハードディスク等）、光ディスク（ＣＤ−ＲＯＭ、ＤＶＤ、ＭＯ等）、半導体メモリ（ＲＯＭ、ＲＡＭ、フラッシュメモリ等）等の記録媒体に格納し、また通信媒体により伝送して頒布することもできる。なお、媒体側に格納されるプログラムには、計算機に実行させるソフトウエア手段（実行プログラムのみならずテーブルやデータ構造も含む）を計算機内に構成させる設定プログラムをも含む。本装置を実現する計算機は、記録媒体に記録されたプログラムを読み込み、また場合により設定プログラムによりソフトウエア手段を構築し、このソフトウエア手段によって動作が制御されることにより上述した処理を実行する。なお、本明細書でいう記録媒体は、頒布用に限らず、計算機内部あるいはネットワークを介して接続される機器に設けられた磁気ディスクや半導体メモリ等の記憶媒体を含むものである。
【０１０４】
本発明のいくつかの実施形態を説明したが、これらの実施形態は、例として提示したものであり、発明の範囲を限定することは意図していない。これら新規な実施形態は、その他の様々な形態で実施されることが可能であり、発明の要旨を逸脱しない範囲で、種々の省略、置き換え、変更を行なうことができる。これら実施形態やその変形は、発明の範囲や要旨に含まれるとともに、特許請求の範囲に記載された発明とその均等の範囲に含まれる。
【符号の説明】
【０１０５】
１、５…送信デバイス、２…プロジェクタ、３…スクリーン、６ディスプレイ、ＰＪ…プロジェクタ、ＳＣ…スクリーン、Ｒ…ジェスチャー認識部、ＰＣ…パーソナルコンピュータ、１１…センサー、１２…ジェスチャー認識モジュール、１３…画像補正回路、１４…補正領域形状パラメータ設定部、１５…補正パラメータ、２１…タッチパネルセンサー、２２…タッチパネル操作認識モジュール、３１…ジェスチャー選択モジュール、４１…タッチパネル選択モジュール。
【図１】
2017161857.tif 000003
【図２】
2017161857.tif 000004
【図３】
2017161857.tif 000005
【図４】
2017161857.tif 000006
【図５】
2017161857.tif 000007
【図６】
2017161857.tif 000008
【図７】
2017161857.tif 000009
【図８】
2017161857.tif 000010
【図９】
2017161857.tif 000011
【図１０】
2017161857.tif 000012
【図１１】
2017161857.tif 000013
【図１２】
2017161857.tif 000014
【図１３】
2017161857.tif 000015
【図１４】
2017161857.tif 000016
【図１５】
2017161857.tif 000017
【図１６】
2017161857.tif 000018
【図１７】
2017161857.tif 000019
【図１８】
2017161857.tif 000020
【図１９】
2017161857.tif 000021
【図２０】
2017161857.tif 000022
【図２１】
2017161857.tif 000023
【図２２】
2017161857.tif 000024
【図２３】
2017161857.tif 000025