(57)【要約】  映像制作者の意図する撮影シーンの雰囲気や場面設定に応じた、最適な視聴環境の照明制御を実現することが可能な視聴環境制御システムを提供する。映像送信装置１０は、映像データ（Ｖ）の各フレームを表示する際の視聴環境照明の制御種別を示す照明制御種別情報（Ｃ）を前記映像データ（Ｖ）に多重するデータ多重部１と、照明制御種別情報（Ｃ）が多重された映像データを変調して送出する送信部２とを設けて構成される。
2007145064.tif 000002
【特許請求の範囲】
【請求項１】
１以上のフレームから構成される映像データを送信するデータ送信装置において、
前記映像データの各フレームを表示する際の視聴環境照明の制御種別を示す照明制御種別情報を、前記映像データに付加して送信することを特徴とするデータ送信装置。
【請求項２】
前記照明制御種別情報は、前記映像データのフレーム単位で付加されることを特徴とする請求項１に記載のデータ送信装置。
【請求項３】
前記照明制御種別情報は、前記映像データの各フレームにおける特徴量に基づいて、視聴環境照明を切替制御する指示を含むことを特徴とする請求項１に記載のデータ送信装置。
【請求項４】
前記照明制御種別情報は、前記映像データの各フレームにおける特徴量に関わらず、直前の視聴環境照明を維持制御する指示を含むものであることを特徴とする請求項１に記載のデータ送信装置。
【請求項５】
前記照明制御種別情報は、前記映像データの各フレームにおける特徴量に関わらず、予め決められた所定の視聴環境照明に切替制御する指示を含むものであることを特徴とする請求項１に記載のデータ送信装置。
【請求項６】
外部からの要求を受けて、映像データを構成する各フレームを表示する際の視聴環境照明の制御種別を示す照明制御種別情報を送信するデータ送信装置であって、
前記照明制御種別情報を、前記映像データを構成する各フレームの出力開始タイミングとともに送信することを特徴とするデータ送信装置。
【請求項７】
前記照明制御種別情報は、前記映像データの各フレームにおける特徴量に基づいて、視聴環境照明を切替制御する指示を含むことを特徴とする請求項６に記載のデータ送信装置。
【請求項８】
前記照明制御種別情報は、前記映像データの各フレームにおける特徴量に関わらず、予め決められた所定の視聴環境照明に切替制御する指示を含むものであることを特徴とする請求項６に記載のデータ送信装置。
【請求項９】
表示装置に表示すべき映像データと、該映像データを構成する各フレームを表示する際の視聴環境照明の制御種別を示す照明制御種別情報とを受信する受信手段と、
前記映像データの特徴量と、前記照明制御種別情報とを用いて、前記表示装置の周辺に設置された照明装置の照明光を制御する制御手段とを備えたことを特徴とする視聴環境制御装置。
【請求項１０】
前記制御手段は、前記照明制御種別情報に応じて、前記映像データの各フレームにおける特徴量に基づき、前記照明装置の照明光を切替制御することを特徴とする請求項９に記載の視聴環境制御装置。
【請求項１１】
前記制御手段は、前記照明制御種別情報に応じて、前記映像データの各フレームにおける特徴量に関わらず、前記照明装置の照明光を維持制御することを特徴とする請求項９に記載の視聴環境制御装置。
【請求項１２】
前記制御手段は、前記照明制御種別情報に応じて、前記映像データの各フレームにおける特徴量に関わらず、前記照明装置の照明光を予め決められた所定状態に制御することを特徴とする請求項９に記載の視聴環境制御装置。
【請求項１３】
請求項９乃至１２のいずれかに記載の視聴環境制御装置と、該視聴環境制御装置によって視聴環境照明光を制御される照明装置とを備えることを特徴とする視聴環境制御システム。
【請求項１４】
１以上のフレームから構成される映像データを送信するデータ送信方法において、
前記映像データの各フレームを表示する際の視聴環境照明の制御種別を示す照明制御種別情報を、前記映像データに付加して送信することを特徴とするデータ送信方法。
【請求項１５】
外部からの要求を受けて、映像データを構成する各フレームを表示する際の視聴環境照明の制御種別を示す照明制御種別情報を送信するデータ送信方法であって、
前記照明制御種別情報を、前記映像データを構成する各フレームの出力開始タイミングとともに送信することを特徴とするデータ送信方法。
【請求項１６】
表示装置に表示すべき映像データと、該映像データを構成する各フレームを表示する際の視聴環境照明の制御種別を示す照明制御種別情報とを受信し、
前記映像データの特徴量と、前記照明制御種別情報とを用いて、前記表示装置の周辺に設置された照明装置の照明光を制御することを特徴とする視聴環境制御方法。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、映像表示装置に映像を表示する際に、その映像の撮影シーンの雰囲気や場面設定に適応させて、映像表示装置の周囲の照明光を制御することが可能なデータ送信装置、データ送信方法、視聴環境制御装置、視聴環境制御システム、及び視聴環境制御方法に関するものである。
【背景技術】
【０００２】
例えば、テレビジョン受像機のような映像表示装置により映像表示を行う場合や、プロジェクタ装置を用いて映像を投影表示させるような場合に、その周囲の照明光を表示映像に合わせて調整することにより臨場感を高めるなどの視聴演出効果を付与するようにした技術が知られている。【０００３】
例えば、特開平２−１５８０９４号公報には、カラーテレビの表示映像の色信号（Ｒ，Ｇ，Ｂ）と輝度信号（Ｙ）とから、フレーム毎に光源の三原色の混光照度比を算出し、映像と連動させて調光制御を行うようにした光色可変形照明装置が開示されている。この光色可変形照明装置は、カラーテレビの表示映像から色信号（Ｒ，Ｇ，Ｂ）と輝度信号（Ｙ）とを取り出し、その色信号と輝度信号とから、光源に使用する三色光（赤色光，緑色光，青色光）の適正調光照度比を算出し、その照度比に従って三色光の照度を設定し、三色光を混光して照明光として出力している。【０００４】
また、例えば、特開平２−２５３５０３号公報には、テレビの映像を複数に分割し、対応する分割部の平均的な色相を検出することによって、分割部の周囲の照明制御を行う映像演出照明装置が開示されている。この映像演出照明装置は、カラーテレビの設置場所の周囲を照明する照明手段を備えていて、カラーテレビに表示される映像を複数に分割し、照明手段によって照明される部分に対応する映像の分割部の平均的な色相を検出し、その検出した色相に基づいて照明手段を制御している。【０００５】
さらに、例えば、特開平３−１８４２０３号公報には、単に画像表示装置の画面全体の平均色度及び平均輝度を求めるのではなく、画像表示装置の画面に映し出された画像から人の顔などの肌色部分の画素を取り除いた残りの部分を背景部と考え、その背景部の各画素のＲ，Ｇ，Ｂ信号及び輝度信号だけを取り出して平均色度及び平均輝度を求めて、画像表示装置の背面の壁面の色度及び輝度が、画面全体、或いは人の肌色を除く背景部の平均色度及び平均輝度と同一になるように、照明を制御する方法が開示されている。
【発明の開示】
【発明が解決しようとする課題】
【０００６】
通常、映像のシーンは例えば映像制作者（脚本家や演出家など）の意図により、一連の場面設定に基づく一区切りの映像として作成される。従って、映像視聴時の臨場感や雰囲気を増大させるには、表示映像のシーン状況に応じた照明光を視聴空間に照射することが望ましい。【０００７】
しかしながら、上述した従来の技術においては、映像信号の輝度や色相のフレーム毎の変化に応じて照明光の状態が変化してしまい、特にフレーム間における輝度や色相の変化の度合いが大きい場合などでは照明光が煩雑に変化し、視聴者がフリッカーによる違和感を感じるという問題が生じる。さらに、場面設定に変化のない１つのシーンの表示中に、フレーム毎の輝度や色相の変化に応じて照明光が変動することは、シーン毎の雰囲気を逆に阻害して好ましくない。【０００８】
図１は、上記従来の技術による照明変動の問題点の一例を説明するための図である。図１に示す例では、月夜の屋外という場面設定で撮影された映像のシーンが作成されている。このシーンは、カメラワークが異なる３つのショット（ショット１，ショット２，ショット３）により構成されている。ショット１では、対象である亡霊をカメラがロングショットで撮影している。そして、ショット２に切り替わると、その亡霊がアップショットで撮影されている。ショット３では、再度ショット１のカメラ位置に戻っている。これらのショットは、カメラワークは異なっていても、一つの雰囲気が連続する一区切りのシーンとして意図されて構成されている。【０００９】
このような場合、ショット１では、月夜の比較的暗い映像が連続しているため、これらの映像の各フレームの輝度や色度に従って照明光を制御すると比較的暗い照明光となる。そしてショット１がショット２に切り替わると、アップショットで撮影された亡霊は比較的明るい映像となる。このときに上記従来の技術によりフレーム毎に照明光を制御すると、ショットの切替時に照明光の制御が大きく切り替わって明るい照明光となる。そして、またショット３に切り替わると、ショット１と同様の暗い照明光に戻る。【００１０】
すなわち、一つの場面（雰囲気）が連続する一区切りのシーン内で照明光が暗くなったり明るくなったりすると、却ってそのシーンの雰囲気を阻害して視聴者に違和感を与えることになる。【００１１】
図２は、シーン内の照明の変動による問題点の他の例を説明するための図である。図２に示す例では、晴天の日中の屋外という場面設定で撮影された映像のシーンが作成されている。このシーンは、カメラが切り替わることなく一連のカメラワークによる撮影によって得られた映像からなる。この例では、カメラの上方からカメラ近傍に向かってスキーヤーが滑降してくる映像が撮影されている。スキーヤーは赤い服を着ており、空は晴天である。【００１２】
このシーンの映像は、その初期のフレームでは背景の青空の領域が大きく、スキーヤーが滑り降りてカメラに近づくに従ってスキーヤーの赤い服の領域が徐々に大きくなってくる。つまりシーン内の映像の進行に伴って、各フレームを構成する色の比率が変化してくる。【００１３】
このような場合、各フレーム毎の色度や輝度を使用して照明光を制御すると、青色が強い照明光から赤い照明光に変化していくことになる。すなわち、一つの場面（雰囲気）が連続する一区切りのシーン内で照明光の色味が変化してしまい、却ってそのシーンの雰囲気を阻害して視聴者に違和感を与えることになる。【００１４】
以上のように、同一シーン内では、各フレームの映像特徴量に応じてフレーム毎に視聴環境照明光を切り替えるのではなく、視聴環境照明光を略一定に保持することが望ましい。【００１５】
さらに、ドラマや映画、音楽番組などのオープニング（あらすじ）や予告編、コマーシャルメッセージ（ＣＭ）期間では、短時間にショットが頻繁に変化するため、上記従来の技術のように、各フレーム毎の映像信号の輝度や色相の変化に応じて照明光を変化させた場合、照明光が煩雑に変化し、視聴者が違和感を感じるという問題が生じる。【００１６】
図３は、オープニング（あらすじ）表示時の照明の変動による問題点の例を説明するための図である。図３に示す例では、ドラマ番組のストーリー上、特に重要なショット（ショット１，ショット２，ショット３，ショット４）が短時間（数秒）で切り替えられた要約映像であり、ここでは、ショット１は晴天の日中の屋外、ショット２は晴天の早朝の屋外、ショット３は曇天の日中の屋外、ショット４は晴天の夕暮れの屋外の場面設定でそれぞれ撮影された映像となっている。【００１７】
すなわち、この映像を構成するフレームの映像特徴量は、各ショット毎に異なっており、上記従来の技術のように、各フレーム毎の色度や輝度を使用して照明光を制御すると、各ショットの切り替わりに同期して照明光も短時間で頻繁に変化することになり、却って視聴環境の雰囲気を阻害して視聴者に違和感を与えることになる。【００１８】
このように、複数のショットが短時間で頻繁に変化する映像を表示する際には、各フレームの映像特徴量に応じてフレーム毎に視聴環境照明光を切り替えるのではなく、予め決められた強度の白色光などの一定の照明光を視聴環境空間に照射するのが望ましい。【００１９】
そしてまた、テレビ番組の中では、シーンとシーンの間に短時間だけアイキャッチ（例えば、ＣＭ前後に挿入される番組クレジットや、バラエティ番組等で次のコーナーで取り上げる内容の抜粋やテロップなど）のような映像が挿入されることがある。このような場合、上記従来の技術のように、各フレーム毎の映像信号の輝度や色相の変化に応じて照明光を変化させると、シーンとシーンの間に挿入された短時間の映像に応じて照明光が変化し、視聴者が違和感を感じるという問題が生じる場合がある。【００２０】
図４は、シーンとシーンの間に短時間のショット映像が挿入された映像表示時の照明の変動による問題点の例を説明するための図である。図４に示す例では、晴天の日中の屋外の場面設定からなるシーン１と屋内の場面設定からなるシーン２との間に、夜間の湖面のショットが短時間だけ挿入された映像である。【００２１】
このような場合、上記従来の技術のように、各フレーム毎の色度や輝度を使用して照明光を制御すると、シーン１からショットへの移行に合わせて、明るい照明光から暗い照明光に大きく切り替わった後、短時間ですぐにシーン２への移行に合わせて再び明るい照明光に切り替わることとなり、却って視聴環境の雰囲気を阻害して視聴者に違和感を与えることになる。【００２２】
このように、シーンとシーンの間に短時間のショットが挿入された映像を表示する際には、該ショットを構成する各フレームの映像特徴量に応じて視聴環境照明光を切り替えるのではなく、直前のシーンの映像特徴量に応じた視聴環境照明光をそのまま維持して視聴環境空間に照射するか、或いは、予め決められた強度の白色光などの一定の照明光を視聴環境空間に照射するのが望ましい場合がある。【００２３】
さらに、例えば、ドラマや映画番組の中の回想シーンなどのように特殊映像処理が施されたシーンが挿入されることがあるが、このような場合、上記従来の技術においては、特殊映像効果が付加された各フレーム毎の映像信号の輝度や色相の変化に応じて照明光を変化させることとなり、視聴者が違和感を感じるという問題が生じる場合がある。【００２４】
このように、特殊映像処理が施された映像を表示する際には、各フレームの映像特徴量に応じて視聴環境照明光を切り替えるのではなく、直前のシーンの映像特徴量に応じた視聴環境照明光をそのまま維持して視聴環境空間に照射するか、或いは、予め決められた強度の白色光などの一定の照明光を視聴環境空間に照射するのが望ましい場合がある。【００２５】
また、例えば、スポーツ番組の競技シーンや、ニュース／報道、情報／ワイドショー番組などのスタジオ収録シーンは、一般的に、スポーツ会場や収録スタジオなどの一定の照明下で撮影された映像である。しかしながら、上記従来の技術のように、各フレーム毎の映像信号の輝度や色相の変化に応じて照明光を変化させると、映像信号に含まれる背景の人工物や、人物の顔や服装などの影響を受けて、不適切な色の照明光を周囲に照射してしまうこととなり、却って、そのシーンの雰囲気を阻害して視聴者に違和感を与えることがある。【００２６】
このように、一定の白色光照明下で撮影された映像を表示する際には、各フレームの映像特徴量に応じて視聴環境照明光を切り替えるのではなく、予め決められた強度の白色光などの一定の照明光を視聴環境空間に照射するか、或いは、ロングショットで撮影された競技場やスタジオの照明を含むフレームの映像特徴量に応じた視聴環境照明光をそのまま維持して視聴環境空間に照射するのが望ましい。【００２７】
本発明は、上記課題に鑑みてなされたものであり、視聴環境の照明光を切り替えるタイミングを適切に制御することにより、最適な視聴環境の照明制御を実現することが可能なデータ送信装置、データ送信方法、視聴環境制御装置、視聴環境制御システム及び視聴環境制御方法を提供することを目的とする。【００２８】
また、映像データの特徴量に応じた照明光と、予め決められた所定の照明光とを適切に切替制御することにより、最適な視聴環境の照明制御を実現することが可能なデータ送信装置、データ送信方法、視聴環境制御装置、視聴環境制御システム及び視聴環境制御方法を提供することを目的とする。
【課題を解決するための手段】
【００２９】
本願の第１の発明は、１以上のフレームから構成される映像データを送信するデータ送信装置において、前記映像データの各フレームを表示する際の視聴環境照明の制御種別を示す照明制御種別情報を、前記映像データに付加して送信することを特徴とする。【００３０】
本願の第２の発明は、前記照明制御種別情報が、前記映像データのフレーム単位で付加されることを特徴とする。【００３１】
本願の第３の発明は、前記照明制御種別情報が、前記映像データの各フレームにおける特徴量に基づいて、視聴環境照明を切替制御する指示を含むことを特徴とする。【００３２】
本願の第４の発明は、前記照明制御種別情報が、前記映像データの各フレームにおける特徴量に関わらず、直前の視聴環境照明を維持制御する指示を含むものであることを特徴とする。【００３３】
本願の第５の発明は、前記照明制御種別情報が、前記映像データの各フレームにおける特徴量に関わらず、予め決められた所定の視聴環境照明に切替制御する指示を含むものであることを特徴とする。【００３４】
本願の第６の発明は、外部からの要求を受けて、映像データを構成する各フレームを表示する際の視聴環境照明の制御種別を示す照明制御種別情報を送信するデータ送信装置であって、前記照明制御種別情報を、前記映像データを構成する各フレームの出力開始タイミングとともに送信することを特徴とする。【００３５】
本願の第７の発明は、第６の発明における前記照明制御種別情報が、前記映像データの各フレームにおける特徴量に基づいて、視聴環境照明を切替制御する指示を含むことを特徴とする。【００３６】
本願の第８の発明は、第６の発明における前記照明制御種別情報が、前記映像データの各フレームにおける特徴量に関わらず、予め決められた所定の視聴環境照明に切替制御する指示を含むものであることを特徴とする。【００３７】
本願の第９の発明は、表示装置に表示すべき映像データと、該映像データを構成する各フレームを表示する際の視聴環境照明の制御種別を示す照明制御種別情報とを受信する受信手段と、前記映像データの特徴量と、前記照明制御種別情報とを用いて、前記表示装置の周辺に設置された照明装置の照明光を制御する制御手段とを備えたことを特徴とする。【００３８】
本願の第１０の発明は、前記制御手段が、前記照明制御種別情報に応じて、前記映像データの各フレームにおける特徴量に基づき、前記照明装置の照明光を切替制御することを特徴とする。【００３９】
本願の第１１の発明は、前記制御手段が、前記照明制御種別情報に応じて、前記映像データの各フレームにおける特徴量に関わらず、前記照明装置の照明光を維持制御することを特徴とする。【００４０】
本願の第１２の発明は、前記制御手段が、前記照明制御種別情報に応じて、前記映像データの各フレームにおける特徴量に関わらず、前記照明装置の照明光を予め決められた所定状態に制御することを特徴とする。【００４１】
本願の第１３の発明は、前記視聴環境制御装置と、該視聴環境制御装置によって視聴環境照明光を制御される照明装置とを備える視聴環境制御システムであることを特徴とする。【００４２】
本願の第１４の発明は、１以上のフレームから構成される映像データを送信するデータ送信方法において、前記映像データの各フレームを表示する際の視聴環境照明の制御種別を示す照明制御種別情報を、前記映像データに付加して送信することを特徴とする。【００４３】
本願の第１５の発明は、外部からの要求を受けて、映像データを構成する各フレームを表示する際の視聴環境照明の制御種別を示す照明制御種別情報を送信するデータ送信方法であって、前記照明制御種別情報を、前記映像データを構成する各フレームの出力開始タイミングとともに送信することを特徴とする。【００４４】
本願の第１６の発明は、表示装置に表示すべき映像データと、該映像データを構成する各フレームを表示する際の視聴環境照明の制御種別を示す照明制御種別情報とを受信し、前記映像データの特徴量と、前記照明制御種別情報とを用いて、前記表示装置の周辺に設置された照明装置の照明光を制御することを特徴とする。
【発明の効果】
【００４５】
本発明によれば、映像制作者の意図する撮影シーンの雰囲気や場面設定に適応させて、視聴環境の照明光を適切に制御することが可能となり、視聴者に臨場感を与えてより高度な映像効果を得ることができる。
【図面の簡単な説明】
【００４６】
【図１】従来技術による照明変動の問題点の一例を説明するための図である。
【図２】従来技術による照明変動の問題点の他の例を説明するための図である。
【図３】従来技術による照明変動の問題点の他の例を説明するための図である。
【図４】従来技術による照明変動の問題点の他の例を説明するための図である。
【図５】本発明の第１実施形態に係る視聴環境制御システムにおける映像送信装置の要部概略構成を示すブロック図である。
【図６】ＭＰＥＧにより符号化された動画像の符号化データの階層構造を説明するための図である。
【図７】本発明の第１実施形態の視聴環境制御システムにおける照明制御種別情報の一例を示す説明図である。
【図８】シーンチェンジを含む映像データの一部を示す図である。
【図９】映像の構成要素を説明するための図である。
【図１０】本発明の第１実施形態に係る視聴環境制御システムにおける映像受信装置の要部概略構成を示すブロック図である。
【図１１】本発明の第１実施形態に係る視聴環境制御システムにおける照明制御データ生成部の動作を示すフローチャートである。
【図１２】本発明の第２実施形態に係る視聴環境制御システムにおける外部サーバ装置の要部概略構成を示すブロック図である。
【図１３】本発明の第２実施形態に係る視聴環境制御システムにおける照明制御種別情報格納テーブルの一例を示す説明図である。
【図１４】本発明の第２実施形態に係る視聴環境制御システムにおける映像受信装置の要部概略構成を示すブロック図である。
【符号の説明】
【００４７】
１…データ多重部、２…送信部、１０…映像送信装置、３０、６０…映像受信装置、３１、６１…受信部、３２、６２…データ分離部、３３、３４…ディレイ発生部、３５、６５…照明制御データ生成部、３６…映像表示装置、３７…音声再生装置、３８…照明装置、５０…外部サーバ装置（データ送信装置）、５１…受信部、５２…データ格納部、５３…送信部、６６…ＣＰＵ、６７…送信部、６８…受信部。
【発明を実施するための最良の形態】
【００４８】
＜第１の実施形態＞
以下、本発明の視聴環境制御システムの第１実施形態について、図５乃至図１１とともに詳細に説明する。
本実施形態における映像送信装置（データ送信装置）１０は、図５に示すように、映像データ（Ｖ）、音声データ（Ａ）、付加データとして供給された照明制御種別情報（Ｃ）のそれぞれを多重するデータ多重部１と、データ多重部１の出力データに対して誤り訂正符号を付加する等した上で変調を施し、放送データ（Ｂ）として伝送路に送出する送信部２とを備えている。照明制御種別情報（Ｃ）は、映像データを構成する各フレームを表示する際の視聴環境照明の制御種別を示すものであり、ここでは、各フレームの映像特徴量に応じて視聴環境照明を切替制御するか、各フレームの映像特徴量に関わらず、直前の視聴環境照明を維持制御するか、或いは、各フレームの映像特徴量に関わらず、予め決められた所定の視聴環境照明に切替制御するかの制御種別を示すものとする。【００４９】
図６は、ＭＰＥＧ２（Moving Picture Experts Group 2）−Systemsで規定された動画像符号化データにおける階層構造の一部概略を示す説明図である。複数の連続するピクチャからなるシーケンスの符号化データは、（ａ）シーケンスレイヤ、（ｂ）ＧＯＰ（Group Of Pictures）レイヤ、（ｃ）ピクチャレイヤ、スライスレイヤ、マクロブロックレイヤ（不図示）及びブロックレイヤ（不図示）の６層の階層構造となっており、ピクチャレイヤ（ｃ）のデータは、先頭がピクチャヘッダー情報であり、その後に複数のスライスレイヤのデータ（スライス）が続く。【００５０】
ピクチャレイヤ（ｃ）のピクチャヘッダー情報領域には、ピクチャ・タイプやフレーム全体のスケールなどの予め定められた種々の情報が記述されるピクチャヘッダー領域（picture header）に加えて、付加的な任意の情報を記述することができるユーザ・データ（extensions and user data）領域が設けられており、本実施形態では、このユーザ・データ領域に照明制御種別情報を記述する。ここでは、各フレームのユーザ・データとして規定された８ビットの下位２ビットに当該フレームに対応した照明制御種別情報を記述する。【００５１】
例えば、図７に示すように、当該フレームの映像特徴量から撮影シーンの場（雰囲気）を推定し、視聴環境照明を切替制御するように指示する場合に付加されるユーザ・データは「００００００００」、当該フレームの映像特徴量に関わらず、予め決められた第１の明るさ及び色の視聴環境照明（デフォルト照明１）に切替制御するように指示する場合に付加されるユーザ・データは「０００００００１」、当該フレームの映像特徴量に関わらず、予め決められた第２の明るさ及び色の視聴環境照明（デフォルト照明２）に切替制御するように指示する場合に付加されるユーザ・データは「００００００１０」、当該フレームの映像特徴量に関わらず、直前の視聴環境照明を維持制御（照明切替無し）するように指示する場合に付加されるユーザ・データは「００００００１１」となる。なお、ここでは、デフォルト照明１として明るい白色照明、デフォルト照明２として暗い白色照明が設定されているものとする。【００５２】
なお、上記照明制御種別情報は、映像データを所定の方式により符号化（エンコード）する際に上述したピクチャレイヤ（ｃ）のユーザ・データ領域に記述されるようにしてもよいことは言うまでもない。上記の例では、４種類の照明制御種別を記述するために、ユーザ・データとして割り当てられた８ビットの下位２ビットを利用しているが（従って、ユーザ・データの上位６ビットを「０」で表している）、本発明はこれに限られない。すなわち、本発明においては、各フレーム表示時における視聴環境照明の制御種別を識別することが可能な情報を、映像データまたは音声データに付加すればよく、その際のデータ構造は上記のものに限らない。例えば、照明制御種別情報を、ＭＰＥＧ２−Systemsで規定されたトランスポートストリームパケット（ＴＳＰ）の拡張ヘッダに付加して伝送するようにしてもよい。そしてまた、照明制御種別情報は、上記のものに限られず、少なくとも当該フレームの映像特徴量に基づいた照明制御を行うか否かを表す１ビット以上の情報であればよく、さらに、８種類以上の照明制御種別を３ビット以上の情報で表現してもよい。【００５３】
さらに、上述した照明制御種別情報は、送信側で任意に付加することが可能であるが、映像撮影時のシナリオ（脚本）に基づいて生成することもできる。例えば、図８に示すように、映像撮影シーンの最初のフレーム（シーンチェンジ後の最初のフレーム）１６には、当該フレームの映像特徴量から撮影シーンの場（雰囲気）を推定し、視聴環境照明を切替制御するように指示するユーザ・データ「００００００００」を付加し、同じシーンに含まれるその他のフレーム１７〜２１には、各フレームの映像特徴量に関わらず、直前の視聴環境照明を維持制御（照明切替無し）するように指示するユーザ・データ「００００００１１」を付加することにより、映像制作者の意図を反映したシーン変化点に合わせて、後述する視聴環境照明の切替制御を適切に行うことができる。【００５４】
次に、シーンやショットを含む映像の構成について、図９を参照して説明する。連続する動画像シーケンスを構成する映像データは、図９に示すように、３層（レイヤ）構成に分けて考えることができる。映像(Ｖｉｄｅｏ)を構成する第１レイヤ（＃１）は、フレーム（Ｆｒａｍｅ）である。フレームは物理的なレイヤであり、単一の２次元画像を指す。フレームは、通常、毎秒３０フレームのレートで得られる。第２レイヤ（＃２）は、ショット（Ｓｈｏｔ）である。ショットは単一のカメラにより撮影されたフレーム列である。そして、第３レイヤ（＃３）がシーン（Ｓｃｅｎｅ）である。シーンはストーリー的なつながりを有するショット列である。【００５５】
ここでは、上述したとおり、映像データのフレーム単位で、上記照明制御種別情報を付加することができ、映像制作者（脚本家や演出家など）の意図に応じて、後述するように、各フレームを表示する際の視聴環境照明を任意のタイミングで切り替えて適切に制御することが可能になっている。【００５６】
次に、上記映像送信装置より送出された放送データを受信して、映像・音声を表示・再生するとともに、そのときの視聴環境照明を制御する映像受信装置（データ受信装置）について説明する。【００５７】
本実施形態における映像受信装置は、図１０に示すように、伝送路より入力された放送データ（Ｂ）を受信して復調するとともに、誤り訂正を行う受信部３１と、受信部３１の出力データから、映像表示装置３６に出力する映像データ及びＴＣ（タイムコード）、音声再生装置３７に出力する音声データ及びＴＣ（タイムコード）、付加情報としての照明制御種別情報のそれぞれを分離・抽出するデータ分離部３２と、データ分離部３２で分離された照明制御種別情報と、前記映像データ及び前記音声データの特徴量とに基づいて、各フレーム表示時に適した照明制御データ（Ｒ，Ｇ，Ｂデータ）を生成し、視聴環境空間を照明する照明装置３８に出力する照明制御データ生成部３５と、照明制御データ生成部３５における処理時間分だけ映像データ、音声データを遅延して出力するディレイ発生部３３，３４とを備えている。【００５８】
ここで、照明装置３８は、映像表示装置３６の周囲に設置されて、所定の色相をもった例えばＲ，Ｇ，Ｂの三原色の光を発光するＬＥＤにより構成することができる。ただし、照明装置３８は、映像表示装置３６の周囲環境の照明色及び明るさを制御することができるような構成であればよく、上記のような所定色を発光するＬＥＤの組み合わせに限ることなく、白色ＬＥＤと色フィルタとによって構成してもよく、あるいは白色電球や蛍光管とカラーフィルタとの組み合わせやカラーランプ等を適用することもできる。また、照明装置３８は１個以上設置されていればよい。【００５９】
そして、また、タイムコード（ＴＣ）は、映像データ、音声データそれぞれの再生時間情報を示すために付加された情報であり、例えば、映像データの時間（ｈ）：分（ｍ）：秒（ｓ）：フレーム（ｆ）を示す情報により構成されている。【００６０】
本実施形態の照明制御データ生成部３５は、前記照明制御種別情報により指定された照明制御種別に応じて、各フレーム表示時に適した照明制御データ（Ｒ，Ｇ，Ｂデータ）を生成する。【００６１】
すなわち、前記照明制御種別情報により、各フレームの映像特徴量／音声特徴量に基づいて、視聴環境照明を切替制御するよう指示されている場合は、当該フレームの映像データ及び音声データに基づいて撮影現場の照明状態や場面設定（雰囲気）を推定し、この推定結果に応じて、照明装置３８を制御する照明制御データを出力する。【００６２】
この照明制御データ生成部３５による撮影時の周囲光の状態の推定方法は、公知のものをはじめとする各種の技術を用いることができる。なお、ここでは、場（雰囲気）の推定のために映像データの特徴量に加えて、音声データの特徴量も用いているが、これは場（雰囲気）の推定精度をより向上させるためであり、映像データの特徴量のみから撮影シーンの場（雰囲気）を推定するようにしてもよい。【００６３】
また、映像データの特徴量としては、例えば、上述した従来例のように、画面の所定領域における色信号、輝度信号をそのまま用いることもできるし、これらから映像撮影時における周囲光の色温度を求めて用いてもよい。さらに、これらを映像データの特徴量として切替出力可能に構成してもよい。また、音声データの特徴量としては、音量、音声周波数などを用いることができる。【００６４】
これによって、照明制御データ生成部３５は、映像データ、音声データの特徴量に基づいて、映像撮影時の場（雰囲気）、すなわち周囲光の状態を推定することができ、前記照明制御種別情報により指定されたタイミングで、この場（雰囲気）推定に基づいた照明光に切り替えて、視聴環境空間を照射することが可能となる。【００６５】
また、照明制御データ生成部３５は、１以上の予め決められた明るさ及び色の照明光に対応した照明制御データを、図示しない記憶部に格納している。前記照明制御種別情報により、各フレームの映像特徴量／音声特徴量に関わらず、予め決められた所定の視聴環境照明に切替制御するよう指示されている場合は、上述した映像撮影時の場（雰囲気）の推定処理は行わず、対応する照明制御データを上記記憶部から読み出して出力する。【００６６】
ここでは、照明制御データ生成部３５には、デフォルト照明１（明るい白色照明）、デフォルト照明２（暗い白色照明）に対応する２種類の照明制御データが予め用意されており、前記照明制御種別情報により視聴環境照明をデフォルト照明１に切替制御するよう指示されている場合は、デフォルト照明１に対応した照明制御データを出力し、前記照明制御種別情報により視聴環境照明をデフォルト照明２に切替制御するよう指示されている場合は、デフォルト照明２に対応した照明制御データを出力する。【００６７】
これによって、映像データ、音声データの特徴量に関わらず、前記照明制御種別情報により指定されたタイミングで、予め決められた所定の照明光に切り替えて、視聴環境空間を照射することが可能となる。【００６８】
さらに、前記照明制御種別情報により、各フレームの映像特徴量／音声特徴量に関わらず、直前の視聴環境照明を維持制御（照明切替無し）するよう指示されている場合は、上述した映像撮影時の場（雰囲気）の推定処理は行わず、直前のフレームに対して出力した照明制御データを繰り返し出力する。【００６９】
これによって、映像データ、音声データの特徴量の変化に関わらず、任意の期間、視聴環境照明光を同一状態に保持することが可能となる。例えば、撮影時の場（雰囲気）、すなわち、照明状態に変化のない同一シーン内では、視聴環境照明光を略同一に保持することが可能になる。また、映像特徴量／音声特徴量に基づいた視聴環境照明の制御が不適切な期間では、例えば、一定の白色照明光を保持して照射することが可能となる。従って、不適切な視聴環境照明により視聴者に違和感を与えることを防止し、最適な視聴環境を実現することができる。【００７０】
一方、映像表示装置３６、音声再生装置３７に出力される映像データ、音声データは、上述した映像データ及び音声データによる場（雰囲気）推定処理に必要な時間分だけ、ディレイ発生部３３，３４により遅延されるため、映像受信装置から照明装置３８に出力される照明制御データと、映像表示装置３６、音声再生装置３７に出力される映像データ、音声データとは同期することになり、映像表示に同期したタイミングで照明装置３８の照明光を切り替えることが可能となる。【００７１】
次に、照明制御データ生成部３５における処理の流れを、図１１のフローチャートとともに説明する。まず入力映像データから新しいフレームを取得し（ステップＳ１）、その取得したフレームの映像データ／音声データの特徴量に基づいて、視聴環境照明を切替制御するかどうかを、照明制御種別情報に基づいて判別する（ステップＳ２）。【００７２】
取得したフレームの映像特徴量／音声特徴量に基づいて、視聴環境照明を切替制御する場合、当該フレームの映像データ／音声データを用いてその映像特徴量／音声特徴量を検出することにより、場（雰囲気）の推定処理を行い（ステップＳ３）、その推定処理結果に基づいて、照明装置３８を制御するための照明制御データを生成する（ステップＳ４）。そして照明制御データに基づき照明装置３８による照明光の切替制御を行い（ステップＳ５）、この後処理が終了であるかどうかを判別する（ステップＳ６）。映像データがさらに続く場合には、ステップＳ１に戻って新しいフレームを取得する。【００７３】
上記ステップＳ２において、取得したフレームの映像データ／音声データの特徴量に基づいて、視聴環境照明を切替制御しないと判別された場合、視聴環境照明をデフォルト照明１に切替制御するかどうかを、照明制御種別情報に基づいて判別する（ステップＳ７）。取得したフレームの映像特徴量／音声特徴量に関わらず、視聴環境照明をデフォルト照明１に切替制御する場合、予め用意されたデフォルト照明１に対応する照明制御データを読み込み（ステップＳ８）、この照明制御データに基づき照明装置３８による照明光の切替制御を行う（ステップＳ５）。この後処理が終了であるかどうかを判別し（ステップＳ６）、映像データがさらに続く場合には、ステップＳ１に戻って新しいフレームを取得する。【００７４】
また、上記ステップＳ７において、視聴環境照明をデフォルト照明１に切替制御しないと判別された場合、視聴環境照明をデフォルト照明２に切替制御するかどうかを、照明制御種別情報に基づいて判別する（ステップＳ９）。取得したフレームの映像特徴量／音声特徴量に関わらず、視聴環境照明をデフォルト照明２に切替制御する場合、予め用意されたデフォルト照明２に対応する照明制御データを読み込み（ステップＳ１０）、この照明制御データに基づき照明装置３８による照明光の切替制御を行う（ステップＳ５）。この後、処理が終了であるかどうかを判別し（ステップＳ６）、映像データがさらに続く場合には、ステップＳ１に戻って新しいフレームを取得する。【００７５】
さらに、上記ステップＳ９において、視聴環境照明をデフォルト照明２に切替制御しないと判別された場合、取得したフレームの映像特徴量／音声特徴量に関わらず、直前の視聴環境照明を維持制御するため、照明光の切替制御を行うことなく、処理が終了であるかどうかを判別し（ステップＳ６）、映像データがさらに続く場合には、ステップＳ１に戻って新しいフレームを取得する。【００７６】
以上のように、本実施形態においては、映像データに付加された照明制御種別情報に基づいて、視聴環境照明を制御する構成としているので、映像制作者の意図に応じた任意のタイミングで視聴環境照明の切替制御を行うことが可能となる。例えば、図１、図２に示した映像シーンを表示する際、シーン開始フレームの映像特徴量／音声特徴量に応じた視聴環境照明を、このシーンが終了するまで維持することができる。すなわち、同一シーン内では視聴環境照明光の明るさ及び色を略一定に保持することが可能になるので、同じシーン内で視聴環境照明が激しく変化して臨場感や雰囲気を損なってしまうことを防止し、常に適切な視聴環境を実現することができる。【００７７】
また、本実施形態においては、映像／音声データの特徴量に応じた視聴環境照明と、予め決められた所定の視聴環境照明とを適切に切替制御することにより、最適な視聴環境の照明制御を実現することが可能となる。例えば、図３に示したドラマ番組のオープニング（あらすじ）を表示する際には、各フレームの映像特徴量／音声特徴量に関わらず、視聴環境照明をデフォルト設定された一定の白色照明状態とすることができ、短時間で視聴環境照明光が激しく変化して視聴者に違和感を与えることを防止し、適切な視聴環境を実現することができる。【００７８】
さらに、例えば、図４に示したシーンとシーンの間に短時間のショットが挿入された映像を表示する際には、このショットを構成する各フレームの映像特徴量／音声特徴量に関わらず、直前のシーンに対する視聴環境照明をそのまま維持するか、或いは視聴環境照明をデフォルト設定された一定の白色照明状態とすることができ、短時間で視聴環境照明光が激しく変化して視聴者に違和感を与えることを防止し、適切な視聴環境を実現することができる。【００７９】
なお、本実施形態においては、各シーンのストーリー上における設定場面の区切り位置とも関連する照明制御種別情報を送受信するようにしているので、この照明制御種別情報を用いて所望のシーンを検索したり編集するなど、視聴環境照明の制御以外にも様々な機能を実現することが可能となる。【００８０】
また、上記本発明の第１の実施形態においては、照明制御種別情報が放送データに付加されて送信される場合について説明したが、放送データに照明制御種別情報が付加されていない場合、表示する映像データに対応する照明制御種別情報を外部サーバ装置等より送受信することによって、映像再生時の最適な視聴環境を実現することが可能となる。これについて、本発明の第２の実施形態として以下に説明する。【００８１】
＜第２の実施形態＞
以下、本発明の視聴環境制御システムの第２実施形態について、図１２乃至図１４とともに詳細に説明するが、上記第１の実施形態と同一部分には同一符号を付し、その説明は省略する。
本実施形態における外部サーバ装置（データ送信装置）５０は、図１２に示すように、映像受信装置（データ受信装置）側から特定の映像データ（コンテンツ）に関する照明制御種別情報の送信要求を受信する受信部５１と、映像データ（コンテンツ）毎の照明制御種別情報を格納しているデータ格納部５２と、送信要求を受けた照明制御種別情報を要求元の映像受信装置（データ受信装置）へ送信する送信部５３とを備えている。【００８２】
ここで、本実施形態のデータ格納部５２に格納されている照明制御種別情報は、図１３に示すように、各映像フレームの映像表示装置３６への出力開始タイミング（再生開始タイミングともいう。以下、単に開始タイミングと称す）に対応付けてテーブル形式で記述されており、送信要求を受けた映像データ（番組コンテンツ）の照明制御種別情報を、当該映像データを構成するフレームの開始ＴＣ（タイムコード）とともに、送信部５３より要求元の映像受信装置へ送信する。【００８３】
なお、本実施形態においても、図７に示した４通り（２ビット）の照明制御種別を想定しているが、ここでは、場（雰囲気）推定に基づく照明切替制御を行うフレームと、デフォルト照明１，２へ切替制御を行うフレームに関してのみその照明制御種別を照明制御種別情報格納テーブルに記述し、照明切替を禁止するフレームに関してはその照明制御種別の記述を省略している。すなわち、照明制御種別情報格納テーブルに特に記述されていないフレームを表示する際には、直前の視聴環境照明を維持することとしており、これによって、照明制御種別情報のデータ容量を大幅に削減している。【００８４】
次に、上記外部サーバ装置５０より送出された照明制御種別情報を受けて、視聴環境照明を制御する映像受信装置（データ受信装置）６０について説明する。本実施形態における映像受信装置６０は、図１４に示すように、伝送路より入力された放送データ（Ｂ）を受信して復調するとともに、誤り訂正を行う受信部６１と、受信部６１の出力データから、映像表示装置３６に出力する映像データ、音声再生装置３７に出力する音声データのそれぞれを分離・抽出するデータ分離部６２と、表示する映像データ（コンテンツ）に対応した照明制御種別情報の送信要求を、通信ネットワークを介して外部サーバ装置（データ送信装置）に送出する送信部６７と、前記送信要求した照明制御種別情報を、通信ネットワークを介して外部サーバ装置より受信する受信部６８とを備えている。【００８５】
また、前記受信部６８で受信した照明制御種別情報を一旦記憶し、この照明制御種別情報に対応付けられたフレーム開始ＴＣ（タイムコード）と、データ分離部６２で抽出された映像データのＴＣ（タイムコード）とを比較し、それらが一致したときに、対応する照明制御種別情報を示す情報を出力するＣＰＵ６６と、ＣＰＵ６６からの照明制御種別情報と、前記映像データ及び前記音声データの特徴量とに基づいて、照明制御データ（Ｒ，Ｇ，Ｂデータ）を生成し、視聴環境空間を照明する照明装置３８に出力する照明制御データ生成部６５とを備えている。【００８６】
すなわち、ＣＰＵ６６は、外部サーバ装置より受信して内部に記憶している照明制御種別情報格納テーブルの各フレームの開始タイムコードと、照明制御データ生成部６５に入力される映像データのタイムコードとを比較し、これらが一致した時にそのフレーム（タイムコード）に対応する照明制御種別情報を照明制御データ生成部６５に出力する。【００８７】
そして、本実施形態の照明制御データ生成部６５は、上述した第１の実施形態における照明制御データ生成部３５と同様、前記照明制御種別情報に応じて、各フレーム表示時に適した照明制御データ（Ｒ，Ｇ，Ｂデータ）を生成する。【００８８】
すなわち、前記照明制御種別情報により、各フレームの映像特徴量／音声特徴量に基づいて、視聴環境照明を切替制御するよう指示されている場合は、当該フレームの映像データ及び音声データに基づいて撮影現場の照明状態や場面設定（雰囲気）を推定し、この推定結果に応じて、照明装置３８を制御する照明制御データを出力する。【００８９】
また、前記照明制御種別情報により、各フレームの映像特徴量／音声特徴量に関わらず、予め決められた所定の視聴環境照明に切替制御するよう指示されている場合は、上述した映像撮影時の場（雰囲気）の推定処理は行わず、予め内部に用意されている照明制御データを読み出して出力する。【００９０】
上記以外の場合は、各フレームの映像特徴量／音声特徴量に関わらず、直前の視聴環境照明を維持制御（照明切替無し）するよう指示されているものとして、上述した映像撮影時の場（雰囲気）の推定処理は行わず、直前のフレームに対して出力された照明制御データを繰り返し出力する。【００９１】
これによって、放送データに照明制御種別情報が付加されていない場合であっても、表示映像データ（番組コンテンツ）に対応する照明制御種別情報を外部サーバ装置より入手し、この照明制御種別情報に基づいて、視聴環境照明を制御する構成としているので、上述した第１の実施形態と同様、映像制作者の意図に応じた任意のタイミングで視聴環境照明の切替制御を行うとともに、映像データの特徴量に応じた視聴環境照明と、予め決められた所定の視聴環境照明とを適切に切替制御することにより、最適な視聴環境の照明制御を実現することが可能となる。【００９２】
なお、本実施形態においても、各シーンのストーリー上における設定場面の区切り位置とも関連する照明制御種別情報を送受信するようにしているので、この照明制御種別情報を用いて所望のシーンを検索したり編集するなど、視聴環境照明の制御以外にも様々な機能を実現することが可能である。【００９３】
また、本発明の視聴環境制御装置、方法、及び視聴環境制御システムは、上述した本発明の主旨を逸脱しない範囲で、様々な実施形態により実現することが可能である。例えば、環境照明制御装置は映像表示装置内に設けられてもよく、入力映像データに含まれる種々の情報に基づいて、外部の照明機器を制御することができるような構成としてもよいことは言うまでもない。【００９４】
さらに、上述した照明制御種別情報は、放送データから分離・取得する場合や、外部サーバ装置から取得する場合に限られず、例えば、外部機器（ＤＶＤ再生機やブルーレイディスク再生機など）で再生された映像情報を表示する場合、メディア媒体内に付加された照明制御種別情報を読み出して、これを用いるようにしてもよい。
【図１】
2007145064.tif 000003
【図２】
2007145064.tif 000004
【図３】
2007145064.tif 000005
【図４】
2007145064.tif 000006
【図５】
2007145064.tif 000007
【図６】
2007145064.tif 000008
【図７】
2007145064.tif 000009
【図８】
2007145064.tif 000010
【図９】
2007145064.tif 000011
【図１０】
2007145064.tif 000012
【図１１】
2007145064.tif 000013
【図１２】
2007145064.tif 000014
【図１３】
2007145064.tif 000015
【図１４】
2007145064.tif 000016
【手続補正書】
【提出日】平成20年3月10日(2008.3.10)
【手続補正１】
【補正対象書類名】特許請求の範囲
【補正対象項目名】全文
【補正方法】変更
【補正の内容】
【特許請求の範囲】
【請求項１】
１以上のフレームから構成される映像データを送信するデータ送信装置において、
前記映像データの各フレームを表示する際の視聴環境照明を制御する照明制御データを前記映像データから求める際の、制御種別を示す照明制御種別情報を、前記映像データに付加して送信することを特徴とするデータ送信装置。
【請求項２】
前記照明制御種別情報は、前記映像データのフレーム単位で付加されることを特徴とする請求項１に記載のデータ送信装置。
【請求項３】
前記照明制御種別情報は、前記映像データの各フレームにおける特徴量に基づいて、視聴環境照明を切替制御する指示を含むことを特徴とする請求項１に記載のデータ送信装置。
【請求項４】
前記照明制御種別情報は、前記映像データの各フレームにおける特徴量に関わらず、直前の視聴環境照明を維持制御する指示を含むものであることを特徴とする請求項１に記載のデータ送信装置。
【請求項５】
前記照明制御種別情報は、前記映像データの各フレームにおける特徴量に関わらず、予め決められた所定の視聴環境照明に切替制御する指示を含むものであることを特徴とする請求項１に記載のデータ送信装置。
【請求項６】
外部からの要求を受けて、映像データを構成する各フレームを表示する際の視聴環境照明を制御する照明制御データを前記映像データから求める際の、制御種別を示す照明制御種別情報を送信するデータ送信装置であって、
前記照明制御種別情報を、前記映像データを構成する各フレームの出力開始タイミングとともに送信することを特徴とするデータ送信装置。
【請求項７】
前記照明制御種別情報は、前記映像データの各フレームにおける特徴量に基づいて、視聴環境照明を切替制御する指示を含むことを特徴とする請求項６に記載のデータ送信装置。
【請求項８】
前記照明制御種別情報は、前記映像データの各フレームにおける特徴量に関わらず、予め決められた所定の視聴環境照明に切替制御する指示を含むものであることを特徴とする請求項６に記載のデータ送信装置。
【請求項９】
表示装置に表示すべき映像データと、該映像データを構成する各フレームを表示する際の視聴環境照明を制御する照明制御データを前記映像データから求める際の、制御種別を示す照明制御種別情報とを受信する受信手段と、
前記映像データの特徴量と、前記照明制御種別情報とを用いて、前記表示装置の周辺に設置された照明装置の照明光を制御する制御手段とを備えたことを特徴とする視聴環境制御装置。
【請求項１０】
前記制御手段は、前記照明制御種別情報に応じて、前記映像データの各フレームにおける特徴量に基づき、前記照明装置の照明光を切替制御することを特徴とする請求項９に記載の視聴環境制御装置。
【請求項１１】
前記制御手段は、前記照明制御種別情報に応じて、前記映像データの各フレームにおける特徴量に関わらず、前記照明装置の照明光を維持制御することを特徴とする請求項９に記載の視聴環境制御装置。
【請求項１２】
前記制御手段は、前記照明制御種別情報に応じて、前記映像データの各フレームにおける特徴量に関わらず、前記照明装置の照明光を予め決められた所定状態に制御することを特徴とする請求項９に記載の視聴環境制御装置。
【請求項１３】
請求項９乃至１２のいずれかに記載の視聴環境制御装置と、該視聴環境制御装置によって視聴環境照明光を制御される照明装置とを備えることを特徴とする視聴環境制御システム。
【請求項１４】
１以上のフレームから構成される映像データを送信するデータ送信方法において、
前記映像データの各フレームを表示する際の視聴環境照明を制御する照明制御データを前記映像データから求める際の、制御種別を示す照明制御種別情報を、前記映像データに付加して送信することを特徴とするデータ送信方法。
【請求項１５】
外部からの要求を受けて、映像データを構成する各フレームを表示する際の視聴環境照明を制御する照明制御データを前記映像データから求める際の、制御種別を示す照明制御種別情報を送信するデータ送信方法であって、
前記照明制御種別情報を、前記映像データを構成する各フレームの出力開始タイミングとともに送信することを特徴とするデータ送信方法。
【請求項１６】
表示装置に表示すべき映像データと、該映像データを構成する各フレームを表示する際の視聴環境照明を制御する照明制御データを前記映像データから求める際の、制御種別を示す照明制御種別情報とを受信し、
前記映像データの特徴量と、前記照明制御種別情報とを用いて、前記表示装置の周辺に設置された照明装置の照明光を制御することを特徴とする視聴環境制御方法。
【手続補正２】
【補正対象書類名】明細書
【補正対象項目名】０００６
【補正方法】変更
【補正の内容】
【０００６】
聴環境照明光をそのまま維持して視聴環境空間に照射するのが望ましい。
［００２７］
本発明は、上記課題に鑑みてなされたものであり、視聴環境の照明光を切り替えるタイミングを適切に制御することにより、最適な視聴環境の照明制御を実現することが可能なデータ送信装置、データ送信方法、視聴環境制御装置、視聴環境制御システム及び視聴環境制御方法を提供することを目的とする。
［００２８］
また、映像データの特徴量に応じた照明光と、予め決められた所定の照明光とを適切に切替制御することにより、最適な視聴環境の照明制御を実現することが可能なデータ送信装置、データ送信方法、視聴環境制御装置、視聴環境制御システム及び視聴環境制御方法を提供することを目的とする。
課題を解決するための手段
［００２９］
本願の第１の発明は、１以上のフレームから構成される映像データを送信するデータ送信装置において、前記映像データの各フレームを表示する際の視聴環境照明を制御する照明制御データを前記映像データから求める際の、制御種別を示す照明制御種別情報を、前記映像データに付加して送信することを特徴とする。
［００３０］
本願の第２の発明は、前記照明制御種別情報が、前記映像データのフレーム単位で付加されることを特徴とする。
［００３１］
本願の第３の発明は、前記照明制御種別情報が、前記映像データの各フレームにおける特徴量に基づいて、視聴環境照明を切替制御する指示を含むことを特徴とする。
［００３２］
本願の第４の発明は、前記照明制御種別情報が、前記映像データの各フレームにおける特徴量に関わらず、直前の視聴環境照明を維持制御する指示を含むものであることを特徴とする。
［００３３］
本願の第５の発明は、前記照明制御種別情報が、前記映像データの各フレームにおける特徴量に関わらず、予め決められた所定の視聴環境照明に切替制御する指示を含むものであることを特徴とする。
［００３４］
本願の第６の発明は、外部からの要求を受けて、映像データを構成する各フレームを表示する際の視聴環境照明を制御する照明制御データを前記映像データから求める際の、制御種別を示す照明制御種別情報を送信するデータ送信装置であって、前記照明制御種別情報を、前記映像データを構成する各フ
【手続補正３】
【補正対象書類名】明細書
【補正対象項目名】０００７
【補正方法】変更
【補正の内容】
【０００７】
レームの出力開始タイミングとともに送信することを特徴とする。
［００３５］
本願の第７の発明は、第６の発明における前記照明制御種別情報が、前記映像データの各フレームにおける特徴量に基づいて、視聴環境照明を切替制御する指示を含むことを特徴とする。
［００３６］
本願の第８の発明は、第６の発明における前記照明制御種別情報が、前記映像データの各フレームにおける特徴量に関わらず、予め決められた所定の視聴環境照明に切替制御する指示を含むものであることを特徴とする。
［００３７］
本願の第９の発明は、表示装置に表示すべき映像データと、該映像データを構成する各フレームを表示する際の視聴環境照明を制御する照明制御データを前記映像データから求める際の、制御種別を示す照明制御種別情報とを受信する受信手段と、前記映像データの特徴量と、前記照明制御種別情報とを用いて、前記表示装置の周辺に設置された照明装置の照明光を制御する制御手段とを備えたことを特徴とする。
［００３８］
本願の第１０の発明は、前記制御手段が、前記照明制御種別情報に応じて、前記映像データの各フレームにおける特徴量に基づき、前記照明装置の照明光を切替制御することを特徴とする。
［００３９］
本願の第１１の発明は、前記制御手段が、前記照明制御種別情報に応じて、前記映像データの各フレームにおける特徴量に関わらず、前記照明装置の照明光を維持制御することを特徴とする。
［００４０］
本願の第１２の発明は、前記制御手段が、前記照明制御種別情報に応じて、前記映像データの各フレームにおける特徴量に関わらず、前記照明装置の照明光を予め決められた所定状態に制御することを特徴とする。
［００４１］
本願の第１３の発明は、前記視聴環境制御装置と、該視聴環境制御装置によって視聴環境照明光を制御される照明装置とを備える視聴環境制御システムであることを特徴とする。
［００４２］
本願の第１４の発明は、１以上のフレームから構成される映像データを送信するデータ送信方法において、前記映像データの各フレームを表示する際の視聴環境照明を制御する照明制御データを前記映像データから求める際の、制御種別を示す照明制御種別情報を、前記映像データに付加して送信することを特徴とする。
【手続補正４】
【補正対象書類名】明細書
【補正対象項目名】０００８
【補正方法】変更
【補正の内容】
【０００８】
［００４３］
本願の第１５の発明は、外部からの要求を受けて、映像データを構成する各フレームを表示する際の視聴環境照明を制御する照明制御データを前記映像データから求める際の、制御種別を示す照明制御種別情報を送信するデータ送信方法であって、前記照明制御種別情報を、前記映像データを構成する各フレームの出力開始タイミングとともに送信することを特徴とする。
［００４４］
本願の第１６の発明は、表示装置に表示すべき映像データと、該映像データを構成する各フレームを表示する際の視聴環境照明を制御する照明制御データを前記映像データから求める際の、制御種別を示す照明制御種別情報とを受信し、前記映像データの特徴量と、前記照明制御種別情報とを用いて、前記表示装置の周辺に設置された照明装置の照明光を制御することを特徴とする。
発明の効果
［００４５］
本発明によれば、映像制作者の意図する撮影シーンの雰囲気や場面設定に適応させて、視聴環境の照明光を適切に制御することが可能となり、視聴者に臨場感を与えてより高度な映像効果を得ることができる。
図面の簡単な説明
［００４６］
［図１］従来技術による照明変動の問題点の一例を説明するための図である。
［図２］従来技術による照明変動の問題点の他の例を説明するための図である。
［図３］従来技術による照明変動の問題点の他の例を説明するための図である。
［図４］従来技術による照明変動の問題点の他の例を説明するための図である。
［図５］本発明の第１実施形態に係る視聴環境制御システムにおける映像送信装置の要部概略構成を示すブロック図である。
［図６］ＭＰＥＧにより符号化された動画像の符号化データの階層構造を説明するための図である。
［図７］本発明の第１実施形態の視聴環境制御システムにおける照明制御種別情報の一例を示す説明図である。
［図８］シーンチェンジを含む映像データの一部を示す図である。
［図９］映像の構成要素を説明するための図である。
［図１０］本発明の第１実施形態に係る視聴環境制御システムにおける映像受信装置の要部概略構成を示すブロック図である。
［図１１］本発明の第１実施形態に係る視聴環境制御システムにおける照明制御データ
【国際調査報告】
2007145064.tif 000017
2007145064.tif 000018
2007145064.tif 000019