(57)【特許請求の範囲】
【請求項１】
表示装置に表示すべき映像データの特徴量に基づいて、１以上の照明装置の照明光を制御する視聴環境制御装置であって、
前記表示装置の設置位置に対する前記照明装置の設置位置に関する情報を視聴者に入力させる情報入力手段と、
前記情報入力手段により入力された前記表示装置の設置位置に対する前記照明装置の設置位置に関する情報に応じて抽出される、前記映像データの特徴量に基づいて、各照明装置を制御するための照明制御データを生成する照明データ生成手段とを備えたことを特徴とする視聴環境制御装置。
【請求項２】
外部装置から取得した仮想的な視聴環境空間における照明位置に関するリファレンスデータ及び該仮想的な視聴環境空間における照明位置に対応した照明制御データに基づいて、１以上の照明装置の照明光を制御する視聴環境制御装置であって、
前記表示装置の設置位置に対する前記照明装置の設置位置に関する情報を視聴者に入力させる情報入力手段と、
前記情報入力手段により入力された前記表示装置の設置位置に対する前記照明装置の設置位置に関する情報と前記リファレンスデータとに基づいて、前記仮想的な視聴環境空間における照明位置に対応した照明制御データを、各照明装置を制御するための照明制御データに変換する照明データ変換手段とを備えたことを特徴とする視聴環境制御装置。
【請求項３】
外部装置から取得した照明制御データに基づいて、１以上の照明装置の照明光を制御する視聴環境制御装置であって、
前記表示装置の設置位置に対する前記照明装置の設置位置に関する情報を視聴者に入力させる情報入力手段と、
前記情報入力手段により入力された前記表示装置の設置位置に対する前記照明装置の設置位置に関する情報を、前記外部装置に送信する送信手段と、
前記表示装置の設置位置に対する前記照明装置の設置位置に関する情報に基づいて外部装置で生成された照明制御データを受信する受信手段とを備えたことを特徴とする視聴環境制御装置。
【請求項４】
前記情報入力手段は、さらに前記表示装置の画面方向に関する情報を視聴者に入力させることを特徴とする請求項１乃至３のいずれかに記載の視聴環境制御装置。
【請求項５】
前記情報入力手段は、さらに前記表示装置の画面サイズに関する情報を視聴者に入力させることを特徴とする請求項１乃至４のいずれかに記載の視聴環境制御装置。
【請求項６】
前記情報入力手段は、さらに前記各照明装置の照射方向に関する情報を視聴者に入力させることを特徴とする請求項１乃至５のいずれかに記載の視聴環境制御装置。
【請求項７】
前記情報入力手段は、さらに前記照明装置の種類またはサイズの少なくともいずれか1つを視聴者に入力させることを特徴とする請求項１乃至６のいずれかに記載の視聴環境制御装置。
【請求項８】
前記情報入力手段は、さらに前記表示装置および前記照明装置が設置されている部屋の大きさに関する情報を視聴者に入力させることを特徴とする請求項１乃至７のいずれかに記載の視聴環境制御装置。
【請求項９】
前記情報入力手段は、さらに前記表示装置および前記照明装置が設置されている部屋の壁の色に関する情報を視聴者に入力させることを特徴とする請求項１乃至８のいずれかに記載の視聴環境制御装置。
【請求項１０】
前記情報入力手段による情報入力時に、前記表示装置および前記照明装置を含む部屋の模式図を、前記表示装置に表示する表示手段を備え、
該表示手段によって表示される表示内容は、前記情報入力手段により入力された情報に連動して変更されることを特徴とする請求項１乃至９のいずれかに記載の視聴環境制御装置。
【請求項１１】
前記表示手段は、まず前記部屋の大きさに関する情報の設定入力を促す入力画面を表示し、
前記部屋の大きさの設定が完了した後に、前記表示装置もしくは前記照明装置の少なくとも位置に関する情報入力を促す画面を表示することを特徴とする請求項１０に記載の視聴環境制御装置。
【請求項１２】
前記表示手段により表示される部屋の模式図は、該部屋の平面図と側面図とで表されることを特徴とする請求項１０又は１１に記載の視聴環境制御装置。
【請求項１３】
前記表示装置により表示される部屋の模式図は、該部屋の外の任意視点から俯瞰した立体図で表されることを特徴とする請求項１０又は１１に記載の視聴環境制御装置。
【請求項１４】
前記請求項１乃至１３のいずれかに記載の視聴環境制御装置と、前記映像データを表示するための表示装置と、該表示装置の周囲に設置された照明装置とを備えたことを特徴とする視聴環境制御システム。
【請求項１５】
表示装置に表示すべき映像データの特徴量に基づいて、１以上の照明装置の照明光を制御する視聴環境制御方法であって、
前記表示装置の設置位置に対する前記照明装置の設置位置に関する情報を視聴者に入力させる情報入力ステップと、
前記情報入力手段により入力された前記表示装置の設置位置に対する前記照明装置の設置位置に関する情報に応じて抽出される、前記映像データの特徴量に基づいて、各照明装置を制御するための照明制御データを生成する照明データ生成ステップとを備えたことを特徴とする視聴環境制御方法。
【請求項１６】
外部装置から取得した仮想的な視聴環境空間における照明位置に関するリファレンスデータ及び該仮想的な視聴環境空間における照明位置に対応した照明制御データに基づいて、１以上の照明装置の照明光を制御する視聴環境制御方法であって、
前記表示装置の設置位置に対する前記照明装置の設置位置に関する情報を視聴者に入力させる情報入力ステップと、
前記情報入力手段により入力された前記表示装置の設置位置に対する前記照明装置の設置位置に関する情報と前記リファレンスデータとに基づいて、前記仮想的な視聴環境空間における照明位置に対応した照明制御データを、各照明装置を制御するための照明制御データに変換する照明データ変換ステップとを備えたことを特徴とする視聴環境制御方法。
【請求項１７】
外部装置から取得した照明制御データに基づいて、１以上の照明装置の照明光を制御する視聴環境制御方法であって、
前記表示装置の設置位置に対する前記照明装置の設置位置に関する情報を視聴者に入力させる情報入力ステップと、
前記情報入力手段により入力された前記表示装置の設置位置に対する前記照明装置の設置位置に関する情報を、前記外部装置に送信する送信ステップと、
前記表示装置の設置位置に対する前記照明装置の設置位置に関する情報に基づいて外部装置で生成された照明制御データを受信する受信ステップとを備えたことを特徴とする視聴環境制御方法。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、視聴環境空間内に設置された照明装置の照明光を制御することにより、映像鑑賞時の臨場感を向上させることが可能な視聴環境制御装置、該視聴環境制御装置を備えた視聴環境制御システム、及び視聴環境制御方法に関するものである。
【背景技術】
【０００２】
近年、映像・音声に係るエレクトロニクス技術の急速な進歩により、ディスプレイの大型化、広視野角化、高精細化やサラウンドシステムの向上が進み、臨場感のある映像や音声が楽しめるようになってきている。例えば、現在普及しつつあるホームシアターシステムにおいては、大型ディスプレイやスクリーンと多チャンネル音声・音響技術との組み合わせにより、高い臨場感を得ることができるシステムを実現している。
【０００３】
また、特に最近では、単に一つの表示装置で映像を楽しむものではなく、複数のディスプレイを組み合わせて広視野な映像を視聴するシステムや、ディスプレイに表示される映像と照明装置の照明光とを連動させるシステムなどが提案されており、複数のメディアを組み合わせて、より臨場感が高められるようなシステムの開発が盛んに行われている。
【０００４】
特に、ディスプレイと照明装置とを連動させて高い臨場感を実現する技術においては、大型ディスプレイを用いなくても高い臨場感が得られることから、コストや設置スペース等の制約が少なく、大きな期待が寄せられ、大変注目を浴びている。
【０００５】
この技術によれば、視聴者の部屋（視聴環境空間）に設置されている複数の照明装置の照明光を、ディスプレイに表示される映像に応じた色や強さにコントロールすることにより、視聴者があたかもディスプレイに映し出されている映像空間の中に実在するかのような感覚・効果を与えることができる。このようなディスプレイに表示される画像と照明装置の照明光とを連動させる技術は、例えば特開２００１−３４３９００号公報に開示されている。
【０００６】
ここに開示されている技術は、高い臨場感を提供することを目的としたもので、複数の照明装置を表示すべき映像に連動させて制御する照明システムにおいて、映像データの特徴量（代表色、平均輝度）から複数の照明装置に対する照明制御データを生成する方法が記載されている。具体的には、各照明装置の設置位置に応じて予め決められた画面領域の映像データの特徴量を検出し、この検出された特徴量に基づいて各照明装置に対する照明制御データを生成することが記載されている。
【０００７】
また、照明制御データは、映像データの特徴量から演算して求めるものに限らず、単独で或いは映像データとともに、インターネット等を介して配信されるものや、搬送波により配信されるものを用いてもよいことが記載されている。
【０００８】
さらに最近では、GUI（Graphical User Interface）技術の進歩により、AV機器の各種設定操作においてGUIが利用され、直感的で簡易な操作が実現でき、ユーザーに対する利便性が向上している。GUIに関する技術は、例えば特開２００５−２８６９０３号公報に開示されている。
【０００９】
ここに開示されている技術は、視聴者が表示画面に映し出された設定手順や操作に従って、視聴者の視聴位置（リスニングポイント）やスピーカー位置の設定入力を行い、入力された情報を基に各スピーカーの出力タイミングなどを算出することが記載されている。これにより、リスニングポイントやスピーカーなどの音源の配置が変更された場合においても、煩雑な作業を行うことなく、簡易に最適な音場の再現を可能にすることが記載されている。
【発明の開示】
【発明が解決しようとする課題】
【００１０】
しかしながら、上述の特開２００１−３４３９００号公報に記載のものは、予め決められた照明装置のレイアウトに対応した照明制御データを生成するものであり、そのため、視聴環境空間に設置されている照明装置の位置を検出して、その検出結果に応じた適切な照明制御データを生成する構成を備えていない。従って、例えば視聴環境空間における照明装置の位置や映像表示装置の位置を変えた場合や、新たに照明装置を加えた場合などにおいては適切な照明制御を行うことができない。
【００１１】
また、上述の特開２００５−２８６９０３号公報には、GUIを利用して簡易にリスニングポイントやスピーカー位置を設定入力し最適な音場を実現することは記載されているものの、最適な照明制御を実現するためにGUIを利用することについての記載は全くない。すなわち、最適な照明制御を実現するためには、表示装置と各照明装置との相対的な位置関係に関する情報を設定入力する必要があり、最適な音場制御を実現するための上記技術をそのまま利用することはできない。
【００１２】
本発明は、上記従来技術の問題点に鑑みてなされたものであり、照明装置の設置位置を変えた場合や、新たに照明装置を加えた場合などにおいても適切な照明制御を行うことができ、高い臨場感を得ることができる視聴環境制御装置、視聴環境制御システム、及び視聴環境制御方法を提供することを目的とする。
【課題を解決するための手段】
【００１３】
本発明は、次のような技術手段によって前記課題を解決する。
【００１４】
本願の第１の発明は、表示装置に表示すべき映像データの特徴量に基づいて、１以上の照明装置の照明光を制御する視聴環境制御装置であって、前記表示装置の設置位置に対する前記照明装置の設置位置に関する情報を視聴者に入力させる情報入力手段と、前記情報入力手段により入力された前記表示装置の設置位置に対する前記照明装置の設置位置に関する情報に応じて抽出される、前記映像データの特徴量に基づいて、各照明装置を制御するための照明制御データを生成する照明データ生成手段とを備えたことを特徴とする。
【００１５】
本願の第２の発明は、外部装置から取得した仮想的な視聴環境空間における照明位置に関するリファレンスデータ及び該仮想的な視聴環境空間における照明位置に対応した照明制御データに基づいて、１以上の照明装置の照明光を制御する視聴環境制御装置であって、前記表示装置の設置位置に対する前記照明装置の設置位置に関する情報を視聴者に入力させる情報入力手段と、前記情報入力手段により入力された前記表示装置の設置位置に対する前記照明装置の設置位置に関する情報と前記リファレンスデータとに基づいて、前記仮想的な視聴環境空間における照明位置に対応した照明制御データを、各照明装置を制御するための照明制御データに変換する照明データ変換手段とを備えたことを特徴とする。
【００１６】
本願の第３の発明は、外部装置から取得した照明制御データに基づいて、１以上の照明装置の照明光を制御する視聴環境制御装置であって、前記表示装置の設置位置に対する前記照明装置の設置位置に関する情報を視聴者に入力させる情報入力手段と、前記情報入力手段により入力された前記表示装置の設置位置に対する前記照明装置の設置位置に関する情報を、前記外部装置に送信する送信手段と、前記表示装置の設置位置に対する前記照明装置の設置位置に関する情報に基づいて外部装置で生成された照明制御データを受信する受信手段とを備えたことを特徴とする。
【００１７】
本願の第４の発明は、第１の発明乃至第３の発明のいずれかに記載の視聴環境制御装置において、前記情報入力手段は、さらに前記表示装置の画面方向に関する情報を視聴者に入力させることを特徴とする。
【００１８】
本願の第５の発明は、第１の発明乃至第４の発明のいずれかに記載の視聴環境制御装置において、前記情報入力手段は、さらに前記表示装置の画面サイズに関する情報を視聴者に入力させることを特徴とする。
【００１９】
本願の第６の発明は、第１の発明乃至第５の発明のいずれかに記載の視聴環境制御装置において、前記情報入力手段は、さらに前記各照明装置の照射方向に関する情報を視聴者に入力させることを特徴とする。
【００２０】
本願の第７の発明は、第１の発明乃至第６の発明のいずれかに記載の視聴環境制御装置において、前記情報入力手段は、さらに前記照明装置の種類またはサイズの少なくともいずれか1つを視聴者に入力させることを特徴とする。
【００２１】
本願の第８の発明は、第１の発明乃至第７の発明のいずれかに記載の視聴環境制御装置において、前記情報入力手段は、さらに前記表示装置および前記照明装置が設置されている部屋の大きさに関する情報を視聴者に入力させることを特徴とする。
【００２２】
本願の第９の発明は、第１の発明乃至第８の発明のいずれかに記載の視聴環境制御装置において、前記情報入力手段は、さらに前記表示装置および前記照明装置が設置されている部屋の壁の色に関する情報を視聴者に入力させることを特徴とする。
【００２３】
本願の第１０の発明は、第１の発明乃至第９の発明のいずれかに記載の視聴環境制御装置において、前記情報入力手段による情報入力時に、前記表示装置および前記照明装置を含む部屋の模式図を、前記表示装置に表示する表示手段を備え、該表示手段によって表示される表示内容は、前記情報入力手段により入力された情報に連動して変更されることを特徴とする。
【００２４】
本願の第１１の発明は、第１０の発明に記載の視聴環境制御装置において前記表示手段は、まず前記部屋の大きさに関する情報の設定入力を促す入力画面を表示し、前記部屋の大きさの設定が完了した後に、前記表示装置もしくは前記照明装置の少なくとも位置に関する情報入力を促す画面を表示することを特徴とする。
【００２５】
本願の第１２の発明は、第１０の発明又は第１１の発明に記載の視聴環境制御装置において、前記表示手段により表示される部屋の模式図は、該部屋の平面図と側面図とで表されることを特徴とする。
【００２６】
本願の第１３の発明は、第１０の発明又は第１１の発明に記載の視聴環境制御装置において、前記表示装置により表示される部屋の模式図は、該部屋の外の任意視点から俯瞰した立体図で表されることを特徴とする。
【００２７】
本願の第１４の発明は、第１の発明乃至第１３の発明のいずれかに記載の視聴環境制御装置と、前記映像データを表示するための表示装置と、該表示装置の周囲に設置された照明装置とを備えた視聴環境制御システムであることを特徴とする。
【００２８】
本願の第１５の発明は、表示装置に表示すべき映像データの特徴量に基づいて、１以上の照明装置の照明光を制御する視聴環境制御方法であって、前記表示装置の設置位置に対する前記照明装置の設置位置に関する情報を視聴者に入力させる情報入力ステップと、前記情報入力手段により入力された前記表示装置の設置位置に対する前記照明装置の設置位置に関する情報に応じて抽出される、前記映像データの特徴量に基づいて、各照明装置を制御するための照明制御データを生成する照明データ生成ステップとを備えたことを特徴とする。
【００２９】
本願の第１６の発明は、外部装置から取得した仮想的な視聴環境空間における照明位置に関するリファレンスデータ及び該仮想的な視聴環境空間における照明位置に対応した照明制御データに基づいて、１以上の照明装置の照明光を制御する視聴環境制御方法であって、前記表示装置の設置位置に対する前記照明装置の設置位置に関する情報を視聴者に入力させる情報入力ステップと、前記情報入力手段により入力された前記表示装置の設置位置に対する前記照明装置の設置位置に関する情報と前記リファレンスデータとに基づいて、前記仮想的な視聴環境空間における照明位置に対応した照明制御データを、各照明装置を制御するための照明制御データに変換する照明データ変換ステップとを備えたことを特徴とする。
【００３０】
本願の第１７の発明は、外部装置から取得した照明制御データに基づいて、１以上の照明装置の照明光を制御する視聴環境制御方法であって、前記表示装置の設置位置に対する前記照明装置の設置位置に関する情報を視聴者に入力させる情報入力ステップと、前記情報入力手段により入力された前記表示装置の設置位置に対する前記照明装置の設置位置に関する情報を、前記外部装置に送信する送信ステップと、前記表示装置の設置位置に対する前記照明装置の設置位置に関する情報に基づいて外部装置で生成された照明制御データを受信する受信ステップとを備えたことを特徴とする。
【発明の効果】
【００３１】
本発明によれば、視聴環境空間における表示装置や１以上の照明装置の設置位置を視聴者が直感的且つ簡易に設定入力することができ、該入力した表示装置や照明装置の設置位置に応じた最適な照明制御データを生成することができるため、視聴環境における照明装置の設置位置を変更した場合や新たに照明装置を加えた場合などにおいても適切な照明制御を行うことが可能となる。
【発明を実施するための最良の形態】
【００３２】
本発明の実施形態に係る視聴環境制御装置及び視聴環境制御システムについて、図１乃至図３６とともに説明する。
【００３３】
図１は、本発明の第一の実施形態に係る視聴環境制御装置を示すブロック図である。本実施形態の視聴環境制御装置１は、受信部２において送信側（放送局）から送られてくる放送データを受信し、データ分離部３において放送データに多重化されている映像データと音声データとを分離する。データ分離部３で分離された映像データと音声データとは、それぞれ映像表示装置４と音声再生装置５に送られる。
【００３４】
次に、視聴者入力情報受信部６は、視聴者が例えば視聴環境制御装置１の本体に設けられている操作ボタンやリモートコントロール装置（以下、リモコン装置と称す）などを用いて入力した映像表示装置４の設置位置、画面方向および画面サイズなどの映像表示装置情報と、照明装置７の設置位置、種類、サイズおよび照射方向などの照明装置情報と、視聴者の部屋の大きさや壁の色などの視聴環境空間情報とを受け取り、ＣＰＵ８に送る。以下においては、視聴者の部屋のことを『視聴環境空間』と呼ぶ。
【００３５】
ＣＰＵ８においては、上記視聴者入力情報受信部６で受信した映像表示装置情報、照明装置情報および視聴環境空間情報に基づいて後述する所定の演算を行い、照明装置７の照明制御情報（各照明装置の照明制御データを生成するのに必要な情報）を生成し、照明制御情報記憶部９に送る。
【００３６】
照明制御情報記憶部９においては、上記ＣＰＵ８で算出された照明制御情報をテーブル形式で格納する。ここで、照明装置７のそれぞれには予め識別子（以下では「ＩＤ」と呼ぶ）が付与されており、上記照明制御情報記憶部９に格納されている照明制御情報は、照明装置７のＩＤごとにテーブル形式で格納されている。照明制御情報記憶部９に格納された照明制御情報は、照明制御データ生成部１０からの要求に従い、ＣＰＵ８を介して適宜照明制御データ生成部１０に送られる。照明制御データ生成部１０は、データ分離部３で分離された映像データ、音声データと照明制御情報記憶部９からＣＰＵ８を介して読み込んだ照明制御情報とから、各照明装置７の設置位置に応じた適切な照明制御データを生成し、照明装置７へ送る。
【００３７】
また、照明装置７へ送られる照明制御データは、映像データおよび音声データと出力タイミングを合わせる必要があるため、例えば照明制御データ生成部１０において照明制御データを生成するのに必要な時間だけ、データ分離部３で分離された映像データと音声データを遅らせ、照明制御データと同期をとるためのディレイ発生部１１ａ，１１ｂを設けている。
【００３８】
視聴環境制御装置１をこのような構成にすることにより、視聴環境空間に設置されている１以上の照明装置７を、視聴者の視聴環境空間に応じて適切に制御することができる。また、視聴環境空間内における照明装置７の設置位置を変更した場合や、照明装置７を追加した場合、さらに映像表示装置４の位置を変更した場合、さらにまた部屋の壁紙などを変更した場合においても常に適切な照明制御が可能になる。尚、視聴環境制御装置１は、映像表示装置４、音声再生装置５と一体的に設けられてもよいし、それぞれ別体として設けられてもよい。ここでは、視聴環境制御装置１が、映像表示装置４、音声再生装置５と一体的に設けられている場合について説明する。
【００３９】
以下に、照明装置７について詳しく説明する。
【００４０】
まず、照明装置７について説明する。図２は、本実施形態で用いる照明装置７の一例を示す外観図であり、既に述べたように、各照明装置７には複数の照明装置７を個別に認識するためのユニークなＩＤが付与されている。また、例えば図２に示す照明装置７には、独立して発光制御することが可能なＲ（赤），Ｇ（緑），Ｂ（青）各色のＬＥＤ光源が一定の周期で配列されており、これら３原色のＬＥＤ光源により所望の色、輝度からなる照明光を出射する。
【００４１】
ただし、照明装置７は、映像表示装置４の周囲環境の照明色及び明るさを制御することができるような構成であればよく、上記のような所定色を発光するＬＥＤ光源の組み合わせに限ることなく、白色ＬＥＤと色フィルタとによって構成してもよく、あるいは白色電球や蛍光管とカラーフィルタとの組み合わせやカラーランプ等を適用することもできる。また、色可変型の照明装置のみならず、例えば、白色電球や蛍光灯による白色光の輝度のみを照明装置７ごとに可変制御するものでもよく、この場合でも照明光の輝度を固定にする場合に比べれば高い臨場感を得ることができる。
【００４２】
図２（ａ）は、シールにより各照明装置７を識別するＩＤの付与方法を示す説明図である。図２（ａ）の照明装置７には、ＬＥＤ光源の下方にシールが貼付される穴部が設けられている。ここでは、例えば図に示すように、６つの穴部が設けられており、その穴部領域ごとに遮光性のシールを貼ることが可能になっている。また、照明装置内部の各穴部に対応する位置には光センサが設けられており、穴部にシールが貼られているか否か、すなわち各穴部の光の透過／遮断状態を検出することが可能になっている。従って、各穴部に対するシールの貼付状態に応じて、最大２6（６ビット／６４通り）個のＩＤを照明装置に付与することができる。もちろん、視聴環境空間に設置される照明装置７の数が６４より多くなる場合は、シール貼付の穴部を７つ８つと増やせば無限に対応できることは言うまでもない。
【００４３】
図２（ｂ）は、ディップスイッチにより各照明装置７を識別するＩＤの付与方法を示す説明図である。図２（ｂ）の照明装置７には、ＬＥＤ光源の下方にディップスイッチが設けられている。本ディップスイッチは、上述したシール貼付の代わりに電気信号を通すか否かの設定が可能なスイッチを具備している。ここでは、例えば図に示すように、６つのスイッチを設け、例えば、スイッチが上になっているものが導電状態、下になっているものが遮断状態として検出することにより、最大２6（６ビット／６４通り）個のＩＤを照明装置に付与することができる。もちろん、視聴環境空間に設置される照明装置の数が６４より多くなる場合は、スイッチを７つ８つと増やせば無限に対応できることは言うまでもない。
【００４４】
次に、視聴環境制御装置１について説明する。まず、視聴者による映像表示装置４、照明装置７および視聴環境空間に関する情報入力について説明する。
【００４５】
図３は、視聴環境空間の一例を示す説明図であり、ここでは、視聴環境空間内には映像表示装置４と７個の照明装置７とが設置されているものとする。照明装置７ａは、天井設置型で、照明装置７ｂ〜７ｇは、可搬設置型の照明装置である。これら照明装置７ａ〜７ｇの配置や数は、視聴者の視聴環境空間ごとに異なり、また、同じ視聴環境空間であっても部屋の模様替えなどで、照明装置７を移動させたり、照明装置７を追加・削除したりすることにより変わってくる。さらに、映像表示装置４を移動させることによっても、映像表示装置４に対する相対的な照明装置７の位置は変化する。
【００４６】
従って、このような場合においても、常に照明装置７を適切に制御し、高い臨場感を提供するためには、視聴環境空間に設置されている映像表示装置と照明装置との相対的な位置を検出して、照明装置の映像表示装置に対する位置に応じた照明制御を行う必要がある。
【００４７】
図４は視聴環境空間、映像表示装置および照明装置に関する情報入力動作のフローチャートを示す図である。視聴者の情報入力操作について、以下に図４とともに説明する。
【００４８】
視聴者による視聴環境空間、映像表示装置および照明装置に関する情報入力は、まず、視聴環境制御装置１の本体に設けられている操作ボタンもしくはリモコン装置などから視聴環境情報（以下、映像表示装置情報、照明装置情報および視聴環境空間情報を合わせた情報のことを『視聴環境情報』と称する）の入力開始を命令する操作を行う。以下にはリモコン操作による入力操作を例に説明する。
【００４９】
図５はリモコン装置１２の一例を示す図である。図５に記載のリモコン装置１２の視聴環境設定キー１３を押すと視聴環境情報入力の開始命令がなされ、映像表示装置４の表示画面に図６に示すような視聴環境情報の入力開始を合図する表示がされる。図６に示すような画面表示がされたときに、図５のリモコン装置１２の決定キー１４を押すと、図７に示すような視聴環境空間の情報の入力を促す画面が表示される。
【００５０】
視聴者は、図７に示すような画面が表示された状態で、図５のリモコン装置１２の決定キー１４を押すと、映像表示装置４の表示画面に図８に示すような視聴環境空間の大きさを入力するための画面が表示される。この画面において、視聴者は視聴環境空間の大きさを設定すべく、画面内に表示されている視聴環境空間の模式図を見ながら視聴環境空間の一隅を基準点として、視聴環境空間のｘ方向、ｙ方向、ｚ方向の長さを例えばセンチメートル単位で入力する。
【００５１】
具体的には、まず図８の画面が表示されるとｘ方向のメートル入力する部分がアクティブになっており、リモコン装置１２の十字キー１５もしくは数字キー１６により適当な数値を入力し、決定キー１４を押して入力を完了する。ｘ方向のメートル入力が完了すると、次はｘ方向のセンチメートル入力する部分がアクティブになり、十字キー１５もしくは数字キー１６により適当な数値を入力し、決定キー１４を押して入力を完了する。ｘ方向のセンチメートル入力が完了すると、次はｙ方向のメートル入力する部分がアクティブになる。ｘ方向の数値入力と同じ操作をｙ方向およびｚ方向についても行い、視聴環境空間の大きさの設定入力が完了する。ここではセンチメートル単位での入力を例に挙げたが、もちろん１０センチメートル単位などでも構わないし、他の単位系を用いても構わない（ステップ１）。
【００５２】
視聴環境空間の大きさの設定入力が完了すると、次に図９に示すような視聴環境空間の天井、床、壁の色を入力するための画面が表示装置４の表示画面に表示される。この画面において、視聴者は視聴環境空間の天井、床、壁の色を設定すべく、天井１面、床１面、壁４面の色を設定入力する（もちろん、視聴環境空間によって壁の数などが４面ではない可能性もあるが、本実施例においては最も一般的と思われる天井１面、床１面、壁４面を例にとって考えることとする）。
【００５３】
具体的には、まず図９の画面の表示がされると天井の色選択を行う部分がアクティブになっており、プルダウンメニューにより色選択を行うことができるようになっている。そして、リモコン装置１２の十字キー１５により所望の色を選択した後に決定キー１４を押すと天井の色入力が完了する。天井の色入力が完了すると、次は床の色選択を行う部分がアクティブになり、天井の色入力と同じ操作にて入力を行う。同様の入力操作を壁４面についても行い、視聴環境空間の壁、天井、床の色の設定入力が完了する。
【００５４】
このように、視聴環境空間の壁、天井、床の色を入力することで、壁が照明光に照らされる間接照明を行った場合であっても、壁の色を考慮した適切な照明制御を行うことができることになる。ここではプルダウンメニューによる色入力を例にとり説明したが、もちろんR,G,Bによる表記で視聴者に数値入力させてもよいし、さらに他の入力方法を用いてもよい。そしてまた、天井、床、壁情報としては反射率や素材などの情報を入力させてもよい。このように視聴環境空間の天井、床、壁の情報も入力することで間接照明の適切な制御もできることになる（ステップ２）。
【００５５】
視聴環境空間の壁、天井、床の色の設定入力が完了すると、次に図１０に示すような映像表示装置４に関する情報の入力を促す画面が表示される。視聴者は、図１０に示すような画面が表示された状態で図４のリモコン装置１２の決定キー１４を押すと、図１１に示すような映像表示装置４の画面サイズを入力するための画面が表示される。この画面において視聴者は映像表示装置４の画面サイズを設定すべく、映像表示装置４のｘ方向、ｙ方向の長さを例えばセンチメートル単位で入力する。
【００５６】
具体的には、まず図１１の画面が表示されるとｘ方向の数値入力部分がアクティブになっており、リモコン装置１２の十字キー１５もしくは数字キー１６により適当な数値を入力し、決定キー１４を押すと入力が完了する。ｘ方向の数値入力が完了すると、次にｙ方向の数値入力部分がアクティブになり、ｘ方向と同様の操作で入力する。ここでは、ｘ方向、ｙ方向の入力単位をセンチメートルとしたが、単位はインチ単位でもよく、また、ｘ、ｙ方向の数値入力でなく対角線のインチ数入力などでも構わない。また、映像表示装置自体が既に画面サイズに関する情報を記憶している場合などは、これを利用することによって、視聴者による画面サイズの入力作業を省略してもよい（ステップ３）。
【００５７】
映像表示装置４の画面サイズ情報の入力が完了すると、次に図１２に示すような映像表示装置４の設置位置を入力するための画面が表示される。この画面において視聴者は映像表示装置４の設置位置を設定すべく、映像表示装置４の水平方向位置および垂直方向位置を例えばセンチメートル単位で入力する。ここで、「垂直方向」とは、水平方向に対し直角になる方向のことで「鉛直方向」のことである。
【００５８】
水平方向位置の入力では、視聴環境空間の垂直方向から見た平面図を用いて入力し、垂直方向位置の入力では、視聴環境空間の水平方向から見た側面図を用いて入力できるようになっている。また、映像表示装置４の位置に関する情報を入力すると、同じ画面内に表示する立体図に反映され、視聴者が入力した情報による映像表示装置４の設置位置が直感的に分かりやすく、入力ミスなどを防ぐことができるようになっている。
【００５９】
具体的には、まず図１２の画面が表示されると水平位置入力のｘ方向の数値入力部分がアクティブになっており、リモコン装置１２の十字キー１５もしくは数字キー１６により適当な数値を入力し、決定キー１４を押すと入力が完了する。ｘ方向の数値入力が完了すると、次にｙ方向の数値入力部分がアクティブになり、ｘ方向と同様の操作で入力する。ここで、x方向、ｙ方向は視聴環境空間の一隅を基準点として、壁に沿った方向とする（ステップ４）。ｙ方向の数値入力が完了すると、次に水平方向角度の数値入力部分がアクティブになり、十字キー１５もしくは数値キー１６により適当な数値を入力し、決定キー１４を押すと入力が完了する。ここで、角度はｘ方向を基準とした数値で表される（もちろんｙ方向を基準としてもよい）。
【００６０】
水平位置入力が完了すると、次に垂直位置入力のｚ方向の数値入力部分がアクティブになり、十字キー１５もしくは数値キー１６５により適当な数値を入力し、決定キー１４を押すと入力が完了する。ｚ方向の数値入力が完了すると、次に垂直方向角度の数値入力部分がアクティブになり、十字キー１５もしくは数値キー１６により適当な数値を入力し、決定キー１４を押すと入力が完了する。ここで、垂直位置入力の角度とはいわゆる映像表示装置４の仰角にあたるものである（ステップ５）。
【００６１】
映像表示装置４に関する情報の入力が完了すると、次に図１３に示すような照明装置７に関する情報の入力を促す画面が表示される。視聴者は、図１３に示すような画面が表示された状態で図４のリモコン装置１２の決定キー１４を押すと、図１４に示すような照明装置７の基本情報を入力するための画面が表示される。この画面において視聴者は照明装置７の基本情報を設定すべく、照明装置７の種類、サイズ、1/2照射角を入力する。まず、照明装置７の種類としては、照明装置７の形状と色を入力する。ここで、照明装置７の形状は、光源の形状のことで、ここでは点光源、線光源、面光源のいずれかを選択入力可能となっている。次に照明装置の色とは、カラー可変タイプなのか単色なのかということで、そのいずれかを選択入力可能となっている。
【００６２】
また、サイズ入力部分では、照明装置７の形状が線光源である場合にはその長さを、面光源である場合にはその面積（ｘ方向、ｙ方向の長さ）を入力可能となっている。さらに、1/2照射角とは、照明用反射傘の性能を決める目安となるもので、器具と器具直下を結んだ線と、器具と器具直下水平照度の1/2の水平照度となる点を結んだ線がなす角度のことであり、照射光の広がりを表す情報として入力可能となっている。尚、前述したように、照明装置７のそれぞれには、個別制御ができるようにユニークなＩＤ（前述では６ビットだが図１４では９ビット表記）が付与されている。照明装置７に関する基本情報も各照明装置を表すＩＤごとに入力可能となっている。
【００６３】
具体的には、まず図１３に示す画面表示がされた状態で図４のリモコン装置１２の決定キー１４を押すと、図１４に示す照明装置７の基本情報を入力する画面が表示されるとともに、情報入力する照明装置７の特定動作がスタートする。ＣＰＵ８は、該命令を受けて照明制御データ生成部１０に対し、ＩＤｎ（初期動作時はｎ＝１）の照明装置のみを点灯させ、残りの照明装置を消灯（或いは減光）させるという命令を送る。
【００６４】
照明制御データ生成部１０は、ＣＰＵ８からの命令を受け取り、それに則する照明制御データ（例えば、Ｒ，Ｇ，ＢのＬＥＤ光源をそれぞれ８ビットで階調駆動制御する場合であって、ｎ＝１のとき、ＩＤ１（２５５，２５５，２５５）、ＩＤ２（０，０，０）、ＩＤ３（０，０，０）、・・・、ＩＤｎ（０，０，０））を照明装置に出力する。すると、ＩＤ１に対応する照明装置のみ点灯し、それ以外の照明装置は消灯する。
【００６５】
この状態で、図１４に示す照明装置７の基本情報を入力する画面ではＩＤ１の照明装置の形状を入力する部分がアクティブになっており、視聴者は点灯している照明装置の形状をリモコン装置１２の十字キー１５によりプルダウンメニューから該当する形状を入力し、決定キー１４を押すと入力が完了する。ＩＤ１の照明装置の形状の入力が完了すると、次にＩＤ１の照明装置の色を入力する部分がアクティブになり、十字キー１５によりプルダウンメニューから該当する色を入力し、決定キー１４を押すと入力が完了する（ステップ６）。ＩＤ１の照明装置の色の入力が完了すると、次に照明装置のサイズを入力する部分がアクティブになり、十字キー１５もしくは数字キー１６で適当な数値を入力し、決定キー１４を押すと入力が完了する（ステップ７）。
【００６６】
ここで、照明装置の形状が線光源である場合は、その長さを入力し、照明装置の形状が面光源である場合は、その面積（ｘ方向、ｙ方向の長さ）を入力する。また、照明装置の形状が点光源である場合は、入力はしないこととする。ＩＤ１の照明装置のサイズの入力が完了すると、次にＩＤ１の照明装置の1/2照射角を入力する部分がアクティブになり、十字キー１５もしくは数字キー１６により適当な数値を入力し、決定キー１４を押すと入力が完了する（ステップ８）。ここで、1/2照射角は照明装置の商品パッケージや製造メーカーのホームページに記載されている。これでＩＤ１の照明装置の基本情報の入力が完了する。
【００６７】
ＩＤ１の照明装置の基本情報の入力が完了すると、次にＩＤ１の照明装置の設置位置に関する情報を入力すべく、図１５に示す照明装置位置入力を行う画面が表示される。図１５に示す照明装置位置入力では、水平方向位置（ｘ方向、ｙ方向）と垂直方向位置（ｚ方向）とを例えばセンチメートル単位で入力する。水平方向位置の入力では、視聴環境空間の垂直方向から見た平面図を用いて入力し、垂直方向位置の入力では、視聴環境空間の水平方向から見た側面図を用いて入力できるようになっている。また、照明装置の位置情報を入力すると、同じ画面内に表示する立体図に反映され、視聴者が直感的に分かりやすく入力できるとともに入力ミスなどを防ぐことができるようになっている。ここで、平面図、側面図および立体図に表示される照明装置は、先に入力した視聴環境空間に関する情報と照明装置の基本情報とに基づき、縮尺の一致した表示がされるようになっている。
【００６８】
具体的には、まず図１５に示す画面が表示されると、水平方向位置のｘ方向を入力する部分がアクティブになり、十字キー１５もしくは数字キー１６で適当な数値を入力し、決定キー１４を押すと入力が完了する。ｘ方向の入力が完了すると、次にｙ方向を入力する部分がアクティブになり、同様の操作で入力する。水平方向位置の入力が完了すると、次に垂直方向位置のｚ方向を入力する部分がアクティブになり、同様の操作で入力を行う。これで、ＩＤ１の照明装置の設置位置に関する情報の入力が完了する（ステップ９）。
【００６９】
ＩＤ１の照明装置の設置位置に関する情報の入力が完了すると、次にＩＤ１の照明装置の照射方向に関する情報を入力すべく、図１６に示す照射方向入力を行う画面が表示される。図１６に示す照明装置の照射方向入力を行う画面では、照射方向を水平方向と垂直方向とに分割して入力を行う。水平方向の入力を行う場合は、予め用意されている８方向の矢印中から１つを選択し入力する。また、垂直方向の入力を行う場合は、予め容易されている７段階の照射高さの中から１つを選択し入力する。ここで、水平方向では８方向、垂直方向では７段階と記載したが、これはあくまで一例であって、さらに細かく分けてもよいし、視聴者に数値入力などをさせるようにしてもよい。
【００７０】
また、水平方向の入力では、視聴環境空間の垂直方向から見た平面図を用いて入力し、垂直方向置の入力では、視聴環境空間の水平方向から見た側面図を用いて入力できるようになっている。また、照明装置の照射方向を入力すると、同じ画面内に表示する立体図に反映され、視聴者が直感的に分かりやすく入力できるとともに入力ミスなどを防ぐことができるようになっている。ここで、平面図、側面図および立体図に表示される照明装置は、先に入力した視聴環境空間に関する情報と照明装置の基本情報とに基づき、照明装置を点灯させたときのシュミレーション画像が表示されるようになっている。
【００７１】
具体的には、まず図１６に示す画面が表示されると、水平方向を入力する部分がアクティブになり、リモコン装置１２の十字キー１５で適当な方向を選択入力し、決定キー１４を押すと入力が完了する。水平方向の入力が完了すると、次に垂直方向を入力する部分がアクティブになり、水平方向の入力と同様の操作で入力する。これで、ＩＤ１の照明装置の照射方向に関する情報の入力が完了する（ステップ１０）。
【００７２】
以上で、ＩＤ１の照明装置に関する情報入力が全て完了し、次に、ＣＰＵ８はＩＤ１の照明装置に関する情報入力が完了したことを認識すると、照明制御データ生成部１０に対し、ＩＤ２の照明装置のみを点灯させ、残りの照明装置を消灯（或いは減光）させるという命令を送る。そして照明制御データ生成部１０はＣＰＵ８からの命令を受け取り、それに則する照明制御データを照明装置に出力する。すると、ＩＤ２に対応する照明装置のみ点灯し、それ以外の照明装置は消灯した状態で、ＩＤ２の照明装置に関する情報入力部分がアクティブになる。あとは前述したＩＤ１の照明装置の情報入力操作と同様の操作を行い、ＩＤ２の照明装置の情報入力を行う。
【００７３】
そして、視聴者の視聴環境空間に存在する全ての照明装置７に対して同様の操作を繰り返し、全ての照明装置７の情報入力を完了する。以上のように、設定入力の対象となる照明装置のみを点灯させて、他の照明装置を消灯或いは減光させることにより、ユーザは各照明装置のＩＤを把握していなくとも、確実且つ容易に各照明装置に関する情報入力を行うことが可能となっている。また、上述した視聴者による映像表示装置、照明装置および視聴環境空間に関する情報入力は、リモコン装置での入力を例にとって説明したが、もちろん視聴環境制御装置１の本体に設けられている操作ボタンを使用して入力してもよいし、またもっと別の入力手段で入力してもよい。
【００７４】
次に、視聴者により上述したような情報入力が完了すると、ＣＰＵ８において映像表示装置と各照明装置との相対的な位置関係に基づき、映像データの特徴量から各照明装置の照明制御データを生成する際に必要となる照明制御情報を算出し、照明制御情報記憶部９にテーブル形式で格納する。ここでは、間接照明に対しても適切に照明制御ができるように、照射位置、照射面積、色および輝度の補正量を算出し、照明制御情報記憶部９にテーブル形式で格納する。
【００７５】
以下に、ＣＰＵ８で行う演算処理について説明する。
【００７６】
まず、ＣＰＵ８では、視聴者からの入力情報に基づき、視聴環境空間を映像表示装置の画面中心を基準点とする座標系へ変換する。視聴者が入力した映像表示装置および照明装置の位置に関する情報は、どちらも設置される視聴環境空間の一隅を基準点とし、壁に沿ったｘ方向、ｙ方向、ｚ方向の座標系で表される。つまり、視聴者が入力した段階においては映像表示装置４と照明装置７との相対的な位置関係が表されているわけではなく、両装置の視聴環境空間内での位置が入力されているだけである。
【００７７】
また、映像表示装置４に映し出される映像に連動して適切に照明制御するためには、映像表示装置４と照明装置７との相対的な位置関係が重要になる。従って、映像表示装置４と照明装置７との相対的な位置関係を示すことができる座標系にすべく映像表示装置４を基準（原点）とした座標系へ変換する必要がある。これにより、照明装置７の設置位置が映像表示装置４との相対的な位置として表される。
【００７８】
図１７、図１８は視聴者の視聴環境空間の一例を基に座標変換を示す図である。図１７は、その変換を示す立体図で、図１８は、その変換を垂直方向からの見た平面図である。視聴環境空間内には、映像表示装置４と８個の照明装置７とが設置されている。映像表示装置４は部屋の一隅に配置され、画面が部屋の中央部を向くように設置されている。照明装置７ｈ、７iは、天井設置型で、照明装置７ｊ〜７oは、可搬設置型の照明装置である。特に７ｊ〜７oは、間接照明を意図したもので、照射方向が壁に向いて設置されている。座標は、映像表示装置４の画面の中心を基準点（原点）として、画面に平行かつ水平な方向をｘ方向、画面に垂直な方向をｙ方向、画面に平行かつ垂直な方向をｚ方向となるようにする。そして、視聴者により入力された照明装置の設置位置情報を座標変換後の座標系で再定義する。これで、照明装置７の位置が映像表示装置との相対的な位置として表されたことになる。
【００７９】
また、ＣＰＵ８は例えば内部メモリを備えており、その内部メモリには仮想的な視聴環境空間を表すリファレンスモデルと、仮想的な視聴環境空間に対して適切な照明制御を行うために、そのリファレンスモデルの各照明装置が映像表示装置の表示画面のどの領域に表示される映像データの特徴量を用いて照明制御されるべきか示す特徴量検出領域とが格納されている。
【００８０】
ここで、ＣＰＵ８の内部メモリに格納されているリファレンスモデルの一例を図１９、図２０に示す。図１９はリファレンスモデルを示す図で、図２０はリファレンスモデルの展開図である。映像表示装置４が視聴環境空間の１つの壁に沿うように配置され、照明装置７が天井、床、４壁に９個ずつ周期的に配置されている。ここで、もちろんリファレンスモデルの照明装置の数や配置は上記に限定されるものではない。
【００８１】
次に、ＣＰＵ８の内部メモリに格納されている上記リファレンスモデルの各照明装置ｖ１〜ｖ５４に対応する特徴量検出領域は予め求められるものであるが、その算出方法について以下に説明する。ここでは、天井に設けられている照明装置ｖ１〜ｖ９の各々に対応する特徴量検出領域について説明する。天井に設けられているｖ１〜ｖ９の照明装置について、まず画面水平方向（ｘ方向）での特徴量検出領域を決定し、次に画面垂直方向（ｙ方向）における特徴量検出領域を決定する。そして最終的に、映像表示装置の表示画面内におけるｘ方向、ｙ方向でそれぞれ決定した特徴量検出領域に基づいて、各照明装置に対する特徴量検出領域を確定させる。
【００８２】
図１９で示すリファレンスモデルの天井に設置されている照明装置は、ｘ方向で同じ位置に存在する照明装置ごとに、画面に向かって左に位置する照明装置ｖ１，ｖ４，ｖ７と、中央に位置する照明装置ｖ２，ｖ５，ｖ８と、画面に向かって右に位置する照明装置ｖ３，ｖ６，ｖ９との３列に分類することができる（以下、それぞれを「左照明装置列」、「中央照明装置列」、「右照明装置列」と呼ぶことにする）。左照明装置列は、映像データの画面左部分を特徴量検出領域とし、また、中央照明装置列は、映像データの画面中央部分を特徴量検出領域とし、さらに、右照明装置列は、映像データの画面右部分を特徴量検出領域とする。つまり、各照明装置の列位置に応じて、映像表示装置４の表示画面におけるｘ方向の特徴量検出領域が決定されることになる。
【００８３】
次に、映像表示装置４の表示画面におけるｙ方向の特徴量検出領域を決定する。ｙ方向の特徴量検出領域の決定では、映像表示装置４で映し出されている表示映像の内容（輝度分布、色分布、ヒストグラムなど）、表示映像の種類（カテゴリー）などの情報から１つ若しくは組み合わせて、適切な特徴量検出領域の決定する必要がある。特徴量検出領域の決定をするにあたっての指標は数多く存在し、必要に応じて最適な指標を使い分ければよい。ここでは、特徴量検出領域の決定を行う指標として、表示映像の内容（輝度分布）を用いて図２１に示す映像に対する特徴量検出領域を決定する。
【００８４】
図２１に示す映像は、海に夕日が沈んでいく様子の映像であり、映像の画面中央部分に表示されている太陽が最大輝度となっており、そこを中心として周辺領域へ離れるほど輝度が連続的に低下している。
【００８５】
一方、図１９で示すリファレンスモデルの天井に設置されている照明装置は、ｙ方向で同じ位置に存在する照明装置ごとに、画面の手前側に位置する照明装置ｖ１，ｖ２，ｖ３と、該照明装置ｖ１，ｖ２，ｖ３より画面と反対側に位置する照明装置ｖ４，ｖ５，ｖ６と、画面から最も奥に位置する照明装置ｖ７，ｖ８，ｖ９との３列に分類することができる（以下、それぞれを「手前照明装置列」、「中央照明装置列」、「奥照明装置列」と呼ぶことにする）。手前照明装置列は、最も映像表示装置４の近くに設置されており、視聴者側からみれば映像表示装置４方向に最も遠い位置に存在することになる。
【００８６】
従って、手前照明装置列では、表示映像の中で撮影位置から遠くにある色や明るさを基準にして照明光を作り出す必要がある。図２１の映像で言えば、地平線にあたる部分を特徴量検出領域とする必要がある。しかし、地平線部分のみの映像特徴量に応じて手前照明装置列の照明光を生成した場合、この照明光の輝度が高くなりすぎて、画面上部の表示映像との連続性がなくなり、違和感が生じるので、図２２（ａ）〜（ｃ）に示すように地平線部分を中心として、その周辺部分を大きく含むような領域を、照明装置ｖ１，ｖ２，ｖ３に対する特徴量検出領域としている。
【００８７】
次に、奥照明装置列は、最も映像表示装置４から遠く、例えば視聴者の真上に存在するような照明装置の列である。奥照明装置列では、表示映像の撮影場所に最も近い色や明るさを基準にして照明光を作り出す必要がある。従って、図２１の映像で言えば、空部分の一番上部にあたる部分を特徴量検出領域とする必要がある。また、奥照明装置列は撮影位置の空間を再現する必要があるので、図２２（ｇ）〜（ｉ）に示すように、照明装置ｖ７，ｖ８，ｖ９に対する特徴量検出領域とする面積を小さくし、撮影位置の真上の空の色や明るさを再現すると、効果的に臨場感を高めることができる。
【００８８】
最後に、中央照明装置列は、上述した手前照明装置列と奥照明装置列との中間を取ればよい。つまり、図２１の映像で言うと、地平線から撮影位置の真上の空までの中間に存在する空部分である。従って、図２２（ｄ）〜（ｆ）に示すように、照明装置ｖ４，ｖ５，ｖ６に対する特徴量検出領域とする領域も手前照明装置列と奥照明装置列との中間の領域にすればよい。これで、図１９で示すリファレンスモデルの天井に設置されている照明装置の特徴量検出領域が完了する。次に、上記と同様の方法で、仮想的な視聴環境空間の床、壁に設置されている各照明装置７の特徴量検出領域を算出する。
【００８９】
これで、リファレンスモデル内の全ての照明装置７について、対応する特徴量検出領域が決定され、仮想的な視聴環境空間においては映像と連動した照明制御が可能になる。また、上記の説明では、映像表示装置４の画面サイズについては触れなかったが、画像サイズが変わると画面端部から各照明装置までの距離／方向が変わるため、映像表示装置４の画面サイズも考慮することにより、さらに精度の高い照明制御が可能となる特徴量検出領域の決定を行うことができる。さらにまた、上記の特徴量検出領域の算出方法は一例であり、上記に限定されるものではない。
【００９０】
上記で説明したリファレンスモデルの各照明装置に対応する特徴量検出領域は、リファレンスモデルとともにリファレンスも出る情報としてＣＰＵ８の内部メモリに格納されている。特徴量検出領域は、リファレンスモデルの照明装置と映像表示装置との相対的な位置関係から一義的に決定されるものであり、後述する実際の視聴環境空間における照明装置の照明制御データ生成時に使用される。また、リファレンスモデルは視聴者の入力情報に関係なく予め設定されていてもよいし、視聴者の視聴環境情報の入力が行われた後にその入力情報に基づき、例えば実際の視聴環境空間（部屋）の大きさと一致したリファレンスモデルを生成するようにしてもよい。
【００９１】
次に、ＣＰＵ８が視聴者の入力情報に基づいて照明制御情報の生成を行う演算処理について説明する。ＣＰＵ８は、視聴者入力情報受信部６で受信した映像表示装置情報、照明装置情報および視聴環境空間情報に基づいて実際の視聴環境空間に設置されている照明装置を適切に制御すべく、実際の視聴環境空間に設置されている照明装置のリファレンスモデルにおける照明装置との対応関係を示す情報を生成する。
【００９２】
図２３、図２４は、実際の視聴環境空間とリファレンスモデルとを映像表示装置の位置を揃えて重ね合わせた図で、図２３はその平面図を、図２４はその立体図である。実際の視聴環境空間およびリファレンスモデルに設置されている照明装置の符号は図１７〜図２０と同じである。実際の視聴環境空間に設置されている照明装置が直接照明（７ｈ、７i）として用いられる場合は、実際の視聴環境空間に設置されている照明装置７ｈ、７iがリファレンスモデルに設置されている照明装置ｖ１〜ｖ５４のどれに対応するのかを算出する。もちろん、照明装置７ｈ、７iのそれぞれが照明装置ｖ１〜ｖ５４の複数に対応することもある。
【００９３】
具体的には、図２５に示すように、実際の視聴環境空間に設置されている照明装置７ｈは、リファレンスモデルにおける照明装置ｖ２とｖ５とに対応し、照明装置７iは、照明装置ｖ４に対応する。実際の視聴環境空間に設置されている各照明装置のＩＤごとに、対応するリファレンスモデルの照明装置の情報が、照明制御情報記憶部９にテーブル形式で格納される。
【００９４】
次に、実際の視聴環境空間に設置されている照明装置が間接照明（７ｊ〜７o）として用いられる場合は、図２３に示すように、照明装置（７ｊ〜７o）の照射方向、1/2照射角に基づいて、照明装置（７ｊ〜７o）の照明光により照射されるリファレンスモデルの壁領域を算出し、その照射領域に対応する照明装置ｖ１〜ｖ５４を決定する。もちろん、照明装置７ｊ〜７oのそれぞれが照明装置ｖ１〜ｖ５４の複数に対応することもある。
【００９５】
具体的には、例えば照明装置７ｌは、図２５、図２６に示すように、リファレンスモデルにおける照明装置（ｖ１０〜ｖ１５）に対応する。間接照明（７ｊ〜７o）に関しても、上述した直接照明（７ｈ、７i）と同様、実際の視聴環境空間に設置されている各照明装置のＩＤごとに、対応するリファレンスモデルの照明装置の情報が、照明制御情報記憶部９にテーブル形式で格納される。
【００９６】
以上により、実際の視聴環境空間に設置されている照明装置７ｈ〜７oが、リファレンスモデルにおける照明装置ｖ１〜ｖ５４のどれに対応するかが分かったことになり、照明制御データ生成部１０において、ＣＰＵ８の内部メモリに格納されているリファレンスモデルの各照明装置に対応した特徴量検出領域の情報を用いて、実際の視聴環境空間に設置されている照明装置７ｈ〜７oに対応する特徴量検出領域を求めることができる。
【００９７】
ここで、実際の視聴環境空間に設置されている照明装置がリファレンスモデルにおける照明装置の複数に対応する場合は、そのリファレンスモデルにおける複数の照明装置のそれぞれによる影響度を算出して、照明制御情報記憶部９に格納しておけばよい。例えば、図２６に示すように、実際の視聴環境空間に設置されている照明装置による照明領域を構成する、リファレンスモデルの各照明装置による照明領域の面積比率を算出して、これを照明制御情報記憶部９に格納しておくことで、実際の視聴環境空間に設置されている照明装置の照明制御データを生成する際、リファレンスモデルの複数の照明装置に対応する映像データの特徴量に重み付けを加えて、より適切な照明制御を実現することが可能となる。
【００９８】
また、上記で説明した間接照明装置（７ｊ〜７o）に関して、視聴者は実際の視聴環境空間の壁で反射される反射光を照明光として目視する為、視聴環境空間の壁の色や反射率（輝度の低下）によって照明光が大きく影響を受ける。従って、ＣＰＵ８は、予め視聴者により入力された壁の色や反射率に基づき、照明制御データを生成する際の補正情報を求め、これを各照明装置のＩＤごとに照明制御情報記憶部９に格納する。
【００９９】
ここで、図２７は、照明制御情報記憶部９に格納されるデータテーブルの一例を示す図である。データテーブルには、実際の視聴環境空間に設置されている各照明装置のＩＤごとに、対応するリファレンスモデルの照明装置に関するリファレンス照明情報に加えて、壁の色情報と反射情報とからなる補正情報が格納されている。すなわち、照明制御情報記憶部９には、各照明装置７がリファレンスモデルのどの照明装置に対応するのかが、その影響度（構成面積比率）とともに記憶される。
【０１００】
また、補正情報の壁の色についてはＲ，Ｇ，Ｂの８ビットの階調表記で記憶され、反射情報では反射率が記憶される。ここで、直接照明装置の場合は、壁の色を（２５５，２５５，２５５）で表し、反射率を１（１００％）とする。これら照明制御情報記憶部９に格納されている照明制御情報は、照明制御データ生成部１０からＣＰＵ８へ要求があった時に、ＣＰＵ８により読み出される。そして、ＣＰＵ８は、照明制御情報記憶部９から読み出した照明制御情報と内部メモリに格納しているリファレンスモデル情報とを照明制御データ生成部１０へ送る。
【０１０１】
次に、上記で説明した視聴者により入力された視聴環境情報を基に作成され、照明制御情報記憶部９に格納された照明制御情報と、ＣＰＵ８の内部メモリに格納されているリファレンスモデル情報とを利用して、適切な照明制御データを生成する方法について説明する。
【０１０２】
図２８は、照明制御データ生成部１０の動作フローを示す図である。まず、照明制御データ生成部１０は、図１に示すデータ分離部３において分離された映像データを１フレームごとに読み込む（ステップ１）。次に、ＣＰＵ８から送られたリファレンスモデル情報（リファレンスモデルにおける各照明装置に対応する特徴量検出領域に関する情報）に基づいて、リファレンスモデルの各照明装置に対応する特徴量検出領域の映像データの特徴量を１フレームごとに検出する（ステップ２）。
【０１０３】
そして、ＣＰＵ８から送られた照明制御情報と、上記ステップ２で算出したリファレンスモデルにおける各照明装置に対応した映像データの特徴量とに基づいて、実際の視聴環境空間に設置されている各照明装置に対応する映像データの特徴量を算出し、これに応じて各照明装置の照明制御データを生成する（ステップ３）。
【０１０４】
ここで、例えば図２７に示すように、実際の視聴環境空間に設置されている照明装置ＩＤ１がリファレンスモデルにおける照明装置Ｖ１に対応する場合は、リファレンスモデルの照明装置Ｖ１に対応する特徴量検出領域において検出された映像データの特徴量をそのまま用いて、実際の視聴環境空間に設置されている照明装置ＩＤ１の照明制御データを生成する。また、実際の視聴環境空間に設置されている照明装置ＩＤ２がリファレンスモデルにおける照明装置Ｖ２、Ｖ３に対応し、各照明装置Ｖ２、Ｖ３による影響度がそれぞれ０．５である場合は、リファレンスモデルの照明装置Ｖ２、Ｖ３に対応する特徴量検出領域において検出された映像データの特徴量のそれぞれに対して重み係数０．５を積算し加算したものを用いて、実際の視聴環境空間に設置されている照明装置ＩＤ１の照明制御データを生成する。
【０１０５】
同様に、実際の視聴環境空間に設置されている照明装置ＩＤ３がリファレンスモデルにおける照明装置Ｖ３、Ｖ４、Ｖ５に対応し、各照明装置Ｖ３、Ｖ４、Ｖ５による影響度がそれぞれ０．３、０．３、０．４である場合は、リファレンスモデルの照明装置Ｖ３、Ｖ４、Ｖ５に対応する特徴量検出領域において検出された映像データの特徴量のそれぞれに対して重み係数０．３、０．３、０．４を積算し加算したものを用いて、実際の視聴環境空間に設置されている照明装置ＩＤ１の照明制御データを生成する。このような加重平均演算を採用することで、実際の視聴環境空間に設置されている照明装置に対応する映像データの特徴量を適切に検出することが可能となる。ばよい。もちろん、上述したような面積比率による加重平均でなく、他の換算方法でもよいことはいうまでもない。
【０１０６】
また、映像データの特徴量としては、色信号、輝度信号や映像撮影時における周囲の色温度などを用いることができる。また、ここでは、映像データの特徴量だけではなく、音声データの特徴量も検出している。音声データの特徴量としては、音量や音声周波数などを用いることができる。
【０１０７】
さらに、間接照明の場合などは、照明制御情報記憶部９に格納されている壁の色や反射率の補正情報から、照明制御データに適切な補正を施すことにより、実際の視聴環境空間における壁に応じた適切な間接照明制御を実現することができる。具体的には、壁の色が有色の場合には、壁の色の補色にあたる色を加えた照明光を出射することで壁の色を打ち消するような照明制御データを生成するように補正する。また、壁の反射率が1/2である場合には、照明装置より出射する照明光の輝度を２倍にして壁での反射光が所望なの輝度となるような照明制御データを生成するように補正すればよい。
【０１０８】
そして、照明制御データ生成部１０で生成された照明制御データと、該照明制御データに対応するフレームの映像データ及び音声データとはそれぞれ同期して、照明装置７、映像表示装置４、音声再生装置５に送出される。１フレーム分の照明制御データの生成が完了すると、次の入力フレームがあるか否か、すなわち映像データの入力が終了したかどうかを判定し（ステップ４）、次の入力フレームがある場合、この次のフレームを読み込む（ステップ１）。次の入力フレームがない場合は、処理動作を終了する。以上の動作を順次繰り返すことによって、表示すべき映像に適した照明制御を映像フレーム単位で行うことができる。
【０１０９】
以上では、リファレンスモデル情報をＣＰＵ８の内部メモリに持ち、視聴者が入力した視聴環境情報をリファレンスモデルに設置された照明装置に対応させることで、実際の視聴環境空間に設置されている照明装置７に対応する映像データの特徴量を検出する方法について説明したが、映像データの特徴量検出方法は、その他にも考えられる。例えば、実際の視聴環境空間に設置されている照明装置７の設置位置を座標変換後の座標系で表して、映像表示装置４の画面の中心からの位置を空間ベクトルで表記して、その方向と大きさにより各照明装置に対応する表示画面の特徴量検出領域を決定し、該特徴量検出領域における映像データの特徴量を検出するようにしてもよい。例えば、図２９、図３０に示すように、この特徴量検出領域算出方法において間接照明装置（７ｊ〜７o）は、実際の視聴環境空間の壁を照射する領域を仮想的な照明装置（７ｊ'〜７o'）として扱い、その仮想的な照明装置（７ｊ'〜７o'）の映像表示装置４の画面の中心からの位置を空間ベクトルで表記して、その方向と大きさにより各照明装置に対応する表示画面における特徴量検出領域を決定することもできる。
【０１１０】
このようにして決定された特徴量検出領域を用いて、実際の視聴環境空間に設置されている照明装置７に対応する映像データの特徴量を検出することにより、視聴環境空間に設置されている照明装置が直接照明装置であっても間接照明装置であっても、映像表示装置に表示されている映像と連動した適切な照明制御を実現することができる。この場合は、各照明装置のＩＤごとに各照明装置の空間位置を示す情報（空間ベクトル表記）を照明制御情報記憶部９にテーブル形式で格納すればよい。
【０１１１】
このように、各照明装置の設置位置や設置角度に応じた映像特徴量の検出領域を設定し、映像データの特徴量に応じた照明制御データを生成することにより、例えば図２１に示す映像を表示する際、映像表示装置４の周囲に設置された各照明装置による照明光を効果的に制御し、視聴者に対して高い臨場感を与えることができる。また、各照明装置に対応する映像特徴量の検出方法は、上記２つのようなものに限定される必要はなく、例えば映像の種類などによりその決定方法が変わってもよい。
【０１１２】
尚、上記実施形態においては、フレーム単位で映像特徴量及び／又は音声特徴量を検出し、照明制御データを生成するものについて説明したが、シーンまたはショット単位での映像特徴量及び／又は音声特徴量を検出し、ストーリ上つながりがある同一のシーンまたはショット内では各照明装置７による照明光を略一定に保持するように制御してもよい。
【０１１３】
また、上述した実施形態では、映像受信装置で受信した映像データや音声データの特徴量に基づいて、各照明装置に対する照明制御データを生成したが、本発明はこの方法に限定されるものではない。
【０１１４】
例えば、ある特定の仮想的な視聴環境空間内における照明装置の設置位置を表す照明位置情報（視聴環境リファレンスデータ）と、該仮想的な視聴環境空間内における照明装置に対する照明制御データとが、単独で或いは映像データとともに放送波に多重されるなどして外部装置から送信される場合、送信された視聴環境リファレンスデータと照明制御情報記憶部に格納された照明制御情報とに基づき、送信された照明制御データに対して所定の変換処理を施すことにより、視聴者の視聴環境空間に設置されている各照明装置に対する照明制御データを生成するようにしてもよい。これについて、本発明の第二の実施形態として、以下説明するが、上記第一の実施形態と同一部分には同一符号を付し、その説明は省略する。
【０１１５】
図３１は、本発明の第二の実施形態に係る視聴環境制御装置を示すブロック図である。本実施形態の視聴環境制御装置２１は、受信部２２において送信側（放送局）から送られてくる放送データを受信し、データ分離部２３において放送データに多重化されている映像データ、音声データ、照明制御データ、視聴環境リファレンスデータを分離する。データ分離部３で分離された映像データと音声データとは、それぞれ映像表示装置４と音声再生装置５に送られ、照明制御データと視聴環境リファレンスデータとは、照明制御データ変換部２９に送られる。
【０１１６】
ここで、図３２、図３３に視聴環境リファレンスデータの一例を示す。図３２は視聴環境リファレンスデータで表される仮想的な視聴環境空間を示し、図３３は視聴環境リファレンスデータを示す図である。図３２に示すように、視聴環境リファレンスデータで表される空間には、映像表示装置３４が視聴環境空間の１つの壁に沿うように配置され、照明装置３７が天井、床、４壁に１６個ずつ周期的に配置されている。また、図３３は、この視聴環境空間を表す視聴環境リファレンスデータを示しており、視聴環境空間の大きさ、壁の色や反射率などの視聴環境空間情報、映像表示装置３４の設置位置、画面サイズや画面方向などの映像表示装置情報、そして各照明装置３７の映像表示装置に対する位置、照射方向などを表す照明装置情報が含まれる。ここで位置や方向は、映像表示装置３４の画面中心を基準とした座標系で表している。また、照明装置３７はそれぞれ壁に設置された直接照明としている。図３２、図３３で示すリファレンスデータは一例であり、上記に限られるものではない。
【０１１７】
また、視聴者入力情報受信部６は、視聴者が例えば視聴環境制御装置１の本体に設けられている操作ボタンやリモコン装置で入力した映像表示装置４の設置位置、画面方向および画面サイズなどの映像表示装置情報と、照明装置７の設置位置、種類、サイズおよび照射方向などの照明装置情報と、視聴者の部屋の大きさや壁の色などの視聴環境空間情報を受け取り、ＣＰＵ８に送る。
【０１１８】
ＣＰＵ８においては、上記視聴者入力情報受信部６で受信した映像表示装置情報、照明装置情報および視聴環境空間情報に基づいて演算を行い、照明装置８の照明制御情報を生成し、照明制御情報記憶部９に送る。ここで、ＣＰＵ８が行う演算処理は、第一の実施形態で説明した処理と同じであるので説明は省略する。
【０１１９】
照明制御情報記憶部９においては、上記ＣＰＵ８で算出された照明制御情報をテーブル形式で格納する。ここで、照明装置７には予め識別子（以下では「ＩＤ」と呼ぶ）が付与されており、上記照明制御情報記憶部９に格納されている照明制御情報は、照明装置７のＩＤごとにテーブル形式で格納されている。照明制御情報記憶部９に格納された映照明制御情報は、照明制御データ変換部２９からの要求に従い、ＣＰＵ８を介して適宜照明制御データ変換部２９に送られる。照明制御データ変換部２９は、データ分離部３で分離された視聴環境リファレンスデータとＣＰＵ８から送られる視聴環境制御情報とに基づいて、データ分離部３で分離された照明制御データを、視聴環境空間に設置された各照明装置７の位置に応じた適切な照明制御データに変換し、照明装置７へ送る。
【０１２０】
ここで、照明制御データの変換方法は、ＣＰＵ８の内部メモリに記憶されているリファレンスモデル情報と外部装置より取得した視聴環境リファレンスデータとを比較し、ＣＰＵ８から送られる照明制御情報により表される照明位置と視聴環境リファレンスデータにより表される照明位置との対応関係に基づいて、外部装置より取得した仮想的な視聴環境空間の照明装置に対応した照明制御データを、実際の視聴環境空間の照明装置に対応した照明制御データに変換すればよい。
【０１２１】
具体的には、図１９、図２０に示すリファレンスモデルと、図３２、図３３に示す放送波に多重され送信されてきたリファレンスデータとを、画像表示装置の設置位置と画面方向とが一致するように座標変換し、リファレンスモデルにおける照明装置ｖ１〜ｖ５４が、リファレンスデータにより表される照明装置ｓ１〜ｓ９６のどの照明装置に対応するのかを算出する。ここで、この算出方法についてリファレンスモデルの天井に設置されている照明装置ｖ１〜ｖ９を例にとり図３４、図３５とともに説明する。また、図３４の例では、分かりやすく説明するため、リファレンスモデルとリファレンスデータとの視聴環境空間の天井の大きさは同じであるとする。図３４において、リファレンスモデルにおける照明装置ｖ１〜ｖ９は、それぞれリファレンスデータにおける照明装置ｓ１〜ｓ１６のうちのいずれかに対応している。例えばリファレンスモデルにおける照明装置ｖ１は、リファレンスデータにおける照明装置のｓ１、ｓ２、ｓ５、ｓ６に対応している。
【０１２２】
ここで、図３５は、リファレンスモデルにおける照明装置ｖ１とリファレンスデータにおける照明装置ｓ１、ｓ２、ｓ５、ｓ６との対応位置関係と面積比率を示す図である。リファレンスモデルにおける照明装置ｖ１に対応するリファレンスデータにおける照明装置ｓ１、ｓ２、ｓ５、ｓ６の面積比率は、（ｓ１：ｓ２：ｓ５：ｓ６）が（５：２：２：１）となる。これで、リファレンスモデルにおける照明装置ｖ１に対応するリファレンスデータにおける照明装置およびその面積比率が算出でき、同様の方法でリファレンスモデルにおけるその他の照明装置についてもリファレンスデータにおける照明装置との対応位置関係と面積比率を算出する。
【０１２３】
次に、照明制御データ変換部２９では照明制御情報記憶部９に格納されＣＰＵ８を介して読み出された映照明制御情報（実際の視聴環境空間における照明装置とリファレンスモデルにおける照明装置との対応位置関係の情報）と、上述で算出したリファレンスモデルにおける照明装置とリファレンスデータにおける照明装置との対応位置関係より、実際の視聴環境空間における照明装置をリファレンスデータにおける照明装置との対応位置関係に変換する。そして、リファレンスデータとともに外部装置より取得した照明制御データを実際の視聴環境空間における照明装置に対応するリファレンスデータにおける照明装置の面積比率に応じて重み付けをし、実際の視聴環境空間における照明装置を適切に照明制御する照明制御データを算出し、各照明装置７へ送る。
【０１２４】
尚、照明装置７へ送られる照明制御データは、映像データおよび音声データと出力タイミングを合わせる必要があるため、照明制御データ変換部２９には、例えば照明制御データ変換部２９において照明制御データを生成するのに必要な時間だけ、データ分離部３で分離された映像データと音声データを遅らせ、照明制御データと同期をとるためのディレイ発生部３０ａ，３０ｂが設けられている。
【０１２５】
視聴環境制御装置をこのような構成にすることにより、映像特徴量／音声特徴量から照明制御データを生成する機能を設けることなく、視聴環境空間に設置されている１以上の照明装置７を、その設置位置に応じて適切に制御することができる。また、視聴環境空間内における照明装置７の設置位置を変更した場合や、照明装置７を追加した場合などにおいても常に適切な照明制御が可能になる。
【０１２６】
以上では、本発明の第二の実施形態として、ＣＰＵ８の内部メモリにリファレンスモデル情報を予め格納し、まず、視聴者により入力された実際の視聴環境空間における照明装置７の設置位置情報をリファレンスモデルにおける照明装置の対応位置情報に変換し、次に、リファレンスモデルにおける照明装置を外部装置から送られてくるリファレンスデータにおける照明装置の対応位置情報に変換させ、その後に、実際の視聴環境空間における照明装置７をリファレンスデータにおける照明装置の対応位置情報に変換させて照明制御データを生成する変換方法を説明した。しかしながら、照明制御データ変換方法は上記に限定されるものではなく、必ずしもリファレンスモデルは必要ではない。
【０１２７】
例えば、視聴者による入力情報から照明装置７と映像表示装置４との相対位置に関わる情報を取得し、該情報と外部装置から送られるリファレンスデータとを、それぞれの映像表示装置の位置および画面方向が一致するように配置して比較し、実際の視聴環境空間における照明装置が対応するリファレンスデータにおける照明装置および面積比率を算出し、実際の視聴環境空間における照明装置を適切に照明制御する照明制御データへ変換するような方法でもよい。また、さらにもっと別の方法でもよい。
【０１２８】
また、本実施形態においては、照明制御データと視聴環境リファレンスデータとが映像データに付加されて放送されるものについて説明したが、照明制御データは放送波に多重されて送信され、視聴環境リファレンスデータは外部のサーバー装置等からインターネットなどを介して取得できるような場合、さらに映像表示装置４の位置を変更した場合においても、本発明を適用することができるのは言うまでもない。
【０１２９】
さらに、照明制御情報記憶部に格納された照明制御情報を、一旦インターネット等を介して外部のサーバ装置に送信し、該サーバ装置にて視聴者の視聴環境空間における照明装置の設置状態などに応じた照明制御データを生成して、これをインターネット等を介して受信し、各照明装置に対する照明制御データとする仕組みにしてもよい。これについて、本発明の第三の実施形態として、以下説明するが、上記第一の実施形態と同一部分には同一符号を付し、その説明は省略する。
【０１３０】
図３６は、本発明の第三の実施形態に係る視聴環境制御装置を示すブロック図である。本実施形態の視聴環境制御装置３１は、第１の受信部３２において送信側（放送局）から送られてくる放送データを受信し、データ分離部３において放送データに多重化されている映像データと音声データとを分離する。データ分離部３で分離された映像データと音声データとは、それぞれ映像表示装置４と音声再生装置５に送られる。
【０１３１】
また、視聴者入力情報受信部６は、視聴者が例えば視聴環境制御装置３１の本体に設けられている操作ボタンやリモコン装置で入力した映像表示装置の設置位置、画面方向および画面サイズなどの映像表示装置情報と、照明装置の設置位置、種類、サイズおよび照射方向などの照明装置情報と、視聴者の部屋の大きさや壁の色などの視聴環境空間情報を受け取り、照明制御情報記憶部９に送る。
【０１３２】
照明制御情報記憶部９においては、上記視聴者入力情報受信部６で受信した映像表示装置情報、照明装置情報、視聴環境空間情報をテーブル形式で格納する。ここで、照明装置７には予め識別子（以下では「ＩＤ」と呼ぶ）が付与されており、照明制御情報記憶部９に格納されている照明装置情報は、照明装置７のＩＤごとにテーブル形式で格納される。ＣＰＵ４１はユーザによる指示等に基づいて、映像表示装置４で表示する番組コンテンツに関する照明制御データの送信要求を、送信部４２を介して外部のサーバ装置へ通知する。このとき、ＣＰＵ４１からの指令に従い、照明制御情報記憶部９に格納された照明制御情報とＣＰＵ４１の内部メモリに記憶されているリファレンスモデル情報とが、送信部４２より外部のサーバ装置に送られる。
【０１３３】
そして、外部のサーバ装置では、上記照明制御情報及びリファレンスモデル情報に基づいて、送信要求のあった番組コンテンツに関する照明制御データを生成し、要求元である視聴環境制御装置へ送信する。この外部のサーバ装置から送信された照明制御データは第２の受信部４３で受信され、一旦ＣＰＵ４１内で保持される。そして、ＣＰＵ４１は、データ分離部３で分離された映像データのＴＣ（タイムコード）に対応する照明制御データを照明装置７へ送る。すなわち、外部のサーバ装置から送信された照明制御データは、映像データの出力タイミングと同期して出力されることが可能なように、映像データのＴＣ（タイミングコード）に関連付けてフレーム単位で記述されている。
【０１３４】
尚、視聴者入力情報受信部６の動作は、上述した第一の実施形態のものと同様であるので、ここでは説明を省略する。また、本実施形態においては、上記第二の実施形態における照明制御データ変換部２９の機能を、外部装置に設けたということができる。すなわち、視聴環境制御装置３１は、実際の視聴環境空間における照明装置の配置／数に応じた照明制御データを、外部装置から取得することが可能となっている。
【０１３５】
視聴環境制御装置をこのような構成にすることにより、映像特徴量／音声特徴量から照明制御データを生成する機能、及び視聴環境に応じて照明制御データを変換する機能を設けることなく、視聴環境空間に設置されている１以上の照明装置７を、その設置位置に応じて適切に制御することができる。また、視聴環境空間内における照明装置７の設置位置を変更した場合や、照明装置７を追加した場合、さらに映像表示装置４の位置を変更した場合などにおいても常に適切な照明制御が可能になる。
【０１３６】
以上では、本発明の第三の実施形態として、ＣＰＵ４１の内部メモリに予めリファレンスモデル情報を格納し、視聴者により入力された実際の視聴環境空間における照明装置７の設置位置情報をリファレンスモデルにおける照明装置の対応位置情報に変換して、求めた照明制御情報を外部のサーバ装置へ送信し、外部のサーバ装置で照明制御データを生成することを説明した。しかしながら、照明制御データ変換方法は上記に限定されるものではなく、必ずしもリファレンスモデルは必要ではない。例えば、視聴者による入力情報から照明装置７と映像表示装置４との相対位置に関わる情報を取得し、その情報を外部のサーバ装置へ送信し、サーバ装置は該情報に基づいて実際の視聴環境空間における照明装置を適切に照明制御する照明制御データを算出するようにしてもよい。また、さらにもっと別の方法でもよい。
【０１３７】
尚、上記説明において、番組コンテンツとは、テレビジョン放送によって伝送されるテレビジョン番組に係るコンテンツに限らず、ＤＶＤなどのメディア媒体に格納された作品に係るコンテンツであってもよい。すなわち、入力映像データはテレビジョン放送を受信して得られるものに限らず、外部再生装置より再生された映像データを入力する場合にも、本発明を適用することが可能である。
【図面の簡単な説明】
【０１３８】
【図１】本発明の第一の実施形態に係る視聴環境制御装置を示すブロック図である。
【図２】本発明で用いる照明装置の一例を示す外観図である。
【図３】視聴環境空間の一例を示す図である。
【図４】視聴者が行う視聴環境情報の入力動作フローチャートを示す図である。
【図５】リモコン装置の一例を示す図である。
【図６】視聴環境情報の入力開始を合図する画面表示を示す図である。
【図７】視聴環境空間情報の入力を促す画面表示を示す図である。
【図８】視聴環境空間の大きさ情報を入力する画面表示を示す図である。
【図９】視聴環境空間の色情報を入力する画面表示を示す図である。
【図１０】映像表示装置情報の入力を促す画面表示を示す図である。
【図１１】映像表示装置の画面サイズ情報を入力する画面表示を示す図である。
【図１２】映像表示装置の位置・角度情報を入力する画面表示を示す図である。
【図１３】照明装置情報の入力を促す画面表示を示す図である。
【図１４】照明装置の基本情報を入力する画面表示を示す図である。
【図１５】照明装置の位置情報を入力する画面表示を示す図である。
【図１６】照明装置の照射方向情報を入力する画面表示を示す図である。
【図１７】視聴環境空間の一例を基に座標変換を表す立体図である。
【図１８】視聴環境空間の一例を基に座標変換を表す平面図である。
【図１９】リファレンスモデルを表す立体図である。
【図２０】リファレンスモデルを表す平面展開図である。
【図２１】表示映像の一例を示す図である。
【図２２】図１９の表示映像に対する特徴量検出領域を示す図である。
【図２３】実際の視聴環境空間とリファレンスモデルとを重ね合わせた平面図である。
【図２４】実際の視聴環境空間とリファレンスモデルとを重ね合わせた立体図である。
【図２５】実際の視聴環境空間における照明装置のリファレンスモデルでの照射位置を示す図である。
【図２６】照明装置７ｌの照射領域に対応するリファレンスモデルにおける照明装置を示す図である。
【図２７】照明制御情報記憶部に格納されるデータテーブルの一例を示す図である。
【図２８】照明制御データ生成部の動作フローを示す図である。
【図２９】他の特徴量検出領域の算出方法を示す平面図である。
【図３０】他の特徴量検出領域の算出方法を示す立体図である。
【図３１】本発明の第二の実施形態に係る視聴環境制御装置を示すブロック図である。
【図３２】視聴環境リファレンスデータで表される仮想的な視聴環境空間の一例を示す図である。
【図３３】視聴環境リファレンスデータの一例を示す図である。
【図３４】リファレンスモデルにおける照明装置とリファレンスデータにおける照明装置との対応関係を示す図である。
【図３５】照明装置ｖ１のリファレンスデータにおける照明装置との対応関係を示す図である。
【図３６】本発明の第三の実施形態に係る視聴環境制御装置を示すブロック図である。
【符号の説明】
【０１３９】
１，２１，３１…視聴環境制御装置
２，２２…受信部
３，２３…データ分離部
４，３４…映像表示装置
５…音声再生装置
６…視聴者入力情報受信部
７，３７…照明装置
８，４１…ＣＰＵ
９…照明制御情報記憶
１０…照明制御データ生成部
１１（ａ），１１（ｂ），３０（ａ），３０（ｂ）…ディレイ発生部
１２…リモコン装置
１３…視聴環境設定キー
１４…決定キー
１５…十字キー
１６…数字キー
２９…照明制御データ変換部
３２…第１の受信部
４２…送信部
４３…第２の受信部
【図１】
0004922853.tif 000002
【図２】
0004922853.tif 000003
【図３】
0004922853.tif 000004
【図４】
0004922853.tif 000005
【図５】
0004922853.tif 000006
【図６】
0004922853.tif 000007
【図７】
0004922853.tif 000008
【図８】
0004922853.tif 000009
【図９】
0004922853.tif 000010
【図１０】
0004922853.tif 000011
【図１１】
0004922853.tif 000012
【図１２】
0004922853.tif 000013
【図１３】
0004922853.tif 000014
【図１４】
0004922853.tif 000015
【図１５】
0004922853.tif 000016
【図１６】
0004922853.tif 000017
【図１７】
0004922853.tif 000018
【図１８】
0004922853.tif 000019
【図１９】
0004922853.tif 000020
【図２０】
0004922853.tif 000021
【図２１】
0004922853.tif 000022
【図２２】
0004922853.tif 000023
【図２３】
0004922853.tif 000024
【図２４】
0004922853.tif 000025
【図２５】
0004922853.tif 000026
【図２６】
0004922853.tif 000027
【図２７】
0004922853.tif 000028
【図２８】
0004922853.tif 000029
【図２９】
0004922853.tif 000030
【図３０】
0004922853.tif 000031
【図３１】
0004922853.tif 000032
【図３２】
0004922853.tif 000033
【図３３】
0004922853.tif 000034
【図３４】
0004922853.tif 000035
【図３５】
0004922853.tif 000036
【図３６】
0004922853.tif 000037