(57)【要約】  照明演出システム（１）は、赤色光、緑色光及び青色光を発する光源部（１１）と、光源部（１１）を制御する制御部（１２）とを有する照明器具（１０）と、画素毎に赤色、緑色及び青色の画素値を示すＲＧＢ情報を含む動画像を視聴する際にユーザが注視する領域である注視領域を、時系列に検出する検出部（２３）と、注視領域のＲＧＢ情報を時系列に抽出する抽出部（２４）と、照明器具（１０）に対する照明制御情報を制御部（１２）に送信することで、照明器具（１０）の光色を制御する通信端末（２０）と、を備え、照明制御情報は、抽出部（２４）によって抽出されたＲＧＢ情報を含み、制御部（１２）は、照明制御情報に含まれるＲＧＢ情報の時間変化に従って光源部（１１）を制御する。
2016194311.tif 000002
【特許請求の範囲】
【請求項１】
赤色光、緑色光及び青色光を発する光源部と、当該光源部を制御する制御部とを有する照明器具と、
画素毎に赤色、緑色及び青色の画素値を示すＲＧＢ情報を含む動画像を視聴する際にユーザが注視する領域である注視領域を、時系列に検出する検出部と、
前記注視領域の前記ＲＧＢ情報を時系列に抽出する抽出部と、
前記照明器具に対する照明制御情報を前記制御部に送信することで、前記照明器具の光色を制御する通信端末と、を備え、
前記照明制御情報は、前記抽出部によって抽出されたＲＧＢ情報を含み、
前記制御部は、前記照明制御情報に含まれるＲＧＢ情報の時間変化に従って前記光源部を制御する
照明演出システム。
【請求項２】
前記通信端末は、
前記動画像を表示する表示部と、
前記ユーザを撮影することで、前記ユーザを含むユーザ画像を生成するカメラ部とを備え、
前記検出部は、前記カメラ部によって生成されたユーザ画像に基づいて前記ユーザの視線を計測することで、前記注視領域を検出する
請求項１記載の照明演出システム。
【請求項３】
前記照明演出システムは、所定の照明空間に配置された複数の前記照明器具を備え、
前記通信端末は、複数の前記照明器具の各々の光色を制御することで、前記照明空間の色を制御する
請求項１又は２に記載の照明演出システム。
【請求項４】
コンピュータを、請求項１〜３のいずれか１項に記載の照明演出システムとして機能させるためのプログラム。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、照明演出システム及びプログラムに関する。
【背景技術】
【０００２】
従来、調光又は調色機能を有する照明器具を用いて空間の照明演出を行う技術が知られている。例えば、特許文献１には、複数の演出パターンに基づいて照明演出を行う照明演出パネルの制御システムが開示されている。当該照明演出パネルの制御システムでは、体内時計による約１日周期のリズムに基づいた演出パターンに基づいて照明演出を行う。これにより、人間の１日のリズムに合わせた過ごしやすい快適な光環境を創出している。
【先行技術文献】
【特許文献】
【０００３】
【特許文献１】特開２０１４−１７０６３号公報
【発明の概要】
【発明が解決しようとする課題】
【０００４】
ところで、好みの色及び明るさなどは人によって多種多様であるため、照明演出も、ユーザの要望に適合したものであることが望まれる。しかしながら、上記従来の照明演出パネルの制御システムでは、人間の１日のリズムに合わせて照明演出を行うので、ユーザの要望に適合した動的な照明演出を行うことができない。【０００５】
そこで、本発明は、ユーザの要望に適合した動的な照明演出を行うことができる照明演出システムなどを提供することを目的とする。
【課題を解決するための手段】
【０００６】
上記目的を達成するため、本発明の一態様に係る照明演出システムは、赤色光、緑色光及び青色光を発する光源部と、当該光源部を制御する制御部とを有する照明器具と、画素毎に赤色、緑色及び青色の画素値を示すＲＧＢ情報を含む動画像を視聴する際にユーザが注視する領域である注視領域を、時系列に検出する検出部と、前記注視領域の前記ＲＧＢ情報を時系列に抽出する抽出部と、前記照明器具に対する照明制御情報を前記制御部に送信することで、前記照明器具の光色を制御する通信端末と、を備え、前記照明制御情報は、前記抽出部によって抽出されたＲＧＢ情報を含み、前記制御部は、前記照明制御情報に含まれるＲＧＢ情報の時間変化に従って前記光源部を制御する。【０００７】
また、本発明の一態様は、コンピュータを上記照明演出システムとして機能させるためのプログラムとして実現することができる。あるいは、当該プログラムを格納したコンピュータ読み取り可能な記録媒体として実現することもできる。
【発明の効果】
【０００８】
本発明に係る照明演出システムによれば、ユーザの要望に適合した動的な照明演出を行うことができる。
【図面の簡単な説明】
【０００９】
【図１】図１は、実施の形態に係る照明演出システムの構成を示すブロック図である。
【図２】図２は、実施の形態に係る照明演出システムの複数の照明器具が配置される空間のレイアウトを示す図である。
【図３】図３は、実施の形態に係る照明演出システムの動画像と注視領域とを示す図である。
【図４】図４は、実施の形態に係る照明演出システムの注視領域のＲＧＢ情報の時系列データを示す図である。
【図５】図５は、実施の形態に係る照明演出システムにおいて、注視領域のＲＧＢ情報の時系列データを生成する方法を示すフローチャートである。
【図６】図６は、実施の形態に係る照明演出システムにおいて、空間の照明演出を行う方法を示すフローチャートである。
【図７】図７は、実施の形態に係る照明演出システムにおいて、注視領域のＲＧＢ情報の時系列データに基づいて制御された空間の照明演出の様子を示す図である。
【発明を実施するための形態】
【００１０】
以下では、本発明の実施の形態に係る照明演出システムについて、図面を用いて詳細に説明する。なお、以下に説明する実施の形態は、いずれも本発明の好ましい一具体例を示すものである。したがって、以下の実施の形態で示される数値、形状、材料、構成要素、構成要素の配置及び接続形態、ステップ、ステップの順序などは、一例であり、本発明を限定する趣旨ではない。よって、以下の実施の形態における構成要素のうち、本発明の最上位概念を示す独立請求項に記載されていない構成要素については、任意の構成要素として説明される。
【００１１】
また、各図は、模式図であり、必ずしも厳密に図示されたものではない。また、各図において、同じ構成部材については同じ符号を付している。
【００１２】
（実施の形態）
［照明演出システム］
まず、実施の形態に係る照明演出システムの概要について、図１及び図２を用いて説明する。図１は、本実施の形態に係る照明演出システム１の構成を示すブロック図である。図２は、本実施の形態に係る照明演出システム１の複数の照明器具１０が配置される空間３０のレイアウトを示す図である。
【００１３】
図１に示すように、照明演出システム１は、複数の照明器具１０と、通信端末２０とを備える。具体的には、図２に示すように、照明演出システム１は、６つの照明器具１０ａ〜１０ｆを備える。なお、以降の説明において、６つの照明器具１０ａ〜１０ｆを特に区別しない場合、照明器具１０として説明する。
【００１４】
照明演出システム１では、空間３０に配置された複数の照明器具１０の光色及び光束を通信端末２０が制御することで、空間３０の色を制御する。つまり、照明演出システム１は、空間３０の照明演出を行う。
【００１５】
［照明器具］
複数の照明器具１０は、空間３０の少なくとも一部を照明するように配置されている。複数の照明器具１０が照明する部分は、互いに同じでもよく、あるいは、互いに異なっていてもよい。
【００１６】
空間３０は、配置された１以上の照明器具１０によって照明される照明空間である。空間３０は、例えば、部屋などの閉じられた空間である。あるいは、空間３０は、屋外などの開かれた空間でもよい。図２に示すように、空間３０は、例えば、天井３１と、床３２と、壁３３と、壁３４とによって囲まれている。
【００１７】
本実施の形態では、４つの照明器具１０ａ〜１０ｄは、天井３１に設けられている。４つの照明器具１０ａ〜１０ｄは、全てが同じ種類の照明器具でもよく、あるいは、異なる種類の照明器具でもよい。照明器具１０ａ〜１０ｄは、例えば、ダウンライト、シーリングライト、ペンダントライト、スポットライトなどである。
【００１８】
照明器具１０ｅは、床３２に設けられている。照明器具１０ｅは、例えば、床３２に固定されていてもよく、あるいは、移動可能に設置されていてもよい。照明器具１０ｅは、例えば、スタンドライト、フロアライトなどである。
【００１９】
照明器具１０ｆは、壁３３に設けられている。照明器具１０ｆは、例えば、ブラケットライト、ウォールライトなどである。
【００２０】
なお、図２に示す６つの照明器具１０ａ〜１０ｆの配置及び組み合わせは、一例に過ぎず、これに限定されない。例えば、空間３０に配置された照明器具１０の個数は、１つのみでもよい。すなわち、照明演出システム１は、１つのみの照明器具１０を備えてもよい。
【００２１】
図１に示すように、照明器具１０は、光源部１１と、制御部１２とを備える。以下、照明器具１０の各構成要素について詳細に説明する。
【００２２】
［光源部］
光源部１１は、赤色光（Ｒ）、緑色光（Ｇ）及び青色光（Ｂ）などの有色光、及び、白色光を出射する。具体的には、光源部１１は、赤色光源１１Ｒと、緑色光源１１Ｇと、青色光源１１Ｂとを備える。
【００２３】
赤色光源１１Ｒは、赤色光を出射する。例えば、赤色光源１１Ｒは、赤色ＬＥＤ（Ｌｉｇｈｔ  Ｅｍｉｔｔｉｎｇ  Ｄｉｏｄｅ）素子である。赤色光源１１Ｒが出射する赤色光のピーク波長は、例えば、６２０ｎｍ〜７５０ｎｍの範囲にある。
【００２４】
緑色光源１１Ｇは、緑色光を出射する。例えば、緑色光源１１Ｇは、緑色ＬＥＤ素子である。緑色光源１１Ｇが出射する緑色光のピーク波長は、例えば、５００ｎｍ〜５７５ｎｍの範囲にある。
【００２５】
青色光源１１Ｂは、青色光を出射する。例えば、青色光源１１Ｂは、青色ＬＥＤ素子である。青色光源１１Ｂが出射する緑色光のピーク波長は、例えば、４４５ｎｍ〜５００ｎｍの範囲にある。
【００２６】
本実施の形態では、赤色光源１１Ｒ、緑色光源１１Ｇ及び青色光源１１Ｂの各々は、調光機能を有する。具体的には、赤色光源１１Ｒ、緑色光源１１Ｇ及び青色光源１１Ｂの各々は、０％（消灯）〜１００％（全点灯）の間の設定された調光率で、赤色光、緑色光、青色光をそれぞれ出射する。
【００２７】
なお、光源部１１は、赤色光源１１Ｒが発する赤色光、緑色光源１１Ｇが発する緑色光、及び、青色光源１１Ｂが発する青色光を合成することで、白色光を発することができる。光源部１１は、例えば、赤色光、緑色光及び青色光の光束を調整することで、白色光の色温度を調整することもできる。あるいは、光源部１１は、別途、白色光を発する白色光源を備えてもよい。
【００２８】
赤色光源１１Ｒ、緑色光源１１Ｇ及び青色光源１１Ｂの各々は、制御部１２から送信される制御信号に基づいて、点灯し、消灯し、又は、調光する。制御信号には、例えば、点灯指示、消灯指示、又は、調光率が含まれる。
【００２９】
［制御部］
制御部１２は、赤色光、緑色光及び青色光を発する光源部１１を制御する。つまり、制御部１２は、赤色光、緑色光及び青色光の各々について、光を出射させる、出射させない、及び、出射時の強度（光束）を制御する。これにより、制御部１２は、例えば、ＣＩＥのＲＧＢ色空間の略全ての色の光を光源部１１に出射させることができる。
【００３０】
制御部１２は、赤色光源１１Ｒ、緑色光源１１Ｇ及び青色光源１１Ｂの各々を制御するコントローラである。制御部１２は、プログラムが格納された不揮発性メモリ、プログラムを実行するための一時的な記憶領域である揮発性メモリ、入出力ポート、プログラムを実行するプロセッサなどを有する。制御部１２は、例えば、マイコン（マイクロコントローラ）である。
【００３１】
具体的には、制御部１２は、赤色光源１１Ｒ、緑色光源１１Ｇ及び青色光源１１Ｂの各々に制御信号を送信する。例えば、制御部１２は、赤色光源１１Ｒに、点灯指示と調光率とを含む制御信号を送信する。赤色光源１１Ｒは、当該制御信号を受信し、当該制御信号に含まれる調光率で点灯する。制御部１２は、緑色光源１１Ｇ及び青色光源１１Ｂに対しても同様に制御信号を送信することで、赤色光源１１Ｒ、緑色光源１１Ｇ及び青色光源１１Ｂの各々を独立して制御する。
【００３２】
制御部１２は、通信端末２０との間で無線通信を行うことで、通信端末２０から照明制御情報を受信する。制御部１２は、受信した照明制御情報に基づいて、赤色光源１１Ｒ、緑色光源１１Ｇ及び青色光源１１Ｂの各々に送信する制御信号を生成して送信する。
【００３３】
照明制御情報には、抽出部２４によって抽出されたＲＧＢ情報が含まれる。ＲＧＢ情報は、具体的には、ユーザが動画像を視聴している際にユーザが注視する注視領域のＲＧＢ情報である。ＲＧＢ情報は、動画像のフレーム間での画素値の変化、又は、ユーザが視線を動かすことによる注視領域の変化に応じて、経時的に変化する。
【００３４】
具体的には、制御部１２は、ＲＧＢ情報に含まれる赤色光の画素値に対応する調光率で赤色光源１１Ｒを点灯させる。調光率は、画素値の最大値に対する画素値の割合で決定される。例えば、赤色光の画素値が「０〜２５５」の範囲の値を取る場合において、画素値が例えば「１２７」であるとき、制御部１２は、赤色光源１１Ｒを約５０％（＝１２７／２５５×１００）の調光率で点灯させる。例えば、赤色光の画素値が「０」である場合、制御部１２は、赤色光源１１Ｒを消灯させる。また、赤色光の画素値が最大値である場合、制御部１２は、赤色光源１１Ｒを全点灯（１００％の調光率）させる。
【００３５】
同様に、制御部１２は、例えば、ＲＧＢ情報に含まれる緑色光の画素値に対応する調光率で緑色光源１１Ｇを点灯させる。制御部１２は、例えば、ＲＧＢ情報に含まれる青色光の画素値に対応する調光率で青色光源１１Ｂを点灯させる。
【００３６】
制御部１２は、照明制御情報に含まれるＲＧＢ情報の時間変化に従って光源部１１を制御する。これにより、照明器具１０が出射する光の光色及び光束を、動画像に基づいて経時的に変化させることができる。詳細については、後で説明する。
【００３７】
なお、照明器具１０（制御部１２）と通信端末２０との間の無線通信は、例えば、Ｂｌｕｅｔｏｏｔｈ（登録商標）、ＺｉｇＢｅｅ（登録商標）又はＷｉ−Ｆｉ（登録商標）などの所定の無線通信規格に基づいて行われる。なお、制御部１２と通信端末２０との間の通信は、無線通信でなくてもよく、有線通信でもよい。
【００３８】
［通信端末］
通信端末２０は、照明器具１０に対する照明制御情報を制御部１２に送信することで、照明器具１０の光色を制御する。本実施の形態では、図２に示すように、空間３０には、６つの照明器具１０ａ〜１０ｆが設けられている。このため、通信端末２０は、６つの照明器具１０ａ〜１０ｆの各々の光色を制御することで、空間３０の光色を制御する。
【００３９】
通信端末２０は、例えば、携帯電話、スマートフォン、タブレット端末などの携帯端末である。図１に示すように、通信端末２０は、表示部２１と、カメラ部２２と、検出部２３と、抽出部２４と、通信部２５とを備える。
【００４０】
以下、通信端末２０が備える各構成要素について詳細に説明する。
【００４１】
［表示部］
表示部２１は、動画像を表示する。表示部２１は、例えば、ＬＣＤ（Ｌｉｑｕｉｄ  Ｃｒｙｓｔａｌ  Ｄｉｓｐｌａｙ）又は有機ＥＬ（Ｅｌｅｃｔｒｏ−Ｌｕｍｉｎｅｓｃｅｎｃｅ）ディスプレイである。表示部２１は、例えば、図２に示すように、通信端末２０の中央に設けられている。
【００４２】
表示部２１は、ユーザの指示に基づいて動画像を表示する。表示部２１は、通信端末２０の記憶部（図示せず）又は外部のサーバ装置（図示せず）などに記憶された１以上の動画像の中からユーザが選択した動画像を表示する。例えば、通信部２５がサーバ装置と通信することで、動画像を取得し、表示部２１は、取得された動画像を表示してもよい。なお、表示部２１は、複数の動画像の中から再生回数の多い動画像を自動的に選択して表示してもよい。
【００４３】
表示部２１が表示する動画像は、画素毎に赤色、緑色及び青色の画素値（輝度値）を示すＲＧＢ情報を含んでいる。当該動画像は、例えば、ユーザの好みに適合した動画像である。なお、ＲＧＢ情報は、輝度情報（Ｙ）及び色差情報（Ｃｂ、Ｃｒ）を含むことで、赤色、緑色及び青色の画素値を示してもよい。
【００４４】
本実施の形態では、表示部２１は、さらに、注視領域のキャリブレーション用の画像（以下、キャリブレーション画像と記載する）を表示する。キャリブレーションとは、ユーザの視線情報と動画像のフレーム内の画素位置とを対応付ける処理である。ユーザの視線情報は、カメラ部２２による撮影で生成されたユーザ画像内における、ユーザの眼（例えば、虹彩の中央）の画素位置を示す情報である。
【００４５】
キャリブレーション画像は、画面（フレーム）の所定の位置に所定のマーカを含む画像である。所定の位置は、例えば、フレームの中央（中心）又は四隅である。マーカは、例えば、周囲の画素よりも画素値が高い画素又は画素の集まりである。表示部２１が表示するキャリブレーション画像のマーカをユーザに注視させることで、このときのユーザの視線情報とマーカの位置とを対応付けることができる。
【００４６】
［カメラ部］
カメラ部２２は、ユーザを撮影することで、ユーザを含むユーザ画像を生成する。カメラ部２２は、例えば、レンズ及びイメージセンサを有する。カメラ部２２は、レンズを介して入射した光をイメージセンサによって電気信号に変換することで、画像データを生成する。カメラ部２２は、図２に示すように、表示部２１の近傍に設けられており、表示部２１に表示される動画像を視聴するユーザを略正面から撮影する。
【００４７】
ユーザ画像は、具体的には、ユーザの顔を含んでいる。より具体的には、ユーザ画像は、ユーザの眼を含んでいる。
【００４８】
カメラ部２２は、例えば、表示部２１が表示する動画像と同じフレームレートでユーザを撮影する。これにより、ユーザ画像と動画像の各フレームとを対応付けることができる。なお、カメラ部２２のフレームレートと表示部２１のフレームレートとが異なる場合は、小さい方のフレームレートに応じて、ユーザ画像と動画像のフレームとを対応付ければよい。
【００４９】
［検出部］
検出部２３は、注視領域を時系列に検出する処理部である。注視領域は、動画像を視聴する際にユーザが注視する領域である。つまり、注視領域は、動画像のフレーム内の領域である。検出部２３は、カメラ部２２によって生成されたユーザ画像に基づいてユーザの視線を計測することで、注視領域を検出する。
【００５０】
本実施の形態では、検出部２３は、キャリブレーションを行うことで、ユーザ画像とフレーム内の位置とを予め対応付けておく。キャリブレーションは、以下の手順で行われる。
【００５１】
まず、表示部２１が、キャリブレーション画像を表示し、表示された画像に含まれるマーカをユーザに注視させる。例えば、マーカは、フレームの中央に表示されているとする。
【００５２】
カメラ部２２は、中央にマーカを含むキャリブレーション画像を表示部２１が表示している間にユーザを撮影する。これにより、カメラ部２２は、ユーザがフレームの中央のマーカを見ているときのユーザ画像を生成することができる。
【００５３】
検出部２３は、カメラ部２２によって生成されたユーザ画像から、ユーザの眼（例えば、虹彩の中央）の画素位置を検出する。検出部２３は、検出した画素位置をフレームの中央に対応付ける。
【００５４】
以降、マーカの位置が異なるキャリブレーション画像を用いて、同様の処理を繰り返すことで、マーカの位置毎に、ユーザの眼の画素位置が対応付けられる。なお、マーカとマーカとの間の位置は、例えば、線形補間などの補間処理により、ユーザ画像内での画素位置を対応付けることができる。
【００５５】
検出部２３は、キャリブレーション結果に基づいて、カメラ部２２によって生成されたユーザ画像に含まれるユーザの眼の画素位置に対応付けられたフレーム内の画素を、注視領域として検出する。なお、注視領域は、ユーザの眼の画素位置に位置する１画素（以下、注視点と記載）に限らず、当該注視点を含む複数の画素の集まりでもよい。例えば、注視領域は、注視点を中心とする所定の半径の円でもよい。
【００５６】
図３は、本実施の形態に係る照明演出システム１の動画像と注視領域とを示す図である。ここでは、表示部２１は、ユーザのお気に入りの夕日が沈む動画像を表示する例について説明する。
【００５７】
本実施の形態では、検出部２３は、動画像のフレーム毎に注視領域を検出する。検出部２３は、時刻ｔ１〜ｔ３のフレーム４１〜４３の各々から注視領域５１〜５３を検出する。図３に示すように、ユーザの視線は、時刻ｔ１〜ｔ３にかけて、フレームの右上、中央下部、中央近傍と移動している。
【００５８】
［抽出部］
抽出部２４は、注視領域のＲＧＢ情報を時系列に抽出する処理部である。具体的には、抽出部２４は、動画像のフレーム内の注視点（１画素）の画素値を抽出する。画素値は、赤色、緑色及び青色の各々の画素値を含んでいる。なお、抽出部２４は、注視点の画素値だけでなく、注視点の周辺画素の画素値を用いてもよい。例えば、抽出部２４は、注視点の画素値と１以上の周辺画素の画素値との平均値を、注視領域のＲＧＢ情報として抽出してもよい。あるいは、抽出部２４は、注視点の画素値と１以上の周辺画素の画素値とを重み付け加算した値を、注視領域のＲＧＢ情報として抽出してもよい。
【００５９】
本実施の形態では、抽出部２４は、動画像のフレーム毎に注視領域のＲＧＢ情報を抽出するが、これに限らない。抽出部２４は、動画像のフレームレート又はカメラ部２２のフレームレートより遅いレートで注視領域のＲＧＢ情報を抽出してもよい。例えば、動画像のフレームレートが５０Ｈｚである場合に、ＲＧＢ情報の抽出レートは、１０Ｈｚでもよい。
【００６０】
抽出部２４は、注視領域のＲＧＢ情報を時系列に抽出することで、図４に示すようなＲＧＢ情報の時系列データが生成される。図４は、本実施の形態に係る照明演出システム１の注視領域のＲＧＢ情報の時系列データを示す図である。
【００６１】
ＲＧＢ情報の時系列データは、図４の（ａ）〜（ｃ）に示すように、赤色の画素値の経時変化を示すデータと、緑色の画素値の経時変化を示すデータと、青色の画素値の経時変化を示すデータとを含んでいる。なお、本実施の形態では、各色の画素値は「０〜２５５」の範囲で示されるが、これに限らない。
【００６２】
注視領域が移動することによって、又は、注視領域が移動しない場合であっても注視領域の画素値が変化することによって、図４に示すように、注視領域のＲＧＢ情報は、時間と共に変化する。例えば、図３に示す例では、時刻ｔ１における注視領域５１のＲＧＢ情報は、濃いオレンジ色を示す。時刻ｔ２における注視領域５２のＲＧＢ情報は、薄いオレンジ色を示す。時刻ｔ３における注視領域５３のＲＧＢ情報は、黄色を示す。
【００６３】
このように、ＲＧＢ情報の時系列データは、動画像、及び、当該動画像を視聴するユーザの注視領域に依存して生成される。注視領域は、動画像の表示中にユーザが注視する領域であり、ユーザが好む領域とみなすことができる。したがって、注視領域のＲＧＢ情報を利用することで、ユーザの要望に適合したＲＧＢ情報の時系列データを生成することができる。さらに、動画像としてユーザが好む動画像を利用することで、ユーザの要望により適合したＲＧＢ情報の時系列データを生成することができる。
【００６４】
なお、検出部２３及び抽出部２４は、プログラムが格納された不揮発性メモリ、プログラムを実行するための一時的な記憶領域である揮発性メモリ、入出力ポート、プログラムを実行するプロセッサなどを有する集積回路で実現される。
【００６５】
［通信部］
通信部２５は、照明器具１０の制御部１２との間で無線通信を行う通信インタフェースである。通信部２５は、照明制御情報を照明器具１０の制御部１２に送信する。通信部２５は、抽出部２４によって抽出されたＲＧＢ情報の時系列データを含む照明制御情報を送信する。
【００６６】
本実施の形態では、通信部２５は、ユーザ指示に基づいて、照明制御情報を複数の照明器具１０の制御部１２に送信する。例えば、ユーザが空間３０の照明演出を行いたいときに、通信端末２０の操作部（例えば、タッチパネル（図示せず））を利用して、照明制御情報の送信を指示する。通信部２５は、当該指示に基づいて、照明制御情報を複数の照明器具１０に送信する。
【００６７】
なお、通信部２５は、照明制御情報を予め照明器具１０の制御部１２に送信してもよい。照明器具１０の制御部１２は、例えば、所定のスケジュール情報に基づいて、空間３０の照明演出を行ってもよい。このとき、スケジュール情報は、例えば、照明演出の開始時刻及び終了時刻を示す情報である。
【００６８】
［動作］
続いて、本実施の形態に係る照明演出システム１の動作について説明する。本実施の形態に係る照明演出システム１は、ＲＧＢ情報の時系列データを生成する処理（時系列データ生成処理）と、時系列データに基づいて空間３０の照明演出を行う処理（照明演出処理）とを行う。
【００６９】
［時系列データ生成処理］
図５は、本実施の形態に係る照明演出システム１において、注視領域のＲＧＢ情報の時系列データを生成する方法を示すフローチャートである。
【００７０】
図５に示すように、まず、通信端末２０は、キャリブレーションを行う（Ｓ１０）。キャリブレーションの詳細については、上述した通りである。なお、ユーザの視線情報と動画像のフレーム内の画素位置との対応付けが予め行われている場合は、キャリブレーションを行わなくてもよい。
【００７１】
次に、表示部２１は、動画像の表示を開始する（Ｓ１２）。当該動画像は、例えば、ユーザが通信端末２０の操作部（図示せず）を操作することで、選択した動画像である。表示部２１が動画像の表示を開始すると同時に、カメラ部２２は、ユーザを撮影することで、ユーザ画像を生成する。
【００７２】
次に、検出部２３は、ユーザ画像を用いて注視領域を検出する（Ｓ１４）。そして、抽出部２４は、検出部２３によって検出された注視領域のＲＧＢ情報を抽出する（Ｓ１６）。なお、注視領域の検出とＲＧＢ情報の検出とは、動画像のフレーム単位で行われる。例えば、抽出部２４は、ユーザ画像に対応する動画像のフレームから、注視領域のＲＧＢ情報を抽出する。なお、ユーザ画像に対応する動画像のフレームとは、ユーザ画像の撮影時刻に、表示部２１に表示されていたフレームである。
【００７３】
以降、動画像の表示を終了するまで、注視領域の検出とＲＧＢ情報の抽出とを繰り返す（Ｓ１８）。これにより、ＲＧＢ情報の時系列データを生成することができる。生成されたＲＧＢ情報の時系列データは、例えば、通信端末２０の記憶部（図示せず）に保存される。
【００７４】
［照明演出処理］
図６は、本実施の形態に係る照明演出システム１において、空間３０の照明演出を行う方法を示すフローチャートである。
【００７５】
まず、通信部２５は、照明制御情報を複数の照明器具１０の制御部１２に送信する（Ｓ２０）。例えば、ユーザの指示に基づいて、通信部２５は、照明制御情報を送信する。
【００７６】
複数の照明器具１０の各々の制御部１２は、送信された照明制御情報を受信する（Ｓ２２）。そして、制御部１２は、受信した照明制御情報に含まれるＲＧＢ情報の時系列データに従って、光源部１１を制御する（Ｓ２４）。具体的には、ＲＧＢ情報に含まれる赤色光、緑色光及び青色光の各々の画素値から、赤色光源１１Ｒ、緑色光源１１Ｂ及び青色光源１１Ｂの各々の調光率を決定し、決定した調光率で各々の光源を点灯させる。
【００７７】
このようにして、複数の照明器具１０の各々は、ＲＧＢ情報の時系列データに対応する光色の光で空間３０を照明する。なお、このとき、複数の照明器具１０は、互いに同じ光色及び光束の光を出射する。
【００７８】
以上のようにして、図７に示すように、空間３０には、動画像の注視領域のＲＧＢ情報に基づいた動的な照明演出が行われる。なお、図７は、本実施の形態に係る照明演出システム１において、注視領域のＲＧＢ情報の時系列データに基づいて制御された空間３０の照明演出の様子を示す図である。
【００７９】
例えば、図７は、図３に示す動画像に基づいて動的な照明演出を行った結果を示している。具体的には、時刻Ｔ１では、時刻ｔ１の注視領域５１のＲＧＢ情報が示す濃いオレンジ色の光で空間が照明される。時刻Ｔ２では、時刻ｔ２の注視領域５２のＲＧＢ情報が示す薄いオレンジ色の光で空間が照明される。時刻Ｔ３では、時刻ｔ３の注視領域５３のＲＧＢ情報が示す黄色の光で空間が照明される。このように、図３に示す動画像における注視領域のＲＧＢ情報の時間変化に応じて、照明空間の光色も動的に変化する。
【００８０】
本実施の形態では、時刻ｔ１から時刻ｔ３までの期間と時刻Ｔ１から時刻Ｔ３までの期間とは、同じ長さの期間である。すなわち、動画像のフレームレートと同じレートで光源部１１が制御されて、空間３０の照明が変更される。これにより、動画像の注視領域の色の変化と同じ速度の色の変化を空間３０に動的に演出することができる。
【００８１】
なお、動画像のフレームレートと光源部１１の制御レートとは、異なっていてもよい。例えば、動画像のフレームレートより遅いレート（例えば、整数分の１など）で、制御部１２は、光源部１１を制御してもよい。これにより、動画像の注視領域の色の変化よりもゆっくりとした色の変化を空間３０に動的に演出することができる。
【００８２】
［効果など］
以上のように、本実施の形態に係る照明演出システム１は、赤色光、緑色光及び青色光を発する光源部１１、及び、光源部１１を制御する制御部１２を有する照明器具１０と、画素毎に赤色、緑色及び青色の画素値を示すＲＧＢ情報を含む動画像を視聴する際にユーザが注視する領域である注視領域を、時系列に検出する検出部２３と、注視領域のＲＧＢ情報を時系列に抽出する抽出部２４と、照明器具１０に対する照明制御情報を制御部１２に送信することで、照明器具１０の光色を制御する通信端末２０とを備え、照明制御情報は、抽出部２４によって抽出されたＲＧＢ情報を含み、制御部１２は、照明制御情報に含まれるＲＧＢ情報の時間変化に従って光源部１１を制御する。
【００８３】
これにより、ユーザが視聴する動画像の注視領域のＲＧＢ情報の時系列データに基づいて、空間３０の照明演出を行うので、ユーザの要望に適合した動的な照明演出を行うことができる。
【００８４】
例えば、本実施の形態では、ユーザのお気に入りの動画像を再生しているときに、ユーザが注視する注視領域のＲＧＢ情報を時系列で抽出する。したがって、ＲＧＢ情報の時系列データは、お気に入りの動画像において、ユーザが注視している領域、すなわち、ユーザが好む領域の色の変化を示している。ＲＧＢ情報の時系列データを用いるので、お気に入りの動画像におけるユーザが好む領域の色の変化を照明空間に反映させることができる。簡単に言い換えると、ユーザが動画像を見た時に感じる印象を照明空間に再現することができる。したがって、本実施の形態に係る照明演出システム１によれば、ユーザの要望に適合した動的な照明演出を行うことができる。
【００８５】
また、例えば、通信端末２０は、動画像を表示する表示部２１と、ユーザを撮影することで、ユーザを含むユーザ画像を生成するカメラ部２２とを備え、検出部２３は、カメラ部２２によって生成されたユーザ画像に基づいてユーザの視線を計測することで、注視領域を検出する。
【００８６】
これにより、通信端末２０が表示部２１とカメラ部２２とを備えるので、注視領域の検出精度を高めることができる。例えば、表示部２１とカメラ部２２とを互いの近傍に配することで、キャリブレーションを精度良く行うことができる。したがって、注視領域の検出精度を高めることができるので、ユーザの要望により適合した照明演出を行うことができる。
【００８７】
また、例えば、照明演出システム１は、所定の照明空間に配置された複数の照明器具１０を備え、通信端末２０は、複数の照明器具１０の各々の光色を制御することで、照明空間の色を制御する。
【００８８】
これにより、複数の照明器具１０がＲＧＢ情報の時系列データに基づいた光色の光を発することで、照明器具１０が照明する領域だけでなく、複数の照明器具１０が配置された空間３０を、ユーザの要望に適合した光色の光で照明することができる。
【００８９】
なお、本実施の形態における技術は、照明演出システムとして実現できるだけでなく、コンピュータを、上述した照明演出システムとして機能させるためのプログラムとして実現することもできる。あるいは、当該プログラムを記録したコンピュータ読み取り可能なＤＶＤ（Ｄｉｇｉｔａｌ  Ｖｅｒｓａｔｉｌｅ  Ｄｉｓｃ）などの記録媒体として実現することもできる。
【００９０】
つまり、上述した包括的又は具体的な態様は、システム、装置、集積回路、コンピュータプログラム又はコンピュータ読み取り可能な記録媒体で実現されてもよく、システム、装置、集積回路、コンピュータプログラム及び記録媒体の任意な組み合わせで実現されてもよい。
【００９１】
（その他）
以上、本発明に係る照明演出システムについて、上記の実施の形態に基づいて説明したが、本発明は、上記の実施の形態に限定されるものではない。
【００９２】
例えば、上記の実施の形態では、通信端末２０が携帯端末である例について示したが、これに限らない。通信端末２０は、所定の場所に設置された制御装置などでもよい。例えば、通信端末２０は、パーソナルコンピュータでもよく、あるいは、照明器具１０を制御する専用のデバイスでもよい。
【００９３】
また、通信端末２０は、表示部２１及びカメラ部２２を備えていなくてもよい。例えば、照明演出システム１は、通信端末２０とは別体のテレビなどのディスプレイと、通信端末２０とは別体のカメラとを備えてもよい。具体的には、ディスプレイが動画像を再生し、表示された動画像を視聴するユーザをカメラが撮影することで、注視領域を検出してもよい。通信端末２０は、カメラによって検出された注視領域を取得し、動画像と対応付けることで、ＲＧＢ情報の時系列データを生成してもよい。
【００９４】
また、通信端末２０は、検出部２３と抽出部２４とを備えていなくてもよい。例えば、通信端末２０と通信可能な外部のサーバ装置が検出部２３と抽出部２４とを備えていてもよい。すなわち、照明演出システムは、サーバ装置を備えてもよい。
【００９５】
このとき、通信端末２０は、外部のサーバ装置に、表示部２１が表示した動画像と、カメラ部２２によって生成されたユーザ画像とを送信する。これにより、サーバ装置が、動画像とユーザ画像とを用いて、注視領域のＲＧＢ情報の時系列データを生成することができる。サーバ装置が生成したＲＧＢ情報の時系列データは、例えば、通信端末２０を介して、又は、介さずに直接、複数の照明器具１０に送信される。なお、サーバ装置が予め動画像を記憶している場合、通信端末２０は、サーバ装置には、表示部２１が表示した動画像を特定する情報（識別子など）を動画像の代わりに送信してもよい。
【００９６】
また、例えば、上記の実施の形態では、光源に対する調光率が、画素値の最大値に対する画素値の割合である例について示したが、これに限らない。例えば、所定の係数を乗じることで、調光率を変化させてもよい。例えば、所定の係数が０．７である場合に、画素値が最大値であるとき、光源の調光率を１００％ではなく、７０％（＝１００％×０．７）とすることができる。
【００９７】
また、例えば、上記の実施の形態では、複数の照明器具１０が互いに同じ光色及び光束の光を出射する例について示したが、これに限らない。例えば、上述の係数を複数の照明器具１０間で異ならせることによって、複数の照明器具１０の光束を互いに異ならせてもよい。例えば、天井の照明器具１０ａ〜１０ｄを、係数を１に設定することで明るくし、床及び壁の照明器具１０ｅ及び１０ｆを、係数を１より小さい値に設定することで暗くしてもよい。
【００９８】
また、例えば、赤色光源１１Ｒ、緑色光源１１Ｇ及び青色光源１１Ｂの各々は、赤色光、緑色光及び青色光をそれぞれ出射する有機ＥＬ素子でもよく、あるいは、蛍光灯などでもよい。
【００９９】
その他、各実施の形態に対して当業者が思いつく各種変形を施して得られる形態や、本発明の趣旨を逸脱しない範囲で各実施の形態における構成要素及び機能を任意に組み合わせることで実現される形態も本発明に含まれる。
【符号の説明】
【０１００】
１  照明演出システム
１０、１０ａ、１０ｂ、１０ｃ、１０ｄ、１０ｅ、１０ｆ  照明器具
１１  光源部
１２  制御部
２０  通信端末
２１  表示部
２２  カメラ部
２３  検出部
２４  抽出部
２５  通信部
３０  空間
５１、５２、５３  注視領域
【図１】
2016194311.tif 000003
【図２】
2016194311.tif 000004
【図３】
2016194311.tif 000005
【図４】
2016194311.tif 000006
【図５】
2016194311.tif 000007
【図６】
2016194311.tif 000008
【図７】
2016194311.tif 000009
【国際調査報告】
2016194311.tif 000010
2016194311.tif 000011
2016194311.tif 000012
2016194311.tif 000013