(57)【要約】  被写体の中に動被写体が存在し、動被写体の動きに応じて得られる画像と構想データとの間に差異が生じる等した場合には、各光源の発光強度を変化させる等して構想データを維持するように光源の設定を自動で行う。  情報処理装置と、発光部とを有し、前記情報処理装置は、所望する画像の特徴を表す構想データと、発光部の発光結果とに応じて、前記発光部の設定を決定し、被写体の変化が生じた場合に構想データを維持するように前記決定した設定を制御する制御部と、前記発光部に対して前記設定を出力する出力部とを有し、前記発光部は、前記情報処理装置から出力された設定に基づく発光を制御する発光制御部を有するライティングシステム。
2019054416.tif 000002
【特許請求の範囲】
【請求項１】
所望する画像の特徴を表す構想データと、発光部の発光結果とに応じて、前記発光部の設定を決定する制御部を有し、  前記制御部は、被写体の変化が生じた場合に構想データを維持するように前記決定した設定を制御する  情報処理装置。
【請求項２】
前記構想データは、被写体の領域毎に指定される明るさを示すデータである  請求項１に情報処理装置。
【請求項３】
前記制御部は、前記発光部が所定の発光パターンで発光した場合に得られる画像の画像情報に基づいて、前記発光部の発光結果に対応する調光テーブルを生成する  請求項１に記載の情報処理装置。
【請求項４】
前記発光パターンは、発光部の発光強度である  請求項３に記載の情報処理装置。
【請求項５】
前記制御部は、前記被写体に含まれる動被写体の位置情報に基づいて、前記発光部の発光結果に対応する調光テーブルを生成する  請求項４に記載の情報処理装置。
【請求項６】
前記制御部は、所定の発光強度及び所定の位置情報に対応する画像情報を使用して、前記所定の位置情報とは異なる位置情報に対応する画像情報を生成する  請求項５に記載の情報処理装置。
【請求項７】
前記発光パターンは、発光部の色温度である  請求項３に記載の情報処理装置。
【請求項８】
前記画像情報は、前記発光部の発光パターンに対応する空間的なセンサ情報である  請求項３に記載の情報処理装置。
【請求項９】
前記画像情報は、画素単位又は任意の大きさのブロック単位における輝度レベルである  請求項８に記載の情報処理装置。
【請求項１０】
前記構想データを生成するための入力を受け付ける入力部を有する  請求項１に記載の情報処理装置。
【請求項１１】
前記入力を受け付ける際に参照される参照画像を表示する表示部を有する  請求項１０に記載の情報処理装置。
【請求項１２】
前記発光部の設定は、発光部の発光強度、発光部から発光する光の色温度、当該光の硬軟、当該光の照射範囲及び当該光の照射方向の少なくとも一つの設定に関する設定である  請求項１に記載の情報処理装置。
【請求項１３】
前記発光部の設定を出力する出力部を有する  請求項１に記載の情報処理装置。
【請求項１４】
前記被写体は、ユーザにより指定された被写体及び自動で認識された被写体の少なくとも一方である  請求項１に記載の情報処理装置。
【請求項１５】
所望する画像の特徴を表す構想データと、発光部の発光結果とに応じて、前記発光部の設定を決定し、  被写体の変化が生じた場合に構想データを維持するように前記決定した設定を制御する  情報処理方法。
【請求項１６】
所望する画像の特徴を表す構想データと、発光部の発光結果とに応じて、前記発光部の設定を決定し、  被写体の変化が生じた場合に構想データを維持するように前記決定した設定を制御する処理を  コンピュータに実行させるプログラム。
【請求項１７】
情報処理装置と、発光部とを有し、  前記情報処理装置は、  所望する画像の特徴を表す構想データと、発光部の発光結果とに応じて、前記発光部の設定を決定し、被写体の変化が生じた場合に構想データを維持するように前記決定した設定を制御する制御部と、  前記発光部に対して前記設定を出力する出力部とを有し、  前記発光部は、  前記情報処理装置から出力された設定に基づく発光を制御する発光制御部とを有する  ライティングシステム。
【請求項１８】
前記情報処理装置は、記録されない画像を用いて前記発光部の発光結果を演算する  請求項１７に記載のライティングシステム。
【発明の詳細な説明】
【技術分野】
【０００１】  本開示は、情報処理装置、情報処理方法、プログラム及びライティングシステムに関する。
【背景技術】
【０００２】  複数の光源からの光を被写体に照射した（ライティングした）状態で撮影を行う撮影技法が知られている。ライティングは、被写体の立体感を出せる等、被写体を印象的に表現できる手法として、写真や映像（例えば、映画）の制作現場において広く用いられている。しかしながら、所望のライティング効果を得るためには、複数の光源に対する調整及び調整後のテスト撮影を繰り返す必要があり、一般的なライティングシステムは、多くの人員、時間をかける必要があるという問題を抱えていた。そうした現状に鑑み、コンピュータ上でライティング条件を設定し、設定されたライティング条件で得られる画像をコンピュータ上で確認することができる撮影シミュレーション装置が提案されている（例えば、下記特許文献１を参照のこと）。
【先行技術文献】
【特許文献】
【０００３】
【特許文献１】特開２００５−３０１７８５号公報
【発明の概要】
【発明が解決しようとする課題】
【０００４】  しかしながら、特許文献１に記載の技術のように、コンピュータ上でライティングの結果をシミュレーションできたとしても、所望のライティング効果を得るために、ライティング条件を試行錯誤しなければならないという問題があった。【０００５】  本開示は、所望のライティング効果を得るための発光部（光源）の設定を簡単に行うことができる情報処理装置、情報処理方法、プログラム及びライティングシステムを提供することを目的の一つとする。
【課題を解決するための手段】
【０００６】  本開示は、例えば、  所望する画像の特徴を表す構想データと、発光部の発光結果とに応じて、発光部の設定を決定する制御部を有し、  制御部は、被写体の変化が生じた場合に構想データを維持するように決定した設定を制御する  情報処理装置である。【０００７】  本開示は、例えば、  所望する画像の特徴を表す構想データと、発光部の発光結果とに応じて、発光部の設定を決定し、  被写体の変化が生じた場合に構想データを維持するように決定した設定を制御する  情報処理方法である。【０００８】  本開示は、例えば、  所望する画像の特徴を表す構想データと、発光部の発光結果とに応じて、発光部の設定を決定し、  被写体の変化が生じた場合に構想データを維持するように決定した設定を制御する処理を  コンピュータに実行させるプログラムである。【０００９】  本開示は、例えば、  情報処理装置と、発光部とを有し、  情報処理装置は、  所望する画像の特徴を表す構想データと、発光部の発光結果とに応じて、発光部の設定を決定し、被写体の変化が生じた場合に構想データを維持するように決定した設定を制御する制御部と、  発光部に対して設定を出力する出力部とを有し、  発光部は、  情報処理装置から出力された設定に基づく発光を制御する発光制御部とを有する  ライティングシステムである。
【発明の効果】
【００１０】  本開示の少なくとも実施形態によれば、所望のライティング効果を得るための発光部の設定を簡単に行うことができる。なお、ここに記載された効果は必ずしも限定されるものではなく、本開示中に記載されたいずれの効果であっても良い。また、例示された効果により本開示の内容が限定して解釈されるものではない。
【図面の簡単な説明】
【００１１】
【図１】図１は、第１の実施形態に係るライティングシステムの構成例を示す図である。
【図２】図２は、第１の実施形態に係る撮像装置の構成例を示すブロック図である。
【図３】図３は、第１の実施形態に係るタブレットコンピュータの構成例を示すブロック図である。
【図４】図４Ａ〜図４Ｃは、第１の実施形態に係る光源の構成例を示すブロック図である。
【図５】図５は、第１の実施形態に係るキャリブレーション処理を説明するための図である。
【図６】図６は、第１の実施形態に係る調光テーブルの一例を説明するための図である。
【図７】図７は、第１の実施形態に係るキャリブレーション処理の、処理の流れの一例を示すフローチャートである。
【図８】図８は、第１の実施形態に係る参照画像の一例等を説明するための図である。
【図９】図９は、第１の実施形態に係る構想データ生成処理の、処理の流れの一例を示すフローチャートである。
【図１０】図１０は、第１の実施形態に係るライティングの設定及び撮影処理の、処理の流れの一例を示すフローチャートである。
【図１１】図１１は、第２の実施形態に係るライティングシステムの構成例を示す図である。
【図１２】図１２Ａ〜図１２Ｃは、第２の実施形態に係る光源の構成例を示すブロック図である。
【図１３】図１３は、第２の実施形態に係るキャリブレーション処理の、処理の流れの一例を示すフローチャートである。
【図１４】図１４は、第２の実施形態に係る調光テーブルの一例を説明するための図である。
【図１５】図１５は、第２の実施形態に係る参照画像の一例等を説明するための図である。
【図１６】図１６は、第２の実施形態に係るライティングの設定及び撮影処理の、処理の流れの一例を示すフローチャートである。
【図１７】図１７は、変形例を説明するための図である。
【発明を実施するための形態】
【００１２】  以下、本開示の実施形態等について図面を参照しながら説明する。なお、説明は以下の順序で行う。＜１．第１の実施形態＞＜２．第２の実施形態＞＜３．変形例＞  以下に説明する実施形態等は本開示の好適な具体例であり、本開示の内容がこれらの実施形態等に限定されるものではない。
【００１３】＜１．第１の実施形態＞  始めに、本開示の第１の実施形態について説明する。第１の実施形態は、静止画を撮影する際に、ユーザが所望するライティング効果を得るためのライティングの設定を自動で行う実施形態である。ライティングの設定とは、光源（ライト）に対する設定を意味し、実施形態では、光源の発光強度に関する設定を例にして説明する。但し、光源に対する設定は、光源の発光強度に限定されることはない。例えば、上述した発光強度、光源から発光する光の色温度、当該光の硬軟、当該光の照射範囲及び当該光の照射方向の少なくとも１つに関する設定であっても良い。設定は、具体的な値（例えば、色温度であれば、単位をケルビン（Ｋ）とする具体的な値）であっても良いし、発光強度のレベル（例えば、発光強度が強、中、弱）や光の照射方向（例えば、基準方向に対してやや右寄り、左寄り等）に対応する値（フラグ）であっても良い。
【００１４】［ライティングシステムの構成例］  図１は、本開示の第１の実施形態に係るライティングシステム（ライティングシステム１０）の構成例を示している。ライティングシステム１０は、撮像装置１と、情報処理装置の一例であるタブレット型のコンピュータ（以下、タブレットコンピュータ２と称する）と、複数の光源（発光部）とを有している。本実施形態におけるライティングシステム１０は、所謂、３灯照明と称される照明技法に対応して、３個の光源（光源３Ａ、３Ｂ及び３Ｃ）を有している。例えば、光源３Ａはフィルライトを呼ばれ、光源３Ｂはキーライトと呼ばれ、光源３Ｃはバックライトと呼ばれる。光源３Ａ〜３Ｃが発光した状態で、撮像装置１を使用した被写体４の撮影が行われる。本実施形態では、光源３Ａ及び光源３Ｂが撮影に同期して瞬間的に発光する（フラッシュ発光）。また、光源３Ｃは、撮影時には発光するものの、撮影と同期して瞬間的に発光するものではなく、定常的に発光する定常光である。被写体４は、図１では人物が模式的に示されているが、被写体４は１人の人物に限定されることはなく、複数の人物でも良いし、ペット等の他の生物でも良いし、美術品等の物であっても良い。
【００１５】  撮像装置１とタブレットコンピュータ２との間及びタブレットコンピュータ２と光源３Ａ〜３Ｃとの間で、通信が可能とされている。例えば、WiFi（登録商標）に基づく無線通信が各装置間で行われる。WiFi(登録商標)以外の通信規格に基づく無線通信が行われても良いし、赤外線を用いた通信が行われても良いし、有線による通信が行われるようにしても良い。例えば、これらの装置が相互に他の装置を認識し通信可能な状態とする公知のペアリング処理が行われた上で、装置間の通信が行われる。
【００１６】［撮像装置］（撮像装置の構成例）  次に、ライティングシステム１０を構成する各装置の構成例について説明する。始めに、撮像装置１の構成例について説明する。図２は、撮像装置１の構成例を示している。撮像装置１は、例えば、光学撮像系１０１と、専用位相差ＡＦ(Auto Focus)センサ１０２と、撮像素子１０３と、前処理回路１０４と、カメラ処理回路１０５と、画像メモリ１０６と、カメラ制御部１０７と、グラフィックＩ／Ｆ（Interface）１０８と、ディスプレイ１０９と、入力部１１０と、Ｒ／Ｗ（リーダ／ライタ）１１１と、記憶部１１２と、カメラ通信部１１３とを有している。
【００１７】  光学撮像系１０１は、被写体からの光を撮像素子１０３に集光するための撮影レンズ１０１Ａ（フォーカスレンズ、ズームレンズなどを含む）、フォーカスレンズを移動させてフォーカス調整を行うレンズ駆動機構１０１Ｂ、シャッタ機構、アイリス機構などから構成されている。これらはカメラ制御部１０７からの制御信号に基づいて駆動される。レンズ駆動機構１０１Ｂは、撮影レンズ１０１Ａをカメラ制御部１０７から供給された制御信号に応じて光軸方向に沿って移動させることにより、ＡＦ動作を実現する。光学撮像系１０１を介して得られた被写体の光画像は、撮像デバイスとしての撮像素子１０３上に結像される。
【００１８】  専用位相差ＡＦセンサ１０２は、例えば、位相差検出方式のオートフォーカス専用センサである。撮影レンズ１０１Ａにより集光された被写体光は、半透過ミラー等により反射されることによって専用位相差ＡＦセンサ１０２に入射する。専用位相差ＡＦセンサ１０２により検出された焦点検出信号はカメラ制御部１０７に供給される。
【００１９】  撮像素子１０３は、ＣＣＤ（Charge Coupled Device）、ＣＭＯＳ（Complementary Metal Oxide Semiconductor）などである。撮像素子１０３は、撮影レンズ１０１Ａを介して入射する被写体光を光電変換して電荷量に変換し、画像を生成する。撮像素子１０３は、通常の撮像画素と位相差検出用画素とを有するものである。像面位相差ＡＦセンサ１０３Ａは、複数の位相差検出用画素からなるオートフォーカス用センサである。像面位相差ＡＦセンサ１０３Ａにより検出された焦点検出信号はカメラ制御部１０７に供給される。
【００２０】  前処理回路１０４は、撮像素子１０３から出力された撮像信号に対して、ＣＤＳ（Correlated Double Sampling）処理によりＳ／Ｎ（Signal／Noise）比を良好に保つようにサンプルホールドなどを行う。さらに、ＡＧＣ（Auto Gain Control）処理により利得を制御し、Ａ／Ｄ（Analog/Digital）変換を行ってデジタル画像信号を出力する。
【００２１】  カメラ処理回路１０５は、前処理回路１０４からの画像信号に対して、ホワイトバランス調整処理や色補正処理、ガンマ補正処理、Ｙ／Ｃ変換処理、ＡＥ（Auto Exposure）処理などの信号処理を施す。
【００２２】  画像メモリ１０６は、揮発性メモリ、例えば、ＤＲＡＭ（Dynamic Random Access Memory）で構成されるバッファメモリであり、前処理回路１０４およびカメラ処理回路１０５によって所定の処理が施された画像データを一時的に蓄えておくものである。
【００２３】  カメラ制御部１０７は、例えばＣＰＵ(Central Processing Unit)から構成されており、ＲＯＭ(Read Only Memory)１０７Ａ及びＲＡＭ(Random Access Memory)１０７Ｂを有している。ＲＯＭ１０７Ａには、ＣＰＵにより読み込まれ実行されるプログラムなどが記憶されている。ＲＡＭ１０７Ｂは、ＣＰＵのワークメモリとして用いられる。ＣＰＵは、ＲＯＭ１０７Ａに記憶されたプログラムに従い様々な処理を実行してコマンドの発行を行うことによって撮像装置１全体の制御を行う。例えば、上述したＡＦに関する制御等を行う。詳細は後述するが、カメラ制御部１０７は、複数の光源３Ａ〜３Ｃのそれぞれが対応する設定に基づいて発光した状態で撮影が行われるように、撮像装置１の各部を制御する。
【００２４】  グラフィックＩ／Ｆ１０８は、カメラ制御部１０７から供給された画像信号から、ディスプレイ１０９に表示させるための画像信号を生成して、この信号をディスプレイ１０９に供給することにより画像を表示させる。ディスプレイ１０９には、撮像中のスルー画、記憶部１１２に記録された画像などが表示される。
【００２５】  ディスプレイ１０９は、液晶ディスプレイ（Liquid Crystal Display（ＬＣＤ））、有機ＥＬ(Electroluminescence:電界発光効果) ディスプレイなどから構成されるものである。
【００２６】  入力部１１０は、例えば、電源オン／オフ切り替えのための電源ボタン、撮像画像の記録の開始を指示するためのレリーズボタン、ズーム調整用の操作子、ディスプレイ１０９と一体に構成されたタッチスクリーンなどからなる。入力部１１０に対して入力がなされると、当該入力に応じた制御信号が生成されてカメラ制御部１０７に出力される。そして、カメラ制御部１０７は当該制御信号に対応した演算処理や制御を行う。
【００２７】  Ｒ／Ｗ１１１には、撮像により生成された画像データなどを記録する記憶部１１２が接続されるインターフェースである。Ｒ／Ｗ１１１は、カメラ制御部１０７から供給されたデータを記憶部１１２に書き込み、また、記憶部１１２から読み出したデータをカメラ制御部１０７に出力する。記憶部１１２は、例えば、ハードディスク、メモリースティック（ソニー株式会社の登録商標）、ＳＤメモリーカード、ＵＳＢ(Universal Serial Bus)メモリなどである。画像は例えばＪＰＥＧ(Joint Photographic Experts Group)などの規格に基づいて圧縮された状態で保存される。また、保存された画像に関する情報、撮像日時などの付加情報を含むＥＸＩＦ（Exchangeable Image File Format）データもその画像に対応付けられて保存される。記憶部１１２は、撮像装置１に内蔵されたものでも良いし、撮像装置１に着脱自在とされるものでも良いし、その両方であっても良い。
【００２８】  カメラ通信部１１３は、撮像装置１が他の装置（例えば、タブレットコンピュータ２）と通信を行うための構成であり、アンテナ、変調／復調機能等、通信を行うために必要な機能を有するものである。例えば、撮像装置１により撮影された画像の画像データがカメラ通信部１１３により撮像装置１からタブレットコンピュータ２に送信される。
【００２９】（撮像装置の基本的な動作例）  ここで、上述した撮像装置１における基本的な動作について説明する。画像の撮像前には、撮像素子１０３によって受光されて光電変換された信号が、順次、前処理回路１０４に供給される。前処理回路１０４では、入力信号に対してＣＤＳ処理、ＡＧＣ処理などが施され、さらに画像信号に変換される。
【００３０】  カメラ処理回路１０５は、前処理回路１０４から供給された画像信号を画質補正処理し、スルー画像の信号として、カメラ制御部１０７を介してグラフィックＩ／Ｆ１０８に供給する。これにより、スルー画像がディスプレイ１０９に表示される。ユーザはディスプレイ１０９に表示されるスルー画像を見て画角合わせを行うことができる。
【００３１】  この状態で、入力部１１０のシャッタボタンが押下されると、カメラ制御部１０７は、光学撮像系１０１に制御信号を出力して、光学撮像系１０１を構成するシャッタを動作させる。これにより撮像素子１０３からは、１フレーム分の画像信号が出力される。
【００３２】  カメラ処理回路１０５は、撮像素子１０３から前処理回路１０４を介して供給された１フレーム分の画像信号に画質補正処理を施し、処理後の画像信号をカメラ制御部１０７に供給する。カメラ制御部１０７は、入力された画像信号を圧縮符号化し、生成した符号化データを、Ｒ／Ｗ１１１に供給する。これにより、撮像された静止画像のデータファイルがＲ／Ｗ１１１を介して記憶部１１２に記憶される。なお、動画の撮影は、動画撮影の指示に応じて上述した処理がリアルタイムに行われる。動画撮影時にシャッタボタンを押すことにより、動画撮影時に静止画を撮影することも可能である。
【００３３】  一方、記憶部１１２に記憶された画像ファイルを再生する場合には、カメラ制御部１０７は、入力部１１０からの操作入力に応じて、選択された静止画像ファイルを記憶部１１２からＲ／Ｗ１１１を介して読み込む。読み込まれた画像ファイルに対して伸張復号化処理が施される。そして、復号化された画像信号がカメラ制御部１０７を介してグラフィックＩ／Ｆ１０８に供給される。これにより、記憶部１１２に記憶された静止画像や動画像がディスプレイ１０９に表示される。
【００３４】［タブレットコンピュータの構成例］  図３は、タブレットコンピュータ２の構成例を示している。タブレットコンピュータ２は可搬可能な程度の大きさであり、その構成として、例えば、制御部２０１と、タブレットコンピュータが有する通信部（以下、タブレット通信部と称する）２０２と、表示部２０３と、入力部２０４と、Ｒ／Ｗ２０５と、記憶部２０６とを有している。
【００３５】  制御部２０１は、ＣＰＵ等から構成されており、図示しないＲＯＭ及びＲＡＭを有している。ＲＯＭには、ＣＰＵにより読み込まれ実行されるプログラムなどが記憶されている。ＲＡＭは、ＣＰＵのワークメモリとして用いられる。また、制御部２０１は、機能として調光テーブル生成部２０１Ａと調光情報生成部２０１Ｂとを有している。制御部２０１は、ユーザが所望する画像の特徴を表す構想データと、光源３Ａ〜３Ｃの発光結果とに応じて、光源３Ａ〜３Ｃの設定を決定する。
【００３６】  出力部の一例であるタブレット通信部２０２は、タブレットコンピュータ２が他の装置（撮像装置１や光源３Ａ〜３Ｃ）と通信を行うための構成であり、アンテナ、変調／復調機能等、通信を行うために必要な機能を有するものである。例えば、撮像装置１から送信された画像の画像データがタブレット通信部２０２により受信され、受信された画像データが制御部２０１に供給される。また、光源３Ａ〜３Ｃ毎の設定が、タブレット通信部２０２から対応する光源に対して送信される。なお、本実施形態に係るタブレット通信部２０２は、インターネット等のネットワークに接続する機能も有するものである。
【００３７】  表示部２０３は、液晶ディスプレイ、有機ＥＬディスプレイなどから構成されるものである。表示部２０３には、インターネットを介して取得された画像や映像、テレビジョン放送、ゲーム画面、メニュー画面等が表示される。また、表示部２０３には、ユーザが後述する構想データを生成するための入力を受け付ける際に参照される参照画像が表示される。なお、本実施形態に係る表示部２０３は、タッチスクリーンとして構成されており、各種の入力を受付可能に構成されている。即ち、表示部２０３は、入力部２０４としても機能する。
【００３８】  入力部２０４は、例えば、押下可能なボタン、スライドボタン等の物理的なボタンやタッチスクリーン等であり、ユーザの操作入力を受け付ける構成を総称したものである。入力部２０４に対して入力がなされると、当該入力に応じた制御信号が生成されて制御部２０１に出力される。そして、制御部２０１は、当該制御信号に対応した演算処理や制御を行う。入力部２０４は、後述する構想データを生成するための入力を受け付けるためのものでもある。
【００３９】  Ｒ／Ｗ２０５は、記憶部２０６に対するデータの書き込み及び記憶部２０６からのデータの読み出しを行うものである。記憶部２０６は、例えば、ハードディスク、メモリースティック（ソニー株式会社の登録商標）、ＳＤメモリーカード、ＵＳＢメモリなどである。記憶部２０６は、タブレットコンピュータ２に内蔵されたものでも良いし、タブレットコンピュータ２に着脱自在とされるものでも良いし、その両方であっても良い。
【００４０】  なお、タブレットコンピュータ２が上述した構成以外の構成を有していても良い。例えば、タブレットコンピュータ２がスピーカ装置等を有していても良い。タブレットコンピュータ２の動作例については後述する。
【００４１】［光源の構成例］  図４は、光源の構成例を示しており、図４Ａは光源３Ａの構成例、図４Ｂは光源３Ｂの構成例、図４Ｃは光源３Ｃの構成例をそれぞれ示している。
【００４２】  図４Ａに示すように、光源３Ａは、例えば、発光部（発光体）３０１Ａと、調光制御部３０２Ａと、光源通信部３０３Ａとを有している。発光部３０１Ａは、例えば、ストロボ等のフラッシュ光源であり、撮像装置１の撮影に同期して発光する。調光制御部３０２Ａは、光源通信部３０３Ａにより受信された調光情報に基づいて、発光部３０１Ａの発光強度や発光タイミング等を制御する。光源通信部３０３Ａは、光源３Ａが他の装置（例えば、撮像装置１やタブレットコンピュータ２）と通信を行うものである。
【００４３】  図４Ｂに示すように、光源３Ｂは、例えば、発光部（発光体）３０１Ｂと、調光制御部３０２Ｂと、光源通信部３０３Ｂとを有している。発光部３０１Ｂは、例えば、ストロボ等のフラッシュ光源であり、撮像装置１の撮影に同期して発光する。調光制御部３０２Ｂは、光源通信部３０３Ｂにより受信された調光情報に基づいて、発光部３０１Ｂの発光強度や発光タイミング等を制御する。光源通信部３０３Ｂは、光源３Ｂが他の装置（例えば、撮像装置１やタブレットコンピュータ２）と通信を行うものである。
【００４４】  図４Ｃに示すように、光源３Ｃは、例えば、発光部（発光体）３０１Ｃと、調光制御部３０２Ｃと、光源通信部３０３Ｃとを有している。発光部３０１Ｃは、例えば、蛍光灯やＬＥＤ(Light Emitting Diode)である。調光制御部３０２Ｃは、光源通信部３０３Ｃにより受信された調光情報に基づいて、発光部３０１Ｃの発光強度を制御する。光源通信部３０３Ｃは、光源３Ｃが他の装置（例えば、撮像装置１やタブレットコンピュータ２）と通信を行うものである。なお、光源３Ａ〜光源３Ｃの構成に差異があっても良いことは言うまでもない。
【００４５】  一例として、光源３Ａ〜３Ｃは、それぞれ３段階の発光強度（弱、中、強）で発光可能なように構成されている。勿論、２段階の発光強度でも良いし、４段階以上の多段階の発光強度でも良い。また、光源３Ａの例えば発光強度「弱」と光源３Ｂの発光強度「弱」とが同一の発光強度であっても良いし、異なる発光強度であっても良い。
【００４６】［第１の実施形態において行われる処理］  次に、第１の実施形態において行われる処理について、各装置の動作を含めて説明する。本実施形態では、第１の実施形態において行われる処理を説明の便宜上、「キャリブレーション処理」、「構想データ生成処理」、「ライティングの設定及び撮影処理」の３つの処理に分けた上で、各処理を順に説明する。なお、３つの処理は、以下の説明の順に従って行われる必要は無く、技術的な矛盾が生じない範囲で各処理の順序が入れ替わっても良いし、各処理が並列的（パラレル）に行われても良いし、各処理が連続的に行われても良い。例えば、構想データ生成処理の後にキャリブレーション処理が行われても良いし、キャリブレーション処理と構想データ生成処理とが並列的に行われても良い。
【００４７】（キャリブレーション処理）  キャリブレーション処理は、各光源の発光結果、具体的には、各光源が１灯ずつ且つ異なるパターンで発光した場合に、発光による光が被写体の画像に与える影響を事前に測定し、測定結果であるテーブル（以下、調光テーブルと適宜称する。）を得る処理である。
【００４８】  図５を参照して、キャリブレーション処理を概略的に説明する。始めに、光源３Ａが異なる発光パターンで発光する。本例では、光源３Ａが異なる発光強度で発光する例であるが、異なる発光パターンは異なる色温度等であっても良い。他の光源についても同様である。なお、光源３Ｂ、光源３Ｃは発光せずに消灯したままである。
【００４９】  光源３Ａが、撮影に同期して発光強度「弱」で発光し、撮影がなされる。次に、光源３Ａが、撮影に同期して発光強度「中」で発光し、撮影がなされる。次に、光源３Ａが、撮影に同期して発光強度「強」で発光し、撮影がなされる。各撮影で得られる画像が撮像装置１の例えば画像メモリ１０６に一時的に記憶される。
【００５０】  次に、光源３Ｂが異なる発光強度で発光する。なお、光源３Ａ、光源３Ｃは発光せずに消灯したままである。光源３Ｂが、撮影に同期して発光強度「弱」で発光し、撮影がなされる。次に、光源３Ｂが、撮影に同期して発光強度「中」で発光し、撮影がなされる。次に、光源３Ｂが、撮影に同期して発光強度「強」で発光し、撮影がなされる。各撮影で得られる画像が撮像装置１の例えば画像メモリ１０６に一時的に記憶される。
【００５１】  次に、光源３Ｃが異なる発光強度で発光する。なお、光源３Ａ、光源３Ｂは発光せずに消灯したままである。光源３Ｃが、発光強度「弱」で発光した状態で撮影がなされる。次に、光源３Ｃが、発光強度「中」で発光した状態で撮影がなされる。光源３Ｃが、発光強度「強」で発光した状態で撮影がなされる。各撮影で得られる画像が撮像装置１の例えば画像メモリ１０６に一時的に記憶される。
【００５２】  各撮影で得られた９枚の画像の画像データが撮像装置１からタブレットコンピュータ２に送信される。すなわち、カメラ通信部１１３から画像データが送信され、当該画像データがタブレット通信部２０２により受信される。受信された画像データがタブレット通信部２０２から制御部２０１に供給される。制御部２０１の調光テーブル生成部２０１Ａは、９枚の画像の画像毎の画像情報を解析して取得する。
【００５３】  画像情報は、各光源の発光パターンに対応する空間的なセンサ情報であり、本実施形態では、画像を構成する画素毎の輝度レベルを用いている。なお、情報量を削減するために、画素毎ではなく任意の大ききのブロック単位における輝度レベルでも良いし、その他の適宜な方法で圧縮されたものが画像情報とされても良い。また、画像情報を解析して取得する処理が撮像装置１で行われても良く、撮像装置１からタブレットコンピュータ２に対して画像情報のみが送信されるようにしても良い。
【００５４】  画像情報を取得した調光テーブル生成部２０１Ａは、各光源の発光結果に対応する調光テーブルを生成する。図６は、第１の実施形態に係る調光テーブル（調光テーブルＴＡ１）の一例を示している。調光テーブルＴＡ１は、例えば、光源の種類（光源を識別できる識別子等の情報）、発光強度及び画像情報（本実施形態では、当該発光強度で撮影された画像の各画素の輝度レベル）が対応付けられたものである。
【００５５】  なお、調光テーブル生成部２０１Ａが生成した調光テーブルＴＡ１がＲ／Ｗ２０５を介して記憶部２０６に書き込まれて記憶されても良い。これにより、例えば、同じスタジオで同じ若しくは類似の被写体を撮影する際に、記憶部２０６に記憶された調光テーブルＴＡ１を用いることでキャリブレーション処理を省略することができる。調光テーブルＴＡ１は、記憶部２０６ではないメモリ（例えば、クラウド上のメモリ）に記憶されても良いし、他の装置に通信により送信し配布されても良い。
【００５６】  また、例えば、発光強度の変化に対する画像情報の変化が既知の場合には、キャリブレーション処理を簡略化するために、所定の発光強度に対応する画像情報を使用して、当該所定の発光強度とは異なる発光強度に対応する画像情報を生成するようにしても良い。例えば、光源３Ａに関して、発光強度「弱」で発光した場合の画像情報に基づいて、発光強度「中」及び発光強度「強」に対応する画像情報を調光テーブル生成部２０１Ａが予測して生成するようにしても良い。これにより、撮影回数を減らすことができ、キャリブレーション処理を簡略化することができる。
【００５７】  なお、キャリブレーション処理における被写体（撮影対象）は、「ライティングの設定及び撮影処理」における被写体と同一であることが好ましいが、異なっていても良い。例えば、キャリブレーション処理における被写体は、「ライティングの設定及び撮影処理」における被写体と類似する被写体（被写体が人物である場合には、顔の大きさや肌の色が似ている人物等）であっても良い。
【００５８】  図７は、キャリブレーション処理の、処理の流れの一例を示すフローチャートである。ステップＳＴ１１では、所定の光源（例えば、光源３Ａ）に対して、発光強度「弱」で発光する指示がなされる。この指示は、例えば、タブレットコンピュータ２の入力部２０４を用いてなされる。なお、光源３Ａは、撮影に同期して発光するため、発光及び撮影を同期させるタイミング等の同期情報が、タブレットコンピュータ２から光源３Ａ及び撮像装置１に送信される。そして、処理がステップＳＴ１２、ＳＴ１３に進む。
【００５９】  ステップＳＴ１２、ＳＴ１３では、同期情報で示されるタイミングで撮影が行われると共に、撮影に同期して光源３Ａが発光強度「弱」で発光する。具体的には、撮像装置１のカメラ制御部１０７が同期情報で示されるタイミングで撮影が行われるように撮像装置１の各部を制御する。また、光源３Ａの調光制御部３０２Ａが、同期情報で示されるタイミングで発光部３０１Ａが発光強度「弱」で発光するように制御する。そして、処理がステップＳＴ１４に進む。
【００６０】  ステップＳＴ１４では、ステップＳＴ１３における撮影で得られた画像が、撮像装置１からタブレットコンピュータ２に対して送信される。そして、タブレットコンピュータ２の調光テーブル生成部２０１Ａが、光源３Ａが発光強度「弱」で発光した場合の画像の画像情報を解析することで、調光テーブルＴＡ１の一要素を生成する。そして、処理がステップＳＴ１５に進む。
【００６１】  ステップＳＴ１５では、光源３Ａに対して、発光強度「中」で発光する指示がなされる。この指示も、例えば、タブレットコンピュータ２の入力部２０４を用いてなされる。なお、上述したように、光源３Ａは、撮影に同期して発光するため、発光及び撮影を同期させるタイミング等の同期情報が、タブレットコンピュータ２から光源３Ａ及び撮像装置１に送信される。そして、処理がステップＳＴ１６、ＳＴ１７に進む。
【００６２】  ステップＳＴ１６、ＳＴ１７では、同期情報で示されるタイミングで撮影が行われると共に、撮影に同期して光源３Ａが発光強度「中」で発光する。具体的には、撮像装置１のカメラ制御部１０７が同期情報で示されるタイミングで撮影が行われるように撮像装置１の各部を制御する。また、光源３Ａの調光制御部３０２Ａが、同期情報で示されるタイミングで発光部３０１Ａが発光強度「中」で発光するように制御する。そして、処理がステップＳＴ１８に進む。
【００６３】  ステップＳＴ１８では、ステップＳＴ１６における撮影で得られた画像が、撮像装置１からタブレットコンピュータ２に対して送信される。そして、タブレットコンピュータ２の調光テーブル生成部２０１Ａが、光源３Ａが発光強度「中」で発光した場合の画像の画像情報を解析することで、調光テーブルＴＡ１の一要素を生成する。そして、処理がステップＳＴ１９に進む。
【００６４】  ステップＳＴ１９では、光源３Ａに対して、発光強度「強」で発光する指示がなされる。この指示も、例えば、タブレットコンピュータ２の入力部２０４を用いてなされる。なお、上述したように、光源３Ａは、撮影に同期して発光するため、発光及び撮影を同期させるタイミング等の同期情報が、タブレットコンピュータ２から光源３Ａ及び撮像装置１に送信される。そして、処理がステップＳＴ２０、ＳＴ２１に進む。
【００６５】  ステップＳＴ２０、ＳＴ２１では、同期情報で示されるタイミングで撮影が行われると共に、撮影に同期して光源３Ａが発光強度「強」で発光する。具体的には、撮像装置１のカメラ制御部１０７が同期情報で示されるタイミングで撮影が行われるように撮像装置１の各部を制御する。また、光源３Ａの調光制御部３０２Ａが、同期情報で示されるタイミングで発光部３０１Ａが発光強度「強」で発光するように制御する。そして、処理がステップＳＴ２２に進む。
【００６６】  ステップＳＴ２２では、ステップＳＴ２１における撮影で得られた画像が、撮像装置１からタブレットコンピュータ２に対して送信される。そして、タブレットコンピュータ２の調光テーブル生成部２０１Ａが、光源３Ａが発光強度「強」で発光した場合の画像の画像情報を解析することで、調光テーブルＴＡ１の一要素を生成する。そして、処理がステップＳＴ２３に進む。
【００６７】  ステップＳＴ２３では、各光源を使用した処理が全て終了したか否かが判断される。本例では、光源３Ｂ及び光源３Ｃを使用した処理が終了していないので処理がステップＳＴ１１に戻る。そして、上述した処理と同様に、光源３Ｂを異なる発光強度で発光させ、そのときに得られる画像の画像情報に基づいて調光テーブルＴＡ１の一要素が生成される。光源３Ｃについても同様の処理が行われる。なお、光源３Ｃは、フラッシュ発光ではないので、光源３Ｃを所定の発光強度で発光させた状態で撮像装置１の入力部１１０が操作されることにより撮影が行われても良い。すなわち、同期情報が撮像装置１及び光源３Ｃに対して必ずしも送信される必要はない。
【００６８】  ステップＳＴ２３において、各光源を使用した処理が全て終了した場合には、ステップＳＴ１４、ＳＴ１８、ＳＴ２２のそれぞれの処理で得られる調光テーブルの要素に基づいて、図６に例示した調光テーブルＴＡ１が得られる。そして、処理が終了する。
【００６９】（構想データ生成処理）  次に、構想データ生成処理について説明する。構想データは、（ユーザが）所望する画像の特徴を表すデータであり、より具体的な例としては、被写体の領域毎の明るさを示すデータである。
【００７０】  構想データは、例えば、タブレットコンピュータ２の入力部２０４を使用して指定される。表示部２０３には、入力部２０４に対する入力を受け付ける際に参照される参照画像が表示される。例えば図８に示すように、表示部２０３には、参照画像ＩＭ１が表示される。ユーザは、参照画像ＩＭ１を参照しながら自身の構想に基づく操作を入力部２０４に行う。
【００７１】  参照画像ＩＭ１は、例えば、上述したキャリブレーション処理により得られる９枚の画像のうちの１枚を使用することができる。これにより、参照画像ＩＭ１そのものを撮影する必要がなくなる。また、参照画像ＩＭ１は「ライティングの設定及び撮影処理」で撮影される被写体を撮影した画像でも良い。このときの撮影は、光源３Ａ〜光源３Ｃが発光していない状態で、環境光（撮影とは関係のない室内の室内灯）のみが発光した状態で行われても良い。更に、参照画像ＩＭ１は、「ライティングの設定及び撮影処理」で撮影される被写体に対して公知の人物認識や顔認識等の所定の結果に応じて選択されたテンプレート画像でも良い。この場合、所定の処理は例えば制御部２０１によって行われる。また、テンプレート画像は、記憶部２０６に記憶された画像がＲ／Ｗ２０５によって読み出された画像でも良いし、インターネット等から取得された画像であっても良い。
【００７２】  図９は、構想データ生成処理の、処理の流れの一例を示すフローチャートである。図８及び図９を参照して、構想データ生成処理の具体例を説明する。構想データ生成処理は、例えば、入力部２０４の所定のボタンが押下若しくはタッチされることを契機として開始される。ステップＳＴ３１では、表示部２０３に参照画像ＩＭ１が表示される。そして、処理がステップＳＴ３２に進む。
【００７３】  ステップＳＴ３２では、ユーザが参照画像ＩＭ１を参照しながら、構想に基づく入力を行う。例えば、図８に示すように、被写体に対して２つの領域ＡＲ１、ＡＲ２を設定する。例えば、領域ＡＲ１の明るさが適正露光となるように、且つ、領域ＡＲ２の明るさが適正露光の２／３（６６％程度）となるように指定する。領域の設定や明るさの指定は、入力部２０４を使用してなされる。本実施形態では、入力部２０４の入力がなされる毎に、入力に対応する構成（例えば、明るさ）が参照画像ＩＭ１に反映される。例えば、図８に示すように、領域ＡＲ２の明るさがやや暗くなる。なお、図示はしていないが、背景の明るさ等の設定が行われるようにしても良い。ユーザは、明るさの指定等が終了すると完了ボタン等を押下若しくはタッチ等して、構想に基づく入力を終了する。そして、処理がステップＳＴ３３に進む。
【００７４】  ステップＳＴ３３では、ステップＳＴ３２でなされた入力に基づいて、構想データが生成される。構想データが例えば制御部２０１によって生成される。上述したように、構想データは、例えば、顔の右半分が適正露光となり、顔の左半分が適正露光の２／３となることを示すデータである。そして、処理が終了する。
【００７５】  なお、構想データは、記憶部２０６に記憶されても良い。そして、顔の大きさや肌の色等が類似する被写体を撮影する際に、以前の構想データが記憶部２０６から読み出されて利用されるようにしても良い。また、構想データがタブレット通信部２０２を介して通信等により配信されるようにしても良い。例えば著名な写真家の構想データは、それ自体、財産的価値を有する。そこで、構想データの配信の際に課金等がなされることで、構想データをキーとする新たなビジネスモデルを提供することが可能となる。
【００７６】（ライティングの設定及び撮影処理）  次に、ライティングの設定及び撮影処理について説明する。図１０は、ライティングの設定及び撮影処理の、処理の流れの一例を示すフローチャートである。処理が開始された後、ステップＳＴ４１では、調光情報生成部２０１Ｂが、構想データと調光テーブルＴＡ１とに応じて各光源の発光強度を演算し決定する。調光テーブルＴＡ１によって、各光源がある発光強度で発光した場合の光が被写体の画像に与える影響が既にわかっている。更に、例えば所定の箇所に光源３Ａからの光と光源３Ｂからの光があたる場合には、当該箇所の明るさは明るさの和となる。このため、調光情報生成部２０１Ｂは、調光テーブルＴＡ１を参照することにより、構想データで指定された領域毎の明るさを実現するために、各光源をどの程度の発光強度で発光させればいいかを判別することができる。
【００７７】  図８に例示した構想データの場合には、例えば、光源３Ａの発光強度が「弱」となるように光源３Ａの調光情報が生成され、光源３Ｂの発光強度が「強」となるように光源３Ｂの調光情報が生成され、光源３Ｃの発光強度が「中」となるように光源３Ｃの調光情報が生成される。なお、構想データに基づく構図と完全に一致する構図を実現できない場合には、構想データに基づく構図にできるだけ近い構図が実現されるように、調光情報が生成される。構想データに対する最適なライティングの設定（調光情報）を求める最適化方法として、準ニュートン法、滑降シンプレックス法、双対シンプレックス法、逐次線形二次計画法等を適用することができる。そして、処理がステップＳＴ４２に進む。
【００７８】  ステップＳＴ４２では、タブレットコンピュータ２が、各光源の発光強度を示す調光情報を、対応する光源に出力する。例えば、タブレットコンピュータ２は、タブレット通信部２０２を使用して調光情報を、対応する光源に送信する。そして、処理がステップＳＴ４３に進む。
【００７９】  ステップＳＴ４３では、各光源が調光情報に基づいて発光した状態で被写体４が撮影される。例えば、光源３Ａに対応する調光情報が光源通信部３０３Ａにより受信される。調光制御部３０２Ａは、受信された調光情報に基づいて、発光部３０１Ａが発光強度「弱」で発光するように制御する。また、光源３Ｂに対応する調光情報が光源通信部３０３Ｂにより受信される。調光制御部３０２Ｂは、受信された調光情報に基づいて、発光部３０１Ｂが発光強度「強」で発光するように制御する。また、光源３Ｃに対応する調光情報が光源通信部３０３Ｃにより受信される。調光制御部３０２Ｃは、受信された調光情報に基づいて、発光部３０１Ｃが発光強度「中」で発光するように制御する。そして、各光源が発光した状態で撮像装置１による撮影がなされる。撮影により得られた画像は、撮像装置１のディスプレイ１０９に表示される。撮影により得られた画像が撮像装置１からタブレットコンピュータ２に送信されて表示部２０３に表示されても良い。そして、処理がステップＳＴ４４に進む。
【００８０】  ステップＳＴ４４では、必要に応じてユーザによる調整（微調整）が行われる。調整としては、各光源の一部又は全部の発光強度をユーザ自身が直接調整しても良い。また、構想データそのものを微調整しても良い。そして微調整後の構想データに基づいて再度、調光情報が生成され、当該調光情報に対応する発光強度で各光源が発光した状態で、再度、撮影が行われても良い。更に、各光源の発光強度を変化させた撮影が複数回、行われても良い。
【００８１】  なお、上述した処理において、光源３Ａ及び光源３Ｂはフラッシュ発光であることから撮影と発光とを同期させる必要がある。同期させるための同期情報は、調光情報に含ませても良いし、光源３Ｃが発光し続けている状態で撮像装置１のレリーズボタンが押下されたときに、光源３Ａ及び光源３Ｂに対する発光指示がなされるようにしても良い。また、上述した処理では光源毎の調光情報を生成したが、調光情報は、全ての光源の発光強度が記述されたものであっても良く、各光源が当該調光情報の中から自身の発光強度を選択するようにしても良い。
【００８２】［第１の実施形態で得られる効果の例］  以上説明した第１の実施形態によれば、ユーザが所望するライティング効果を得るための光源の設定を自動で行うことが可能である。また、光源の調整を行う人物が不要となるので、ライティングのシステムが大型化したとしても少人数（最低の場合は１人）での撮影が可能となる。
【００８３】  人為的にせよ、コンピュータを使用したシミュレーションにせよ、所望のライティング効果を得るための光源に対する設定は手間がかかってしまう。一般的なライティングシステムでは複数の光源が使用されるため、一層、手間がかかってしまう。しかしながら、本実施形態によれば、ユーザは、ライティング撮影の結果、換言すれば、所望する画像の構成（例えば、被写体の領域毎の明るさ）に対応する構想データを設定するだけで光源の設定がなされるため、光源の調整にかかる手間を省略することができ、効率的な撮影を行うことが可能となる。また、光源の調整をして発光させる一連の試行の回数を減らすことができるので、光源にかかる負荷を減らすことができ光源の耐久年数を向上させることができる。
【００８４】  また、構想に対して最適化されたライティング下で実際に撮影が行われるので、画像編集ソフトでは実現できないような高品質な画像（本実施形態では静止画）を得ることができる。
【００８５】＜２．第２の実施形態＞  次に、本開示の第２の実施形態について説明する。なお、第１実施形態で説明した事項は、特に断らない限り第２実施形態にも適用することができ、同様、同質の構成については同一の符号を付し重複した説明を適宜、省略する。
【００８６】［ライティング下で動画撮影を行う際に考慮すべき問題について］  第２の実施形態は、動画を撮影する際に、ユーザが所望するライティング効果を得るためのライティングの設定を自動で行う実施形態である。基本的な処理は、第１の実施形態と同様であり、ユーザにより設定された構想データに基づいて、各光源に対する設定が自動で行われる。
【００８７】  ところで、ライティング下で動画撮影を行う場合には、動画特有の観点を考慮する必要がある。図１１は、ライティング下で動画撮影を行う第２の実施形態に係るライティングシステム（ライティングシステム１０Ａ）を示している。ライティングシステム１０Ａは、第１の実施形態で説明した撮像装置１及びタブレットコンピュータ２を有している。更に、ライティングシステム１０Ａは、光源として例えば、光源５Ａ（フィルライト）と、光源５Ｂ（キーライト）と、光源５Ｃ（バックライト）とを有している。なお、本実施形態では動画撮影が行われるので、光源５Ａ〜５Ｃは、フラッシュ発光（瞬間光）ではなく定常光である。
【００８８】  動画撮影では、人物等の動く被写体（動被写体）と背景等の動きがない被写体とが存在することが一般的である。図１１に例示するライティングシステム１０Ａでは、動被写体の例として人物６が示され、背景として壁７が示されている。光源５Ａ及び光源５Ｂからの光は主に人物６に照射され、光源５Ｃからの光は主に壁７に照射される。
【００８９】  本実施形態では、人物６が例えば撮像装置１に対して奥行方向、より具体的には、後方（奥側）から前方（手前側）に向かって移動する様子を撮影する場合を想定する。ユーザは、人物６の移動に伴って人物６の明るさ（反射光の明るさ）が変わらない構図を所望するとする。このような場合、一般には、光源をディヒューザで覆い隠しながら光量を一定に調整するワイプ法と称される方法が用いられるが、ワイプ法を行うためには熟練した高度な技術を要する。従って、ワイプ法を行うことができる人員を各光源に配置した場合には、その前提としてワイプ法を行うことができる人員を確保しなければならない。また、人員に対する報酬等により動画撮影におけるコストが増加する。このように、ライティング下で動画撮影を行う場合には、人員の増加及びこれに伴うコスト増の問題がライティング下での静止画撮影に比べてより顕著になる。このような観点を踏まえつつ、第２の実施形態の詳細について説明する。
【００９０】［各装置の構成］  撮像装置１及びタブレットコンピュータ２の構成については、図２及び図３のそれぞれを参照して説明してあるので、重複した説明を省略する。なお、詳細は後述するが、制御部２０１は、動画を撮影する際に被写体が変化した場合に構造データを維持するように、決定した光源５Ａ〜５Ｃに関する設定を制御する。
【００９１】  図１２Ａ〜図１２Ｃは、光源５Ａ〜５Ｃの構成例を示している。光源５Ａは、光源３Ａと同様に発光部５０１Ａと、調光制御部５０２Ａと、光源通信部５０３Ａとを有している。光源５Ｂは、光源３Ｂと同様に発光部５０１Ｂと、調光制御部５０２Ｂと、光源通信部５０３Ｂとを有している。光源５Ｃは、光源３Ｃと同様に発光部５０１Ｃと、調光制御部５０２Ｃと、光源通信部５０３Ｃとを有している。なお、各部の機能は、光源３Ａにおける各部の機能と同じであるので重複した説明は省略する。光源５Ａ〜５Ｃは、例えば、発光強度「弱」「中」「強」の３段階の発光強度で発光可能に構成されている。
【００９２】［第２の実施形態において行われる処理］  次に、第２の実施形態において行われる処理について、各装置の動作を含めて説明する。第２の実施形態においても説明の便宜上、「キャリブレーション処理」、「構想データ生成処理」、「ライティングの設定及び撮影処理」の３つの処理に分けた上で、各処理を順に説明するが、これらの処理は、以下の説明の順に従って行われる必要は無く、技術的な矛盾が生じない範囲で各処理の順序が入れ替わっても良いし、各処理が並列的（パラレル）に行われても良いし、各処理が連続的に行われても良い。
【００９３】（キャリブレーション処理）  始めに、第２の実施形態に係るキャリブレーション処理について説明する。図１３は、第２の実施形態に係るキャリブレーション処理の、処理の流れの一例を示すフローチャートである。なお、図７のフローチャートで説明した処理と同様の処理については同じ参照符号を付し、重複した説明を適宜、省略する。
【００９４】  処理が開始された後、ステップＳＴ５１では、動被写体である人物６が場所ＡＡに移動する。場所ＡＡは、例えば、人物６が移動を開始する位置である。そして、ステップＳＴ１１〜ステップＳＴ２２では、例えば光源５Ａが発光強度「弱」「中」「強」で順次発光し、それぞれの発光状態における撮影が行われる。この撮影は、静止画でも動画であっても良い。各撮影において、それぞれの発光強度に対応する画像情報が解析され、調光テーブル生成部２０１Ａによって調光テーブルの一要素が生成される。撮影が終了すると、処理がステップＳＴ２３に進む。
【００９５】  ステップＳＴ２３では、所定の場所（本例では場所ＡＡ）での各光源を使用した処理（撮影）が全て終了したか否かが判断される。本例では、光源５Ｂ、５Ｃによる処理が終了していないので、処理がステップＳＴ１１に戻る。そして、ステップＳＴ１１〜ステップＳＴ２２では、例えば光源５Ｂが発光強度「弱」「中」「強」で順次発光し、それぞれの発光状態における撮影が行われる。また、例えば光源５Ｃが発光強度「弱」「中」「強」で順次発光し、それぞれの発光状態における撮影が行われる。各撮影において、それぞれの発光強度に対応する画像情報が解析され、調光テーブル生成部２０１Ａによって調光テーブルの一要素が生成される。撮影が終了すると、処理がステップＳＴ２３に進む。
【００９６】  人物６が場所ＡＡにいる状態での光源５Ａ、５Ｂ及び５Ｃを使用した撮影が終了したことから、ステップＳＴ２３の処理が肯定判断となり、処理がステップＳＴ５２に進む。ステップＳＴ５２では、全ての場所での撮影が終了したか否かが判断される。本例では、ステップＳＴ５２での処理が否定判断となり、処理がステップＳＴ５３に進む。
【００９７】  ステップＳＴ５３では、動被写体である人物６が場所ＢＢに移動する。場所ＢＢは、例えば、人物６が移動を終了した位置すなわち最終的な停止位置である。そして、処理がステップＳＴ１１に戻る。そして、ステップＳＴ１１〜ステップＳＴ２２では、例えば光源５Ａが発光強度「弱」「中」「強」で順次発光し、それぞれの発光状態における撮影が行われる。各撮影において、それぞれの発光強度に対応する画像情報が解析され、調光テーブル生成部２０１Ａによって調光テーブルの一要素が生成される。他の光源５Ｂ、５Ｃについても同様の処理が行われる。そして、処理がステップＳＴ２３に進む。
【００９８】  ステップＳＴ２３では、所定の場所（本例では場所ＢＢ）での各光源を使用した処理（撮影）が全て終了したか否かが判断される。光源５Ａ、５Ｂ及び５Ｃを使用した撮影が終了した場合には、処理がステップＳＴ５２に進む。上述したように、ステップＳＴ５２では、全ての場所での撮影が終了したか否かが判断される。本例では、撮影場所を人物６の移動開始位置である場所ＡＡ及び移動停止位置である場所ＢＢの２箇所としている。そこで、ステップＳＴ５２の判断が肯定判断となり、処理が終了する。
【００９９】  図１４は、第２の実施形態に係るキャリブレーション処理により得られる調光テーブル（調光テーブルＴＡ２）の一例を示している。調光テーブルＴＡ２は、光源の種類と、発光強度と、人物６の位置情報と、そのときに撮影された画像の各画素の輝度レベルとが対応付けられたものである。なお、人物６の位置情報は、種々の情報により表すことができる。例えば、撮影における画像に基づいて公知の人物抽出処理を行うことにより、場所ＡＡにおける人物６が占める（存在する）領域を求め、当該領域が位置情報とされても良い。また、測距センサ若しくは画像処理で得られるデプスマップに基づいて、各場所における人物６の距離情報が位置情報とされても良い。また、人物６がビーコンを持ちながら移動し、各場所において当該ビーコンから発信される情報が位置情報とされても良い。また、これらを組み合わせた情報が位置情報とされても良い。
【０１００】  なお、調光テーブルＴＡ２は、第１の実施形態で説明した調光テーブルＴＡ１に比して情報量が多くなる。単純に言えば、撮影場所の数だけ情報が多くなり、上述した例では、場所ＡＡ、場所ＢＢで撮影が行われることから、調光テーブルＴＡ２の情報量は調光テーブルＴＡ１の情報量の約２倍となる。従って、例えば、調光テーブルＴＡ２の各画素の輝度レベルを公知の圧縮技術を使用して圧縮しても良い。また、後述する構想データで設定された領域内に存在する画素の輝度レベルのみを調光テーブルＴＡ２に記述するようにしても良い。
【０１０１】（構想データ生成処理）  次に、第２の実施形態に係る構想データ生成処理について説明する。第２の実施形態に係る構想データ生成処理の、処理の流れは基本的には第１の実施形態に係る構想データ生成処理と同じである。すなわち、タブレットコンピュータ２の表示部２０３に参照画像を表示させた状態で、入力部２０４を使用した構想データの設定がユーザによってなされる。
【０１０２】  図１５は、第２の実施形態に係る構想データの一例を説明するための図である。表示部２０３には、参照画像ＩＭ２が表示される。参照画像ＩＭ２は、例えば、ユーザが場所ＡＡに位置する際の画像（静止画像）である。この画像は、キャリブレーション処理で得られた画像を使用しても良いし、別途、撮影された画像であっても良い。
【０１０３】  ユーザは、入力部２０４を使用して構想データを入力する。例えば、人物６が含まれる領域ＡＲ３と、背景の領域ＡＲ４とを指定する。そして、例えば、人物６及び背景の明るさ（被写体からの反射光の強さ）を維持する、という構想データがユーザにより設定される。ここで、撮影開始位置（動被写体が場所ＡＡにいる状態であって、以下の説明において、初期状態と適宜称する）における人物６及び背景の明るさも構想データとして併せて設定される。
【０１０４】  なお、構想データの設定は一例であってこれに限定されるものではない。例えば、上述した例では、矩形の領域が示されているが、人物抽出を行い人物そのものに対する設定（例えば、人物の明るさを維持する等）がなされても良い。また、上述した例のように、動被写体及び背景の明るさを維持する場合には、領域の設定は行わずに単純に「全ての被写体（背景を含む）の明るさを維持する」旨の構想データが設定されても良い。構想データの設定対象となる被写体は、ユーザによって設定されたものだけでなく、人物抽出や顔認識等により自動で認識されたものであっても良い。
【０１０５】（ライティングの設定及び撮影処理）  次に、第２の実施形態に係るライティングの設定及び撮影処理について説明する。図１６は、ライティングの設定及び撮影処理の、処理の流れの一例を示すフローチャートである。処理が開始された後、ステップＳＴ６１では、調光情報生成部２０１Ｂは、構想データと調光テーブルＴＡ２とに基づいて、各光源の発光強度を示す調光情報を生成する。すなわち、人物６及び背景の明るさが構想データで示された初期状態における明るさと一致若しくは近づくように、調光テーブルＴＡ２を参照しつつ、各光源に対する調光情報を生成する。第１の実施形態でも説明したが、構想データに対する最適なライティングの設定（調光情報）を求める最適化の方法として、準ニュートン法、滑降シンプレックス法、双対シンプレックス法、逐次線形二次計画法等を適用することができる。そして、処理がステップＳＴ６２に進む。
【０１０６】  ステップＳＴ６２では、タブレットコンピュータ２が、各光源の発光強度を示す調光情報を、対応する光源に出力する。例えば、タブレットコンピュータ２は、タブレット通信部２０２を使用して調光情報を、対応する光源に送信する。光源５Ａに対応する調光情報が光源通信部５０３Ａにより受信される。調光制御部５０２Ａは、受信された調光情報に基づいて発光部５０１Ａの発光強度を制御する。光源５Ｂに対応する調光情報が光源通信部５０３Ｂにより受信される。調光制御部５０２Ｂは、受信された調光情報に基づいて発光部５０１Ｂの発光強度を制御する。光源５Ｃに対応する調光情報が光源通信部５０３Ｃにより受信される。調光制御部５０２Ｃは、受信された調光情報に基づいて発光部５０１Ｃの発光強度を制御する。そして、処理がステップＳＴ６３に進む。
【０１０７】  ステップＳＴ６３では、各光源が調光情報に基づいて発光した状態で、撮像装置１による動画撮影が開始され、撮影の結果、１フレーム分の画像が得られる。得られた画像は、撮像装置１からタブレットコンピュータ２に送信される。送信された画像が、タブレット通信部２０２により受信された後、制御部２０１に供給される。そして、処理がステップＳＴ６４に進む。
【０１０８】  ステップＳＴ６４では、ステップＳＴ６４で得られた１フレームの画像と構想データとの差分が制御部２０１によって算出される。差分の算出方法の一例について説明する。制御部２０１は、１フレームの画像の中から人物６を含む領域ＡＲ３に対応する箇所を抽出する。そして、制御部２０１は、領域ＡＲ３内の各画素の明るさ（輝度）の平均値と、初期状態における領域ＡＲ３の各画素の明るさの平均値とを比較し、その差分を演算する。領域ＡＲ４についても同様の演算が行われる。そして、処理がステップＳＴ６５に進む。
【０１０９】  ステップＳＴ６５では、ステップＳＴ６４で演算された領域ＡＲ３及びＡＲ４の少なくとも一方に関する差分が所定のしきい値以上であるか否かが判断される。所定のしきい値は、例えば、明るさの変化が視覚的に認識できる程度の値に適切に設定される。差分が所定のしきい値以上でない場合には、処理がステップＳＴ６６に進む。
【０１１０】  ステップＳＴ６６では、動画撮影が終了したか否かが判断される。動画撮影が終了した場合には、ステップＳＴ６７に処理が進み、必要に応じて、撮影された動画に対する調整（微調整）が行われる。本例では、１フレームの撮影しか終了していないので、ステップＳＴ６６の判断が否定判断となり、処理がステップＳＴ６３に戻る。そして、次に撮影される１フレームに対してステップＳＴ６３及びステップＳＴ６４の処理が行われる。
【０１１１】  本実施形態では、上述したように、人物６が奥から手前に向かって動く場合を想定している。人物６が手前側に向かって来るに連れ、光源５Ａ及び光源５Ｂと人物６との距離が小さくなる、換言すれば、人物６が明るくなる。従って、あるタイミングでステップＳＴ６５の処理が肯定判断となる。この場合は、処理がステップＳＴ６１に戻る。
【０１１２】  ステップＳＴ６１では、調光情報生成部２０１Ｂが調光情報を再計算する。すなわち、現在の人物６の位置で、人物６及び背景の明るさが構想データで示される明るさとなるように、調光テーブルＴＡ２を参照しつつ、調光情報を再計算する。概念的には、光源５Ａ及び光源５Ｂの発光強度が小さくされる。しかしながら、このままでは背景の明るさが低下し、構想データを実現することができない。従って、光源５Ｃの発光強度が大きくされる。これにより、人物６が移動することによって変化が生じた場合に、構想データを維持するように、各光源に関する設定を制御することができる。より具体的には、構想データに即して、人物６と背景の明るさを維持することができる。そして、処理がステップＳＴ６２に進み、タブレットコンピュータ２から各光源に対して、各光源の発光強度を示す調光情報が、対応する光源に出力（送信）される。そして、各光源が再計算された調光情報に基づいて発光した状態で動画撮影が行われる。以上、説明した処理が動画撮影の間、繰り返される。
【０１１３】  なお、図１４により例示した調光テーブルＴＡ２には、人物６が場所ＡＡ及び場所ＢＢの２箇所にいるときの画像情報しか記述されていない。従って、場所ＡＡと場所ＢＢとの間の場所（以下、場所ＣＣと適宜称する。なお、場所ＣＣは、任意の位置とすることができる。）において、ある光源のある発光強度での発光が被写体に与える影響は、場所ＡＡ及び場所ＢＢの情報を使用して補間される。例えば、光源５Ａが発光強度「弱」で発光した場合、場所ＣＣで人物６が占める範囲の画素の輝度レベルが、人物６が場所ＡＡにいる状態で光源５Ａが発光強度「弱」で発光した場合の画素の輝度レベルと、人物６が場所ＢＢにいる状態で光源５Ａが発光強度「弱」で発光した場合の画素の輝度レベルとを使用して予測されても良い。また、人物６の空間的な位置の変化（奥行き情報の変化）が使用され、場所ＣＣに人物６がいる状態で、ある光源がある発光強度で発光した場合の画素の輝度レベルが予測されても良い。
【０１１４】  なお、複数の場所ＣＣを設定し、場所ＣＣにおいて、ある光源がある発光強度で発光した場合の各画素の輝度レベルが上述したキャリブレーション処理により事前に取得されていても良い。これにより、調光情報を再計算する処理の負荷を低減することができる。場所ＡＡから場所ＢＢまで間における複数の場所ＣＣの設定は、ユーザにより設定されても良いし、自動で適切に設定されても良い。例えば、光源３Ａが発光強度「弱」で発光した場合に、人物６の明るさに、しきい以上の変化が検出された場合に、その位置の位置情報、光源、光源の発光強度及び各画素の輝度レベルが対応付けられて調光テーブルＴＡ２に記述されるようにしても良い。
【０１１５】  なお、１フレーム間での動きに伴う明るさの変化の程度は僅かである。従って、１フレーム単位でなく、任意の単位（例えば、１０フレーム単位）でステップＳＴ６３〜ＳＴ６５の処理が行われても良い。
【０１１６】［第２の実施形態で得られる効果の例］  以上、説明した処理を行うことにより、被写体の中に動被写体が存在し、動被写体の動きに応じて得られる画像と構想データとの間に差異が生じた場合でも、構想データを維持するように光源の設定が自動で行われる。従って、第２の実施形態によれば、動画を撮影する場合でも、ユーザが所望するライティング効果を得るための光源の設定を自動で行うことが可能となる。また、人物６の動く速さに関係なく、構想データにマッチングする動画を得ることができる。更に、上述した第１の実施形態で例示した効果と同様の効果を得ることができる。
【０１１７】＜３．変形例＞  以上、本開示の複数の実施形態について具体的に説明したが、本開示の内容は上述した実施形態に限定されるものではなく、本開示の技術的思想に基づく各種の変形が可能である。以下、変形例について説明する。なお、以下に説明する変形例は、特に断らない限り、若しくは、技術的な矛盾が生じない範囲において、第１及び第２の実施形態に対して適用することができる。
【０１１８】  上述した実施形態において、構想データが複数設定され、それぞれの構想データに対応する複数の調光情報が生成されても良い。そして、複数の調光情報のそれぞれに基づいて各光源が発光した状態で撮影が複数回行われるようにしても良い。
【０１１９】  光源の性能限界等に起因して、構想データに基づく画像と、実際の撮影により得られた画像とが所定以上、相違する場合があり得る。このような場合に、警告やエラーが報知されるようにしても良い。一例として、構想データに基づく画像を構成する画素の画素値と、実際の撮影により得られた画像を構成する画素の画素値同士を比較し、差分が閾値以上となる画素の数が一定以上あった場合に、所定以上相違すると判断される。警告やエラーの報知は、音、表示、振動等により行われる。
【０１２０】  上述した実施形態において、撮像装置１のシャッタースピード、感度、絞り等の設定が変更されても良い。このような撮像装置１に対する設定は、例えば背景をぼかしたいために絞りを広げたりするようなユーザの好みによって行われても良いし、光源の性能限界を補うために行われても良い。
【０１２１】  上述した実施形態において、光源は、撮像装置１に内蔵又は撮像装置１に着脱自在とされるものであっても良いし、例えばユーザが手でもてる程度の大きさのライトでも良い。また、撮影は屋内、屋外のいずれで行われてもよく、光源の一部が太陽光等の環境光（自然光）であっても良い。また、光源の形状、大きさ、配置位置はあくまで模式的に示したものであり、上述した実施形態で図示された例に限定されるものではない。また、光源の数は３個に限られるものではない。大規模な制作現場では数十台の光源が使用される場合もあるが、このような大規模なライティングシステムに対しても本技術を適用することができる。また、光源の一部が環境光であり、他の１個又は複数の光源がライトであっても良い。
【０１２２】  上述した実施形態において、調光情報を求める処理が、タブレットコンピュータ２ではなく他の装置（例えば、クラウドコンピュータ）により行われても良い。また、調光情報を求める処理が、撮像装置１により行われても良い。また、タブレットコンピュータ２の機能の一部又は全てを撮像装置１若しくはその他の装置が有する構成としても良い。また、タブレットコンピュータ２が撮像機能を有する場合には、撮像装置１に代えてタブレットコンピュータ２による撮影がなされても良い。この場合、撮像装置１のカメラ制御部１０７が有する機能をタブレットコンピュータ２の制御部２０１が有していても良い。このように、上述した実施形態における機能を実現する構成をどの装置が有するかについては適宜、変更することができる。
【０１２３】  通信を行う構成（例えば、タブレット通信部２０２）は、タブレットコンピュータ２に着脱自在とされる通信アダプタ等であっても良い。
【０１２４】  タブレットコンピュータ２を使用した入力が行われる場所と、撮影が行われる場所とが同一空間でなく、異なった場所であっても良い。例えば、構想を決定する責任者が自宅等でタブレットコンピュータ２を使用して構想データの入力を行い、構想データを撮影が行われるスタジオに送信する。スタジオ内に設置された装置が、調光テーブルと構想データとに基づいて、各光源に対する調光情報を生成し、光源の発光強度等を制御した上で撮影が行われるようにしても良い。これにより、構想を決定する責任者が、撮影が行われる場所に出向く必要をなくすことができる。
【０１２５】  上述した第２の実施形態では、構想データの一例として、人物や背景の明るさを維持する例について説明したが、これに限定されるものではない。例えば、明るさの変化が指定された構想データであっても良い。具体的には、人物が動きに伴って当該人物が明るくなる若しくは暗くなると指定されたものが構想データであっても良い。そして、上述した第２の実施形態で説明したように、人物の動きに伴って生じる構想データとの差異を打ち消すように各光源の設定が適宜、変更され、構想データが実現される。更に、構想データは、例えば、人物が所定の時間後にどの程度明るくなるといった時間情報が含まれたものであっても良い。
【０１２６】  第２の実施形態で、撮像装置１の記録レートが６０ｆｐｓ（frame per second）であり、撮像のレートが１２０ｆｐｓや２４０ｆｐｓのような高速撮像の場合には、記録に用いられない画像を使用して、キャリブレーション処理や調光情報を再計算する処理が行われても良い。
【０１２７】  上述した第２の実施形態では、人物６の動きを、前後方向を例にして説明したが、左右方向、斜め方向、これらが組み合わさった方向等でも構わない。
【０１２８】  本開示は、装置、方法、プログラム、システム等により実現することもできる。例えば、上述した実施形態で説明した機能を行うプログラムをダウンロード可能とし、実施形態で説明した制御機能を有しない装置が当該プログラムをダウンロードしてインストールすることにより、当該装置において実施形態で説明した制御を行うことが可能となる。本開示は、このようなプログラムを配布するサーバにより実現することも可能である。
【０１２９】  上述した実施形態において、キャリブレーション処理における各光源の発光パターンを１種類とし、各光源の発光パターンにおける発光強度を撮像装置のTTL（Through the Lens）自動調光機能によって求められた発光強度を利用しても良い。その際、全ての光源が発光していない環境光のみの状態での撮影も合わせて行うことが好ましい。
【０１３０】  上述した実施形態において、キャリブレーション処理において撮影で得られる画像に輝度値の上限または下限を超えて白飛びや黒潰れとなってしまった領域がある場合にはユーザへ通知するようにしても良い。通知の際に撮影で得られた画像を表示し、白飛びや黒潰れとなっている領域を強調表示するようにしても良い。
【０１３１】  上述した実施形態において、キャリブレーション処理における各光源の色温度が異なる場合に、色温度の差による影響を抑制するように各灯の色温度に係数を掛けて利用するようにしても良い。また、同じ光源でも発光量によって色温度が異なる場合に、発光量に応じて色温度に係数を掛けて利用しても良い。
【０１３２】  上述した実施形態では、キャリブレーション処理において撮影で得られる画像から調光テーブルを作成する例について説明したが、これに限定されるものではない。例えば撮影で得られる画像情報を調光テーブルへと変換せずにそのまま使用しても良い。その際用いる画像情報はガンマの影響を回避するため、シミュレーション画像のビット数による表現色数や階調担保のためにRAW画像であることが好ましい。
【０１３３】  上述した実施形態では、ライティングの設定及び撮影処理において最適な調光情報を求めるために上述したような最適化方法を用いる例について説明したが、撮影で得られる画像情報をそのままライティングの設定及び撮影処理へ適用する場合には、異なる方法によってライティングの設定及び撮影処理を行っても良い。具体的には撮影によって得られる各画像の比較明合成によってライティング撮影の結果のシミュレーション画像を生成し、生成した画像をユーザが確認する。確認の結果、所望のシミュレーション画像である場合はユーザ操作に応じて、生成したシミュレーション画像と同様の撮影結果となるような調光情報を各光源に送信する。一方、確認の結果、所望のシミュレーション画像でない場合はユーザ操作に応じて比較明合成に用いる各画像の輝度値に対する係数をユーザが変更することによりユーザの所望するシミュレーション画像になるように調整を行う。ユーザの調整終了後にユーザ操作に応じてユーザ調整後のシミュレーション画像と同様の撮影結果となるような調光情報を各光源に送信する。
【０１３４】  上述の比較明合成を用いることで、環境光成分と各光源からの発光成分を分離して計算することができる。環境光のみの状態での撮影画像と発光画像で対応する画素の値を比較し、画素の値が大きい方を取得することで発光成分となる。光源の発光強度と得られる反射光との関係が両対数グラフにおいて傾き1の1次関数で表されることから、発光成分の計算が可能となる。これによりシミュレーションにおける計算量が大幅に削減される。また、比較明合成の方法については、RGBの合計値で比較するカラー比較明合成を用いても良い。
【０１３５】  また、例えば図１７に示すように、前述の比較明合成によるシミュレーション画像のユーザによる確認のためにシミュレーション画像を表示部２０３に表示しても良い。その際、初期状態の参照画像ＩＭ３として環境光のみで撮影した画像を表示してもよく、予め設定された所定の比較明合成によるシミュレーション画像を表示しても良い。その際、比較明合成に用いる画像情報を選択する比較明合成画像選択部６０１と各画像情報の輝度値に対する係数を設定する係数設定部６０２をＩＭ３と同時に表示しても良い。これによりユーザは参照画像ＩＭ３を参照しながら比較明合成画像選択部６０１と係数設定部６０２を操作することで自身の構想に基づく所望のシミュレーション画像となるように調整が可能となる。更に表示部２０３は接続中の各光源の情報を表示する光源情報表示部６０３、再キャリブレーションを指示するための再キャリブレーション指示部６０４、調光情報を各光源に送信し、本撮影へと進むための本撮影指示部６０５、表示中のシミュレーション画像を完成画像として出力するシミュレーション画像出力部６０６を表示しても良い。
【０１３６】  ここで比較明合成は環境光のみの状態で撮影した画像情報及び各光源の発光パターン画像情報を比較明合成しても良いが、環境光のみの状態で撮影した画像情報と各光源の発光パターン画像情報と環境光のみで撮影した画像情報の輝度値の差分の画像情報とを比較明合成しても良い。これにより比較明合成で用いる画像情報の撮影時刻による環境光の差異による影響を軽減することが考えられる。
【０１３７】  上述した実施形態において、各光源、撮像装置または情報処理装置が被写体の被光線状態が変化したことを検知した際にキャリブレーション処理、構想データ生成処理、ライティングの設定及び撮影処理の一部、またはすべての処理をやり直すようにしても良い。またはユーザ操作によりキャリブレーション処理、構想データ生成処理、ライティングの設定及び撮影処理の一部、またはすべての行程をやり直すようにしても良い。ここで被写体の被光線状態とは光源の台数の増減、被写体や光源の位置の移動、被写体自体の反射率の変化、撮像装置や光源の設定値の変化、ディヒューザ等のアクセサリの脱着、天候や環境光の変化によって変化することが考えられる。各光源、撮像装置または情報処理装置はユーザ操作の検知、各種センサ、撮像画像の変化等によって被写体の被光線状態の変化を検知する。ユーザ操作の検知、各種センサ、撮像画像の変化等によって被写体の被光線状態の変化を検知した場合は上述のように自動で各種処理の一部、またはすべての処理をやり直してもよく、ユーザに被写体の被光線状態の変化を通知するようにしても良い。
【０１３８】  本開示は、以下の構成も採ることができる。（１）  所望する画像の特徴を表す構想データと、発光部の発光結果とに応じて、前記発光部の設定を決定する制御部を有し、  前記制御部は、被写体の変化が生じた場合に構想データを維持するように前記決定した設定を制御する  情報処理装置。（２）  前記構想データは、被写体の領域毎に指定される明るさを示すデータである  （１）に情報処理装置。（３）  前記制御部は、前記発光部が所定の発光パターンで発光した場合に得られる画像の画像情報に基づいて、前記発光部の発光結果に対応する調光テーブルを生成する  （１）又は（２）に記載の情報処理装置。（４）  前記発光パターンは、発光部の発光強度である  （３）に記載の情報処理装置。（５）  前記制御部は、前記被写体に含まれる動被写体の位置情報に基づいて、前記発光部の発光結果に対応する調光テーブルを生成する  （３）又は（４）に記載の情報処理装置。（６）  前記制御部は、所定の発光強度及び所定の位置情報に対応する画像情報を使用して、前記所定の位置情報とは異なる位置情報に対応する画像情報を生成する  （５）に記載の情報処理装置。（７）  前記発光パターンは、発光部の色温度である  （３）に記載の情報処理装置。（８）  前記画像情報は、前記発光部の発光パターンに対応する空間的なセンサ情報である  （３）〜（７）の何れかに記載の情報処理装置。（９）  前記画像情報は、画素単位又は任意の大きさのブロック単位における輝度レベルである  （８）に記載の情報処理装置。（１０）  前記構想データを生成するための入力を受け付ける入力部を有する  （１）〜（９）の何れかに記載の情報処理装置。（１１）  前記入力を受け付ける際に参照される参照画像を表示する表示部を有する  （１０）に記載の情報処理装置。（１２）  前記発光部の設定は、発光部の発光強度、発光部から発光する光の色温度、当該光の硬軟、当該光の照射範囲及び当該光の照射方向の少なくとも一つの設定に関する設定である  （１）〜（１１）の何れかに記載の情報処理装置。（１３）  前記発光部の設定を出力する出力部を有する  （１）〜（１２）の何れかに記載の情報処理装置。（１４）  前記被写体は、ユーザにより指定された被写体及び自動で認識された被写体の少なくとも一方である  （１）〜（１３）の何れかに記載の情報処理装置。（１５）  所望する画像の特徴を表す構想データと、発光部の発光結果とに応じて、前記発光部の設定を決定し、  被写体の変化が生じた場合に構想データを維持するように前記決定した設定を制御する  情報処理方法。（１６）  所望する画像の特徴を表す構想データと、発光部の発光結果とに応じて、前記発光部の設定を決定し、  被写体の変化が生じた場合に構想データを維持するように前記決定した設定を制御する処理を  コンピュータに実行させるプログラム。（１７）  情報処理装置と、発光部とを有し、  前記情報処理装置は、  所望する画像の特徴を表す構想データと、発光部の発光結果とに応じて、前記発光部の設定を決定し、被写体の変化が生じた場合に構想データを維持するように前記決定した設定を制御する制御部と、  前記発光部に対して前記設定を出力する出力部とを有し、  前記発光部は、  前記情報処理装置から出力された設定に基づく発光を制御する発光制御部とを有する  ライティングシステム。（１８）  前記情報処理装置は、記録されない画像を用いて前記発光部の発光結果を演算する  （１７）に記載のライティングシステム。
【符号の説明】
【０１３９】１・・・撮像装置、２・・・タブレットコンピュータ。３Ａ〜３Ｃ，５Ａ〜５Ｃ・・・光源、１０・・・ライティングシステム、１０７・・・カメラ制御部、２０１・・・制御部、２０１Ａ・・・調光テーブル生成部、２０１Ｂ・・・調光情報生成部、２０２・・・タブレット通信部、２０３・・・表示部、２０４・・・入力部、３０３Ａ〜３０３Ｃ，５０３〜５０３Ｃ・・・光源通信部
【図１】
2019054416.tif 000003
【図２】
2019054416.tif 000004
【図３】
2019054416.tif 000005
【図４】
2019054416.tif 000006
【図５】
2019054416.tif 000007
【図６】
2019054416.tif 000008
【図７】
2019054416.tif 000009
【図８】
2019054416.tif 000010
【図９】
2019054416.tif 000011
【図１０】
2019054416.tif 000012
【図１１】
2019054416.tif 000013
【図１２】
2019054416.tif 000014
【図１３】
2019054416.tif 000015
【図１４】
2019054416.tif 000016
【図１５】
2019054416.tif 000017
【図１６】
2019054416.tif 000018
【図１７】
2019054416.tif 000019
【国際調査報告】
2019054416.tif 000020
2019054416.tif 000021
2019054416.tif 000022
2019054416.tif 000023