(57)【要約】      （修正有）【課題】撮像領域が変化した場合にも、新たに撮像領域内に入ってきた被写体に対して迅速に撮像条件の調整を行う。  【解決手段】被写体の画像を撮像する撮像部と、撮像部が撮像している画像の撮像領域外に存在する被写体の光量を、撮像部と被写体との位置関係に対応づけて格納する光量格納部と、撮像部の撮像領域の変化を検出する撮像領域変化検出部と、撮像領域変化検出部が検出した撮像領域の変化に基づいて、撮像部と被写体との位置関係が変化した後の撮像部と被写体との位置関係を予測する位置関係予測部と、位置関係予測部が予測した位置関係に対応づけて光量格納部が格納する光量に基づいて、撮像部の撮像条件を制御する撮像条件制御部とを備える。【選択図】図１
2005318451.tif 000002
【特許請求の範囲】
【請求項１】
被写体の画像を撮像する撮像部と、
前記撮像部が撮像している画像の撮像領域外に存在する被写体の光量を、前記撮像部と被写体との位置関係に対応づけて格納する光量格納部と、
前記撮像部の撮像領域の変化を検出する撮像領域変化検出部と、
前記撮像領域変化検出部が検出した撮像領域の変化に基づいて、前記撮像部と被写体との位置関係が変化した後の前記撮像部と被写体との位置関係を予測する位置関係予測部と、
前記位置関係予測部が予測した前記位置関係に対応づけて前記光量格納部が格納する光量に基づいて、前記撮像部による撮像条件を制御する撮像条件制御部と
を備える撮像装置。
【請求項２】
前記撮像条件制御部は、前記光量格納部が格納する光量に基づいて、前記撮像部による露出調整を制御する
請求項１に記載の撮像装置。
【請求項３】
前記光量格納部は、前記撮像部の撮像領域外に存在する被写体の各色の光量を、前記撮像部と被写体との位置関係に対応づけて格納し、
前記撮像条件制御部は、前記光量格納部が格納する各色の光量に基づいて、前記撮像部によるホワイトバランス調整を制御する
請求項１に記載の撮像装置。
【請求項４】
被写体の光量を測定する光量測定部
をさらに備え、
前記撮像部は、電子ズームにより全体画像のうちの、前記撮像領域の画像であるズーム内画像を撮像し、
前記光量測定部は、前記全体画像のうちの前記ズーム内画像以外の画像であるズーム外画像が含む被写体の光量を測定し、
前記光量格納部は、前記ズーム外画像の被写体の光量を、前記撮像部と被写体との位置関係に対応づけて格納し、
前記撮像条件制御部は、前記撮像部の撮像領域が変化した場合に、前記光量格納部が格納する前記ズーム外画像が含む被写体の光量に基づいて、前記撮像部の撮像条件を制御する
請求項１に記載の撮像装置。
【請求項５】
被写体の光量を測定する光量測定部
をさらに備え、
前記光量格納部は、前記光量測定部が過去に測定した光量を、前記撮像部と被写体との位置関係に対応づけて格納し、
前記撮像条件制御部は、前記撮像部の撮像領域が変化した場合に、前記光量格納部が格納する過去に測定された光量に基づいて、前記撮像部の撮像条件を制御する
請求項１に記載の撮像装置。
【請求項６】
前記撮像部と被写体との位置関係が変化した後の被写体の光量を予測する光量予測部
をさらに備え、
前記光量格納部は、前記光量測定部が過去に測定した光量を、前記光量測定部が光量を測定した時刻に対応づけて格納し、
前記光量予測部は、前記光量格納部が格納する、前記光量測定部が過去に測定した光量に基づいて、前記撮像部と被写体との位置関係が変化した後の被写体の光量を予測し、
前記撮像条件制御部は、前記光量予測部が予測した前記光量に基づいて、前記撮像部の撮像条件を制御する
請求項５に記載の撮像装置。
【請求項７】
前記撮像領域変化検出部は、前記撮像部の動きを検出することにより、前記撮像部の撮像領域の変化を検出する
請求項１に記載の撮像装置。
【請求項８】
前記撮像部は、複数の画像を連続して撮像し、
前記撮像領域変化検出部は、前記撮像部が撮像した複数の画像を比較することにより、前記撮像部の撮像領域の変化を検出する
請求項１に記載の撮像装置。
【請求項９】
前記光量格納部は、前記撮像部の撮像領域外に存在する被写体に対する光量を、前記撮像部の向きに対応づけて格納し、
前記撮像領域変化検出部は、前記撮像部の向きの変化を検出し、
前記位置関係予測部は、前記撮像領域変化検出部が検出した前記撮像部の向きの変化に基づいて、前記撮像部の向きが変化した後の前記撮像部の向きを予測し、
前記撮像条件制御部は、前記位置関係予測部が予測した前記撮像部の向きに対応づけて前記光量格納部が格納する、前記撮像部の撮像領域外に存在する被写体の光量に基づいて、前記撮像部の撮像条件を制御する
請求項１に記載の撮像装置。
【請求項１０】
撮像している画像の撮像領域外に存在する被写体の光量を、撮像装置と被写体との位置関係に対応づけて光量格納部に格納する段階と、
前記撮像装置の撮像領域の変化を検出する段階と、
検出した撮像領域の変化に基づいて、前記撮像装置の撮像領域が変化した後の前記撮像装置と被写体との位置関係を予測する段階と、
予測した前記位置関係に対応づけて前記光量格納部が格納する光量に基づいて、前記撮像装置の撮像条件を制御する段階と、
前記撮像条件に基づいて被写体の画像を撮像する撮像部と
を備える撮像方法。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、撮像装置及び撮像方法に関する。特に本発明は、撮像領域が変化した場合に新たに撮像領域内に入ってきた被写体に対して迅速に撮像条件の調整を行うことができる撮像装置及び撮像方法に関する。
【背景技術】
【０００２】
従来の撮像装置に搭載されている自動露出調整機能調整機能は、撮像領域内の被写体の画像において輝度を測定し、測定した輝度に基づいて絞り量、シャッタースピード等を調整することによって露出調整を行う。また、従来の撮像装置に搭載されている自動ホワイトバランス調整機能は、撮像領域内の被写体の画像において色度を測定し、測定した色度に基づいて各色の色度を調整することによってホワイトバランス調整を行う。
【特許文献１】特開２００１−２０９０８８号公報
【発明の開示】
【発明が解決しようとする課題】
【０００３】
しかしながら、従来の自動露出調整機能又は自動ホワイトバランス調整機能においては、撮像領域内において被写体の画像の輝度又は色度を測定し、測定した輝度又は色度に基づいて露出調整又はホワイトバランス調整を行うため、撮像装置の向きを大きく変えた場合等の撮像領域が変化した場合には、撮像領域が変化した後に撮像領域内において被写体の画像の輝度又は色度を測定してから露出調整又はホワイトバランス調整を行わなければならない。そのため、撮像領域が変化した直後には露出調整又はホワイトバランス調整が適切になされておらず、撮像領域が変化した直後に撮影された画像は画質が悪いもともなってしまう。即ち、従来の自動露出調整機能又は自動ホワイトバランス調整機能では、新たに撮像領域内に入ってきた被写体に対しての露出調整又はホワイトバランス調整に所定の時間を要してしまうため、ユーザが急に撮像装置の向きを変えて撮影する場合や、速いスピードで撮像領域内に入ってくる被写体を撮影する場合には、被写体に対して迅速に露出調整又はホワイトバランス調整を追従させて適切な露出又はホワイトバランスにより撮影することができなかった。
【０００４】
そこで本発明は、上記の課題を解決することができる撮像装置及び撮像方法を提供することを目的とする。この目的は特許請求の範囲における独立項に記載の特徴の組み合わせにより達成される。また従属項は本発明の更なる有利な具体例を規定する。
【課題を解決するための手段】
【０００５】
本発明の第１の形態によると、被写体の画像を撮像する撮像部と、撮像部が撮像している画像の撮像領域外に存在する被写体の光量を、撮像部と被写体との位置関係に対応づけて格納する光量格納部と、撮像部の撮像領域の変化を検出する撮像領域変化検出部と、撮像領域変化検出部が検出した撮像領域の変化に基づいて、撮像部と被写体との位置関係が変化した後の撮像部と被写体との位置関係を予測する位置関係予測部と、位置関係予測部が予測した位置関係に対応づけて光量格納部が格納する光量に基づいて、撮像部の撮像条件を制御する撮像条件制御部とを備える。
【０００６】
撮像条件制御部は、光量格納部が格納する光量に基づいて、撮像部による露出調整を制御してもよい。
【０００７】
光量格納部は、撮像部の撮像領域外に存在する被写体の各色の光量を、撮像部と被写体との位置関係に対応づけて格納し、撮像条件制御部は、光量格納部が格納する各色の光量に基づいて、撮像部によるホワイトバランス調整を制御してもよい。
【０００８】
被写体の光量を測定する光量測定部をさらに備え、撮像部は、電子ズームにより全体画像のうちの、撮像領域の画像であるズーム内画像を撮像し、光量測定部は、全体画像のうちのズーム内画像以外の画像であるズーム外画像が含む被写体の光量を測定し、光量格納部は、ズーム外画像の被写体の光量を、撮像部と被写体との位置関係に対応づけて格納し、撮像条件制御部は、撮像部の撮像領域が変化した場合に、光量格納部が格納するズーム外画像が含む被写体の光量に基づいて、撮像部の撮像条件を制御してもよい。
【０００９】
被写体の光量を測定する光量測定部をさらに備え、光量格納部は、光量測定部が過去に測定した光量を、撮像部と被写体との位置関係に対応づけて格納し、撮像条件制御部は、撮像部の撮像領域が変化した場合に、光量格納部が格納する過去に測定された光量に基づいて、撮像部の撮像条件を制御してもよい。
【００１０】
撮像部と被写体との位置関係が変化した後の被写体の光量を予測する光量予測部をさらに備え、光量格納部は、光量測定部が過去に測定した光量を、光量測定部が光量を測定した時刻に対応づけて格納し、光量予測部は、光量格納部が格納する、光量測定部が過去に測定した光量に基づいて、撮像部と被写体との位置関係が変化した後の被写体の光量を予測し、撮像条件制御部は、光量予測部が予測した光量に基づいて、撮像部の撮像条件を制御してもよい。
【００１１】
撮像領域変化検出部は、撮像部の動きを検出することにより、撮像部の撮像領域の変化を検出してもよい。
【００１２】
撮像部は、複数の画像を連続して撮像し、撮像領域変化検出部は、撮像部が撮像した複数の画像を比較することにより、撮像部の撮像領域の変化を検出してもよい。
【００１３】
光量格納部は、撮像部の撮像領域外に存在する被写体に対する光量を、撮像部の向きに対応づけて格納し、撮像領域変化検出部は、撮像部の向きの変化を検出し、位置関係予測部は、撮像領域変化検出部が検出した撮像部の向きの変化に基づいて、撮像部の向きが変化した後の撮像部の向きを予測し、撮像条件制御部は、位置関係予測部が予測した撮像部の向きに対応づけて光量格納部が格納する、撮像部の撮像領域外に存在する被写体の光量に基づいて、撮像部の撮像条件を制御してもよい。
【００１４】
本発明の第２の形態によると、撮像している画像の撮像領域外に存在する被写体の光量を、撮像装置と被写体との位置関係に対応づけて光量格納部に格納する段階と、撮像装置の撮像領域の変化を検出する段階と、検出した撮像領域の変化に基づいて、撮像装置の撮像領域が変化した後の撮像装置と被写体との位置関係を予測する段階と、予測した位置関係に対応づけて光量格納部が格納する光量に基づいて、撮像装置の撮像条件を制御する段階と、撮像条件に基づいて被写体の画像を撮像する撮像部とを備える。
【００１５】
なお上記の発明の概要は、本発明の必要な特徴の全てを列挙したものではなく、これらの特徴群のサブコンビネーションもまた発明となりうる。
【発明の効果】
【００１６】
本発明に係る撮像装置によれば、撮像領域が変化した場合に新たに撮像領域内に入ってきた被写体に対して迅速に撮像条件の調整を行うことができる。
【発明を実施するための最良の形態】
【００１７】
以下、発明の実施形態を通じて本発明を説明するが、以下の実施形態は特許請求の範囲に係る発明を限定するものではなく、また実施形態の中で説明されている特徴の組み合わせの全てが発明の解決手段に必須であるとは限らない。
【００１８】
図１は、本発明の一実施形態に係る撮像装置１００の構成の一例を示す。本実施形態においては、撮像装置１００の向きの変化、被写体の動き等によってファインダー内又は液晶モニタ内の写り込む被写体の領域である撮像領域が変化した場合に、新たに撮像領域内に入り込んでくる被写体に対して、迅速かつ正確に露出調整、ホワイトバランス調整等の撮像条件の制御を行うことを目的とする。これにより、急に撮像装置１００の向きを変化させて撮像する場合や、急に撮像領域内に入り込んでくる被写体を撮像する場合であっても、露出又はホワイトバランスが適切に調整された高画質の画像を撮像することができる。
【００１９】
撮像装置１００は、撮像部１０２、画像格納部１０４、撮像領域変化検出部１０６、撮像条件制御部１０８、位置関係予測部１１０、光量測定部１１２、光量格納部１１４、及び光量予測部１１６を備える。撮像装置１００は、デジタルスチルカメラ、デジタルムービーカメラであってもよいし、カメラ機能を備えた携帯電話であってもよい。
【００２０】
撮像部１０２は、ＣＣＤ等の撮像デバイスにより被写体から放射される光を受光し、撮像領域内に存在する被写体の画像を撮像する。このとき、撮像部１０２は、自動露出調整機能及び自動ホワイトバランス調整機能により撮像条件制御部１０８の制御に基づいて、撮像条件を調整する。そして、画像格納部１０４は、撮像部１０２が撮像した画像を格納する。ここで、画像格納部１０４は、ユーザによってレリーズボタンが押下されることによって撮像された画像だけでなく、ユーザによる指示がない場合に撮像部１０２の撮像デバイスに受光した被写体の画像を格納する。
【００２１】
撮像領域変化検出部１０６は、撮像部１０２によって連続して撮像され画像格納部１０４が格納する複数の画像に基づいて、撮像部１０２の撮像領域の変化を検出する。具体的には、撮像領域変化検出部１０６は、撮像部１０２によって連続して撮像された複数の画像を比較することにより、いわゆるオプティカルフローによって撮像部１０２の撮像領域の変化を検出する。また、他の例においては、撮像領域変化検出部１０６は、ジャイロスコープを有し、撮像装置１００の動きを検出することにより、撮像部１０２の撮像領域の変化を検出してもよい。
【００２２】
撮像領域変化検出部１０６は、オプティカルフロー又はジャイロスコープによって撮像部１０２の撮像領域の変化を検出し、検出した撮像領域の変化に基づいて、撮像部１０２と被写体との相対位置の変化を検出する。例えば、撮像領域変化検出部１０６は、撮像部１０２の被写体に対する向きの変化を検出する。ここで、撮像領域とは、撮像部１０２の撮像デバイスに対して光を放射する被写体の領域、即ち撮像部１０２が撮像できる領域をいい、撮像部１０２の向き及び位置と被写体が存在する位置とにより決定される。したがって、撮像領域の変化を検出することによって、撮像部１０２と被写体との位置関係を求めることができる。また、撮像部１０２が電子ズームにより撮像している場合には、電子ズームにより撮像されるズーム内の領域を撮像領域としてもよい。
【００２３】
光量格納部１１４は、撮像装置１００の周囲の被写体の光量を、撮像部１０２と被写体との相対位置に対応づけて格納する。光量格納部１１４は、撮像部１０２が撮像している画像の領域である撮像領域内に存在する被写体の光量だけでなく、撮像領域外に存在する被写体の光量をも、撮像部１０２と被写体との位置関係に対応づけて格納する。例えば、光量格納部１１４は、撮像領域内又は撮像領域外に存在する被写体の光量を、撮像部１０２の向きに対応づけて格納する。具体的には、光量格納部１１４は、撮像部１０２からの所定の方向を基準として、基準の方向から左右方向への角度及び上下方向への角度に対応づけて、それぞれの方向に存在する被写体の光量を格納する。
【００２４】
なお、光量格納部１１４は、被写体の光量として、撮像部１０２の撮像領域と略同じ大きさの範囲における被写体の輝度を、撮像部１０２と被写体との位置関係に対応づけて格納してもよい。また、光量格納部１１４は、画素毎に被写体の各色（Ｒ、Ｇ、Ｂ）の光量を、撮像部１０２と被写体との位置関係に対応づけて格納してもよい。
【００２５】
光量測定部１１２は、撮像部１０２が撮像した画像に基づいて、被写体の光量を測定する。撮像部１０２が電子ズームにより全体画像うちの、撮像領域の画像であるズーム内画像を撮像している場合には、光量測定部１１２は、全体画像のうちのズーム内画像以外の画像であるズーム外画像が含む被写体の光量をも測定する。なお、光量測定部１１２は、撮像部１０２による撮像領域と略同じ大きさの範囲における被写体の輝度を測定し、また画素毎に被写体の各色（Ｒ、Ｇ、Ｂ）の光量を測定する。
【００２６】
そして、光量格納部１１４は、光量測定部１１２が測定した、ズーム外画像の被写体の光量を含む撮像装置１００の周囲の被写体の光量を、撮像領域変化検出部１０６によって検出した撮像部１０２と被写体との位置関係に対応づけて格納する。また、光量測定部１１２は、ユーザのレリーズボタンの押下等による指示に基づいて撮像部１０２が撮像を行っていない場合であっても、撮像装置１００の周囲の被写体の光量を継続して測定し、光量格納部１１４に格納させる。即ち、光量格納部１１４は、光量測定部１１２が過去に測定した被写体の光量をも、撮像部１０２と被写体との位置関係に対応づけて格納する。また、光量格納部１１４は、光量測定部１１２が過去に測定した被写体の光量を、光量測定部１１２が被写体の光量を測定した時刻に対応づけて格納してもよい。
【００２７】
位置関係予測部１１０は、撮像領域変化検出部１０６が検出した撮像領域の変化に基づいて、撮像部１０２の撮像領域が変化した後の撮像部１０２と被写体との位置関係を予測する。具体的には、位置関係予測部１１０は、撮像領域変化検出部１０６が検出した撮像部の向きの変化に基づいて、撮像部１０２の向きが変化した後の撮像部１０２の向きを予測する。また、光量予測部１１６は、撮像部１０２と被写体との位置関係が変化した後の被写体の光量を予測する。
【００２８】
撮像条件制御部１０８は、位置関係予測部１１０が予測した撮像部１０２と被写体との位置関係に対応づけて光量格納部１１４が格納する被写体の光量に基づいて、撮像部１０２の撮像条件を制御する。具体的には、撮像条件制御部１０８は、光量格納部１１４が格納する被写体の光量に基づいて、撮像部１０２による露出調整を制御し、また光量格納部１１４が格納する被写体の各色の光量に基づいて、撮像部１０２によるホワイトバランス調整を制御する。
【００２９】
例えば、撮像条件制御部１０８は、位置関係予測部１１０が予測した撮像部１０２の向きに対応づけて光量格納部１１４が格納する、光量測定部１１２によって測定された撮像部１０２の撮像領域外に存在する被写体の光量に基づいて、撮像部１０２の撮像条件を制御する。又は、撮像条件制御部１０８は、撮像部１０２の撮像領域が変化した場合に、光量格納部１１４が格納するズーム外画像が含む被写体の光量に基づいて、撮像部１０２の撮像条件を制御する。又は、撮像条件制御部１０８は、撮像部１０２の撮像領域が変化した場合に、光量格納部１１４が格納する、光量測定部１１２によって過去に測定された被写体の光量に基づいて、撮像部１０２の撮像条件を制御する。
【００３０】
以上のように、本実施形態に係る撮像装置１００によれば、撮像装置１００の向きがユーザによって変化させられることによって撮像領域が変化し、撮像領域外に存在していた被写体が撮像領域内に入り込んでくることを予め予測し、新たに撮像領域内に入り込んでくる被写体、即ち撮像領域外に存在していた被写体の光量に露出及びホワイトバランスを追従させる。これにより、ユーザが急に撮像装置１００の向きを変えて撮影する場合や、速いスピードで撮像領域内に入ってくる被写体を撮影する場合に、被写体に対して迅速に露出調整及びホワイトバランス調整を追従させて適切な露出及びホワイトバランスで撮影することができ、高画質の画像を取得することができる。
【００３１】
図２は、本実施形態に係る光量格納部１１４が格納するデータの一例を示す。光量格納部１１４は、撮像部１０２の基準方向からの左右方向の向き（θｘ）及び上下方向の向き（θｙ）に対応づけて、ぞれぞれの向きにおける被写体の各色の光量を格納する。また、光量格納部１１４は、光量測定部１１２が被写体の光量を測定した時刻毎に、ぞれぞれの向きにおける被写体の各色の光量を格納する。
【００３２】
なお、光量測定部１１２は、ユーザによって撮像の指示があるか否かに係わらず、撮像部１０２が撮像した画像から被写体の光量を常時測定することが好ましく、光量格納部１１４は、光量測定部１１２によって測定される毎に、新たに測定されたそれぞれの方向の被写体の各色の光量を時刻に対応づけて格納することが好ましい。これにより、新たに撮像領域内に入り込んでくる被写体を迅速に検知して、露出調整及びホワイトバランス調整の制御動作を予め開始させることができる。また、撮像装置１００の周囲の全ての方向に存在する被写体の光量を予め測定しておくことによって、撮像装置１００の向きを左右方向に変化させた直後に撮影する場合に限らず、撮像装置１００の向きを上下方向又は斜め方向に変化させた直後に撮影する場合にも、新たに撮像領域内に入り込んでくる被写体に対して迅速に露出調整及びホワイトバランス調整を行うことができる。
【００３３】
図３は、本実施形態に係る光量予測部１１６による被写体の光量予測の方法の一例を示す。光量予測部１１６は、光量格納部１１４が時刻（Ｔ１、Ｔ２、Ｔ３・・・）毎に格納する、光量測定部１１２が過去に測定した光量に基づいて、撮像部１０２と被写体との位置関係が変化した後の時刻（Ｔ４）における被写体の光量を予測する。即ち、光量予測部１１６は、時刻の経過に伴う撮影環境の明るさ又は色度の変化を予測する。例えば、夕暮れ時に屋外で撮影をしている場合等には、日没による被写体の光量の変化を予測する。そして、撮像条件制御部１０８は、光量予測部１１６が予測した被写体の光量に基づいて、撮像部１０２による露出調整又はホワイトバランス調整を制御する。
【００３４】
このように、時刻の変化に伴って被写体の光量を予測することによって、被写体の光量を取得して格納してから時間が経過してしまっている場合であっても、撮像領域外に存在する被写体に対して適切に露出調整及びホワイトバランス調整を行うことができる。
【００３５】
図４は、本実施形態に係る露出調整及びホワイトバランス調整の方法の一例を示す。部分領域３００は、画素の単位、又は複数の画素を含むブロックの単位であり、光量格納部１１４は、部分領域３００毎に、部分領域３００に存在する被写体の各色の光量を格納している。また、撮像領域３０２、３０４、３０６、３０８、３１０、及び３１２は、ユーザが撮像装置１００の向きを変化させることによって、撮像部１０２による撮像領域が撮像領域３０２から撮像領域３１２まで徐々に変化している様子を示す。
【００３６】
以下、本例における露出調整及びホワイトバランス調整の方法を説明する。ユーザが撮像装置１００の向きを変えることによって、撮像部１０２の向きが変化した場合、撮像領域変化検出部１０６は、オプティカルフロー又はジャイロスコープによって撮像部１０２の向きの変化を検出する。そして、位置関係予測部１１０は、撮像領域変化検出部１０６が検出した撮像部１０２の向きの変化に基づいて、撮像部１０２の向きの変化した後の撮像部１０２の向きを予測する。そして、撮像条件制御部１０８は、位置関係予測部１１０が予測した撮像部１０２の向きに対応づけて光量格納部１１４が格納する被写体の光量を抽出する。
【００３７】
具体的には、撮像条件制御部１０８は、撮像部１０２の向きが撮像領域３０２から撮像領域３０４の方向に変化し始めた場合に、撮像領域３０４に含まれる被写体の光量を抽出する。そして、撮像条件制御部１０８は、抽出した被写体の光量の和を求め、撮像領域３０４全体の輝度を算出する。そして、撮像条件制御部１０８は、撮像部１０２の撮像領域が撮像領域３０４になったときに、算出した輝度に基づいた露出調整を行われるように、撮像部１０２を制御する。また、撮像条件制御部１０８は、抽出した被写体の各色毎に光量の和を求め、撮像領域３０４における色バランスを算出する。そして、撮像条件制御部１０８は、撮像部１０２の撮像領域が撮像領域３０４になったときに、算出した色バランスに基づいたホワイトバランス調整を行われるように、撮像部１０２を制御する。
【００３８】
そして同様に、撮像条件制御部１０８は、撮像領域３０４から撮像領域３０６、撮像領域３０８、撮像領域３１０、撮像領域３１２の順に撮像部１０２の向きの変化に追従させて、それぞれの撮像領域の輝度又は色バランスに基づいて、撮像部１０２による露出又はホワイトバランスを順に変化させていく。
【００３９】
このように、撮像領域変化検出部１０６が検出して位置関係予測部１１０が予測した撮像部１０２の向きの変化に基づいて、撮像部１０２による露出調整及びホワイトバランス調整を予め予測して追従させることによって、撮像領域が変化した後に取得した画像に基づいて露出調整及びホワイトバランス調整を行う場合に比べ、露出調整及びホワイトバランス調整の追従を迅速に行うことができる。その結果、撮像部１０２の向きが変化した後に撮像領域内に存在する被写体に対する露出調整及びホワイトバランス調整が完了するまでの時間を短縮することができる。
【００４０】
図５は、本実施形態に係る露出調整及びホワイトバランス調整の方法の一例を示す。全体画像４００及び４１０は、撮像部１０２が有する撮像デバイスが光を受光しうる被写体領域の画像である。また、ズーム内画像４０２及び４１２は、撮像部１０２の電子ズームによってユーザが選択して視認しうる被写体領域の画像である。また、ズーム外画像４０４及び４１４は、全体画像４００及び４１０のうちのズーム内画像４０２及び４１２以外の部分の画像である。なお、ズーム内画像４０２及び４１２は、本発明の撮像領域内に存在する被写体の画像であり、ズーム外画像４０４及び４１４は、本発明の撮像領域外に存在する被写体の画像である。
【００４１】
図５では、ユーザが撮像装置１００の向きを変化させることによって、撮像部１０２が撮像する全体画像が全体画像４００から全体画像４１０まで徐々に変化し、撮像部１０２が電子ズームにより撮像するズーム内画像がズーム内画像４０２からズーム内画像４１２まで徐々に変化している様子を示す。
【００４２】
以下、本例における露出調整及びホワイトバランス調整の方法を説明する。撮像部１０２が備える撮像デバイスにより全体画像４００を撮像し、ユーザがズーム内画像４０２を選択して閲覧している場合に、光量測定部１１２は、全体画像４００が含む複数の部分領域にそれぞれ存在する被写体の光量を測定する。即ち、光量測定部１１２は、ズーム内画像４０２が含む複数の部分領域に存在する被写体の光量に加え、ズーム外画像４０４が含む複数の部分領域に存在する被写体の光量を測定する。そして、光量格納部１１４は、光量測定部１１２が測定した部分領域毎の被写体の光量を、被写体に対する撮像部１０２の向きに対応づけて格納する。
【００４３】
そして、ユーザが撮像装置１００の向きを変えることによって、撮像部１０２の向きが変化した場合、撮像領域変化検出部１０６は、オプティカルフロー又はジャイロスコープによって撮像部１０２の向きの変化を検出する。そして、位置関係予測部１１０は、撮像領域変化検出部１０６が検出した撮像部１０２の向きの変化に基づいて、撮像部１０２の向きの変化した後の撮像部１０２の向きを予測する。そして、撮像条件制御部１０８は、位置関係予測部１１０が予測した撮像部１０２の向きに対応づけて光量格納部１１４が格納する被写体の光量を抽出する。
【００４４】
具体的には、撮像条件制御部１０８は、撮像部１０２の向きが全体画像４００から全体画像４１０の方向に変化し始めた場合に、ズーム内画像４１２に含まれる被写体の光量、即ち全体画像４００におけるズーム外画像４０４に含まれる被写体の光量を抽出する。そして、撮像条件制御部１０８は、抽出した被写体の光量の和を求め、ズーム内画像４１２全体の輝度を算出する。そして、撮像条件制御部１０８は、撮像部１０２のズーム内画像がズーム内画像４１２になったときに、算出した輝度に基づいた露出調整を行われるように、撮像部１０２を制御する。また、撮像条件制御部１０８は、抽出した被写体の各色毎に光量の和を求め、ズーム内画像４１２における色バランスを算出する。そして、撮像条件制御部１０８は、撮像部１０２のズーム内画像がズーム内画像４１２になったときに、算出した色バランスに基づいたホワイトバランス調整を行われるように、撮像部１０２を制御する。
【００４５】
このように、撮像部１０２が電子ズームによってズーム内画像を撮像している場合に、ズーム外画像に含まれる被写体の光量を測定しておくことによって、撮像装置１００の向きが変化してズーム外画像であった部分がズーム内画像になった場合に、予め測定しておいた被写体の光量に基づいて即時に新たなズーム内画像に適切な露出調整及びホワイトバランス調整を行うことができる。そのため、撮像領域の変化に伴う露出調整及びホワイトバランス調整の遅延を低減することができ、撮像装置１００の向きを変化させながら撮像した場合であっても高画質な画像を得ることができる。
【００４６】
以上、実施形態を用いて本発明を説明したが、本発明の技術的範囲は上記実施形態に記載の範囲には限定されない。上記実施形態に、多様な変更又は改良を加えることができる。そのような変更又は改良を加えた形態も本発明の技術的範囲に含まれ得ることが、特許請求の範囲の記載から明らかである。
【図面の簡単な説明】
【００４７】
【図１】撮像装置１００の構成の一例を示す図である。
【図２】光量格納部１１４が格納するデータの一例を示す。
【図３】被写体の光量予測の方法の一例を示す図である。
【図４】露出調整及びホワイトバランス調整の方法の一例を示す図である。
【図５】露出調整及びホワイトバランス調整の方法の一例を示す図である。
【符号の説明】
【００４８】
１００  撮像装置
１０２  撮像部
１０４  画像格納部
１０６  撮像領域変化検出部
１０８  撮像条件制御部
１１０  位置関係予測部
１１２  光量測定部
１１４  光量格納部
１１６  光量予測部
３００  部分領域
３０２  撮像領域
４００  全体画像
４０２  ズーム内画像
４０４  ズーム外画像
４１０  全体画像
４１２  ズーム内画像
４１４  ズーム外画像
【図１】
2005318451.tif 000003
【図２】
2005318451.tif 000004
【図３】
2005318451.tif 000005
【図４】
2005318451.tif 000006
【図５】
2005318451.tif 000007