(57)【要約】【課題】立体画像の撮像中に、光学系の前を撮影者の指等が遮った場合、撮影者に警告を与える。【解決手段】複数の視点のそれぞれから被写体を撮像する撮像装置であって、それぞれが共通の筐体に設けられ、被写体からの光を取り込む複数の光学系と、複数の光学系のそれぞれにより取り込まれた光に応じた複数の画像を撮像する撮像部と、複数の光学系の少なくとも１つが遮られた場合に、撮影者に警告を与える警告部と、を備える撮像装置。複数の光学系の少なくとも１つの光学系の前方が遮られたか否かを検出するセンサを更に備え、警告部は、センサが複数の光学系の少なくとも１つの光学系の前方が遮られたことを検出した場合に撮影者に警告を与える撮像装置。【選択図】図１
2011160223.tif 000002
【特許請求の範囲】
【請求項１】
複数の視点のそれぞれから被写体を撮像する撮像装置であって、
それぞれが共通の筐体に設けられ、被写体からの光を取り込む複数の光学系と、
前記複数の光学系のそれぞれにより取り込まれた光に応じた複数の画像を撮像する撮像部と、
前記複数の光学系の少なくとも１つが遮られた場合に、撮影者に警告を与える警告部と、
を備える撮像装置。
【請求項２】
前記複数の光学系の少なくとも１つの光学系の前方が遮られたか否かを検出するセンサを更に備え、
前記警告部は、前記センサが前記複数の光学系の少なくとも１つの光学系の前方が遮られたことを検出した場合に前記撮影者に警告を与える
請求項１に記載の撮像装置。
【請求項３】
前記撮像部により撮像された前記複数の画像から、前記複数の光学系の少なくとも１つが遮られたことを検出する検出部を更に備え、
前記警告部は、前記検出部が前記複数の光学系の少なくとも１つが遮られたことを検出した場合に前記撮影者に警告を与える
請求項１または２に記載の撮像装置。
【請求項４】
前記検出部は、前記撮像部により撮像された前記複数の画像の少なくとも１つに、前記撮影者の指が含まれるか否かを検出する
請求項３に記載の撮像装置。
【請求項５】
前記検出部は、他の画像との差が所定以上の画像を検出した場合、検出した画像の光を取り込んだ光学系が遮られた判定する
請求項３に記載の撮像装置。
【請求項６】
前記複数の光学系のうち一の光学系により取り込まれた光に応じた画像を表示する表示部を更に備える
請求項１から５の何れかに記載の撮像装置。
【請求項７】
前記警告部は、前記複数の光学系の少なくとも１つが遮られた場合に、遮られた光学系により取り込まれた光に応じた画像を前記表示部に表示させる
請求項６に記載の撮像装置。
【請求項８】
当該撮像装置は、前記複数の光学系として、右眼に対応する視点に設けられた右眼用の光学系および左眼に対応する視点に設けられた左眼用の光学系を備え、
前記撮像部は、前記右眼用の光学系により取り込まれた光に応じた右眼用画像および前記左眼用の光学系により取り込まれた光に応じた左眼用画像を撮像し、
前記表示部は、前記右眼用画像および前記左眼用画像に応じた立体画像を表示し、
前記警告部は、前記右眼用の光学系および前記左眼用の光学系の何れか一方が遮られた場合に、前記立体画像に代えて遮られた光学系により取り込まれた光に応じた画像を前記表示部に表示させる
請求項６または７に記載の撮像装置。
【請求項９】
前記複数の光学系のうち、遮られた光学系の画像を、他の少なくとも１つの光学系により取り込まれた画像に基づいて補正する補正部を備える
請求項１から８の何れかに記載の撮像装置。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、撮像装置に関する。
【背景技術】
【０００２】
従来、立体（３Ｄ）画像の撮影技術および提示技術が知られている。立体映像を提示する技術の一つとして、複数の光学系を備えた撮像装置によって物体を右眼から見たときの右眼用画像および当該物体を左眼から見たときの左眼用画像を生成して、右眼用画像をユーザの右眼に対して表示し、左眼用画像をユーザの左眼に対して表示する技術（ステレオ立体視技術）が存在する（例えば、特許文献１〜４参照）。
特許文献１  特開２００８−３０６４０４号公報
特許文献２  特開２００２−３００４４２号公報
特許文献３  特開２００２−３００４５５号公報
特許文献４  特開平７−２１９０１４号公報
【発明の概要】
【発明が解決しようとする課題】
【０００３】
ところで、このような右眼用および左眼用の画像を撮像する装置の場合、適切な間隔を離して二つの光学レンズを配置するので、光学レンズは撮像装置の端にそれぞれ備わることが多く、装置を支える指が光学レンズの前を遮りやすい。また、撮像装置のファインダは簡易的に右眼用または左眼用の画像を表示する場合があり、１つの光学レンズの前に撮影者の指等が被写体を遮っても、撮影者が感知することが困難な場合がある。
【０００４】
そこで本発明は、上記の課題を解決することのできる撮像装置を提供することを目的とする。この目的は特許請求の範囲における独立項に記載の特徴の組み合わせにより達成される。また従属項は本発明の更なる有利な具体例を規定する。
【課題を解決するための手段】
【０００５】
上記課題を解決するために、本発明の第１の態様においては、複数の視点のそれぞれから被写体を撮像する撮像装置であって、それぞれが共通の筐体に設けられ、被写体からの光を取り込む複数の光学系と、複数の光学系のそれぞれにより取り込まれた光に応じた複数の画像を撮像する撮像部と、複数の光学系の少なくとも１つが遮られた場合に、撮影者に警告を与える警告部と、を備える撮像装置を提供する。
【０００６】
なお、上記の発明の概要は、本発明の必要な特徴の全てを列挙したものではない。また、これらの特徴群のサブコンビネーションもまた、発明となりうる。
【図面の簡単な説明】
【０００７】
【図１】本実施形態に係る撮像装置１００の構成を示す。
【図２】本実施形態に係る撮像装置１００が撮像する画像の一例を示す。
【図３】本実施形態に係る撮像装置１００の動作フローを示す。
【発明を実施するための形態】
【０００８】
以下、発明の実施の形態を通じて本発明を説明するが、以下の実施形態は特許請求の範囲にかかる発明を限定するものではない。また、実施形態の中で説明されている特徴の組み合わせの全てが発明の解決手段に必須であるとは限らない。
【０００９】
図１は、本実施形態に係る撮像装置１００の構成を示す。撮像装置１００は、複数の視点のそれぞれから被写体を撮像する。例えば撮像装置１００は、ユーザの右眼に対して出力する画像および当該ユーザの左眼に対して出力する画像を撮像して記憶する。撮像装置１００は、光学系１１０と、撮像部１２０と、記憶部１３０と、センサ１４０と、検出部１５０と、制御部１６０と、警告部１７０と、表示部１８０とを備える。
【００１０】
光学系１１０は、それぞれが共通の筐体に複数設けられ、被写体からの光を取り込む。複数の光学系１１０は、１つ以上の凸レンズおよび／または１つ以上の凹レンズによる複数のレンズ群をそれぞれ有してよく、被写体から集光した画像を撮像部１２０にそれぞれ結像する。複数の光学系１１０は、制御部１６０からの制御信号によって複数のレンズ群のそれぞれのレンズの位置を調整することによって、ピント合わせ等をそれぞれ実行してよい。
【００１１】
撮像部１２０は、複数の光学系１１０のそれぞれにより取り込まれた光に応じた複数の画像を撮像する。撮像部１２０は、複数の光学系１１０に応じた複数の受光素子を有して複数の画像を撮像してよい。これに代えて、撮像部１２０は、光学系１１０の数以下の受光素子で、受光する光学系を切り換えることで連続して複数の画像を撮像してもよい。撮像部１２０は、撮像した画像および撮像に用いたパラメータ等を記憶部１３０に記憶する。
【００１２】
記憶部１３０は、撮像部１２０が撮像した画像および撮像に用いたパラメータ等を記憶する。記憶部１３０は、一例として、フラッシュメモリ、内蔵ハードディスクまたは外付ハードディスク等の記憶装置でよい。なお、記憶する画像は、静止画像であっても、時間的に連続する複数の静止画像を含む動画像であってもよい。
【００１３】
センサ１４０は、複数の光学系１１０の少なくとも１つの光学系１１０の前方が遮られたか否かを検出する。センサ１４０は、複数の光学系１１０の前方近辺にそれぞれ備わった光検出器でよく、１つのセンサ１４０の受光部が遮られて光検出強度が他の光検出強度よりも著しく低い場合に、対応する光学系１１０の前方が遮られたことを検出してよい。
【００１４】
これに代えてセンサ１４０は、それぞれの光学系１１０が取り込んだ光の一部をそれぞれ受光する光検出器でよく、複数の光学系１１０毎の受光強度を比較することで光学系１１０の前方が遮られたか否かを検出してよい。センサ１４０は、少なくとも１つの光学系１１０の前方が遮られたことを検出した場合、制御部１６０に検出結果を通知する。
【００１５】
検出部１５０は、撮像部１２０により撮像された複数の画像から、複数の光学系１１０の少なくとも１つが遮られたことを検出する。例えば、検出部１５０は、撮像部１２０により撮像された複数の画像を比較することで光学系１１０の前方が遮られたか否かを検出する。検出部１５０は、少なくとも１つの光学系１１０の前方が遮られたことを検出した場合、制御部１６０に検出結果を通知する。
【００１６】
制御部１６０は、撮像装置１００の撮像動作を制御する。制御部１６０は、複数の光学系１１０に対して、レンズ群の調整をそれぞれ指示してよく、撮像部１２０に対して複数の画像の撮像を指示してよい。制御部１６０は、撮像部１２０が撮像した複数の画像のうち、表示すべき画像を選択して、表示部１８０に表示することを指示してよい。制御部１６０は、センサ１４０および／または検出部１５０が検出した検出結果を警告部１７０に通知する。
【００１７】
警告部１７０は、複数の光学系１１０の少なくとも１つが遮られた場合に、撮影者に警告を与える。警告部１７０は、センサ１４０および／または検出部１５０が複数の光学系の少なくとも１つの光学系の前方が遮られたことを検出した場合に撮影者に警告を与えてよい。警告部１７０は、警告音および／または警告の表示を実行して、撮影者に対して警告を与えてよい。ここで警告部１７０は、警告を表示する場合、表示部１８０に警告を表示させてよい。
【００１８】
表示部１８０は、複数の光学系１１０のうち一の光学系により取り込まれた光に応じた画像を表示する。表示部１８０は、撮像装置１００が撮像した画像および／または撮像条件等を表示するビューファインダでよい。表示部１８０は、センサ１４０および／または検出部１５０が複数の光学系の少なくとも１つの光学系の前方が遮られたことを検出した場合に応じて、撮影者に対する警告および／または適切な画像を表示する。
【００１９】
図２は、本実施形態に係る撮像装置１００が撮像する画像の一例を示す。本実施例において、撮像装置１００は、２つの光学系１１０を備えて撮像位置２１０から被写体２００を撮像する。撮像装置１００は、撮像位置２１０において、被写体２００からほぼ等距離となる水平方向に、撮影者の両眼の位置に相当する第１撮像位置２１２および第２撮像位置２１４に２つの光学系１１０を配置して、第１画像２２０および第２画像２３０を撮像する。
【００２０】
撮像装置１００は、例えば、第１撮像位置２１２で被写体２００を撮像する光学系１１０の前方を撮影者の指が遮った場合、第１画像２４０は指によってできる影状の領域２５０を含む。ここで表示部１８０は、撮像結果として第２画像２３０を表示している場合は、撮影者は指を撮像したことに気がつかない。また、表示部１８０が３Ｄ表示をしている場合、影状の領域２５０の部分は３Ｄ表示にはならないが、第２画像の正常な２Ｄ表示は右目で認識されるので指を撮像したことに気づかないこともある。
【００２１】
そこでセンサ１４０は、２つの光学系１１０の少なくとも１つが遮られたことを検出した場合に、撮影者に警告を与える。例えば、センサ１４０は、２つの光学系１１０が取り込んだ光の一部をそれぞれフォトダイオード等で受光して、受光強度を比較する。２つの光学系１１０は、それぞれ異なる角度から撮像しているが同じ被写体を撮像しているので、指等で遮られていない場合それぞれの光学系１１０が取り込んだ光強度に大きな差は生じることはほとんどない。
【００２２】
一方、撮影者の指等で１つの光学系１１０が遮られた場合、第１画像２４０に示されるように、画面の一部が影等で覆われるので、それぞれの光学系１１０が取り込んだ光強度に大きな差が生じる。したがって、センサ１４０は、予め設定した受光強度の差分量より大きな差分を検出したことによって、２つの光学系１１０の少なくとも１つが遮られたと判断してよい。
【００２３】
本実施例において、センサ１４０はそれぞれの光学系１１０が取り込んだ光の一部を受光して比較することを説明したが、これに代えて撮像部１２０は、センサ１４０の機能を有してよい。例えば、撮像部１２０は、２つの光学系１１０より取り込まれた光に応じた２つの画像を撮像する。ここで撮像部１２０は、２つの画像のそれぞれについて、画素毎の輝度の総和を相対的な受光強度として算出してよい。撮像装置１００は、２つの画像の輝度の総和が、予め設定した差分より大きな差分となったことに応じて、２つの光学系１１０の少なくとも１つが遮られたと判断してよい。
【００２４】
撮像装置１００は、２つの画像の輝度の総和が、予め設定した差分より大きな差分となったことに応じて、２つの光学系１１０の少なくとも１つが遮られたと判断してよい。また、撮像装置１００は、画素毎の輝度の総和を算出する時間を短縮する目的で、複数の分散した部分の画素について輝度の総和を求めてよく、これに代えて決まった画素数を抜いて飛び飛びに選択した画素について輝度の総和を求めてもよい。
【００２５】
また、検出部１５０は、２つの光学系１１０の少なくとも１つが遮られたことを検出した場合に、撮影者に警告を与える。検出部１５０は、撮像部１２０が撮像した２つの画像について、それぞれ画像処理をして少なくとも１つの光学系１１０が遮られたかどうかを検出してよく、これに代えて２つの画像を比較することで少なくとも１つの光学系１１０が遮られたかどうかを検出してよい。
【００２６】
検出部１５０は、撮像部１２０により撮像された複数の画像の少なくとも１つに、撮影者の指が含まれるか否かを検出する。一例として、第１画像２４０のように、撮影者の指で光学系１１０が遮られた場合、指によってできる影状の領域２５０を含む。検出部１５０は、撮像された画像のそれぞれについて画像処理を施して、画像内にこのような影状の領域２５０が撮像されているかどうかを検出して、検出した画像の光を取り込んだ光学系１１０が遮られたと判定してよい。
【００２７】
また、検出部１５０は、他の画像との差が所定以上の画像を検出した場合、検出した画像の光を取り込んだ光学系１１０が遮られたと判定してよい。２つの光学系１１０は、それぞれ異なる角度から撮像しているが同じ被写体を撮像しているので、画像を比較した場合に大きな差は生じない。一方、撮影者の指等で１つの光学系１１０が遮られた場合、第１画像２４０に示されるように、画面の一部が影等で覆われるので、画像比較によって大きな差が生じる。
【００２８】
したがって、検出部１５０は、このような画像比較を実行して、予め設定した値以上の差を検出した場合に、検出した画像の光を取り込んだ光学系１１０が遮られたと判定してよい。ここで検出部１５０は、画像比較をＲＧＢ値で比較してよく、予め設定する値としてＲＧＢ値の差分を設定してよい。これに代えて検出部１５０は、比較する画像をそれぞれ２値化してから比較してもよい。また、検出部１５０は、片側の画像に映っているものが存在して、且つ、それがピントが合っていない場合には、光学系１１０が遮られたと判定してよい。
【００２９】
以上の本実施例の、撮像装置１００によれば、センサ１４０および検出部１５０が複数の光学系１１０の少なくとも１つが遮られたことを検出することができ、撮影者に警告を与えることができる。ここで撮像装置１００は、撮影者がシャッターボタンを半分押してピントを自動で合わせている段階で、センサ１４０および検出部１５０の検出動作を実行させて、判定結果に応じて撮影者に警告を与えてよい。また、撮像装置１００は、撮影者が撮像した後に、センサ１４０および検出部１５０の検出動作を実行させて、判定結果に応じて撮影者に警告を与えてもよい。
【００３０】
図３は、本実施形態に係る撮像装置１００の動作フローを示す。撮像装置１００は、撮影者の指示に基づいて撮像の準備に入る（Ｓ３００）。撮像装置１００は、シャッタースピード、絞り、感度、および／またはズーム倍率等の撮像条件をセットして、ピントを合わせる。例えば、撮像装置１００は、シャッターボタンを半分押したことによってピント合わせを開始する。
【００３１】
センサ１４０は、複数の光学系１１０の少なくとも１つが遮られたか否かを判定する（Ｓ３１０）。撮像装置１００は、センサ１４０が異常を検出していない場合、撮影者が撮像を終了したかどうかを判断する（Ｓ３２０）。撮像装置１００は、撮影者が撮像をまだ終えていない場合、ステップ３００に戻って撮像準備段階を継続する。
【００３２】
撮影者が撮像を終了させた場合、検出部１５０は、撮像結果を画像処理することで複数の光学系１１０の少なくとも１つが遮られたか否かを判定する（Ｓ３３０）。撮像装置１００は、検出部１５０が異常を検出しない場合、正常に撮像が終了したと判断して撮像を終了させ、次の撮像の準備に移ってよい。
【００３３】
ステップＳ３１０において、センサ１４０が複数の光学系１１０の少なくとも１つが遮られたと判定した場合、センサ１４０は異常を検出したことを制御部１６０に通知する。同様に、ステップＳ３３０において、検出部１５０が複数の光学系１１０の少なくとも１つが遮られたと判定した場合、検出部１５０は異常を検出したことを制御部１６０に通知する。
【００３４】
制御部１６０は、異常検出の通知に応じて、警告部１７０より撮影者に警告を与える（Ｓ３４０）。ここで警告部１７０は、警告として音声を発してよく、これに代えて振動等で撮影者に警告を与えてよい。また、警告部１７０は、表示部１８０に文字または画像等を表示して、撮影者に警告を与えてよい。
【００３５】
警告部１７０は、複数の光学系１１０の少なくとも１つが遮られた場合に、遮られた光学系１１０により取り込まれた光に応じた画像を表示部１８０に表示させてよい（Ｓ３５０）。これによって、警告部１７０は、撮影者に異常を検出した画像を異常検出後直ちに確認させることができる。
【００３６】
ここで、撮像装置１００は、複数の光学系１１０として、右眼に対応する視点に設けられた右眼用の光学系１１０および左眼に対応する視点に設けられた左眼用の光学系１１０を備え、撮像部１２０は、右眼用の光学系１１０により取り込まれた光に応じた右眼用画像および左眼用の光学系１１０により取り込まれた光に応じた左眼用画像を撮像し、表示部１８０は、右眼用画像および左眼用画像に応じた立体画像を表示してよい。警告部１７０は、右眼用の光学系１１０および左眼用の光学系１１０の何れか一方が遮られた場合に、立体画像に代えて遮られた光学系１１０により取り込まれた光に応じた画像を表示部１８０に表示させてよい。
【００３７】
これによって、撮像装置１００は、異常を検出していない状態では立体画像を表示して、異常を検出した場合に指等で光学系を遮ったと判断された画像を表示することができる。以上の本実施形態に係る撮像装置１００の動作フローにおいて、センサ１４０は、撮像前の段階で光学系１１０が遮られたか否かを判定することを説明したが、これに代えて、撮像後の段階で判定してよく、あるいは撮像前後の両方の段階で判定してもよい。
【００３８】
また、検出部１５０は、撮像後の段階で光学系１１０が遮られたか否かを判定することを説明したが、これに代えて、撮像前の段階で判定してよく、あるいは撮像前後の両方の段階で判定してもよい。以上の本実施形態に係る撮像装置１００によれば、撮影者が立体画像を撮像中に、１つの光学レンズの前に撮影者の指等が被写体を遮っても、撮影者に警告を与えることができ、立体画像撮像の失敗を防ぐことができる。
【００３９】
以上の実施例において、撮像装置１００は、撮影者が立体画像を撮像中に、１つの光学レンズの前に撮影者の指等が被写体を遮った場合、撮影者に警告を与えることを説明した。これに加えて、撮像装置１００は、複数の光学系のうち、遮られた光学系の画像を、他の少なくとも１つの光学系により取り込まれた画像に基づいて補正する補正部を備えてよい。
【００４０】
撮像装置１００は、撮影者の指等が被写体を遮った場合に、撮像された画像のうち、不具合が生じている画像と不具合が生じていない画像とを判別できる。補正部は、判別した画像の情報に基づき、不具合の生じていない２Ｄ画像を３Ｄ変換することで、不具合が生じている画像の不具合部分を補正する。ここで、撮像装置１００は、ピント合わせのために撮像装置１００と被写体２００との間の距離を把握する場合、この距離を３Ｄ変換時に利用してよい。また、補正部は、不具合の生じている画像のうち被写体を遮っていない領域と、不具合の生じていない画像の２つの２Ｄ画像から３Ｄ変換することで、不具合の生じている画像のうち被写体を遮っている領域の画像を作成して補正してよい。
【００４１】
以上、本発明を実施の形態を用いて説明したが、本発明の技術的範囲は上記実施の形態に記載の範囲には限定されない。上記実施の形態に、多様な変更または改良を加えることが可能であることが当業者に明らかである。その様な変更または改良を加えた形態も本発明の技術的範囲に含まれ得ることが、特許請求の範囲の記載から明らかである。
【００４２】
特許請求の範囲、明細書、および図面中において示した装置、システム、プログラム、および方法における動作、手順、ステップ、および段階等の各処理の実行順序は、特段「より前に」、「先立って」等と明示しておらず、また、前の処理の出力を後の処理で用いるのでない限り、任意の順序で実現しうることに留意すべきである。特許請求の範囲、明細書、および図面中の動作フローに関して、便宜上「まず、」、「次に、」等を用いて説明したとしても、この順で実施することが必須であることを意味するものではない。
【符号の説明】
【００４３】
１００  撮像装置、１１０  光学系、１２０  撮像部、１３０  記憶部、１４０  センサ、１５０  検出部、１６０  制御部、１７０  警告部、１８０  表示部、２００  被写体、２１０  撮像位置、２１２  第１撮像位置、２１４  第２撮像位置、２２０  第１画像、２３０  第２画像、２４０  第１画像、２５０  影状の領域
【図１】
2011160223.tif 000003
【図２】
2011160223.tif 000004
【図３】
2011160223.tif 000005