(57)【特許請求の範囲】
【請求項１】
被写体を撮像して撮像画像を得る撮像部と、
前記撮像画像における輝度または色の違いに基づいて、前記撮像画像から画像提示装置によって提示された提示画像の検出を行う提示画像検出部と、
前記提示画像の検出結果が予め設定されている条件を満たすとき、撮像モードを提示画像撮像モードに切り換えて、少なくとも露出制御に用いる検波値を算出するための検波領域の変更および前記撮像画像における前記提示画像と前記提示画像を除く他の画像の領域に対する領域毎のホワイトバランス調整および前記撮像画像における前記提示画像と前記他の画像の領域に対する領域毎のガンマ補正のいずれかを行わせる制御部と
を有する撮像装置。
【請求項２】
前記提示画像検出部は、第１の提示画像検出と該第１よりも高精度に前記提示画像を検出する第２の提示画像検出を行い、
前記制御部は、前記第１の提示画像検出で得られた検出結果に基づいて前記撮像モードの切り換えと前記検波領域の変更を行い、前記第２の提示画像検出で得られた検出結果に基づいて前記領域毎のホワイトバランス調整とガンマ補正を行わせる、請求項１記載の撮像装置。
【請求項３】
前記制御部は、前記提示画像の検出結果が前記予め設定されている条件を満たさなくなったとき、前記提示画像撮像モードを終了させる、請求項２記載の撮像装置。
【請求項４】
前記撮像画像から顔画像を検出する顔画像検出部を備え、
前記制御部は、前記顔画像検出部で検出された顔画像の位置が前記撮像画像の中央部であるとき、前記提示画像撮像モードを終了させる、請求項３記載の撮像装置。
【請求項５】
前記提示画像検出部で検出された提示画像の領域を識別可能として前記撮像画像を表示する表示部を備え、
前記制御部は、前記表示された撮像画像において、前記提示画像の領域を指示するユーザ操作が行われたとき、前記提示画像の検出結果が予め設定されている条件を満たすものとして、前記撮像モードを提示画像撮像モードに切り換える、請求項２記載の撮像装置。
【請求項６】
前記制御部は、前記表示された撮像画像において、前記他の画像の領域を指示するユーザ操作が行われたとき、前記提示画像の検出結果が予め設定されている条件を満たさないものとして、前記提示画像撮像モードを終了させる、請求項５記載の撮像装置。
【請求項７】
被写体を撮像部によって撮像して撮像画像を得る撮像工程と、
前記撮像画像における輝度または色の違いに基づいて、前記撮像画像から画像提示装置によって提示された提示画像の検出を行う提示画像検出工程と、
前記提示画像の検出結果が予め設定されている条件を満たすとき、撮像モードを提示画像撮像モードに切り換えて、少なくとも露出制御に用いる検波値を算出するための検波領域の変更および前記撮像画像における前記提示画像と前記提示画像を除く他の画像の領域に対する領域毎のホワイトバランス調整および前記撮像画像における前記提示画像と前記他の画像の領域に対する領域毎のガンマ補正のいずれかを行わせる制御工程と
を有する撮像方法。
【発明の詳細な説明】
【技術分野】
【０００１】
この発明は、撮像装置と撮像方法に関する。詳しくは、撮像画像から提示装置によって提示された提示画像の検出を行い、提示画像の検出結果が予め設定されている条件を満たすとき、撮像モードを提示画像撮像モードに切り換えることで、提示画像の撮像が行われるとき容易に最適な撮像画像を得られるようにするものである。
【背景技術】
【０００２】
近年、コンピュータ装置をプロジェクタに接続して、スクリーンに資料や画像を投射してプレゼンテーションを行うことが頻繁に行われるようになってきている。それに伴い、ビデオカメラ等の撮像装置を用いてその様子を撮像する機会も増えている。撮像の目的には、セミナーやミーティングなどの内容を議事録として保存しておく用途や、会議の参加者がそれぞれ遠く離れた場所で互いにスクリーンを撮像する中継会議などが挙げられる。さらに、スクリーンに投影された画像だけでなく、コンピュータ装置のモニタやテレビジョン装置の表示画面を撮像することもよく行われている。
【０００３】
ここで、例えばプレゼンテーション（以下、プレゼン）を撮像するとき、周囲が暗いとストロボ発光が行われて周囲に迷惑をかけてしまう場合がある。このような問題を解決するため、特許文献１の発明では、プレゼンテーション（以下、プレゼン）を撮像するときの撮像モードを設けて、プレゼンを撮像する際に手動で撮像モードを切り換えることが開示されている。このプレゼンを撮像するときの撮像モードでは、周囲に迷惑がかからないように、ストロボ発光やシャッタ音を禁止したり、ストロボ発光を禁止したことによりシャッタ速度が遅くなっても手ぶれを生じないようにＩＳＯ感度を高く設定することが行われている。
【０００４】
【特許文献１】特開２００７−１９５０２９号公報
【発明の開示】
【発明が解決しようとする課題】
【０００５】
ところで、従来の撮像装置でスクリーンに投影された画像や表示画面等（以下「提示画像」という）を撮像すると、撮像画像における提示画像とその他の画像（以下「背景画像」という）との明るさや色の違いによって、最適な撮像画像を得ることができない場合が生じてしまう。例えば、撮像画像における提示画像の領域で白とびを生じたり、ホワイトバランス調整が正しく行われず変色を生じてしまう場合がある。しかし、撮像モードを切り換えてストロボ発光を禁止したりＩＳＯ感度を高くするだけでは、白とびや変色等を防止することができない。さらに、撮影モードの切り換えはユーザが手動で行うものとしているので、プレゼンを撮像して動画である撮像画像を得る場合、提示画像を中心とする撮像動作と発表者を中心とする撮像動作を連続して行うとき、撮像モードの切り換えをその都度行わなければならないことから操作が非常に煩雑なものとなってしまう。
【０００６】
そこで、この発明では、容易に最適な撮像画像を得ることができる撮像装置と撮像方法を提供するものである。
【課題を解決するための手段】
【０００７】
この発明の概念は、撮像画像から提示装置によって提示された提示画像、例えばプロジェクタによってスクリーンに投影された画像等の検出を行い、提示画像を検出したとき、提示画像の白とびや、ホワイトバランス調整が正しく行われず提示画像が変色を生じてしまうことのないように、撮像モードを自動的に切り換えるものである。
【０００８】
この発明に係る撮像装置は、被写体を撮像して撮像画像を得る撮像部と、前記撮像画像における輝度または色の違いに基づいて、前記撮像画像から画像提示装置によって提示された提示画像の検出を行う提示画像検出部と、前記提示画像の検出結果が予め設定されている条件を満たすとき、撮像モードを提示画像撮像モードに切り換えて、少なくとも露出制御に用いる検波値を算出するための検波領域の変更および前記撮像画像における前記提示画像と前記提示画像を除く他の画像の領域に対する領域毎のホワイトバランス調整および前記撮像画像における前記提示画像と前記他の画像の領域に対する領域毎のガンマ補正のいずれかを行わせる制御部とを有するものである。
【０００９】
また、この発明に係る撮像方法は、被写体を撮像部によって撮像して撮像画像を得る撮像工程と、前記撮像画像における輝度または色の違いに基づいて、前記撮像画像から画像提示装置によって提示された提示画像の検出を行う提示画像検出工程と、前記提示画像の検出結果が予め設定されている条件を満たすとき、撮像モードを提示画像撮像モードに切り換えて、少なくとも露出制御に用いる検波値を算出するための検波領域の変更および前記撮像画像における前記提示画像と前記提示画像を除く他の画像の領域に対する領域毎のホワイトバランス調整および前記撮像画像における前記提示画像と前記他の画像の領域に対する領域毎のガンマ補正のいずれかを行わせる制御工程とを有するものである。
【００１０】
この発明においては、撮像装置から提示画像を検出する処理が行われて、提示画像の検出結果が予め設定されている条件を満たすとき、例えば第１の提示画像検出と第１よりも高精度に提示画像を検出する第２の提示画像検出が行われて、第１の提示画像検出が予め設定されている条件を満たすとき、撮像モードが提示画像撮像モードに切り換えられる。また、検波領域の変更が行われる。撮像モードが提示画像撮像モードに切り換えられたときには、第２の提示画像検出で得られた検出結果に基づいて、領域毎のホワイトバランス調整やガンマ補正が行われる。さらに、検出結果が予め設定されている条件を満たさなくなったときや、撮像画像の中央部に顔画像が検出されたとき提示画像撮像モードが終了される。
【発明の効果】
【００１１】
この発明によれば、撮像画像から提示装置によって提示された提示画像を検出する処理が行われて、この検出結果が予め設定されている条件を満たすとき、撮像モードが提示画像撮像モードに切り換えられて、少なくとも露出制御に用いる検波値を算出するための検波領域の変更および前記撮像画像における前記提示画像と他の画像の領域に対する領域毎のホワイトバランス調整および前記撮像画像における前記提示画像と他の画像の領域に対する領域毎のガンマ補正のいずれかが行われる。このため、提示画像の撮像が行われるとき容易に最適な撮像画像を得ることができる。
【発明を実施するための最良の形態】
【００１２】
以下、図を参照しながら、この発明の実施の一形態について説明する。図１は、撮像装置の構成を示している。被写体光は、レンズ部１１と絞り機構１２を介して撮像部２１の撮像素子２１１例えばＣＣＤ（Charge Coupled Device）イメージセンサやＣＭＯＳ（Complementary Metal Oxide Semiconductor）イメージセンサに入射される。
【００１３】
撮像素子２１１は、受光面に結像された被写体像の撮像光を、画素毎に電気信号に変換して三原色の画像信号を生成する。また、生成した画像信号をＣＤＳ（Correlated Double Sampling circuit）部２１２に供給する。
【００１４】
ＣＤＳ部２１２は、撮像素子から供給された画像信号のノイズ除去を行い、ノイズ除去後の画像信号を増幅部２１３に供給する。増幅部２１３は、ＣＤＳ部２１２から供給された画像信号のゲイン調整を行い、ゲイン調整後の画像信号ＳａをＡ／Ｄ（Analog / Digital）変換部２３に供給する。
【００１５】
タイミング信号発生部２２は、撮像素子２１１で画像信号を生成するための駆動信号ＴＤを生成して撮像素子２１１に供給する。また、タイミング信号発生部２２は、駆動信号ＴＤによって、撮像素子２１１における露光時間（光電変換によって得られた有効電荷の蓄積時間）を制御する。
【００１６】
Ａ／Ｄ変換部２３は、アナログの画像信号Ｓａをディジタルの画像信号ＤＶａに変換して、提示画像検出部３１と検波部３２および画像処理部３５に供給する。
【００１７】
提示画像検出部３１は、画像信号ＤＶａに基づく撮像画像から提示画像を検出する処理を行い、検出結果を示す検出信号ＪＡを生成して制御部５１に供給する。
【００１８】
図２は提示画像検出部３１の構成を示している。提示画像検出部３１の変換処理部３１１は、三原色の画像信号ＤＶａを輝度信号ＤＹと色差信号ＤＣに変換して、輝度信号ＤＹを２値化処理部３１２、色差信号ＤＣを２値化処理部３１３に供給する。
【００１９】
２値化処理部３１２は、輝度信号ＤＹを２値化する処理を行い、得られた輝度２値化信号ＢＹを信号選択部３１４に供給する。また、２値化処理部３１３は、色差信号ＤＣを２値化する処理を行い、得られた色差２値化信号ＢＣを信号選択部３１４に供給する。２値化処理部３１２は、輝度信号ＤＹと閾値を比較することで輝度信号ＤＹの２値化を行い、輝度２値化信号ＢＹを生成する。２値化処理部３１３は、色差信号ＤＣと閾値を比較することで色差信号ＤＣの２値化を行い、色差２値化信号ＢＣを生成する。また、２値化処理部３１２，３１３は、予め固定したレベルに閾値を設定しておくものとしてもよく、撮像画像から提示画像を精度よく検出できるように、撮像画像に応じて閾値を設定するものとしてもよい。
【００２０】
信号選択部３１４は、輝度２値化信号ＢＹまたは色差２値化信号ＢＣを選択して、選択した２値化信号を水平分布取得部３１５と垂直分布取得部３１６に供給する。
【００２１】
水平分布取得部３１５は、２値化信号が輝度２値化信号ＢＹであるとき、ライン毎に輝度２値化信号ＢＹの信号レベルが閾値よりも高い画素をカウントすることで水平方向の分布を求めて、この分布を示す水平分布信号ＤＳｈを検出処理部３１７に供給する。また、水平分布取得部３１５は、２値化信号が色差２値化信号ＢＣであるとき、ライン毎に色差２値化信号ＢＣの信号レベルが閾値よりも高い画素をカウントすることで水平方向の分布を求めて、この分布を示す水平分布信号ＤＳｈを検出処理部３１７に供給する。
【００２２】
垂直分布取得部３１６は、２値化信号が輝度２値化信号ＢＹであるとき、垂直方向に輝度２値化信号ＢＹの信号レベルが閾値よりも高い画素をカウントして、上述の水平方向と直交する垂直方向の分布を求めて、この分布を示す垂直分布信号ＤＳｖを検出処理部３１７に供給する。また、垂直分布取得部３１６は、２値化信号が色差２値化信号ＢＣであるとき、色差２値化信号ＢＣの信号レベルが閾値よりも高い画素をカウントして垂直方向の分布を求めて、この分布を示す垂直分布信号ＤＳｖを検出処理部３１７に供給する。
【００２３】
検出処理部３１７は、水平分布取得部３１５から供給された水平分布信号ＤＳｈに基づき上辺と下辺を検出する処理と、垂直分布取得部３１６から供給された垂直分布信号ＤＳｖに基づき左辺と右辺を検出する処理を行う。さらに、検出処理部３１７は、検出された上辺，下辺，左辺および右辺が提示画像の各辺に相当するものであることを判別したとき、検出された上辺，下辺，左辺および右辺で囲まれる画像を提示画像と判定して、この提示画像の位置または提示画像が検出されたことを示す検出信号ＪＡを生成して制御部５１に供給する。
【００２４】
また、検出処理部３１７は、制御信号ＣＮによって信号選択部３１４の信号選択動作の制御を行い、最初に輝度２値化信号ＢＹを選択させて、輝度２値化信号ＢＹから提示画像を検出できないときは、信号選択部３１４で色差２値化信号ＢＣを選択させることで、輝度２値化信号ＢＹだけでなく色差２値化信号ＢＣから提示画像を検出する処理を行う。
【００２５】
検波部３２は、供給された画像信号ＤＶａから撮像画像の明るさを示す検波信号ＪＢを生成して制御部５１に供給する。検波部３２は、例えば撮像画像をｍ×ｎ個のブロックに分割し、それぞれのブロックにおける各画素の明るさを示す信号の総和を算出する。さらに、検波部３２は、算出した総和に対してブロック毎に重み付けを行い、重み付け後の総和の加算値を検波値として、この検波値を示す検波信号ＪＢを制御部５１に供給する。また、検波部３２は、制御部５１からの制御信号ＣＴｅに基づき検波領域を変更する。すなわち、重み付けが「０」されたブロックは検波値の算出に用いられず、重み付けを高くされたブロックは、検波値に寄与する割合が高くなる。したがって、重み付けを切り換えることによって検波領域を変更する。
【００２６】
図３は検波部３２の構成を示している。検波部３２のブロック化処理部３２１は、撮像画像をｍ×ｎ個のブロックに分割する処理を行い、画像信号ＤＶａをブロック毎の画像信号ＤＢＶとしてブロック別輝度算出部３２２に供給する。
【００２７】
ブロック別輝度算出部３２２は、画像信号ＤＢＶに基づきブロック内の各画素の輝度を総和したブロック別輝度値信号ＢＴをブロック毎に生成して乗算器３２４に供給する。
【００２８】
重み係数設定部３２３は、制御部５１から供給された制御信号ＣＴｅに基づき、ブロックのそれぞれに対して重み係数Ｗを設定して、設定した重み係数Ｗを乗算器３２４に供給する。
【００２９】
乗算器３２４は、ブロック別輝度算出部３２２から供給されたブロック別輝度値信号ＢＴに対して重み係数設定部３２３で設定された重み係数Ｗを乗算して、検波値算出部３２５に供給する。
【００３０】
検波値算出部３２５は、ブロック別輝度値信号ＢＴと重み係数Ｗの乗算結果を撮像画像内で加算して、加算結果を検波信号ＪＢとして制御部５１に供給する。また、検波値算出部３２５は、撮像画像毎に検波信号ＪＢの生成を行う。
【００３１】
画像処理部３５は、Ａ／Ｄ変換部２３から供給された画像信号ＤＶａに対して種々の画像処理を行う。例えばホワイトバランス（ＷＢ）調整部３５１では、撮像画像における白色の被写体が正しく白色として表示されるように、ホワイトバランス調整を行う。またホワイトバランス調整部３５１は、検出信号ＪＡによって撮像画像を提示画像の領域とその他の画像（以下「背景画像」という）の領域に区分できるとき、検出信号ＪＡに基づき、撮像画像における提示画像に対応したホワイトバランス調整と、背景画像の領域に対応したホワイトバランス調整を領域毎に行う。また、画像処理部３５は、ホワイトバランス調整後の画像信号に対してガンマ補正を行う。例えばガンマ補正部３５２は、提示画像検出部３１からの検出信号ＪＡによって撮像画像を提示画像の領域と背景画像の領域に区分できるとき、提示画像の領域に対しては白とびが生じないようにガンマ補正を行い、背景画像の領域に対しては黒つぶれが生じないようにガンマ補正を行う。
【００３２】
図４は、ホワイトバランス調整部３５１の構成を示している。ホワイトバランス検波部３５１ａは、画像信号ＤＶａから無彩色領域内の画像信号を抽出して、検波信号ＪＣとしてホワイトバランス補正係数設定部３５１ｂに供給する。また、ホワイトバランス検波部３５１ａは、検出信号ＪＡに基づき、提示画像の領域と背景画像の領域とで無彩色領域を切り換える。
【００３３】
ホワイトバランス補正係数設定部３５１ｂは、ホワイトバランス検波部３５１ａから供給された検波信号ＪＣからホワイトバランス補正係数Ｋを決定して補正処理部３５１ｃに供給する。
【００３４】
補正処理部３５１ｃは、画像信号ＤＶａに対してホワイトバランス補正係数Ｋを乗算することでホワイトバランス調整を行い、ホワイトバランス調整後の画像信号ＤＶｂを図１に示すガンマ補正部３５２に供給する。
【００３５】
さらに、画像処理部３５は、例えばホワイトバランス調整やガンマ補正等が行われた三原色の画像信号を、静止画像または動画像の画像符号化技術に応じた画像信号例えば輝度信号や色差信号等に変換して圧縮伸長処理を行い、得られた静止画像または動画像の圧縮符号化信号ＧＤａを記録再生部３７出力する。さらに、圧縮伸長処理が行われていない静止画像や動画像の画像信号および／または圧縮符号化信号を外部機器（図示せず）に出力する処理を行う。画像処理部３５は、圧縮符号化信号ＧＤｂが記録再生部３７から供給されたとき、圧縮符号化信号ＧＤｂを圧縮符号化処理前の画像信号に戻す処理を行う。さらに、画像処理部３５は、画像信号ＤＶａから表示画像信号ＨＧを生成して表示部３８に供給する。また、画像処理部３５は、制御部５１から供給された表示信号ＨＥに基づき、提示画像撮像モードに設定されたことを示す情報等がオンスクリーン表示されている表示画像信号ＨＧの生成等も行う。
【００３６】
記録再生部３７は、画像処理部３５から供給された圧縮符号化信号ＧＤａを、記録媒体例えば半導体メモリや光ディスクあるいは磁気テープ等の記録媒体に記録する。また、記録媒体に記録されている圧縮符号化信号ＧＤｂを読み出して画像処理部３５に供給する。
【００３７】
表示部３８は、例えば液晶表示素子等を用いて構成されており、画像処理部３５から供給された表示画像信号ＨＧに基づいて画像表示を行う。
【００３８】
レンズ駆動部４１は、撮像素子２１１の受光面に被写体像が焦点の合った状態で結像されるようにレンズ部１１のフォーカスレンズ(図示せず）を駆動する。また、撮像素子２１１の受光面に結像される被写体像の大きさが所望の大きさとなるようにレンズ部１１のズームレンズ(図示せず）を駆動する。
【００３９】
絞り駆動部４２は、絞り機構１２を駆動して、撮像素子２１１の受光面に結像される被写体像の光量を調整する。
【００４０】
ストロボ４５は、所望の明るさの撮像画像が得られるように、ストロボ光の照射を行う。また、顔検出部４６は、画像信号ＤＶaを用いて顔検出を行い顔検出信号ＦＥを制御部５１に供給する。
【００４１】
制御部５１には、ユーザインタフェース部５２や動き検出部５３が接続されている。ユーザインタフェース部５２は、操作キーや外部からの遠隔操作信号を入力するためのインタフェース等で構成されており、ユーザ操作に応じた操作信号ＰＳを生成して制御部５１に供給する。動き検出部５３は、撮像装置１０の動きによって生じる撮像画像の移動を検出するためのものであり、例えば加速度センサやジャイロセンサ等を用いて構成されている。動き検出部５３は、撮像装置１０の動きを検出して、動き検出結果を示すセンサ信号ＳＳを制御部５１に供給する。
【００４２】
制御部５１は、ＣＰＵ（Central Processing Unit）５１１や、ＲＯＭ（Read Only Memory）５１２、ＲＡＭ（Random Access Memory）５１３等で構成されている。ＣＰＵ５１１は、ＲＯＭ５１２に格納されているプログラムを実行して、操作信号ＰＳに応じた制御信号を生成して各部に供給することで、撮像装置の動作がユーザ操作に応じて動作となるように制御する。なお、ＲＡＭは、種々の制御を行う際に情報を一時記憶しておくためのワーキングエリア等として用いられる。
【００４３】
また、制御部５１は、検波部３２から供給された検波信号ＪＢによって示された検波値が予め設定されている基準値となるように制御信号を生成して制御信号を生成して露出調整部に供給することで、撮像画像における所望の被写体を最適な明るさとする。露出調整部は、少なくとも撮像部２１に入射する光量と撮像部２１から出力する画像信号Ｓａのゲインと撮像部２１で画像信号Ｓａを得る際の露光時間のいずれかを調整するものであり、絞り機構１２と絞り駆動部４２、タイミング信号発生部２２、増幅部２１３が露出調整部に相当する。例えば、制御部５１は、検波信号ＪＢに基づき制御信号ＣＴｂを生成して絞り駆動部４２に供給することで、撮像画像における所望の被写体が最適な明るさとなるように撮像部２１に入射する光量を調整する。また、制御部５１は、検波信号ＪＢに基づき制御信号ＣＴｃを生成してタイミング信号発生部２２に供給することで、撮像画像における所望の被写体が最適な明るさとなるように露光時間を調整する。また、制御部５１は、検波信号ＪＢに基づき制御信号ＣＴｄを生成して増幅部２１３に供給することで、撮像画像における所望の被写体が最適な明るさとなるように画像信号Ｓａのゲインを調整する。
【００４４】
また、制御部５１は、動き検出部５３からのセンサ信号ＳＳに応じて提示画像の検出動作の制御や、提示画像検出部３１から供給された検出信号ＪＡに基づき、提示画像が検出されたことを判別したとき、撮像画像における提示画像等を最適な画像とする提示画像撮像モードに切り換える処理を行う。また、制御部５１は、顔検出信号ＦＥに基づいた撮像モードの切り換え処理を行う。さらに、制御部５１は、どのような撮像モードに設定されているかを制御信号ＣＴｅによって検波部３２と画像処理部３５に通知する。また、制御部５１は、ユーザによって提示画像の領域の指示が行われたとき、この指示された領域を示す情報を制御信号ＣＴｆとして提示画像検出部３１に供給する。
【００４５】
ここで、制御部５１によって提示画像撮像モードに設定されたとき、検波部３２は、撮像画像における提示画像が最適な明るさとなるように検波領域の切り換えを行う。画像処理部３５は、提示画像と背景画像の色再現をそれぞれ正しくするホワイトバランス調整や、提示画像に対しては白とびが生じないようにガンマ補正を行い、背景画像と判別された画像に対しては黒つぶれが生じないようにガンマ補正を行う。
【００４６】
なお、制御部５１は、制御信号ＣＴａを生成してレンズ駆動部４１に供給して、撮像素子２１１の受光面に被写体像が焦点の合った状態で結像されるようにフォーカスレンズを駆動させる処理や、所望の画角の撮像画像を得ることができるようにズームレンズを駆動させる処理等を行わせる。また、制御部５１は、制御信号ＣＴｈを生成してストロボ４５に供給して、ストロボ発光の制御を行う。
【００４７】
次に、撮像装置の動作について図５のフローチャートを用いて説明する。ステップＳＴ１で制御部５１は、提示画像検出部３１で提示画像検出を行わせる。
【００４８】
図６は、提示画像検出動作を示すフローチャートである。ステップＳＴ１０１で提示画像検出部３１は変換処理を行う。提示画像検出部３１は、三原色の画像信号ＤＶａから輝度信号ＤＹと色差信号ＤＣを生成してステップＳＴ１０２に進む。
【００４９】
ステップＳＴ１０２で提示画像検出部３１は２値化処理を行う。提示画像検出部３１は、輝度信号ＤＹと色差信号ＤＣを２値化して、輝度２値化信号と色差２値化信号を生成してステップＳＴ１０３に進む。
【００５０】
２値化処理では、上述のように、輝度信号ＤＹや色差信号ＤＣと閾値を比較することで輝度信号ＤＹや色差信号ＤＣの２値化を行い、輝度２値化信号ＢＹや色差２値化信号ＢＣを生成する。２値化処理に用いる閾値は、予め固定したレベルに設定しておくものとしてもよく、撮像画像から提示画像を精度よく検出できるように、撮像画像に応じて閾値を設定するものとしてもよい。
【００５１】
ここで、撮像画像に応じて閾値を設定する場合、例えば統計的手法を用いて閾値の設定を行う。統計的手法としてはモード法や判別分析法等を用いるものとする。モード法は、撮像画像の輝度レベルのヒストグラムが双峰性を有しており、提示画像の部分と他の画像（以下「背景画像」という）の部分が区分されるとき、谷の位置を閾値として設定する方法である。また、判別分析法は、ヒストグラムを輝度レベルに応じて２つに区分してグループ分けを行い、このグループ間の分散が最大となる区分レベルを閾値として設定する方法である。
【００５２】
ステップＳＴ１０３で提示画像検出部３１は、輝度２値化信号ＢＹを選択してステップＳＴ１０４に進む。
【００５３】
ステップＳＴ１０４で提示画像検出部３１は、水平分布を取得してステップＳＴ１０５に進む。また、ステップＳＴ１０５で提示画像検出部３１は、垂直分布を取得してステップＳＴ１０６に進む。
【００５４】
図７は、水平分布と垂直分布の取得処理を示している。図７の（Ａ）は撮像画像を示しており、図７の（Ｂ）は２値化処理後の撮像画像を示している。提示画像検出部３１は、ライン毎に輝度信号ＤＹの信号レベルが閾値よりも高い画素をカウントすることで、図７の（Ｃ）に示す水平分布を得る。また、垂直方向に輝度信号ＤＹの信号レベルが閾値よりも高い画素をカウントすることで、図７の（Ｄ）に示すように、上述の水平方向と直交する垂直方向の分布を得る。
【００５５】
ステップＳＴ１０６で提示画像検出部３１は、提示画像の上辺と下辺の検出処理を行ってステップＳＴ１０７に進む。
【００５６】
図８，図９は、提示画像の上辺と下辺の検出処理を示している。図８の（Ａ）は２値化処理後の撮像画像を示しており、図８の（Ｂ）はステップＳＴ１０４で取得した水平分布を示している。ここで、提示画像検出部３１は、水平分布を複数領域に区分して、領域毎に対象画素の総和を求める。例えば領域ＲＥｈ１，ＲＥｈ２，ＲＥｈ３，ＲＥｈ４，ＲＥｈ５に区分して、領域毎に対象画素の総和を求める。次に、提示画像検出部３１は、撮像画像の上端から下端方向に順次領域を選択して、選択した領域における対象画素の総和と閾値を比較して、総和が閾値を超える領域を検出する。このような処理を行うことで、提示画像の上辺を含む領域を検出することが可能となる。同様に、提示画像検出部３１は、撮像画像の下端から上端方向に順次領域を選択して、選択した領域における対象画素の総和と閾値を比較して、総和が閾値を超える領域を検出する。このような処理を行うことで、提示画像の下辺を含む領域を検出することが可能となる。
【００５７】
ところで、提示画像の辺が領域の境界に近接していると、領域内の対象画素の総和が大きく異なり、提示画像の辺を含む領域の検出が困難となる場合がある。例えば、提示画像の上辺が領域ＲＥｈ（ｎ）内であって領域ＲＥｈ（ｎ＋１）に近接していると、領域内の対象画素の総和が大きな値とならない。ここで、総和が閾値を超える領域の検出が行われると、提示画像の上辺は領域ＲＥｈ（ｎ＋１）に含まれると誤って判断されてしまうおそれがある。したがって、水平分布を複数領域に区分する際に、他の領域と重なる部分を有するように領域を設ける。例えば領域ＲＥｈ１〜ＲＥｈ５，ＲＥｈ１ｓ〜ＲＥｈ４ｓに示すように領域を設ける。この場合、提示画像の上辺が領域ＲＥｈ１と領域ＲＥｈ２の境界付近であって、領域ＲＥｈ１または領域ＲＥｈ２のいずれの位置であっても、領域ＲＥｈ１ｓにおける対象画素の総和は大きく変動することがない。したがって、このときの領域ＲＥｈ１ｓにおける対象画素の総和と閾値を比較したとき、提示画像の上辺が領域ＲＥｈ１ｓに含まれていると判別されるように閾値を設定すれば、提示画像の辺を含む領域を正しく検出することができる。なお、閾値は、予め固定して設けておくものとしてもよく、上述のように統計的手法を用いて各領域における対象画素の総和から閾値を設定するものとしてもよい。
【００５８】
次に、提示画像検出部３１は、検出した提示画像の辺を含む領域例えば上辺を含む領域ＲＥｈ１ｓにおいて、水平分布におけるライン毎の対象画素の総和を撮像画像の上端から下端方向にライン毎に順次用いて閾値と比較して、総和が閾値を超えるラインを提示画像の上辺Ｌａとする。同様に、提示画像検出部３１は、下辺を含む領域ＲＥｈ４ｓにおいて、水平分布におけるライン毎の対象画素の総和を撮像画像の下端から上端方向にライン毎に順次用いて閾値と比較して、総和が閾値を超えるラインを提示画像の下辺Ｌｂとする。図９の（Ａ）は２値化処理後の撮像画像を示しており、図９の（Ｂ）は水平分布を示している。ここで、領域ＲＥｈ１ｓが上辺を含む領域として判別されたとき、領域ＲＥｈ１ｓにおけるライン毎の対象画素の総和を撮像画像の上端から下端方向にライン毎に順次用いて閾値と比較して、総和が閾値を超えるラインを提示画像の上辺Ｌａとする。同様に、領域ＲＥｈ４ｓが下辺を含む領域として判別されたとき、領域ＲＥｈ４ｓにおけるライン毎の対象画素の総和を撮像画像の下端から上端方向にライン毎に順次用いて閾値と比較して、総和が閾値を超えるラインを提示画像の下辺Ｌｂとする。
【００５９】
このように、上辺や下辺を含む領域を検出して、検出した領域から提示画像の上辺や下辺を検出することで、例えばノイズ等によって一つのラインの総和が大きくなってしまっても、このラインが提示画像の上辺と誤って判断されてしまうことを防止できる。
【００６０】
ステップＳＴ１０７で提示画像検出部３１は、提示画像の左辺と右辺の検出処理を行ってステップＳＴ１０８に進む。
【００６１】
図１０，図１１は、提示画像の左辺と右辺の検出処理を示している。図１０の（Ａ）は２値化処理後の撮像画像を示しており、図１０の（Ｂ）はステップＳＴ１０５で取得した垂直分布を示している。ここで、提示画像検出部３１は、垂直分布を複数領域例えば領域ＲＥｖ１〜ＲＥｖ６，ＲＥｖ１ｓ〜ＲＥｖ５ｓに区分して、領域毎に対象画素の総和を求める。次に、提示画像検出部３１は、撮像画像の左端から右端方向に順次領域を選択して、選択した領域における対象画素の総和と閾値を比較して、総和が閾値を超える領域を検出する。このような処理を行うことで、提示画像の左辺を含む領域ＲＥｖ２を検出することが可能となる。同様に、提示画像検出部３１は、撮像画像の右端から左端方向に順次領域を選択して、選択した領域における対象画素の総和と閾値を比較して、総和が閾値を超える領域を検出する。このような処理を行うことで、提示画像の右辺を含む領域ＲＥｖ５を検出することが可能となる。なお、このときの閾値は、予め固定して設けておくものとしてもよく、上述のように統計的手法を用いて各領域における対象画素の総和から閾値を設定するものとしてもよい。
【００６２】
次に、提示画像検出部３１は、検出した領域例えば左辺を含む領域ＲＥｖ２において、垂直分布における画素位置毎の対象画素の総和を撮像画像の左端から右端方向に画素位置毎に順次用いて閾値と比較して、総和が閾値を超える画素位置を提示画像の左辺Ｌｃとする。同様に、提示画像検出部３１は、右辺を含む領域ＲＥｖ５において、垂直分布における画素位置毎の対象画素の総和を撮像画像の右端から左端方向に画素位置毎に順次用いて閾値と比較して、総和が閾値を超える画素位置を提示画像の右辺Ｌｄとする。
【００６３】
図１１の（Ａ）は２値化処理後の撮像画像を示しており、図１１の（Ｂ）は垂直分布を示している。ここで、領域ＲＥｖ２が左辺を含む領域として判別されたとき、領域ＲＥｖ２における画素位置毎の対象画素の総和を撮像画像の左端から右端方向に順次用いて閾値と比較して、総和が閾値を超える画素位置を提示画像の左辺Ｌｃとする。同様に、領域ＲＥｖ５が右辺を含む領域として判別されたとき、領域ＲＥｖ５における画素位置毎の対象画素の総和を撮像画像の右端から左端方向にライン毎に順次用いて閾値と比較して、総和が閾値を超えるラインを提示画像の右辺Ｌｄとする。
【００６４】
ステップＳＴ１０８で提示画像検出部３１は、提示画像であるか否か判別する。提示画像検出部３１は、ステップＳＴ１０６，ＳＴ１０７で検出した上辺と下辺および左辺と右辺からアスペクト比を判別して、このアスペクト比が提示画像のアスペクト比例えばテレビジョン放送で用いられているアスペクト比「４：３」，「１６：９」等に近似しているとき、すなわち、判別したアスペクト比が「４：３±α」，「１６：９±β」であるとき、ステップＳＴ１０６とステップＳＴ１０７で検出した辺によって囲まれる領域を提示画像と判別して提示画像検出処理を終了して図５のステップＳＴ２に進む。なお「α」「β」は、提示画像であると判別するための許容範囲を示す定数であり、予め設定しておくものとする。このように、アスペクト比が所望のアスペクト比に近似しているか否かを判別することで、予め規定されているアスペクト比の提示画像を撮像したとき、撮像画像から提示画像の領域を容易に判別することが可能となる。
【００６５】
また、提示画像検出部３１は、提示画像の上辺と下辺および左辺と右辺を検出できないときや、検出した上辺と下辺および左辺と右辺に基づいて判別したアスペクト比が所望のアスペクト比に近似していないとき、提示画像を検出していないものとしてステップＳＴ１０９に進む。
【００６６】
図１２は、提示画像であるか否かの判別動作を説明するための図である。例えば、図１２の（Ａ）や（Ｂ）に示すように上辺Ｌａと下辺Ｌｂおよび左辺Ｌｃと右辺Ｌｄが検出されて、この検出された上辺，下辺，左辺および右辺で囲まれる画像が、提示画像のアスペクト比に近似していないとき、提示画像でないものと判別してステップＳＴ１０９に進む。
【００６７】
ステップＳＴ１０９で提示画像検出部３１は、提示画像の検出が１度目であるか否かを判別する。提示画像検出部３１は、輝度２値化信号を用いて提示画像の検出を行ったとき、提示画像の検出が１度目であるからステップＳＴ１１０に進む。
【００６８】
ステップＳＴ１１０で提示画像検出部３１は、色差２値化信号を選択してステップＳＴ１０４に戻り、ステップＳＴ１０４からの処理を繰り返す。
【００６９】
提示画像検出部３１は、ステップＳＴ１０４からの処理を繰り返すことで、色差２値化信号に基づいた提示画像の検出を行う。なお、提示画像検出部３１は、提示画像の上辺と下辺および左辺と右辺を検出できないときや、検出した上辺と下辺および左辺と右辺に基づいて判別したアスペクト比が所望のアスペクト比に近似していないとき、ステップＳＴ１０８からステップＳＴ１０９に進む。
【００７０】
このように、輝度２値化信号だけでなく色差２値信号を用いて提示画像の検出を行うものとすれば、例えば提示画像と背景画像との輝度差が少ないため、輝度２値化信号に基づいて提示画像と背景画像を区分することが困難な場合でも、提示画像が背景画像とは異なる色を基調とした画像であるとき、色の違いから提示画像を検出できるようになる。この提示画像は、自然風景に比べ大きな輝度値を持つという特徴と色が濃いという特徴を持っている。ここで、色の濃さはＹＣＣ空間やＬａｂ空間の色空間における色差成分の大きさやＨＳＶ空間における彩度の大きさを用いて表すことができる。したがって、色差成分の強度や彩度の大きさを用いて提示画像の検出を行うものとすれば、輝度差に基づいて提示画像と背景画像の区分が困難な場合でも、提示画像と背景画像を区分することが可能となり、精度よく提示画像を検出できるようになる。
【００７１】
ステップＳＴ１０９で提示画像検出部３１は、提示画像の検出が１度目であるか否かを判別する。提示画像検出部３１は、輝度２値化信号と色差２値化信号を用いて提示画像の検出を行っており、提示画像の検出が１度目でないことから処理を終了して図５のステップＳＴ２に進む。
【００７２】
なお、提示画像の検出は、図６に示す処理に限られるものではない。例えば、撮像画像のエッジ検出を行うことで、提示画像と背景画像の境界を示す輪郭を取得して、この輪郭情報から提示画像の４つの頂点や４つの辺を示す直線を求めて、提示画像を検出するものとしてもよい。
【００７３】
図５のステップＳＴ２で制御部５１は、提示画像撮像モードへの切換条件を満たしているか否かの判別を行う。制御部５１は、提示画像撮像モードへの切換条件を満たしていると判別したときステップＳＴ３に進み、満たしていないと判別したときステップＳＴ５に進む。
【００７４】
制御部５１は、提示画像が検出されたフレームの発生状況に応じて、提示画像撮像モードへの切換条件を満たしているか否か判別する。例えば、制御部５１は、提示画像が検出されたフレームを生ずる毎にカウントアップを行い、提示画像が検出されていないフレームが生ずる毎にカウントダウンを行う。なお、カウント値の範囲は「０」〜「数十程度」に設定する。ここで、カウント値が撮像モード判定のために予め設定されている閾値（以下「モード判定閾値」という）以上となったときにはステップＳＴ３に進み、カウント値がモード判定閾値未満であるときはステップＳＴ５に進む。
【００７５】
また、制御部５１は、提示画像が検出されたフレームの連続数や、提示画像が検出されていないフレームの連続数に基づいて撮像モードの設定を行うものとしてもよい。例えば、提示画像が検出されたフレームの連続数が所定数となったとき、撮像モードを通常撮像モードから提示画像撮像モードに切り換える。また、提示画像が検出されていないフレームの連続数が所定数となったとき、撮像モードを提示画像撮像モードから通常撮像モードに切り換えるものとしてもよい。このようにすれば、提示画像の検出状況に応じた撮像モードの切り換えを安定して行うことができる。
【００７６】
ステップＳＴ３で制御部５１は、提示画像撮像モード通知処理を行いステップＳＴ４に進む。制御部５１は、撮像モードを提示画像撮像モードに設定して、撮像装置が提示画像撮像モードに設定されていることをユーザに通知する。例えば、制御部５１は、提示画像撮像モードに設定されているとき、表示信号ＨＥを生成して画像処理部３５に供給して、画像信号ＤＶａと表示信号ＨＥから表示画像信号ＨＧを生成させることで、表示部３８の画面上に撮像画像と提示画像撮像モードに設定されたことを示す情報を表示させる。なお、図１３は、表示部３８で表示されている撮像画像上に、提示画像撮像モードに設定されたことを示すアイコン表示ＭＨを設けた場合を示している。
【００７７】
ステップＳＴ４で制御部５１は、提示画像撮像モード動作設定を行いステップＳＴ７に進む。例えば、制御部５１は検波部３２を制御して、露出制御を行うときに用いる検波値を算出するための検波領域を、提示画像の影響の少ない位置に切り換える。また、制御部５１は、画像処理部３５のホワイトバランス調整部３５１やガンマ補正部３５２を制御して、提示画像と背景画像の領域毎にホワイトバランス調整やガンマ補正を行わせる。
【００７８】
ステップＳＴ５で制御部５１は、提示画像撮像モードとは異なる撮像モードの通知、例えば通常撮像モード通知処理を行ってステップＳＴ６に進む。制御部５１は、撮像モードを他の撮像モードである例えば通常撮像モードに設定して、撮像装置が通常撮像モードに設定されていることをユーザに通知する。例えば、制御部５１は、提示画像撮像モードに設定されているとき、表示信号ＨＥを画像処理部３５に供給して、提示画像撮像モードに設定されたことを示すアイコン表示ＭＨを行う場合、表示信号ＨＥの供給を停止してアイコン表示ＭＨを消去することで、通常撮像モードに設定されていることをユーザが識別できるようにする。
【００７９】
ステップＳＴ６で制御部５１は、通常撮像モード動作設定を行いステップＳＴ７に進む。例えば、制御部５１は検波部３２を制御して、撮像画像の中央を重視した露出制御を行うように検波領域を切り換える。また、制御部５１は、画像処理部３５のホワイトバランス調整部３５１やガンマ補正部３５２を制御して、提示画像または背景画像のいずれの領域であるかによらず撮像画像毎のホワイトバランス調整やガンマ補正を行わせる。
【００８０】
図１４は、検波部３２の動作を説明するための図である。検波部３２は、撮像画像を図１４の（Ａ）に示すように複数のブロック例えば（ｍ×ｎ）に分割する。また、検波部３２は、撮像モードが提示画像撮像モードとされたとき、提示画像の影響が少なくなるように、撮像画像における端部のブロックの重み付けを図１４の（Ｂ）に示すように高くする。また、検波部３２は、撮像モードが通常撮像モードとされたとき、図１４の（Ｃ）に示すように撮像画像における中央部のブロックの重みが高くなるように重み係数の設定を行う。
【００８１】
撮像モードに応じて重み係数の設定が行われると、検波部３２は、撮像画像に検波領域を設けて、検波領域の画像信号から検波信号ＪＢを生成する。すなわち、検波部３２は、撮像画像をブロックに分割して、ブロックにおける各画素の明るさを示す信号の総和に対して重み係数Ｗの重み付けを行い、重み付け後の総和を加算して検波値Ｖｊｂを算出して、この検波値Ｖｊｂを示す検波信号ＪＢを生成する。
【００８２】
ここで、座標（ａ，ｂ）のブロック内に含まれる画素の輝度信号の総和をＢＴ(a,b)、座標（ａ，ｂ）のブロックに対する重み係数をＷ(a,b)としたとき、検波部３２は、式（１）に基づき検波値Ｖｊｂを生成する。
【００８３】
【数１】
0004479819.tif 000002
【００８４】
なお、重み係数の総和を１に正規化することで、正規化された検波値Ｖｊｂを得ることができる。
【００８５】
制御部５１は、検波部３２で生成された検波信号ＪＢに基づき露出制御を行う。すなわち、制御部５１は、少なくとも制御信号ＣＴｂ，ＣＴｃ，ＣＴｄのいずれかを生成して、生成した制御信号ＣＴｂを絞り駆動部４２、制御信号ＣＴｃをタイミング信号発生部２２、制御信号ＣＴｄを増幅部２１３に供給して、適正露出となるように絞り機構１２の絞り設定やタイミング信号発生部２２による露光時間の調整、増幅部２１３による画像信号Ｓａのゲイン調整を行う。
【００８６】
図１５は、ホワイトバランス検波を行って得られた無彩色の位置と無彩色の定義範囲（以下「無彩色領域」という）を示している。ここで、ホワイトバランス検波を行うことにより得られた検波信号から検出した（Ｒ／Ｇ）−（Ｂ／Ｇ）平面上における提示画像の無彩色が位置ＡＣｐａとなり、背景画像の無彩色が位置ＡＣｐｂとなったとき、ホワイトバランス調整部３５１は、撮像モードが提示画像撮像モードとされた場合、提示画像の無彩色の位置ＡＣｐａからホワイトバランス補正係数を求めて、このホワイトバランス補正係数を用いて提示画像の領域に対してホワイトバランス調整を行う。また、背景画像の無彩色の位置ＡＣｐｂからホワイトバランス補正係数を求めて、このホワイトバランス補正係数を用いて背景画像の領域に対してホワイトバランス調整を行う。なお、図１５において、領域ＡＣＳは一般的な光源（例えば太陽光や白熱灯）下で撮像した画像における無彩色領域、領域ＡＣＲはスクリーンに投影された画像から実験的に得た無彩色領域を示している。
【００８７】
ホワイトバランス調整部３５１は、撮像モードが通常撮像モードとされたとき、撮像画像から領域ＡＣＳに含まれる無彩色の位置を検出して、この検出した無彩色の位置からホワイトバランス補正係数を求めて、このホワイトバランス補正係数を用いて撮像画像のホワイトバランス調整を行う。すなわち、撮像モードが通常撮像モードとされたとき、ホワイトバランス調整部３５１は、提示画像の領域と背景画像の領域とで区別することなくホワイトバランス調整を行う。
【００８８】
図１６は、ガンマ補正部３５２の補正特性を示している。ガンマ補正部３５２は、撮像モードが通常撮像モードとされたとき、図１６の（Ａ）に示すように、通常撮像モードで用いるガンマカーブＣＢａに比べて高輝度部分の輝度レベルを圧縮するように補正された特性のガンマカーブＣＢｂを用いて提示画像の領域に対するガンマ補正を行う。また、ガンマ補正部３５２は、図１６の（Ｂ）に示すように、通常のガンマカーブＣＢａに比べて低輝度部分の輝度レベルを伸長するように補正された特性のガンマカーブＣＢｃを用いて背景画像の領域に対するガンマ補正を行う。さらに、ガンマ補正部３５２は、撮像モードが通常撮像モードとされたとき、図１６の（Ａ）（Ｂ）に示す通常のガンマカーブＣＢａを用いて、提示画像の領域と背景画像の領域とを区別することなくガンマ補正を行う。
【００８９】
ステップＳＴ７で制御部５１は、撮像動作の終了であるか否かを判別する。制御部５１は、例えば撮像装置１０の電源オフ操作が行われたり、撮像モードから記録画像を再生する再生モードに切り換える操作が行われたとき動作を終了する。また、電源オフ操作や再生モードへの切り換え操作が行われていないときステップＳＴ１に戻る。
【００９０】
このように、撮像装置１０は、提示画像の検出結果に応じて撮像モードが提示画像撮像モードまたは通常撮像モードに自動的に設定される。ここで、提示画像が検出されて撮像モードが提示画像撮像モードに設定されると、撮像画像における提示画像や背景画像が良好な画像となるように露出制御やホワイトバランス調整，ガンマ補正が行われる。また、提示画像が検出されず撮像モードが通常撮像モードに設定されると、提示画像と背景画像の領域を区別することなく撮像画像に応じた露出制御やホワイトバランス調整，ガンマ補正が行われる。
【００９１】
したがって、撮像モードを手動で切り換えなくとも、撮像モードを自動的に切り換えることができる。また、提示画像撮像モードに設定したときの動作設定をその都度個々に設定する必要がないので、提示画像等が良好な画像とされている撮像画像を容易に得ることができる。例えば、提示画像における白とびや変色および背景画像における黒つぶれ等がない良好な撮像画像を容易に得ることができる。また、提示画像の撮像時に不要なストロボ発光が行われることも防止できる。さらに、提示画像撮像モードの終了を撮像装置で判断して自動的に終了できるので、ユーザが例えばメニューボタンを操作して提示画像撮像モードを終了させる手間を省くことができる。
【００９２】
なお、提示画像の検出は、上述のように２値化画像から水平分布や垂直分布を求めて提示画像の辺を検出する場合に限られるものではなく、特開２００７−１４８６１２号公報のように輪郭抽出を行い、抽出した輪郭から提示画像の領域を検出するなど、種々の方法用いるものとしてもよい。
【００９３】
ところで、提示画像を撮像する場合、例えば予定されていたプレゼンテーションなどのイベントを撮像する場合、撮像装置を三脚などに装着して設置しておき、固定の画角で撮像が行われることが多い。したがって、このような撮像装置の状態を考慮して撮像モードの切り換えを行うこともできる。
【００９４】
図１７は、撮像装置の他の動作として、撮像装置の状態を考慮して撮像モードの切り換えを行う場合の動作を示すフローチャートである。ステップＳＴ１１で制御部５１は、ステップＳＴ１と同様に提示画像検出部３１で提示画像検出を行わせてステップＳＴ１２に進む。
【００９５】
ステップＳＴ１２で制御部５１は、提示画像撮像モードへの切換条件を満たしているか否かの判別を行う。制御部５１は、提示画像撮像モードへの切換条件を満たしていると判別したときステップＳＴ１３に進み、満たしていないと判別したとき撮像モードを通常撮像モードに設定してステップＳＴ１６に進む。なお、制御部５１は、上述のように、提示画像が検出されたフレームの発生状況に応じて提示画像撮像モードへの切換条件を満たしているか否か判別する。
【００９６】
ステップＳＴ１３で制御部５１は、撮像画像における提示画像が安定状態であるか否かを判別する。制御部５１は、撮像画像における提示画像の位置やサイズに変動がなく安定している状態であると判別したとき撮像モードを提示画像撮像モードに設定してステップＳＴ１４に進み、安定状態でないと判別したときステップＳＴ１８に進む。
【００９７】
ここで、撮像画像における提示画像の位置やサイズの変動は、例えば撮像装置１０の撮像方向が変化したりズーム動作が行われたとき生じる。このため、制御部５１は、動き検出部５３からのセンサ信号ＳＳに基づき、撮像装置１０の動きの大きさが予め設定した所定値以上であるか否か判別して、動きが予め設定した所定量未満であるときは安定状態であると判別し、動きが予め設定した所定量以上であるときは安定状態ではないと判別する。また、制御部５１は、ユーザインタフェース部５２からの操作信号ＰＳに基づき、ズーム操作が行われているときには、安定状態ではないと判別し、ズーム操作が行われていないときには、安定状態であると判別する。
【００９８】
ステップＳＴ１４で制御部５１は、ステップＳＴ３と同様に提示画像撮像モード通知処理を行ってステップＳＴ１５に進む。
【００９９】
ステップＳＴ１５で制御部５１は、ステップＳＴ４と同様に提示画像撮像モード動作設定を行いステップＳＴ１８に進む。例えば、制御部５１は検波部３２を制御して、露出制御を行うときに用いる検波値を算出するための検波領域を提示画像の影響の少ない位置に切り換える。また、制御部５１は、画像処理部３５のホワイトバランス調整部３５１やガンマ補正部３５２で、提示画像と背景画像の領域毎にホワイトバランス調整やガンマ補正を行わせる。
【０１００】
ステップＳＴ１６で制御部５１は、ステップＳＴ５と同様に通常撮像モード通知処理を行ってステップＳＴ１７に進む。
【０１０１】
ステップＳＴ１７で制御部５１は、ステップＳＴ６と同様に通常撮像モード動作設定を行いステップＳＴ１８に進む。例えば、制御部５１は検波部３２を制御して、例えば撮像画像の中央を重視した露出制御を行うように検波領域を切り換える。また、制御部５１は、画像処理部３５のホワイトバランス調整部３５１やガンマ補正部３５２で、提示画像または背景画像のいずれの領域であるかによらずホワイトバランス調整やガンマ補正を行わせる。
【０１０２】
ステップＳＴ１８で制御部５１は、撮像動作の終了であるか否かを判別する。制御部５１は、例えば撮像装置１０の電源オフ操作が行われたり、撮像モードから記録画像を再生する再生モードに切り換える操作が行われたとき動作を終了する。また、電源オフ操作や再生モードへの切り換え操作が行われていないときステップＳＴ１１に戻る。
【０１０３】
このように、提示画像が安定状態でないと提示画像撮像モードとされることがないので、モード切換が頻繁に行われることを防止できる。また、提示画像が不安定状態で提示画像撮像モードに切り換えられてしまうことを防止できる。
【０１０４】
また、撮像装置１０は、検出された提示画像の位置に応じて撮像モードを切り換えるものとしてもよい。図１８は、撮像装置の他の動作として、検出された提示画像の位置に応じて撮像モードを切り換える場合の動作を示すフローチャートである。ステップＳＴ２１で制御部５１は、ステップＳＴ１と同様に提示画像検出部３１で提示画像検出を行わせてステップＳＴ２２に進む。
【０１０５】
ステップＳＴ２２で制御部５１は、提示画像撮像モードへの切換条件を満たしているか否かの判別を行う。制御部５１は、提示画像撮像モードへの切換条件を満たしていると判別したときステップＳＴ２３に進み、満たしていないと判別したとき撮像モードを通常撮像モードに設定してステップＳＴ２７に進む。なお、制御部５１は、上述のように、提示画像が検出されたフレームの発生状況に応じて提示画像撮像モードへの切換条件を満たしているか否か判別する。
【０１０６】
ステップＳＴ２３で制御部５１は、ステップＳＴ１３と同様に提示画像が安定状態であるか否かを判別する。制御部５１は、提示画像が安定状態であると判別したときステップＳＴ２４に進み、安定状態でないと判別したときステップＳＴ２９に進む。
【０１０７】
ステップＳＴ２４で制御部５１は、ステップＳＴ２１で検出した提示画像の位置が撮像画像の端部に移動したか判別する。制御部５１は、提示画像の位置が撮像画像の端部に移動していないと判別したときステップＳＴ２５に進み、端部に移動していると判別したときステップＳＴ２７に進む。
【０１０８】
図１９は、提示画像の移動を示している。ここで、例えば撮像装置１０の動きが予め設定した所定値よりも小さく、提示画像の例えば中心位置ＧＰａが撮像画像の端部方向に移動して位置ＧＰｂとなると、提示画像が撮像画像の端部に移動したと判別される。このように、提示画像が撮像画像の端部に移動したときは、ユーザの注目している被写体が提示画像から他の被写体に移動したものとして、ステップＳＴ２７に進む。また、制御部５１は提示画像が撮像画像の端部に移動していないと判別したときステップＳＴ２５に進む。
【０１０９】
ステップＳＴ２５で制御部５１は、ステップＳＴ３と同様に提示画像撮像モード通知処理を行ってステップＳＴ２６に進む。
【０１１０】
ステップＳＴ２６で制御部５１は、ステップＳＴ４と同様に提示画像撮像モード動作設定を行いステップＳＴ２９に進む。例えば、制御部５１は検波部３２を制御して、露出制御を行うときに用いる検波値を算出するための検波領域を提示画像の影響の少ない位置に切り換える。また、制御部５１は、画像処理部３５のホワイトバランス調整部３５１やガンマ補正部３５２で、提示画像と背景画像の領域毎にホワイトバランス調整やガンマ補正を行わせる。
【０１１１】
ステップＳＴ２７で制御部５１は、ステップＳＴ５と同様に通常撮像モード通知処理を行ってステップＳＴ２８に進む。
【０１１２】
ステップＳＴ２８で制御部５１は、ステップＳＴ６と同様に通常撮像モード動作設定を行いステップＳＴ２９に進む。例えば、制御部５１は検波部３２を制御して、例えば撮像画像の中央を重視した露出制御を行うように検波領域を切り換える。また、制御部５１は、画像処理部３５のホワイトバランス調整部３５１やガンマ補正部３５２で、提示画像または背景画像のいずれの領域であるかによらずホワイトバランス調整やガンマ補正を行わせる。
【０１１３】
ステップＳＴ２９で制御部５１は、撮像動作の終了であるか否かを判別する。制御部５１は、例えば撮像装置１０の電源オフ操作が行われたり、撮像モードから記録画像を再生する再生モードに切り換える操作が行われたとき動作を終了する。また、電源オフ操作や再生モードへの切り換え操作が行われていないときステップＳＴ２１に戻る。
【０１１４】
このように、提示画像が安定状態であるか否か、また、提示画像が撮像画像の端部に移動したか否かに応じて撮像モードを切り換えることで、ユーザがどのような被写体に着目して撮像を行っているかを考慮して撮像モードを自動的に切り換えることもできる。
【０１１５】
さらに、撮像モードの切り換えは、提示画像の検出結果とユーザによる指示に基づいて行うものとしてもよい。
【０１１６】
図２０は、撮像装置の他の動作として、提示画像の検出結果とユーザによる指示に基づいて撮像モードの切り換えを行う場合の動作を示すフローチャートである。ステップＳＴ３１で制御部５１は、ステップＳＴ１と同様に提示画像検出部３１で提示画像検出を行わせてステップＳＴ３２に進む。
【０１１７】
ステップＳＴ３２で制御部５１は、提示画像撮像モードへの切換条件を満たしているか否かの判別を行う。制御部５１は、提示画像撮像モードへの切換条件を満たしていると判別したときステップＳＴ３３に進み、満たしていないと判別したとき撮像モードを通常撮像モードに設定してステップＳＴ３７に進む。なお、制御部５１は、上述のように、提示画像が検出されたフレームの発生状況に応じて提示画像撮像モードへの切換条件を満たしているか否か判別する。
【０１１８】
ステップＳＴ３３で制御部５１は、提示画像の検出結果をユーザに通知してステップＳＴ３４に進む。
【０１１９】
ステップＳＴ３４で制御部５１は、ユーザによる提示画像の指示操作が行われたか否か判別する。制御部５１は、ユーザによる提示画像の指示操作が行われたと判別したときステップＳＴ３５に進む。また、提示画像とは異なる背景画像の指示操作がユーザによって行われたときはステップＳＴ３７に進む。
【０１２０】
図２１は、提示画像の検出結果とユーザ指示操作を説明するための図である。制御部５１は、検出信号ＪＡに基づき表示信号ＨＥを生成する。さらに、制御部５１は、生成した表示信号ＨＥを画像処理部３５に供給して、画像信号ＤＶａと表示信号ＨＥから表示画像信号ＨＧを生成させることで、図２１の（Ａ）に示すように、表示部３８の画面上に撮像画像と、検出された提示画像の領域を識別可能とする表示例えば検出枠ＭＤを表示させる。ここで、制御部５１は、検出枠ＭＤの枠内がユーザによって指示したとき、例えば図２１の（Ｂ）に示すようにユーザによって押圧された領域ＯＰが検出枠ＭＤの内部であることを検出したとき、ユーザによる提示画像の指示操作が行われたと判別してステップＳＴ３５に進む。また、制御部５１は、検出枠ＭＤの枠外がユーザによって指示したとき、例えば図２１の（Ｃ）に示すように提示画像撮像モードとされている場合、図２１の（Ｄ）に示すようにユーザによって押圧された領域ＯＰが検出枠ＭＤの内部であることを検出したとき、ユーザによる背景画像の指示操作が行われたと判別してステップＳＴ３７に進む。
【０１２１】
ステップＳＴ３５で制御部５１は、ステップＳＴ３と同様に提示画像撮像モード通知処理を行ってステップＳＴ３６に進む。
【０１２２】
ステップＳＴ３６で制御部５１は、ステップＳＴ４と同様に提示画像撮像モード動作設定を行いステップＳＴ３９に進む。例えば、制御部５１は検波部３２を制御して、露出制御を行うときに用いる検波値を算出するための検波領域を提示画像の影響の少ない位置に切り換える。また、制御部５１は、画像処理部３５のホワイトバランス調整部３５１やガンマ補正部３５２で、提示画像と背景画像の領域毎にホワイトバランス調整やガンマ補正を行わせる。
【０１２３】
ステップＳＴ３７で制御部５１は、ステップＳＴ５と同様に通常撮像モード通知処理を行ってステップＳＴ３８に進む。
【０１２４】
ステップＳＴ３８で制御部５１は、ステップＳＴ６と同様に通常撮像モード動作設定を行いステップＳＴ３９に進む。例えば、制御部５１は検波部３２を制御して、例えば撮像画像の中央を重視した露出制御を行うように検波領域を切り換える。また、制御部５１は、画像処理部３５のホワイトバランス調整部３５１やガンマ補正部３５２で、提示画像または背景画像のいずれの領域であるかによらずホワイトバランス調整やガンマ補正を行わせる。
【０１２５】
ステップＳＴ３９で制御部５１は、撮像動作の終了であるか否かを判別する。制御部５１は、例えば撮像装置１０の電源オフ操作が行われたり、撮像モードから記録画像を再生する再生モードに切り換える操作が行われたとき動作を終了する。また、電源オフ操作や再生モードへの切り換え操作が行われていないときステップＳＴ３１に戻る。
【０１２６】
このように、提示画像の検出結果をユーザに通知して、ユーザによって提示画像の指示操作がなされたとき提示画像撮像モードとされるので、提示画像の検出が誤りを生じても、誤りを生じた検出結果に基づいて、露出制御やホワイトバランス調整，ガンマ補正等が行われてしまうことを防止できる。また、通知された検出結果に対して指示を行うだけで提示画像撮像モードに切り換えることができるので、従来のように、操作メニューを表示させる操作や、操作メニューから撮像モードの切り換えメニューを選択する操作、撮像モードの切り換えメニューから提示画像撮像モードを選択する操作等を行うことなく、容易に提示画像撮像モードに切り換えることができる。さらに、提示画像が検出されたときには検出枠ＭＤが表示されるので、ユーザは提示画像撮像モードへの切り換えが可能であることを容易に把握できるようになる。
【０１２７】
ところで、提示画像撮像モードの終了は、提示画像の検出結果を用いることなく被写体の変化に応じて行うものとしてもよい。例えば、撮像対象とする被写体が提示画像から人物に変化したとき、提示画像撮像モードを終了する。
【０１２８】
図２２は、顔検出結果に応じて撮像モードの切り換えを行う場合のフローチャートを示している。ステップＳＴ４１で制御部５１は、顔検出を行いステップＳＴ４２に進む。顔検出では、顔の形状や肌色領域に着目して顔検出を行う。例えば撮像画像に対して遺伝的アルゴリズムを適用して顔形状を探索するものや、機械学習により顔検出のための識別器を構成するものや、その他一般的に用いられている手法を用いて顔画像を検出する。
【０１２９】
ステップＳＴ４２で制御部５１は、顔が検出されたか否かを判別する。制御部５１は、顔が検出されたと判別したときステップＳＴ４３に進み、顔を検出していないときはステップＳＴ４６に進む。
【０１３０】
ステップＳＴ４３で制御部５１は、検出した顔の位置が撮像画像の中央に位置するか否かを判別する。制御部５１は、検出した顔の位置が撮像画像の中央であるとき、提示画像撮像モードから他の撮像モード、例えば人物撮像モードに切り換えてステップＳＴ４４に進み、中央でないときはステップＳＴ４６に進む。
【０１３１】
ステップＳＴ４４で制御部５１は、人物撮像モード通知処理を行ってステップＳＴ４５に進む。制御部５１は、撮像モードを人物撮像モードに設定して、撮像装置１０が人物撮像モードに設定されていることをユーザに通知する。例えば、制御部５１は、人物撮像モードに設定したとき、表示信号ＨＥを生成して画像処理部３５に供給して、画像信号ＤＶａと表示信号ＨＥから表示画像信号ＨＧを生成させることで、表示部３８の画面上に撮像画像と人物撮像モードに設定されたことを示す情報を表示させる。なお、図２３は、表示部３８の画面上に、人物撮像モードに設定されたことを示すアイコン表示ＭＭを設けた場合を示している。また、図２３では、検出した顔の位置を示す枠表示ＭＥも合わせて表示した場合を示している。
【０１３２】
ステップＳＴ４５で制御部５１は、人物撮像モード動作設定を行いステップＳＴ４６に進む。制御部５１は、撮像した顔が最適に表示されるように、露出制御やホワイトバランス調整，ガンマ補正を行わせる。例えば、制御部５１は、露出制御を行うときに用いる検波値を算出するための検波領域を検出された顔の位置に切り換えるものとしたり、人物の顔が適正な色となるようにホワイトバランス調整を行わせたり、顔が白くとんでしまうことがないようにガンマ補正等を行わせる。
【０１３３】
ステップＳＴ４６で制御部５１は、撮像動作の終了であるか否かを判別する。制御部５１は、例えば撮像装置１０の電源オフ操作が行われたり、撮像モードから記録画像を再生する再生モードに切り換える操作が行われたとき、動作を終了する。また、電源オフ操作や再生モードへの切り換え操作が行われていないときステップＳＴ４１に戻る。このように、ユーザが注目する被写体が提示画像から人物に変更されたことを検出して、自動的に撮像モードを切り換えることもできる。
【０１３４】
図２４，図２５は、上述の撮像装置の動作をまとめたものであり、図２４は、提示画像撮像モードの開始、検波領域の変更、領域毎のホワイトバランス調整および領域毎のガンマ補正と、提示画像の検出方法の関係を示している。
【０１３５】
簡単な提示画像検出、例えば図６に示すように２値化処理を行って得られた２値化信号から水平分布と垂直分布を取得して上辺と下辺および左辺と右辺を検出する方法では、高精度な提示画像検出、例えば撮像画像のエッジ検出を行うことで提示画像と背景画像の境界を示す輪郭を取得して、この輪郭情報から提示画像の４つの頂点や４つの辺を示す直線を求めて提示画像を検出する方法に比べて、提示画像の検出を速やかに行うことができる。一方、高精度な提示画像検出では、簡単な提示画像検出に比べて、撮像画像における提示画像の領域を精度よく検出できる。
【０１３６】
ここで、提示画像撮像モードの開始や検波領域の切換では提示画像の領域を高精度に検出する必要はなく、領域毎のホワイトバランス調整および領域毎のガンマ補正では提示画像の領域を高精度に検出することが望ましい。したがって、図２４に示すように、提示画像撮像モードの開始や検波領域の切換では簡単な提示画像検出を用いることが望ましく、領域毎のホワイトバランス調整および領域毎のガンマ補正では高精度な提示画像検出を用いることが好ましい。
【０１３７】
さらに、上述の簡単な提示画像検出では、提示画像を正面から撮像する場合、撮像画像における提示画像の各辺は、ほぼ水平方向と垂直方向となることから提示画像を精度よく検出できる。しかし、提示画像を斜め方向から撮像すると、撮像画像における提示画像の各辺は水平方向や垂直方向に対して傾きを持つ場合が生じるため提示画像の検出精度が低下する。したがって、領域毎のホワイトバランス調整および領域毎のガンマ補正では、提示画像を正面から撮像していないとき、簡単な提示画像検出は好ましくないものとなる。なお、図２４では、好ましい場合を「○」、好ましくない場合を「×」として示している。また、条件付きで好ましくない場合を「△」で示している。
【０１３８】
図２５は、検波領域の変更、領域毎のホワイトバランス調整および領域毎のガンマ補正と、撮像時の動作との関係を示している。制御部５１は、提示画像が撮像画像の端部の位置に移動したとき、検波領域の切換を終了して例えば撮像画像の中央部の重み付けを高くして露出制御を行う。また、提示画像が撮像画像の端部の位置に移動しても、領域毎にホワイトバランス調整とガンマ補正を行う動作を維持させる。
【０１３９】
制御部５１は、撮像装置が大きく動いたときやズーム動作が行われたとき、撮像画像の端部の重み付けを高くした露出制御、および領域毎にホワイトバランス調整とガンマ補正を行う動作を維持させる。
【０１４０】
また、制御部５１は、顔検出で検出された顔の位置が撮像画像の中央であるとき、および提示画像が検出されないとき、撮像画像の端部の重み付けを高くした露出制御、および領域毎にホワイトバランス調整とガンマ補正を行う動作を終了させる。すなわち、制御部５１は、撮像画像の中央部の重み付けを高くした露出制御、および撮像画像の領域を区別することなくホワイトバランス調整とガンマ補正を行わせる。
【０１４１】
さらに、撮像時の複数の動作に応じて、検波領域の変更、領域毎のホワイトバランス調整および領域毎のガンマ補正を行うものとしてもよい。図２６は、撮像時の複数の動作に応じて、検波領域の変更、領域毎のホワイトバランス調整および領域毎のガンマ補正を行う場合を例示したものである。
【０１４２】
制御部５１は、提示画像が撮像画像の端部の位置に移動したとき、検波領域の切換を終了して例えば撮像画像の中央部の重み付けを高くして露出制御を行う。また、提示画像が撮像画像の端部の位置に移動しても、ホワイトバランス調整とガンマ補正は前の状態を維持させる。ここで、撮像装置が大きく動いたりズーム動作が行われた場合は、領域毎にホワイトバランス調整とガンマ補正を行う動作を終了させる。
【０１４３】
また、制御部５１は、例えばズーム動作が行われたときやズーム動作が行われたときに撮像装置が大きく動いたとき、検波領域の切り換えやホワイトバランス調整およびガンマ補正は前の状態を維持させる。ここで、提示画像が撮像画像の端部の位置に移動したときは、検波領域の切換や領域毎にホワイトバランス調整とガンマ補正を行う動作を終了させる。すなわち、制御部５１は、撮像画像の中央部の重み付けを高くした露出制御、および撮像画像の領域を区別することなくホワイトバランス調整とガンマ補正を行わせる。
【０１４４】
このようにすれば、種々の条件を考慮して、提示画像撮像モードに適した状態で撮像モードを提示画像撮像モードに設定することができる。例えば、プレゼンテーションなどの提示画像を撮像する場合と人物を撮像する場合が混在したような撮像シーンに対して、顔検出結果や動き検出結果を用いることによって、ユーザが何に注視して撮影しているかを自動で判断して撮影モードの切り換えが行われるので、ユーザの意図に沿った撮像モードで良好な撮像画像を得ることができる。
【図面の簡単な説明】
【０１４５】
【図１】撮像装置の構成を示す図である。
【図２】提示画像検出部の構成を示す図である。
【図３】検波部の構成を示す図である。
【図４】ホワイトバランス調整部の構成を示す図である。
【図５】撮像装置の動作を示すフローチャートである。
【図６】提示画像検出動作を示すフローチャートである。
【図７】水平分布と垂直分布の取得処理を示す図である。
【図８】提示画像の上辺と下辺の検出処理を示す図である。
【図９】提示画像の上辺と下辺の検出処理を示す図である。
【図１０】提示画像の左辺と右辺の検出処理を示す図である。
【図１１】提示画像の左辺と右辺の検出処理を示す図である。
【図１２】提示画像であるか否かの判別動作を説明するための図である。
【図１３】提示画像撮像モードに設定されたことを示すアイコン表示を設けた場合を示す図である。
【図１４】検波部の動作を説明するための図である。
【図１５】無彩色の位置と無彩色領域を示す図である。
【図１６】ガンマ補正部の補正特性を示す図である。
【図１７】撮像装置の他の動作を示すフローチャートである。
【図１８】撮像装置の他の動作を示すフローチャートである。
【図１９】提示画像の移動を示す図である。
【図２０】撮像装置の他の動作を示すフローチャートである。
【図２１】提示画像の検出結果とユーザ指示操作を説明するための図である。
【図２２】撮像装置の他の動作を示すフローチャートである。
【図２３】人物撮像モードに設定されたことを示すアイコン表示を設けた場合を示す図である。
【図２４】提示画像撮像モードの開始、検波領域の変更、領域毎のホワイトバランス調整および領域毎のガンマ補正と、提示画像の検出方法の関係を示す図である。
【図２５】検波領域の変更、領域毎のホワイトバランス調整および領域毎のガンマ補正と、撮像時の動作との関係を示す図である。
【図２６】撮像時の複数の動作に応じて、検波領域の変更、領域毎のホワイトバランス調整および領域毎のガンマ補正を行う場合を示す図である。
【符号の説明】
【０１４６】
１０・・・撮像装置、１１・・・レンズ部、１２・・・絞り機構、２１・・・撮像部、２２・・・タイミング信号発生部、２３・・・Ａ／Ｄ変換部、３１・・・提示画像検出部、３２・・・検波部、３５・・・画像処理部、３７・・・記録再生部、３８・・・表示部、４１・・・レンズ駆動部、４２・・・絞り駆動部、４５・・・ストロボ、５１・・・制御部、５２・・・ユーザインタフェース部、５３・・・動き検出部、２１１・・・撮像素子、２１２・・・ＣＤＳ部、２１３・・・増幅部、３１１・・・変換処理部、３１２，３１３・・・２値化処理部、３１４・・・信号選択部、３１５・・・水平分布取得部、３１６・・・垂直分布取得部、３１７・・・検出処理部、３２１・・・ブロック化処理部、３２２・・・ブロック別輝度算出部、３２３・・・係数設定部、３２４・・・乗算器、３２５・・・検波値算出部、３５１・・・ホワイトバランス（ＷＢ）調整部、３５１ａ・・・ホワイトバランス検波部、３５１ｂ・・・ホワイトバランス補正係数設定部、３５１ｃ・・・補正処理部、３５２・・・ガンマ補正部
【図１】
0004479819.tif 000003
【図２】
0004479819.tif 000004
【図３】
0004479819.tif 000005
【図４】
0004479819.tif 000006
【図５】
0004479819.tif 000007
【図６】
0004479819.tif 000008
【図８】
0004479819.tif 000009
【図９】
0004479819.tif 000010
【図１０】
0004479819.tif 000011
【図１１】
0004479819.tif 000012
【図１４】
0004479819.tif 000013
【図１５】
0004479819.tif 000014
【図１６】
0004479819.tif 000015
【図１７】
0004479819.tif 000016
【図１８】
0004479819.tif 000017
【図２０】
0004479819.tif 000018
【図２２】
0004479819.tif 000019
【図２４】
0004479819.tif 000020
【図２５】
0004479819.tif 000021
【図２６】
0004479819.tif 000022
【図７】
0004479819.tif 000023
【図１２】
0004479819.tif 000024
【図１３】
0004479819.tif 000025
【図１９】
0004479819.tif 000026
【図２１】
0004479819.tif 000027
【図２３】
0004479819.tif 000028