(57)【要約】  撮像装置は、合焦評価領域設定部３４０とフォーカス制御部７３０と画像出力部３０５とアシスト情報生成部３７０とを含む。マニュアルフォーカスモードにおいて、合焦評価領域設定部３４０は、オートフォーカスモードにおいて設定される合焦評価領域よりも大きいサイズの合焦評価領域を設定し、アシスト情報生成部３７０は、合焦評価領域の画像から求められた合焦評価値に基づいて、合焦物体位置の調整を支援するアシスト情報を生成し、画像出力部３０５は、アシスト情報を表示部４００に出力する。
2017072853.tif 000002
【特許請求の範囲】
【請求項１】
合焦物体位置を変更可能な光学系を有する撮像部により得られた被写体画像に合焦評価領域を設定する合焦評価領域設定部と、
マニュアルフォーカスモードでは、操作入力情報に基づいて前記合焦物体位置を制御し、オートフォーカスモードでは、前記合焦評価領域の画像から求められた合焦評価値に基づいて前記合焦物体位置を制御するフォーカス制御部と、
前記被写体画像を表示部に出力する画像出力部と、
アシスト情報生成部と、
を含み、
前記マニュアルフォーカスモードにおいて、
前記合焦評価領域設定部は、前記オートフォーカスモードにおいて設定される前記合焦評価領域よりも大きいサイズの前記合焦評価領域を設定し、
前記アシスト情報生成部は、前記大きいサイズに設定された前記合焦評価領域の画像から求められた前記合焦評価値に基づいて、前記合焦物体位置の調整を支援するアシスト情報を生成し、
前記画像出力部は、前記アシスト情報を前記表示部に出力することを特徴とする撮像装置。
【請求項２】
請求項１において、
前記被写体画像の水平走査方向におけるサイズをＬＨとし、前記被写体画像の垂直走査方向におけるサイズをＬＶとし、前記合焦評価領域の前記水平走査方向におけるサイズをＭＨとし、前記合焦評価領域の前記垂直走査方向におけるサイズをＭＶとする場合に、
前記合焦評価領域設定部は、前記マニュアルフォーカスモードにおいて、ＭＨ≧ＬＨ×５０％及びＭＶ≧ＬＶ×５０％の少なくとも一方を満たす前記合焦評価領域を設定することを特徴とする撮像装置。
【請求項３】
請求項１において、
前記合焦評価領域の画像の各領域での合焦状態を前記合焦評価値に基づいて検出する合焦状態検出部を含み、
前記アシスト情報生成部は、前記合焦状態の判定結果に基づいて、前記合焦評価領域の画像の前記各領域における前記合焦状態を表す情報を前記アシスト情報として生成することを特徴とする撮像装置。
【請求項４】
請求項３において、
前記合焦状態検出部は、前記各領域が近点側の非合焦状態であるか否か、及び遠点側の非合焦状態であるか否かを判定し、
前記アシスト情報生成部は、前記近点側の非合焦状態であると判定された領域については前記近点側の非合焦状態であることを表す情報を前記アシスト情報として生成し、前記遠点側の非合焦状態であると判定された領域については前記遠点側の非合焦状態であることを表す情報を前記アシスト情報として生成することを特徴とする撮像装置。
【請求項５】
請求項１において、
前記合焦評価領域設定部は、前記マニュアルフォーカスモードにおいて、前記合焦評価領域の中央が前記被写体画像の中央に位置するように前記合焦評価領域を設定することを特徴とする撮像装置。
【請求項６】
請求項１において、
前記画像出力部は、前記マニュアルフォーカスモードにおいて、前記被写体画像に基づいて前記被写体画像における領域の位置及びサイズ、形状の少なくとも１つが制御された前記領域についての前記アシスト情報を出力することを特徴とする撮像装置。
【請求項７】
請求項６において、
前記被写体画像に基づいて被写体形状を検出する被写体形状検出部を含み、
前記画像出力部は、前記マニュアルフォーカスモードにおいて、前記被写体形状に基づいて前記位置及び前記サイズ、前記形状の少なくとも１つが制御された前記領域についての前記アシスト情報を出力することを特徴とする撮像装置。
【請求項８】
請求項６において、
前記被写体画像に基づいて、前記アシスト情報を表示させない除外領域を検出する除外領域検出部を含み、
前記画像出力部は、前記マニュアルフォーカスモードにおいて、前記除外領域の情報に基づいて前記位置及び前記サイズ、前記形状の少なくとも１つが制御された前記領域についての前記アシスト情報を出力することを特徴とする撮像装置。
【請求項９】
請求項６において、
前記合焦評価領域設定部は、前記マニュアルフォーカスモードにおいて、前記被写体画像に基づいて前記合焦評価領域の位置及びサイズ、形状の少なくとも１つを制御し、
前記アシスト情報生成部は、前記合焦評価領域における前記アシスト情報を生成し、
前記画像出力部は、前記合焦評価領域である前記領域についての前記アシスト情報を出力することを特徴とする撮像装置。
【請求項１０】
請求項９において、
前記被写体画像に基づいて被写体形状を検出する被写体形状検出部を含み、
前記合焦評価領域設定部は、前記マニュアルフォーカスモードにおいて、前記被写体形状に基づいて前記合焦評価領域の位置及びサイズ、形状の少なくとも１つを制御することを特徴とする撮像装置。
【請求項１１】
請求項６において、
前記アシスト情報生成部は、前記アシスト情報を生成するアシスト情報生成領域の位置及びサイズ、形状の少なくとも１つを前記被写体画像に基づいて制御し、
前記画像出力部は、前記アシスト情報生成領域である前記領域についての前記アシスト情報を出力することを特徴とする撮像装置。
【請求項１２】
請求項１１において、
前記被写体画像に基づいて、前記アシスト情報を表示させない除外領域を検出する除外領域検出部を含み、
前記アシスト情報生成部は、前記合焦評価領域のうち前記除外領域を除く前記アシスト情報生成領域における前記アシスト情報を生成することを特徴とする撮像装置。
【請求項１３】
請求項６において、
前記画像出力部は、前記アシスト情報を表示させるアシスト情報表示領域の位置及びサイズ、形状の少なくとも１つを前記被写体画像に基づいて制御し、前記アシスト情報表示領域である前記領域についての前記アシスト情報を出力することを特徴とする撮像装置。
【請求項１４】
請求項１において、
前記被写体画像に基づいてシーンを検出するシーン検出部を含み、
前記アシスト情報生成部は、前記シーンに基づいて前記アシスト情報を生成することを特徴とする撮像装置。
【請求項１５】
請求項１において、
前記被写体画像に基づいてシーンを検出するシーン検出部を含み、
前記画像出力部は、前記シーンに基づいて前記アシスト情報を出力することを特徴とする撮像装置。
【請求項１６】
請求項１において、
前記画像出力部は、
前記被写体画像の各領域についての前記アシスト情報を、前記被写体画像の前記各領域に重畳して表示させることを特徴とする撮像装置。
【請求項１７】
請求項１において、
前記画像出力部は、前記表示部の表示領域において、前記被写体画像を第１領域に表示させ、前記アシスト情報を前記第１領域とは異なる第２領域に表示させることを特徴とする撮像装置。
【請求項１８】
請求項１において、
前記画像出力部は、前記表示部の表示領域において、前記被写体画像を第１領域に表示させ、前記アシスト情報を前記第１領域の内部に配置される第２領域に表示させることを特徴とする撮像装置。
【請求項１９】
請求項１において、
前記画像出力部は、前記マニュアルフォーカスモードにおいて、前記合焦物体位置が所定期間調整されない場合には前記アシスト情報を非表示にし、前記アシスト情報を非表示にした後に前記合焦物体位置が調整された場合には前記アシスト情報を表示させることを特徴とする撮像装置。
【請求項２０】
請求項１に記載された撮像装置を含むことを特徴とする内視鏡装置。
【請求項２１】
操作入力情報に基づいて撮像部の合焦物体位置を制御するマニュアルフォーカスモードにおいて、合焦評価値に基づいて前記合焦物体位置を制御するオートフォーカスモードにおいて設定される合焦評価領域よりも大きいサイズの前記合焦評価領域を、前記撮像部により得られた被写体画像に設定し、
前記マニュアルフォーカスモードにおいて、前記合焦評価領域の画像から求められた合焦評価値に基づいて、前記合焦物体位置の調整を支援するアシスト情報を生成し、
前記アシスト情報と前記被写体画像を表示部に出力することを特徴とする撮像装置の作動方法。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、撮像装置、内視鏡装置及び撮像装置の作動方法等に関する。
【背景技術】
【０００２】
腹腔鏡手術等で用いる外科内視鏡では、フォーカス調整を手動で行っている。主要な被写体にフォーカスが合っていない場合、ユーザは外科内視鏡に備わるフォーカス調整ボタン等でフォーカス調整を行うが、画面上から被写体が前ピン（近点側の非合焦状態）か後ピン（遠点側の非合焦状態）かを判断できないため誤った方向にフォーカス調整を行う場合がある。【０００３】
フォーカスアシスト機能を備えた撮像装置の技術として、例えば特許文献１には、画像中のフォーカス評価領域が前ピンであるか後ピンであるかを判定し、その判定結果に基づいてフォーカスリングの回転方向を画面上に表示することで、ユーザが直感的に正しい方向にフォーカス調整できるよう支援する技術が開示されている。
【先行技術文献】
【特許文献】
【０００４】
【特許文献１】特開２００７−２７９３３４号公報
【発明の概要】
【発明が解決しようとする課題】
【０００５】
特許文献１では、ある特定の被写体領域（フォーカス評価領域）にフォーカスを合わせるためのアシスト情報が表示される。しかしながら、そのアシスト情報が提供される被写体領域と、ユーザがフォーカスを合わせたい被写体が必ずしも一致しないという課題がある。例えば外科内視鏡手術においては、狭い穴からカメラを挿入しているためカメラの操作範囲が限られる、或いは撮影範囲を変えずに、その撮影範囲の任意の被写体にフォーカスを合わせたい等の状況を想定できる。フォーカス評価領域とフォーカスを合わせたい被写体が一致していない場合には、カメラの向きを変えて一致させる必要があるが、上記のような状況から一致させられない場合がある。【０００６】
本発明の幾つかの態様によれば、マニュアルフォーカスにおいてユーザが意図する被写体にフォーカス調整するためのアシスト情報を表示できる撮像装置、内視鏡装置及び撮像装置の作動方法等を提供できる。
【課題を解決するための手段】
【０００７】
本発明の一態様は、合焦物体位置を変更可能な光学系を有する撮像部により得られた被写体画像に合焦評価領域を設定する合焦評価領域設定部と、マニュアルフォーカスモードでは、操作入力情報に基づいて前記合焦物体位置を制御し、オートフォーカスモードでは、前記合焦評価領域の画像から求められた合焦評価値に基づいて前記合焦物体位置を制御するフォーカス制御部と、前記被写体画像を表示部に出力する画像出力部と、アシスト情報生成部と、を含み、前記マニュアルフォーカスモードにおいて、前記合焦評価領域設定部は、前記オートフォーカスモードにおいて設定される前記合焦評価領域よりも大きいサイズの前記合焦評価領域を設定し、前記アシスト情報生成部は、前記大きいサイズに設定された前記合焦評価領域の画像から求められた前記合焦評価値に基づいて、前記合焦物体位置の調整を支援するアシスト情報を生成し、前記画像出力部は、前記アシスト情報を前記表示部に出力する撮像装置に関係する。【０００８】
本発明の一態様によれば、オートフォーカスモードとマニュアルフォーカスモードでフォーカス制御が可能であり、マニュアルフォーカスモードにおいて、オートフォーカスモードにおいて設定される合焦評価領域よりも大きいサイズの合焦評価領域が設定され、その合焦評価領域におけるフォーカスアシスト情報が表示部に表示される。これにより、マニュアルフォーカスにおいてユーザが意図する被写体にフォーカス調整するためのアシスト情報を表示できる。【０００９】
また本発明の他の態様は、上記に記載された撮像装置を含む内視鏡装置に関係する。【００１０】
また本発明の更に他の態様は、操作入力情報に基づいて撮像部の合焦物体位置を制御するマニュアルフォーカスモードにおいて、合焦評価値に基づいて前記合焦物体位置を制御するオートフォーカスモードにおいて設定される合焦評価領域よりも大きいサイズの前記合焦評価領域を、前記撮像部により得られた被写体画像に設定し、前記マニュアルフォーカスモードにおいて、前記合焦評価領域の画像から求められた合焦評価値に基づいて、前記合焦物体位置の調整を支援するアシスト情報を生成し、前記アシスト情報と前記被写体画像を前記表示部に出力する撮像装置の作動方法に関係する。
【図面の簡単な説明】
【００１１】
【図１】撮像装置の構成例。
【図２】内視鏡装置の構成例。
【図３】合焦評価領域の第１設定例。
【図４】合焦評価領域の第２設定例。
【図５】処理部の第２構成例。
【図６】被写体形状に応じてＭＦモード時の合焦評価領域を設定する処理のフローチャート。
【図７】被写体形状検出処理のフローチャート。
【図８】被写体形状検出処理の説明図。
【図９】図９（Ａ）〜図９（Ｃ）は、管腔被写体合焦評価領域設定処理の説明図。
【図１０】アシスト情報、アシスト情報の表示手法の例。
【図１１】アシスト情報、アシスト情報の表示手法の第２変形例。
【図１２】シーン検出部の動作、シーン検出結果に基づくアシスト情報生成部の動作の説明図。
【図１３】除外領域検出部の動作、除外領域の検出結果に基づくアシスト情報生成部の動作の説明図。
【図１４】除外領域検出処理のフローチャート。
【図１５】アシスト情報、アシスト情報の表示手法の第３変形例。
【図１６】アシスト情報、アシスト情報の表示手法の第４変形例。
【発明を実施するための形態】
【００１２】
以下、本実施形態について説明する。なお、以下に説明する本実施形態は、請求の範囲に記載された本発明の内容を不当に限定するものではない。また本実施形態で説明される構成の全てが、本発明の必須構成要件であるとは限らない。
【００１３】
例えば以下では撮像装置が外科内視鏡装置である場合を例に説明するが、本発明はこれに限定されず、種々の撮像装置（例えば消化器用内視鏡装置、工業用内視鏡装置、顕微鏡、デジタルビデオカメラ、デジタルスチルカメラ等）に適用できる。
【００１４】
１．撮像装置
マニュアルフォーカスにおいてユーザが被写体にフォーカスを合わせる際、通常、撮像装置はユーザがフォーカスを合わせたい被写体の位置を知らない。そのため、フォーカス調整のためのアシスト情報を表示する場合に、適切なアシスト情報を表示することが難しい。
【００１５】
例えば上述の特許文献１では、ある特定の被写体領域（フォーカス評価領域）にフォーカスを合わせるためのアシスト情報（フォーカスリングの回転方向）が表示される。そのため、そのアシスト情報が提供される被写体領域と、ユーザがフォーカスを合わせたい被写体が一致していない場合がある。
【００１６】
外科内視鏡手術においては、複数の穴からカメラや処置具を体内に挿入し、そのカメラによって撮影した体内画像を見ながら処置具による処置を行う。このように狭い穴からカメラを挿入しているためカメラの操作範囲が限られている。またカメラの操作範囲が限られていることから、見たい被写体を視野中央にもってくることが出来ず、視野周辺部の被写体にフォーカスを合わせたい場合がある。このような状況では、アシスト情報が提供される被写体領域と、ユーザがフォーカスを合わせたい被写体が一致しない可能性が高くなる。
【００１７】
また、外科内視鏡手術では、実際に手術を行うユーザと、フォーカス調整を含むカメラ操作を行うユーザが独立に存在しており、口頭でフォーカス調整に関する指示を行っている。このため、指示と実際の操作との間に齟齬が発生する場合があり、手術の長期化を招く。かかる課題に対しては、フォーカス調整は基本的に自動で行い（ＡＦ）、ＡＦが誤った場合にのみ手動でフォーカス調整（ＭＦ）する構成が考えられる。
【００１８】
図１に、上記のような課題を解決できる撮像装置の構成例を示す。撮像装置は、処理部３００、記憶部７１０、撮像部２００、操作部７２０、表示部４００を含む。処理部３００は、合焦評価領域設定部３４０、フォーカス制御部７３０、アシスト情報生成部３７０、画像出力部３０５、合焦状態検出部３６０、被写体形状検出部３１５、除外領域検出部３２５、シーン検出部３３５を含む。
【００１９】
処理部３００（プロセッサ）は、撮像装置の各部の制御や、例えば画像処理等の種々の情報処理を行う。処理部３００は、後述するように、例えばハードウェアで構成されるプロセッサである。
【００２０】
記憶部７１０（メモリ）は、例えば撮像部２００により撮像された画像データや撮像装置の設定データ等を記憶する。或いは、記憶部７１０は、処理部３００の一時記憶メモリ（ワーキングメモリ）として利用される。
【００２１】
撮像部２００は、画像（動画像、静止画像）を撮影するものであり、例えば撮像素子や光学系、光学系のフォーカス機構を駆動する駆動装置等で構成できる。
【００２２】
操作部７２０は、ユーザが撮像装置を操作するための入力装置であり、例えばボタンやレバー、回転リング、マウス、キーボード、タッチパネル等で構成できる。
【００２３】
表示部４００（ディスプレイ、表示モニタ）は、撮像部２００により撮像された画像や、処理部３００により処理された画像を表示する表示装置である。表示部４００は、例えば液晶表示装置やＥＬ（Electro-Luminescence）表示装置等で構成できる。
【００２４】
以下、本実施形態の撮像装置の動作を説明する。
【００２５】
本実施形態の撮像装置は、合焦評価領域設定部３４０とフォーカス制御部７３０と画像出力部３０５とアシスト情報生成部３７０とを含む。合焦評価領域設定部３４０は、合焦物体位置を変更可能な（フォーカス調整可能な）光学系を有する撮像部により得られた被写体画像に合焦評価領域を設定する。フォーカス制御部７３０は、マニュアルフォーカスモードでは、操作入力情報に基づいて合焦物体位置（フォーカス）を制御し、オートフォーカスモードでは、合焦評価領域の画像から求められた合焦評価値に基づいて合焦物体位置を制御する。画像出力部３０５は、被写体画像を表示部４００に出力する。
【００２６】
そしてマニュアルフォーカスモードにおいて、合焦評価領域設定部３４０は、オートフォーカスモードにおいて設定される合焦評価領域よりも大きいサイズの合焦評価領域を設定し、アシスト情報生成部３７０は、その大きいサイズに設定された合焦評価領域の画像から求められた合焦評価値に基づいて、合焦物体位置の調整を支援するアシスト情報を生成し、画像出力部３０５は、アシスト情報を表示部４００に出力する（図３、図１０、図１１参照）。
【００２７】
本実施形態によれば、オートフォーカスモードにおいて設定される合焦評価領域よりも大きいサイズの合焦評価領域がマニュアルフォーカスモードにおいて設定され、その合焦評価領域におけるアシスト情報が表示される。オートフォーカスモードでは例えば画像中央部等の比較的狭い特定領域に合焦評価領域が設定されるが、本実施形態では、マニュアルフォーカスモードにおいて、それよりも広い合焦評価領域を設定されることになる。これにより、被写体画像の広い領域においてアシスト情報を提示することができ、ユーザはその領域内においてフォーカスを合わせたい位置のアシスト情報を見て、その位置にフォーカスを合わせることが可能となる。即ち、どこにフォーカスを合わせるかはユーザに委ねられており、撮像装置は、ユーザが選択する可能性がある範囲にアシスト情報を提示している。このようにして、アシスト情報が提供される被写体領域と、ユーザがフォーカスを合わせたい被写体が一致しない可能性を低減できる。
【００２８】
また、オートフォーカスモードを設けることで、ユーザが見たい領域に自動的にフォーカス調整されている間はオートフォーカスモードを続け、ユーザが見たい領域のピントが外れた場合にユーザがマニュアルフォーカスモードに切り替えることができる。これにより、オートフォーカスモードによりカメラ操作を簡素化して手術時間を短縮すると共に、マニュアルフォーカスモードによる手動調整を併用できる。例えば患部の詳細な観察や処置ではフォーカスが変わらない方が望ましいので、マニュアルフォーカスを行うが、この際に広い領域でのアシスト情報が表示されることで、所望の被写体への素早いフォーカス調整が可能となる。
【００２９】
なお、本実施形態では以下のような構成としてもよい。即ち、撮像部は、情報（例えばプログラムや各種のデータ）を記憶するメモリ（記憶部７１０）と、メモリに記憶された情報に基づいて動作するプロセッサ（処理部３００、ハードウェアで構成されるプロセッサ）と、を含む。プロセッサは、被写体画像に合焦評価領域を設定し、マニュアルフォーカスモードでは、操作入力情報に基づいて合焦物体位置を制御し、オートフォーカスモードでは、合焦評価値に基づいて合焦物体位置を制御し、被写体画像を表示部４００に出力する。そして、プロセッサは、マニュアルフォーカスモードにおいて、オートフォーカスモードにおいて設定される合焦評価領域よりも大きいサイズの合焦評価領域を設定し、その合焦評価領域の画像から求められた合焦評価値に基づいてアシスト情報を生成し、そのアシスト情報を表示部４００に出力する。
【００３０】
プロセッサ（処理部３００）は、例えば各部の機能が個別のハードウェアで実現されてもよいし、或いは各部の機能が一体のハードウェアで実現されてもよい。プロセッサは、例えばＣＰＵ（Central Processing Unit）であってもよい。ただしプロセッサはＣＰＵに限定されるものではなく、ＧＰＵ（Graphics Processing Unit）、或いはＤＳＰ（Digital Signal Processor）等、各種のプロセッサを用いることが可能である。またプロセッサはＡＳＩＣ（Application Specific Integrated Circuit）によるハードウェア回路でもよい。メモリ（記憶部７１０）は、例えばＳＲＡＭ、ＤＲＡＭなどの半導体メモリであってもよいし、レジスターであってもよいし、ハードディスク装置等の磁気記憶装置であってもよいし、光学ディスク装置等の光学式記憶装置であってもよい。例えば、メモリはコンピュータにより読み取り可能な命令を格納しており、当該命令がプロセッサにより実行されることで、処理部３００の各部の機能が実現されることになる。ここでの命令は、プログラムを構成する命令セットの命令でもよいし、プロセッサのハードウェア回路に対して動作を指示する命令であってもよい。
【００３１】
本実施形態の動作は例えば以下のように実現される。即ち、撮像部２００により画像が撮像され、その画像データが処理部３００（プロセッサ）で処理されて記憶部７１０（メモリ）に記憶される。合焦評価領域設定部３４０は、画像のサイズ（例えば縦横の画素数等）を参照して合焦評価領域を設定し、その領域を指定する情報（例えば矩形の場合には４隅の座標等、或いは円形の場合には中心の座標と半径等）を記憶部７１０に記憶させる。合焦評価領域の位置やサイズは所定の位置やサイズに設定されてもよいし、状況やユーザの操作に応じて可変に設定されてもよい。フォーカス制御部７３０は、合焦評価領域の情報と画像データを記憶部７１０から読み出し、合焦評価領域における合焦評価値を算出し、記憶部７１０に記憶させる。合焦評価値は、合焦状態や合焦度合いを評価するための評価値であり、例えばコントラスト値やエッジ量等である。
【００３２】
フォーカス制御部７３０は、オートフォーカスモードとマニュアルフォーカスモードの各モードを示すフラグを記憶部７１０に記憶させ、処理部３００の各部はそのフラグを参照して各モードでの動作を行う。フォーカス制御部７３０は、オートフォーカスモードでは、合焦評価値を記憶部７１０から読み出し、合焦評価値に基づいてフォーカスレンズの制御量（移動方向や移動量）を決定し、撮像部２００のフォーカスレンズ駆動部を制御する。操作部７２０を介してフォーカス調整の操作が行われた場合にはフォーカス制御部７３０はマニュアルフォーカスモードに切り替える。フォーカス制御部７３０は、マニュアルフォーカスモードでは、操作部７２０からの操作入力情報に基づいてフォーカスレンズの制御量を決定し、撮像部２００のフォーカスレンズ駆動部を制御する。
【００３３】
合焦状態検出部３６０は、マニュアルフォーカスモードにおいて、合焦評価値を記憶部７１０から読み出し、合焦評価値に基づいて合焦評価領域における合焦状態を検出し、その合焦状態の情報を記憶部７１０に記憶させる。合焦状態は、被写体に対する合焦及び非合焦の状態であり、例えば合焦している状態、非合焦の状態、非合焦における前ピン／後ピン状態、合焦度合い等である。アシスト情報生成部３７０は、マニュアルフォーカスモードにおいて、合焦状態の情報を記憶部７１０から読み出し、合焦状態の情報に基づいてアシスト情報を生成し、アシスト情報を記憶部７１０に記憶させる。アシスト情報は、被写体にフォーカスを合わせるためにフォーカスを調整すべき方向（近点方向、遠点方向）や量をユーザに示唆する情報である。画像出力部３０５は、マニュアルフォーカスモードにおいて、アシスト情報と画像データを記憶部７１０から読み出し、それらから表示画像を生成して表示部４００に出力する。なお、画像出力部３０５は、オートフォーカスモードにおいて、画像データを記憶部７１０から読み出し、その画像データから表示画像を生成して表示部４００に出力する。
【００３４】
また本実施形態では、被写体画像の水平走査方向におけるサイズをＬＨとし、被写体画像の垂直走査方向におけるサイズをＬＶとし、合焦評価領域の水平走査方向におけるサイズをＭＨとし、合焦評価領域の垂直走査方向におけるサイズをＭＶとする場合に、合焦評価領域設定部３４０は、マニュアルフォーカスモードにおいて、ＭＨ≧ＬＨ×５０％及びＭＶ≧ＬＶ×５０％の少なくとも一方を満たす合焦評価領域を設定する（図３、図４参照）。
【００３５】
本実施形態によれば、被写体画像のサイズの５０％以上のサイズの合焦評価領域が設定される。これにより、被写体画像の狭い領域における合焦状態ではなく、被写体画像の広い範囲での合焦状態を判定することが可能となり、被写体画像の広い範囲でのアシスト情報をユーザに提示できる。
【００３６】
ここで、合焦評価領域は例えば矩形領域であり、その場合には矩形の辺の長さがＭＨ、ＭＶに相当する。ただし合焦評価領域は矩形領域に限定されず、任意形状の領域でもよい。或いは、第１矩形とその外側の第２矩形との間の領域のような中抜きされた領域でもよい。このような任意形状の領域では、その領域の水平走査方向の最大幅がＭＨに相当し、垂直走査方向の最大幅がＭＶに相当する。或いは、合焦評価領域は分離した複数の領域を含んでもよい。この場合、その複数の領域を含む最小の矩形を想定し、その矩形の辺の長さをＭＨ、ＭＶとすればよい。
【００３７】
被写体画像のサイズは、画像全体に被写体が写っている（イメージサークルが撮像素子のセンササイズより大きい）場合には画像全体のサイズであり、画像の一部に被写体が写っている（イメージサークルが撮像素子のセンササイズより小さい）場合には、その被写体が写っている領域のサイズである。なお、画像全体に被写体が写っているか否かに関わらず画像全体のサイズを被写体画像のサイズとしてもよい。
【００３８】
また本実施形態では、撮像装置は、合焦評価領域の画像の各領域での合焦状態を合焦評価値に基づいて検出する合焦状態検出部３６０を含む。アシスト情報生成部３７０は、その合焦状態の判定結果に基づいて、合焦評価領域の画像の各領域における合焦状態を表す情報をアシスト情報として生成する（図１０、図１１参照）。
【００３９】
具体的には、合焦状態検出部３６０は、合焦評価領域を複数の局所領域に分割し、その各局所領域における合焦状態を検出する。局所領域は複数の画素を含む領域であってもよいし、１画素であってもよい。アシスト情報生成部３７０は、各局所領域におけるアシスト情報を生成し、画像出力部３０５は、その各局所領域におけるアシスト情報を表示させる。
【００４０】
本実施形態によれば、合焦評価領域内の各領域（各位置）についてアシスト情報が表示される。これにより、ユーザは合焦評価領域内の任意の位置におけるアシスト情報を得ることが可能となり、ユーザがフォーカスを合わせたいと意図した任意の被写体に対してフォーカスを素早く合わせることが可能となる。
【００４１】
また本実施形態では、合焦状態検出部３６０は、合焦評価領域内の各領域が近点側の非合焦状態（前ピン）であるか否か、及び遠点側の非合焦状態（後ピン）であるか否かを判定する。アシスト情報生成部３７０は、近点側の非合焦状態であると判定された領域については近点側の非合焦状態であることを表す情報をアシスト情報として生成し、遠点側の非合焦状態であると判定された領域については遠点側の非合焦状態であることを表す情報をアシスト情報として生成する（図１０、図１１参照）。
【００４２】
本実施形態によれば、被写体画像の各位置について前ピンであるか、後ピンであるかを示すアシスト情報が表示される。これにより、ユーザはフォーカスを合わせたい任意の位置について、フォーカスを近点側と遠点側のどちらに移動させればよいかを知ることができる。これにより、ユーザは所望の被写体に対して素早くフォーカスを合わせることができる。
【００４３】
ここで、近点側の非合焦状態とは、フォーカスが合っている被写体よりもカメラに近い側の被写体が非合焦状態となっている状態のことである。遠点側の非合焦状態とは、フォーカスが合っている被写体よりもカメラから遠い側の被写体が非合焦状態となっている状態のことである。
【００４４】
なお、合焦状態検出部３６０は、合焦評価領域内の各領域が合焦状態であるか否かを更に判定してもよいし、アシスト情報生成部３７０が合焦状態であると判定された領域については、合焦状態であることを表す情報をアシスト情報として生成してもよい。
【００４５】
また本実施形態では、合焦評価領域設定部３４０は、マニュアルフォーカスモードにおいて、合焦評価領域の中央が被写体画像の中央に位置するように合焦評価領域を設定する（図３、図４参照）。
【００４６】
外科内視鏡手術では、多くの場合において、視野の中央に出来るだけ近い位置に、見たい被写体をもってくる（例えば処置対象の部位を視野中央付近にする）。そのため、合焦評価領域の中央が被写体画像の中央に位置するように合焦評価領域を設定することで、ユーザがフォーカスを合わせたい可能性が高い領域においてアシスト情報を提供できる。
【００４７】
ここで、被写体画像の中央とは、例えば矩形画像の対角線の交点、或いはイメージサークルの中心点等である。合焦評価領域の中央とは、例えば矩形領域の対角線の交点、或いは円形領域の中心点等である。なお、これらの交点や中心点同士が厳密に一致する必要はない。
【００４８】
また本実施形態では、画像出力部３０５は、マニュアルフォーカスモードにおいて、被写体画像に基づいて被写体画像における領域の位置及びサイズ、形状の少なくとも１つが制御された、その領域についてのアシスト情報を出力する（図６〜図９（Ｃ）、図１３、図１４参照）。
【００４９】
例えば、管腔のような奥行きが大きい被写体では、管腔の手前（近点側）の壁面等の相対的にカメラに近い被写体にアシスト情報を表示してもよい。或いは、臓器を外側から見た場合のような凸形状の被写体では、その凸部（即ち臓器）にアシスト情報を表示してもよい。
【００５０】
本実施形態によれば、写している被写体に応じて、アシスト情報が表示される領域の位置及びサイズ、形状の少なくとも１つが制御される。これにより、被写体に応じてユーザがフォーカスを合わせたい可能性が高い領域に、アシスト情報を提供できる。
【００５１】
なお、アシスト情報が出力される領域の制御は、被写体画像からアシスト情報を生成して表示するまでの一連の処理のいずれの段階で行われてもよい。例えば、以下のように制御してもよい。
【００５２】
例えば、合焦評価領域設定部３４０は、マニュアルフォーカスモードにおいて、被写体画像に基づいて合焦評価領域の位置及びサイズ、形状の少なくとも１つを制御する。アシスト情報生成部３７０は、合焦評価領域におけるアシスト情報を生成する。画像出力部３０５は、合焦評価領域についてのアシスト情報を出力する（図６〜図９（Ｃ）参照）。
【００５３】
このように、合焦評価領域設定部３４０が合焦評価領域を制御することで、その結果としてアシスト情報が表示される領域が制御されてもよい。
【００５４】
或いは、アシスト情報生成部３７０は、アシスト情報を生成するアシスト情報生成領域の位置及びサイズ、形状の少なくとも１つを被写体画像に基づいて制御する。画像出力部３０５は、アシスト情報生成領域についてのアシスト情報を出力する（図１３、図１４参照）。
【００５５】
例えば合焦評価領域が所定の領域に設定されており、その合焦評価領域内でアシスト情報生成領域が設定されてもよい。
【００５６】
このように、合焦評価領域が制御されたか否かに関わらず、アシスト情報生成部３７０がアシスト情報生成領域を制御することで、その結果としてアシスト情報が表示される領域が制御されてもよい。
【００５７】
或いは、画像出力部３０５は、アシスト情報を表示させるアシスト情報表示領域の位置及びサイズ、形状の少なくとも１つを被写体画像に基づいて制御し、アシスト情報表示領域についてのアシスト情報を出力してもよい（図１３、図１４参照）。
【００５８】
例えば合焦評価領域やアシスト情報生成領域が所定の領域に設定されており、その合焦評価領域内やアシスト情報生成領域内でアシスト情報表示領域が設定されてもよい。アシスト情報生成領域は例えば合焦評価領域と同一であってもよい。
【００５９】
このように、合焦評価領域やアシスト情報生成領域が制御されたか否かに関わらず、画像出力部３０５がアシスト情報表示領域を制御することで、その結果としてアシスト情報が表示される領域が制御されてもよい。
【００６０】
また本実施形態では、撮像装置は、被写体画像に基づいて被写体形状を検出する被写体形状検出部３１５を含む。画像出力部３０５は、マニュアルフォーカスモードにおいて、被写体形状に基づいて位置及びサイズ、形状の少なくとも１つが制御された領域についてのアシスト情報を出力する（図６〜図９（Ｃ）参照）。
【００６１】
具体的には、合焦評価領域設定部３４０は、マニュアルフォーカスモードにおいて、被写体形状に基づいて合焦評価領域の位置及びサイズ、形状の少なくとも１つを制御する。そして、画像出力部３０５は、その合焦評価領域についてのアシスト情報を出力する（図６〜図９（Ｃ）参照）。なお、これに限定されず、被写体形状に基づく領域制御は、被写体画像からアシスト情報を生成して表示するまでの一連の処理のいずれの段階で行われてもよい。
【００６２】
例えば、管腔のような奥行きが大きい被写体では、管腔の奥（遠点側）の領域又は管腔の手前（近点側）の壁面等の領域を形状情報として検出してもよい。或いは、臓器を外側から見た場合のような凸形状の被写体では、その凸部（即ち臓器）の領域又は凸部でない領域を形状情報として検出してもよい。形状検出の手法は種々想定できる。例えば、照明の射出レンズからの距離と被写体の輝度との間の相関を利用して形状を検出してもよいし、或いはパターン認識処理等によって形状を検出してもよいし、或いは３次元計測等によって形状を検出してもよい。
【００６３】
本実施形態によれば、被写体の形状に応じて、アシスト情報が表示される領域の位置及びサイズ、形状の少なくとも１つが制御される。これにより、被写体の形状に応じてユーザがフォーカスを合わせたい可能性が高い領域に、アシスト情報を提供できる。
【００６４】
また本実施形態では、撮像装置は、被写体画像に基づいて、アシスト情報を表示させない除外領域を検出する除外領域検出部３２５を含む。画像出力部３０５は、マニュアルフォーカスモードにおいて、除外領域の情報に基づいて位置及びサイズ、形状の少なくとも１つが制御された領域についてのアシスト情報を出力する（図１３、図１４参照）。
【００６５】
具体的には、アシスト情報生成部３７０は、合焦評価領域のうち除外領域を除くアシスト情報生成領域におけるアシスト情報を生成する（図１３、図１４参照）。なお、これに限定されず、除外領域に基づく領域制御は、被写体画像からアシスト情報を生成して表示するまでの一連の処理のいずれの段階で行われてもよい。
【００６６】
例えば除外領域検出部３２５は画像の輝度やコントラスト、彩度等に基づいて除外領域を検出する。例えば、ハイライト部やシャドウ部等の輝度が明るすぎたり暗すぎたりする領域、或いは平坦部等のコントラストが低すぎる（ウォブリング等でコントラストが変化しない）領域、或いは局所的なミスト等の彩度が低すぎる領域等を、除外領域として検出する。
【００６７】
本実施形態によれば、除外領域に応じて、アシスト情報が表示される領域の位置及びサイズ、形状の少なくとも１つが制御される。これにより、ユーザがフォーカスを合わせたい（見たい）可能性が低いと考えられる除外領域を、アシスト情報の表示領域から除外することが可能となる。アシスト情報は被写体の視認を妨げる場合もあり得るので、必要のない部分には出来るだけ表示しないことが望ましい。
【００６８】
また本実施形態では、撮像装置は、被写体画像に基づいてシーンを検出するシーン検出部３３５を含む。アシスト情報生成部３７０は、シーンに基づいてアシスト情報を生成する（図１２参照）。即ち、アシスト情報生成部３７０が、シーンに基づいてアシスト情報を生成するか否かを判断し、アシスト情報が生成された場合に画像出力部３０５がアシスト情報を出力してもよい。
【００６９】
或いは、画像出力部３０５が、シーンに基づいてアシスト情報を出力してもよい（図１２参照）。即ち、シーンに依らずアシスト情報が生成され、画像出力部３０５がアシスト情報を出力するか否かをシーンに基づいて判断してもよい。
【００７０】
例えば特定のシーンが検出された場合にアシスト情報の生成又は出力を停止してもよいし、或いは特定のシーンが検出された場合にアシスト情報の生成又は出力を行ってもよい。或いは、シーンの変化が検出された場合に、アシスト情報の生成又は出力を開始してもよいし、停止してもよい。
【００７１】
シーン検出の手法は種々想定できる。例えば動きベクトル等の検出によりシーンやシーン変化を検出してもよいし、或いは画像の輝度や色、彩度、コントラスト等の検出によりシーンやシーン変化を検出してもよいし、或いは画像のパターン認識によりシーンやシーン変化を検出してもよい。
【００７２】
本実施形態によれば、シーンやシーン変化に応じて、アシスト情報の表示／非表示を切り替えることが可能となる。これにより、例えばフォーカスを合わせる必要があるシーン（例えば撮影領域を移動させた場合等）ではアシスト情報を表示させ、或いはフォーカスを合わせられないシーン（例えばミスト等によって被写体が見にくい場合等）ではアシスト情報を非表示にできる。即ち、必要性に応じて適応的にアシスト情報を提示できる。アシスト情報は被写体の視認を妨げる場合もあり得るので、必要のない場合には出来るだけ表示しないことが望ましい。
【００７３】
また本実施形態では、画像出力部３０５は、被写体画像の各領域についてのアシスト情報を、被写体画像の各領域に重畳して表示させる（図１０、図１１参照）。
【００７４】
例えば被写体画像が複数の局所領域に分割され、各局所領域でのアシスト情報が生成される。そして、ある局所領域のアシスト情報は、その局所領域の画像に重畳して表示される。例えば、局所領域内に付される半透明の色や局所領域内に付されるハッチング、局所領域を囲む枠、同一の合焦状態（前ピン又は後ピン）に属する複数の局所領域の外周を囲む枠、合焦状態（前ピン又は後ピン）に対応する矢印等の図形等を、アシスト情報として被写体画像に重畳させる。
【００７５】
本実施形態によれば、被写体画像の各領域（各位置）についてアシスト情報が表示される。これにより、ユーザは被写体画像内（実際には合焦評価領域内）の任意の位置におけるアシスト情報を得ることが可能となり、ユーザがフォーカスを合わせたいと意図した任意の被写体に対してフォーカスを素早く合わせることが可能となる。
【００７６】
また本実施形態では、画像出力部３０５は、表示部４００の表示領域において、被写体画像を第１領域に表示させ、アシスト情報を第１領域とは異なる第２領域に表示させる（図１５参照）。
【００７７】
或いは、画像出力部３０５は、表示部４００の表示領域において、被写体画像を第１領域に表示させ、アシスト情報を第１領域の内部に配置される第２領域に表示させてもよい（図１６参照）。
【００７８】
本実施形態によれば、アシスト情報が被写体画像に重畳されるのではなく、第１領域と第２領域に分けて表示される。これにより、被写体画像の視認性を向上しつつ、フォーカス調整を支援するためのアシスト情報を提供できる。
【００７９】
また本実施形態では、画像出力部３０５は、マニュアルフォーカスモードにおいて、合焦物体位置が所定期間調整されない（フォーカス調整が所定期間行われない）場合にはアシスト情報を非表示にし、アシスト情報を非表示にした後に合焦物体位置が調整された（フォーカス調整が行われた）場合にはアシスト情報を表示させる。
【００８０】
例えば操作部７２０にフォーカス調整用のボタンや回転リングが設けられ、そのボタンや回転リングに対する操作入力が所定期間検出されなかった場合に、アシスト情報を非表示にする。
【００８１】
このようにすれば、ユーザがフォーカスを調整する必要が無いと判断している場合にアシスト情報を非表示にし、ユーザがフォーカスを調整したい場合にアシスト情報を表示できる。例えば、処置や詳細観察ではアシスト情報が邪魔になるが、そのような状況では基本的にフォーカスを動かさないので、アシスト情報を非表示にできる。
【００８２】
２．内視鏡装置
以下、上述した撮像装置を内視鏡装置（外科内視鏡装置）に適用した場合の詳細構成と動作を説明する。図２に、内視鏡装置の構成例を示す。内視鏡装置は、硬性鏡１００、撮像部２００、処理部３００、表示部４００、外部Ｉ／Ｆ部５００、光源部６００（光源装置）を含む。
【００８３】
例えば、硬性鏡１００、撮像部２００、処理部３００、表示部４００、光源部６００が、それぞれ硬性鏡、カメラヘッド、ビデオプロセッサ（処理装置）、ディスプレイ、光源装置として別体に構成される。そして、カメラヘッドに設けられたチャック機構により硬性鏡がカメラヘッドに着脱される。カメラヘッド、ディスプレイ、光源装置は、それぞれケーブルによりビデオプロセッサに接続される。硬性鏡は、ライトガイドケーブルにより光源装置に接続される。なお、撮像装置や内視鏡装置の構成はこれに限定されるものではない。
【００８４】
以下、各部の構成や動作を説明する。なお、フォーカスレンズ操作部２５０と外部Ｉ／Ｆ部５００が操作部７２０に対応し、ＡＦ制御部３８０と制御部３９０がフォーカス制御部７３０に対応する。なお図２では記憶部７１０の図示を省略している。
【００８５】
硬性鏡１００は、体内への挿入部である。硬性鏡１００は、レンズ系１１０、ライトガイド部１２０を含む。
【００８６】
レンズ系１１０は、結像レンズ、リレーレンズ、接眼レンズ等を含んで構成される。
【００８７】
ライトガイド部１２０は、ライトガイドケーブル６２０からの出射光を、硬性鏡１００の先端まで導光する。
【００８８】
撮像部２００は、被写体からの反射光から画像を生成する。撮像部２００は、フォーカスレンズ２１０、フォーカスレンズ駆動部２２０、対物レンズ系２３０、撮像素子２４０、フォーカスレンズ操作部２５０を含む。
【００８９】
フォーカスレンズ２１０は、合焦物体位置（フォーカス）を調整するためのレンズである。
【００９０】
フォーカスレンズ駆動部２２０は、フォーカスレンズ２１０を駆動する（フォーカスレンズ２１０の位置を移動させる）。フォーカスレンズ駆動部２２０は、例えばボイスコイルモーター（ＶＣＭ）である。
【００９１】
対物レンズ系２３０は、ライトガイド部１２０からの出射光が被写体に反射された反射光を結像する（被写体像を結像させる）。
【００９２】
撮像素子２４０は、対物レンズ系２３０で結像された反射光を光電変換して画像を生成する。
【００９３】
フォーカスレンズ操作部２５０は、ユーザがフォーカス調整を行うためのインターフェースである。ユーザがフォーカスレンズ操作部２５０を操作することでフォーカスレンズ２１０が駆動され、合焦物体位置が調整される。フォーカスレンズ操作部２５０は、例えば近点側にフォーカスを移動させるボタン、遠点側にフォーカスを移動させるボタンである。或いは、フォーカスリング、マウスホイール、クリックホイールといったインターフェースであっても構わない。
【００９４】
処理部３００は、画像処理を含む信号処理を行う。処理部３００は、画像出力部３０５、Ａ／Ｄ変換部３１０、前処理部３２０、画像処理部３３０、合焦評価領域設定部３４０、合焦評価値算出部３５０、合焦状態検出部３６０、アシスト情報生成部３７０、ＡＦ制御部３８０、制御部３９０を含む。
【００９５】
Ａ／Ｄ変換部３１０は、撮像素子２４０から順次出力されるアナログ信号をデジタルの画像に変換して、前処理部３２０に順次出力する。
【００９６】
前処理部３２０は、Ａ／Ｄ変換部３１０から出力された画像に対して、ホワイトバランス、補間処理（デモザイキング処理）等の画像処理を施し、画像処理部３３０、合焦評価領域設定部３４０、合焦評価値算出部３５０、に順次出力する。
【００９７】
画像処理部３３０は、前処理部３２０から出力された画像に対して色変換、階調変換、エッジ強調、拡縮処理、ノイズリダクション等の画像処理を施し、表示部４００に画像を順次出力する。
【００９８】
合焦評価領域設定部３４０は、前処理部３２０から出力された画像に対して合焦評価領域を設定し、合焦評価値算出部３５０、アシスト情報生成部３７０に出力する。合焦評価領域設定部３４０は、制御部３９０からの制御信号に基づいてＡＦモード（オートフォーカスモード）かＭＦモード（マニュアルフォーカスモード）かを判定し、ＭＦモードであればＡＦモードより大きい合焦評価領域を設定する（図３参照）。
【００９９】
合焦評価値算出部３５０は、合焦評価領域内の被写体画像から合焦評価値を算出し、合焦状態検出部３６０に出力する。合焦評価値は例えばバンドパスフィルタ出力である。
【０１００】
合焦状態検出部３６０は、合焦評価値算出部３５０から出力された合焦評価値および、制御部３９０からのフォーカスレンズ駆動信号に基づいて、合焦状態（合焦、前ピン、後ピン）を検出し、アシスト情報生成部３７０に出力する。例えば制御部３９０がフォーカスレンズ２１０をウォブリング動作させ、合焦評価値算出部３５０が、そのウォブリング動作中に得られた合焦評価値に基づいて合焦状態を検出する。なお、合焦状態の検出手法はこれに限定されず、撮像素子２４０が位相差画素を備えておりその出力値から合焦状態を検出しても構わない。この場合の合焦評価値は位相差画素の出力値に該当する。
【０１０１】
アシスト情報生成部３７０は、ＭＦモード時のみ、合焦評価領域設定部３４０で設定された合焦評価領域および、合焦状態検出部３６０から出力された合焦状態に基づいて表示部４００に表示するアシスト情報を生成する（図１０参照）。
【０１０２】
画像出力部３０５は、ＡＦモード時に被写体画像を表示部４００に出力し、ＭＦモード時に被写体画像とアシスト情報を表示部４００に出力する。なお、アシスト情報の表示は被写体画像に重畳してもよいし（図１０）、被写体画像を表示する領域とは別の領域にアシスト情報を表示しても構わないし（図１５）、被写体画像の一部にアシスト情報を表示しても構わない（図１６）。アシスト情報の表示は、フォーカスレンズ操作部２５０が操作されている間のみ行い、一定時間操作がなければ表示しなくなる構成が、より好適である。このような構成にすることで、アシスト情報が必要な合焦物体位置の調整中のみに限定してアシスト情報を表示することが可能となり、ユーザの負担を軽減できる。
【０１０３】
ＡＦ制御部３８０は、ＡＦモード時（制御部３９０からの制御信号で判断）に、合焦状態検出部３６０から出力される合焦状態に基づいて、被写体に合焦するようフォーカスレンズ駆動部２２０を制御する。ＡＦ制御は、例えばウォブリング法や山登り法等の公知技術を用いることが可能である。
【０１０４】
制御部３９０は、外部Ｉ／Ｆ部５００や画像処理部３３０、ＡＦ制御部３８０、撮像素子２４０などと相互に接続されており、制御信号の入出力を行う。制御部３９０は、フォーカスレンズ操作部２５０に対するユーザの操作の有無で、ＭＦモードとＡＦモードとを切り換える。例えばＡＦモードにおいてフォーカスレンズ操作部２５０が操作された場合にＭＦモードに切り替え、ＡＦモード設定ボタン（フォーカスレンズ操作部２５０又は外部Ｉ／Ｆ部５００に設けられる）が押された場合、或いはフォーカスレンズ操作部２５０が操作されないまま所定期間経過した場合にＡＦモードに切り替える。また、制御部３９０は、ＭＦモードにおいてフォーカスレンズ操作部２５０を介した操作入力に基づいてフォーカスレンズ駆動部２２０を制御し、フォーカスレンズ２１０を移動させる。
【０１０５】
表示部４００は、画像処理部３３０から出力される被写体画像と、アシスト情報生成部３７０から出力されるアシスト情報を順次表示する。例えば表示部４００は液晶モニタである。
【０１０６】
外部Ｉ／Ｆ部５００は、内視鏡装置に対するユーザからの入力等を行うためのインターフェースである。例えば、ＡＦモード時の合焦評価領域の位置やサイズを設定するための設定ボタンや、画像処理のパラメータを調整するための調整ボタンなどを含んで構成されている。
【０１０７】
３．合焦評価領域設定部
図３に、合焦評価領域の第１設定例を示す。合焦評価領域設定部３４０は、制御部３９０からの制御信号に基づいてＡＦモードかＭＦモードかを判断し、被写体画像上に各モードに応じた合焦評価領域を設定する。
【０１０８】
ＡＦモード時の合焦評価領域は、初期設定では被写体画像中央に所定の大きさで設定されており、ユーザが外部Ｉ／Ｆ部５００を操作することで、その位置および大きさは変更される。ＡＦモードにおける合焦評価領域の水平走査方向の辺の長さ（サイズ）をＡＨとし、垂直走査方向の辺の長さをＡＶとする。
【０１０９】
ＭＦモード時の合焦評価領域の大きさは、被写体画像全体に対して水平走査方向および垂直走査方向に６０％の大きさで設定する。即ち、被写体画像の水平走査方向の辺の長さをＬＨとし、垂直走査方向の辺の長さをＬＶとし、合焦評価領域の水平走査方向の辺の長さをＭＨとし、垂直走査方向の辺の長さをＭＶとする場合に、ＭＨ≧６０％×ＬＨ、ＭＶ≧６０％×ＬＶである。また、ＭＨ＞ＡＨ、ＭＶ＞ＡＶである。ただし合焦評価領域の大きさに関しては、６０％の大きさに限定するものではなく、被写体画像全体に対して水平走査方向もしくは垂直走査方向に５０％以上の大きさ（ＭＨ≧５０％×ＬＨ、ＭＶ≧５０％×ＬＶ）で、かつＡＦモード時よりも大きく設定する（ＭＨ＞ＡＨ、ＭＶ＞ＡＶ）のであればどのように設定しても構わない。また、ＭＦモードにおいて、合焦評価領域の位置は被写体画像中央に設定する。ＭＦモード時の合焦評価領域をこのように設定することで、ＡＦモード時には合焦できなかった被写体を合焦評価領域内に捉えることが可能となり、その被写体へのフォーカス調整を支援するアシスト情報を生成することができる。
【０１１０】
図４に、合焦評価領域の第２設定例を示す。図４は、イメージサークルが画像サイズ（表示領域）より小さい場合の設定例である。ＭＨ＞ＡＨ、ＭＶ＞ＡＶであることは第１設定例と同じである。
【０１１１】
例えば水平走査方向においてイメージサークルの直径が画像サイズより小さい場合、そのイメージサークルの直径をＬＨとして、合焦評価領域の水平走査方向の辺の長さをＭＨ≧５０％×ＬＨに設定する。即ち、画像サイズとイメージサークルの直径の小さい方を被写体画像のサイズとする。垂直走査方向においても同様である。
【０１１２】
４．被写体形状検出部
図５に、処理部３００の第２構成例を示す。処理部３００は、被写体形状検出部３１５、除外領域検出部３２５、シーン検出部３３５、画像出力部３０５、Ａ／Ｄ変換部３１０、前処理部３２０、画像処理部３３０、合焦評価領域設定部３４０、合焦評価値算出部３５０、合焦状態検出部３６０、アシスト情報生成部３７０、ＡＦ制御部３８０、制御部３９０を含む。なお、被写体形状検出部３１５、除外領域検出部３２５、シーン検出部３３５は、いずれか１つだけが設けられてもよいし、いずれか２つだけが設けられてもよい。ここで、図２で説明した構成要素と同一の構成要素については同一の符号を付し、適宜説明を省略する。
【０１１３】
被写体形状検出部３１５の動作、被写体形状の検出結果に基づく合焦評価領域設定部３４０の動作を説明する。以下では被写体形状の検出結果に基づいて合焦評価領域設定部３４０が合焦評価領域を制御する場合を説明するが、これに限定されず、被写体形状の検出結果に基づいてアシスト情報生成部３７０が、アシスト情報を生成する領域であるアシスト情報生成領域を制御してもよいし、被写体形状の検出結果に基づいて、画像出力部３０５が、アシスト情報を表示させる領域であるアシスト情報表示領域を制御してもよい。
【０１１４】
図６に、被写体形状に応じてＭＦモード時の合焦評価領域を設定する処理のフローチャートを示す。
【０１１５】
まず、被写体形状検出部３１５が、被写体画像に基づいて被写体形状検出処理を行う（Ｓ３４１）。被写体形状検出処理の詳細は後述する。被写体形状検出部３１５が、被写体が管腔状であるか否かを判定し（Ｓ３４２）、管腔状であれば管腔奥位置判定処理を行う（Ｓ３４３）。被写体形状検出部３１５が、管腔奥位置が被写体画像中央であるか否かを判定する（Ｓ３４４）。被写体画像中央であれば、合焦評価領域設定部３４０が、合焦評価領域の位置を被写体画像中央に設定し（Ｓ３４５）、合焦評価領域の大きさを水平方向および垂直方向で被写体画像の９０％に設定する（Ｓ３４６）。ステップＳ３４４において、管腔奥位置が被写体画像中央でなければ、合焦評価領域設定部３４０が、管腔被写体合焦評価領域設定処理にて合焦評価領域の位置および大きさを設定する（Ｓ３４７）。管腔被写体合焦評価領域設定処理の詳細は後述する。ステップＳ３４２において、被写体が管腔状でなければ、合焦評価領域設定部３４０が、合焦評価領域の位置および大きさを初期設定のままとする（Ｓ３４８）。
【０１１６】
図７に、被写体形状検出処理のフローチャートを示す。
【０１１７】
まず、被写体形状検出部３１５が、被写体画像を図８に示すように複数の分割ブロック（複数の分割領域）に分割し、各分割ブロックの平均信号値を算出する（Ｓ３４１１）。図８では３×３の分割領域に分割しているが、これに限定されるものでない。平均信号値は例えば平均輝度値等である。次に、被写体形状検出部３１５が、平均信号値のうち最小値（ｍｅａｎ１）を決定する（Ｓ３４１２）。次に、被写体形状検出部３１５が、最小値ｍｅａｎ１のブロック以外のブロックの平均信号値から、さらに平均値（ｍｅａｎ２）を算出する（Ｓ３４１３）。被写体形状検出部３１５が、平均値ｍｅａｎ２と最小値ｍｅａｎ１との差分と所定の閾値（ｔｈ１）を比較し（Ｓ３４１４）、差分が閾値より大きければ被写体は管腔状であると検出し（Ｓ３４１５）、そうでなければ被写体は管腔状ではないと検出する（Ｓ３４１６）。
【０１１８】
管腔奥位置判定処理（Ｓ３４３）について説明する。被写体形状検出部３１５は、上述の被写体形状検出処理Ｓ３４１２で決定された最小値ｍｅａｎ１のブロックが、図８の様に中央に位置するなら管腔奥は中央、そうでなければ中央ではないと判定する。
【０１１９】
管腔被写体合焦評価領域設定処理（Ｓ３４７）について説明する。図９（Ａ）〜図９（Ｃ）に示すように、合焦評価領域設定部３４０は、上述の被写体形状検出処理Ｓ３４１２で決定された最小値ｍｅａｎ１のブロックの位置に対して、対称な位置となるように合焦評価領域（グレーのハッチング部分）を設定する。最小値ｍｅａｎ１のブロックは管腔状の被写体の管腔奥に該当するブロックであり、ユーザがフォーカスを合わせたい被写体が存在する可能性は低い。また、図９（Ａ）〜図９（Ｃ）に示す合焦評価領域は、管腔状の被写体の管腔手前の壁面に該当しており、ユーザがフォーカスを合わせたい被写体が存在する可能性が高い。このように合焦評価領域を設定することで、必要最小限の領域にアシスト情報を表示することが可能となり、ユーザの負担を軽減できる。
【０１２０】
なお、例えば合焦評価領域は少なくとも最小値ｍｅａｎ１のブロックを含まない領域に設定されればよい。或いは、合焦評価領域は、被写体画像の中心に対して最小値ｍｅａｎ１のブロックに点対称なブロック（の少なくとも一部）を含む領域に設定されてもよい。
【０１２１】
５．アシスト情報、アシスト情報の表示手法
アシスト情報生成部３７０が生成し、画像出力部３０５が表示部４００に表示させるアシスト情報について説明する。
【０１２２】
図１０に、アシスト情報、アシスト情報の表示手法の例を示す。合焦評価領域内で、前ピン、後ピンと判定した各領域に対し、例えば被写体画像上にそれぞれ対応した色のマスクをかける。このとき、マスクは前ピン、後ピンの領域のみにかけ、また被写体画像がある程度透けて見えるようにする。ここで、前ピン、後ピンに割り当てる色は、フォーカスレンズ操作部２５０の前ピン操作、後ピン操作と対応させる構成が、より好適である。例えばフォーカスレンズ操作部２５０がボタンであれば、前ピン操作ボタン、後ピン操作ボタンが異なる色に塗り分けられており、アシスト情報として表示する色をこれに対応させる。また、合焦評価領域（図１０の点線枠）は、表示してもしなくても構わない。なお、合焦と判定された領域にはマスクをかけてもよいし、マスクをかけなくてもよい。
【０１２３】
アシスト情報、アシスト情報の表示手法は種々の変形が考えられる。例えば第１の変形例として以下が考えられる。即ち、図１０では前ピン、後ピンの各領域内に色を付けているが、領域内には色を付けず、領域の境界を線（縁）で囲んでもよい。例えば図１０において、前ピン領域と合焦領域の境界に第１色の線を表示し、後ピン領域と合焦領域の境界、及び合焦評価領域の外周に第１色の線を表示する。このようにすれば、各色の線で囲まれた領域内を前ピン領域、後ピン領域と認識できる
【０１２４】
或いは、図１１に示す第２の変形例が考えられる。即ち、合焦評価領域を複数の局所領域に分割し、各局所領域を、その合焦状態に対応した枠線で囲む。例えば前ピンと判定された局所領域には第１色の枠線（図１１の２点鎖線）を表示し、後ピン領域と判定された局所領域には第２色の枠線（図１１の１点鎖線）を表示する。なお、合焦評価領域の枠線は表示してもよいし、表示しなくてもよい。
【０１２５】
６．シーン検出部
図１２を用いて、シーン検出部３３５の動作、シーン検出結果に基づくアシスト情報生成部３７０の動作を説明する。以下ではシーン検出結果に基づいてアシスト情報生成部３７０がアシスト情報を生成するか否かを決定する場合を説明するが、これに限定されず、シーン検出結果に基づいて画像出力部３０５がアシスト情報を表示させるか否かを決定してもよい。
【０１２６】
処置により多量のミストが発生したり、硬性鏡を大きく動かすことで被写体ブレが発生する場合、合焦、前ピン、後ピンを正確に判定することができない。このため、これらの発生が検出された場合にアシスト情報の表示そのものを行わない構成がより好適である。具体的には、図１２に示すように、動画像の各フレームにおいてシーン検出部３３５がシーン検出を行う。シーン検出部３３５が特定のシーン（ミストの発生）を検出した場合、アシスト情報生成部３７０は、そのフレーム又はそれ以降のフレームにおいてアシスト情報を生成しない。また、その後にシーン検出部３３５が特定のシーンを検出しなくなった場合、アシスト情報生成部３７０は、そのフレーム又はそれ以降のフレームにおいてアシスト情報の生成を再開する。シーンの検出は、例えば輝度や彩度の検出や、動き検出等の公知の認識技術を用いることができる。なお、特定のシーンが検出された場合にアシスト情報を生成する、或いは特定のシーン変化が検出された場合にアシスト情報を生成する又は生成しないといった、種々の変形例が考えられる。
【０１２７】
７．除外領域検出部
図１３を用いて、除外領域検出部３２５の動作、除外領域の検出結果に基づくアシスト情報生成部３７０の動作を説明する。以下では除外領域の検出結果に基づいてアシスト情報生成部３７０がアシスト情報生成領域を制御する場合を説明するが、これに限定されず、除外領域の検出結果に基づいて合焦評価領域設定部３４０が合焦評価領域を制御してもよいし、除外領域の検出結果に基づいて画像出力部３０５がアシスト情報表示領域を制御してもよい。
【０１２８】
黒つぶれや白飛びしている領域は、合焦、前ピン、後ピンを正確に判定することができない。また、ユーザが合焦したい領域でもない。このため、これら領域に関してはアシスト情報の表示そのものを行わない構成がより好適である。具体的には、除外領域検出部３２５は、画素値Ｉ（ｘ，ｙ）と閾値ｔｈ２の比較、及び画素値Ｉ（ｘ，ｙ）と閾値ｔｈ３の比較を行う。画素値Ｉ（ｘ，ｙ）は、被写体画像の座標（ｘ，ｙ）に位置する画素の画素値である。閾値ｔｈ２は黒つぶれを判定するための閾値である。閾値ｔｈ３は白飛びを判定するための閾値である。下式（１）を満足する画素を除外領域として検出する。
Ｉ（ｘ，ｙ）＜ｔｈ２，又はＩ（ｘ，ｙ）＞ｔｈ３    （１）
【０１２９】
なお、除外領域には、除外領域であることを示す何らかの表示を行ってもよいし、何も表示しなくても（被写体画像だけを表示しても）よい。
【０１３０】
図１４に、除外領域検出処理のフローチャートを示す。まず、除外領域検出部３２５が、被写体画像から画素を選択する（Ｓ３７１１）。次に、除外領域検出部３２５が、選択した画素が合焦評価領域内か判定し（Ｓ３７１２）、合焦評価領域内であればステップＳ３７１３に進み、そうで無ければステップＳ３７１５に進む。ステップＳ３７１３では、除外領域検出部３２５が、ステップＳ３７１１で選択した画素の画素値Ｉ（ｘ，ｙ）が上式（１）を満足すれば除外領域として検出し（Ｓ３７１４）、そうで無ければステップＳ３７１５に進む。除外領域検出部３２５は、以上の処理を全画素について実行したかを判定し（Ｓ３７１５）、実行していれば除外領域の検出を終了する。そうで無ければ、ステップＳ３７１１に戻る。
【０１３１】
８．アシスト情報、アシスト情報の表示手法の変形例
図１５に、アシスト情報、アシスト情報の表示手法の第３変形例を示す。
【０１３２】
アシスト情報を被写体画像に重畳表示すると被写体の視認性が低下する可能性があるため、被写体画像を第１領域に表示し、その第１領域とは別の第２領域にアシスト情報をサブ表示する。このサブ表示はＭＦモード時のみ有効とする。第２領域には、被写体画像を重畳せずアシスト情報のみ表示してもよいし、被写体画像にアシスト情報を重畳した画像を表示してもよい。
【０１３３】
図１６に、アシスト情報、アシスト情報の表示手法の第４変形例を示す。
【０１３４】
アシスト情報と被写体画像との位置が離れていると、ユーザの視点移動が大きくなり疲労に繋がる。このため、アシスト情報を被写体画像にＰｉＰ（Picture in Picture）表示する。即ち、被写体画像を第１領域に表示し、その第１領域内に配置された第２領域にアシスト情報を表示する。このサブ表示はＭＦモード時のみ有効とする。第１領域は表示部４００の表示領域と同一であってもよいし、異なってもよい。
【０１３５】
以上、本発明を適用した実施形態およびその変形例について説明したが、本発明は、各実施形態やその変形例そのままに限定されるものではなく、実施段階では、発明の要旨を逸脱しない範囲内で構成要素を変形して具体化することができる。また、上記した各実施形態や変形例に開示されている複数の構成要素を適宜組み合わせることによって、種々の発明を形成することができる。例えば、各実施形態や変形例に記載した全構成要素からいくつかの構成要素を削除してもよい。さらに、異なる実施の形態や変形例で説明した構成要素を適宜組み合わせてもよい。このように、発明の主旨を逸脱しない範囲内において種々の変形や応用が可能である。また、明細書又は図面において、少なくとも一度、より広義または同義な異なる用語と共に記載された用語は、明細書又は図面のいかなる箇所においても、その異なる用語に置き換えることができる。
【符号の説明】
【０１３６】
１００  硬性鏡、１１０  レンズ系、１２０  ライトガイド部、
２００  撮像部、２１０  フォーカスレンズ、
２２０  フォーカスレンズ駆動部、２３０  対物レンズ系、
２４０  撮像素子、２５０  フォーカスレンズ操作部、
３００  処理部、３０５  画像出力部、３１０  Ａ／Ｄ変換部、
３１５  被写体形状検出部、３２０  前処理部、
３２５  除外領域検出部、３３０  画像処理部、
３３５  シーン検出部、３４０  合焦評価領域設定部、
３５０  合焦評価値算出部、３６０  合焦状態検出部、
３７０  アシスト情報生成部、３８０  ＡＦ制御部、
３９０  制御部、４００  表示部、５００  外部Ｉ／Ｆ部、
６００  光源部、６２０  ライトガイドケーブル、
７１０  記憶部、７２０  操作部、７３０  フォーカス制御部、
ＡＨ，ＡＶ  ＡＦモードにおける合焦評価領域のサイズ、
ＬＨ，ＬＶ  被写体画像のサイズ、
ＭＨ，ＭＶ  ＭＦモードにおける合焦評価領域のサイズ
【図１】
2017072853.tif 000003
【図２】
2017072853.tif 000004
【図３】
2017072853.tif 000005
【図４】
2017072853.tif 000006
【図５】
2017072853.tif 000007
【図６】
2017072853.tif 000008
【図７】
2017072853.tif 000009
【図８】
2017072853.tif 000010
【図９】
2017072853.tif 000011
【図１０】
2017072853.tif 000012
【図１１】
2017072853.tif 000013
【図１２】
2017072853.tif 000014
【図１３】
2017072853.tif 000015
【図１４】
2017072853.tif 000016
【図１５】
2017072853.tif 000017
【図１６】
2017072853.tif 000018
【手続補正書】
【提出日】平成28年8月18日(2016.8.18)
【手続補正１】
【補正対象書類名】特許請求の範囲
【補正対象項目名】全文
【補正方法】変更
【補正の内容】
【特許請求の範囲】
【請求項１】
合焦物体位置を変更可能な光学系を有する撮像部により得られた被写体画像に合焦評価領域を設定する合焦評価領域設定部と、
マニュアルフォーカスモードでは、操作入力情報に基づいて前記合焦物体位置を制御し、オートフォーカスモードでは、前記合焦評価領域の画像から求められた合焦評価値に基づいて前記合焦物体位置を制御するフォーカス制御部と、
前記被写体画像を表示部に出力する画像出力部と、
アシスト情報生成部と、
前記被写体画像に基づいて被写体形状を検出する被写体形状検出部と、
を含み、
前記マニュアルフォーカスモードにおいて、
前記合焦評価領域設定部は、前記オートフォーカスモードにおいて設定される前記合焦評価領域よりも大きいサイズの前記合焦評価領域を設定し、
前記アシスト情報生成部は、前記大きいサイズに設定された前記合焦評価領域の画像から求められた前記合焦評価値に基づいて、前記合焦物体位置の調整を支援するアシスト情報を生成し、
前記画像出力部は、前記マニュアルフォーカスモードにおいて、前記被写体形状に基づいて前記被写体画像における領域の位置及びサイズ、形状の少なくとも１つが制御された前記領域についての前記アシスト情報を前記表示部に出力することを特徴とする撮像装置。
【請求項２】
請求項１において、
前記被写体画像の水平走査方向におけるサイズをＬＨとし、前記被写体画像の垂直走査方向におけるサイズをＬＶとし、前記合焦評価領域の前記水平走査方向におけるサイズをＭＨとし、前記合焦評価領域の前記垂直走査方向におけるサイズをＭＶとする場合に、
前記合焦評価領域設定部は、前記マニュアルフォーカスモードにおいて、ＭＨ≧ＬＨ×５０％及びＭＶ≧ＬＶ×５０％の少なくとも一方を満たす前記合焦評価領域を設定することを特徴とする撮像装置。
【請求項３】
請求項１において、
前記合焦評価領域の画像の各領域での合焦状態を前記合焦評価値に基づいて検出する合焦状態検出部を含み、
前記アシスト情報生成部は、前記合焦状態の判定結果に基づいて、前記合焦評価領域の画像の前記各領域における前記合焦状態を表す情報を前記アシスト情報として生成することを特徴とする撮像装置。
【請求項４】
請求項３において、
前記合焦状態検出部は、前記各領域が近点側の非合焦状態であるか否か、及び遠点側の非合焦状態であるか否かを判定し、
前記アシスト情報生成部は、前記近点側の非合焦状態であると判定された領域については前記近点側の非合焦状態であることを表す情報を前記アシスト情報として生成し、前記遠点側の非合焦状態であると判定された領域については前記遠点側の非合焦状態であることを表す情報を前記アシスト情報として生成することを特徴とする撮像装置。
【請求項５】
請求項１において、
前記合焦評価領域設定部は、前記マニュアルフォーカスモードにおいて、前記合焦評価領域の中央が前記被写体画像の中央に位置するように前記合焦評価領域を設定することを特徴とする撮像装置。
【請求項６】
（削除）
【請求項７】
（削除）
【請求項８】
請求項１において、
前記被写体画像に基づいて、前記アシスト情報を表示させない除外領域を検出する除外領域検出部を含み、
前記画像出力部は、前記マニュアルフォーカスモードにおいて、前記除外領域の情報に基づいて前記位置及び前記サイズ、前記形状の少なくとも１つが制御された前記領域についての前記アシスト情報を出力することを特徴とする撮像装置。
【請求項９】
請求項１において、
前記合焦評価領域設定部は、前記マニュアルフォーカスモードにおいて、前記被写体画像に基づいて前記合焦評価領域の位置及びサイズ、形状の少なくとも１つを制御し、
前記アシスト情報生成部は、前記合焦評価領域における前記アシスト情報を生成し、
前記画像出力部は、前記合焦評価領域である前記領域についての前記アシスト情報を出力することを特徴とする撮像装置。
【請求項１０】
請求項９において、
前記被写体画像に基づいて被写体形状を検出する被写体形状検出部を含み、
前記合焦評価領域設定部は、前記マニュアルフォーカスモードにおいて、前記被写体形状に基づいて前記合焦評価領域の位置及びサイズ、形状の少なくとも１つを制御することを特徴とする撮像装置。
【請求項１１】
請求項１において、
前記アシスト情報生成部は、前記アシスト情報を生成するアシスト情報生成領域の位置及びサイズ、形状の少なくとも１つを前記被写体画像に基づいて制御し、
前記画像出力部は、前記アシスト情報生成領域である前記領域についての前記アシスト情報を出力することを特徴とする撮像装置。
【請求項１２】
請求項１１において、
前記被写体画像に基づいて、前記アシスト情報を表示させない除外領域を検出する除外領域検出部を含み、
前記アシスト情報生成部は、前記合焦評価領域のうち前記除外領域を除く前記アシスト情報生成領域における前記アシスト情報を生成することを特徴とする撮像装置。
【請求項１３】
請求項１において、
前記画像出力部は、前記アシスト情報を表示させるアシスト情報表示領域の位置及びサイズ、形状の少なくとも１つを前記被写体画像に基づいて制御し、前記アシスト情報表示領域である前記領域についての前記アシスト情報を出力することを特徴とする撮像装置。
【請求項１４】
請求項１において、
前記被写体画像に基づいてシーンを検出するシーン検出部を含み、
前記アシスト情報生成部は、前記シーンに基づいて前記アシスト情報を生成することを特徴とする撮像装置。
【請求項１５】
請求項１において、
前記被写体画像に基づいてシーンを検出するシーン検出部を含み、
前記画像出力部は、前記シーンに基づいて前記アシスト情報を出力することを特徴とする撮像装置。
【請求項１６】
請求項１において、
前記画像出力部は、
前記被写体画像の各領域についての前記アシスト情報を、前記被写体画像の前記各領域に重畳して表示させることを特徴とする撮像装置。
【請求項１７】
請求項１において、
前記画像出力部は、前記表示部の表示領域において、前記被写体画像を第１領域に表示させ、前記アシスト情報を前記第１領域とは異なる第２領域に表示させることを特徴とする撮像装置。
【請求項１８】
請求項１において、
前記画像出力部は、前記表示部の表示領域において、前記被写体画像を第１領域に表示させ、前記アシスト情報を前記第１領域の内部に配置される第２領域に表示させることを特徴とする撮像装置。
【請求項１９】
請求項１において、
前記画像出力部は、前記マニュアルフォーカスモードにおいて、前記合焦物体位置が所定期間調整されない場合には前記アシスト情報を非表示にし、前記アシスト情報を非表示にした後に前記合焦物体位置が調整された場合には前記アシスト情報を表示させることを特徴とする撮像装置。
【請求項２０】
請求項１に記載された撮像装置を含むことを特徴とする内視鏡装置。
【請求項２１】
操作入力情報に基づいて撮像部の合焦物体位置を制御するマニュアルフォーカスモードにおいて、合焦評価値に基づいて前記合焦物体位置を制御するオートフォーカスモードにおいて設定される合焦評価領域よりも大きいサイズの前記合焦評価領域を、前記撮像部により得られた被写体画像に設定し、
前記マニュアルフォーカスモードにおいて、前記合焦評価領域の画像から求められた合焦評価値に基づいて、前記合焦物体位置の調整を支援するアシスト情報を生成し、
前記被写体画像に基づいて被写体形状を検出し、
前記マニュアルフォーカスモードにおいて、前記被写体形状に基づいて前記被写体画像における領域の位置及びサイズ、形状の少なくとも１つが制御された前記領域についての前記アシスト情報と、前記被写体画像とを表示部に出力することを特徴とする撮像装置の作動方法。
【国際調査報告】
2017072853.tif 000019
2017072853.tif 000020
2017072853.tif 000021
2017072853.tif 000022