(57)【特許請求の範囲】
【請求項１】
立体内視鏡に設けられた左右の撮像素子の出力信号に基づく、左目用の画像を表す左目用画像信号と右目用の画像を表す右目用画像信号との同期調整を行うよう構成された同期調整部と、
前記左目用画像信号及び前記右目用画像信号の少なくとも一方の画像信号の画像における中央領域の周囲の周辺領域上において、
処置具の画像が占める領域を解析するよう構成された画像解析部と、
ぼかし処理が施されない前記中央領域の画像の周囲に配置される前記周辺領域における前記画像に対して、前記画像解析部の解析結果に応じてぼかし処理を施す領域としてのぼかし領域を設定するぼかし領域設定部と、
前記同期調整部の同期調整結果と、前記ぼかし領域設定部の設定結果に応じて前記左目用の画像と前記右目用の画像に対してそれぞれぼかし処理を施した３Ｄ画像を合成して出力するよう構成された画像合成部と、
を備えることを特徴とする立体内視鏡画像処理装置。
【請求項２】
更に、前記画像解析部の解析結果に応じて前記周辺領域における前記画像にぼかし処理を施す際のぼかし強度と前記ぼかし領域設定部による前記ぼかし領域との情報を生成するよう構成されたぼかし情報生成部を有することを特徴とする請求項１に記載の立体内視鏡画像処理装置。
【請求項３】
前記画像解析部は、
入力された前記画像信号により得られる前記画像における前記中央領域の周囲の前記周辺領域を細分化し、所定数の領域に分割するよう構成された画像分割部と、
前記所定数の各領域内の色成分を分析するよう構成された色成分分析部と、
前記各領域内の直進性成分のエッジ成分を抽出するよう構成された画像エッジ成分抽出部と、
前記色成分分析部の分析結果と前記画像エッジ成分抽出部の抽出結果とから前記周辺領域上における前記処置具の画像が占める領域の大きさを評価するよう構成された処置具領域評価部と、
前記処置具領域評価部の評価結果から前記処置具の画像が前記周辺領域上において最も内側の領域としての最内領域に存在する領域のブロックを最内ブロック領域として検知するよう、前記最内ブロック領域を検知するための演算を行うよう構成された最内ブロック領域演算部と、
前記処置具領域評価部の評価結果から前記処置具の画像が前記周辺領域上において最も外側の領域としての最外領域に存在する領域のブロックを最外ブロック領域として検知するよう、前記最外ブロック領域を検知するための演算を行うよう構成された最外ブロック領域演算部と、
を有することを特徴とする請求項２に記載の立体内視鏡画像処理装置。
【請求項４】
更に、前記画像合成部に設けられ、前記左目用の画像と前記右目用の画像に対して、前記ぼかし情報生成部により生成されたぼかし領域において、前記ぼかし強度でそれぞれぼかし処理を施すよう構成されたぼかし処理部と、
前記画像合成部に設けられ、前記ぼかし処理部によりそれぞれぼかし処理された前記左目用の画像と前記右目用の画像を合成するよう構成された合成部と、
を備えることを特徴とする請求項３に記載の立体内視鏡画像処理装置。
【請求項５】
更に、前記最内ブロック領域演算部の演算結果により前記最内領域の全領域数に対する前記最内ブロック領域を形成する領域数が占める割合に応じて前記ぼかし情報生成部が前記ぼかし領域を設定するよう制御し、前記最外ブロック領域演算部の演算結果により前記最外領域の全領域数に対する前記最外ブロック領域を形成する領域数が占める割合に応じて前記ぼかし情報生成部が前記ぼかし強度を設定するよう制御し、前記ぼかし処理部が前記左目用の画像と前記右目用の画像に対して、前記ぼかし情報生成部により設定された前記ぼかし領域において、前記ぼかし強度でぼかし処理をそれぞれ行うよう制御するよう構成された制御部と、
を有することを特徴とする請求項４に記載の立体内視鏡画像処理装置。
【請求項６】
前記制御部は、前記最内ブロック領域演算部の演算結果により前記最内ブロック領域を形成する領域数が大きくなるに従って、前記ぼかし領域を前記最外領域から前記最内領域側に広げるように設定する制御を行い、
更に、前記最外ブロック領域演算部の演算結果により前記最外ブロック領域を形成する領域数が大きくなるに従って、前記ぼかし領域における前記ぼかし強度を段階的に大きく設定するように制御することを特徴とする請求項５に記載の立体内視鏡画像処理装置。
【請求項７】
前記制御部は、前記左目用画像信号及び前記右目用画像信号における一方の画像信号の画像における第１の周辺領域のみを前記周辺領域として、前記第１の周辺領域における前記ぼかし領域と前記ぼかし強度を設定するよう制御し、
前記制御部は、更に前記左目用画像信号及び前記右目用画像信号における他方の画像信号の画像における第２の周辺領域に対しては、前記第１の周辺領域に対して設定した前記ぼかし領域及び前記ぼかし強度を適用するように制御することを特徴とする請求項５に記載の立体内視鏡画像処理装置。
【請求項８】
前記制御部は、前記左目用画像信号及び前記右目用画像信号における一方の画像信号の画像における第１の周辺領域のみを前記周辺領域として、前記第１の周辺領域における前記ぼかし領域と前記ぼかし強度を設定するよう制御し、
前記制御部は、更に前記左目用画像信号及び前記右目用画像信号における他方の画像信号の画像における第２の周辺領域に対しては、前記第１の周辺領域に対して設定した前記ぼかし領域及び前記ぼかし強度を適用するように制御することを特徴とする請求項６に記載の立体内視鏡画像処理装置。
【請求項９】
前記同期調整部は、前記画像解析部により処置具の画像が占める領域の解析が行われる一方の画像信号の画像と同じフレームに属する他方の画像信号の画像を一時的に記憶するメモリを有し、前記一方の画像信号が入力されるフレームから前記一方の画像信号の画像及び前記他方の画像信号の画像に対して前記ぼかし処理部によりぼかし処理された３Ｄの画像信号を１フレーム期間後に出力するように同期調整することを特徴とする請求項４に記載の立体内視鏡画像処理装置。
【請求項１０】
前記立体内視鏡画像処理装置を、立体視用の３Ｄメガネを用いて観察者が観察する３Ｄ画像を表示する表示画面を備えた３Ｄモニタに設けることを特徴とする請求項４に記載の立体内視鏡画像処理装置。
【請求項１１】
前記立体内視鏡画像処理装置を、前記立体内視鏡に設けられた左右の撮像素子の出力信号からそれぞれ生成された前記左目用画像信号と前記右目用画像信号とが入力され、３Ｄ画像を表示する３Ｄモニタに対して３Ｄ画像信号を出力する３Ｄミキサに設けることを特徴とする請求項４に記載の立体内視鏡画像処理装置。
【請求項１２】
前記ぼかし情報生成部は、前記最内ブロック領域演算部により演算される前記最内ブロック領域の割合の情報と、前記最外ブロック領域演算部により演算される前記最外ブロック領域の割合の情報とに応じて、それぞれ前記ぼかし処理部がぼかし処理を施す前記ぼかし領域と前記ぼかし強度、又は前記ぼかし強度と前記ぼかし領域の情報に対応付けたルックアップテーブルとして格納する情報格納部を有することを特徴とする請求項４に記載の立体内視鏡画像処理装置。
【請求項１３】
更に、前記最外ブロック領域演算部の演算結果により前記最外領域の全領域数に対する前記最外ブロック領域を形成する領域数が占める割合に応じて前記ぼかし情報生成部が前記ぼかし領域を設定するよう制御し、前記最内ブロック領域演算部の演算結果により前記最内領域の全領域数に対する前記最内ブロック領域を形成する領域数が占める割合に応じて前記ぼかし情報生成部が前記ぼかし強度を設定するよう制御し、前記ぼかし処理部が前記左目用の画像と前記右目用の画像に対して、前記ぼかし情報生成部により設定される前記ぼかし領域において、前記ぼかし強度でぼかし処理をそれぞれ行うよう制御するよう構成された制御部を有することを特徴とする請求項４に記載の立体内視鏡画像処理装置。
【請求項１４】
前記制御部は、前記最外ブロック領域演算部の演算結果により前記最外ブロック領域を形成する領域数が大きくなるに従って、前記ぼかし領域を前記最外領域から前記最内領域側に広げるように設定する制御を行い、
更に、前記最内ブロック領域演算部の演算結果により前記最内ブロック領域を形成する領域数が大きくなるに従って、前記ぼかし領域における前記ぼかし強度を段階的に大きく設定するように制御することを特徴とする請求項１３に記載の立体内視鏡画像処理装置。
【請求項１５】
前記画像分割部は、前記周辺領域を、前記中央領域の外側に隣接して囲むように設けられた前記最内領域に属する複数の領域と、前記最内領域の外側に囲むようにして前記画像における最も外側に設けられた前記最外領域に属する複数の領域と、を含むように分割することを特徴とする請求項４に記載の立体内視鏡画像処理装置。
【請求項１６】
更に、前記左右の撮像素子を備えた前記立体内視鏡と、
前記左右の撮像素子に対する画像処理を行い、前記左目用画像信号と前記右目用画像信号を生成する画像処理装置と、
前記画像処理装置により生成される前記左目用画像信号と前記右目用画像信号から３Ｄの画像信号を生成する３Ｄミキサと、
前記３Ｄミキサから出力される前記３Ｄの画像信号が入力されることにより３Ｄの画像を表示する３Ｄモニタと、を備え、
前記３Ｄミキサ又は前記３Ｄモニタが前記同期調整部と、前記画像解析部とを備えることを特徴とする請求項４に記載の立体内視鏡画像処理装置。
【請求項１７】
前記ぼかし処理部は、前記ぼかし処理として、前記ぼかし領域内に含まれるぼかし対象画素における色情報を、前記ぼかし領域内における前記ぼかし対象画素の周囲の画素に段階的に波及させることで、前記ぼかし対象画素における色情報を前記周囲の画素に滲ませる処理を行うことを特
徴とする請求項４に記載の立体内視鏡画像処理装置。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、立体内視鏡による左右の画像信号に対して画像処理を行う立体内視鏡画像処理装置に関する。
【背景技術】
【０００２】
近年、医療分野等において内視鏡が広く用いられるようになっている。また、精度を要する手術等を行うような場合においては、１つの撮像素子を用いた通常の内視鏡においては知覚し難い、奥行き方向に対しての立体感（奥行き感）を知覚できる立体内視鏡が用いられる場合がある。  
立体内視鏡を用いた場合には、左右の撮像素子により得られる左右の画像信号に対する画像処理を行い、生成した立体画像信号を表示部又は表示装置に出力する画像処理装置が用いられる。  
また、画像処理装置の従来例として、日本国特開２０１１−８２８２９号公報においては、右目用画像又は左目用画像における中央領域よりも、周辺領域に対してより大きいぼかし処理を行う内容を開示している。また、右目用画像及び左目用画像のずれ量が大きい程、より大きいぼかし強度に設定する内容を開示している。このようなぼかし処理を施すことにより、観察者が右目用画像及び左目用画像を融合して立体画像として認識し易いようにしている。【０００３】
しかしながら上記の従来例は、体腔内において立体内視鏡により撮像した左右の画像信号を表示画面に立体観察用画像として表示し、観察者としての術者が立体画像を観察して、高い精度を要する手術等を行うような場合においては、術者の要望を満たすことが困難である。  
術者は、体腔内における病変部を表示画面の中央領域に設定して手術等を行っている状況においては、術者は表示画面の中央領域部分の画像に没入（集中）している状態となり、その状態において、周辺領域側から処置具が病変部に向かって中央領域側に入ってくると、術者は観察している内視鏡画像（立体画像）の端側から突然、大きな処置具が飛び出してくるイメージを受け、手術に集中している状態を途切れさせるような要因となる。【０００４】
また、例えば左右方向から処置具を中央領域に挿入して吻合する処置を行う場合においても、術者は、表示画面の中央領域において吻合を行っている様子を観察し、吻合している箇所を立体的に知覚して吻合するための運針の作業を行っている状況であり、左右からの処置具のロッド部分が表示画面の左右方向から手前側に飛び出すような錯覚を受け、処置具のロッド部分に対して、違和感を感じ易い（知覚特性になる）。このため術者が立体観察しながら手術等を行うような場合、正常な体観察の知覚特性が処置具に起因して低下してしまう要因を抑制又は軽減することが望まれる。  
このように処置具が原因で立体観察の知覚特性が低下してしまうため、従来例における右目用画像及び左目用画像のずれ量に応じてぼかし量を調整しても、上記のような立体観察の知覚特性の低下を適切に改善できない。  
本発明は上述した点に鑑みてなされたもので、立体観察の知覚特性を維持しつつ、処置具による立体観察の知覚特性の低下を抑制または軽減する画像処理を行う立体内視鏡画像処理装置を提供することを目的とする。
【発明の開示】
【課題を解決するための手段】
【０００５】
本発明の一態様に係る立体内視鏡画像処理装置は、立体内視鏡に設けられた左右の撮像素子の出力信号に基づく、左目用画像を表す左目用画像信号と右目用画像を表す右目用画像信号との同期調整を行うよう構成された同期調整部と、前記左目用画像信号及び前記右目用画像信号の少なくとも一方の画像信号の画像における中央領域の周囲の周辺領域上において、処置具の画像が占める領域を解析するよう構成された画像解析部と、ぼかし処理が施されない前記中央領域の画像の周囲に配置される前記周辺領域における前記画像に対して、前記画像解析部の解析結果に応じてぼかし処理を施す領域としてのぼかし領域を設定するぼかし領域設定部と、前記同期調整部の同期調整結果と、前記ぼかし領域設定部の設定結果に応じて前記左目用画像と前記右目用画像に対してそれぞれぼかし処理を施した３Ｄ画像を合成して出力するよう構成された画像合成部と、を備える。
【図面の簡単な説明】
【０００６】
【図１】図１は本発明の第１の実施形態を備えた立体内視鏡装置の全体構成を示す図。
【図２】図２は第１の実施形態の画像処理部を備えた３Ｄモニタを含む立体内視鏡装置の内部構成を示す図。
【図３】図３は第１の実施形態の画像処理部の構成を示すブロック図。
【図４】図４はより詳細な画像処理部の構成を示すブロック図。
【図５】図５は画像解析処理回路の構成を示すブロック図。
【図６Ａ】図６Ａは左の画像における中央領域の周囲の周辺領域を複数の小さな領域に分割した様子を示す図。
【図６Ｂ】図６Ｂは周辺領域において色分析とエッジ検出を行った様子を示す図。
【図６Ｃ】図６Ｃは周辺領域における最内領域において処置具が存在する領域としての最内ブロック領域を示す図。
【図６Ｄ】図６Ｄは周辺領域における最外領域において処置具が存在する領域としての最外ブロック領域を示す図。
【図７】図７は第１の実施形態の代表的な動作に対応した処理内容を示すフローチャート。
【図８Ａ】図８Ａはぼかし領域を生成又は設定する処理手順を示すフローチャート。
【図８Ｂ】図８Ｂは図８Ａの処理により最内ブロック領域の割合に応じて設定されるぼかし領域の範囲を示す図。
【図９Ａ】図９Ａはぼかし強度を生成又は設定する処理手順を示すフローチャート。
【図９Ｂ】図９Ｂは図９Ａの処理により最外ブロック領域の割合に応じて設定されるぼかし強度を示す図。
【図１０】図１０はぼかし前の画像と、ぼかし処理された画像とを示す図。
【図１１Ａ】図１１Ａはぼかし領域に対してぼかし処理を行う場合の説明図。
【図１１Ｂ】図１１Ｂは図１１Ａにおける数値例を用いてぼかし処理を行う場合の説明図。
【図１２】図１２は第１の実施形態の動作のタイミングチャート。
【図１３】図１３は第１の実施形態の変形例を備えた立体内視鏡装置の内部構成を示す図。
【発明を実施するための形態】
【０００７】
以下、図面を参照して本発明の実施形態を説明する。  
（第１の実施形態）
図１に示すように本発明の立体内視鏡画像処理装置を備えた立体内視鏡装置１は、手術室内の手術台２に横たわる患者３に対して、立体観察のために使用される立体内視鏡（３Ｄ内視鏡と略記）４と、トロリー５に搭載された複数の医療機器とを備える。  
トロリー５には、複数の医療機器として、照明光を発生する光源装置６と、左目用の画像信号を生成する第１のプロセッサ７Ａと、右目用の画像信号を生成する第２のプロセッサ７Ｂと、両プロセッサ７Ａ、７Ｂからの第１及び第２の画像信号から立体（３Ｄ）観察用の３次元（３Ｄ）の画像信号を生成する画像生成装置としての３次元ミキサ（３Ｄミキサと略記）８と、３Ｄミキサ８により生成された３Ｄの画像信号を表示する３Ｄモニタ９と、３Ｄモニタ９に表示される立体観察用（３Ｄ用）画像を立体視するために例えば術者Ｄがかける３Ｄメガネ１０を備える。  
また、本実施形態においては、本発明の立体内視鏡画像処理装置を構成する画像処理部（又は画像処理回路）１１を３Ｄモニタ９内に設けている(図２参照)。第１のプロセッサ７Ａ、第２のプロセッサ７Ａを、左目用プロセッサ、右目用プロセッサとも言う。図２においては、プロセッサ（左目用）、プロセッサ（右目用）として示している。なお、立体内視鏡画像処理装置を画像処理部１１（又は後述する１１Ｂ）の場合に限定されるものでなく、立体内視鏡装置１（又は後述する１Ｂ）により形成しても良い。
【０００８】
患者３の例えば腹部３ａに図示しないトラカールを介して刺入される３Ｄ内視鏡４は、ライトガイドケーブル１２を介して光源装置６と接続される。また、３Ｄ内視鏡４は、信号ケーブル１３（なお、図２に示すように２本の信号ケーブル１３ａ，１３ｂにしても良い）を介して、プロセッサ７Ａ，７Ｂに接続される。  
また、トロリー５には、電気メス電源装置又は電気メス装置１４が搭載され、処置具として、例えば電気メス１６を用いる場合には、電気メスケーブル１５を介して電気メス１６に高周波信号を供給する。  
また、患者３の腹部３ａには、図示しない助手により操作される処置具１７が刺入され、術者Ｄが行う手術を円滑に行えるように助手は処置具１７を操作する。なお、図１においては処置具として電気メス１６と符号１７で示す処置具とを区別して示しているが、図６Ｂ等において示すように複数の処置具１７ａ，１７ｂ，１７ｃであっても良い。図２は、図１における主要な医療機器の内部構成を示す。
【０００９】
３Ｄ内視鏡４は、体内に挿入される挿入部２１と、挿入部２１の後端（基端）に設けられ、術者Ｄ又は助手により把持される把持部２２と、把持部２２から延出されたライトガイドケーブル１２と信号ケーブル１３ａ，１３ｂとを有し、ライトガイドケーブル１２の端部は光源装置６に着脱自在に接続される。  
光源装置６は、白色の照明光を発生するランプ２３と、照明光を集光してライトガイドケーブル１２の端部に入射（供給）する集光レンズ２４とを有する。ライトガイドケーブル１２に入射された照明光は、挿入部２１内を挿通されたライトガイド２５の基端側端部に入射される。このライトガイド２５は、基端側端部に入射された照明光をこのライトガイド２５の先端側の端部に伝送し、ライトガイド２５の先端面が配置された照明窓から照明光を出射し、体内の病変部等の被写体を照明する。  
挿入部２１の先端部には、左右方向に距離ｄだけ離間して、被写体の光学像を結ぶための左目用対物レンズ２６ａと右目用対物レンズ２６ｂとが配置され、それぞれの結像位置には左目用撮像素子としての左目用電荷結合素子（ＣＣＤと略記）２７ａの撮像面と、右目用撮像素子としての右目用ＣＣＤ２７ｂの撮像面とが配置されている。
【００１０】
なお、本明細書においては、左の撮像素子は左目用撮像素子と同じ意味であり、同様に右の撮像素子は右目用撮像素子と同じ意味であり、撮像素子以外においても同様の意味で用いる。例えば左目用画像信号と右目用画像信号は、左右の画像信号と同じ意味となる。  
左右のＣＣＤ２７ａ、２７ｂは、結像された光学像を光電変換した出力信号としての撮像信号を出力する。左目用対物レンズ２６ａと左目用ＣＣＤ２７ａとにより左目用撮像部又は左撮像部（左撮像デバイス）２８ａが形成され、右目用対物レンズ２６ｂと右目用ＣＣＤ２７ｂとにより右目用撮像部又は右撮像部（右撮像デバイス）２８ｂが形成される。上記距離ｄを有し同じ被写体を、視線方向が異なる両撮像部２８ａ，２８ｂにより撮像して、表示装置としての３Ｄモニタ９に３Ｄ観察用画像を表示することにより、３Ｄ観察用画像を観察する（観察者としての）術者Ｄは、被写体における各部を立体感又は奥行き感を知覚して観察することができる。
【００１１】
ＣＣＤ２７ａは、３Ｄ内視鏡４内を挿通され、外部に延出された信号ケーブル１３ａを介して、その後端の信号コネクタ２９ａが第１のプロセッサ７Ａの信号コネクタ受け３１ａに着脱自在に接続され、ＣＣＤ２７ｂは、３Ｄ内視鏡４内を挿通され、外部に延出された信号ケーブル１３ｂを介して、その後端の信号コネクタ２９ｂが第２のプロセッサ７Ｂの信号コネクタ受け３１ｂに着脱自在に接続される。  
第１のプロセッサ７Ａは、ＣＣＤ２７ａにより生成された左目用の撮像信号から左目用の２次元（２Ｄ）の画像信号を生成する画像生成部（又は画像生成回路）３２ａと、画像生成部３２ａにより生成した２Ｄの画像信号を出力する画像出力インタフェース（図２では出力ＩＦと略記）３３ａと、２Ｄの画像信号を生成する際の同期信号の通信を行う同期信号通信部（又は同期信号通信回路）３４ａとを有する。画像生成部３２ａにより生成された左目用の２Ｄの画像信号は、画像出力インタフェース３３ａを介して３Ｄミキサ８に出力される。
【００１２】
同様に、第２のプロセッサ７Ｂは、ＣＣＤ２７ｂにより生成された右目用の撮像信号から右目用の２次元（２Ｄ）の画像信号を生成する画像生成部（又は画像生成回路）３２ｂと、画像生成部３２ｂにより生成した右目用の２Ｄの画像信号を出力する画像出力インタフェース（出力ＩＦ）３３ｂと、２Ｄの画像信号を生成する際の同期信号の通信を行う同期信号通信部（又は同期信号通信回路）３４ｂと、を有する。画像生成部３２ｂにより生成された右目用の２Ｄの画像信号は、画像出力インタフェース３３ｂを介して３Ｄミキサ８に出力される。  
同期信号通信部３４ａ，３４ｂは、一方から他方に同期信号を送信し、送信された他方の同期信号通信部は、送信された同期信号と同期した同期信号を生成する。換言すると、両同期信号通信部３４ａ，３４ｂは、通信を行った後、同じ同期信号を生成する状態となり、両画像生成部３２ａ，３２ｂは同じ同期信号に同期してそれぞれ左目用と右目用の２Ｄの画像信号をそれぞれ生成する状態となる。
【００１３】
なお、画像生成部３２ａ，３２ｂは、それぞれ画像出力インタフェース３３ａ，３３ｂを含む構成にしても良い。  
３Ｄミキサ８は、両画像生成部３２ａ，３２ｂによりそれぞれ生成された左目用の２Ｄの画像信号と右目用の２Ｄの画像信号とが入力される画像入力インタフェース（図２では入力Ｉ／Ｆと略記）３６ａ，３６ｂと、両画像入力インタフェース３６ａ，３６ｂから入力された左目用の２Ｄの画像信号と右目用の２Ｄの画像信号とから３Ｄの画像信号（又は映像信号）を生成する３Ｄ画像生成部（又は３Ｄ画像生成回路）３７と、生成した３Ｄの画像信号を外部の３Ｄモニタ９に出力する画像出力インタフェース（図２では出力Ｉ／Ｆ）３８と、を有する。  
３Ｄ画像生成部３７は、例えば入力された両２Ｄの画像信号の周期を１／２倍に圧縮して表示レートを倍速にする。そして、２Ｄの画像信号における１フレーム期間の半分の第１フィールド（奇数フィールド）には、左目用の２Ｄの画像信号、第２フィールド（偶数フィールド）には、右目用の２Ｄの画像信号を有する３Ｄの画像信号を生成する。換言すると、３Ｄ画像生成部３７は、左右の２Ｄの画像信号を３Ｄの画像信号に変換する２Ｄ／３Ｄ変換部（（又は２Ｄ／３Ｄ変換回路））と言うこともできる。
【００１４】
３Ｄモニタ９は、３Ｄの画像信号が入力される画像入力インタフェース（入力Ｉ／Ｆ）４１ａと、左右の撮像素子により撮像された左右の撮像画像（単に画像とも言う）に基づいて生成された３Ｄの画像信号（映像信号）から、左右の画像における周辺領域上における処置具（図１の構成の説明においては、処置具１７と、電気メス１６による処置具では異なる番号で示しているが、画像処理する場合の処置具としては異なる種類として検出しないので、以下では処置具１７は複数であることを明示する場合には１７ａ，１７ｂ，１７ｃで表す）が存在する領域を解析し、当該領域の処置具１７の画像に対してぼかし処理を施した３Ｄの合成画像信号を生成する画像処理を行う画像処理部１１と、生成された３Ｄの合成画像信号を表示する表示部（又は表示パネル）４３と、画像処理部１１の画像処理パラメータの設定操作等を行う操作部（又は操作回路）４４と、画像処理部１１及び表示部４３の制御を行う制御部（又は制御回路）４５とを有する。  
また、３Ｄモニタ９の表示部４３の表示画面に表示される３Ｄの画像を観察する術者Ｄは、左右の目の直前に互いに直交する方向の光を通す左右の偏光板４７ａ，４７ｂを有する３Ｄメガネ１０を用いる。
【００１５】
図３は、画像処理部１１の構成を示す。画像処理部１１は、３Ｄの画像信号から左右の画像信号に分離する分離部（又は分離回路）を構成する切替スイッチ５１と、切替スイッチ５１により分離された一方の画像信号（ここでは左の画像信号）の画像における処置具１７が占める領域を解析する画像解析部（又は画像解析回路）５２と、一方の画像信号と他方の画像信号（ここでは右の画像信号）との同期調整を行う同期調整部（又は同期調整回路）５３と、画像解析部５２による解析結果に応じてぼかし処理を施す情報としてのぼかし情報を格納したデータベースデバイス（ＤＢと略記）を形成するリファレンスＤＢ（ぼかし情報参照用ＤＢ）５４と、同期調整された一方の画像信号と他方の画像信号に対して、画像解析部５２による解析結果に対応したぼかし情報を施した３Ｄの画像信号としての３Ｄの合成画像信号を出力する画像合成部（又は画像合成回路）５５と、同期調整部５３のタイミング信号に基づいて、画像解析部５２、同期調整部５３、リファレンスＤＢ５４、及び画像合成部５５を制御する制御部（又は制御回路）５６と、を有する。
【００１６】
なお、上記同期調整部５３は、一方の画像信号と他方の画像信号とをそれぞれぼかし処理して同期した３Ｄの合成画像信号を出力させるようにタイミング調整を行うタイミング調整部（又はタイミング調整回路）と言うこともできる。
【００１７】
図４は、図３の画像処理部１１のより具体的な構成を示す。
【００１８】
３Ｄミキサ８から入力される３Ｄ画像信号は、切替スイッチ５１に入力されると共に、同期調整部５３の同期分離回路５３ａに入力される。同期分離回路５３ａは、３Ｄ画像信号から同期信号を抽出し、この同期信号が入力される切替信号生成回路５３ｂは同期信号に同期した１フレームの半分の１フィールド毎にＨ，Ｌとなる切替信号を生成し、この切替信号により、３Ｄ画像信号が入力される切替スイッチ５１を切り替える。  
切替スイッチ５１の接点ａから例えば奇数フィールド毎に出力される左の画像信号は、画像解析部５２に入力され、画像解析部５２を構成するキャプチャー回路５２ａ内のメモリコントローラ５２ｂは、メモリ５２ｃに１フレーム分の左の画像信号を格納する。  
また、切替スイッチ５１の接点ｂから例えば偶数フィールド毎に出力される右の画像信号は、同期調整部５３に入力され、同期調整部５３内のメモリコントローラ５３ｃは、メモリ５３ｄに１フレーム分の右の画像信号を格納する。
【００１９】
また、同期調整部５３は、同期信号に同期したタイミング信号を生成するタイミング信号生成回路５３ｅを有し、タイミング信号生成回路５３ｅが出力するタイミング信号によりメモリコントローラ５３ｃは、メモリ５３ｄのリード／ライトを制御する。また、タイミング信号生成回路５３ｅが生成するタイミング信号は、同期調整部５３の外部の画像解析部５２、画像合成部５５，制御部５６に出力して、タイミング信号に同期した動作を行うことができるようにしている（図４では同期調整部５３の外部に出力されるタイミング信号の出力ラインは制御部５６に出力される以外は省略）。  
画像解析部５２は、上記メモリ５２ｃに格納された左の画像信号の画像に対して、当該画像上における中央領域の周囲の周辺領域上において、処置具１７が占める領域を解析する画像解析処理を行う画像解析処理部を形成する画像解析処理回路５２ｄを有する。  
この画像解析処理回路５２ｄのより詳細な構成及び動作は、図５を参照して後述する。また、上記中央領域及び周辺領域は、図６Ａを用いて後述する。
【００２０】
画像解析処理回路５２ｄは、画像解析処理により生成した解析結果データをリファレンスＤＢ５４に出力する。リファレンスＤＢ５４は、解析結果データを入力データとして、入力データに対応したぼかしデータを出力するように、例えばルックアップテーブル（ＬＵＴと略記）５４ａを備える。従って、リファレンスＤＢ５４は、解析結果データに対応したぼかしデータを生成又は出力する。リファレンスＤＢ５４は、ぼかしデータを画像合成部５５内のぼかしフィルタ回路５５ａに出力する。  
画像合成部５５は、ぼかしデータによりぼかしフィルタ処理を行うぼかし処理部を形成するぼかしフィルタ回路５５ａと、メモリ５２ｃ、５３ｄから読み出されて入力された画像信号に対してぼかしフィルタ回路５５ａによりぼかし処理された２つの画像信号を奇数フィールドと偶数フィールドに分けて重畳（加算）して合成する重畳回路（又は合成回路）５５ｂとを有する。また、重畳回路５５ｂは、ぼかしフィルタ回路５５ａによりぼかしフィルタ処理がされた画像信号を一時的に記憶するメモリ５５ｃを有する。なお、メモリ５５ｃをぼかしフィルタ回路５５ａに設けるようにしても良い。  
画像解析部５２（のメモリコントローラ５２ｂ）は、ぼかしフィルタ回路５５ａがぼかしデータの入力によって、ぼかしフィルタ処理が可能な状態に設定されると、メモリ５２ｃから左の画像信号を読み出して画像合成部５５のぼかしフィルタ回路５５ａに入力させる。また、画像解析部５２（のメモリコントローラ５２ｂ）は、メモリ５２ｃから左の画像信号を読み出しが終了すると、読み出し終了を同期調整部５３（のメモリコントローラ５３ｃ）に送り、同期調整部５３（のメモリコントローラ５３ｃ）は、メモリ５３ｄから右の画像信号を読み出して画像合成部５５のぼかしフィルタ回路５５ａに入力させる。
【００２１】
なお、同期調整部５３（のメモリコントローラ５３ｃ）は、左の画像信号を読み出しが終了後（換言すると画像解析を開始した時）から画像解析に要する時間と、ぼかし処理に要する時間を考慮してメモリ５３ｄから右の画像信号を読み出して画像合成部５５に出力する。
【００２２】
そして、上記のようにぼかしフィルタ回路５５ａは、メモリ５２ｃ、５３ｄから読み出されて入力された左右の画像信号に対して、順次ぼかし処理を行い、重畳回路５５ｂに出力する。なお、画像解析部５２の画像解析処理回路５２ｄが画像解析を終了したタイミングにおいて、画像解析処理回路５２ｄが同期調整部５３（のメモリコントローラ５３ｃ）に画像解析を終了した信号を送り、同期調整部５３（のメモリコントローラ５３ｃ）は、左の画像信号の画像に対するぼかし処理に要する時間を考慮してメモリ５３ｄから右の画像信号を読み出して画像合成部５５に出力するように同期調整（又はタイミング調整）しても良い。
【００２３】
又は、ぼかしフィルタ回路５５ａが左の画像信号の画像に対するぼかし処理が終了したタイミングにおいて、同期調整部５３（のメモリコントローラ５３ｃ）に対してぼかし処理が終了した信号を送り、この信号を受けて同期調整部５３（のメモリコントローラ５３ｃ）がメモリ５３ｄから右の画像信号を読み出して画像合成部５５に出力する同期調整（又はタイミング調整）を行うようにしても良い。
【００２４】
重畳回路５５ｂは、１フィールド以内のタイミングで順次入力される左右の画像信号に対して順次ぼかし処理を行い、ぼかし処理した左右の画像信号を、重畳回路５５ｂ内のメモリ５５ｃに一時的に格納した後、１フィールド毎に左右の画像信号を出力するようにタイミング調整して読み出すことにより、合成した３Ｄ合成画像信号を表示部４３に出力する。このため、画像処理部１１を構成する、左右の画像信号の同期調整を行う同期調整部を図４における同期調整部１１と、このメモリ５５ｃとから構成されると見なすこともできる。
【００２５】
なお、後述するようにぼかしフィルタ回路５５ａが２つのぼかしフィルタ回路から構成される場合には、メモリ５２ｃ、５３ｄから同時に左右の画像信号を出力させるようにしても良い。
【００２６】
図５に示す画像解析処理回路５２ｄは、左の画像信号の画像を画像解析するために所定数となる複数の領域に分割（又は細分化）する画像分割部を形成する画像分割回路６１と、分割された各領域内の色成分を分析する色成分分析部を形成する色成分分析回路６２と、分割された各領域内の直進性成分のエッジ成分を抽出する画像エッジ成分抽出部を形成する画像エッジ成分抽出回路６３と、色成分分析回路６２の分析結果と画像エッジ成分抽出回路６３の抽出結果とから周辺領域上における処置具１７の画像が占める領域の大きさ（ブロック又は領域数）を評価する処置具領域評価部を形成する処置具領域評価回路６４と、を有する。
【００２７】
上記画像分割回路６１は、図６Ａに示すように左の画像信号の画像の全領域を、中央領域Ｒｃと、該中央領域Ｒｃの周囲の周囲領域又は周辺領域Ｒｎとに分割すると共に、周辺領域Ｒｎを複数の領域Ｒｂとして例えば分割数Ｎの領域Ｒｂに分割する。なお、図６Ａは、中央領域Ｒｃ、周辺領域Ｒｎ、複数の領域Ｒｂを明示するために画像を示さない状態で、中央領域Ｒｃ、周辺領域Ｒｎ、複数の領域Ｒｂを明示し、図６Ｂ〜図６Ｄにおいては複数の処置具１７ａ，１７ｂ，１７ｃが存在する場合の画像を示している。上述したように、明細書中においては複数の処置具１７ａ，１７ｂ，１７ｃの存在を強調（明示）する必要性が高くない場合には処置具１７で表す。  
中央領域Ｒｃのサイズは、ユーザがキーボードやマウスなどを用いて、例えば画像解析処理回路５２ｄに設けた領域設定部（又は領域設定デバイス）６５から設定することができる。つまり、領域設定部６５は、キーボードやマウス等による構成される。なお、領域設定部６５を画像解析処理回路５２ｄの外部に設けるようにしても良い。  
中央領域Ｒｃが設定されるとその外側の領域が周辺領域Ｒｎとなる。また、術者Ｄ等のユーザは、領域設定部６５から周辺領域Ｒｎを複数の領域Ｒｂを設定する場合、その個数又はサイズを自由に設定することができる。
【００２８】
なお、中央領域Ｒｃは、術者Ｄが鮮明な画像の状態で立体観察の視覚特性が望まれる画像領域となる。これに対して、その外側を囲むように形成される周辺領域Ｒｎは、中央領域Ｒｃに比較すると、鮮明な画像の状態での立体観察の視覚特性の要望は低い。  
このため、本実施形態においては、周辺領域Ｒｎにおいて、処置具１７の画像の存在を画像解析し、画像解析の結果に基づいて周辺領域Ｒｎに存在する、少なくとも処置具１７の画像部分をぼかすことにより、中央領域Ｒｃでの立体観察の視覚特性を維持しつつ、周辺領域Ｒｎに処置具１７（の画像）が存在した場合における処置具１７（の画像）に起因して立体観察の視覚特性を低下させる要因を抑制又は軽減する。  
周辺領域Ｒｎに存在する処置具１７の画像の大きさを評価するために、図６Ｂに示すように色成分分析回路６２は色分析を行い、画像エッジ成分抽出回路６３は、エッジ成分Ｅａ，Ｅｂ，Ｅｃの抽出を行う（後述）。
【００２９】
また、例えば処置具領域評価回路６４は、処置具領域評価回路６４の評価結果から処置具１７が周辺領域Ｒｎ上において最も内側の領域となる最内領域Ｒｎｉに存在する領域のブロックを最内ブロック領域Ｒｎｉｔ（図６Ｃ参照）として検知し、最内ブロック領域Ｒｎｉｔ（の最内領域Ｒｎｉにおける割合）を（算出するための）演算をする最内ブロック領域演算回路６４ａと、処置具領域評価回路６４の評価結果から処置具１７が周辺領域Ｒｎ上において最も外側の領域となる最外領域Ｒｎｏに存在する領域のブロックを最外ブロック領域Ｒｎｏｔ（図６Ｄ参照）として検知し、最外ブロック領域Ｒｎｏｔ（の最外領域Ｒｎｏにおける割合）を（算出するための）演算する最外ブロック領域演算回路６４ｂと、を有する。
【００３０】
なお、最内領域Ｒｎｉは、図６Ｃにおいて太い枠で示すように（周辺領域Ｒｎにおいて）正方形又は長方形の中央領域Ｒｃの上下、左右に外側から隣接する正方形又は長方形状に繋がった領域（閉じたベルト状の領域）を示す。同様に最外領域Ｒｎｏは、図６Ｄに示すように（周辺領域Ｒｎにおいて）太い枠で示すように中央領域Ｒｃから最も離間した正方形又は長方形状に繋がった領域（閉じたベルト状の領域）を示す。
【００３１】
そして、上記のように最内ブロック領域演算回路６４ａは、最内領域Ｒｎｉを形成する全領域数Ｎｉにおいて処置具１７の画像が存在する領域数Ｍｉを最内ブロック領域Ｒｎｉｔとして検知し、更に、全領域数Ｎｉにおける領域数Ｍｉの割合Ｍｉ／Ｎｉを算出する。
【００３２】
また、最外ブロック領域演算回路６４ｂは、最外領域Ｒｎｏを形成する全領域数Ｎｏにおいて処置具１７の画像が存在する領域数Ｍｏを最外ブロック領域Ｒｎｏｔとして検知し、更に、全領域数Ｎｏにおける領域数Ｍｏの割合Ｍｏ／Ｎｏを算出する。
【００３３】
なお、本実施形態においては、左右の画像を正方形又は長方形の形状で表示する場合で説明するが、左右の画像を円形に表示する場合にも、ほぼ同様に適用できる。この場合には、中央領域Ｒｃは画像の中央部分の円形の領域となり、周辺領域Ｒｎは円形の中央領域Ｒｃの外側の円環形状の領域となる。また、最内領域Ｒｎｉ等も（正方形又は長方形の場合と形状が異なるが）ほぼ同様に定義できる。
【００３４】
なお、図５においては、最内ブロック領域演算回路６４ａと、最外ブロック領域演算回路６４ｂと、を処置具領域評価回路６４の内部に設けた構成例で示しているが、処置具領域評価回路６４の外部に設ける構成にしても良い。
【００３５】
本実施形態においては、制御部５６は、画像解析処理回路５２ｄと画像合成部５５の動作を制御する。制御部５６の制御により、画像解析処理回路５２ｄ内の処置具領域評価回路６４は、周辺領域Ｒｎにおける処置具１７の画像の占める割合に応じた解析結果データにより、該解析結果データに対応したぼかしデータをリファレンスＤＢ５４から出力させることにより、周辺領域Ｒｎの画像におけるぼかし領域とぼかし強度とを設定する。そして、制御部５６の制御により、設定したぼかし領域とぼかし強度を用いて画像合成部５５は、左右の画像に対してぼかし処理を施し、ぼかし処理がされた左右の画像から３Ｄ画像を合成して、３Ｄ合成信号を生成する。  
より具体的には、制御部５６は、最内ブロック領域演算回路６４ａの演算結果により最内領域Ｒｎｉ（その領域数Ｎｉ）内におけるに処置具１７の画像が存在する最内ブロック領域Ｒｎｉｔを形成する領域数Ｍｉの占める割合Ｍｉ／Ｎｉに応じてぼかし領域を設定するように制御し、最外ブロック領域演算回路６４ｂの演算結果により最外領域Ｒｎｏ（その領域数Ｎｏ）内におけるにまた処置具１７の画像が存在する最外ブロック領域Ｒｎｏｔを形成する領域数Ｍｏの占める割合Ｍｏ／Ｎｉに応じてぼかし強度を設定して、画像合成部５５が３Ｄ画像を合成した３Ｄ合成信号を生成するように制御する。
【００３６】
また、後述するように制御部５６は、最内ブロック領域演算回路６４ａの演算結果により最内領域Ｒｎｉ内における処置具１７の画像の占める割合Ｍｉ／Ｎｉが大きくなるに従って、ぼかし領域を最外領域Ｒｎｏから最内領域Ｒｎｉ側に広げるように設定する制御を行い、最外ブロック領域演算回路６４ｂの演算結果により最外領域Ｒｎｏ内における処置具１７の画像の占める割合Ｍｏ／Ｎｏが大きくなるに従って、ぼかし領域におけるぼかし強度を段階的に大きく設定するように制御する。  
なお、制御部５６が上述したように画像解析処理回路５２ｄ内の処置具領域評価回路６４の動作を外部から制御する代わりに、例えば処置具領域評価回路６４内に制御部５６による制御機能を含め、処置具領域評価回路６４の外部の制御部５６を介することなく、ぼかし領域の設定と、ぼかし強度の設定を行う構成にしても良い。また、リファレンスＤＢ５４も、外部の制御部５６を介することなく、画像解析部５２による解析結果データから、解析結果データに対応するぼかしデータを画像合成部５５に出力するようにしても良い。換言すると、図３又は図４に示すように制御部５６を画像解析部５２、リファレンスＤＢ５４、画像合成部５５の外部に設ける構成に限らず、その制御機能の一部を画像解析部５２内、リファレンスＤＢ５４内、画像合成部５５内に設けるようにしても良い。以下の動作説明においては、主に後者に近い構成の場合で説明する。
【００３７】
立体内視鏡画像処理装置を構成する本実施形態の画像処理部１１は、立体内視鏡としての３Ｄ内視鏡４に設けられた左右の撮像素子としてのＣＣＤ２７ａ，２７ｂの出力信号に基づく、左目用画像を表す左目用画像信号と右目用画像を表す右目用画像信号との同期調整を行うよう構成された同期調整部５３と、前記左目用画像信号及び前記右目用画像信号の少なくとも一方の画像信号の画像における中央領域Ｒｃの周囲の周辺領域Ｒｎ上において、処置具１７の画像が占める領域を解析するよう構成された画像解析部５２と、を備え、前記画像解析部５２は、入力された前記画像信号により得られる前記画像における前記中央領域Ｒｃの周囲の前記周辺領域Ｒｎを細分化し、所定数の領域に分割する画像分割部を形成する画像分割回路６１と、前記所定数の各領域内の色成分を分析する色成分分析部を形成する色成分分析回路６２と、前記各領域内の直進性成分のエッジ成分を抽出する画像エッジ成分抽出部を形成する画像エッジ成分抽出回路６３と、前記色成分分析部の分析結果と前記画像エッジ成分抽出部の抽出結果とから前記周辺領域Ｒｎ上における前記処置具１７の画像が占める領域の大きさを評価する処置具領域評価部を形成する処置具領域評価回路６４と、前記処置具領域評価部の評価結果から前記処置具１７の画像が前記周辺領域Ｒｎ上において最も内側の領域としての最内領域Ｒｎｉに存在する領域数Ｍｉのブロックを最内ブロック領域Ｒｎｉｔとして検知し、前記最内ブロック領域Ｒｎｉｔを演算する最内ブロック領域演算部を形成する最内ブロック領域演算回路６４ａと、前記処置具領域評価部の評価結果から前記処置具１７の画像が前記周辺領域Ｒｎ上において最も外側の領域としての最外領域Ｒｎｏに存在する領域数Ｍｏのブロックを最外ブロック領域Ｒｎｏｔとして検知し、前記最外ブロック領域Ｒｎｏｔを演算する最外ブロック領域演算部を形成する最外ブロック領域演算回路６４ｂと、を有し、前記画像解析部５２の解析結果に応じて前記周辺領域Ｒｎにおける前記画像にぼかし処理を施す領域としてのぼかし領域と、前記周辺領域Ｒｎにおける前記画像にぼかし処理を施す際のぼかし強度との情報を生成するぼかし情報生成部を形成するリファレンスＤＢ５４と、前記同期調整部５３の同期調整結果と、前記ぼかし情報生成部の生成結果に応じて前記左目用画像と前記右目用画像に対してそれぞれぼかし処理を施した３Ｄ画像を合成して出力するよう構成された画像合成部５５と、を備えることを特徴とする。
【００３８】
次に本実施形態の動作を説明する。図７は本実施形態の動作を行う場合の代表的な処理手順を示す。  
本実施形態を用いた立体内視鏡装置１の電源が投入されて動作開始となった場合、最初のステップＳ１において術者等のユーザは、初期設定として、一方の画像としての例えば左の画像を中央領域Ｒｃと周辺領域Ｒｎの設定を行うと共に、周辺領域Ｒｎを小さな領域Ｒｂ（図６Ａ参照）に分割する場合の分割数（又は所定数）Ｎの設定を行う。なお、前回等の以前の使用の際において、すでに中央領域Ｒｃ、周辺領域Ｒｎ、分割数Ｎが設定されている場合には、それらの設定データを採用しても良い。また、右の画像に対しては、中央領域Ｒｃ、周辺領域Ｒｎ、領域Ｒｂ等を設定する必要はないが、ぼかし処理する場合、左の画像に対して設定した中央領域Ｒｃ、周辺領域Ｒｎ、領域Ｒｂが適用される。  
次のステップＳ２において術者は、３Ｄ内視鏡４を用いて立体観察を行う。３Ｄ内視鏡４の左右の撮像素子により撮像された左右の撮像画像の信号は、プロセッサ７Ａ，７Ｂによって左右の２Ｄ画像信号に変換され、３Ｄミキサ８において左右の２Ｄ画像信号は３Ｄ画像信号に変換されて、３Ｄモニタ９の画像処理部１１に入力される。画像処理部１１に入力された３Ｄ画像信号は、切替信号生成回路５３ｂの切替信号により切替スイッチ５１が１フィールド期間毎に切り替えられる。
【００３９】
そして、例えば奇数フィールド期間の左の画像信号が画像解析部５２に入力される。画像解析部５２に入力された左の画像信号は、メモリ５２ｃに一時、格納される。そして、メモリ５２ｃに格納された左の画像信号に対して、画像解析処理回路５２ｄが以下のように解析する。なお、本実施形態においては、左の画像信号が画像解析部５２に入力される場合において説明するが、左の画像信号の代わりに、右の画像信号を画像解析部５２に入力するようにしても良い。この場合には、左の画像信号をメモリ５３ｄに格納するようにすれば良い。  
ステップＳ３に示すように画像解析処理回路５２ｄの画像分割回路６１は、左の画像信号の画像に対して、図６Ａに示すように中央領域Ｒｃの周囲の周辺領域Ｒｎを上記分割数Ｎで分割する。以下の処理は、周辺領域Ｒｎが分割された各領域Ｒｂに対して行われる。  
次のステップＳ４において画像解析処理回路５２ｄの色成分分析回路６２は、周辺領域Ｒｎにおける各領域Ｒｂの画像信号の画像に対して、色成分に色分析する処理を行う。図６Ｂでは斜線で示す１つの領域Ｒｂに対して色分析を行っている様子を示す。
【００４０】
処置具１７等の処置具の色は、通常、生体の色調から区別し易いように、シルバー、又はグレーに設定されているために、色成分分析回路６２は、シルバー、又はグレーの色成分、つまり処置具１７が有する特定の色成分を抽出するように色分析の処理を行う。なお、図６Ｂでは、例えば処置具１７として３つの処置具１７ａ、１７ｂ、１７ｃが用いられて、手術が行われる画像を示す。  
次のステップＳ５において画像解析処理回路５２ｄの画像エッジ成分抽出回路６３は、周辺領域Ｒｎにおける各領域Ｒｂの画像信号の画像に対して、直進性（又は直線状）のエッジ成分を抽出する処理を行う。処置具１７等の処置具は、直線形状のロッド部分が占める割合が大きいために、画像エッジ成分抽出回路６３は、直線的に延びるエッジ成分を抽出する。図６Ｂにおいて、直線的に延びるロッド部分のエッジ成分Ｅａ，Ｅｂ，Ｅｃが抽出された様子を示す。画像エッジ成分抽出回路６３は、直線的に延びるエッジ成分を重点的に抽出するが、曲線的なエッジ成分も抽出するようにしても良い。
【００４１】
次のステップＳ５において画像解析処理回路５２ｄの処置具領域評価回路６４は、色成分分析回路６２の分析結果（特定の色成分抽出結果）と、画像エッジ成分抽出回路６３による直進性のエッジ成分（又は直進性成分におけるエッジ成分）の抽出結果から、周辺領域Ｒｎにおける処置具１７の画像が占める大きさを評価（又は同定）する。具体的には、処置具領域評価回路６４は、図６Ｂにおいて周辺領域Ｒｎにおけるエッジ成分Ｅａ，Ｅｂ，Ｅｃで囲まれた領域Ｒｂから周辺領域Ｒｎにおける処置具１７の画像が占める大きさを評価（又は同定）する。  
次のステップＳ６において最内ブロック領域演算回路６４ａは、図６Ｃに示すように最内領域Ｒｎｉにおいて処置具１７（の画像）が存在する処置具領域のブロックを最内ブロック領域Ｒｎｉｔとして検知する。また、最内ブロック領域演算回路６４ａは、最内領域Ｒｎｉにおいて最内ブロック領域Ｒｎｉｔ（を形成する領域数）が占める割合Ｍｉ／Ｎｉを算出する。図６Ｃの例では、最内領域Ｒｎｉは、領域Ｒｂの総数が２０であり、最内ブロック領域Ｒｎｉｔの総数が７であるため、最内ブロック領域Ｒｎｉｔが占める割合は７／２０となる。
【００４２】
また、次のステップＳ７において最外ブロック領域演算回路６４ｂは、図６Ｄに示すように最外領域Ｒｎｏにおいて処置具１７（の画像）が存在する処置具領域のブロックを最外ブロック領域Ｒｎｏｔとして検知する。図６Ｄの例では、最外領域Ｒｎｏは、領域Ｒｂの総数が３６であり、最外ブロック領域Ｒｎｏｔ（を形成する領域数）の総数が１２であるため、最内ブロック領域Ｒｎｉｔが占める割合Ｍｏ／Ｎｏは１２／３６（＝１／３）となる。  
そして、処置具領域評価回路６４は、最内ブロック領域演算回路６４ａの演算結果としての最内ブロック領域Ｒｎｉｔが占める割合Ｍｉ／Ｎｉの結果と、最外ブロック領域演算回路６４ｂの演算結果としての最外ブロック領域Ｒｎｏｔが占める割合Ｍｏ／Ｎｏの結果との解析結果データをリファレンスＤＢ５４に送る。  
次のステップＳ８においてリファレンスＤＢ５４は、最内ブロック領域Ｒｎｉｔが占める割合の結果のデータに応じてぼかし領域の情報を生成し、画像合成部５５に出力する。ぼかし領域を設定する処理は、図８Ａ，図８Ｂを参照して後述する。
【００４３】
また、次のステップＳ９においてリファレンスＤＢ５４は、最外ブロック領域Ｒｎｏｔが占める割合Ｍｏ／Ｎｏの結果のデータに応じてぼかし強度の情報を生成し、画像合成部５５に出力する。ぼかし強度を設定する処理は、図９Ａ，図９Ｂを参照して後述する。  
次のステップＳ１０において画像合成部５５は、リファレンスＤＢ５４からのぼかし領域とぼかし強度の情報とのぼかしデータを、ぼかし処理を行うパラメータとして、ぼかしフィルタ回路５５ａはメモリ５２ｃとメモリ５３ｄから読み出された同じフレームを構成する奇数、偶数フィールドの左右の画像に対してそれぞれぼかし処理を行い、重畳回路５５ｂにおいて合成して３Ｄ合成画像を生成する。  
生成された３Ｄ合成画像の画像信号としての３Ｄ合成画像信号は、表示部４３に出力され、表示部４３の表示画面に偏光方向が直交する状態で左右の画像が表示され、術者Ｄは３Ｄメガネ１０をかけて観察することにより、立体視することができる。なお、ステップＳ１０の処理の後、ステップＳ４の処理に戻り、動画における各フレームに対して、同様の処理が繰り返される。
【００４４】
図１０は、このようにして、ぼかし処理を行う前と後の画像例を示す。図１０における左側の画像は、ぼかし処理を行う前の例えば左の画像を示し、ぼかし処理後の左の画像は、図１０の右側に示すようになる。図１０の左側においては、中央領域Ｒｃと周辺領域Ｒｎとの境界となる４隅を小さく明示している。そして、周辺領域Ｒｎにおける処置具の画像のエッジ部分がぼかされるような画像処理が施される。実際には、エッジ部分以外もぼかす処理が施されることになる。なお、左の画像と同じフレームの右の画像も、左の画像と同様にぼかし処理が行われる（図１２参照）。  
図１０における右側に示すように中央領域Ｒｃにおいては、ぼかし処理が施されない状態で鮮明に表示され、中央領域Ｒｃの外側においては、処置具１７の画像が占める割合に応じて、ぼかし処理が施された画像となる。ぼかし処理により周辺領域Ｒｎ内の処置具１７のロッド部分が不鮮明となるため、周辺領域Ｒｎにおける処置具１７の画像が立体観察において、立体観察の視覚特性を低下させる要因、具体的には、処置具が手前側に飛び出すような違和感を与える視覚特性を抑制ないしは軽減できる。従って、術者は違和感を感じる要因が抑制又は軽減された状態で、立体視しながら処置を行うことが可能となる。  
図８Ａは、最内ブロック領域演算回路６４ａの演算結果としての最内ブロック領域Ｒｎｉｔが占める割合に応じてリフアレンスＤＢ５４がぼかし領域を生成（設定）する処理を示す。
【００４５】
ステップＳ１１に示すようにリフアレンスＤＢ５４は、最内領域Ｒｎｉにおける処置具１７の画像の最内ブロック領域Ｒｎｉｔ、より具体的には処置具１７の画像におけるロッド部分のロッドブロック領域、が占める割合を参照する。そして、ステップＳ１２に示すようにリフアレンスＤＢ５４は、制御部５６の制御の下で、参照した結果に応じて以下のケース分けの処理を行う。なお、制御部５６が以下の処理を行うようにしても良い。  
例えば割合がＡ以下の場合には、ステップＳ１３ａに示すように周辺領域Ｒｎの内、外側からＶ%の範囲をぼかし領域に設定し、
割合がＡ〜Ｂの場合には、ステップＳ１３ｂに示すように全周辺領域Ｒｎの内、外側からＷ%の範囲をぼかし領域に設定し、
割合がＢ〜Ｃの場合には、ステップＳ１３ｃに示すように全周辺領域Ｒｎの内、外側からＸ%の範囲をぼかし領域に設定し、
割合がＣ〜Ｄの場合には、ステップＳ１３ｄに示すように全周辺領域Ｒｎの内、外側からＹ%の範囲をぼかし領域に設定し、
割合がＤ以上の場合には、ステップＳ１３ｅに示すように全周辺領域Ｒｎの内、外側からＺ%の範囲をぼかし領域に設定する。
【００４６】
図８Ｂは、図８Ａに対応した最内ブロック領域Ｒｎｉｔの割合と、ぼかし領域の範囲の例を示す。最内ブロック領域Ｒｎｉｔの割合が増加するに従って、ぼかし領域の範囲が最外領域Ｒｎｏ側から最内領域Ｒｎｉ側にステップ状に増大する。なお、最内ブロック領域Ｒｎｉｔの割合が０の場合には、ぼかし領域の範囲も０となる。  
図９Ａは、最外ブロック領域演算回路６４ｂの演算結果としての最外ブロック領域Ｒｎｏｔが占める割合に応じてリフアレンスＤＢ５４がぼかし強度を生成（設定）する処理を示す。  
ステップＳ２１に示すようにリフアレンスＤＢ５４は、最外領域Ｒｎｏにおける処置具１７の画像の最外ブロック領域Ｒｎｏｔ、より具体的には処置具１７の画像のロッド部分のロッドブロック領域、が占める割合を参照する。そして、ステップＳ２２に示すようにリフアレンスＤＢ５４は、制御部５６の制御下で、参照した結果に応じて以下のケース分けの処理を行う。なお、制御部５６が以下の処理を行うようにしても良い。
【００４７】
例えば割合がＨ以下の場合には、ステップＳ２３ａに示すように全周辺領域Ｒｎの内、設定されたぼかし領域をＯの強度でぼかす。  
割合がＨ〜Ｉの場合には、ステップＳ１３ｂに示すように全周辺領域Ｒｎの内、設定されたぼかし領域をＰの強度でぼかす。  
割合がＩ〜Ｊの場合には、ステップＳ１３ｃに示すように全周辺領域Ｒｎの内、設定されたぼかし領域をＱの強度でぼかす。  
割合がＪ〜Ｋの場合には、ステップＳ１３ｄに示すように全周辺領域Ｒｎの内、設定されたぼかし領域をＲの強度でぼかす。  
割合がＫ以上の場合には、ステップＳ１３ｅに示すように全周辺領域Ｒｎの内、設定されたぼかし領域をＳの強度でぼかす。  
図９Ｂは、図９Ａに対応した最外ブロック領域Ｒｎｏｔの割合と、ぼかし強度の例を示す。最外ブロック領域Ｒｎｏｔの割合が増加するに従って、ぼかし強度がステップ状に増大する。なお、最外ブロック領域Ｒｎｏｔの割合が０の場合には、ぼかし強度も０となる。
【００４８】
図１１Ａは、最内ブロック領域Ｒｎｉｔの割合に応じて設定されるぼかし領域に対してぼかし処理を行う場合の説明図を示す。図１１Ａの左側に示すぼかし領域Ｒｇに含まれる例えば黒で示すぼかし対象画素Ｒｇｉの色情報を、図１１Ａの右側に示すようにぼかし対象画素Ｒｇｉの周囲の画素にも段階的に波及させることで、ぼかし対象画素Ｒｇｉの色情報を周囲の画素に滲ませるようなぼかし処理を行う。  
具体例で説明すると、図１１Ｂに示すようにぼかし処理を行う前のぼかし対象画素Ｒｇｉの色情報の重み（画素値）が１００、その周囲の画素の重み（画素値）が０とした場合、ブラー処理によりぼかし対象画素Ｒｇｉの色情報の重み（重み係数）を３６、ぼかし対象画素Ｒｇｉの周囲の最近接の第１周囲画素としての８画素の色情報の重みを４、さらにその周囲の第２周囲画素としての１６画素の色情報の重みを２に設定する。このようにしてぼかし対象画素Ｒｇｉの色情報の重み（１００）を、ぼかし処理後において、ぼかし処理前と同じ値を維持して、周囲の画素に色情報の重みを滲ませるようなぼかし処理を行う。
【００４９】
このようにして、ぼかし領域Ｒｇ内の全ての画素をぼかし対象画素Ｒｇｉに設定してぼかし処理を行う。
【００５０】
なお、ぼかし強度を変更する場合には、重み３６，４，２の組み合わせ値を変更したり、ぼかし処理前とぼかし処理後の画像を加算してぼかし処理を行うようにして、両者を加算する場合の割合を変えることによりぼかし強度を変更するようにしても良い。例えば、前者の重み付けの組み合わせ値を変更する場合、重み３６，４，２の組み合わせ値から、例えば重み２０，４，３の組み合わせ値、重み１２，４，３．５の組み合わせ値、重み４，４，４に変更すると、ぼかし強度（又はぼけの強度、又はぼけの程度）が順次大きくなる。このように重みの組み合わせ値によりぼかし強度を変更する場合には、リファレンスＤＢ５４は、解析結果の入力データとして最外ブロック領域Ｒｎｏｔ（処置具１７の画像）の占める割合が大きくなる程、上記のように重みの組み合わせ値を変更したデータをぼかしデータとしてぼかしフィルタ回路５５ａに出力する。
【００５１】
また、ぼかし処理を、ローパスフィルタを用いて構成し、その際ぼかし強度を大きくするにつれてローパスフィルタのカットオフ周波数を低くし、ぼかし強度（又はぼけの程度）を大きくするようにしても良い。この場合には、リファレンスＤＢ５４は、解析結果の入力データとして最外ブロック領域Ｒｎｏｔ（処置具１７の画像）の占める割合が大きくなる程、上記のローパスフィルタのカットオフ周波数を低くしたデータをぼかしデータとしてぼかしフィルタ回路５５ａに出力する。  
図１２は、本実施形態における３Ｄ合成画像を生成する場合の概略のタイミングチャートを示す。  
画像処理部１１に入力される３Ｄ画像信号の３Ｄ画像は、（１フレーム分の３Ｄ画像を表示する場合における）１フィールド期間毎に切り替えられる切替スイッチ５１を経て、メモリ５２ｃとメモリ５３ｄとに、それぞれ最初（１番目）の１フレーム画像を構成する左の画像Ｉｌ１と右の画像Ｉｒ１が書き込まれる。ここで、Ｉｌ１又はＩｒ１における１は、１番目のフレームの画像であることを表す。メモリ５３ｄに右の画像Ｉｒ１が書き込まれる１フィールド期間内において、画像解析処理回路５２ｄは、メモリ５２ｃに書き込まれた左の画像Ｉｌ１に対して、画像解析を行い、解析結果データを生成し、解析結果データをリファレンスＤＢ５４に出力する。リファレンスＤＢ５４は、解析結果データに対応するぼかしデータを画像合成部５５のぼかしフィルタ回路５５ａに出力する。
【００５２】
画像合成部５５のぼかしフィルタ回路５５ａは、ぼかしデータを用いて、メモリ５２ｃの左の画像Ｉｌ１に対して、ぼかし処理を行い、左の画像Ｉｌ１に対するぼかし処理が終了した左の画像Ｉｌ１を重畳回路５５ｂ内のメモリ５５ｃに格納する。なお、メモリ５５ｃは、ぼかし処理がされた左右の画像Ｉｌ１，Ｉｒ１をそれぞれ１フレーム分格納するメモリ容量を有する。
【００５３】
また、左の画像Ｉｌ１に対するぼかし処理が終了に要する時間（にマージンを含めた）後のタイミングにおいて、同期調整部５３のメモリコントローラ５３ｃは、メモリ５３ｄから右の画像Ｉｒ１を読み出し、ぼかしフィルタ回路５５ａに出力するように同期調整（又はタイミング調整）を行う。ぼかしフィルタ回路５５ａは、メモリ５３ｄから出力された右の画像Ｉｒ１に対しても、同様にぼかし処理を行い、重畳回路５５ｂ内のメモリ５５ｃに格納する。
【００５４】
図１２に示すようにぼかしフィルタ回路５５ａが左の画像Ｉｌ１に対するぼかし処理終了後の時間ｔ１に、直ちに右の画像Ｉｒ１に対するぼかし処理を開始しても、そのぼかし処理終了のタイミングは、１フレーム分の右の画像Ｉｒ１の入力終了のタイミングの時間ｔ２以後となる。このため、例えば、時間ｔ１から時間ｔ２における途中の時間に、ぼかしフィルタ回路５５ａが右の画像Ｉｒ１に対してぼかし処理を行うようにしても良い。なお、図１２において時間ｔ２に、右の画像Ｉｒ１に対するぼかし処理を行った場合を点線で示している。
【００５５】
重畳回路５５ｂは、ぼかし処理がされた左の画像（つまりぼかし処理済左の画像）Ｉｌ１と右の画像（つまりぼかし処理済右の画像）Ｉｒ１とを、次の１フレーム期間（その開始の時間はｔ２）において、１フィールド期間毎に順次読み出して、ぼかし処理がされた３Ｄの画像信号として出力する。
【００５６】
図１２において、重畳回路５５ｂがぼかし処理がされた左の画像Ｉ１ｌの出力を開始する時間ｔ２においては、右の画像Ｉｒ１のぼかし処理が終了していなくても、左の画像Ｉ１ｌの出力が終了する１フィールド期間後の時間ｔ３までに、右の画像Ｉｒ１に対するぼかし処理が終了している（従って３Ｄの画像信号の出力に支障ない）。このため、同期調整部は、重畳回路５５ｂがぼかし処理がされた左の画像Ｉｌ１を１フレーム分出力し終える時間（図１２では時間ｔ３）までに、右の画像Ｉｒ１に対するぼかし処理が終了することができるように（右の画像Ｉｒ１をぼかしフィルタ回路５５ａに入力させるように）同期調整又はタイミング調整を行うようにしても良い。
【００５７】
なお、図１２の例では次の１フレーム期間になると、メモリ５２ｃには次のフレームにおける最初の１フィールド期間に左の画像Ｉｌ２が書き込まれ、次のフィールド期間にメモリ５３ｄに右の画像Ｉｒ２が書き込まれ、同様の処理が繰り返される。図１２のような画像処理により、１フレーム期間の遅延のみで、ぼかし処理済みの３Ｄの画像信号を生成して出力することができる。
【００５８】
このため、本実施形態における同期調整部は、画像解析部５２により処置具１７の画像が占める領域の解析が行われる一方の画像信号の画像と同じフレームに属する他方の画像信号の画像を一時的に記憶するメモリ（図４の５３ｄ）を有し、前記一方の画像信号が入力されるフレームから前記一方の画像信号の画像及び前記他方の画像信号の画像に対してぼかし処理部を形成するぼかしフィルタ回路５５ａによりぼかし処理された３Ｄの画像信号を１フレーム期間後に出力するように同期調整するフレーム同期調整回路（の機能）を形成する。
【００５９】
また、同期調整部５３は、画像解析部５２により処置具１７の画像が占める領域の解析が行われる一方の画像信号の画像と同じフレームに属する他方の画像を一時的に記憶するメモリ（例えば５３ｄ）を有し、画像解析部５３による一方の画像信号の画像に対する解析開始、又は解析結果後の信号を受けて、一方の画像信号に対するぼかし処理された後、次のフレーム期間においてぼかし処理された３Ｄの画像における一方の画像として出力される時間に、前記他方の画像信号の画像に対するぼかし処理を開始させるように前記他方の画像を画像合成部５５に出力するよう同期調整するようにしても良い。
【００６０】
画像合成部５５は、ぼかしフィルタ回路５３ａによりぼかし処理された左右の画像信号を、メモリ５３ｃを用いて同期調整（又はタイミング調整）し、ぼかし処理された左右の画像信号は、隣接するフィールド毎に順次出力する。この場合、同期調整部５３及びメモリ５３ｃは、画像処理部１１に入力された左右の画像信号の各フレームから、１フレーム期間後にぼかし処理された左右の画像信号を出力するように同期調整する。
【００６１】
このように動作する本実施形態によれば、３Ｄモニタ９の表示画面に表示される３Ｄ画像における中央領域Ｒｃにおいては、鮮明な画像の状態で立体視ができる状態を維持しつつ、周辺領域Ｒｎにおける少なくとも処置具の画像をぼかすことにより、処置具のために違和感等が発生する要因を低減することができる。従って、本実施形態によれば、立体観察の知覚特性を維持しつつ、処置具による立体観察の知覚特性を低下させることを抑制又は軽減することができる。  
また、周辺領域Ｒｎ内において処置具の画像が存在するか否かの検知を行う検知領域において処置具が検知される領域の割合に応じて、ぼかす処理を行うぼかし領域と、ぼかし強度とを設定するようにしているので、周辺領域Ｒｎにおける処置具の画像の占有割合を考慮した妥当な周辺領域Ｒｎの画像を提供できる。  
なお、第１の実施形態においては、立体内視鏡画像処理装置を構成する画像処理部１１を３Ｄモニタ９内に設けた例を説明したが、図１３に示す変形例のように例えば３Ｄミキサ８内に立体内視鏡画像処理装置を構成する画像処理部１１Ｂを設けるようにしても良い。
【００６２】
図１３に示す立体内視鏡装置１Ｂは、図１に示す立体内視鏡装置１において、３Ｄミキサ８を８Ｂに、３Ｄモニタ９を９Ｂに変更した構成である。  
３Ｄモニタ９Ｂは、図１の画像処理部１１の代わりに、入力された３Ｄ画像信号を表示部４３に表示する画像処理を行う画像処理部４２を有する。この場合の３Ｄモニタ８Ｂは公知の３Ｄモニタと同様の構成となる。  
図１３の３Ｄミキサ８Ｂは、図１の３Ｄミキサ８において、画像入力インタフェース３６ａ，３６ｂと３Ｄ画像合成部３７との間に、ぼかし処理を行う画像処理部１１Ｂを設けた構成となる。  
この画像処理部１１Ｂは、基本的には、上述した画像処理部１１とほぼ同様の機能を有するが、上述した例では画像処理部１１に３Ｄ画像信号が入力されるのに対して、図１３の場合には左右の２Ｄの画像信号が同時に並列的に入力される。  
このため、図１３に示す画像処理部１１Ｂは、画像処理部１１の構成で必要であった切替スイッチ５１及びその切替を行う回路が不要となる。従って、画像処理部１１Ｂは、画像解析部５２，同期調整部５３，リファレンスＤＢ５４，画像合成部５５及び制御部５６を有する。
【００６３】
なお、左右の画像信号が同時に入力されるために両画像のタイミングが上述したタイミングと若干異なるが、ぼかし処理する動作は、上述した場合と同様である。同時に入力される左右の画像は、それぞれメモリ５２ｃと５３ｄとに書き込まれる。そして、一方の画像としての例えば左の画像に対して上述した場合と同様の画像解析が行われて、解析結果データが生成され、リファレンスＤＢ５４は解析結果データに対応したぼかしデータを画像合成部５５に出力し、画像合成部５５は、左右の画像に対してぼかし処理を行い、ぼかし処理がされた左右の画像信号を同時に３Ｄ画像合成部３７に出力する。  
３Ｄ画像合成部３７は、ぼかし処理がされた左右の画像信号を合成してぼかし処理がされた３Ｄの画像信号を生成し、３Ｄモニタ９Ｂに出力する。３Ｄモニタ９Ｂは、入力されたぼかし処理がされた３Ｄの画像信号を表示部４３に表示し、術者Ｄは、３Ｄメガネ１０をかけて立体視することができる。本変形例は、上述した第１の実施形態と、画像処理のタイミングが若干異なるが、第１の実施形態と殆ど同じ効果を有する。
【００６４】
なお、上述した第１の実施形態又は変形例においては、最内ブロック領域Ｒｎｉｔの割合（領域Ｒｂの領域数の割合で表すとＭｉ／Ｎｉ）に応じて、ぼかし領域を設定し、最外ブロック領域Ｒｎｏｔの割合（領域数の割合で表すとＭｏ／Ｎｏ）に応じて、ぼかし領域におけるぼかし強度を設定するように説明したが、最外ブロック領域Ｒｎｏｔの割合Ｍｏ／Ｎｏに応じて、ぼかし領域を設定し、最内ブロック領域Ｒｎｉｔの割合Ｍｉ／Ｎｉに応じて、ぼかし領域におけるぼかし強度を設定するようにしても良い。  
また、上述した説明においては画像解析部５２は、解析結果データによってリファレンスＤＢ５４がぼかしデータを画像合成部５５（のぼかしフィルタ回路５５ａ）に出力し、ぼかし処理が可能な状態になると、メモリ５２ｃから読み出した左の画像信号を画像合成部５５（のぼかしフィルタ回路５５ａ）に出力し、読み出し終了と同じタイミングとなるぼかし処理が終了した時、同期調整部５３（のメモリコントローラ５３ｃ）に対して左の画像信号に対するぼかし処理の終了を知らせる。そして、引き続いて、ぼかしフィルタ回路５５ａは、同じフレームに属するに右の画像信号に対してぼかし処理を行うが、このような手順に限定されるものでない。
【００６５】
例えば、画像解析部５２は、解析結果データを生成したタイミングにおいて同期調整部５３（のメモリコントローラ５３ｃ）に、解析結果データを生成したタイミングを知らせる信号を送り、同期調整部５３（のメモリコントローラ５３ｃ）は、メモリ５２ｃから左の画像信号が読み出されて、画像合成部５５（のぼかしフィルタ回路５５ａ）によりぼかし処理が終了する時間を待った後、同じフレームに属する右の画像信号を画像合成部５５（のぼかしフィルタ回路５５ａ）に出力するように同期調整するようにしても良い。この場合には、同期調整部５３は、上述した場合と殆ど同様に一方の画像信号となる一方の画像と、他方の画像信号となる他方の画像とが前後するタイミングで画像合成部５５に出力するように調整する。  
又、図４に示すぼかしフィルタ回路５５ａとして、２つのぼかしフィルタ回路を備えた構成にして、左右の画像を同じタイミングでぼかし処理を行うようにしても良い。この場合には、メモリコントローラ５２ｂと５３ｃとが同期してそれぞれメモリ５２ｃと５３ｄから左右の画像信号を読み出し、２つのぼかしフィルタ回路によりぼかし処理を並行して行うようにしても良い。この場合には、同期調整部５３は、一方の画像信号となる一方の画像と、他方の画像信号となる他方の画像とが同期したタイミングで画像合成部５５に出力するように調整する。
【００６６】
なお、上述したようなぼかし領域の設定とは異なるようにぼかし領域を設定したり、ぼかし強度を設定するようにしても良い。  
例えば、図６Ｂに示すように周辺領域Ｒｎにおいて、色成分の分析結果とエッジ成分の抽出結果とにより、周辺領域Ｒｎにおける処置具１７ａ，１７ｂ，１７ｃの画像が存在する領域をぼかし処理を行う候補領域とし、最内領域Ｒｎｉにおける最内ブロック領域Ｒｎｉｔ（図６Ｃ参照）の割合に応じて候補領域における最外周側からぼかし領域を設定し、最外領域Ｒｎｏにおける最外ブロック領域Ｒｎｏｔ（図６Ｄ参照）の割合に応じてぼかし領域におけるぼかし強度を設定するようにしても良い。  
また、上述した画像解析部５２，同期調整部５３、画像合成部５５を電子回路素子を用いて構成しても良いし、中央演算装置（ＣＰＵ）を用いてソフトウェア的に構成しても良い。
【００６７】
本出願は、２０１４年１月２４日に日本国に出願された特願２０１４−１１７４６号を優先権主張の基礎として出願するものであり、上記の開示内容は、本願明細書、請求の範囲、図面に引用されたものとする。
【図１】
0005893808.tif 000002
【図２】
0005893808.tif 000003
【図３】
0005893808.tif 000004
【図４】
0005893808.tif 000005
【図５】
0005893808.tif 000006
【図６Ａ】
0005893808.tif 000007
【図６Ｂ】
0005893808.tif 000008
【図６Ｃ】
0005893808.tif 000009
【図６Ｄ】
0005893808.tif 000010
【図７】
0005893808.tif 000011
【図８Ａ】
0005893808.tif 000012
【図８Ｂ】
0005893808.tif 000013
【図９Ａ】
0005893808.tif 000014
【図９Ｂ】
0005893808.tif 000015
【図１０】
0005893808.tif 000016
【図１１Ａ】
0005893808.tif 000017
【図１１Ｂ】
0005893808.tif 000018
【図１２】
0005893808.tif 000019
【図１３】
0005893808.tif 000020