(57)【要約】  本発明にかかる処理装置（１）は、被写体が映る映像部分と、該映像部分の周囲に設けられる余白部分とを有する第１の画像信号を処理する画像処理装置であって、第１の画像信号における余白部分を検出する余白検出部（１３ａ）と、余白検出部（１３ａ）によって検出された余白部分をもとに、映像部分に対応する初期の関心領域を設定し、該設定した初期の関心領域を拡大あるいは縮小した関心領域画像信号を生成する拡大縮小部（１３ｃ）と、を備える。
2016017695.tif 000002
【特許請求の範囲】
【請求項１】
被写体が映る映像部分と、前記映像部分の周囲に設けられる余白部分とを有する第１の画像信号を処理する画像処理装置であって、
前記第１の画像信号における前記余白部分を検出する余白検出部と、
前記余白検出部によって検出された余白部分をもとに、前記第１の画像信号における前記映像部分に対応する初期の関心領域を設定する関心領域設定部と、
前記関心領域設定部が設定した前記初期の関心領域を表す関心領域画像信号を生成する関心領域画像生成部と、
を備えたことを特徴とする画像処理装置。
【請求項２】
前記関心領域画像生成部は、
前記第１の画像信号から、前記関心領域設定部によって設定された前記初期の関心領域を切り出す切り出し部と、
前記切り出し部が前記第１の画像信号から切り出した前記初期の関心領域を、前記第１の画像信号の表示対象に対応させて拡大あるいは縮小した画像を、前記関心領域画像信号として生成する拡大縮小部と、
を備えたことを特徴とする請求項１に記載の画像処理装置。
【請求項３】
前記関心領域画像信号と、前記第１の画像信号とは異なる種別の第２の画像信号とを並べて合成した合成画像信号を生成し、出力する合成部を備えたことを特徴とする請求項１に記載の画像処理装置。
【請求項４】
前記第１の画像信号は、Ｘ線画像信号または超音波画像信号であって、
前記第２の画像信号は、内視鏡画像信号であることを特徴とする請求項３に記載の画像処理装置。
【請求項５】
前記関心領域画像生成部は、前記関心領域設定部によって設定された前記初期の関心領域を囲む枠を前記第１の画像信号に重ねて表した画像信号を、前記関心領域画像信号として生成し、出力することを特徴とする請求項１に記載の画像処理装置。
【請求項６】
前記枠の大きさの変更を受け付け、変更後の前記枠が囲む領域を、前記第１の画像信号の表示対象に表示させる関心領域として指示する関心領域指示情報の入力を受け付ける関心領域指示入力部と、
前記第１の画像信号から、前記関心領域指示入力部から入力された前記関心領域指示情報をもとに前記関心領域を切り出す切り出し部と、
前記切り出し部が切り出した前記関心領域の拡大または縮小を指示する拡大縮小指示情報の入力を受け付ける拡大縮小指示入力部と、
前記拡大縮小指示入力部から入力された前記拡大縮小指示情報をもとに、前記切り出し部が切り出した前記関心領域を拡大あるいは縮小した画像信号を生成する拡大縮小部と、
を備えたことを特徴とする請求項５に記載の画像処理装置。
【請求項７】
前記拡大縮小部によって生成された画像信号と、前記第１の画像信号とは異なる種別の第２の画像信号とを並べて合成した合成画像信号を生成し、出力する合成部をさらに備えたことを特徴とする請求項６に記載の画像処理装置。
【請求項８】
前記第１の画像信号は、Ｘ線画像信号または超音波画像信号であって、
前記第２の画像信号は、内視鏡画像信号であることを特徴とする請求項７に記載の画像処理装置。
【請求項９】
前記第１の画像信号は、Ｘ線画像信号または超音波画像信号であることを特徴とする請求項１に記載の画像処理装置。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、被写体が映る映像部分と余白部分とを有する画像信号を処理する画像処理装置に関する。
【背景技術】
【０００２】
医療分野においては、被検体内を撮像する内視鏡と、Ｘ線による診断あるいは超音波による診断を行う診断装置とを組み合わせて、Ｘ線画像または超音波画像と、内視鏡画像とを併用して診断する場合がある。近年、Ｘ線画像または超音波画像を映すモニタと、内視鏡画像用モニタとの二つのモニタを見比べながら診断する医師等の操作者の負担を軽減するために、内視鏡プロセッサにＸ線画像または超音波画像を入力し、内視鏡画像画面と、Ｘ線画像または超音波画像が表示される画面との二つの画面を親子画面として、一つのモニタに同時表示させる方法が提案されている（たとえば、特許文献１参照）。
【先行技術文献】
【特許文献】
【０００３】
【特許文献１】特開２０００−３０８６４３号公報
【発明の概要】
【発明が解決しようとする課題】
【０００４】
ところで、内視鏡プロセッサに外部から入力されるＸ線画像または超音波画像は、出力先のＸ線装置や超音波診断装置によって、画像全体の大きさに対して、操作者が関心を持つ被写体が映る映像部分が占める大きさが異なり、画像上の病変部等が観察しにくくなる。このため、操作者は、診断を適切に行うために、ポインティングデバイス等を操作して、Ｘ線画像または超音波画像における映像部分の領域を指定するとともに、指定した領域をＸ線画像または超音波画像から切り出して、映像部分の大きさを設定するという煩雑な処理を行う必要があった。【０００５】
本発明は、上記に鑑みてなされたものであって、入力された画像信号から、被写体が映る映像部分に対応する関心領域を表した画像を取得するまでの操作者の操作負担を軽減する画像処理装置を提供することを目的とする。
【課題を解決するための手段】
【０００６】
上述した課題を解決し、目的を達成するために、本発明にかかる画像処理装置は、被写体が映る映像部分と、前記映像部分の周囲に設けられる余白部分とを有する第１の画像信号を処理する画像処理装置であって、前記第１の画像信号における前記余白部分を検出する余白検出部と、前記余白検出部によって検出された余白部分をもとに、前記第１の画像信号における前記映像部分に対応する初期の関心領域を設定する関心領域設定部と、前記関心領域設定部が設定した前記初期の関心領域を表す関心領域画像信号を生成する関心領域画像生成部と、を備えたことを特徴とする。【０００７】
また、本発明にかかる画像処理装置は、前記関心領域画像生成部は、前記第１の画像信号から、前記関心領域設定部によって設定された前記初期の関心領域を切り出す切り出し部と、前記切り出し部が前記第１の画像信号から切り出した前記初期の関心領域を、前記第１の画像信号の表示対象に対応させて拡大あるいは縮小した画像を、前記関心領域画像信号として生成する拡大縮小部と、を備えたことを特徴とする。【０００８】
また、本発明にかかる画像処理装置は、前記関心領域画像信号と、前記第１の画像信号とは異なる種別の第２の画像信号とを並べて合成した合成画像信号を生成し、出力する合成部を備えたことを特徴とする。【０００９】
また、本発明にかかる画像処理装置は、前記関心領域画像生成部は、前記関心領域設定部によって設定された前記初期の関心領域を囲む枠を前記第１の画像信号に重ねて表した画像信号を、前記関心領域画像信号として生成し、出力することを特徴とする。【００１０】
また、本発明にかかる画像処理装置は、前記枠の大きさの変更を受け付け、変更後の前記枠が囲む領域を、前記第１の画像信号の表示対象に表示させる関心領域として指示する関心領域指示情報の入力を受け付ける関心領域指示入力部と、前記第１の画像信号から、前記関心領域指示入力部から入力された前記関心領域指示情報をもとに前記関心領域を切り出す切り出し部と、前記切り出し部が切り出した前記関心領域の拡大または縮小を指示する拡大縮小指示情報の入力を受け付ける拡大縮小指示入力部と、前記拡大縮小指示入力部から入力された前記拡大縮小指示情報をもとに、前記切り出し部が切り出した前記関心領域を拡大あるいは縮小した画像信号を生成する拡大縮小部と、を備えたことを特徴とする。【００１１】
また、本発明にかかる画像処理装置は、前記拡大縮小部によって生成された画像信号と、前記第１の画像信号とは異なる種別の第２の画像信号とを並べて合成した合成画像信号を生成し、出力する合成部をさらに備えたことを特徴とする。【００１２】
また、本発明にかかる画像処理装置は、前記第１の画像信号は、Ｘ線画像信号または超音波画像信号であって、前記第２の画像信号は、内視鏡画像信号であることを特徴とする。【００１３】
また、本発明にかかる画像処理装置は、前記第１の画像信号は、Ｘ線画像信号または超音波画像信号であることを特徴とする。
【発明の効果】
【００１４】
本発明によれば、被写体が映る映像部分と該映像部分の周囲に設けられる余白部分とを有する第１の画像信号における余白部分を検出する余白検出部と、余白検出部によって検出された余白部分をもとに、映像部分に対応する初期の関心領域を設定する関心領域設定部と、関心領域設定部が設定した初期の関心領域を表す関心領域画像信号を生成する関心領域画像生成部と、を備え、映像部分に対応した関心領域を表した画像を自動的に生成するため、入力された画像信号から、関心領域を表した画像を取得するまでの操作者の操作負担を軽減することができる。
【図面の簡単な説明】
【００１５】
【図１】図１は、本発明の実施の形態１にかかる処理装置の構成を模式的に示すブロック図である。
【図２】図２は、図１に示す処理装置が、Ｘ線画像信号と内視鏡画像信号とに対応する画像を表示装置に表示させるまでの処理手順を示すフローチャートである。
【図３】図３は、図１に示す処理装置に入力されるＸ線画像信号の一例を示す図である。
【図４】図４は、図２に示す余白検出処理を説明するための図である。
【図５】図５は、図２に示すステップＳ３〜ステップＳ５を説明する図である。
【図６】図６は、図１に示す合成部が生成した合成画像信号の一例を示す図である。
【図７】図７は、従来技術にかかる処理装置が生成した合成画像信号の一例を示す図である。
【図８】図８は、図１に示す合成部が生成した合成画像信号の他の例を示す図である。
【図９】図９は、実施の形態２にかかる処理装置の構成を模式的に示すブロック図である。
【図１０】図１０は、図９に示す処理装置が、初期の関心領域を表す関心領域提示画像を表示装置に表示させるまでの処理手順を示すフローチャートである。
【図１１】図１１は、関心領域画像信号に対応する画像の一例を示す図である。
【図１２】図１２は、図９に示す処理装置が、Ｘ線画像信号と内視鏡画像信号との合成画面像を表示装置に表示させるまでの処理手順を示すフローチャートである。
【図１３】図１３は、図１２に示すステップＳ２２〜ステップＳ２４を説明するための図である。
【図１４】図１４は、図９に示す合成部が生成した合成画像信号の一例を示す図である。
【図１５】図１５は、Ｘ線画像信号における関心領域を設定するために表示装置に表示される画像の一例を示す図である。
【発明を実施するための形態】
【００１６】
以下の説明では、本発明を実施するための形態（以下、「実施の形態」という）として、内視鏡画像とＸ線画像とを表示装置に表示させる処理装置について説明する。また、この実施の形態により、この発明が限定されるものではない。さらに、図面の記載において、同一部分には同一の符号を付している。
【００１７】
（実施の形態１）
図１は、本発明の実施の形態１にかかる処理装置の構成を模式的に示すブロック図である。
【００１８】
図１に示すように、本実施の形態１にかかる処理装置１は、被検体内に導入され、被検体の体内を撮像して内視鏡画像信号を生成する撮像部２１を備えた内視鏡２（スコープ）と、照明光Ｌを生成してライトガイドケーブル２２を介して内視鏡２の先端に供給する光源装置３と、液晶または有機ＥＬ（Electro  Luminescence）を用いた表示ディスプレイ等を用いて構成される表示装置４と、Ｘ線画像信号を生成するＸ線装置５と、に接続し、内視鏡２から入力された内視鏡画像信号に所定の画像処理を施すとともに、Ｘ線装置５から入力されたＸ線画像信号についても所定の画像処理を施し、画像処理後の内視鏡画像信号およびＸ線画像信号を並べて合成した合成画像信号に対応する画像を、表示装置４に表示させる。処理装置１は、Ｘ線画像信号に対応する画像が表示される画面と、内視鏡画像信号が表示される画面との二つの画面を親子画面として表した合成画像信号を、表示装置４の表示画面に表示させる。処理装置１は、内視鏡２、光源装置３および表示装置４の動作についても制御を行う。
【００１９】
処理装置１は、入力部１１と、制御部１２と、画像処理部１３と、表示制御部１４と、出力部１５と、記憶部１６と、を備える。
【００２０】
入力部１１は、マウス、キーボードおよびタッチパネル等の操作デバイスを用いて実現され、各種指示情報の入力を受け付ける。具体的には、入力部１１は、内視鏡２およびＸ線装置５が検査を行っている被検体の情報（たとえばＩＤ、生年月日、名前等）、内視鏡２の識別情報（たとえばＩＤや検査対応項目）、Ｘ線装置５の識別番号、および、検査内容等の各種指示情報の入力を受け付ける。
【００２１】
制御部１２は、ＣＰＵ等を用いて実現される。制御部１２は、処理装置１の各部の処理動作を制御する。制御部１２は、処理装置１の各構成に対する指示情報やデータの転送等を行うことによって、処理装置１の動作を制御する。制御部１２は、各ケーブルを介して撮像部２１、光源装置３の各構成部位および表示装置４に接続されており、撮像部２１、光源装置３および表示装置４の動作についても制御を行う。
【００２２】
画像処理部１３は、制御部１２の制御のもと、撮像部２１によって生成された内視鏡画像信号およびＸ線装置５から入力されたＸ線画像信号に対し、所定の信号処理を行う。画像処理部１３は、余白検出部１３ａと、関心領域切り出し部１３ｂ（関心領域設定部および切り出し部）と、拡大縮小部１３ｃと、内視鏡画像処理部１３ｄと、合成部１３ｅとを備える。Ｘ線画像信号は、操作者が関心を持つ被写体が写る映像部分と、映像部分の周囲に設けられる余白部分とを有する画像信号である。余白部分は、輝度または色が均一な均一領域である。
【００２３】
余白検出部１３ａは、Ｘ線画像信号における輝度または色の変化を検出することによって、Ｘ線画像信号における余白部分を検出する。
【００２４】
関心領域切り出し部１３ｂは、余白検出部１３ａによって検出されたＸ線画像信号の余白部分をもとに、Ｘ線画像信号における映像部分に対応した初期の関心領域を設定するとともに、該設定した初期の関心領域をＸ線画像信号から切り出す。
【００２５】
拡大縮小部１３ｃは、関心領域切り出し部１３ｂがＸ線画像信号から切り出した初期の関心領域を、Ｘ線画像信号の表示対象である表示装置５のＸ線画像表示画面の大きさに対応させて、拡大あるいは縮小した画像信号を、初期の関心領域を表す関心領域画像信号として生成する。
【００２６】
内視鏡画像処理部１３ｄは、内視鏡２から入力された内視鏡画像信号に対し、オプティカルブラック減算処理、ゲイン調整処理、画像信号の同時化処理、ガンマ補正処理、ホワイトバランス（ＷＢ）調整処理、カラーマトリクス演算処理、色再現処理およびエッジ強調処理等を含む各種画像処理を行う。
【００２７】
合成部１３ｅは、拡大縮小部１３ｃによって生成された関心領域画像信号と、内視鏡画像処理部１３ｄにおいて処理が施された内視鏡画像信号とを並べて合成した合成画像信号を生成し、出力する。
【００２８】
表示制御部１４は、合成部１３ｅが出力した合成画像信号から、表示装置４に表示させるための表示用画像信号を生成し、生成した表示用画像信号を、デジタル信号からアナログ信号に変換後、変換したアナログ信号の画像信号をハイビジョン方式等のフォーマットに変更して、表示装置４へ出力する。なお、表示制御部１４の機能の一部が、表示装置４に備わる場合もある。
【００２９】
出力部１５は、スピーカーやプリンタ等を用いて実現され、制御部１２の制御にしたがい、内視鏡画像信号およびＸ線画像信号の表示処理に関する情報を出力する。
【００３０】
記憶部１６は、揮発性メモリや不揮発性メモリを用いて実現され、処理装置１、内視鏡２および光源装置３を動作させるための各種プログラムを記憶する。記憶部１６は、処理装置１の処理中の情報を一時的に記憶する。記憶部１６は、処理装置１の外部から装着されるメモリカード等を用いて構成されてもよい。
【００３１】
図２は、処理装置１が、Ｘ線画像信号と内視鏡画像信号とに対応する画像を表示装置４に表示させるまでの処理手順を示すフローチャートである。図２に示すように、まず、処理装置１においては、画像処理部１３が、Ｘ線装置５から入力されたＸ線画像信号を取得するＸ線画像取得処理を行う（ステップＳ１）。
【００３２】
図３は、処理装置１に入力されるＸ線画像信号の一例を示す図である。図３に示すように、Ｘ線装置５から入力されるＸ線画像信号Ｇｘは、被写体が映る映像部分Ｓｇを有するとともに、映像部分Ｓｇの周囲に、輝度または色が均一な均一領域である余白部分Ｓｂを有する。
【００３３】
画像処理部１３においては、余白検出部１３ａがＸ線画像信号Ｇｘの余白部分を検出する余白検出処理を行う（ステップＳ２）。
【００３４】
たとえば、余白検出部１３ａは、Ｘ線画像信号Ｇｘの外周部から、段階的に所定の領域の色変化を検出することによって、余白部分を検出する。図４は、余白検出部１３ａによる余白検出処理を説明するための図である。図４に示すように、Ｘ線画像信号Ｇｘが表示される画面の表示領域の形状と相似である枠Ｆ１〜Ｆ４が複数設定されており、余白検出部１３ａは、この枠Ｆ１〜Ｆ４の外側の領域Ｓｆ１〜Ｓｆ４の色または輝度が均一である否かを、領域Ｓｆ１〜Ｓｆ４ごとに検出していく。余白検出部１３ａは、各領域Ｓｆ１〜Ｓｆ４の画素信号をもとに、判断対象の領域Ｓｆ１〜Ｓｆ４において色または輝度が均一であると判断した場合には、判断対象の領域Ｓｆ１〜Ｓｆ４は、余白部分であると検出する。一方、余白検出部１３ａは、判断対象の領域Ｓｆ１〜Ｓｆ４において色または輝度が不均一と判断した場合には、判断対象の領域Ｓｆ１〜Ｓｆ４に映像部分が含まれると判断し、領域Ｓｆ１〜Ｓｆ４に対応する枠Ｆ１〜Ｆ４よりも一つ外側にある枠の外側部分が余白部分であると判断して、余白検出処理を終了する。図４の例では、枠Ｆ１の外側の領域Ｓｆ１、枠Ｆ２の外側であって枠Ｆ１の内側の領域Ｓｆ２、ならびに、枠Ｆ３の外側であって枠Ｆ２の内側の領域Ｓｆ３については、色または輝度が均一である。一方、枠Ｆ４の外側であって枠Ｆ３の内側の領域Ｓｆ４については、色または輝度が不均一である。このため、余白検出部１３ａは、領域Ｓｆ４は余白部分ではなく、映像部分に対応する領域であると判断し、枠Ｆ３よりも外側の領域が余白部分であると検出する。
【００３５】
また、余白検出部１３ａは、Ｘ線画像信号Ｇｘに対して、上から順に水平ラインを走査し、水平方向の輝度データ、色データを画素ごとに取得し、輝度データ、色データの変化の有無をもとに、余白部分を検出してもよい。たとえば、余白検出部１３ａは、Ｘ線画像信号Ｇｘの水平ライン１〜５０までは、いずれの画素についても輝度または色の変化が認められず均一である場合には、水平ライン１〜５０に対応する領域は余白部分であると判断する。余白検出部１３ａは、水平ライン５１において、１〜３０，２５１〜３００画素までは色または輝度の変化がなく均一であり、３１〜２５０画素で輝度または色の変化がある場合には、水平ライン５１の３１〜２５０画素に対応する領域は、映像部分であると判断する。このように、余白検出部１３ａは、水平ラインごとに、各画素の輝度および色の走査を繰り返し、輝度または色が均一である部分を余白部分として検出する。
【００３６】
続いて、画像処理部１３においては、関心領域切り出し部１３ｂが、余白検出部１３ａによって検出された余白部分をもとに、Ｘ線画像信号Ｇｘにおける映像部分に対応する初期の関心領域を設定する関心領域設定処理を行い（ステップＳ３）、Ｘ線画像信号Ｇｘから、関心領域設定処理において設定した初期の関心領域を切り出す関心領域切り出し処理を行う（ステップＳ４）。続いて、拡大縮小部１３ｃは、関心領域切り出し部１３ｂが関心領域切り出し処理においてＸ線画像信号Ｇｘから切り出した初期の関心領域を、Ｘ線画像信号Ｇｘの表示対象の大きさに対応させて、拡大あるいは縮小する拡大縮小処理を行い（ステップＳ５）、拡大または縮小後のＸ線画像信号を、初期の関心領域を表す関心領域画像信号として生成する。拡大縮小部１３ｃは、生成した関心領域画像信号を合成部１３ｅに出力する。
【００３７】
図５は、図２に示すステップＳ３〜ステップＳ５を説明する図である。図４のように、余白検出部１３ａが、Ｘ線画像信号Ｇｘの余白部分Ｓｂが、枠Ｆ３よりも外側の領域であると検出した場合、関心領域切り出し部１３ｂは、図５の（１）のように、この枠Ｆ３で囲まれた領域を、映像部分Ｓｇを含む初期の関心領域として設定する。続いて、関心領域切り出し部１３ｂは、矢印Ｙ１に示すように、この設定した領域を、枠Ｆ３とともにＸ線画像信号Ｇｘから切り出す。続いて、拡大縮小部１３ｃは、関心領域切り出し部１３ｂが切り出した領域の画像信号Ｇｃ（図５の（２）参照）を、Ｘ線画像信号Ｇｘが表示される画面（親画面Ｆｘ）の表示領域の大きさに対応させて、矢印Ｙ２のように、拡大する。この結果、図５の（３）に示すように、画像全体に占める余白部分Ｓｂｍの比率が小さくなり、映像部分Ｓｇｍが元の大きさよりも大きく表されたＸ線画像信号Ｇｍが生成される。なお、枠Ｆ３も親画面Ｆｘと同じ大きさの枠Ｆ３ｘに拡大される。拡大縮小部１３ｃは、このＸ線画像信号Ｇｍを、初期の関心領域を表す関心領域画像信号として、合成部１３ｅに出力する。
【００３８】
画像処理部１３は、ステップＳ１において取得したＸ線画像信号Ｇｘの撮像タイミングに対応して内視鏡２によって撮像された内視鏡画像信号を取得する内視鏡画像取得処理を行い（ステップＳ６）、内視鏡画像処理部１３ｄにおいて、この取得した内視鏡画像信号に所定の画像処理を施した後、合成部１３ｅに出力する。なお、ステップＳ１〜ステップＳ５と、ステップＳ６とは、順不同であってもよく、並列であってもよい。
【００３９】
合成部１３ｅは、拡大縮小部１３ｃによって生成された関心領域画像信号と、内視鏡画像処理部１３ｄにおいて処理が施された内視鏡画像信号とを並べて合成した合成画像信号を生成し、出力する合成処理を行う（ステップＳ７）。
【００４０】
図６は、合成部１３ｅが生成した合成画像信号の一例を示す図である。図６に示すように、合成部１３ｅは、拡大縮小部１３ｃから出力された関心領域画像信号であるＸ線画像信号Ｇｍを、右側の親画面Ｆｘ内に配置させ、内視鏡画像処理部１３ｄから出力された内視鏡画像信号Ｇｓを、左側の子画面Ｆｓ内に配置した親子画面像Ｇｄを生成し、表示制御部１４に出力する。表示制御部１４は、合成部１３ｅが生成した親子画面像Ｇｄを表示用画像信号に変換して表示装置４に表示させる合成画像表示処理を行う（ステップＳ８）。合成部１３ｅが合成する一方のＸ線画像信号Ｇｍは、入力された元のＸ線画像信号Ｇｘと比較し、映像部分Ｓｇｍに対応する初期の関心領域が大きく表示されたものであり、画像全体に占める余白部分Ｓｂｍの比率が小さいものであるため、親画面Ｆｘには、映像部分Ｓｇｍが大きく映しだされたＸ線画像が表示されることとなる。図５および図６の例では、拡大縮小部１３ｃは、画像信号Ｇｃを拡大した場合について説明したが、もちろん、拡大するだけに限らない。拡大縮小部１３ｃは、画像信号Ｇｃが親画面Ｆｘよりも大きい場合には、親画面Ｆｘに画像信号Ｇｃ全体が入るように画像信号Ｇｃを親画面Ｆｘの大きさに合わせて縮小して、操作者がＸ線画像の映像部分全体を確認できるようにしてもよい。
【００４１】
ここで、従来では、  外部のＸ線装置から入力されるＸ線画像信号Ｇｘを、そのままの状態で内視鏡画像信号Ｇｓと並べて合成していたため、図７に示す親子画面像Ｇｄｐのように、画像全体に占める映像部分Ｓｇの比率が小さいまま表示されてしまい、操作者は、病変部等を観察しにくかった。
【００４２】
これに対し、本実施の形態１では、合成部１３ｅが合成するＸ線画像信号Ｇｍは、入力された元のＸ線画像信号Ｇｘと比較し、画像全体に占める映像部分Ｓｇｍに対応する領域の比率が大きいため、親画面Ｆｘには映像部分Ｓｇｍが大きく映しだされる。もちろん、拡大縮小部１３ｃは、表示装置４における親画面Ｆｘの大きさに合わせて画像信号Ｇｃを縮小させることもできるため、表示装置４では、初期の関心領域の全てが親画面Ｆｘ内に収まるように自動的に表示される。
【００４３】
このように、実施の形態１では、入力されたＸ線画像信号Ｇｘから、操作者が関心を持つ映像部分に対応する初期の関心領域を適切に表した画像を自動的に表示する。したがって、実施の形態１によれば、この初期の関心領域を確認するまでの操作者による操作負担を格段に軽減できるとともに、操作者によるＸ線画像における映像部分全体の観察を適切に支援できる。
【００４４】
なお、合成部１３ｅは、図６に示す親子画面像Ｇｄに限らず、Ｘ線画像信号Ｇｍを親子画面の子画面Ｆｓ内に配置させ、内視鏡画像信号Ｇｓを親子画面の親画面Ｆｘ内に配置した親子画面像を生成してもよい。また、合成部１３ｅは、図８に示すように、ほぼ同じ大きさの画面Ｆｓａ，Ｆｘａに、それぞれＸ線画像信号Ｇｍａおよび内視鏡画像信号Ｇｓを配置した画面像Ｇｄａを生成してもよい。
【００４５】
（実施の形態２）
次に、実施の形態２について説明する。図９は、実施の形態２にかかる処理装置の構成を模式的に示すブロック図である。
【００４６】
図９に示すように、実施の形態２にかかる処理装置２０１は、処理装置１と比して、入力部１１、制御部１２および画像処理部１３に代えて、入力部２１１、制御部１２と同様の機能を有する制御部２１２、画像処理部２１３を備える。
【００４７】
入力部２１１は、入力部１１と同様の機能を有するとともに、関心領域指示入力部２１１ａおよび拡大縮小指示入力部２１１ｂを備える。関心領域指示入力部２１１ａは、操作者の指示にしたがって、表示用の関心領域を指示する関心領域指示情報の入力を受け付ける。拡大縮小指示入力部２１１ｂは、操作者の指示にしたがって、後述する関心領域切り出し部２１３ｃが切り出した表示用の関心領域の拡大または縮小を指示する拡大縮小指示情報の入力を受け付ける。
【００４８】
画像処理部２１３は、余白検出部１３ａ、関心領域提示画像生成部２１３ｂ（関心領域画像生成部）、関心領域切り出し部２１３ｃ（切り出し部）、拡大縮小部２１３ｄ、内視鏡画像処理部１３ｄ、および、合成部１３ｅを備える。
【００４９】
関心領域提示画像生成部２１３ｂは、余白検出部１３ａによって検出された余白部分をもとに、Ｘ線画像信号Ｇｘにおける映像部分に対応する初期の関心領域を設定するとともに、該設定した初期の関心領域を囲む枠を、Ｘ線画像信号Ｇｘに重ねて表した関心領域提示画像信号（関心領域画像信号）を生成し、出力する。表示制御部１４は、関心領域提示画像生成部２１３ｂが出力した関心領域提示画像信号に対応する画像を表示装置４に表示させる。操作者は、画像における枠の領域を確認することによって、映像部分に対応する初期の関心領域を把握することができる。操作者は、さらに、入力デバイスを操作して、枠の大きさを所望の大きさに変更し、変更後の枠が囲む領域を、表示装置４の表示画面に表示させる領域（表示用の関心領域）として指示する。関心領域指示入力部２１１ａは、枠の大きさの変更を受け付け、変更後の枠が囲む領域を表示用の関心領域として指示する関心領域指示情報を、制御部２１２を介して、画像処理部２１３に入力する。
【００５０】
関心領域切り出し部２１３ｃは、関心領域指示入力部２１１ａから入力された関心領域指示情報をもとに、Ｘ線画像信号Ｇｘから表示用の関心領域を切り出す。表示制御部１４は、関心領域切り出し部２１３ｃが切り出した表示用の関心領域に対応する画像を表示装置４に表示させる。操作者は、入力デバイスを操作して、自身が指示した関心領域を、所望の大きさに拡大または縮小するように指示する。この操作者の操作によって、拡大縮小指示入力部２１１ｂは、表示用の関心領域に対する拡大または縮小を指示する拡大縮小指示情報の入力を受け付け、制御部２１２を介して、画像処理部２１３に拡大縮小指示情報を入力する。拡大縮小部２１３ｄは、拡大縮小指示入力部２１１ｂから入力された拡大縮小指示情報をもとに、関心領域切り出し部２１３ｃが切り出した表示用の関心領域を拡大あるいは縮小したＸ線画像信号を生成して、合成部１３ｅに出力する。合成部１３ｅは、拡大縮小部２１３ｄによって生成されたＸ線画像信号と、内視鏡画像処理部１３ｄにおいて処理が施された内視鏡画像信号Ｇｓとを並べて合成した合成画像信号を生成し、出力する。
【００５１】
図１０は、処理装置２０１が、初期の関心領域を表す関心領域提示画像を表示装置４に表示させるまでの処理手順を示すフローチャートである。図１０に示すステップＳ１１およびステップＳ１２は、図２に示すステップＳ１およびステップＳ２である。
【００５２】
関心領域提示画像生成部２１３ｂは、余白検出部処理によって検出された余白部分をもとに、Ｘ線画像信号Ｇｘにおける映像部分に対応する初期の関心領域を設定する関心領域設定処理を行う（ステップＳ１３）。関心領域提示画像生成部２１３ｂは、関心領域設定処理において設定した初期の関心領域を囲む枠を、Ｘ線画像信号Ｇｘに重ねて表した画像を、関心領域提示画像信号として生成する関心領域提示画像生成処理を行う（ステップＳ１４）。
【００５３】
図１１は、関心領域提示画像信号に対応する画像の一例を示す図である。図１１に示すように、関心領域提示画像生成部２１３ｂは、余白検出部１３ａの検出結果をもとに、枠Ｗｘで囲まれる領域を初期の関心領域として設定し、この枠ＷｘをＸ線画像信号Ｇｘに重ねて表した画像信号Ｇｗを関心領域提示画像信号として生成する。表示制御部１４は、関心領域提示画像生成部２１３ｂが生成した関心領域提示画像信号に対応する画像を表示装置４に表示させる関心領域提示画像表示処理を行う（ステップＳ１５）。この結果、図１１に示す画像信号Ｇｗに対応する画像が、表示装置４の表示画面に表示される。
【００５４】
図１２は、処理装置２０１が、Ｘ線画像信号Ｇｘと内視鏡画像信号Ｇｓとの合成画像信号を表示装置４に表示させるまでの処理手順を示すフローチャートである。前述した図１０のステップＳ１５において、関心領域提示画像信号である画像信号Ｇｗに対応する画像が、表示装置４の表示画面に表示されるため、操作者は、入力デバイスを操作して、初期の関心領域を囲む枠Ｗｘの大きさを変更し、変更後の枠が囲む領域を、表示用の関心領域として指示する。この結果、関心領域指示入力部２１１ａから、表示用の関心領域を指示する関心領域指示情報が、制御部２１２を介して、画像処理部２１３に入力される（ステップＳ２１）。
【００５５】
続いて、関心領域切り出し部２１３ｃは、関心領域指示情報をもとに、Ｘ線画像信号Ｇｘから、表示用の関心領域を切り出す関心領域切り出し処理を行う（ステップＳ２２）。この場合、図１３の（１）に示すように、表示制御部１４は、関心領域切り出し部２１３ｃが切り出した表示用の関心領域に対応する画像信号Ｇｆを表示画面の右側領域に表示させるとともに、各種の拡大縮小倍率を選択できるアイコン画像を表示画面の左側領域Ｒａに表示させる。操作者は、入力デバイスを操作して、画像信号Ｇｆに対する所望の倍率を選択する。
【００５６】
この結果、拡大縮小指示入力部２１１ｂから、画像信号Ｇｆに対する拡大または縮小を指示する拡大縮小指示情報が、制御部２１２を介して、画像処理部２１３に入力される（ステップＳ２３）。拡大縮小部２１３ｄは、拡大縮小指示情報をもとに、関心領域切り出し部２１３ｃが切り出した表示用の関心領域を拡大あるいは縮小したＸ線画像信号を生成して、合成部１３ｅに出力する（ステップＳ２４）。たとえば、図１３の（２）のように、１．２倍の拡大処理を指示するアイコン画像Ａｍが操作者に選択された場合には、拡大縮小部２１３ｄは、切り出した画像信号Ｇｆを１．２倍に拡大したＸ線画像信号Ｇｎを生成する。なお、拡大倍率または縮小倍率の選択用アイコンは、図１３の（１）、図１３の（２）で示す例に限らず、移動可能に各倍率が表示されるスクロールバーを表示させて、任意の倍率を選択できるようにしてもよい。
【００５７】
ステップＳ２５は、図２に示すステップＳ６である。続いて、合成部１３ｅは、拡大縮小部２１３ｄによって生成されたＸ線画像信号と、内視鏡画像処理部１３ｄにおいて処理が施された内視鏡画像信号Ｇｓとを並べて合成した合成画像信号を生成する合成処理を行う（ステップＳ２６）。ステップＳ２７は、図２に示すステップＳ８である。これによって、たとえば図１４に示すように、拡大縮小部２１３ｃから出力されたＸ線画像信号Ｇｎを親画面Ｆｘ内に配置させ、内視鏡画像処理部１３ｄから出力された内視鏡画像信号Ｇｓを子画面Ｆｓ内に配置した親子画面像Ｇｅが、表示装置４の表示画面に表示される。
【００５８】
この実施の形態２では、初期の関心領域を囲む枠ＷｘをＸ線画像信号Ｇｘに重ねて表した画像信号Ｇｗを生成して提示するため、操作者は、入力デバイスの操作を行わずとも、いずれの領域が映像部分に相当するかを表した画像を取得することができる。操作者は、この画像信号Ｇｗを確認するだけで、映像部分に対応する初期の関心領域を把握することができる。さらに、実施の形態２では、操作者は、提示された初期の関心領域の大きさを、所望の大きさに調整し、より観察に適した領域を表示用の関心領域として設定できる。さらに、操作者は、表示用の関心領域として切り出した画像信号を、自身が所望する倍率に設定することもできる。このため、実施の形態２によれば、Ｘ線画像信号Ｇｘの映像部分が、操作者が所望する領域および大きさで表された画像を生成できるため、操作者によるＸ線画像に対する観察を適切に支援できる。
【００５９】
なお、実施の形態２では、余白検出部１３ａの検出結果をもとに、初期の関心領域を囲む枠ＷｘをＸ線画像信号Ｇｘに重ねて表した画像信号Ｇｗを生成して表示させる場合を例に説明したが、もちろん、これに限らない。たとえば、図１５に示すように、常に一定の領域を囲む枠ＷｐをＸ線画像信号Ｇｘに重ねて表示した画像信号Ｇｐを生成してもよい。この場合も、処理装置２０１では、図１２のステップＳ２１〜ステップＳ２７に示す処理を行うことによって、Ｘ線画像信号Ｇｘの表示用の関心領域の範囲および大きさを調整後、Ｘ線画像信号および内視鏡画像信号を合成した画面像を表示装置に表示させる。すなわち、操作者は、入力デバイスを操作して画面上のカーソルＣを操作することによって、所望の位置および範囲に枠Ｗｐの位置および範囲を変更して表示用の関心領域を設定し、該設定した関心領域を所望の倍率で拡大または縮小することができる。
【００６０】
本実施の形態１，２では、処理装置１，２０１に入力される内視鏡画像以外の画像として、Ｘ線装置５から入力されるＸ線画像信号Ｇｘを例に説明したが、もちろん、Ｘ線画像信号に限らず、超音波診断装置から入力される超音波画像であってもよい。また、実施の形態１，２では、上記図２または図１０、図１２に示す各処理を行う画像処理部１３，２１３および表示制御部１４は、もちろん内視鏡システムの処理装置１，２０１に限らず、内視鏡画像信号と、Ｘ線画像信号または超音波画像信号とが入力される装置であれば、いずれの装置に設けてもよい。
【００６１】
また、本実施の形態１，２にかかる処理装置１，２０１で実行される各処理に対する実行プログラムは、インストール可能な形式又は実行可能な形式のファイルでＣＤ−ＲＯＭ、フレキシブルディスク、ＣＤ−Ｒ、ＤＶＤ等のコンピュータで読み取り可能な記録媒体に記録して提供するように構成してもよく、インターネット等のネットワークに接続されたコンピュータ上に格納し、ネットワーク経由でダウンロードさせることにより提供するように構成してもよい。また、インターネット等のネットワーク経由で提供または配布するように構成してもよい。
【符号の説明】
【００６２】
１  処理装置
２  内視鏡
３  光源装置
４  表示装置
５  Ｘ線装置
１１，２１１  入力部
１２，２１２  制御部
１３，２１３  画像処理部
１３ａ  余白検出部
１３ｂ，２１３ｃ  関心領域切り出し部
１３ｃ，２１３ｄ  拡大縮小部
１３ｄ  内視鏡画像処理部
１３ｅ  合成部
１４  表示制御部
１５  出力部
１６  記憶部
２１１ａ  関心領域指示入力部
２１１ｂ  拡大縮小指示入力部
２１３ｂ  関心領域提示画像生成部
【図１】
2016017695.tif 000003
【図２】
2016017695.tif 000004
【図３】
2016017695.tif 000005
【図４】
2016017695.tif 000006
【図５】
2016017695.tif 000007
【図６】
2016017695.tif 000008
【図７】
2016017695.tif 000009
【図８】
2016017695.tif 000010
【図９】
2016017695.tif 000011
【図１０】
2016017695.tif 000012
【図１１】
2016017695.tif 000013
【図１２】
2016017695.tif 000014
【図１３】
2016017695.tif 000015
【図１４】
2016017695.tif 000016
【図１５】
2016017695.tif 000017
【手続補正書】
【提出日】平成28年2月23日(2016.2.23)
【手続補正１】
【補正対象書類名】特許請求の範囲
【補正対象項目名】全文
【補正方法】変更
【補正の内容】
【特許請求の範囲】
【請求項１】
複数の画素信号から構成され、被写体が映る映像部分と、前記映像部分の周囲に設けられる余白部分とを有する第１の画像信号を処理する画像処理装置であって、
前記複数の画素信号に基づいて、前記第１の画像信号における色または輝度が均一の部分を前記余白部分として検出する余白検出部と、
前記余白検出部によって検出された前記余白部分をもとに、前記第１の画像信号における前記映像部分に対応する初期の関心領域を設定する関心領域設定部と、
前記関心領域設定部が設定した前記初期の関心領域を表す関心領域画像信号を生成する関心領域画像生成部と、
を備えたことを特徴とする画像処理装置。
【請求項２】
前記余白検出部は、前記第１の画像信号が表す画面の表示領域内において、互いに大きさが異なる相似形状の複数の枠を設定し、該枠の外側の領域に属する画素信号の色または輝度が均一であるか否かに基づいて前記余白部分を検出することを特徴とする請求項１に記載の画像処理装置。
【請求項３】
前記余白検出部は、前記複数の枠のうち、最外周に設けられた枠の外側に属する領域から前記余白部分の検出を行い、画素信号の色または輝度が不均一であることが検出されるまで余白検出対象枠を段階的に縮小させながら前記余白部分の検出を繰り返し行うことを特徴とする請求項２に記載の画像処理装置。
【請求項４】
前記余白検出部は、画素信号の色または輝度が不均一であることを検出した際に用いた枠よりも一段階広い枠の外側に属する領域を、前記余白部分として検出することを特徴とする請求項３に記載の画像処理装置。
【請求項５】
前記余白検出部は、前記複数の画素信号を、前記第１の画像信号が表す画面の水平ラインごとに走査し、該水平ラインにおける色または輝度が均一である部分を前記余白部分として検出することを特徴とする請求項１に記載の画像処理装置。
【請求項６】
前記関心領域画像生成部は、
前記第１の画像信号から、前記関心領域設定部によって設定された前記初期の関心領域を切り出す切り出し部と、
前記切り出し部が前記第１の画像信号から切り出した前記初期の関心領域を、前記第１の画像信号の表示対象に対応させて拡大あるいは縮小した画像を、前記関心領域画像信号として生成する拡大縮小部と、
を備えたことを特徴とする請求項１に記載の画像処理装置。
【請求項７】
前記関心領域画像信号と、前記第１の画像信号とは異なる種別の第２の画像信号とを並べて合成した合成画像信号を生成し、出力する合成部を備えたことを特徴とする請求項１に記載の画像処理装置。
【請求項８】
前記第１の画像信号は、Ｘ線画像信号または超音波画像信号であって、
前記第２の画像信号は、内視鏡画像信号であることを特徴とする請求項７に記載の画像処理装置。
【請求項９】
前記関心領域画像生成部は、前記関心領域設定部によって設定された前記初期の関心領域を囲む枠を前記第１の画像信号に重ねて表した画像信号を、前記関心領域画像信号として生成し、出力することを特徴とする請求項１に記載の画像処理装置。
【請求項１０】
前記枠の大きさの変更を受け付け、変更後の前記枠が囲む領域を、前記第１の画像信号の表示対象に表示させる関心領域として指示する関心領域指示情報の入力を受け付ける関心領域指示入力部と、
前記第１の画像信号から、前記関心領域指示入力部から入力された前記関心領域指示情報をもとに前記関心領域を切り出す切り出し部と、
前記切り出し部が切り出した前記関心領域の拡大または縮小を指示する拡大縮小指示情報の入力を受け付ける拡大縮小指示入力部と、
前記拡大縮小指示入力部から入力された前記拡大縮小指示情報をもとに、前記切り出し部が切り出した前記関心領域を拡大あるいは縮小した画像信号を生成する拡大縮小部と、
を備えたことを特徴とする請求項９に記載の画像処理装置。
【請求項１１】
前記拡大縮小部によって生成された画像信号と、前記第１の画像信号とは異なる種別の第２の画像信号とを並べて合成した合成画像信号を生成し、出力する合成部をさらに備えたことを特徴とする請求項１０に記載の画像処理装置。
【請求項１２】
前記第１の画像信号は、Ｘ線画像信号または超音波画像信号であって、
前記第２の画像信号は、内視鏡画像信号であることを特徴とする請求項１１に記載の画像処理装置。
【請求項１３】
前記第１の画像信号は、Ｘ線画像信号または超音波画像信号であることを特徴とする請求項１に記載の画像処理装置。
【手続補正書】
【提出日】平成28年7月11日(2016.7.11)
【手続補正１】
【補正対象書類名】特許請求の範囲
【補正対象項目名】全文
【補正方法】変更
【補正の内容】
【特許請求の範囲】
【請求項１】
複数の画素信号から構成され、被写体が映る映像部分と、前記映像部分の周囲に設けられる余白部分とを有する第１の画像信号を処理する画像処理装置であって、
前記複数の画素信号に基づいて、前記第１の画像信号における色または輝度が均一の部分を前記余白部分として検出する余白検出部と、
前記余白検出部によって検出された前記余白部分をもとに、前記第１の画像信号における前記映像部分に対応する初期の関心領域を設定する関心領域設定部と、
前記関心領域設定部が設定した前記初期の関心領域を表す関心領域画像信号を生成する関心領域画像生成部と、
を備え、
前記余白検出部は、前記第１の画像信号が表す画面の表示領域内において、互いに大きさが異なる相似形状の複数の枠を外周から段階的に設定し、該枠の外側の領域に属する画素信号の色または輝度が均一であるか否かに基づいて前記余白部分を検出することを特徴とする画像処理装置。
【請求項２】
前記余白検出部は、前記複数の枠のうち、最外周に設けられた枠の外側に属する領域から前記余白部分の検出を行い、画素信号の色または輝度が不均一であることが検出されるまで余白検出対象枠を段階的に縮小させながら前記余白部分の検出を繰り返し行うことを特徴とする請求項１に記載の画像処理装置。
【請求項３】
前記余白検出部は、画素信号の色または輝度が不均一であることを検出した際に用いた枠よりも一段階広い枠の外側に属する領域を、前記余白部分として検出することを特徴とする請求項２に記載の画像処理装置。
【請求項４】
前記余白検出部は、前記複数の画素信号を、前記第１の画像信号が表す画面の水平ラインごとに走査し、該水平ラインにおける色または輝度が均一である部分を前記余白部分として検出することを特徴とする請求項１に記載の画像処理装置。
【請求項５】
前記関心領域画像生成部は、
前記第１の画像信号から、前記関心領域設定部によって設定された前記初期の関心領域を切り出す切り出し部と、
前記切り出し部が前記第１の画像信号から切り出した前記初期の関心領域を、前記第１の画像信号の表示対象に対応させて拡大あるいは縮小した画像を、前記関心領域画像信号として生成する拡大縮小部と、
を備えたことを特徴とする請求項１に記載の画像処理装置。
【請求項６】
前記関心領域画像信号と、前記第１の画像信号とは異なる種別の第２の画像信号とを並べて合成した合成画像信号を生成し、出力する合成部を備えたことを特徴とする請求項１に記載の画像処理装置。
【請求項７】
前記第１の画像信号は、Ｘ線画像信号または超音波画像信号であって、
前記第２の画像信号は、内視鏡画像信号であることを特徴とする請求項６に記載の画像処理装置。
【請求項８】
前記関心領域画像生成部は、前記関心領域設定部によって設定された前記初期の関心領域を囲む枠を前記第１の画像信号に重ねて表した画像信号を、前記関心領域画像信号として生成し、出力することを特徴とする請求項１に記載の画像処理装置。
【請求項９】
前記枠の大きさの変更を受け付け、変更後の前記枠が囲む領域を、前記第１の画像信号の表示対象に表示させる関心領域として指示する関心領域指示情報の入力を受け付ける関心領域指示入力部と、
前記第１の画像信号から、前記関心領域指示入力部から入力された前記関心領域指示情報をもとに前記関心領域を切り出す切り出し部と、
前記切り出し部が切り出した前記関心領域の拡大または縮小を指示する拡大縮小指示情報の入力を受け付ける拡大縮小指示入力部と、
前記拡大縮小指示入力部から入力された前記拡大縮小指示情報をもとに、前記切り出し部が切り出した前記関心領域を拡大あるいは縮小した画像信号を生成する拡大縮小部と、
を備えたことを特徴とする請求項８に記載の画像処理装置。
【請求項１０】
前記拡大縮小部によって生成された画像信号と、前記第１の画像信号とは異なる種別の第２の画像信号とを並べて合成した合成画像信号を生成し、出力する合成部をさらに備えたことを特徴とする請求項９に記載の画像処理装置。
【請求項１１】
前記第１の画像信号は、Ｘ線画像信号または超音波画像信号であって、
前記第２の画像信号は、内視鏡画像信号であることを特徴とする請求項１０に記載の画像処理装置。
【請求項１２】
前記第１の画像信号は、Ｘ線画像信号または超音波画像信号であることを特徴とする請求項１に記載の画像処理装置。
【手続補正書】
【提出日】平成28年10月17日(2016.10.17)
【手続補正１】
【補正対象書類名】特許請求の範囲
【補正対象項目名】全文
【補正方法】変更
【補正の内容】
【特許請求の範囲】
【請求項１】
複数の画素信号から構成され、被写体が映る映像部分と、前記映像部分の周囲に設けられる余白部分とを有する第１の画像信号を処理する画像処理装置であって、
前記複数の画素信号に基づいて、前記第１の画像信号における色または輝度が均一の部分を前記余白部分として検出する余白検出部と、
前記余白検出部によって検出された前記余白部分をもとに、前記第１の画像信号における前記映像部分に対応する初期の関心領域を設定する関心領域設定部と、
前記関心領域設定部が設定した前記初期の関心領域を表す関心領域画像信号を生成する関心領域画像生成部と、
を備え、
前記余白検出部は、前記第１の画像信号が表す画面の表示領域内において、互いに大きさが異なる相似形状の複数の枠を外周から段階的に設定し、該枠の外側の領域に属する画素信号の色または輝度が均一であるか否かに基づいて前記余白部分を検出することを特徴とする画像処理装置。
【請求項２】
前記余白検出部は、前記複数の枠のうち、最外周に設けられた枠の外側に属する領域から前記余白部分の検出を行い、画素信号の色または輝度が不均一であることが検出されるまで余白検出対象枠を段階的に縮小させながら前記余白部分の検出を繰り返し行うことを特徴とする請求項１に記載の画像処理装置。
【請求項３】
前記余白検出部は、画素信号の色または輝度が不均一であることを検出した際に用いた枠よりも一段階広い枠の外側に属する領域を、前記余白部分として検出することを特徴とする請求項２に記載の画像処理装置。
【請求項４】
前記余白検出部は、前記複数の画素信号を、前記第１の画像信号が表す画面の水平ラインごとに走査し、該水平ラインにおける色または輝度が均一である部分を前記余白部分として検出することを特徴とする請求項１に記載の画像処理装置。
【請求項５】
前記関心領域画像生成部は、
前記第１の画像信号から、前記関心領域設定部によって設定された前記初期の関心領域を切り出す切り出し部と、
前記切り出し部が前記第１の画像信号から切り出した前記初期の関心領域を、前記第１の画像信号の表示対象に対応させて拡大あるいは縮小した画像を、前記関心領域画像信号として生成する拡大縮小部と、
を備えたことを特徴とする請求項１に記載の画像処理装置。
【請求項６】
前記関心領域画像信号と、前記第１の画像信号とは異なる種別の第２の画像信号とを並べて合成した合成画像信号を生成し、出力する合成部を備えたことを特徴とする請求項１に記載の画像処理装置。
【請求項７】
前記第１の画像信号は、Ｘ線画像信号または超音波画像信号であって、
前記第２の画像信号は、内視鏡画像信号であることを特徴とする請求項６に記載の画像処理装置。
【請求項８】
前記関心領域画像生成部は、前記関心領域設定部によって設定された前記初期の関心領域を囲む枠を前記第１の画像信号に重ねて表した画像信号を、前記関心領域画像信号として生成し、出力することを特徴とする請求項１に記載の画像処理装置。
【請求項９】
前記関心領域設定部によって設定された前記初期の関心領域を囲む枠の大きさの変更を受け付け、変更後の前記関心領域の枠が囲む領域を、前記第１の画像信号の表示対象に表示させる関心領域として指示する関心領域指示情報の入力を受け付ける関心領域指示入力部と、
前記第１の画像信号から、前記関心領域指示入力部から入力された前記関心領域指示情報をもとに前記関心領域を切り出す切り出し部と、
前記切り出し部が切り出した前記関心領域の拡大または縮小を指示する拡大縮小指示情報の入力を受け付ける拡大縮小指示入力部と、
前記拡大縮小指示入力部から入力された前記拡大縮小指示情報をもとに、前記切り出し部が切り出した前記関心領域を拡大あるいは縮小した画像信号を生成する拡大縮小部と、
を備えたことを特徴とする請求項８に記載の画像処理装置。
【請求項１０】
前記拡大縮小部によって生成された画像信号と、前記第１の画像信号とは異なる種別の第２の画像信号とを並べて合成した合成画像信号を生成し、出力する合成部をさらに備えたことを特徴とする請求項９に記載の画像処理装置。
【請求項１１】
前記第１の画像信号は、Ｘ線画像信号または超音波画像信号であって、
前記第２の画像信号は、内視鏡画像信号であることを特徴とする請求項１０に記載の画像処理装置。
【請求項１２】
前記第１の画像信号は、Ｘ線画像信号または超音波画像信号であることを特徴とする請求項１に記載の画像処理装置。
【国際調査報告】
2016017695.tif 000018
2016017695.tif 000019
2016017695.tif 000020