(57)【要約】【課題】  表示画像に含まれる特定の条件を満たすオブジェクトの空間的な位置が把握しやすい画像処理装置の制御方法を提供することを目的とする。【解決手段】  本発明における画像処理装置２００の制御方法は、複数の画像のうち、特定の条件を満たすオブジェクトが含まれる特定画像の空間的な位置に関する付加情報を取得する取得工程と、前記特定画像の前記付加情報に基づいて、当該特定画像に含まれる前記オブジェクトに対して補正処理を施す補正工程と、前記補正手段により、補正処理を施された前記特定画像を用いて表示画像を生成する生成工程とを備え、前記補正工程では、前記特定画像と前記基準位置との距離が短いほど、当該特定画像に含まれる前記オブジェクトが手前に見える視覚効果を付与することを特徴とする。【選択図】  図１
2017012443.tif 000002
【特許請求の範囲】
【請求項１】
空間的な位置に関する付加情報を有する複数の画像のうち、特定の条件を満たすオブジェクトが含まれる特定画像の前記付加情報を取得する取得工程と、
前記特定画像の前記付加情報に基づいて、当該特定画像に含まれる前記オブジェクトに対して補正処理を施す補正工程と、
前記補正工程で、補正処理を施された前記特定画像を用いて表示画像を生成する生成工程と
を備え、
前記付加情報は、前記複数の画像と、基準位置との距離を示す情報であって、
前記補正工程では、前記特定画像と前記基準位置との距離が短いほど、当該特定画像に含まれる前記オブジェクトが手前に見える視覚効果を、当該オブジェクトに対して付与することを特徴とする画像処理装置の制御方法。
【請求項２】
前記複数の画像は、３次元座標空間において、１つの方向に連続した一連の画像群であり、
前記基準位置は、前記方向における基準点の位置であることを特徴とする請求項１に記載の画像処理装置の制御方法。
【請求項３】
前記基準点は、前記３次元座標空間において、前記画像群に対して予め定められた位置に設けられることを特徴とする請求項２に記載の画像処理装置の制御方法。
【請求項４】
前記複数の画像それぞれの前記付加情報は、前記複数の画像それぞれの空間的な位置に応じて異なる番号を含むことを特徴とする請求項１に記載の画像処理装置の制御方法。
【請求項５】
前記複数の画像それぞれの前記付加情報は、前記複数の画像それぞれが取得された時刻に関する情報であることを特徴とする請求項１に記載の画像処理装置の制御方法。
【請求項６】
前記補正工程では、前記特定画像の空間的な位置が手前側であるほど、当該特定画像が有するオブジェクトの輝度を増加させることを特徴とする請求項１乃至請求項５のいずれか１項に記載の画像処理装置の制御方法。
【請求項７】
前記補正工程では、前記特定画像の空間的な位置が手前側であるほど、当該特定画像が有するオブジェクトの彩度を増加させることを特徴とする請求項１乃至請求項６のいずれか１項に記載の画像処理装置の制御方法。
【請求項８】
前記表示画像において、前記オブジェクトを含む領域の輝度特性が、所定の値よりも大きい場合に、
前記補正工程では、前記特定画像の空間的な位置が手前側であるほど、短い波長の色を用いて、当該特定画像が有するオブジェクトに補正処理を施すことを特徴とする請求項１乃至請求項５のいずれか１項に記載の画像処理装置の制御方法。
【請求項９】
前記表示画像において、前記オブジェクトを含む領域の輝度特性が、所定の値よりも大きい場合に、
前記補正工程では、前記特定画像の空間的な位置が手前側であるほど、当該特定画像が有するオブジェクトの輝度を低下させることを特徴とする請求項１乃至請求項５、および請求項８のいずれか１項に記載の画像処理装置の制御方法。
【請求項１０】
複数の前記特定画像に、共通の前記オブジェクトが含まれる場合に、
前記補正工程では、前記複数の特定画像の付加情報のうち、中間の付加情報を用いて、当該オブジェクトに補正処理を施すことを特徴とする請求項１乃至請求項５、請求項８および請求項９のいずれか１項に記載の画像処理装置の制御方法。
【請求項１１】
前記生成工程では、少なくとも２以上の前記特定画像を合成して前記表示画像を生成することを備えることを特徴とする請求項１乃至請求項１０のいずれか１項に記載の画像処理装置の制御方法。
【請求項１２】
前記複数の画像それぞれに対して、特定の条件を満たすオブジェクトの検出を行う検出工程と、
前記検出工程で、前記オブジェクトが検出された画像を特定画像と判別する判別工程と
を備えることを特徴とする請求項１乃至請求項１１のいずれか１項に記載の画像処理装置の制御方法。
【請求項１３】
第１記憶手段に記憶された前記複数の画像を取得する第１取得工程を備える請求項１乃至請求項１２のいずれか１項に記載の画像処理装置の制御方法。
【請求項１４】
第２記憶手段に記憶された空間的な位置と補正方法とを関連付けた制御情報を取得する第２取得工程を備える請求項１乃至請求項１３のいずれか１項に記載の画像処理装置の制御方法。
【請求項１５】
請求項１乃至請求項１４のいずれか１項に記載の画像処理装置の制御方法の各工程をコンピュータ上で実施するためのプログラム。
【請求項１６】
複数の画像のうち、特定の条件を満たすオブジェクトを有する特定画像の空間的な位置に関する付加情報を取得する取得手段と、
前記特定画像の前記付加情報に基づいて、当該特定画像に含まれる前記オブジェクトに対して補正処理を施す補正手段と、
前記補正手段により、補正処理を施された前記特定画像を用いて表示画像を生成する生成手段と
を備え、
前記付加情報は、前記複数の画像と、基準位置との距離を示す情報であって、
前記補正手段は、前記特定画像と前記基準位置との距離が短いほど、当該特定画像に含まれる前記オブジェクトが手前に見える視覚効果を、当該オブジェクトに対して付与することを特徴とする画像処理装置の制御方法。
【請求項１７】
画像の空間的な位置と基準位置との距離を示す付加情報を有する複数の画像のうち、特定の条件を満たすオブジェクトが含まれる特定画像の前記付加情報を取得する取得工程と、
前記取得工程で取得された前記付加情報に基づいて、前記特定画像と前記基準位置との距離が短いほど、当該特定画像に含まれる前記オブジェクトが手前に見える視覚効果を、当該特定画像に対して付与し、前記視覚効果が付与された前記特定画像を含む２以上の画像を重畳した表示画像を出力する出力工程と
を備えることを特徴とする画像処理装置の制御方法。
【請求項１８】
画像の空間的な位置と基準位置との距離を示す付加情報を有する複数の画像のうち、特定の条件を満たすオブジェクトが含まれる特定画像の前記付加情報を取得する取得手段と、
前記取得手段により取得された前記付加情報に基づいて、前記特定画像と前記基準位置との距離が短いほど、当該特定画像に含まれる前記オブジェクトが手前に見える視覚効果を、当該特定画像に対して付与し、前記視覚効果が付与された前記特定画像を含む２以上の画像を重畳した表示画像を出力する出力手段と
を備えることを特徴とする画像処理装置。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、画像処理装置の制御方法、および画像処理装置に関する。
【背景技術】
【０００２】
医用イメージング装置において、診断対象部位の複数の断面画像を撮影し、撮影した複数の断面画像を合成して観察することにより、診断対象部位の病変領域を診断する手法が存在する。各断面画像上で特定の条件を満たす部分を、病変領域等と判断して、診断を行う。
【０００３】
特許文献１に記載の発明では、事前に取得された３次元データに基づいて、血管芯線や病変領域（プラーク）の位置情報を算出し、病変領域の血管芯線に対する位置が手前か奥かに応じて、病変領域に着色する色を変えて表示するＸ線撮影装置が開示されている。
【先行技術文献】
【特許文献】
【０００４】
【特許文献１】特開２００９−３４４９４号公報
【発明の概要】
【発明が解決しようとする課題】
【０００５】
しかしながら、上述した従来の技術では、血管芯線に対して病変領域が手前か否かは色で識別できるが、複数の画像を重ねて表示した際に、それぞれの病変領域の奥行き方向の位置関係（手前側か奥側か）が直感的に把握できないという課題があった。
【０００６】
そこで、本発明は、上記課題に鑑みて、表示画像に含まれる特定の条件を満たすオブジェクトの空間的な位置が把握しやすい画像処理装置の制御方法を提供することを目的とする。
【課題を解決するための手段】
【０００７】
上述した課題を解決するために、本発明における第１の画像処理装置の制御方法は、空間的な位置に関する付加情報を有する複数の画像のうち、特定の条件を満たすオブジェクトが含まれる特定画像の前記付加情報を取得する取得工程と、前記特定画像の前記付加情報に基づいて、当該特定画像に含まれる前記オブジェクトに対して補正処理を施す補正工程と、前記補正工程で、補正処理を施された前記特定画像を用いて表示画像を生成する生成工程とを備え、前記付加情報は、前記複数の画像と、基準位置との距離を示す情報であって、前記補正工程では、前記特定画像と前記基準位置との距離が短いほど、当該特定画像に含まれる前記オブジェクトが手前に見える視覚効果を、当該オブジェクトに対して付与することを特徴とする。
【０００８】
本発明における第２の画像処理装置の制御方法は、画像の空間的な位置と基準位置との距離を示す付加情報を有する複数の画像のうち、特定の条件を満たすオブジェクトが含まれる特定画像の前記付加情報を取得する取得工程と、前記取得工程で取得された前記付加情報に基づいて、前記特定画像と前記基準位置との距離が短いほど、当該特定画像に含まれる前記オブジェクトが手前に見える視覚効果を、当該特定画像に対して付与し、前記視覚効果が付与された前記特定画像を含む２以上の画像を重畳した表示画像を出力する出力工程とを備えることを特徴とする。
【０００９】
上述した課題を解決するために、本発明における第１の画像処理装置は、複数の画像のうち、特定の条件を満たすオブジェクトを有する特定画像の空間的な位置に関する付加情報を取得する取得手段と、前記特定画像の前記付加情報に基づいて、当該特定画像に含まれる前記オブジェクトに対して補正処理を行う補正手段と、前記補正手段により、補正処理を施された前記特定画像を用いて表示画像を生成する生成手段とを備え、前記付加情報は、前記複数の画像と、基準位置との距離を示す情報であって、前記補正手段は、前記特定画像と前記基準位置との距離が短いほど、当該特定画像に含まれる前記オブジェクトが手前に見える視覚効果を、当該オブジェクトに対して付与することを特徴とする。本発明における第２の画像処理装置は、画像の空間的な位置と基準位置との距離を示す付加情報を有する複数の画像のうち、特定の条件を満たすオブジェクトが含まれる特定画像の前記付加情報を取得する取得手段と、前記取得手段により取得された前記付加情報に基づいて、前記特定画像と前記基準位置との距離が短いほど、当該特定画像に含まれる前記オブジェクトが手前に見える視覚効果を、当該特定画像に対して付与し、前記視覚効果が付与された前記特定画像を含む２以上の画像を重畳した表示画像を出力する出力手段とを備えることを特徴とする。
【発明の効果】
【００１０】
本発明の画像処理装置の制御方法によれば、表示画像に含まれる特定の条件を満たすオブジェクトの空間的な位置が把握しやすくなる。
【図面の簡単な説明】
【００１１】
【図１】第１の実施例における画像処理装置の制御方法を用いた、画像表示装置１の機能ブロック図である。
【図２】診断領域３００と、診断領域３００の複数の断面画像３１１〜３１６で構成される画像群３１０と、複数の断面画像から合成された表示画像３２０とを示した模式図である。
【図３】第１の実施例における画像処理装置２００の制御フローを示すフローチャートである。
【図４】複数の断面画像３１１〜３１６に対する基準点Ｒｐ、および視線軸６０５を示した模式図である。
【図５】第１の実施例において画像表示制御部２２１で決定された視線軸６０５上のそれぞれの位置に対応する色の波長、色相、および進出性を示す模式図である。
【図６】断面画像３１３と、断面画像３１３に含まれるオブジェクトＯｂｊ−Ｂ、Ｏｂｊ−Ｃに対する補正処理を示した模式図である。
【図７】表示画像３２０を示す模式図である。
【図８】第２の実施例における画像表示装置１の機能ブロックである。
【図９】第２の実施例における画像処理装置２００の制御フローを示すフローチャートである。
【図１０】断面画像３１１に含まれるオブジェクトＯｂｊ−Ａの周辺を拡大した模式図である。
【図１１】画像６２０に対して、複数のオブジェクトを含む周辺領域６３０を示した模式図である。
【図１２】第２の実施例において、周辺領域の輝度特性が所定の値よりも大きい場合、画像表示制御部２２１が決定する位置情報に対する色の配置を示した模式図である。
【図１３】第２の実施例において、色の配置が決定した以降の、オブジェクトに対する補正処理、および表示画像３２０の生成処理のフローを示すフローチャートである。
【発明を実施するための形態】
【００１２】
以下、図面を用いて本発明の実施の形態について説明する。なお、本発明の技術的範囲は、特許請求の範囲によって確定され、以下に例示する実施例によって限定されるものではない。また、実施例の中で説明されている特徴の組み合わせすべてが本発明に必須とは限らない。本明細書および図面に記載の内容は例示であって、本発明を制限するものと見なすべきではない。本発明の趣旨に基づき種々の変形（各実施例の有機的な組合せを含む）が可能であり、それらを本発明の範囲から除外するものではない。即ち、各実施例及びその変形例を組み合わせた構成も全て本発明に含まれるものである。
【００１３】
（第１の実施例）
図１は、本発明の第１の実施例における画像処理装置の制御方法を用いた、画像表示装置１の機能ブロック図である。画像表示装置１は、画像を表示する表示ユニット１００と、画像処理装置２００とを備える。表示ユニット１００は、通信制御部１０１、映像入力部１０２、表示制御部１０３、表示部１０４、および発光部１０５を備える。
【００１４】
通信制御部１０１は、後述する画像処理装置２００の通信制御部２０３と通信し、各種データのやり取りを行う。映像入力部１０２は、後述する画像処理装置２００の映像出力部２０２から、画像信号を取得する。
【００１５】
表示制御部１０３は、映像入力部１０２が取得した画像信号を、表示部１０４が表示可能な形式に変換する。また、表示制御部１０３は、映像入力部１０２が取得した画像信号に基づいて発光部１０５の発光量を決定する。表示部１０４は、表示制御部１０３から取得した変換後の画像信号を用いて画像を表示する液晶表示パネルである。発光部１０５は、表示制御部１０３により決定された発光量に基づいて、表示部１０４へ光を照射する。表示部１０４は、発光部１０５から照射された光を透過して画像を表示する。
【００１６】
なお、表示ユニット１００は、液晶表示パネルを用いていなくともよい。例えばＯＬＥＤ（Ｏｒｇａｎｉｃ  Ｌｉｇｈｔ−Ｅｍｉｔｔｉｎｇ  Ｄｉｏｄｅ）を画素に用いた自発光型の表示装置を用いてもよい。また、表示部１０４を透過した光を、スクリーン等に投射して画像を表示するプロジェクタであってもよい。
【００１７】
画像処理装置２００は、ＣＰＵ（Ｃｅｎｔｒａｌ  Ｐｒｏｃｅｓｓｉｎｇ  Ｕｎｉｔ）２０１、映像出力部２０２、通信制御部２０３、メモリ２０４、ＵＩ（Ｕｓｅｒ  Ｉｎｔｅｒｆａｃｅ）２０５、記憶部２０６、およびバスライン２０７を備える。ＣＰＵ２０１は、記憶部２０６に記録されているＯＳ（Ｏｐｅｒａｔｉｎｇ  Ｓｙｓｔｅｍ）を展開して、実行することにより、画像処理装置２００内の各機能ブロックを制御する。また、後述するように、ＣＰＵ２０１は、ＣＰＵ２０１内で動作するアプリケーションの動作を制御する。
【００１８】
映像出力部２０２は、ＣＰＵ２０１で処理された画像信号を、表示ユニット１００の映像入力部１０２へ出力する。通信制御部２０３は、各種データを表示ユニット１００の通信制御部１０１とやり取りする。それぞれの機能ブロック間の通信は、有線通信で行われてもよく、無線通信で行うことも可能である。メモリ２０４は、画像処理装置２００において使用される各種データを記憶し、各機能ブロックへ出力する。メモリ２０４が記憶するデータは、例えば、映像出力部２０２が出力する画像信号や、ＣＰＵ２０１内で動作するアプリケーションが使用する各制御情報等を含む。
【００１９】
ＵＩ２０５は、画像処理装置２００に対する操作情報を、ユーザの操作に基づいて各機能ブロックに送信するインターフェースである。ＵＩ２０５は、例えばマウス、キーボード、タッチパネルである。記憶部２０６は、例えばハードディスク等の不揮発性メモリである。記憶部２０６は、ハードディスク等の不揮発性メモリなどであり、ＣＰＵ２０１を動作させるＯＳ、および後述する複数の断層画像等の画像データを記憶し保存している。バスライン２０７は、画像処理装置２００内の各機能ブロック間のデータの通信を行うための伝送用経路である。
【００２０】
次にＣＰＵ２０１内で動作する各機能ブロックについて説明する。ＣＰＵ２０１は、画像表示制御部２２１、画像取得部２２２、検出部２２３、補正処理部２２４、および生成部２２５を有する。各機能ブロックは、それぞれの機能を発揮するプログラムで記述することも可能である。
【００２１】
画像表示制御部２２１は、ＣＰＵ２０１内の各機能ブロックの制御を行う。また、画像表示制御部２２１は、ＵＩ２０５から入力された操作情報に対応する処理を行う。具体的には画像表示制御部２２１は、画像ビューワ等である。以降のＣＰＵ２０１内の各機能ブロックは、画像表示制御部２２１の制御により、動作する。画像取得部２２２は、記憶部２０６から複数の画像で構成される画像群を取得する。ＵＩ２０５を介して、記憶部２０６に記憶された複数の画像からユーザが所望の画像を選択して画像群を形成することも可能である。本実施例において、複数の画像は、トモシンセシス画像等の複数の断面画像で構成される。
【００２２】
検出部２２３は、画像取得部２２２が取得した複数の画像それぞれに対して、特定の条件を満たすオブジェクトの検出を行う。診断用のトモシンセシス画像の場合、特定の条件を満たすオブジェクトは例えば、石灰化病変領域である。検出部２２３は、画像内で、所定の階調値以上となる画素が、所定の面積もしくは形状を満たす場合に、特定の条件を満たすオブジェクトとして検出する。検出部２２３が検出したオブジェクトの位置や、形状、階調値等の情報は、画像表示制御部２２１を介してメモリ２０４に保存される。また、画像表示制御部２２１は、特定の条件を満たすオブジェクトが検出された画像を、特定画像と判別する。
【００２３】
補正処理部２２４は、検出部２２３が検出したオブジェクトに対して、補正処理を行う。具体的には、補正処理は、オブジェクトに対する着色処理や輝度変更処理である。補正処理部２２４は、メモリ２０４から、特定画像の位置情報と、着色する色もしくは輝度とを関連付けた制御情報を読み出す。また、補正処理部２２４は、特定画像を記憶部２０６から取得する。そして、補正処理部２２４は、取得した特定画像の位置情報と、制御情報とから、特定画像の位置情報に応じて異なる補正処理を当該特定画像に含まれるオブジェクトに実施する。補正処理部２２４は、補正処理が施された特定画像を、記憶部２０６に出力する。
【００２４】
生成部２２５は、補正処理が施された少なくとも１つの特定画像を記憶部２０６から読み出して、表示画像を生成する。表示画像の生成に用いられる断面画像（特定画像）は、ＵＩ２０５の入力等により、ユーザが任意に選択することが可能である。
【００２５】
複数の断面画像について、図２を用いて説明する。図２は、診断領域３００と、診断領域３００の複数の断面画像３１１〜３１６で構成される画像群３１０と、複数の断面画像から合成された表示画像３２０とを示した模式図である。診断領域３００は、複数のオブジェクト３０３を含んでいる。断面撮影装置が、診断領域３００に対してｚ軸方向に撮影位置をシフトしながら撮影することにより、複数の断面画像３１１〜３１６が取得される。複数の断面画像３１１〜３１６は、図２に示すように３次元座標空間上のｚ軸方向に連続した一連の画像群となる。
【００２６】
撮影された複数の断面画像３１１〜３１６は、それぞれの断面画像の撮影時におけるｚ軸上の座標情報とともに、画像群３１０として記憶部２０６に記憶される。複数の断面画像３１１〜３１６の一部は、オブジェクト３０３を含んでいる。複数の断面画像３１１〜３１６は、ｚ軸方向に重畳されて合成され、表示画像３２０が生成される。
【００２７】
図３は、本実施例における画像処理装置２００の制御フローを示すフローチャートである。Ｓ４０１にて、画像取得部２２２が、ＵＩ２０５から入力された操作情報をもとに、記憶部２０６から画像群を取得する。このとき、画像取得部２２２は、画像群が有する複数の画像の枚数Ｎの情報を取得する。本実施例では、画像取得部２２２は、画像群３１０を取得するとする。画像群３１０に含まれる複数の断面画像の枚数Ｎは６枚である。
【００２８】
Ｓ４０２にて、画像表示制御部２２１は、取得された画像群３１０に対して、基準点Ｒｐと視線軸６０５を設定する。図４は、複数の断面画像３１１〜３１６に対する基準点Ｒｐ、および視線軸６０５を示した模式図である。本実施例において、視線軸６０５はｚ軸方向に伸びた直線であるとする。また、基準点Ｒｐは、断面画像３１１に対してｚ方向に一定距離離れた点とする。基準点Ｒｐは後述する遠近感を表現するために、画像群の外側にあることが望ましい。
【００２９】
断面画像３１１〜３１６はそれぞれ、視線軸６０５との交点Ｉｐ１〜Ｉｐ６を有している。基準点Ｒｐと、各断面画像３１１〜３１６それぞれとの距離は、基準点Ｒｐと、各交点Ｉｐ１〜Ｉｐ６との差であり、例えば、断面画像３１１の距離は、｜Ｒｐ−Ｉｐ１｜で表わされる。各断面画像３１１〜３１６の基準点Ｒｐに対する距離は、各断面画像の位置を示す付加情報（位置情報）として、メモリ２０４に記憶される。
【００３０】
視線軸６０５は、上述したように複数の断面画像３１１〜３１６の連続する方向とするほか、ユーザが任意にＵＩ２０５を用いて指定することも可能である。基準点Ｒｐもユーザが任意に指定することが可能である。また、複数の断面画像３１１〜３１６の連続する方向は、例えば、時間軸方向であってもよい。例えば、同一の対象に対して、撮影タイミングを変えて画像を取得することにより、一連の画像群を形成することも可能である。この場合、それぞれの画像の位置情報は、画像が取得された時刻と、基準時刻との差となる。
【００３１】
また、位置情報は、上述したようにある座標軸上における基準点と複数の画像それぞれとの距離でなくともよい。複数の画像それぞれに、番号が付加されている場合、その番号を用いて複数の画像それぞれの位置情報とすることが可能である。つまり、各断面画像の位置を示す付加情報は、各断面画像の任意の空間上における位置と、同一空間上における基準位置との距離を示す情報である。
【００３２】
Ｓ４０３で、画像表示制御部２２１は、取得された各断面画像の位置情報を用いて、色の配置を決定する。図５は、画像表示制御部２２１で決定された視線軸６０５上のそれぞれの位置に対応する色の波長、色相、および進出性を示す模式図である。基準点Ｒｐに近いほど、波長が長い暖色系の色が配色され、基準点Ｒｐから遠い断面画像ほど波長が短い寒色系の色が配色される。同一画面上にこれらの色で着色された物体が配置された場合、ユーザは、暖色系の色で着色された物体が寒色系の色で着色された物体よりも手前側にあると認識し易い。これを進出性が高いという。暖色系の色は、進出色とされ、寒色系の色は後退色とされる。
【００３３】
本実施例において、画像表示制御部２２１は、複数の断面画像のうち、もっとも遠い断面画像３１６と基準点Ｒｐとの距離｜Ｒｐ−Ｉｐ６｜を用いて、位置に対する色の配置を決定する。具体的には、制御可能な波長の範囲を、もっとも遠い断面画像の基準点Ｒｐとの距離｜Ｒｐ−Ｉｐ６｜で除算することにより、単位長あたりの波長の割合を求める。また、複数の断面画像の総枚数Ｎで等分して、画像の順番に応じて、色の配置を決めることも可能である。これにより、基準点Ｒｐとの距離に応じて、遠近感の変化する色が配色される。基準点Ｒｐに近い位置情報を有する断面画像に対して、進出性の高い色が配色される。決定された色の配置は、メモリ２０４に記憶される。
【００３４】
Ｓ４０４で、画像表示制御部２２１は、取得された画像群に含まれる複数の断面画像を、記憶部２０６から画像取得部２２２を経由して順次読み出し、処理が開始される。取得された断面画像は、検出部２２３に出力される。Ｓ４０５において、検出部２２３は、断面画像に対して所定の条件を満たすオブジェクトの有無を検出する。所定の条件は、輝度、形状、もしくは面積等で規定される条件である。例えば、輝度が一定以上の画素が、略円形状に所定の数以上集中している箇所が、オブジェクトとして検出される。
【００３５】
図４に示すように、検出部２２３は、断面画像３１１上のオブジェクトＯｂｊ−Ａを検出する。同様に検出部２２３は、断面画像３１３、３１５、３１６から、オブジェクトＯｂｊ−Ｂ〜Ｏｂｊ−Ｅを検出する。検出部２２３は、検出したオブジェクトの位置、形状等の情報を、それぞれの断面画像の情報と関連付けて、画像表示制御部２２１に出力する。
【００３６】
Ｓ４０６で、画像表示制御部２２１は、検出部２２３がオブジェクトを検出した場合に、当該断面画像を特定画像と判別する。図４の画像群３１０に含まれる複数の断面画像のうち、断面画像３１１、３１３、３１５および３１６は特定画像と判別される。また、断面画像３１２および断面画像３１４は、オブジェクトを含まないため、特定画像と判定されない。判定する断面画像が、特定画像でない場合、Ｓ４１０に進む。
【００３７】
Ｓ４０７で、画像表示制御部２２１は、特定画像と判定された断面画像の位置情報をメモリ２０４から取得し、特定画像、検出部２２３が検出したオブジェクトの情報、およびメモリ２０４から読み出した色の配置情報とともに補正処理部２２４に出力する。
【００３８】
Ｓ４０８で、補正処理部２２４は、特定画像のオブジェクトに対して、特定画像の位置情報と、色の配置情報とに基づいて補正に用いる補正色を決定する。上述したように単位長あたりの波長の割合が、色の配置情報として決定されている場合、特定画像の位置情報に、色の配置情報を乗算することによって、当該特定画像のオブジェクトに対する補正色が決定される。
【００３９】
補正処理部２２４は、補正色を用いて、特定画像のオブジェクトに対して補正処理を行う。図６は断面画像３１３と、断面画像３１３に含まれるオブジェクトＯｂｊ−Ｂ、Ｏｂｊ−Ｃに対する補正処理を示した模式図である。図６（ａ）に示すように、断面画像３１３内に２つのオブジェクトＯｂｊ−Ｂ，Ｏｂｊ−Ｃが含まれている。図６（ｂ）に示すように、オブジェクト７Ｂ、７Ｃ自体に補正色を用いて着色処理を施してもよい。
【００４０】
また、図６（ｃ）に示すように、オブジェクトＯｂｊ−Ｂ、Ｏｂｊ−Ｃの周囲を補正色を用いて着色処理を施すことや、図６（ｄ）に示すように、補正色を用いてオブジェクトＯｂｊ−Ｂ、Ｏｂｊ−Ｃの縁取りをすることも可能である。本実施例では、オブジェクトＯｂｊ−Ｂ、Ｏｂｊ−Ｃ自体に着色処理を施したとする。補正処理が施された特定画像は、メモリ２０４に記憶される。
【００４１】
上記のように、色の配置情報と、オブジェクトが含まれる特定画像の位置情報に基づいて、当該オブジェクトに補正処理を施すことにより、基準点Ｒｐに近い特定画像に含まれるオブジェクトが、ユーザに対してより手前側にあると視認されやすくなる。
【００４２】
なお、共通のオブジェクトが複数の特定画像にまたがっている場合、補正処理部２２４は当該オブジェクトが含まれる複数の特定画像の位置情報のうち、中間の位置情報を用いて、補正処理を施す。これによって、１つのオブジェクトに複数の進出性を有する色が着色され、視認性を低下させることを抑制することが可能となる。
【００４３】
Ｓ４１０で、画像群３１０の断面画像の総数Ｎに対して、上述した処理が終わっているか否かを判定し、未処理の断面画像がある場合（ｉ＜Ｎ）、ｉに１を加算して、Ｓ４０４に戻る。画像群３１０に含まれる全ての断面画像に対して、処理が行われたと判定された場合、Ｓ４１１に向かう。
【００４４】
Ｓ４１１で、生成部２２５が、特定画像を用いて表示画像３２０を生成する。生成部２２５は、メモリ２０４から少なくとも１以上の特定画像を取得し、表示画像３２０を生成する。このとき、画像群３１０に含まれる複数の断面画像を用いて、合成処理を行ってもよい。生成部２２５は、２以上の断面画像および特定画像を用いて表示画像３２０を生成する場合、視線軸方向に、これらの画像を重畳して、表示画像３２０を合成する。合成する断面画像、および特定画像を、ＵＩ２０５からユーザが任意に選択することも可能である。
【００４５】
図７は、表示画像３２０を示す模式図である。それぞれの特定画像に含まれるオブジェクトが、補正処理を施されて表示画像３２０に表示される。上述したフローに従って、それぞれのオブジェクトが含まれる特定画像の位置情報に応じて、進出性の異なる色に着色されている。
【００４６】
生成部２２５は、生成した表示画像３２０を出力する。表示画像３２０は、映像出力部２０２を介して、表示ユニット１００の映像入力部１０２に出力される。また、直接映像出力部２０２に出力せず、記憶部２０６に保存することも可能ある。
【００４７】
本実施例における画像表示装置の制御方法によれば、特定の条件を満たすオブジェクトを含む特定画像と基準位置との距離が近いほど、当該特定画像に含まれるオブジェクトが手前に見える視覚効果を付与する補正処理を施す。これにより、補正処理を施された特定画像を用いて、表示画像を生成する場合に、複数のオブジェクトの奥行きに関する情報を直感的に把握することが可能となる。したがって、表示画像に含まれるオブジェクトの空間的な位置が把握しやすくなる。
【００４８】
なお、本実施例において、位置情報と関連する色の配置として、暖色系から寒色系に変わる波長分布を用いたが、進出性の変更方法はこれに限らない。同一の色相では、彩度が高いほど進出性が高いとされることから、位置情報に応じて、彩度を変えることも可能である。
【００４９】
また、位置情報に応じて、表示輝度を変えることも可能である。同一の色でも輝度（明度）が高いほうが進出性が高く、手前側に見える。具体的には、基準点Ｒｐと特定画像との距離が近い場合、当該特定画像に含まれるオブジェクトの輝度を増加させる。特定画像の位置情報に応じて、オブジェクトの輝度を変えることにより、断面画像がモノクロ画像であっても、表示画像上のオブジェクトの遠近感が異なるように補正処理を施すことが可能となる。
【００５０】
特定画像の位置情報に応じてオブジェクトの表示輝度を変更する場合、特定画像のうち、もっとも基準点に近い特定画像に含まれるオブジェクトの輝度が最大値となるように、他の特定画像に含まれるオブジェクトの輝度を変更することも可能である。また、特定画像のうち、もっとも基準点に遠い特定画像に含まれるオブジェクトの輝度が最小値となるように、他の特定画像に含まれるオブジェクトの輝度を変更することも可能である。
【００５１】
（第２の実施例）
図８に第２の実施例における画像表示装置１の機能ブロックを示す。なお、図１の機能ブロックと同名のブロックは、第１の実施例と同様の機能を発揮することから、説明を省略する。第２の実施例では、第１の実施例と比較して、ＣＰＵ２０１内に、周辺輝度取得部２２７が追加されている。周辺輝度取得部２２７は、合成された表示画像のうち、オブジェクトを含む周辺領域の輝度特性を取得し、画像表示制御部２２１に出力する。
【００５２】
図９は、第２の実施例における画像処理装置２００の制御フローを示すフローチャートである。Ｓ５０１、Ｓ５０２、Ｓ５０３およびＳ５０４はそれぞれ、図３のＳ４０１、Ｓ４０２、Ｓ４０４およびＳ４０５と同様の処理であるため、説明を省略する。
【００５３】
Ｓ５０５で、検出部２２３は、検出されたオブジェクトに対する座標を取得する。図１０は、断面画像３１１に含まれるオブジェクトＯｂｊ−Ａの周辺を拡大した模式図である。横軸にｘ軸、縦軸をｙ軸とする。検出部２２３は、オブジェクトＯｂｊ−Ａを含む矩形の領域の、４つの座標のうち、ｘ、ｙともに最小であるＰａ１、およびｘ、ｙともに最大であるＰａ２の座標情報を取得する。取得した座標情報Ｐａ１、およびＰａ２は、検出されたオブジェクトＯｂｊ−Ａの情報とともに、断面画像３１１に関連づけられてメモリ２０４に記憶される。
【００５４】
Ｓ５０６で、全ての断面画像に対してＳ５０４およびＳ５０５の処理が行われたと確認された場合に、Ｓ５０７へ進む。Ｓ５０７で、生成部２２５が、１以上の断面画像を用いて、画像６２０を生成する。画像６２０は、画像群３１０に含まれる全ての断面画像から生成されてもよいし、ＵＩ２０５によって、ユーザが指定することも可能である。画像６２０の生成に用いられる１以上の断面画像は、後述するＳ５１５で表示画像を生成する際に用いる断面画像（特定画像）と、同様のものであることが望ましい。２以上の断面画像を用いて画像６２０を生成する場合は、生成部２２５は合成処理を行う。生成された画像６２０は、メモリ２０４に記憶される。
【００５５】
Ｓ５０８で、周辺輝度取得部２２７は、メモリ２０４から、画像６２０と、Ｓ５０５で取得された座標情報を取得する。このとき、周辺輝度取得部２２７は、画像群３１０に含まれる全てのオブジェクトに関連する座標情報を取得してもよい。また、周辺輝度取得部２２７は、Ｓ５０７で処理された断面画像に含まれるオブジェクトに関連する座標情報を全て取得してもよい。
【００５６】
周辺輝度取得部２２７は、取得した座標情報のうち、最小のｘｙ座標を有する座標と、最大のｘｙ座標を有する座標を特定し、これらの点から、オブジェクトを含む周辺領域を特定する。図１１は、画像６２０に対して、複数のオブジェクトを含む周辺領域６３０を示した模式図である。複数の座標情報のうち、最小のｘｙ座標を有するＰｂ１と、最大のｘｙ座標を有するＰｅ２とから、周辺領域６３０が特定される。
【００５７】
周辺輝度取得部２２７は、特定された周辺領域６３０の輝度特性を取得する。輝度特性は、周辺領域の輝度の平均値や中央値等の統計量であり、周辺領域６３０の輝度を示す指標である。取得された輝度特性は、メモリ２０４に記憶される。
【００５８】
Ｓ５０９で、画像表示制御部２２１は、色の配置を決定する。画像表示制御部２２１は、メモリ２０４から、周辺領域６３０の輝度特性、Ｓ５０１およびＳ５０２で取得された各断面画像の位置情報を取得する。画像表示制御部２２１は、周辺領域の輝度特性が所定の値以上であるか否かを判定する。周辺領域の輝度特性が所定の値以下であった場合、画像表示制御部２２１は、Ｓ４０３と同様にして位置情報に対応する色の配置を決定する。
【００５９】
図１２は、周辺領域の輝度特性が所定の値よりも大きい場合、画像表示制御部２２１が決定する位置情報に対する色の配置を示した模式図である。周辺領域の輝度特性が所定の値よりも大きく、周辺領域の輝度が高い場合、基準点Ｒｐに対する位置が近いほど、波長の短い色を配色する。基準点Ｒｐに近い断面画像ほど、波長が短い寒色系の色が配色され、基準点Ｒｐから遠い断面画像ほど波長が長い暖色系の色が配色される。背景の輝度が高い場合、同一画面上にこれらの色で着色された物体が配置された場合、ユーザは、暖色系の色で着色された物体が寒色系の色で着色された物体よりも奥にあると認識し易い。画像表示制御部２２１が決定した色の配置は、メモリ２０４に記憶される。
【００６０】
図１３は、色の配置が決定した以降の、オブジェクトに対する補正処理、および表示画像３２０の生成処理のフローを示すフローチャートである。
【００６１】
Ｓ５１０で、画像取得部２２２は、記憶部２０６から、検出部２２３でオブジェクトを検出された断面画像（特定画像）を取得し、画像表示制御部２２１に出力する。そして、Ｓ５１１で、画像表示制御部２２１は、当該特定画像に対応する位置情報をメモリ２０４から読込む。画像表示制御部２２１は、取得した特定画像と、位置情報を補正処理部２２４に出力する。
【００６２】
Ｓ５１２、およびＳ５１３は図３のＳ４０８、およびＳ４０９と同様の処理であるため、説明を省略する。Ｓ５１４で、全ての特定画像に対して補正処理が完了しているか否かを判定する。全ての特定画像に対して補正処理が完了している場合、Ｓ５１５に進む。
【００６３】
Ｓ５１５は、図３のＳ４１１と同様に表示画像３２０を生成する処理である。以上のようにして、生成された表示画像３２０は、映像出力部２０２を介して、表示ユニット１００の映像入力部１０２に出力される。また、直接映像出力部２０２に出力せず、記憶部２０６に保存することも可能ある。
【００６４】
なお、本実施例において、補正処理部２２４は、特定画像の位置情報に応じて、オブジェクトの輝度を変更することも可能である。周辺領域の輝度特性が所定の値よりも大きい場合、補正処理部２２４は、基準点Ｒｐと特定画像との距離が近いほど、当該特定画像に含まれるオブジェクトの輝度を減少させる。背景の輝度が高い場合、輝度が低いほうがユーザの手前側にあると視認されやすくなる。したがって、表示画像３２０上のオブジェクトの遠近感を好適に表現することが可能となる。
【００６５】
本実施例における画像表示装置の制御方法によれば、特定の条件を満たすオブジェクトを含む特定画像と基準位置との距離が近いほど、当該特定画像に含まれるオブジェクトが手前に見える視覚効果を付与する補正処理を施す。これにより、補正処理を施された特定画像を用いて、表示画像を生成する場合に、複数のオブジェクトの奥行きに関する情報を直感的に把握することが可能となる。したがって、表示画像に含まれるオブジェクトの空間的な位置が把握しやすくなる。
【００６６】
また、オブジェクトの周辺の輝度に応じて適切な進出性をオブジェクトに付加することによって、表示画像上のオブジェクトの遠近感を適切に表現することが可能となる。
【００６７】
（その他の実施例）
上述した画像表示装置の制御方法は、電子回路で実施されることも可能であるし、ＣＰＵ２０１やＭＰＵ（Ｍｉｃｒｏ  Ｐｒｏｃｅｓｓｉｎｇ  Ｕｎｉｔ）のようなコンピュータ上で動作するプログラムによって実施されることも可能である。
【符号の説明】
【００６８】
２００  画像処理装置
２０１  ＣＰＵ
２０２  映像出力部
２０３  通信制御部
２０４  メモリ
２０５  ＵＩ
２０６  記憶部
【図１】
2017012443.tif 000003
【図２】
2017012443.tif 000004
【図３】
2017012443.tif 000005
【図４】
2017012443.tif 000006
【図５】
2017012443.tif 000007
【図６】
2017012443.tif 000008
【図７】
2017012443.tif 000009
【図８】
2017012443.tif 000010
【図９】
2017012443.tif 000011
【図１０】
2017012443.tif 000012
【図１１】
2017012443.tif 000013
【図１２】
2017012443.tif 000014
【図１３】
2017012443.tif 000015