(57)【特許請求の範囲】
【請求項１】
画像間の位置合わせのために入力される対応点を示す対応点情報を取得する対応点情報取得手段と、
前記画像上の注目点と前記対応点情報により示される対応点とに基づいて、当該画像上の注目点における位置合わせの信頼度を取得する信頼度取得手段と、
前記信頼度に基づいて、前記注目点に関する前記対応点情報の充足度を取得する充足度取得手段と、
前記充足度に関する情報の提示を制御する提示制御手段と、
を有することを特徴とする画像処理装置。
【請求項２】
前記充足度に基づいて、前記取得された対応点情報が前記画像間の位置合わせを行うために十分であるか否かを判定する判定手段をさらに有し、
前記提示制御手段は、前記判定手段による判定結果を提示することを特徴とする請求項１に記載の画像処理装置。
【請求項３】
前記信頼度取得手段は、前記画像上の注目点と前記対応点情報により示される各対応点との距離に基づいて、当該画像上の注目点における位置合わせの信頼度を取得する
ことを特徴とする請求項１または２に記載の画像処理装置。
【請求項４】
前記充足度取得手段は、複数の注目点の信頼度の最小値を前記充足度として取得することを特徴とする請求項１乃至３の何れか１項に記載の画像処理装置。
【請求項５】
前記充足度取得手段は、複数の注目点の信頼度の平均値を前記充足度として取得することを特徴とする請求項１乃至３の何れか１項に記載の画像処理装置。
【請求項６】
前記充足度取得手段は、画像上の注目領域からの距離に応じた信頼度の加重平均値を前記充足度として取得することを特徴とする請求項１乃至３の何れか１項に記載の画像処理装置。
【請求項７】
前記信頼度取得手段は、画像上の各注目点における位置合わせの信頼度を取得して信頼度の分布を示す信頼度マップを生成することを特徴とする請求項１乃至６の何れか１項に記載の画像処理装置。
【請求項８】
前記画像は３次元画像であり、
前記信頼度マップは、前記３次元画像の各ボクセルのボクセル値が当該ボクセルの位置における位置合わせの信頼度を示すマップであることを特徴とする請求項７に記載の画像処理装置。
【請求項９】
前記提示制御手段は、前記信頼度マップを前記画像に重畳して提示することを特徴とする請求項７または８に記載の画像処理装置。
【請求項１０】
前記信頼度取得手段は、前記画像の付帯情報に応じて、前記信頼度の取得方法を変更することを特徴とする請求項１乃至９の何れか１項に記載の画像処理装置。
【請求項１１】
画像間の位置合わせのために入力される対応点情報を取得する対応点情報取得手段と、
前記対応点情報の充足度を当該対応点情報に基づいて取得する充足度取得手段と、
前記充足度に関する情報の提示を制御する提示制御手段と、
前記充足度に基づいて、前記取得された対応点情報が前記画像間の位置合わせを行うために十分であるか否かを判定する判定手段と、
を有し、
前記提示制御手段は、前記判定手段による判定結果を提示し、
前記判定手段は、前記画像の付帯情報に応じて、充足度の判定方法を変更することを特徴とする画像処理装置。
【請求項１２】
前記対応点情報に基づいて前記画像間の位置合わせを行う位置合わせ手段をさらに有することを特徴とする請求項１乃至１１の何れか１項に記載の画像処理装置。
【請求項１３】
画像間の位置合わせのために入力される対応点を示す対応点情報を取得する対応点情報取得手段と、
画像上の注目点と前記対応点情報により示される対応点とに基づいて、当該画像上の複数の注目点における位置合わせの信頼度を取得し、当該信頼度の分布を示す信頼度マップを生成する信頼度取得手段と、
前記信頼度マップを提示する提示制御手段と、
を有することを特徴とする画像処理装置。
【請求項１４】
前記信頼度取得手段は、前記画像上の注目点と前記対応点情報により示される各対応点との距離に基づいて、当該画像上の注目点における位置合わせの信頼度を取得することを特徴とする請求項１３に記載の画像処理装置。
【請求項１５】
画像間の位置合わせのために入力される対応点を示す対応点情報を取得する対応点情報取得工程と、
前記画像上の注目点と前記対応点情報により示される対応点とに基づいて、当該画像上の注目点における位置合わせの信頼度を取得する信頼度取得工程と、
前記信頼度に基づいて、前記注目点に関する前記対応点情報の充足度を取得する充足度取得工程と、
前記充足度に関する情報の提示を制御する提示制御工程と、
を有することを特徴とする画像処理方法。
【請求項１６】
画像間の位置合わせのために入力される対応点情報を取得する対応点情報取得工程と、
前記対応点情報の充足度を当該対応点情報に基づいて取得する充足度取得工程と、
前記充足度に関する情報の提示を制御する提示制御工程と、
前記充足度に基づいて、前記取得された対応点情報が前記画像間の位置合わせを行うために十分であるか否かを判定する判定工程と、
を有し、
前記提示制御工程は、前記判定工程における判定結果を提示し、
前記判定工程は、前記画像の付帯情報に応じて、充足度の判定方法を変更することを特徴とする画像処理方法。
【請求項１７】
画像間の位置合わせのために入力される対応点を示す対応点情報を取得する対応点情報取得工程と、
画像上の注目点と前記対応点情報により示される対応点とに基づいて、当該画像上の複数の注目点における位置合わせの信頼度を取得し、当該信頼度の分布を示す信頼度マップを生成する信頼度取得工程と、
前記信頼度マップを提示する提示制御工程と、
を有することを特徴とする画像処理方法。
【請求項１８】
請求項１５乃至１７の何れか１項に記載の画像処理方法の各工程をコンピュータに実行させるためのプログラム。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、画像処理装置、画像処理方法およびプログラムに関する。
【背景技術】
【０００２】
医用画像（例えば、被検体内部の情報を表す３次元断層画像）を用いた画像診断において、医師は、複数の撮像装置（モダリティ）、体位、時刻、撮像パラメータ等で撮像した画像を対比しながら診断を行う。しかし、画像間で被検体の姿勢や形状が異なるため、病変部の同定や対比を行うことが困難である。そこで、複数画像間の位置合わせを行うことが試みられている。これにより、一方の画像に姿勢の変換や変形を施して他方と同一にした画像を生成することが可能となる。その結果、医師は複数画像間における病変部の同定や対比を容易に行える。医療以外の分野においても、物体の内部状態を検査する目的において同様の作業が実施される場合がある。
【０００３】
特許文献１では、複数の画像を位置合わせする方法として、人手で与えた画像間の対応点情報を利用する方法が開示されている。また、特許文献１では、位置合わせ後の画像間の類似度に基づいて位置合わせ結果の良否を評価し、その結果に応じて修正を促すメッセージを提示することが開示されている。
【先行技術文献】
【特許文献】
【０００４】
【特許文献１】特開２０１１−１４２９７４号公報
【発明の概要】
【発明が解決しようとする課題】
【０００５】
しかしながら、特許文献１の技術では、位置合わせ結果が不良である場合であっても不良である理由は不明である。そのため、どのように対処すれば位置合わせ結果を改善できるのかをユーザが判断できず、結果として位置合わせの精度を向上させることが難しいという課題がある。
【０００６】
本発明は、上記の課題に鑑みてなされたものであり、画像間の位置合わせの精度を向上させるための技術を提供することを目的とする。
【課題を解決するための手段】
【０００７】
上記の目的を達成する本発明の一態様による画像処理装置は、以下の構成を備える。すなわち、
画像間の位置合わせのために入力される対応点を示す対応点情報を取得する対応点情報取得手段と、
前記画像上の注目点と前記対応点情報により示される対応点とに基づいて、当該画像上の注目点における位置合わせの信頼度を取得する信頼度取得手段と、
前記信頼度に基づいて、前記注目点に関する前記対応点情報の充足度を取得する充足度取得手段と、
前記充足度に関する情報の提示を制御する提示制御手段と、
を有することを特徴とする。
【発明の効果】
【０００８】
本発明によれば、画像間の位置合わせの精度を向上させることできる。
【図面の簡単な説明】
【０００９】
【図１】第１の実施形態に係る画像処理装置の構成例を示す図である。
【図２】第１の実施形態に係る画像処理装置が実施する処理の手順を示すフローチャート。
【図３】第１の実施形態に係る対応点入力画面を示す模式図である。
【図４】第１の実施形態に係る位置合わせの信頼度を取得する処理の工程を示す模式図である。
【図５】第１の実施形態に係る判定テーブルの一例を示す模式図である。
【図６】第１の実施形態に係る表示断層画像への信頼度マップの重畳表示を示す模式図である。
【図７】第１の実施形態に係る対応点を追加した場合の信頼度マップを示す模式図である。
【図８】第１の実施形態に係る対応点が充足したことを提示する方法を示す模式図である。
【図９】第１の実施形態に係る対応点の不足を警告する表示例を示す模式図である。
【発明を実施するための形態】
【００１０】
以下、添付図面に従って本発明に係る画像処理装置の好ましい実施形態について詳説する。ただし、発明の範囲は図示例に限定されるものではない。
【００１１】
（第１の実施形態）
本実施形態に係る画像処理装置は、複数の３次元断層画像間の位置合わせを行う装置であり、取得した画像間の対応点情報の充足度を位置合わせの信頼度に基づいて計算しユーザに提示する。充足度は、位置合わせに用いる対応点が３次元断層画像空間中にどの程度充足しているかを示す情報である。また、信頼度は、３次元断層画像空間中の任意の座標（注目点）における位置合わせの正確性を示す情報である。以下、本実施形態に係る画像処理装置について説明する。
【００１２】
＜１．画像処理装置の構成＞
図１は、本実施形態に係る画像処理装置の構成例を示す図である。画像処理装置１は、画像取得部１１０、対応点情報取得部１２０、信頼度取得部１３０、充足度取得部１４０、判定部１５０、提示制御部１６０、および位置合わせ部１７０を備える。そして、画像処理装置１には、データベース２とディスプレイ３が接続されている。データベース２は、各種のモダリティで撮像した被検体の３次元断層画像の画像情報とその付帯情報を保存している。
【００１３】
ここで、画像の付帯情報とは、画像のサイズ、解像度、モダリティの種類、撮像情報、症例情報などである。また、撮像情報とは、撮像部位や撮像体位の情報である。また、撮像部位の情報とは、例えば、乳房や肝臓、脳という情報である。また、撮像体位の情報とは、例えば、仰臥位や伏臥位という情報である。また、症例情報とは、例えば、年齢や性別などの患者情報、対象部位の大きさ、位置合わせの対象となる領域（例えば注目する臓器の領域）を示す情報、画像空間内における病変等の注目領域を示す情報である。
【００１４】
画像取得部１１０は、位置合わせの対象とする３次元断層画像である第１の画像および第２の画像の画像情報とその付帯情報とをデータベース２から取得する。対応点情報取得部１２０は、第１の画像および第２の画像の夫々の画像座標系における対応点情報を取得する。信頼度取得部１３０は、第１の画像および第２の画像の夫々の３次元断層画像上の対応点の情報に基づいて、画像上の注目点における位置合わせの信頼度を取得する。また、信頼度取得部１３０は、信頼度の分布を示す信頼度マップを生成する。
【００１５】
充足度取得部１４０は、信頼度取得部１３０により取得された信頼度に基づいて、対応点情報の充足度を取得する。判定部１５０は、対応点情報取得部１２０により取得された対応点情報が画像間の位置合わせのために十分充足しているか否かを、充足度取得部１４０により取得された対応点情報の充足度に基づいて判定する。提示制御部１６０は、充足度取得部１４０により取得された充足度と、判定部１５０による判定結果（充足の良否）とを、充足情報としてディスプレイ３に表示する制御を行う。また、提示制御部１６０は、信頼度取得部１３０により取得された信頼度マップをディスプレイ３に表示する制御を行う。位置合わせ部１７０は、対応点情報取得部１２０により取得された対応点情報に基づいて画像間の位置合わせ処理を実行する。
【００１６】
＜２．処理フロー＞
次に、図２のフローチャートを参照して、本実施形態における画像処理装置１が実施する処理の手順について説明する。
【００１７】
（ステップＳ２００；画像の取得）
ステップＳ２００において、画像取得部１１０は、位置合わせの対象とする３次元断層画像である第１の画像および第２の画像の画像情報とその付帯情報とをデータベース２から取得する。取得した画像情報は、提示制御部１６０へ送信され、断層画像がディスプレイ３に表示される。また、取得した付帯情報は、信頼度取得部１３０や充足度取得部１４０へ必要に応じて送信される。
【００１８】
（ステップＳ２０１；対応点情報の取得）
ステップＳ２０１において、対応点情報取得部１２０は、第１の画像および第２の画像の夫々の画像座標系における対応点情報を取得する。データベース２が対応点情報を保持している場合にはその情報を取得する。また、対応点情報をユーザが追加入力した場合にはその情報を取得する。そして、取得した対応点情報を、信頼度取得部１３０、位置合わせ部１７０、および提示制御部１６０へ送信する。
【００１９】
図３に、ユーザが対応点を入力する画面の模式図を示す。ユーザは、ディスプレイ３の対応点入力画面３００に表示されている夫々の３次元断層画像である断層画像３０１と断層画像３０２とを比較しながら、夫々の画像上において解剖学的に同じとみなした位置を、マウスクリック等によって対応点３０３として入力する。なお、対応点情報の取得は、画像解析処理によって自動的に行ってもよい。例えば、夫々の画像から特徴的な点を検出し、画像パターンの類似性に基づいて自動で対応点を取得するようにしてもよい。また、画像解析処理によって自動取得した対応点を候補として、ユーザが手動で修正した点を最終的な対応点の位置としてもよい。なお、図３における重畳表示ボタン３１０及び位置合わせボタン３２０の機能については後述する。
【００２０】
（ステップＳ２０２；信頼度の取得）
ステップＳ２０２において、信頼度取得部１３０は、夫々の３次元断層画像上の対応点の情報に基づいて、画像上の所定の点（各注目点）における位置合わせの信頼度を計算し、信頼度の分布を示す信頼度マップを生成する。本実施形態における信頼度マップは、３次元画像の各注目点の各ボクセル値がその位置における位置合わせの信頼度を示すボリューム画像である。本実施形態では、第１の画像と第２の画像の夫々について、信頼度マップの生成処理を実行する。そして、生成した信頼度マップを、充足度取得部１４０と、提示制御部１６０へ送信する。
【００２１】
以下に、本実施形態における位置合わせの信頼度の取得方法を説明する。対応点に基づく位置合わせでは、一般に、対応点に近い点ほど位置合わせは正確であり、遠い点ほど位置合わせは正確ではなくなる。そこで、本実施形態では、画像上の注目する点（注目点）の夫々について、該注目点の位置を基準とした局所的な領域において、対応点の情報がどの程度十分に得られているかを導出する。これはすなわち、当該位置における対応点の局所的な充足度を導出していることに相当する。そして、対応点の局所的な充足度に応じて位置合わせの信頼度が定まると考え、該局所的な充足度を、当該位置における位置合わせの信頼度と定義する。すなわち、該注目点とその近辺に存在する各対応点との位置関係に基づいて、該注目点における位置合わせの信頼度を算出する。例えば、該注目点と各対応点との３次元距離を計算し、その値に基づいて該画像上の注目点の位置における位置合わせの信頼度を算出する。例えば、これらの距離の最短距離ｄ＿ｍｉｎに基づいて信頼度を算出する。
【００２２】
ここで、図４は、第１の画像４００における対応点４０１（夫々の画像（第１の画像４００及び第１の画像４００に対応する第２の画像（不図示））上で設定された対応点の組のうちの第１の画像４００の側の点）、対応点４０３、対応点４０５と、注目点４１０の模式図を示している。これらの４点は、第１の画像４００の座標系においてかならずしも同一平面にない点である。
【００２３】
信頼度取得部１３０は、対応点４０１、対応点４０３、対応点４０５の夫々と注目点４１０との間の３次元距離（距離４１１、距離４１３、距離４１５）を計算する。そして、これらの距離の最短距離ｄ＿ｍｉｎに基づいて、注目点４１０における信頼度を算出する。例えば、１／（１＋ｄ＿ｍｉｎ）を信頼度と定義して算出する。このとき、ｄ＿ｍｉｎが０であれば信頼度は１．０となり、ｄ＿ｍｉｎが大きくなるにつれて信頼度は０に近い値を取る。あるいは、最短距離ｄ＿ｍｉｎが大きいほど線形に下がるように信頼度を算出するようにしてもよい。すなわち、対応点の座標と画像座標が一致する場合に信頼度は最大（例えば、１．０）になり、離れるほど信頼度は低くなり、一定以上離れると０．０になるように定義してもよい。
【００２４】
なお、信頼度の取得方法は、注目点から対応点までの３次元距離の最小値（最短距離）に基づかなくてもよい。例えば、これらの距離の平均値や中央値に基づいて算出するようにしてもよい。あるいは、Ｎ番目（Ｎは所定の自然数）に近い距離に基づいてもよい。また、近いほうから上位Ｎ個（Ｎは所定の自然数）の距離の平均値に基づいて算出するようにしてもよい。また、複数の指標の組み合わせ（加重平均）でもよい。また、距離として、ユークリッド距離以外の任意の距離尺度を用いてもよい。また、所定の閾値以内の距離にある対応点数に基づいて算出するようにしてもよい。また、信頼度の取得方法は、ステップＳ２００において画像取得部１１０がデータベース２から取得した画像の付帯情報（撮像部位の情報等）に応じて変更してもよい。
【００２５】
例えば、肝臓のように変形が小さい場合は、乳房のような変形が大きい場合に比べて、対応点から離れても位置合わせは比較的正確である。そこで、肝臓の場合は、線形で信頼度を算出し対応点から離れると位置合わせの信頼度が緩やかに一定に下がるように算出する。乳房の場合は、対応点から一定の範囲内の信頼度を１．０に設定し、そこから距離が離れるほど信頼度が反比例するように算出する。このように、撮像部位に応じて信頼度の取得方法を変えることで、変形の大きさを考慮して信頼度を算出できるようになる。乳房の場合、患者の年齢や乳房の大きさでも変形の大きさが変化するので、それを考慮して信頼度を算出するようにしてもよい。
【００２６】
なお、信頼度を計算する領域は、画像全体としてもよいし、注目する臓器領域内や病変等の注目領域内としてもよい。後者の場合、ステップＳ２００において画像取得部１１０がデータベース２から取得した臓器領域や注目領域の情報を参照する。もしくは、画像の閾値処理や既存の領域抽出の方法を用いて臓器領域や病変領域を取得する。あるいは、ユーザが指定した画像上の注目領域を取得する。そして領域内の各点を注目点として設定し、夫々の注目点について信頼度を算出する。このようにすることで、後段の処理に不要な計算を省略できる。また、注目点は、領域内の全ボクセルとしてもよいし、一定間隔毎（例えば、５ボクセルおき）としてもよい。このようにすることで、信頼度の計算時間を短縮することができる。
【００２７】
（ステップＳ２０３；充足度の取得）
ステップＳ２０３において、充足度取得部１４０は、ステップＳ２０２で取得した信頼度に基づいて、対応点情報の充足度を取得する。そして、取得した充足度を判定部１５０および提示制御部１６０へ送信する。
【００２８】
充足度としては、例えば、算出した信頼度の（すなわち、２つの信頼度マップの）最小値（複数の注目点の信頼度の最小値）を用いることができる。また、複数の注目点の信頼度の平均値や中央値を用いてもよい。あるいは、Ｍ番目（Ｍは所定の自然数）に小さい信頼度の値を用いてもよい。また、小さいほうから上位Ｍ個（Ｍは所定の自然数）の信頼度の平均値に基づいて算出するようにしてもよい。また、所定の閾値以上の信頼度を有する注目点の割合を充足度と定義して算出してもよい。また、画像上の注目領域からの距離に応じた信頼度の加重平均値を用いてもよい。このとき、算出処理を行う範囲は、画像全体としてもよいし、注目する臓器領域内や、ユーザが指定した注目領域内としてもよい。あるいは、注目領域の代表位置（例えば重心位置）における信頼度を、充足度として用いるようにしてもよい。また、一方の信頼度マップのみから算出するようにしてもよい。
【００２９】
（ステップＳ２０４；充足度の判定）
ステップＳ２０４において、判定部１５０は、ステップＳ２０１で取得した対応点情報が充足しているか否かを、ステップＳ２０３で取得した対応点情報の充足度に基づいて判定する。具体的には、取得した充足度を閾値と比較することで、充足度の良否（合否）を判定する。そして、その結果を提示制御部１６０へ送信する。
【００３０】
判定部１５０は、撮像部位や撮像体位、症例情報毎にあらかじめ設定された閾値を、判定テーブルとして保持している。図５に、判定テーブルの例を示す。判定テーブルを用いる場合、画像の撮像部位５０１、撮像体位５０２、症例情報５０３に基づいて充足度の閾値５０４を設定する。例えば、撮像部位５０１が乳房のように変形が大きい場合、充足度を高くする必要があるので閾値５０４は大きく設定する。反対に、肝臓や脳のように変形が小さい場合、充足度は小さくてよいので、閾値５０４は小さく設定する。
【００３１】
乳房のように変形が大きいと考えられる場合でも、比較する画像間で撮像体位５０２が同じ場合には対象の形状はほぼ同じであるため、閾値５０４は比較的小さくてよい。しかし、伏臥位と仰臥位のように画像間で撮像体位が異なる場合には変形が大きくなり、対象の形状は大きく異なるので、閾値５０４は大きく設定する。また、乳房の柔軟度は年齢によっても異なる。症例情報５０３のうち患者年齢５０３１や乳房の大きさ５０３２によっても閾値５０４を変更してもよい。年齢が若いとより硬く変形が小さいので閾値５０４は小さく、年齢を重ねるほど柔らかく変形が大きくなるので閾値５０４は大きく設定する。乳房が小さいほど変形が小さいので閾値５０４は小さく、大きいほど変形が大きいので閾値５０４は大きく設定する。このように、判定部１５０は、撮像部位５０１と撮像体位５０２、症例情報５０３の患者年齢５０３１と乳房の大きさ５０３２に基づいて、判定テーブルを参照して充足度の閾値５０４を取得する。つまり、画像の付帯情報に応じて、充足度の判定方法を変更する。
【００３２】
なお、信頼度マップの夫々のボクセル値に対して上記閾値との比較を行うことで、夫々の位置における信頼度の良否判定結果を得て、その値を保持する第二の信頼度マップを生成するようにしてもよい。
【００３３】
（ステップＳ２０５；信頼度マップの表示）
ステップＳ２０５において、提示制御部１６０は、ステップＳ２０２で取得した信頼度マップをディスプレイ３に表示する制御を行う。
【００３４】
ここで図６および図７は、対応点入力画面３００において、断層画像３０１と断層画像３０２に夫々の信頼度画像６０４（７０４）と信頼度画像６０５（７０５）を重畳表示する場合の模式図である。信頼度画像６０４（７０４）と信頼度画像６０５（７０５）は、ステップＳ２０２で取得した信頼度マップを、断層画像３０１、断層画像３０２と対応する断面で切った際の断層画像である。
【００３５】
画像の輝度値は、信頼度マップのボクセル値を変換した値とする。例えば、信頼度１．０を輝度値２５５、信頼度０．０を輝度値０に変換することでグレースケールの信頼度マップを作成して、これに疑似カラーを割りあて疑似カラーマップとして表示する。図６に示すように、対応点が１つ入力された場合、信頼度マップでは同心球状に信頼度が広がる。その場合、信頼度画像６０４および信頼度画像６０５は、対応点３０３が同心円の中心にあり、その近傍の信頼度が高く、離れるほど低いことを示す画素値で表現される。さらに、図７に示すように、対応点が１つ追加されると、信頼度画像７０４および信頼度画像７０５のように、対応点３０３と対応点７０３を中心とした同心円状に信頼度が広がる。
【００３６】
なお、信頼度画像は断層画像に並べて表示してもよいし、重畳して表示してもよい。重畳表示する場合、例えば、対応点入力画面３００に表示した重畳表示ボタン３１０をユーザがオン／オフすることで制御できる。重畳表示ボタン３１０がオフの場合、信頼度画像を非表示にし、断層画像のみを表示する。重畳表示ボタン３１０がオンの場合、信頼度画像と断層画像とを重畳表示するように制御する。信頼度画像を断層画像に重畳表示することにより、ユーザは断層画像上における信頼度が低い領域、つまり、対応点が不足している領域を容易に把握できる。
【００３７】
なお、ステップＳ２０４の処理において第二の信頼度マップを生成している場合には、この情報を断層画像に重畳表示するようにしてもよい。例えば、信頼度が閾値以下のボクセルの上にのみ赤色等を半透明で重畳表示することで、信頼度の不十分な部位をより明示的に確認できるようにしてもよい。何れの信頼度マップを重畳表示するかを、ユーザが選択できるようにしてもよい。
【００３８】
（ステップＳ２０６；充足情報の表示）
ステップＳ２０６において、提示制御部１６０は、ステップＳ２０３で取得した充足度と、ステップＳ２０４で判定した充足の良否を、充足情報としてディスプレイ３に表示する制御を行う。
【００３９】
例えば、図６、図７、図８に示すように、対応点入力画面３００内に、充足情報６０６（充足情報７０６、充足情報８０６）として、取得した充足度の数値と、充足しているか否かの情報とを、ユーザに提示する。このとき、ステップＳ２０４で判定に用いた閾値５０４を充足度と並べて表示してもよい。また、該閾値に対する充足度の比率（到達率）を表示するようにしてもよい。なお、充足情報の提示方法は、文字の表示に限定されるものではない。例えば、図８に示すように、充足したと判断した場合に、断層画像３０１、断層画像３０２の外枠８１、外枠８２を強調表示する等の表示形態をとるようにしてもよい。また、音（音声やブザー）や振動で提示するようにしてもよい。
【００４０】
（ステップＳ２０７；位置合わせ実施判定）
ステップＳ２０７において、画像処理装置１は、位置合わせ処理の実施に関するユーザからの指示を取得し、指示に応じた処理の分岐を行う。例えば、図３に示すような位置合わせボタン３２０をユーザが押したか否かを判定する。そして、位置合わせ処理実施の指示を取得した場合は、ステップＳ２０８に処理を進める。一方、実施の指示を取得しない場合はステップＳ２０１に処理を戻して、新しい対応点情報の追加入力を受け付ける。
【００４１】
ここまでの処理により、ユーザは、表示された信頼度マップや充足情報を参考にして、対応点入力を継続するか否かを判断できる。また、対応点入力を継続する場合に、信頼度が低い領域が可視化されているので、その領域に対して対応点を入力することにより、信頼度を効率的に向上させることができる。信頼度が向上することにより、充足度も向上し、対応点入力の処理を完了する方向にユーザを導くことができる。
【００４２】
（ステップＳ２０８；充足判定）
ステップＳ２０８において、画像処理装置１は、対応点情報が充足している場合と充足していない場合とで、処理の分岐を行う。すなわち、ステップＳ２０４で対応点情報が充足していると判断した場合には、ステップＳ２１１に処理を進め、充足していないと判断した場合には、ステップＳ２０９に処理を進める。
【００４３】
（ステップＳ２０９；メッセージの表示）
ステップＳ２０９において、提示制御部１６０は、対応点情報が充足していないことをディスプレイ３に表示する制御を行う。例えば、図９に示すような警告メッセージ（通知ウィンドウ９００）をユーザに提示する。そして、警告を受け入れて対応点の入力作業に戻るか、もしくは、警告を無視して位置合わせ処理を実施するかの指示を、ユーザに要求する。具体的には、指示を取得するためのＧＵＩ（例えば、図９の否定ボタン９１０（「無視」）及び肯定ボタン９２０（「戻る」））を表示する。
【００４４】
（ステップＳ２１０；戻るか否か判定）
ステップＳ２１０において、画像処理装置１は、位置合わせ処理実施の可否に関するユーザの指示を取得し、指示に応じた処理の分岐を行う。すなわち、警告を受け入れて対応点の入力作業に戻るという指示を取得した場合（図９の肯定ボタン９２０が押された場合）には、ステップＳ２０１に処理を戻して、新しい対応点情報の追加入力を受け付ける。一方、警告を無視して位置合わせ処理を実施するという指示を取得した場合（図９の否定ボタン９１０が押された場合）には、ステップＳ２１１に処理を進める。
【００４５】
（ステップＳ２１１；位置合わせ）
ステップＳ２１１において、位置合わせ部１７０は、取得した対応点情報に基づいて２つの画像の位置合わせ処理を実行する。そして、第１の画像と一致するように第２の画像に座標変換を施した新たな画像を生成して表示／保存する。なお、対応点情報に基づく画像間の位置合わせ処理は公知であるので、詳細な説明は省略する。例えば、剛体変換推定、アフィン変換推定、ＦＦＤ（Ｆｒｅｅ−Ｆｏｒｍ  Ｄｅｆｏｒｍａｔｉｏｎ）法による変形位置合わせなど、位置合わせ後の対応点間距離を最小化する何れかの手法を用いることができる。以上で図２のフローチャートの各処理が終了する。
【００４６】
以上説明したように、本実施形態に係る画像処理装置１は、画像間（断層画像３０１、３０２、４００）の位置合わせのために入力される対応点情報（対応点３０３、４０１、４０３、４０５、７０３）を取得する対応点情報取得部（１３０）と、対応点情報の充足度（充足情報６０６、７０６、８０６）を当該対応点情報に基づいて取得する充足度取得部（１４０）と、前記充足度に関する情報（充足情報６０６、７０６、８０６等の取得した充足度の数値と、充足しているか否かの情報等）の提示を制御する提示制御部（１６０）とを有する。
【００４７】
また、本実施形態に係る画像処理装置１は、画像間（断層画像３０１、３０２、４００）の位置合わせのために入力される対応点情報（対応点３０３、４０１、４０３、４０５、７０３）を取得する対応点情報取得部（１３０）と、画像上の注目点（４１０）と各対応点（４０１、４０３、４０５）との距離（４１１、４１３、４１５）に基づいて、当該画像上の複数の注目点における位置合わせの信頼度を分布として取得する信頼度取得部と、信頼度の分布を示す情報（信頼度画像６０４、６０５、７０４、７０５）を提示する提示制御部（１６０）とを有する。
【００４８】
これにより、ユーザは、複数の画像を位置合わせする場合に、対応点の充足情報（対応点が十分か否か）を知ることができる。ユーザはこの情報を参考にして、対応点情報の入力作業を終えるか否か判断することができる。位置合わせ処理を開始する前に充足度を確認できるので、処理を終えてからもう一度対応点情報の入力を行うような無駄な時間を削減できる。すなわち、不十分な対応点情報で位置合わせすることを回避できる。
【００４９】
また、位置合わせの信頼度マップを参照することにより、ユーザは信頼度が低い領域を確認できるようになり、その領域に対応点を追加することで、位置合わせの信頼度を向上することができる。結果として画像間の位置合わせの精度を向上させることできる。
【００５０】
さらに、特許文献１に示したような位置合わせ結果の良否の判定の結果、位置合わせの結果が正しくない場合に、対応点の充足度に問題があるか否かを判断することができる。対応点が充足しているのに位置合わせが正しくない場合、入力した対応点情報に誤りがあると判断できる。
【００５１】
（変形例１の１）
ステップＳ２０２の処理において、信頼度マップの生成は必ずしも必須ではない。例えば、注目領域の代表位置（例えば重心位置）の１点のみの信頼度を求める構成であってもよい。この場合、ステップＳ２０５では、信頼度マップの表示を行わない。また、ステップＳ２０３では、取得した信頼度を充足度として使用する。これにより、計算量を大幅に削減することができる。
【００５２】
（第２の実施形態）
第１の実施形態では、充足度を、位置合わせの信頼度に基づいて取得する例について説明した。しかし、充足度の取得は必ずしも位置合わせの信頼度に基づかなくてもよい。本実施形態では、対応点情報から得られる他の情報に基づいて充足度を取得する例を説明する。また、本実施形態では、充足度の良否を、類似した過去の症例における対応点情報の入力の事例に基づいて判定する例を説明する。
【００５３】
＜１．画像処理装置の構成＞
以下、本実施形態に係る画像処理装置について、第１の実施形態と異なる部分について説明する。なお、本実施形態に係る画像処理装置１、データベース２、ディスプレイ３の構成は、第１の実施形態と同様であるので説明を省略する。ただし、本実施形態に係るデータベース２には、過去の症例（画像の組）に対して位置合わせ処理（対応点情報の入力）を行った記録が事例として保管されており、画像の付帯情報（撮像部位や撮像体位、症例情報）と対応点情報とが予め関連付けて記憶されているものとする。また、本実施形態の画像処理装置１には信頼度取得部１３０が存在しておらず、対応点情報取得部１２０が取得した対応点情報は、充足度取得部１４０へと送信される。
【００５４】
＜２．処理フロー＞
次に、本実施形態における画像処理装置１の各部の動作と処理手順を、図２のフローチャートを参照して説明する。ただし、本実施形態では、信頼度の取得と表示に係るステップＳ２０２およびステップＳ２０５の処理は実行されない。なお、ステップＳ２０３とステップＳ２０４の処理以外は第１の実施形態と同じ処理であるので説明を省略する。
【００５５】
（ステップＳ２０３；充足度の取得）
ステップＳ２０３において、充足度取得部１４０は、ステップＳ２０１で取得した対応点情報に基づいて、対応点情報の充足度を取得する。本実施形態では、取得した対応点の数を充足度とする。そして、算出した充足度を判定部１５０および提示制御部１６０へ送信する。
【００５６】
（ステップＳ２０４；充足度の判定）
ステップＳ２０４において、判定部１５０は、ステップＳ２０１で取得した対応点情報が充足しているか否かを、ステップＳ２０３で取得した対応点情報の充足度に基づいて判定する。そして、その結果を提示制御部１６０へ送信する。
【００５７】
本実施形態では、充足度を判定するための基準を、撮像部位や撮像体位、症例情報に基づいて過去の類似症例を検索した結果を用いて設定する。そのために、判定部１５０は、まず初めに、位置合わせの対象としている症例（すなわち、第１の画像と第２の画像）と類似している過去の症例（画像の組）を、撮像部位や撮像体位の組み合わせ、症例情報である患者年齢や乳房の大きさに基づいて、データベース２から検索する。類似症例を検索する方法は既存のいかなる方法であってもよい。そして、最も類似する症例に関連づけられた（当該症例の位置合わせの際に入力された）対応点の数を取得し、これを閾値として充足度の良否を判定する。
【００５８】
以上説明したように、本実施形態に係る画像処理装置は、取得した対応点の数に基づいて充足度を取得する。これにより、信頼度を計算する時間を省き、高速に充足情報を提示できる。さらに、類似症例を検索した結果に基づいて充足度を判定することにより、同じように変形すると推定される症例の対応点の数に基づいて充足度を判定することができる。
【００５９】
（変形例２の１）
ステップＳ２０４における良否判定の閾値は、他の方法で与えてもよい。例えば、第１の実施形態と同様に判定テーブルによって与えてもよいし、画像の付帯情報に依らずに、予め定めた固定値を用いるようにしてもよい。
【００６０】
（その他の実施形態）
また、本発明は、以下の処理を実行することによっても実現される。即ち、上述した実施形態の機能を実現するソフトウェア（プログラム）を、ネットワーク又は各種記憶媒体を介してシステム或いは装置に供給し、そのシステム或いは装置のコンピュータ（またはＣＰＵやＭＰＵ等）がプログラムを読み出して実行する処理である。
【符号の説明】
【００６１】
１：画像処理装置、２：データベース、３：ディスプレイ、１１０：画像取得部、１２０：対応点情報取得部、１３０：信頼度取得部、１４０：充足度取得部、１５０：判定部、１６０：提示制御部、１７０：位置合わせ部、３００：対応点入力画面、３０１，３０２：断層画像、３０３，４０１，４０３，４０５，７０３：対応点、３１０：重畳表示ボタン、３２０：位置合わせボタン、４１０：注目点、６０４，６０５，７０４，７０５：信頼度画像、６０６，７０６，８０６：充足情報
【図１】
0006393106.tif 000002
【図２】
0006393106.tif 000003
【図３】
0006393106.tif 000004
【図４】
0006393106.tif 000005
【図５】
0006393106.tif 000006
【図６】
0006393106.tif 000007
【図７】
0006393106.tif 000008
【図８】
0006393106.tif 000009
【図９】
0006393106.tif 000010