(57)【要約】  細胞形態画像から全ての細胞領域がより容易且つ正確に抽出され得る技術を提供することを目的とする。この目的を達成するために、まず、取得部によって、細胞の形態を捉えた細胞形態画像において細胞の特定部位が占める第１細胞領域を第１表示要素によって特定する領域特定画像が取得される。次に、追加部によって、ユーザーの動作に応答して入力される予め設定された所定の信号に応じて、細胞形態画像において第１細胞領域とは異なる特定部位が占める第２細胞領域の少なくとも輪郭部を特定する第２表示要素が領域特定画像に追加される。そして、修正部によって、第１細胞領域の第２細胞領域と重なる重畳領域の少なくとも一部の領域について、第１細胞領域を特定する表示要素が表示部に表示されるように、領域特定画像が修正される。
2016190129.tif 000002
【特許請求の範囲】
【請求項１】
細胞の形態を捉えた細胞形態画像を表示部に表示させる表示制御部と、
前記細胞形態画像において細胞の特定部位が占める第１細胞領域を第１表示要素によって特定する領域特定画像を取得する取得部と、
ユーザーの動作に応じた信号が入力される入力部と、
前記入力部で入力される予め設定された所定の信号に応じて、前記細胞形態画像において前記第１細胞領域とは異なる前記特定部位が占める第２細胞領域の少なくとも輪郭部を特定する第２表示要素を前記領域特定画像に追加する追加部と、
前記第１細胞領域の前記第２細胞領域と重なる重畳領域の少なくとも一部の領域について、前記第１細胞領域を特定する表示要素が前記表示制御部によって前記表示部に表示されるように、前記領域特定画像を修正する修正部と、
を備える、画像処理装置。
【請求項２】
請求項１に記載の画像処理装置であって、
前記修正部が、
前記重畳領域の全域にわたって、前記第１細胞領域を特定する表示要素が前記表示制御部によって前記表示部に表示されるように、前記領域特定画像を修正する、画像処理装置。
【請求項３】
請求項１または請求項２に記載の画像処理装置であって、
前記修正部が、
前記入力部で入力される予め設定された特定の信号に応じて、前記重畳領域の少なくとも一部の領域について、前記第２細胞領域を特定する表示要素が前記表示制御部によって前記表示部に表示されるように、前記領域特定画像を修正する、画像処理装置。
【請求項４】
請求項３に記載の画像処理装置であって、
前記修正部が、
前記入力部で入力される予め設定された前記特定の信号に応じて、前記重畳領域の全域にわたって、前記第２細胞領域を特定する表示要素が前記表示制御部によって前記表示部に表示されるように、前記領域特定画像を修正する、画像処理装置。
【請求項５】
請求項１から請求項４の何れか１つの請求項に記載の画像処理装置であって、
前記修正部が、
前記重畳領域のうちの前記表示制御部によって前記表示部に前記第１細胞領域を特定する表示要素が表示される領域については、前記第２細胞領域を特定する表示要素を前記領域特定画像から削除し、前記重畳領域のうちの前記表示制御部によって前記表示部に前記第２細胞領域を特定する表示要素が表示される領域については、前記第１細胞領域を特定する表示要素を前記領域特定画像から削除する、画像処理装置。
【請求項６】
請求項１から請求項５の何れか１つの請求項に記載の画像処理装置であって、
前記修正部が、
前記領域特定画像のうちの前記第１細胞領域を特定する表示要素と前記第２細胞領域を特定する表示要素との間に間隙部を設ける、画像処理装置。
【請求項７】
請求項６に記載の画像処理装置であって、
前記入力部で入力される信号に応じて、前記間隙部の幅を設定する設定部、
をさらに備える、画像処理装置。
【請求項８】
請求項１から請求項４の何れか１つの請求項に記載の画像処理装置であって、
前記修正部が、
前記第１細胞領域を特定する表示要素が基本レイヤーを構成し、前記重畳領域のうちの前記表示制御部によって前記表示部に前記第１細胞領域を特定する表示要素が表示される領域については、前記第２細胞領域を特定する表示要素が前記基本レイヤーの背後に位置する背面レイヤーを構成し、前記重畳領域のうちの前記表示制御部によって前記表示部で前記第２細胞領域を特定する表示要素が表示される領域については、前記第２細胞領域を特定する表示要素が前記基本レイヤーの手前に位置する前面レイヤーを構成するように、前記領域特定画像を修正する、画像処理装置。
【請求項９】
請求項８に記載の画像処理装置であって、
前記修正部が、
前記基本レイヤーを構成する前記第１細胞領域を特定する表示要素と、前記背面レイヤーおよび前記前面レイヤーの少なくとも一方のレイヤーを構成する前記第２細胞領域を特定する表示要素との間で、前記表示部における表示態様が異なるように、前記領域特定画像を修正する、画像処理装置。
【請求項１０】
請求項１から請求項９の何れか１つの請求項に記載の画像処理装置であって、
前記修正部が、
前記入力部で入力される予め設定された既定の信号に応じて、前記表示制御部によって前記表示部において、前記領域特定画像のうちの前記第１細胞領域を特定する表示要素の代わりに、前記第２細胞領域を特定する表示要素が表示されるように、前記領域特定画像を修正する、画像処理装置。
【請求項１１】
請求項１から請求項１０の何れか１つの請求項に記載の画像処理装置であって、
前記第２表示要素が、
前記第２細胞領域の輪郭を特定する曲線部を含み、
前記修正部が、
前記領域特定画像において前記曲線部の両端が前記第１細胞領域に対応する領域内に位置していることに応じて、前記第１表示要素を、前記第１細胞領域と前記第２細胞領域とを合わせた１つの領域を示す表示要素に変更する、画像処理装置。
【請求項１２】
(a)取得部によって、細胞の形態を捉えた細胞形態画像において細胞の特定部位が占める第１細胞領域を第１表示要素によって特定する領域特定画像を取得するステップと、
(b)追加部によって、ユーザーの動作に応答して入力される予め設定された所定の信号に応じて、前記細胞形態画像において前記第１細胞領域とは異なる前記特定部位が占める第２細胞領域の少なくとも輪郭部を特定する第２表示要素を前記領域特定画像に追加するステップと、
(c)修正部によって、前記第１細胞領域の前記第２細胞領域と重なる重畳領域の少なくとも一部の領域について、前記第１細胞領域を特定する表示要素が表示部に表示されるように、前記領域特定画像を修正するステップと、
を有する、画像処理方法。
【請求項１３】
情報処理装置に含まれる制御部において実行されることで、該情報処理装置を請求項１から請求項１１の何れか１つの請求項に記載の画像処理装置として機能させる、画像処理用のプログラム。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、画像処理装置、画像処理方法、および画像処理用のプログラムに関し、特に、細胞の形態を捉えた細胞形態画像を対象とした画像処理技術に関する。
【背景技術】
【０００２】
人や動物等の生体から採取された組織切片を顕微鏡で観察して病変の有無や病変の種類等について診断する、いわゆる病理診断が盛んに行われている。この病理診断では、診断の対象となる組織切片は、固定、包理、薄切および染色と言った処理がこの順で施された後に顕微鏡による観察に供されるのが一般的である。【０００３】
近年では、上記顕微鏡による観察において複数の細胞を含む生体組織の形態が捉えられた画像（細胞形態画像とも言う）が取得され、画像処理によって細胞形態画像から細胞の形状が自動的に抽出される技術が提供されている（例えば、特許文献１〜４等）。【０００４】
例えば、特許文献１では、細胞形態画像から細胞中心の候補となる画素群が抽出され、該画素群のうちの細胞中心として適している画素のみが所定の基準に従って選択され、選択された細胞中心画素の位置情報とその周辺の画素の濃度勾配の方向から、細胞の輪郭を形成している画素が選択される。【０００５】
また、特許文献２では、細胞形態画像から、輝度が極小値または極大値を呈する点、周囲の点と異なる色を有する点、および輝度勾配が極大となる点の少なくとも１点が、抽出点として抽出され、該抽出点のクラスタ化が行われ、細胞の中心および境界が求められる。【０００６】
また、特許文献３では、属性値の範囲に基づいてソートされたピクセルが、属性値の範囲の端点から一つずつラベルイメージに追加され、配置された対象物毎に算出される特徴が所定の受入基準と合致した場合に、対象物が出力画像に出力される。このとき、ストップポイントに達するまで、ピクセルのラベルイメージへの追加、生成された対象物の特徴の評価、および対象物の出力が繰り返されることで、画像内の各対象物が識別される。【０００７】
また、特許文献４では、所定の処理が施された細胞形態画像中の複数の細胞から、ユーザーによって指定された興味ある特定の細胞と似た特徴を持つ細胞群が自動的に抽出される。
【先行技術文献】
【特許文献】
【０００８】
【特許文献１】特許第３３１４７５９号明細書
【特許文献２】特許第４５００１３８号明細書
【特許文献３】特許第４８２５２２２号明細書
【特許文献４】特許第４８０１０２５号明細書
【発明の概要】
【発明が解決しようとする課題】
【０００９】
しかしながら、上記特許文献１の技術では、例えば、病理診断に供される組織切片については、濃く染色されるケースがあり、このようなケースでは、濃度勾配を利用して細胞の輪郭を形成する画素を選択することが難しい。【００１０】
また、上記特許文献２の技術では、例えば、針生検によって組織切片が採取される場合には、複数の細胞が圧縮されて、細胞同士が重畳し易い。そして、複数の細胞が、上下左右に重なった場合、グループ化された複数の抽出点の重心点が代表点としての細胞の中心とされても、細胞の中心とされた抽出点の数と、実際の細胞の数とが一致し難い。【００１１】
また、上記特許文献３の技術では、例えば、細胞核の輪郭は明確に認識されるものの、細胞核の内部が明確には認識されない、いわゆる中抜けの状態が存在している場合には、細胞核の内部の情報が細胞核以外の情報と同一となり、細胞核の誤検出が生じる。【００１２】
また、上記特許文献４の技術では、細胞形態画像における複数の細胞が、一部の細胞群に絞り込まれるため、細胞形態画像から抽出される細胞の数が減少してしまう。【００１３】
以上のように、上記特許文献１〜３の技術では、細胞形態画像の状況に応じて、細胞形態画像から細胞に係る領域（細胞領域とも言う）が漏れなく正確に抽出されないケースがある。また、上記特許文献４の技術は、そもそも細胞形態画像から抽出される細胞を絞り込む技術であり、細胞形態画像から細胞領域が漏れなく正確に抽出されないケースが生じ易い。【００１４】
本発明は、上記課題に鑑みてなされたものであり、細胞形態画像から全ての細胞領域がより容易且つ正確に抽出され得る技術を提供することを目的とする。
【課題を解決するための手段】
【００１５】
上記課題を解決するために、一態様に係る画像処理装置は、表示制御部と、取得部と、入力部と、追加部と、修正部と、を備えている。ここで、前記表示制御部は、細胞の形態を捉えた細胞形態画像を表示部に表示させる。前記取得部は、前記細胞形態画像において細胞の特定部位が占める第１細胞領域を第１表示要素によって特定する領域特定画像を取得する。前記入力部は、ユーザーの動作に応じた信号が入力される。前記追加部は、前記入力部で入力される予め設定された所定の信号に応じて、前記細胞形態画像において前記第１細胞領域とは異なる前記特定部位が占める第２細胞領域の少なくとも輪郭部を特定する第２表示要素を前記領域特定画像に追加する。前記修正部は、前記第１細胞領域の前記第２細胞領域と重なる重畳領域の少なくとも一部の領域について、前記第１細胞領域を特定する表示要素が前記表示制御部によって前記表示部に表示されるように、前記領域特定画像を修正する。【００１６】
他の一態様に係る画像処理方法は、ステップ(a)からステップ(c)を有する。ここで、前記ステップ(a)においては、取得部によって、細胞の形態を捉えた細胞形態画像において細胞の特定部位が占める第１細胞領域を第１表示要素によって特定する領域特定画像を取得する。前記ステップ(b)においては、追加部によって、ユーザーの動作に応答して入力される予め設定された所定の信号に応じて、前記細胞形態画像において前記第１細胞領域とは異なる前記特定部位が占める第２細胞領域の少なくとも輪郭部を特定する第２表示要素を前記領域特定画像に追加する。前記ステップ(c)においては、修正部によって、前記第１細胞領域の前記第２細胞領域と重なる重畳領域の少なくとも一部の領域について、前記第１細胞領域を特定する表示要素が表示部に表示されるように、前記領域特定画像を修正する。【００１７】
その他の一態様に係る画像処理用のプログラムは、情報処理装置に含まれる制御部において実行されることで、該情報処理装置を上記一態様に係る画像処理装置として機能させる。
【発明の効果】
【００１８】
本発明によれば、細胞形態画像において細胞の特定部位が占める細胞領域を表示要素によって特定する領域特定画像に、ユーザーが細胞領域を特定する表示要素を容易に追加することができるため、細胞形態画像から全ての細胞領域がより容易且つ正確に抽出され得る。
【図面の簡単な説明】
【００１９】
【図１】図１は、病理診断支援システムの概略的な一構成例を示す図である。
【図２】図２は、情報処理装置の機能的な構成を概略的に示すブロック図である。
【図３】図３は、制御部で実現される機能的な構成を例示するブロック図である。
【図４】図４は、細胞形態画像の一例を示す図である。
【図５】図５は、領域特定画像の一例を示す図である。
【図６】図６は、領域特定画像における第２細胞領域を例示する図である。
【図７】図７は、領域特定画像の修正の概要を説明するための図である。
【図８】図８は、画像処理装置の動作フローを例示するフローチャートである。
【図９】図９は、画像処理装置の動作フローを例示するフローチャートである。
【図１０】図１０は、画像処理装置の動作フローを例示するフローチャートである。
【図１１】図１１は、画像処理装置の動作フローを例示するフローチャートである。
【図１２】図１２は、画像処理装置の動作フローを例示するフローチャートである。
【図１３】図１３は、領域特定画像の修正の具体例を模式的に示す図である。
【図１４】図１４は、領域特定画像の修正の具体例を模式的に示す図である。
【図１５】図１５は、領域特定画像の修正の具体例を模式的に示す図である。
【図１６】図１６は、領域特定画像の修正の具体例を模式的に示す図である。
【図１７】図１７は、領域特定画像の修正の具体例を模式的に示す図である。
【図１８】図１８は、領域特定画像の修正の具体例を模式的に示す図である。
【図１９】図１９は、領域特定画像の修正の具体例を模式的に示す図である。
【図２０】図２０は、領域特定画像の修正の具体例を模式的に示す図である。
【図２１】図２１は、領域特定画像の修正の具体例を模式的に示す図である。
【図２２】図２２は、領域特定画像の修正の具体例を模式的に示す図である。
【図２３】図２３は、領域特定画像の修正の具体例を模式的に示す図である。
【図２４】図２４は、領域特定画像の修正の具体例を模式的に示す図である。
【図２５】図２５は、領域特定画像の修正の具体例を模式的に示す図である。
【図２６】図２６は、領域特定画像の修正の具体例を模式的に示す図である。
【図２７】図２７は、領域特定画像の修正の具体例を模式的に示す図である。
【図２８】図２８は、領域特定画像の修正の具体例を模式的に示す図である。
【図２９】図２９は、領域特定画像の修正の具体例を模式的に示す図である。
【図３０】図３０は、領域特定画像の修正の具体例を模式的に示す図である。
【図３１】図３１は、領域特定画像の修正の具体例を模式的に示す図である。
【図３２】図３２は、領域特定画像の修正の具体例を模式的に示す図である。
【図３３】図３３は、領域特定画像の修正の具体例を模式的に示す図である。
【図３４】図３４は、第１変形例に係る領域特定画像の修正に係る動作フローを示すフローチャートである。
【図３５】図３５は、第１変形例に係る領域特定画像の修正の具体例を模式的に示す図である。
【図３６】図３６は、第１変形例に係る領域特定画像の修正の具体例を模式的に示す図である。
【図３７】図３７は、第１変形例に係る領域特定画像の修正の具体例を模式的に示す図である。
【発明を実施するための形態】
【００２０】
以下、本発明の一実施形態および各種変形例を図面に基づいて説明する。なお、図面においては同様な構成および機能を有する部分については同じ符号が付されており、下記説明では重複説明が省略される。また、図面は模式的に示されたものであり、各図における各種構成のサイズおよび位置関係等は適宜変更され得る。
【００２１】
＜(１)一実施形態＞
＜(１−１)病理診断支援システムの概要＞
図１は、一実施形態に係る病理診断支援システム１００の概略的な一構成例を示す図である。病理診断支援システム１００は、所定の染色試薬で染色された生体の組織切片が捉えられた顕微鏡画像を取得し、該顕微鏡画像を対象とした画像処理を行った後に、組織切片における特定の生体物質の発現を定量的に表す特徴量を算出する解析処理を行う。
【００２２】
ここで、顕微鏡画像には、例えば、生体の組織切片における細胞の形態が捉えられた画像（細胞形態画像とも言う）、および生体の細胞切片に存在する特定の生体物質の分布が捉えられた画像（物質分布画像とも言う）が含まれる。生体には、例えば、人体またはヒト以外の動物等が含まれ、また、人体およびヒト以外の動物を含む広義の意味での動物が含まれても良い。画像処理には、例えば、解析処理において特定の生体物質の発現を定量的に表す特徴量が顕微鏡画像から高精度で求められるように該顕微鏡画像に施される処理が含まれる。
【００２３】
本実施形態では、細胞形態画像から細胞を捉えた全ての細胞領域がより正確に抽出されるような画像処理が施されることで、例えば、解析処理において組織切片における特定の生体物質の発現を定量的に表す特徴量が高精度で求められ得る。
【００２４】
図１で示されるように、病理診断支援システム１００は、顕微鏡画像取得装置１、画像処理装置２、および顕微鏡画像取得装置１と画像処理装置２とをデータの送受信が可能に接続している通信回線３を備えている。通信回線３は、例えば、ケーブル等の有線方式の回線であっても良いし、無線方式の回線であっても良い。具体的には、通信回線３として、例えば、有線方式または無線方式の少なくとも一方の方式が採用されたＬＡＮ（Local Area Network）が採用され得る。また、顕微鏡画像取得装置１と画像処理装置２との間におけるデータの授受は、記憶媒体等の各種メディアを用いた受け渡しによって実施されても良い。
【００２５】
顕微鏡画像取得装置１は、例えば、公知のカメラ付きの光学顕微鏡である。顕微鏡画像取得装置１では、ステージ上に配置されたスライドガラス上の組織切片の光像が撮像されることで、組織切片の拡大像に係る画像（顕微鏡画像とも言う）のデータ（顕微鏡画像データとも言う）が取得され、該顕微鏡画像データが、画像処理装置２に送信される。なお、以下では、顕微鏡画像データおよび顕微鏡画像を、顕微鏡画像と総称する。
【００２６】
具体的には、顕微鏡画像取得装置１は、例えば、照射部、結像部、撮像部、通信Ｉ／Ｆ等を備えている。照射部は、例えば、光源、フィルター等を有しており、ステージ上に配置されたスライドガラス上の組織切片に光を照射する。結像部は、例えば、接眼レンズおよび対物レンズ等を有しており、スライド上の組織切片に対する光の照射に応じて、該組織切片から発せられる透過光、反射光または蛍光を結像する。撮像部は、例えば、ＣＣＤ(Charge Coupled Device)センサー等を備えているカメラであり、結像部によって結像面に結像される組織切片の光像を撮像して顕微鏡画像を取得する。通信Ｉ／Ｆは、該顕微鏡画像を画像処理装置２に送信する。
【００２７】
また、顕微鏡画像取得装置１は、明視野観察に適した照射部および結像部が組み合わされた明視野ユニットと、蛍光観察に適した照射部および結像部が組み合わされた蛍光ユニットとが備えられている。そして、明視野ユニットおよび蛍光ユニットの間で使用されるユニットが切り替えられることで、観察のモードが明視野観察を行うモードと蛍光観察を行うモードとの間で切り替えられる。これにより、顕微鏡画像取得装置１で取得される顕微鏡画像には、例えば、明視野観察における撮像で得られる明視野画像と、蛍光観察における撮像で得られる蛍光画像とが含まれる。
【００２８】
「明視野画像」は、所定の染色試薬で染色された組織切片を、顕微鏡画像取得装置１において明視野で拡大結像および撮像することで得られる顕微鏡画像である。ここで、所定の染色試薬としては、例えば、ヘマトキシリン染色試薬（Ｈ染色試薬）およびヘマトキシリン−エオジン染色試薬（ＨＥ染色試薬）が採用され得る。ヘマトキシリン（Ｈ）は、青紫色の色素であり、細胞核、骨組織、軟骨組織の一部および漿液成分等（好塩基性の組織等）を染色する。エオジン（Ｅ）は、赤〜ピンク色の色素であり、細胞質、軟部組織の結合組織、赤血球、線維素および内分泌顆粒等（好酸性の組織等）を染色する。つまり、本実施形態では、明視野画像は、組織切片における細胞の形態が捉えられた細胞形態画像である。
【００２９】
また、「蛍光画像」は、所定の蛍光染色試薬を用いて染色された組織切片に対し、顕微鏡画像取得装置１において所定波長の励起光を照射して蛍光発光させ、この蛍光を拡大結像および撮像することにより得られる顕微鏡画像である。ここで、蛍光染色試薬としては、例えば、特定の生体物質と特異的に結合および／または反応する生体物質認識部位が結合した蛍光物質内包ナノ粒子を含む染色試薬である。蛍光物質内包ナノ粒子は、蛍光物質を内包したナノ粒子（蛍光粒子とも言う）である。蛍光画像に現れる蛍光は、蛍光染色試薬の蛍光物質内包ナノ粒子（蛍光物質）が励起して発光したものであり、組織切片における、生体物質認識部位に対応する特定の生体物質の発現を示すものである。つまり、本実施形態では、蛍光画像は、生体の細胞内に存在する特定の生体物質の分布が捉えられた物質分布画像である。
【００３０】
画像処理装置２は、顕微鏡画像取得装置１から送信された顕微鏡画像を受信して、該顕微鏡画像に画像処理を施す。該画像処理装置２は、情報処理装置において所定のプログラムが実行されることで実現される。また、画像処理装置２は、例えば、画像処理が施された顕微鏡画像を対象として、組織切片における特定の生体物質の発現を定量的に表す特徴量を算出する解析処理を行う。
【００３１】
＜(１−２)情報処理装置の機能的な構成＞
図２は、画像処理装置２の機能を実現する情報処理装置の機能的な構成を概略的に示すブロック図である。図２で示されるように、情報処理装置は、例えば、制御部２１、入力部２２、表示部２３、通信Ｉ／Ｆ２４、記憶部２５等を備えている。そして、各部２１〜２５は、バス２６を介して相互にデータの送受信が可能に接続されている。
【００３２】
制御部２１は、プロセッサーおよびメモリー等を備えた電気回路である。ここで、プロセッサーとしては、例えば、中央処理装置（ＣＰＵ：Central Processing Unit）等が採用され、メモリーとしては、揮発性のメモリーであるＲＡＭ（Random Access Memory）等が採用され得る。制御部２１は、記憶部２５に記憶されている各種プログラムとの協働によって各種処理を実行し、情報処理装置の画像処理装置２としての動作を統括的に制御する。また、制御部２１は、記憶部２５に記憶されている画像処理用のプログラムＰ１（図３）を実行することで、情報処理装置を画像処理装置２として機能させる。
【００３３】
入力部２２は、ユーザーとしての画像処理装置２のオペレーターの動作に応じた信号が入力される。ここで、入力部２２は、例えば、ユーザーによる操作に応じた信号（操作信号とも言う）が入力される操作部であっても良いし、ユーザーによる発声に応じた信号（音声信号とも言う）が入力される音声入力部であっても良い。操作部には、文字入力キー、数字入力キーおよび各種機能キー等を含むキーボードと、マウスやタッチペン等のポインティングデバイスとが含まれ得る。操作部によれば、例えば、キーボードにおけるキーの押し下げに応じた操作信号と、ポインティングデバイスの操作に応じた操作信号とが、制御部２１に入力され得る。
【００３４】
表示部２３は、制御部２１から入力される信号に従って、各種画像を表示させる。表示部２３には、例えば、ＣＲＴ（Cathode Ray Tube）またはＬＣＤ（Liquid Crystal Display）等の表示部が含まれる。
【００３５】
通信Ｉ／Ｆ２４は、画像処理装置２の外部に位置する外部機器との間でデータの送受信を行なうためのインターフェースである。外部機器には、例えば、顕微鏡画像取得装置１が含まれる。このため、通信Ｉ／Ｆ２４は、例えば、顕微鏡画像取得装置１から顕微鏡画像を受信する受信部として機能する。なお、例えば、画像処理装置２が、ＬＡＮアダプターおよびルーター等を備え、ＬＡＮ等の通信ネットワークを介して外部機器と接続される構成が採用されても良い。
【００３６】
記憶部２５は、各種プログラムおよび各種データ等を記憶する。該記憶部２５は、例えば、ＨＤＤ（Hard Disk Drive）または不揮発性の半導体メモリー等で構成され得る。
【００３７】
＜(１−３)画像処理装置の機能的な構成＞
図３は、画像処理装置２の制御部２１で実現される機能的な構成を例示するブロック図である。情報処理装置に含まれる制御部２１において、記憶部２５に格納されている画像処理用のプログラムＰ１が実行されることで、該情報処理装置が、画像処理装置２として機能する。このとき、図３で示されるように、画像処理装置２は、制御部２１において実現される機能的な構成として、取得部２１１、表示制御部２１２、追加部２１３、修正部２１４および設定部２１５を備える。
【００３８】
取得部２１１は、細胞形態画像において細胞の特定部位が占める領域（第１細胞領域とも言う）を所定の表示要素（第１表示要素とも言う）によって特定する画像（領域特定画像とも言う）を取得する。本実施形態では、特定部位が、細胞核である例を挙げて説明する。図４は、細胞形態画像の一例を示す図である。
【００３９】
取得部２１１では、例えば、通信Ｉ／Ｆ２４から入力される細胞形態画像を対象とした所定の画像処理が行われることで、領域特定画像が取得される。ここで、所定の画像処理としては、例えば、判別分析法およびＰタイル法等と言った二値化、ならびにｋ平均法およびＥＭアルゴリズム等と言ったクラスタリングのうちの少なくとも一方によって、細胞形態画像において特定部位が占める領域が検出される処理が採用され得る。また、例えば、多数種の画像の特徴量を用いた機械学習で得た学習内容によって、細胞形態画像において特定部位が占める領域が検出される処理が採用されても良い。さらに、取得部２１１では、二値化、クラスタリングおよび機械学習の結果等によって細胞形態画像から一旦検出される領域のうち、円形度、大きさおよび細胞形態画像における色等と言った他の基準を満たす領域が、第１細胞領域として検出されても良い。
【００４０】
また、ここで、領域特定画像としては、例えば、細胞形態画像について、特定部位が占める領域と、それ以外の領域とが区別可能な態様で示される画像が採用され得る。具体的には、例えば、特定部位が占める領域が所定色（第１色とも言う）または所定のハッチングで描かれた第１表示要素で示され、特定部位以外が占める領域が第１表示要素とは異なる色（第２色とも言う）またはハッチングで描かれる。ここで、第１色としては、例えば、青色または灰色等が採用され、第２色としては、例えば、白色または黒色等が採用され得る。図５は、図４で示された細胞形態画像を対象とした二値化の処理によって取得された領域特定画像の一例を示す図である。
【００４１】
表示制御部２１２は、各種画像を表示部２３に表示させる。各種画像には、例えば、細胞形態画像および領域特定画像等が含まれる。ここでは、例えば、表示制御部２１２から各種画像のデータが表示部２３に出力されることで、各種画像が表示部２３において表示され得る。例えば、表示部２３に、図４で示されたような細胞形態画像および図５で示されたような領域特定画像が表示される。
【００４２】
ところで、細胞形態画像で捉えられた細胞の特定部位における染色の濃淡および取得部２１１における所定の画像処理の条件等によって、取得部２１１で領域特定画像が取得される際に、細胞の特定部位が占める第１細胞領域として検出される領域に差が生じ得る。このため、細胞形態画像において細胞の特定部位が占める領域であるものと視認される全ての領域のうちの一部の領域が、細胞の特定部位が占める第１細胞領域として検出されない場合がある。例えば、図６で示されるように、破線２ＣＡで囲まれた領域が、取得部２１１において、本来は第１細胞領域として検出されるべき領域であるが、第１細胞領域として検出されていない。つまり、取得部２１１において第１細胞領域として検出されなかった一部の領域は、第１細胞領域とは異なる細胞の特定部位が占める領域（第２細胞領域とも言う）である。そこで、例えば、ユーザーの操作等に応じて、取得部２１１において第１細胞領域として検出されなかった一部の領域としての第２細胞領域を特定する表示要素が、領域特定画像に追加されれば、細胞形態画像から全ての細胞領域がより正確に抽出され得る。
【００４３】
追加部２１３は、入力部２２で入力される所定の信号に応じて、細胞形態画像において第１細胞領域とは異なる細胞の特定部位が占める領域（第２細胞領域）の少なくとも輪郭部を特定する表示要素（第２表示要素とも言う）を領域特定画像に追加する。所定の信号は、予め設定されていれば良く、例えば、第２細胞領域の輪郭部を指定するための信号が採用され得る。
【００４４】
例えば、表示部２３に、細胞形態画像が表示された状態で、ユーザーによる入力部２２の操作等によって、細胞形態画像上において、第２細胞領域の輪郭部に沿って曲線が描かれるような態様が考えられる。この場合、第２表示要素が、第２細胞領域の輪郭を特定する曲線部を含む。そして、このとき、例えば、表示部２３において、細胞形態画像上に第１表示要素が重畳的に表示されている状態と、細胞形態画像のみが表示されている状態とが切り替えられながら、ユーザーによる入力部２２の操作等によって、第２細胞領域の輪郭部に沿って曲線が描かれ得る。具体的には、例えば、表示部２３において、細胞形態画像上で、マウスの左ボタンを押下しつつ、マウスポインターを第２細胞領域の輪郭部に沿って移動させることで、マウスポインターが移動した軌跡上に曲線が描かれ得る。
【００４５】
修正部２１４は、第１細胞領域の第２細胞領域と重なる領域（重畳領域とも言う）について、領域特定画像を修正する。ここでは、例えば、重畳領域について、表示制御部２１２によって、第２細胞領域を特定する表示要素ではなく、第１細胞領域を特定する表示要素が表示部２３に表示されるように、領域特定画像が修正される。具体的には、例えば、特に修正の態様が指定されていない限り、デフォルトの状態では、重畳領域について、第１細胞領域を特定する表示要素が、第２細胞領域を特定する表示要素よりも優先的に表示されるように、領域特定画像が修正される。
【００４６】
これにより、細胞形態画像において細胞の特定部位が占める第１細胞領域を第１表示要素によって特定する領域特定画像に、ユーザーが第２細胞領域を特定する第２表示要素を容易に追加することができる。その結果、細胞形態画像から全ての細胞領域がより容易且つ正確に抽出され得る。
【００４７】
設定部２１５は、重畳領域について領域特定画像を修正する際に該領域特定画像のうちの第１細胞領域を特定する表示要素と第２細胞領域を特定する表示要素との間に設けられる間隙部の幅を設定する。設定部２１５では、例えば、間隙部の幅が自動的に設定されても良いし、ユーザーの動作に応答して入力部２２で入力される信号に応じて間隙部の幅が設定されても良い。
【００４８】
ここで、間隙部の幅が狭ければ、表示領域間の境界が認識可能であり且つ解析処理で特徴量が高精度で求められ得る。但し、ユーザーが領域特定画像を見る際には、間隙部の幅がある程度広ければ、第１細胞領域に係る表示要素と第２細胞領域に係る表示要素とが離れている様子が視認され易くなる。例えば、間隙部の幅が１μｍ以上であれば、視認性が確保され得る。このため、ユーザーによって間隙部の幅が設定されるのであれば、解析処理における精度と視認性との両立がバランス良く図られ得る。
【００４９】
また、間隔部の幅が自動的に設定される場合には、間隙部の幅は、例えば、単純に固定の幅であっても良いし、細胞形態画像における第１および第２細胞領域の占有率等と言った何らかのパラメーターの値に応じた幅であっても良い。
【００５０】
＜(１−４)領域特定画像の修正の概要＞
図７は、修正部２１４における領域特定画像の修正の概要を説明するための図である。図７には、第１細胞領域を特定する第１表示要素Ｄｅ１に対して、一部が重畳するように第２細胞領域の輪郭部を特定する第２表示要素Ｄｅ２が追加されている状態（追加状態とも言う）Ｅｘ０から領域特定画像が修正される様子が例示されている。図７の追加状態Ｅｘ０では、第２表示要素Ｄｅ２が、第２細胞領域の輪郭部に沿って略円形に太線で描かれている。つまり、図７では、例えば、図５で例示された領域特定画像のように、細胞形態画像において細胞の特定部位が占める複数の第１細胞領域のそれぞれが第１表示要素Ｄｅ１で特定されている場合に、１つの第１表示要素Ｄｅ１に対して、細胞形態画像における第２細胞領域の輪郭部に沿って描かれた第２表示要素Ｄｅ２としての太線が追加されている様子が示されている。具体的には、図７では、例えば、図５で示された領域特定画像のうち、１つの略円形の第１表示要素Ｄｅ１に対して、第２表示要素Ｄｅ２が追加された状態（追加状態）Ｅｘ０が例示されている。
【００５１】
例えば、図７の中央の追加状態Ｅｘ０で示されるような領域特定画像への第２表示要素Ｄｅ２の追加時、またはその追加後に、ユーザーによって入力される信号および第２表示要素Ｄｅ２の状態の少なくとも一方に応じて、領域特定画像が修正される。例えば、ユーザーの動作に応答して入力部２２で入力される信号に応じて、領域特定画像のうちの重畳領域に係る修正の態様が指定され得る。
【００５２】
＜(１−４−１)第１の修正（第１細胞領域に係る表示要素の優先的な表示）＞
例えば、修正の態様が特に指定されていなければ、追加状態Ｅｘ０から図７の下方の修正状態（第１修正状態とも言う）Ｅｘ１で示されるように、領域特定画像が修正される。この場合、重畳領域については、第１細胞領域を特定する表示要素（ここでは、第１表示要素Ｄｅ１）が優先的に表示されるように、領域特定画像が修正される。ここでは、例えば、修正部２１４が、重畳領域の全域にわたって、第１細胞領域を特定する第１表示要素Ｄｅ１が表示制御部２１２によって表示部２３に表示されるように、領域特定画像を修正する。このとき、例えば、修正部２１４が、重畳領域の全域にわたって、第１細胞領域を特定する表示要素が表示制御部２１２によって表示部２３に表示されるように、第２細胞領域を特定する表示要素を削除する。
【００５３】
このような構成によれば、例えば、図７の第１修正状態Ｅｘ１で示されるように、ユーザーによって第２細胞領域を特定する表示要素Ｄｅ２１が領域特定画像に容易に追加され得る。その結果、細胞形態画像から全ての細胞領域が容易且つ正確に抽出され得る。なお、表示要素Ｄｅ２１は、例えば、第２表示要素Ｄｅ２で囲まれる領域から重畳領域に対応する部分が除かれた残りの領域を特定する。表示要素Ｄｅ２１は、例えば、所定色または所定のハッチングで描かれる。但し、修正部２１４によって、領域特定画像のうちの第１細胞領域を特定する第１表示要素Ｄｅ１と、第２細胞領域を特定する表示要素Ｄｅ２１との間に間隙部ＳＬ１が設けられれば、表示要素Ｄｅ１と表示要素Ｄｅ２１との境界が容易に認識可能な態様となる。
【００５４】
＜(１−４−２)第２の修正（細胞領域に係る表示要素の置換）＞
例えば、第１細胞領域を特定する表示要素を、第２細胞領域を特定する表示要素に置換する旨の修正の態様が指定されれば、追加状態Ｅｘ０から図７の上方の修正状態（第２修正状態とも言う）Ｅｘ２で示されるように、領域特定画像が修正される。この場合、重畳領域を含めて、第１細胞領域を特定する第１表示要素Ｄｅ１が、第２細胞領域を特定する表示要素Ｄｅ２１に置換されることで、領域特定画像が修正される。このとき、例えば、修正部２１４が、入力部２２で入力される予め設定された既定の信号に応じて、領域特定画像のうちの第１細胞領域を特定する第１表示要素Ｄｅ１の代わりに第２細胞領域を特定する表示要素Ｄｅ２１が表示制御部２１２によって表示部２３に表示されるように、領域特定画像を修正する。
【００５５】
このような構成によれば、例えば、図７の第２修正状態Ｅｘ２で示されるように、ユーザーによって細胞領域を特定する表示要素が容易に変更され得る。その結果、細胞形態画像から全ての細胞領域が容易且つ正確に抽出され得る。なお、表示要素Ｄｅ２１は、例えば、第２表示要素Ｄｅ２で囲まれる領域に、所定色または所定のハッチングが付されることで描かれ得る。
【００５６】
＜(１−４−３)第３の修正（細胞領域に係る表示要素の拡大）＞
例えば、領域特定画像において、第２細胞領域の輪郭を特定する曲線部を含む第２表示要素Ｄｅ２が閉曲線でなく、該曲線部の両端が、第１細胞領域に対応する領域内に位置していれば、追加状態Ｅｘ０から図７の左方の修正状態（第３修正状態とも言う）Ｅｘ３で示されるように、領域特定画像が修正される。この場合、第１細胞領域を特定する第１表示要素Ｄｅ１が、第１細胞領域に第２細胞領域を加えた領域（拡大領域ともいう）を特定する表示要素Ｄｅ３１に変更されることで、領域特定画像が修正される。このとき、例えば、修正部２１４が、領域特定画像において第２表示要素Ｄｅ２としての曲線部の両端が第１細胞領域に対応する領域内に位置していることに応じて、第１細胞領域を特定する第１表示要素を、第１細胞領域と第２細胞領域とを合わせた１つの領域を示す表示要素に変更する。これにより、第１細胞領域を特定する第１表示要素Ｄｅ１が表示要素Ｄｅ３１に拡大される。
【００５７】
このような構成によれば、例えば、図７の第３修正状態Ｅｘ３で示されるように、ユーザーによって細胞領域を特定する表示要素が容易に変更され得る。その結果、細胞形態画像から全ての細胞領域が容易且つ正確に抽出され得る。なお、表示要素Ｄｅ３１は、例えば、第１表示要素Ｄｅ１と同様な態様で描かれ得る。
【００５８】
＜(１−４−４)第４の修正（第２細胞領域に係る表示要素の優先的な表示）＞
例えば、第１細胞領域を特定する表示要素よりも追加された第２細胞領域を特定する表示要素を優先的に表示させる修正の態様が指定されれば、追加状態Ｅｘ０から図７の右方の修正状態（第４修正状態とも言う）Ｅｘ４で示されるように、領域特定画像が修正される。この場合、重畳領域については、第２細胞領域を特定する表示要素Ｄｅ２１が優先的に表示されるように、領域特定画像が修正される。このとき、例えば、修正部２１４が、入力部２２で入力される予め設定された特定の信号に応じて、重畳領域の全域にわたって、第２細胞領域を特定する表示要素Ｄｅ２１が表示制御部２１２によって表示部２３に表示されるように、領域特定画像を修正する。このとき、例えば、修正部２１４が、重畳領域のうちの第２細胞領域を特定する表示要素が表示制御部２１２によって表示部２３に表示される領域については、第１細胞領域を特定する表示要素を削除する。これにより、第１表示要素Ｄｅ１は、該第１表示要素Ｄｅ１から重畳領域に対応する部分が除かれた表示要素Ｄｅ１１に変更され得る。このとき、例えば、修正部２１４が、重畳領域の全域にわたって、第２細胞領域を特定する表示要素が表示制御部２１２によって表示部２３に表示されるように、第１細胞領域を特定する表示要素を削除する。
【００５９】
このような構成によれば、例えば、図７の第４修正状態Ｅｘ４で示されるように、ユーザーによって第２細胞領域を特定する表示要素Ｄｅ２１が領域特定画像に容易に追加され得る。その結果、細胞形態画像から全ての細胞領域が容易且つ正確に抽出され得る。なお、表示要素Ｄｅ２１は、例えば、第２表示要素Ｄｅ２で囲まれる領域に、所定色または所定のハッチングが付されることで描かれ得る。また、表示要素Ｄｅ１１は、例えば、第１表示要素Ｄｅ１から重畳領域に対応する部分が除かれた残りの領域を特定する。表示要素Ｄｅ１１は、例えば、所定色または所定のハッチングで描かれる。但し、修正部２１４によって、領域特定画像のうちの第１細胞領域を特定する表示要素Ｄｅ１１と、第２細胞領域を特定する表示要素Ｄｅ２１との間に間隙部ＳＬ１が設けられれば、表示要素Ｄｅ１１と表示要素Ｄｅ２１との境界が容易に認識可能な態様となり得る。
【００６０】
＜(１−５)領域特定画像の修正に係る動作フロー＞
図８から図１２は、画像処理装置２の動作フローを例示するフローチャートである。図１３から図３３は、画像処理装置２における領域特定画像の修正の具体例を模式的に示す図である。以下、画像処理装置２の動作フローについて、適宜、図１３から図３３を参照しつつ説明する。
【００６１】
図８で示されるように、画像処理装置２では、ステップＳＴ１〜ＳＴ４の処理が時間順次に行われる。換言すれば、画像処理装置２における画像処理方法は、ステップＳＴ１〜ＳＴ４を有する。
【００６２】
ステップＳＴ１では、取得部２１１によって、細胞形態画像において細胞の特定部位が占める第１細胞領域を第１表示要素によって特定する領域特定画像が取得される。ここでは、例えば、図４で例示されたような細胞形態画像を対象とした所定の画像処理等が行われることで、図５で例示されたような領域特定画像が取得される。
【００６３】
ステップＳＴ２では、追加部２１３によって、ユーザーの動作に応答して入力される予め設定された所定の信号に応じて、細胞形態画像において第１細胞領域とは異なる特定部位が占める第２細胞領域の少なくとも輪郭部を特定する第２表示要素が領域特定画像に追加される。ここでは、例えば、図４で例示された細胞形態画像が参照されつつ、図５で例示された領域特定画像では捉えられていない特定部位が占める第２細胞領域の輪郭部を特定する第２表示要素としての曲線部が、該領域特定画像に追加される。このとき、例えば、図６で示された破線２ＣＡで囲まれた領域の輪郭部を特定する第２表示要素が領域特定画像に追加され得る。
【００６４】
ステップＳＴ３では、修正部２１４によって、第１細胞領域の第２細胞領域と重なる重畳領域について、第２細胞領域を特定する表示要素ではなく、第１細胞領域を特定する表示要素が表示部２３に表示されるように、領域特定画像が修正される。但し、ユーザーの動作に応じて入力される信号および第２表示要素の状態の少なくとも一方に応じて、領域特定画像の修正態様が適宜変更され得る。具体的には、ステップＳＴ３では、図９から図１２で示される動作フローに沿って、領域特定画像が修正される。ここでは、第２表示要素が、第２細胞領域の輪郭を特定する曲線部を含む場合を例に挙げて説明する。
【００６５】
まず、図９のステップＳＴ３１では、第２表示要素Ｄｅ２としての曲線部が閉領域を形成しているか否か判定される。ここで、曲線部が閉領域を形成していれば、ステップＳＴ３２に進み、曲線部が閉領域を形成していなければ、ステップＳＴ３５に進む。
【００６６】
ステップＳＴ３２では、曲線部が複数の閉領域を形成しているか否か判定される。ここで、曲線部が複数の閉領域を形成していれば、ステップＳＴ３３に進み、曲線部が複数の閉領域を形成していなければ、ステップＳＴ３４に進む。
【００６７】
ステップＳＴ３３では、曲線部が形成している複数の閉領域のうち、最大の閉領域以外の小さな閉領域を形成している部分が削除される。このとき、例えば、図１３で示されるように、第２表示要素Ｄｅ２としての曲線部が、２つの閉領域Ａｃ１，Ａｃ２を形成している場合を想定する。この場合、図１４で示されるように、曲線部のうち、複数の閉領域のうちの最大の閉領域Ａｃ１以外の小さな閉領域Ａｃ２を形成している部分が削除される。
【００６８】
ステップＳＴ３４では、曲線部のうちの閉領域を形成していない部分Ｅｐ１が削除される。例えば、ステップＳＴ３２から進んで来た場合には、図１５から図１６で示されるように、第２表示要素Ｄｅ２のうちの閉領域Ａｃ１を形成していない部分Ｅｐ１が削除される。このような処理が行われると、図１０のステップＳＴ３６に進む。
【００６９】
ステップＳＴ３５では、曲線部のうちの両端が結ばれて、閉領域Ａｃ１が形成される。例えば、図１７から図１８で示されるように、第２表示要素Ｄｅ２としての曲線部のうちの両端（具体的には、一端Ｅ１および他端Ｅ２）が線Ｃｎ１で結ばれる。ここで、線Ｃｎ１としては、例えば、曲線または直線等が採用され得る。図１８には、曲線部の両端が直線状の線Ｃｎ１によって結ばれている様子が示されている。このような処理が行われると、図１０のステップＳＴ３６に進む。
【００７０】
次に、図１０のステップＳＴ３６では、第１細胞領域を特定する第１表示要素Ｄｅ１が、第２細胞領域を特定する第２表示要素Ｄｅ２に置換される旨の処理（置換処理とも言う）が指定されているか否か判定される。ここでは、例えば、置換処理が指定されていれば、ステップＳＴ３７に進み、置換処理が指定されていなければ、図１１のステップＳＴ４１に進む。
【００７１】
ステップＳＴ３７では、各第１表示要素Ｄｅ１について、第２細胞領域を特定する第２表示要素Ｄｅ２が形成する閉領域Ａｃ１内に含有されている含有率が算出される。
【００７２】
ステップＳＴ３８では、ステップＳＴ３７で算出された含有率が１００％の第１表示要素Ｄｅ１があるか否かが判定される。ここでは、含有率が１００％の第１表示要素Ｄｅ１があれば、ステップＳＴ３９に進み、含有率が１００％の第１表示要素Ｄｅ１がなければ、ステップＳＴ４０に進む。
【００７３】
ステップＳＴ３９では、含有率が１００％の第１表示要素Ｄｅ１が削除される。例えば、図１９から図２０で示されるように、第２表示要素Ｄｅ２の閉領域Ａｃ１に完全に含有されている第１表示要素Ｄｅ１が削除される。この削除処理が行われると、図１２のステップＳＴ４５に進む。
【００７４】
ステップＳＴ４０では、ステップＳＴ３７で算出された含有率が最も高い第１表示要素Ｄｅ１が削除される。例えば、図２１から図２２で示されるように、第２表示要素Ｄｅ２の閉領域Ａｃ１に、２つの第１表示要素Ｄｅ１（Ｄｅ１ａ，Ｄｅ１ｂ）が含まれている場合、含有率が相対的に高い第１表示要素Ｄｅ１（Ｄｅ１ａ）が削除される。この削除処理が行われると、図１２のステップＳＴ４５に進む。
【００７５】
ステップＳＴ４１では、第２表示要素Ｄｅ２の閉領域Ａｃ１に完全に含まれている第１表示要素Ｄｅ１があるか否か判定される。ここで、閉領域Ａｃ１に完全に含まれている第１表示要素Ｄｅ１があれば、ステップＳＴ４２に進み、閉領域Ａｃ１に完全に含まれている第１表示要素Ｄｅ１がなければ、ステップＳＴ４３に進む。例えば、図２３で示されるように、３つの第１表示要素Ｄｅ１（Ｄｅ１ａ〜Ｄｅ１ｃ）のうちの１つの第１表示要素Ｄｅ１（Ｄｅ１ｃ）が閉領域Ａｃ１に完全に含まれていれば、閉領域Ａｃ１に完全に含まれている第１表示要素Ｄｅ１が存在しているものと判定され得る。
【００７６】
ステップＳＴ４２では、閉領域Ａｃ１内に完全に含まれている第１表示要素Ｄｅ１が削除される。例えば、図２３から図２４で示されるように、閉領域Ａｃ１内に完全に含まれている第１表示要素Ｄｅ１（Ｄｅ１ｃ）が削除される。
【００７７】
ステップＳＴ４３では、第２表示要素Ｄｅ２の曲線部の両端が同一の第１細胞領域に対応する領域内に位置しているか否か判定される。ここで、曲線部の両端が同一の第１細胞領域に対応する領域内に位置していれば、ステップＳＴ４４に進み、曲線部の両端が同一の第１細胞領域に対応する領域内に位置していなければ、図１２のステップＳＴ４５に進む。例えば、図２４では、第２表示要素Ｄｅ２の曲線部の両端（具体的には、一端Ｅ１および他端Ｅ２）が、同一の第１細胞領域に対応する領域を示す第１表示要素Ｄｅ１（Ｄｅ１ｂ）内に位置している様子が示されている。
【００７８】
ステップＳＴ４４では、第２表示要素Ｄｅ２としての曲線部の両端を内包する第１細胞領域を特定する第１表示要素が、該第１細胞領域と第２細胞領域とを合わせた領域を特定する表示要素に変更される。例えば、図２４から図２５で示されるように、第２表示要素Ｄｅ２としての曲線部の両端（一端Ｅ１および他端Ｅ２）を内包する第１細胞領域を特定する第１表示要素Ｄｅ１（Ｄｅ１ｂ）が、該第１細胞領域と第２細胞領域とを合わせた領域を特定する表示要素Ｄｅ３に変更される。
【００７９】
ステップＳＴ４５では、閉領域Ａｃ１に一部が含まれる第１表示要素Ｄｅ１があるか否か判定される。ここで、閉領域Ａｃ１に一部が含まれる第１表示要素Ｄｅ１があれば、ステップＳＴ４６に進み、閉領域Ａｃ１に一部が含まれる第１表示要素Ｄｅ１がなければ、ステップＳＴ４９に進む。例えば、図２２では、第２表示要素Ｄｅ２の閉領域Ａｃ１に第１表示要素Ｄｅ１（Ｄｅ１ｂ）の一部が含まれている様子が示されており、図２５では、表示要素Ｄｅ３の閉領域Ａｃ１に第１表示要素Ｄｅ１（Ｄｅ１ａ）の一部が含まれている様子が示されている。
【００８０】
ステップＳＴ４６では、ユーザーの動作に応じて、第１細胞領域を特定する表示要素よりも追加された第２細胞領域を特定する第２表示要素Ｄｅ２および表示要素Ｄｅ３を優先的に表示させる修正の態様が指定されているか否か判定される。ここで、第１細胞領域を特定する表示要素よりも第２表示要素Ｄｅ２および表示要素Ｄｅ３を優先的に表示させる修正の態様が指定されていれば、ステップＳＴ４７に進み、該修正の態様が指定されていなければ、ステップＳＴ４８に進む。
【００８１】
ステップＳＴ４７では、第１表示要素Ｄｅ１のうちの閉領域Ａｃ１に含まれる部分が削除される。例えば、図２２および図２６で示されるように、第１表示要素Ｄｅ１（Ｄｅ１ｂ）のうちの第２表示要素Ｄｅ２の閉領域Ａｃ１に含まれる部分が削除される。これにより、第１表示要素Ｄｅ１（Ｄｅ１ｂ）が第１細胞領域に係る表示要素Ｄｅ１１に変更される。さらに、このとき、例えば、表示要素Ｄｅ１１と第２表示要素Ｄｅ２との間に間隙部ＳＬ１が設けられる。その結果、領域特定画像が、表示要素Ｄｅ１１と第２表示要素Ｄｅ２とが接することなく、表示要素Ｄｅ１１と第２表示要素Ｄｅ２とが認識可能な画像となり得る。また、例えば、図２５および図２７で示されるように、第１表示要素Ｄｅ１（Ｄｅ１ａ）のうちの表示要素Ｄｅ３の閉領域Ａｃ１に含まれる部分が削除される。これにより、第１表示要素Ｄｅ１（Ｄｅ１ａ）が第１細胞領域に係る表示要素Ｄｅ１１に変更される。さらに、このとき、例えば、表示要素Ｄｅ１１と表示要素Ｄｅ３との間に間隙部ＳＬ１が設けられる。その結果、領域特定画像が、表示要素Ｄｅ１１と表示要素Ｄｅ３とが接することなく、表示要素Ｄｅ１１と表示要素Ｄｅ３とが容易に認識可能な画像となり得る。
【００８２】
ステップＳＴ４８では、閉領域Ａｃ１を形成している閉曲線のうちの第１表示要素Ｄｅ１に含まれる部分が削除される。例えば、図２２および図２８で示されるように、閉領域Ａｃ１を形成している第２表示要素Ｄｅ２としての閉曲線のうち、第１表示要素Ｄｅ１（Ｄｅ１ｂ）に含まれる部分が削除される。このとき、第２表示要素Ｄｅ２としての閉曲線のうちの削除された部分の両端を結ぶように、第１表示要素Ｄｅ１（Ｄｅ１ｂ）の外縁に沿った曲線が描かれることで、閉曲線によって閉領域Ａｃ１が形成されている状態が維持される。さらに、このとき、例えば、第１表示要素Ｄｅ１（Ｄｅ１ｂ）と第２表示要素Ｄｅ２との間に間隙部ＳＬ１が設けられる。また、例えば、図２５および図２９で示されるように、閉領域Ａｃ１を形成している表示要素Ｄｅ３としての閉曲線のうち、第１表示要素Ｄｅ１（Ｄｅ１ａ）に含まれる部分が削除される。このとき、表示要素Ｄｅ３としての閉曲線のうちの削除された部分の両端を結ぶように、第１表示要素Ｄｅ１（Ｄｅ１ａ）の外縁に沿った曲線が描かれることで、閉曲線によって閉領域Ａｃ１が形成されている状態が維持される。さらに、このとき、例えば、第１表示要素Ｄｅ１（Ｄｅ１ａ）と表示要素Ｄｅ３との間に間隙部ＳＬ１が設けられる。
【００８３】
ステップＳＴ４９では、閉領域Ａｃ１を特定する表示要素が追加される。ここでは、閉領域Ａｃ１を特定する閉曲線で囲まれる領域に、例えば、所定色または所定のハッチングが付される。このとき、閉曲線の太さが適宜調整され得る。具体的には、例えば、図２６で示される第２表示要素Ｄｅ２および閉領域Ａｃ１が、図３０で示されるように、所定色または所定のハッチングが付された表示要素Ｄｅ２１に変更される。これにより、領域特定画像に第２細胞領域に係る表示要素Ｄｅ２１が追加される。また、例えば、図２７で示される表示要素Ｄｅ３および閉領域Ａｃ１が、図３１で示されるように、所定色または所定のハッチングが付された表示要素Ｄｅ３１に変更される。これにより、領域特定画像に拡大された第１細胞領域に係る表示要素Ｄｅ３１が追加される。また、例えば、図２８で示される第２表示要素Ｄｅ２および閉領域Ａｃ１が、図３２で示されるように、所定色または所定のハッチングが付された表示要素Ｄｅ２１に変更される。これにより、領域特定画像に第２細胞領域に係る表示要素Ｄｅ２１が追加される。また、例えば、図２９で示される表示要素Ｄｅ３および閉領域Ａｃ１が、図３３で示されるように、所定色または所定のハッチングが付された表示要素Ｄｅ３１に変更される。これにより、領域特定画像に拡大された第１細胞領域に係る表示要素Ｄｅ３１が追加される。
【００８４】
ステップＳＴ４では、制御部２１によって、領域特定画像の作成が完了されたか否かが判定される。ここでは、例えば、ユーザーの動作に応じて入力部２２から入力される信号に応じて、領域特定画像の作成が完了されたか否かが判定される。そして、領域特定画像の作成が完了されていなければ、ステップＳＴ２に戻り、領域特定画像の作成が完了されていれば、本動作フローが終了される。
【００８５】
＜(１−６)まとめ＞
以上のように、本実施形態に係る画像処理装置２の画像処理では、まず、取得部２１１によって、細胞形態画像において細胞の特定部位が占める第１細胞領域を第１表示要素によって特定する領域特定画像が取得される。次に、追加部２１３によって、ユーザーの動作に応答して入力される予め設定された所定の信号に応じて、細胞形態画像において第１細胞領域とは異なる特定部位が占める第２細胞領域の少なくとも輪郭部を特定する第２表示要素が領域特定画像に追加される。そして、デフォルトの設定では、修正部２１４によって、第１細胞領域の第２細胞領域と重なる重畳領域について、第２細胞領域を特定する表示要素ではなく、第１細胞領域を特定する表示要素が表示部２３に表示されるように、領域特定画像が修正される。これにより、細胞形態画像において細胞の特定部位が占める細胞領域を表示要素によって特定する領域特定画像に、ユーザーが細胞領域を特定する表示要素を追加することができる。その結果、細胞形態画像から全ての細胞領域がより容易且つ正確に抽出され得る。
【００８６】
また、例えば、ユーザーの動作に応じて、修正部２１４によって、表示要素の置換、拡大、ならびに優先的な表示および削除等と言った複数の処理の間で、実施される処理が適宜選択され得る。
【００８７】
＜(２)変形例＞
なお、本発明は上述の一実施形態に限定されるものではなく、本発明の要旨を逸脱しない範囲において種々の変更、改良等が可能である。
【００８８】
＜(２−１)第１変形例＞
例えば、上記一実施形態では、修正部２１４によって、第１細胞領域の第２細胞領域と重なる重畳領域のうち、第１細胞領域を特定する表示要素が表示される領域については、第２細胞領域を特定する表示要素が削除され、第２細胞領域を特定する表示要素が表示される領域については、第１細胞領域を特定する表示要素が削除された。しかしながら、これに限られない。例えば、修正部２１４によって、第１細胞領域を特定する表示要素が基本レイヤーを構成し、重畳領域のうち、第１細胞領域を特定する表示要素が表示される領域については、第２細胞領域を特定する表示要素が背面レイヤーを構成するように、領域特定画像が修正されても良い。さらに、例えば、重畳領域のうち、第２細胞領域を特定する表示要素が表示される領域については、第２細胞領域を特定する表示要素が前面レイヤーを構成するように、領域特定画像が修正されても良い。ここで、背面レイヤーは、基本レイヤーの背後に位置するように表示されるレイヤーであり、前面レイヤーは、基本レイヤーの手前に位置するように表示されるレイヤーである。このような構成によれば、領域特定画像において、細胞領域の前後関係が良好に描かれるとともに、必要に応じて、ある細胞領域の背後に隠れた他の細胞領域の情報を容易に得ることも出来る。
【００８９】
また、領域特定画像が、複数のレイヤーによって構成される場合、基本レイヤーを構成する第１細胞領域を特定する表示要素と、背面レイヤーおよび前面レイヤーの少なくとも一方のレイヤーを構成する第２細胞領域を特定する表示要素との間で、表示部２３における表示態様が異なるように、領域特定画像が修正されても良い。ここで、異なる表示態様としては、例えば、明暗、濃淡および色彩の少なくとも１つが異なる表示態様等が挙げられる。このような構成によれば、隣接する細胞領域を特定する複数の表示要素の区別が容易となる。そして、このような構成が採用される場合であっても、領域特定画像のうちの第１細胞領域を特定する表示要素と、第２細胞領域を特定する表示要素との間に間隙部ＳＬ１が設けられれば、表示要素と表示要素との境界が視認可能な態様で表示され得る。
【００９０】
ここで、領域特定画像が複数のレイヤーで構成される構成の具体例を挙げて説明する。
【００９１】
図３４は、第１変形例に係る領域特定画像の修正に係る動作フローを示すフローチャートである。本変形例に係る画像処理装置２の動作フローは、上記一実施形態に係る動作フローがベースとされて、図１２で示される動作フローが、図３４で示される動作フローに置換されたものである。なお、図３４で示される動作フローは、図１２で示される動作フローのうちのステップＳＴ４７〜ＳＴ４９が、ステップＳＴ４７Ａ〜ＳＴ４９Ａに変更されたものである。このため、ここでは、ステップＳＴ４７Ａ〜ＳＴ４９Ａについて説明する。
【００９２】
図３４のステップＳＴ４７Ａでは、第２細胞領域を特定する表示要素が前面レイヤーに追加される。ここでは、例えば、前面レイヤーが生成されていなければ、前面レイヤーが生成されて、該前面レイヤーに第２細胞領域を特定する表示要素が追加され、既に前面レイヤーが生成されていれば、該前面レイヤーに第２細胞領域を特定する表示要素が追加されれば良い。例えば、図３５および図３６で示されるように、第１表示要素Ｄｅ１が描かれた基本レイヤーの手前の前面レイヤーに、第２表示要素Ｄｅ２で指定されていた第２細胞領域を特定する表示要素Ｄｅ２１が追加される。このとき、例えば、第１表示要素Ｄｅ１と表示要素Ｄｅ２１との間に間隙部ＳＬ１が表示されるとともに、基本レイヤーに描かれた表示要素Ｄｅ１と、前面レイヤーに描かれた表示要素Ｄｅ２１とが、異なる態様で表示される。例えば、図３６で示されるように、より背面側のレイヤーに描かれた表示要素の方が、相対的に濃くまたは相対的に暗く描かれる態様が考えられる。
【００９３】
また、ステップＳＴ４８Ａでは、第２細胞領域を特定する表示要素が背面レイヤーに追加される。ここでは、例えば、背面レイヤーが生成されていなければ、背面レイヤーが生成されて、該背面レイヤーに第２細胞領域を特定する表示要素が追加され、既に、背面レイヤーが生成されていれば、該背面レイヤーに第２細胞領域を特定する表示要素が追加されれば良い。例えば、図３５および図３７で示されるように、第１表示要素Ｄｅ１が描かれた基本レイヤーの背後の背面レイヤーに、第２表示要素Ｄｅ２で指定されていた第２細胞領域を特定する表示要素Ｄｅ２１が追加される。このとき、例えば、第１表示要素Ｄｅ１と表示要素Ｄｅ２１との間に間隙部ＳＬ１が表示されるとともに、基本レイヤーに描かれた表示要素Ｄｅ１と、背面レイヤーに描かれた表示要素Ｄｅ２１とが、異なる態様で表示される。例えば、図３７で示されるように、より背面側のレイヤーに描かれた表示要素の方が、相対的に濃くまたは相対的に暗く描かれる態様が考えられる。
【００９４】
＜(２−２)その他の変形例＞
上記一実施形態では、追加部２１３によって第２細胞領域の輪郭を特定する曲線部が第２表示要素Ｄｅ２として領域特定画像に追加されたが、これに限られない。例えば、中抜きの曲線部ではなく、第２細胞領域の全体に対応する一塊の領域が、第２細胞領域を特定する第２表示要素として領域特定画像に追加されても良い。このとき、一塊の第２表示要素の輪郭部分が、第２細胞領域の輪郭を特定する曲線部に相当する。
【００９５】
また、上記一実施形態では、画像処理装置２に表示部２３が含まれていたが、これに限られない。例えば、表示部２３は、画像処理装置２に対してデータ送受信可能に接続される外部の表示装置であっても良い。
【００９６】
また、上記一実施形態では、修正の態様について特にユーザーによる指定がなければ、重畳領域について、第２細胞領域を特定する表示要素ではなく、第１細胞領域を特定する表示要素が表示されるように、領域特定画像が修正部２１４によって修正された。しかしながら、これに限られない。例えば、重畳領域の一部については、第２細胞領域を特定する表示要素が表示されるように、領域特定画像が修正部２１４によって領域特定画像が修正されても良い。つまり、例えば、重畳領域の少なくとも一部の領域について、第１細胞領域を特定する表示要素が表示制御部２１２によって表示部２３に表示されるように、領域特定画像が修正部２１４によって修正されても良い。このとき、例えば、修正部２１４が、重畳領域のうちの第２細胞領域を特定する表示要素が表示制御部２１２によって表示部２３に表示される領域については、第１細胞領域を特定する表示要素を削除する。このような構成によっても、ユーザーが第２細胞領域を特定する表示要素Ｄｅ２１を領域特定画像に容易に追加することができる。その結果、細胞形態画像から全ての細胞領域が容易且つ正確に抽出され得る。
【００９７】
また、上記一実施形態では、重畳領域について、第１細胞領域を特定する表示要素よりも第２細胞領域を特定する表示要素の方が優先的に表示される修正の態様が指定されていれば、重畳領域の全域について、第２細胞領域を特定する表示要素が表示されるように、領域特定画像が修正部２１４によって修正された。しかしながら、これに限られない。例えば、重畳領域の一部については、第１細胞領域を特定する表示要素が表示されるように、領域特定画像が修正部２１４によって修正されても良い。つまり、例えば、重畳領域の少なくとも一部の領域について、第２細胞領域を特定する表示要素が表示制御部２１２によって表示部２３に表示されるように、領域特定画像が修正部２１４によって修正されても良い。このとき、例えば、修正部２１４が、重畳領域のうちの第２細胞領域を特定する表示要素が表示制御部２１２によって表示部２３に表示される領域については、第１細胞領域を特定する表示要素を削除する。このような構成によっても、ユーザーが第２細胞領域を特定する表示要素Ｄｅ２１を領域特定画像に容易に追加することができる。その結果、細胞形態画像から全ての細胞領域が容易且つ正確に抽出され得る。
【００９８】
また、上記一実施形態では、細胞形態画像が、特定部位としての細胞核の形態を捉えた画像であったが、これに限られない。例えば、特定部位には、細胞膜等の細胞を構成するその他の部位が含まれても良い。
【００９９】
また、上記一実施形態では、生体に、広義の意味での動物が含まれたが、これに限られない。例えば、生体に、動物以外の植物等が含まれても良い。すなわち、生体には、動植物を含む生物が含まれ得る。
【０１００】
また、上記一実施形態では、取得部２１１において、細胞形態画像を対象とした所定の画像処理が行われることで、領域特定画像が取得されたが、これに限られない。例えば、取得部２１１において、画像処理装置２とは異なる外部装置で生成された領域特定画像が通信Ｉ／Ｆ２４等を介して取得されても良い。
【０１０１】
なお、上記一実施形態および各種変形例をそれぞれ構成する全部または一部を、適宜、矛盾しない範囲で組み合わせ可能であることは、言うまでもない。
【符号の説明】
【０１０２】
１  顕微鏡画像取得装置
２  画像処理装置
３  通信回線
２１  制御部
２２  入力部
２３  表示部
２４  通信Ｉ／Ｆ
２５  記憶部
２６  バス
１００  病理診断支援システム
２１１  取得部
２１２  表示制御部
２１３  追加部
２１４  修正部
２１５  設定部
Ａｃ１，Ａｃ２  閉領域
Ｄｅ１  第１表示要素
Ｄｅ２  第２表示要素
Ｄｅ３，Ｄｅ１１，Ｄｅ２１，Ｄｅ３１  表示要素
Ｅ１  一端
Ｅ２  他端
Ｐ１  プログラム
ＳＬ１  間隙部
【図１】
2016190129.tif 000003
【図２】
2016190129.tif 000004
【図３】
2016190129.tif 000005
【図４】
2016190129.tif 000006
【図５】
2016190129.tif 000007
【図６】
2016190129.tif 000008
【図７】
2016190129.tif 000009
【図８】
2016190129.tif 000010
【図９】
2016190129.tif 000011
【図１０】
2016190129.tif 000012
【図１１】
2016190129.tif 000013
【図１２】
2016190129.tif 000014
【図１３】
2016190129.tif 000015
【図１４】
2016190129.tif 000016
【図１５】
2016190129.tif 000017
【図１６】
2016190129.tif 000018
【図１７】
2016190129.tif 000019
【図１８】
2016190129.tif 000020
【図１９】
2016190129.tif 000021
【図２０】
2016190129.tif 000022
【図２１】
2016190129.tif 000023
【図２２】
2016190129.tif 000024
【図２３】
2016190129.tif 000025
【図２４】
2016190129.tif 000026
【図２５】
2016190129.tif 000027
【図２６】
2016190129.tif 000028
【図２７】
2016190129.tif 000029
【図２８】
2016190129.tif 000030
【図２９】
2016190129.tif 000031
【図３０】
2016190129.tif 000032
【図３１】
2016190129.tif 000033
【図３２】
2016190129.tif 000034
【図３３】
2016190129.tif 000035
【図３４】
2016190129.tif 000036
【図３５】
2016190129.tif 000037
【図３６】
2016190129.tif 000038
【図３７】
2016190129.tif 000039
【国際調査報告】
2016190129.tif 000040
2016190129.tif 000041
2016190129.tif 000042
2016190129.tif 000043