(57)【要約】【課題】一連の画像が画像ごとに設定された表示時間または表示レートに応じて順次表示される場合に、各画像が表示される前に各画像の表示時間等を把握できる画像処理装置を提供すること。【解決手段】表示制御部１２０は、画像表示制御部１２１および表示時間情報表示制御部１２２を有する。画像表示制御部１２１は、画像情報記憶部１３１に記憶している一連の体腔内画像の画像情報および表示時間情報記憶部１３２に記憶している表示時間情報に基づいて、一連の体腔内画像を画像表示部１４１に順次表示する。表示時間情報表示制御部１２２は、表示時間情報表示部１４２に、少なくとも画像表示部１４１に表示している画像よりも時系列的に後に表示する画像の表示時間情報を表示する。【選択図】        図２
2009039449.tif 000002
【特許請求の範囲】
【請求項１】
一連の画像を記憶する画像記憶手段と、
各画像の表示時間を定める表示時間情報を記憶する表示時間情報記憶手段と、
各画像を前記表示時間情報に従って順次表示する画像表示手段と、
前記表示時間情報のうち、少なくとも前記画像表示手段に表示している画像よりも時系列的に後に表示する画像の前記表示時間情報を表示する表示時間情報表示手段と、
前記画像記憶手段に記憶している画像および前記表示時間情報記憶手段に記憶している前記表示時間情報に基づいて、前記画像表示手段に画像を表示するとともに、前記表示時間情報表示手段に前記表示時間情報を表示する制御を行う表示制御手段と、
を備えたことを特徴とする画像処理装置。
【請求項２】
前記表示制御手段は、前記画像表示手段に現在表示している画像の時系列上の位置を示す指標を、前記表示時間情報表示手段に表示する制御を行うことを特徴とする請求項１に記載の画像処理装置。
【請求項３】
前記表示制御手段は、前記表示時間情報として、各画像を前記画像表示手段で表示する時間である前記表示時間と、前記表示時間を定める係数と、前記画像表示手段で表示する速度である表示レートと、各画像の相対的な表示時間を定める値のうち、少なくともひとつを表示する制御を行うことを特徴とする請求項１または２に記載の画像処理装置。
【請求項４】
前記表示制御手段は、表示対象とする一連の画像の全画像の前記表示時間情報を表示する制御を行うことを特徴とする請求項１〜３のいずれか一つに記載の画像処理装置。
【請求項５】
前記表示制御手段は、表示対象とする一連の画像のうち、前記画像表示手段に表示している画像を基準として、時系列的に前後に表示する所定の枚数分の画像、または時系列的に前後の所定時間以内に表示する画像である近傍画像の前記表示時間情報を表示する制御を行うことを特徴とする請求項１〜３のいずれか一つに記載の画像処理装置。
【請求項６】
前記表示制御手段は、表示対象とする一連の画像の全画像の前記表示時間情報を表示する制御と、表示対象とする一連の画像のうち、前記画像表示手段に表示している画像を基準として、時系列的に前後に表示する所定の枚数分の画像、または時系列的に前後の所定時間以内に表示する画像である近傍画像の前記表示時間情報を表示する制御とを行う機能を有し、
前記表示時間情報表示手段に表示する前記表示時間情報を、全画像の前記表示時間情報、または前記近傍画像の前記表示時間情報のいずれかに切り替える表示範囲切替手段を備え、
前記表示範囲切替手段によって全画像の前記表示時間情報、または前記近傍画像の前記表示時間情報のいずれかに切り替えられた前記表示時間情報を表示する制御を行うことを特徴とする請求項１〜３のいずれか一つに記載の画像処理装置。
【請求項７】
前記表示制御手段は、一連の画像を順次表示する時間である再生時間、各画像を撮像した際の時間である撮像時間、または各画像に対して撮像順に付された番号である画像番号のうち少なくともひとつに対応付けて前記表示時間情報を表示する制御を行うことを特徴とする請求項１〜６のいずれか一つに記載の画像処理装置。
【請求項８】
前記画像記憶手段は、生体内を撮影した一連の体腔内画像を記憶することを特徴とする請求項１〜７のいずれか一つに記載の画像処理装置。
【請求項９】
前記表示制御手段は、前記表示時間情報に合わせて、一連の前記体腔内画像の色調の推移を示す情報、および各体腔内画像中の病変の有無を示す情報のうち、少なくともいずれか１つを前記表示時間情報表示手段に表示する制御を行うことを特徴とする請求項８に記載の画像処理装置。
【請求項１０】
前記表示時間情報を変更する情報を取得し、前記表示時間情報を変更する表示時間情報変更手段を備え、
前記表示制御手段は、前記表示時間情報変更手段によって変更された前記表示時間情報に基づいて、各画像を表示する制御を行うことを特徴とする請求項１〜９のいずれか一つに記載の画像処理装置。
【請求項１１】
前記表示時間変更手段によって変更された前記表示時間情報を記憶する変更記憶手段を備えたことを特徴とする請求項１０に記載の画像処理装置。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、複数の画像、特に胃腸管内を撮影した体腔内画像を順次表示する画像処理装置に関する。
【背景技術】
【０００２】
近年、内視鏡の分野において、被検体である患者の口から飲込まれて被検体内部に導入される飲込み型のカプセル型内視鏡が提案されている。カプセル型内視鏡は、患者の口から飲み込まれて自然排出されるまでの間に、例えば食道や胃、小腸、大腸等の体腔内画像を数万枚撮像する。医師または看護師等の診察・観察を行う者（以下、診察者）は、この莫大な枚数の体腔内画像を観察しなければならない。
【０００３】
そこで診察者の負担を低減するために、従来から、画像間の動きベクトル算出を行い、この動きベクトルを用いて画像間の類似度を判定し、その類似度に応じて各画像の表示レートを設定することによって、体腔内画像の閲覧時間を短縮する画像処理装置が開発されている（特許文献１参照）。
【０００４】
【特許文献１】特開２００６−２８０７９２号公報
【特許文献２】特開２００５−１９２８８０号公報
【非特許文献１】ＣＧ―ＡＲＴＳ協会、ディジタル画像処理、Ｐ２０２、２００４年７月２２日
【発明の開示】
【発明が解決しようとする課題】
【０００５】
ところで、カプセル型内視鏡は、蠕動運動によって移動しながら画像を撮像しているので、診察者は、一連の体腔内画像のうち画像中の撮影内容が大きく変わる箇所またはほとんど変化しない箇所がどのように発生するか予測ができず、画像間の類似度を予測できない。したがって、従来の画像処理装置では、診察者は、各画像の表示時間あるいは表示レートを予測できないにもかかわらず、各画像の表示時間等の変化に合わせて、一連の体腔内画像を観察しなければならなかった。
【０００６】
本発明は、上記に鑑みてなされたものであって、一連の画像が画像ごとに設定された表示時間または表示レートに応じて順次表示される場合に、各画像が表示される前に各画像の表示時間等を把握できる画像処理装置を提供することを目的とする。
【課題を解決するための手段】
【０００７】
上述した課題を解決し、目的を達成するために、本発明にかかる画像処理装置は、一連の画像を記憶する画像記憶手段と、各画像の表示時間情報を記憶する表示時間情報記憶手段と、各画像を前記表示時間情報に従って順次表示する画像表示手段と、前記表示時間情報のうち、少なくとも前記画像表示手段に表示している画像よりも時系列的に後に表示する画像の前記表示時間情報を表示する表示時間情報表示手段と、前記画像記憶手段に記憶している画像および前記表示時間情報記憶手段に記憶している前記表示時間情報に基づいて、前記画像表示手段に画像を表示するとともに、前記表示時間情報表示手段に前記表示時間情報を表示する制御を行う表示制御手段と、を備えたことを特徴とする。
【発明の効果】
【０００８】
本発明にかかる画像処理装置は、表示制御手段が、画像表示手段に一連の画像を表示時間情報に従って順次表示させるとともに、表示時間情報表示手段に少なくとも画像表示手段に表示している画像よりも時系列的に後に表示する画像の表示時間情報を表示するため、診察者は、各画像が表示される前に各画像の表示時間等を把握し、表示時間の変化に合わせて各画像を観察できるとともに、画像の見落とし等が減少し、画像の見直し等の負担が低減するという効果を奏する。
【発明を実施するための最良の形態】
【０００９】
以下、図面を参照して、本発明にかかる画像処理装置の好適な実施の形態を詳細に説明する。なお、この実施の形態によってこの発明が限定されるものではない。
【００１０】
（実施の形態１）
図１は、この発明の実施の形態１である画像処理装置を有する被検体内情報取得システムの構成例を例示する模式図である。図１に示すように、この被検体内情報取得システムは被検体１内部の体腔内画像を撮像するカプセル型内視鏡２、カプセル型内視鏡２から無線送信される体腔内画像の画像情報を受信する受信装置３、受信装置３によって受信された画像情報をもとに、カプセル型内視鏡２によって撮像された体腔内画像を処理する画像処理装置５等で構成される。受信装置３と画像処理装置５との間の画像情報の受け渡しには、記録媒体４が使用される。
【００１１】
カプセル型内視鏡２は、被検体１の内部に導入され、この被検体１内の画像を時系列に沿って順次撮像する撮像機能と、撮像した画像を含む無線信号を外部に送信する無線通信機能とを有する。カプセル型内視鏡２は、被検体１に飲込まれ、消化管の蠕動によって体腔内を進行しながら、所定間隔たとえば０．５秒間隔で被検体１内の画像を逐次撮像し、所定の電波を介して、かかる被検体１内の画像を受信装置３に逐次送信する。
【００１２】
受信装置３は、受信した画像および各画像の撮像時間等の情報を画像情報として記録媒体４に逐次記録する。記録媒体４は、コンパクトフラッシュ（登録商標）等の携帯可能な記録メディアによって実現される。記録媒体４は、受信装置３および画像処理装置５に対して着脱可能であって、両者に対する挿着時に情報の出力および情報の記録が可能な構造を有する。
【００１３】
画像処理装置５は、受信装置３によって記録媒体４に記録された画像情報を取り込み、被検体１の体腔内画像を、撮像順に応じて順次表示（以下、再生表示）する画像表示機能を有する。診察者は、画像処理装置５に体腔内画像を再生表示させて被検体１内の部位、例えば食道、胃、小腸、および大腸等を観察（検査）する。画像処理装置５は、ワークステーションのような構成を有し、具体的には、図２に示すように、制御部１０と、入力部１１と、カードインターフェイス（Ｉ／Ｆ）１２と、記憶部１３と、表示部１４とを備える。
【００１４】
制御部１０は、画像処理装置５の各構成部にて行う各種処理を制御するとともに、各構成部間の情報の入出力を制御する。制御部１０は、特に、画像情報を処理する画像処理部１１０と、表示部１４における表示処理を制御する表示制御部１２０とを備える。
【００１５】
画像処理部１１０は、特に、画像情報を処理して各画像の表示時間を定める表示時間情報を算出する表示時間情報算出部１１１を備える。また、表示制御部１２０は、画像情報および表示時間情報に基づいて、各画像を表示部１４に再生表示する制御を行う画像表示制御部１２１と、各画像の表示時間情報を表示する制御を行う表示時間情報表示制御部１２２とを備える。
【００１６】
入力部１１は、キーボードおよびマウス等によって実現され、診察者による入力操作によって、各種情報を制御部１０に入力する。
【００１７】
カードＩ／Ｆ１２は、記録媒体４が着脱可能に挿着され、記録媒体４に蓄積された画像情報および画像ＩＤ情報を読み出すとともに、これらの情報を制御部１０に転送する。また、カードＩ／Ｆ１２は、記録媒体４に対し、制御部１０によって書き込みを指示された情報、例えば画像ＩＤ情報等を書き込む。なお、画像ＩＤ情報は、例えば被検体１の氏名、性別、生年月日、および画像ＩＤ等があげられる。
【００１８】
記憶部１３は、ＲＡＭ、ＥＥＰＲＯＭ、またはハードディスク等の情報の蓄積および読み出しが可能な情報記録媒体によって実現され、制御部１０によって書き込みを指示された情報を保存し、制御部１０によって読み出しを指示された情報を制御部１０に入力する。記憶部１３は、一連の体腔内画像に対応した画像ＩＤ情報とともに、一連の体腔内画像の画像情報を記憶する画像情報記録部１３１と、画像情報記憶部１３１に記憶された各体腔内画像の表示時間情報を記憶する表示時間情報記憶部１３２とを有する。
【００１９】
表示部１４は、ＣＲＴディスプレイまたは液晶ディスプレイ等の各種ディスプレイによって実現され、表示制御部１２０によって表示指示された各種情報を表示する。表示部１４は、特に、体腔内画像を表示する画像表示部１４１および表示時間情報を表示する表示時間情報表示部１４２を備え、被検体１の体腔内の観察・診断に必要な各種情報を表示する。
【００２０】
ここで、表示部１４の表示画面の具体例について、図３を参照しつつ説明する。図３は、表示画面の一例である診察・診断ウィンドＷ１および情報表示ウィンドＷ２を示す図である。診察・診断ウィンドＷ１は、体腔内画像を再生表示する画像表示部Ｆ１、画像ＩＤ情報を表示する画像ＩＤ情報表示部Ｆ２、順送りボタンＦ３および逆送りボタンＦ４を備える。情報表示ウィンドＷ２は、表示時間グラフ表示部Ｆ５および表示範囲切替ボタンＦ７を備える。なお、画像表示部Ｆ１が、画像表示部１４１の具体的態様を表しており、表示時間グラフ表示部Ｆ５が、表示時間情報表示部１４２の具体的態様を表している。
【００２１】
画像表示部Ｆ１には、画像表示制御部１２１の制御のもと、再生対象である一連の体腔内画像の各画像が、予め算出された表示時間情報に基づいて再生表示される。表示時間グラフ表示部Ｆ５には、表示時間情報表示制御部１２２の制御のもと、一連の体腔内画像全体から時系列的に各画像を特定する情報と各画像の表示時間情報との関係を示すグラフ（以下、表示時間グラフ）が表示される。例えば、表示時間グラフは、図３に示すように、体腔内画像の再生を開始した時から各画像が表示されるまでの時間、すなわち再生時間を横軸にとり、各画像の表示時間を縦軸にとり、再生時間と表示時間との関係を示す。
【００２２】
なお、時系列的に各画像を特定する情報は、再生時間に限定されず、例えば、各画像が撮像された時間である撮像時間や撮像された順に各画像に付される番号である画像番号であってもよい。また、表示時間情報は、表示時間に限定されず、単位時間あたりに表示する画像（フレーム）の枚数を示す表示レート、各画像の相対的な表示時間を定める値、または各画像の表示時間もしくは表示レートを定める係数であってもよい。
【００２３】
さらに、表示時間グラフ表示部Ｆ５には、表示時間情報表示制御部１２２の制御のもと、一連の体腔内画像全体に対する、画像表示部Ｆ１に現に表示されている画像の時系列上の位置を示す指標である再生位置Ｆ６が、表示される。具体的には、再生位置Ｆ６は、縦軸である表示時間軸に平行な軸であり、横軸である再生時間軸方向を移動し、画像表示部Ｆ１に現に表示されている画像に対応する再生時間を示す。なお、診察者が、入力部１１のマウスを用いて再生位置Ｆ６をドラックするなどして、表示時間グラフ上において再生位置Ｆ６を強制的に移動させた場合、画像表示制御部１２１は、移動後の再生位置Ｆ６が示す再生時間に対応する体腔内画像を画像表示部Ｆ１に表示する。なお、再生位置Ｆ６に替えて、画像表示部Ｆ１に表示されている画像に対応する再生時間の前後でグラフの色彩を変える等によって、再生位置を示してもよい。
【００２４】
また、診察・診断ウィンドＷ１は、ＧＵＩ（Graphical User Interface）画面であり、診察者は、入力部１１のマウスを用いて順送りボタンＦ３または逆送りボタンＦ４をクリック等して選択することによって、画像の再生指示を表示制御部１２０に入力する。画像が再生表示されている間、選択されたボタンは、図示しない再生停止ボタンに変化する。診察者は、この再生停止ボタンを選択することによって再生の停止指示を表示制御部１２０に入力する。なお、画像表示制御部１２１は、順送りボタンＦ３が選択された場合、各画像が撮像された時系列順に一連の体腔内画像を再生表示し、逆送りボタンＦ４が選択された場合、各画像が撮像された時系列の逆の順番で一連の体腔内画像を再生表示する。
【００２５】
次に、制御部１０が、一連の体腔内画像を表示部１４に再生表示する際の処理手順を、図４を参照し説明する。まず、画像処理部１１０は、カードＩ／Ｆ１２を介して記録媒体４より、一連の体腔内画像の画像情報を取得し、画像情報記憶部１３１に記憶する（ステップＳ１０１）。その後、表示時間情報算出部１１１は、画像情報を処理して各画像の表示時間情報を算出し、表示時間情報記憶部１３２に記憶する（ステップＳ１０２）。その後、表示制御部１２０は、画像情報、表示時間情報、および画像ＩＤ情報等、診察者が被検体１の診断に必要な情報を取得する（ステップＳ１０３）。次いで、表示制御部１２０の各部は、画像、表示時間情報および画像ＩＤ情報等を表示部１４に表示する（ステップＳ１０４）。この際、画像表示制御部１２１は、体腔内画像のうち、例えば最初に撮像された画像を画像表示部Ｆ１に表示する。なお、この時点で診察者は、一連の体腔内画像の再生に要する時間、すなわち総再生時間と、再生時間の経過に伴う各画像の表示時間の変化の推移を把握できる。
【００２６】
その後、表示制御部１２０は、再生開始の指示の入力を受けたかを判断する（ステップＳ１０５）。再生開始の指示の入力を受けた場合（ステップＳ１０５：Ｙｅｓ）、画像表示制御部１２１は、画像表示部１４１に現に表示されている画像の次に表示する画像の画像番号を算出する（ステップＳ１０６）。その後、画像表示制御部１２１は、算出した画像番号に対応する画像を、その画像の表示時間情報に応じて画像表示部１４１に表示する（ステップＳ１０７）。表示時間情報表示制御部１２２は、画像表示部１４１に現に表示されている画像に応じた表示時間情報を表示時間情報表示部１４２に表示する（ステップＳ１０８）。具体的には、表示時間情報表示制御部１２２は、再生位置Ｆ６を画像表示部Ｆ１に表示されている画像に対応する位置、すなわち現在の再生時間に対応する位置に移動させる。表示制御部１２０は、画像の再生指示が出されている間（ステップＳ１０９：Ｎｏ）、ステップＳ１０６〜Ｓ１０８の処理を繰り返す。一方、画像の再生停止の指示を受けた場合または再生時系列方向の端に達した場合のように、再生停止の条件を充足した場合（ステップＳ１０９：Ｙｅｓ）、表示制御部１２０は、画像の再生表示処理を停止する。このように、画像処理装置５は、カプセル型内視鏡２によって撮像された一連の体腔内画像を再生表示するとともに、再生表示される各画像の表示時間情報および表示時間の変化の推移を表示する。
【００２７】
なお、ステップＳ１０２では、表示時間情報算出部１１１が、画像情報に基づいて各画像の表示時間情報を算出する。本実施の形態１では、表示時間情報算出部１１１が、表示時間情報として表示時間を算出する場合を説明する。まず、表示時間情報算出部１１１は、例えば非特許文献１に記載されている正規化相互相関を用いて、連続して撮像された２画像間の画像類似度を算出する。画像類似度は−１以上１以下の範囲において算出され、２画像が完全に一致した場合の画像類似度を最大値の１とする。なお、画像類似度の算出方法は、正規化相互相関に限らず、例えば特許文献１に記載されている動きベクトルを用いた算出方法等であってもよい。
【００２８】
その後、表示時間情報算出部１１１は、画像類似度および次式（１）を用いて、再生対象である一連の体腔内画像の全ての表示時間を算出する。なお、ｉは画像番号を示し、式（１）において、Ｔiは画像番号ｉの画像の表示時間、Ｒiは画像番号ｉの画像の画像類似度、ｍａｘＴｉｍｅは予め設定された表示時間の最大値、ｍｉｎＴｉｍｅは予め設定された表示時間の最小値を示す。
【００２９】
【数１】
2009039449.tif 000003
【００３０】
なお、画像処理部１１０は、表示時間情報算出部１１１によって算出された表示時間情報に限らず、別の診察者または別の画像処理装置によって算出された表示時間情報を表示時間情報記憶部１３２に記憶してもよい。
【００３１】
また、表示時間情報表示制御部１２２は、一連の体腔内画像全体の表示時間情報を表示する制御に加えて、画像表示部Ｆ１に現に表示されている画像を基準として所定時間内に表示された画像または表示される画像、すなわち近傍画像の表示時間情報のみを表示する制御を行う。表示時間情報表示制御部１２２は、これらの表示を切り替える制御を行う表示範囲切替部１２３を備える。
【００３２】
図５は、近傍画像の表示時間情報を表示する場合の表示画面の具体例を示す図である。図５に示すように、情報表示ウィンドＷ３には、表示時間グラフ表示部Ｆ５に替えて表示時間グラフ表示部Ｆ８が表示される。表示時間グラフ表示部Ｆ８は、横軸、すなわち再生時間軸方向の中央を常に再生位置Ｆ９とし、再生位置Ｆ９を基準として前後所定の再生時間の範囲内において、表示時間グラフを表示する。なお、表示時間グラフ表示部Ｆ８には、画像表示部Ｆ１に表示されている画像を基準として、時系列的に前後に表示される所定枚数分の表示時間を表示してもよい。
【００３３】
表示時間情報表示制御部１２２は、近傍画像のみの表示時間グラフを表示している場合、ステップＳ１０８の処理において、再生時間軸上の目盛りを画像表示部Ｆ１に表示されている画像に対応するように更新し、再生時間軸の更新に合わせて表示時間グラフを移動させる。したがって、表示時間グラフ表示部Ｆ８では、常に画像表示部Ｆ１に表示されている画像を基準として、時系列で所定の範囲内にある画像の表示時間が表示される。
【００３４】
また、図３に示すように、情報表示ウィンドＷ２には、表示範囲切替ボタンＦ７が、表示されている。表示範囲切替部１２３は、診察者によって表示範囲切替ボタンＦ７が選択されると、情報表示ウィンドＷ２に替えて、情報表示ウィンドＷ３を表示する制御を行う。この場合、表示時間グラフの表示領域が縮小するので、表示画面を有効に使用できる。例えば、画像表示部Ｆ１の表示領域が圧迫されないので、体腔内画像を大きく表示できる。また、この場合、表示すべき表示時間情報の量が少ないので、現に表示されている画像とその近傍画像とについての表示時間情報を詳細に表示できる。
【００３５】
一方、図５に示すように、情報表示ウィンドＷ３には、表示範囲切替ボタンＦ１０が、表示されている。表示範囲切替部１２３は、診察者によって表示範囲切替ボタンＦ１０が選択されると、情報表示ウィンドＷ３に替えて、情報表示ウィンドＷ２を表示する制御を行う。診察者は、より広い範囲で表示時間の推移が知りたい場合には情報表示ウィンドＷ２を参照し、各画像の表示時間の詳細が知りたい場合には情報表示ウィンドＷ３を参照する等、状況に合わせて表示時間グラフを選択できる。
【００３６】
このように、画像処理装置５によれば、診察者は、各画像が表示される前に表示時間情報を把握できるので、表示時間に合わせて各画像を観察できる。さらに、画像処理装置５によれば、診察者は、表示時間が急激に変化する箇所などに対する心構えができるので、画像の見落としが減少し、これに伴う画像の見直し等の作業負担が軽減される。
【００３７】
なお、本実施の形態１では、画像表示部Ｆ１に現に表示されている画像に対して、時系列的に前後に表示する画像の表示時間情報を表示時間情報表示部１４２に表示するとしたが、少なくとも画像表示部１４１に現に表示されている画像よりも時系列的に後に表示する画像の表示時間情報が表示されていればよい。診察者は、少なくとも、これから表示される画像の表示時間を把握できれば、表示時間に合わせて各画像を観察できる。
【００３８】
（実施の形態２）
次に、実施の形態２について説明する。実施の形態１では、画像を再生表示するとともに表示時間情報のみを表示するとしたが、実施の形態２では、さらに、各画像の平均色および画像中に撮影された病変領域についての情報を表示することとする。
【００３９】
実施の形態２では、実施の形態１に示した被検体内情報取得システムにおいて画像処理装置５に替えて画像処理装置６を備える（図示せず）。図６は、画像処理装置６の構成を示すブロック図である。図６に示すように、画像処理装置６は、画像処理装置５が備えた制御部１０、記憶部１３および表示部１４に替えて、制御部２０、記憶部２３および表示部２４を備える。制御部２０は、画像処理部２１０および表示制御部２２０を備える。画像処理部２１０は、表示時間情報算出部１１１に加えて、平均色算出部２１２および病変情報算出部２１３を備え、表示制御部２２０は、表示制御部１１０の構成に加えて、カラーバー表示制御部２２４および病変バー表示制御部２２５を備える。記憶部２３は、記憶部１３の構成に加えて、平均色記憶部２３３および病変情報記憶部２３４を備える。表示部２４は、表示部１４の構成に加えて、カラーバー表示部２４３および病変バー表示部２４４を備える。その他の構成は、実施の形態１に示す被検体内情報取得システムおよび画像処理装置５と同じであり、同一構成部分には同一の符号を付している。
【００４０】
平均色算出部２１２は、画像情報記憶部１３１に記憶されている画像情報を処理し、各画像の平均色を算出して、この平均色の情報を平均色記憶部２３３に記憶する。また、病変情報算出部２１３は、各画像に病変領域が撮影されているか否かを判定し、病変領域が撮影された画像には病変の種類に応じて所定のラベルを割り当て、また病変が撮影されていない画像には病変領域が撮影された画像に割り当てられたラベルとは異なる所定のラベルを割り当て、これらの情報を病変情報として病変情報記憶部２３４に記憶する。なお、病変情報算出部２１３は、例えば、特許文献２に開示されているように、画像中の各画素または平均化した画素を、その色情報に基づく特徴空間に写像し、クラスタリングの後に正常部クラスタと異常部クラスタとを特定して、異常部クラスタに属する画素領域を病変領域として検出した後、各画像に所定のラベルを割り当てる。
【００４１】
カラーバー表示制御部２２４は、平均色記憶部２３３に記憶されている各画像の平均色についての情報に基づいてカラーバーを作成し、カラーバー表示部２４３に表示する制御を行う。カラーバーとは、一連の体腔内画像に含まれる各画像の平均色を、各画像に対応する位置に順次配置した帯状の表示領域である。胃腸管は、臓器ごとに粘膜表面の色が異なるので、診察者は、カラーバー表示部２４３上の平均色の推移より、各画像に撮像されている臓器を判別できる。
【００４２】
病変バー表示制御部２２５は、病変情報記憶部２４３に記憶されている病変情報に基づき病変バーを作成し、病変バー表示部２４４に表示する制御を行う。病変バーとは、病変情報算出部２１３によって各画像に割り当てられたラベルに応じた色を、各画像に対応する位置に順次配置した帯状の表示領域である。診察者は、病変バー表示部２４４の色の推移によって、病変領域が撮影された画像および病変の種類を判別できる。
【００４３】
図７は、表示部２４の表示画面の具体例を示す図である。画像処理装置６は、診察・診断ウィンドＷ１とともに、情報表示ウィンドＷ２に替えて情報表示ウィンドＷ４を表示する。情報表示ウィンドＷ４には、表示時間グラフ表示部Ｆ１１、カラーバー表示部Ｆ１２、病変バー表示部Ｆ１３および表示範囲切替ボタンＦ７が表示されている。なお、表示時間グラフ表示部Ｆ１１には、表示時間グラフ表示部Ｆ５に表示されていた表示時間グラフと同様の表示時間グラフが、表示されている。
【００４４】
カラーバー表示部Ｆ１２は、カラーバー表示部２４３の具体的態様を表しており、表示時間グラフの再生時間軸に平行に、再生時間に対応する画像の平均色を順次配置した帯状の表示領域である。また、病変バー表示部Ｆ１３は、病変バー表示部２４４の具体的態様を示しており、表示時間グラフの再生時間軸に平行に、再生時間に対応する画像に病変情報算出部２１３によって割り当てられた色を、順次配置した帯状の表示領域である。
【００４５】
次に、制御部２０が、一連の体腔内画像を表示部２４に再生表示する際の処理手順を、図８を参照し説明する。まず、画像処理部２１０は、カードＩ／Ｆ１２を介して記録媒体４より、一連の体腔内画像の画像情報を取得し、画像情報記憶部１３１に記憶する（ステップＳ２０１）。その後、平均色算出部２１２が、各画像の平均色を算出し、平均色記憶部２３３に記憶する（ステップＳ２０２）。次に、病変情報算出部２１３が、各画像の病変情報を算出し、病変情報記憶部２３４に記憶する（ステップＳ２０３）。次いで、表示時間情報算出部１１１が、各画像の表示時間情報を算出し、表示時間情報記憶部１３２に記憶する（ステップＳ２０４）。その後、表示制御部２２０は、画像情報、表示時間情報、平均色の情報、病変情報および画像ＩＤ情報等、診察者が被検体１の診察に必要な情報を取得する（ステップＳ２０５）。表示制御部２２０の各部は、画像、表示時間情報、カラーバー、病変バーおよび画像ＩＤ情報等を表示部２４の各部に表示する（ステップＳ２０６）。なお、この時点で診察者は、総再生時間および表示時間の変化の推移とともに、各画像の平均色の推移および病変領域が撮影されたと判定された画像および病変の種類についての情報を把握できる。
【００４６】
その後、表示制御部２２０の各部は、表示制御部１２０の各部が行ったステップＳ１０５〜Ｓ１０９の処理と同様の処理を行う（ステップＳ２０７〜Ｓ２１１）。すなわち、再生開始の指示の入力を受けた場合（ステップＳ２０７：Ｙｅｓ）、画像表示制御部１２１は、画像表示部１４１に表示する画像の画像番号を算出し（ステップＳ２０８）、画像番号に対応する画像を表示時間情報に応じて表示する（ステップＳ２０９）。表示時間情報表示制御部１２２は、画像表示部１４１に現に表示されている画像に応じた表示時間情報を表示する（ステップＳ２１０）。表示制御部２２０は、再生停止の条件を充足するまでステップＳ２０７〜Ｓ２１０の処理を繰り返し、再生停止の条件を充足した場合、画像の再生を停止する（ステップＳ２１１）。
【００４７】
なお、図示しないが、情報表示ウィンドＷ４に近傍画像について表示時間グラフが表示されている場合、カラーバー表示制御部２２４および病変バー表示制御部２２５は、表示時間グラフに表示されている再生時間に応じたカラーバーおよび病変バーを表示する制御を行う。
【００４８】
このように、画像処理装置６によれば、観察者は、各画像が表示される前に、各画像の表示時間情報とともに、各画像の色調の変化の推移および病変領域が撮影されたと判定された画像についての情報を把握できるので、画像観察時に注意を払うべき画像を予め判断して見逃しなく観察できる。また、画像の見落としが減少することによって、これに伴う画像の見直し等の作業負担が軽減される。
【００４９】
なお、本実施の形態２にかかる画像処理装置は、カラーバーまたは病変バーのいずれか一方のみを表示してもよい。
【００５０】
（実施の形態３）
次に、実施の形態３について説明する。実施の形態１，２では、一連の体腔内画像を再生表示するとともに、各画像の表示時間情報等を表示するとしたが、この実施の形態３では、さらに表示時間情報を変更できるようにしている。
【００５１】
実施の形態３では、実施の形態１に示した被検体内情報取得システムにおいて画像処理装置５に替えて画像処理装置７を備える。図９は、実施の形態３にかかる画像処理装置７の構成を示すブロック図である。図９に示すように、画像処理装置７は、画像処理装置５が備えた制御部１０、記憶部１３、表示部１４に替えて、制御部３０、記憶部３３、表示部３４を備える。制御部３０は、画像処理部３１０および表示部制御部３２０を備える。画像処理部３１０は、表示時間情報算出部１１１に加えて、表示時間情報変更部３１２を備え、表示制御部３２０は、画像表示制御部３２１および表示時間情報表示制御部３２２を備える。なお、表示時間情報表示制御部３２２は、表示時間情報表示制御部１２２と同様に表示範囲切替部１２３を備える。記憶部３３は、記憶部１３の構成に加えて変更記憶部３３３を備える。表示部３４は、画像表示部１４１に加えて表示時間情報表示部３４２を備える。その他の構成は、実施の形態１に示す被検体内情報取得システムおよび画像処理装置５と同じであり、同一構成部分には同一の符号を付している。
【００５２】
表示時間情報変更部３１２は、診察者より入力部１１を介して取得した表示時間情報の変更についての情報に基づいて、表示時間情報を変更し、変更記憶部３３３に記憶する。表示時間情報が変更された場合、画像表示制御部３２１は、変更された表示時間情報に基づいて一連の体腔内画像を再生表示し、表示時間情報表示制御部３２２は、変更された表示時間情報を表示する。
【００５３】
表示時間情報の変更についての情報は、例えばＧＵＩ画面を介して診察者より入力される。ＧＵＩ画面を用いた表示時間情報の変更の一例を、図１０を参照して説明する。図１０は、表示部３４の表示画面の具体的態様を示す図である。画像処理装置７は、診察・診断ウィンドＷ１とともに、情報表示ウィンドＷ２に替えて情報表示ウィンドＷ５を表示する。情報表示ウィンドＷ５には、表示時間グラフ表示部Ｆ１４、情報変更ボタンＦ１５，Ｆ１６、変更保存ボタンＦ１７および表示範囲切替ボタンＦ７が、表示されている。なお、表示時間情報の変更前は、表示時間グラフ表示部Ｆ１４には、表示時間グラフ表示部Ｆ５に表示されていた表示時間グラフと同様の表示時間グラフが表示されている。
【００５４】
診察者が、表示画面上のポインタで情報変更ボタンＦ１５または情報変更ボタンＦ１６をクリックすると、ポインタは、情報変更ボタンＦ１５または情報変更ボタンＦ１６のアイコンと同じ形状に変化する。診察者は、形状が変化したポインタを、表示時間グラフ上の表示時間を変更したい画像に対応する位置に移動させてクリックし、ポインタを表示時間軸方向にドラッグする。この際、図１０に示すように、表示時間グラフ（実線）がポインタの移動とともに変形する。なお、変更前の表示時間グラフは点線で表示される。その後、診察者がポインタをリリースした位置で表示時間グラフは固定され、表示時間情報は変更される。このようにして、診察者は、表示時間情報の変更についての情報を制御部３０に入力する。
【００５５】
なお、表示時間情変更部３１２は、情報変更ボタンＦ１５が選択された後、表示時間情報の変更についての情報が入力された場合、表示時間グラフ上のクリックされた位置に対応する画像を基準に、時系列で前後所定枚数の画像の表示時間を変更する。一方、表示時間情変更部３１２は、情報変更ボタンＦ１６が選択された後、表示時間情報の変更についての情報が入力された場合、表示時間グラフ上のクリックされた位置に対応する１画像のみの表示時間を変更する。
【００５６】
例えば、診察者が情報変更ボタンＦ１５を選択した後、画像番号ｋの画像を表示時間ｖだけ変更する指示を入力した場合、表示時間情報変更部３１２は、次式（２）を用いて、画像番号ｋ−ｍから画像番号ｋ＋ｍまでの画像の表示時間を変更する。なお、ｍは、あらかじめ設定された所定枚数であり、式（２）において、ｊは画像番号、Ｔjは画像番号ｊの画像の修正前の表示時間、Ｔj’は画像番号ｊの画像の修正後の表示時間を示す。
【００５７】
【数２】
2009039449.tif 000004
【００５８】
なお、診察者によって選択された画像およびその近傍画像の表示時間情報を変更する方法は式（２）を用いた方法に限られず、表示時間グラフ上において、画像番号ｍ−ｋ，ｋ，ｍ＋ｋの画像に対応する点を制御点として、スプライン曲線でグラフを描くなどして表示時間グラフを変更し、表示時間情報を変更してもよい。
【００５９】
診察者が、表示時間情報の変更についての情報を入力した後、変更保存ボタンＦ１７を選択した場合、画像処理部３１０は、変更した表示時間情報を変更記憶部３３３に記憶する処理を行う。なお、一連の体腔内画像の再生表示を開始する際、図示しない表示画面によって、観察者が、変更前の表示時間情報に基づいて体腔内画像を再生表示させるか、または変更後の表示時間情報に基づいて体腔内画像を再生表示させるかを選択できるようにしてもよい。これにより、診察者は、再度、同一の画像の再生表示させる場合にも、事前に変更した表示時間情報に基づいて画像を再生表示させることができる。
【００６０】
このように、画像処理装置７によれば、診察者は、各画像の表示時間情報を診察者自身に合わせて変更できるので、一連の体腔内画像を観察しやすくできる。さらに、診察者は、表示時間を変更することによって画像の見落としを防止できるので、画像の見落としに伴う画像の見直し等の作業負担が軽減される。
【００６１】
なお、画像処理装置７は、画像処理装置５をもとに表示時間情報変更部３１２および変更記憶部３３３を加えるようにしたが、画像処理装置６をもとにこれらを備える構成としてもよい。この場合、実施の形態２と同様に表示時間情報とともに、カラーバーおよび病変バーが表示画面に表示されるので、診察者は、これらの情報に基づいて的確に各画像の表示時間を変更できる。
【００６２】
また、本発明にかかる画像処理装置は、カプセル型内視鏡２によって撮像された体腔内画像に限らず、その他、一連の画像を再生表示する処理に用いることができる。
【図面の簡単な説明】
【００６３】
【図１】本発明の実施の形態１にかかる被検体内情報取得システムの概略構成を示す図である。
【図２】本発明の実施の形態１にかかる画像処理装置の構成を示すブロック図である。
【図３】図２に示す表示部の表示画面の一例を示す図である。
【図４】図２に示す画像処理装置が行う一連の体腔内画像の再生表示処理の手順を示すフローチャートである。
【図５】図２に示す表示部の表示画面の一例を示す図である。
【図６】本発明の実施の形態２にかかる画像処理装置の構成を示すブロック図である。
【図７】図６に示す表示部の表示画面の一例を示す図である。
【図８】図６に示す画像処理装置が行う一連の体腔内画像の再生表示処理の手順を示すフローチャートである。
【図９】本発明の実施の形態３にかかる画像処理装置の構成を示すブロック図である。
【図１０】図９に示す表示部の表示画面の一例を示す図である。
【符号の説明】
【００６４】
１  被検体
２  カプセル型内視鏡
３  受信装置
４  記録媒体
５，６，７  画像処理装置
１０，２０，３０  制御部
１１  入力部
１２  カードＩ／Ｆ
１３，２３，３３  記憶部
１４，２４，３４  表示部
１１０，２１０，３１０  画像処理部
１１１  表示時間情報算出部
１２０，２２０，３２０  表示制御部
１２１，３２１  画像表示制御部
１２２，３２２  表示時間情報表示制御部
１２３  表示範囲切替部
１３１  画像情報記憶部
１３２  表示時間情報記憶部
１４１  画像表示部
１４２，３４２  表示時間情報表示部
２１２  平均色算出部
２１３  病変情報算出部
２２４  カラーバー表示制御部
２２５  病変バー表示制御部
２３３  平均色記憶部
２３４  病変情報記憶部
２４３  カラーバー表示部
２４４  病変バー表示部
３１２  表示時間情報変更部
３３３  変更記憶部
Ｗ１  診察・診断ウィンド
Ｗ２，Ｗ３，Ｗ４，Ｗ５  情報表示ウィンド
Ｆ１  画像表示部
Ｆ２  画像ＩＤ情報表示部
Ｆ３  順送りボタン
Ｆ４  逆送りボタン
Ｆ５，Ｆ８，Ｆ１１，Ｆ１４  表示時間グラフ表示部
Ｆ６，Ｆ９  再生位置
Ｆ７，Ｆ１０  表示範囲切替ボタン
Ｆ１２  カラーバー表示部
Ｆ１３  病変バー表示部
Ｆ１５，Ｆ１６  情報変更ボタン
Ｆ１７  変更保存ボタン
【図１】
2009039449.tif 000005
【図２】
2009039449.tif 000006
【図３】
2009039449.tif 000007
【図４】
2009039449.tif 000008
【図５】
2009039449.tif 000009
【図６】
2009039449.tif 000010
【図７】
2009039449.tif 000011
【図８】
2009039449.tif 000012
【図９】
2009039449.tif 000013
【図１０】
2009039449.tif 000014