(57)【要約】【課題】患部を撮影した複数の画像を容易に比較できるようにすることを目的とする。【解決手段】本発明の画像処理装置は、患部が撮影された複数の画像を取得する取得手段と、前記複数の画像それぞれの患部領域に設定された基準線に基づいて、基準線の傾きが一致するように画像を回転させるように制御する制御手段と、を有することを特徴とする。【選択図】図６
2020146200.tif 000002
【特許請求の範囲】
【請求項１】
患部が撮影された複数の画像を取得する取得手段と、
前記複数の画像それぞれの患部領域に設定された基準線に基づいて、基準線の傾きが一致するように画像を回転させるように制御する制御手段と、を有することを特徴とする画像処理装置。
【請求項２】
前記基準線は、
前記患部領域の長径であることを特徴とする請求項１に記載の画像処理装置。
【請求項３】
前記基準線は、
前記患部領域に外接する矩形に基づいて設定される前記患部領域の長径、または、前記患部領域のキャリパー長に基づいて設定される前記患部領域の長径であることを特徴とする請求項１または２に記載の画像処理装置。
【請求項４】
前記患部は、褥瘡であることを特徴とする請求項２または３に記載の画像処理装置。
【請求項５】
前記基準線は、
ユーザにより指示された線分であることを特徴とする請求項１または２に記載の画像処理装置。
【請求項６】
前記制御手段は、
前記複数の画像の撮影距離に基づいて、前記複数の画像の撮影距離が一致するように画像を拡大または縮小するように制御することを特徴とする請求項１ないし５の何れか１項に記載の画像処理装置。
【請求項７】
前記制御手段は、
前記患部領域または前記患部領域を含む周辺領域を拡大するように制御することを特徴とする請求項１ないし６の何れか１項に記載の画像処理装置。
【請求項８】
ユーザによる指示に応じて前記患部領域に基準線を設定する設定手段を有し、
前記制御手段は、
前記設定手段によりユーザによる指示に応じて基準線を設定する場合には、前記患部領域または前記患部領域を含む周辺領域を拡大する前の画像に対してユーザによる基準線の指定を受け付けるように制御することを特徴とする請求項７に記載の画像処理装置。
【請求項９】
ユーザによる指示に応じて前記患部領域に基準線を設定する設定手段を有し、
前記制御手段は、
前記設定手段により基準線が設定された画像を、前記設定された基準線が他の画像の患部領域に設定された基準線の傾きと一致するように回転させるように制御することを特徴とする請求項１ないし７の何れか１項に記載の画像処理装置。
【請求項１０】
ユーザによる指示に応じて前記患部領域に基準線を設定する設定手段を有し、
前記制御手段は、
前記設定手段により設定された基準線に基づいて、前記基準線を設定した画像よりも後に撮影された画像を回転させるように制御することを特徴とする請求項１ないし７の何れか１項に記載の画像処理装置。
【請求項１１】
前記制御手段は、患者ごとに、基準線の傾きが一致するように画像を回転させることを特徴とする請求項１ないし１０の何れか１項に記載の画像処理装置。
【請求項１２】
前記制御手段により基準線の傾きが一致するように回転させた前記複数の画像を表示させるために外部に送信する送信手段を有することを特徴とする請求項１ないし１１の何れか１項に記載の画像処理装置。
【請求項１３】
前記制御手段により基準線の傾きが一致するように回転させた前記複数の画像を、表示する表示手段を有することを特徴とする請求項１ないし１１の何れか１項に記載の画像処理装置。
【請求項１４】
前記表示手段は、
前記複数の画像を撮影された日時の順に並べて表示することを特徴とする請求項１３に記載の画像処理装置。
【請求項１５】
画像に含まれる患部の患部領域に設定された基準線に基づいて、基準線の傾きが一致するように回転させた複数の画像を取得する取得手段と、
前記取得手段により取得された前記複数の画像を表示する表示手段と、を有することを特徴とする画像閲覧装置。
【請求項１６】
前記表示手段は、
前記患部領域に設定された基準線を、前記複数の画像それぞれに重畳するように表示することを特徴とする請求項１５に記載の画像閲覧装置。
【請求項１７】
画像処理装置と画像閲覧装置とを有する画像処理システムであって、
前記画像処理装置は、
患部が撮影された複数の画像を取得する取得手段と、
前記取得手段により取得された前記複数の画像それぞれの患部領域に設定された基準線に基づいて、基準線の傾きが一致するように画像を回転させるように制御する制御手段と、
前記制御手段により回転された画像を送信する送信手段と、を有し、
前記画像閲覧装置は、
前記送信手段により送信された画像を表示する表示手段を有することを特徴とする画像処理システム。
【請求項１８】
患部が撮影された複数の画像を取得する取得ステップと、
前記複数の画像それぞれの患部領域に設定された基準線に基づいて、基準線の傾きが一致するように画像を回転させるように制御する制御ステップと、を有することを特徴とする画像処理装置の制御方法。
【請求項１９】
画像に含まれる患部の患部領域に設定された基準線に基づいて、基準線の傾きが一致するように回転させた複数の画像を取得する取得ステップと、
前記取得ステップにより取得された前記複数の画像を表示する表示ステップと、を有することを特徴とする画像閲覧装置の制御方法。
【請求項２０】
画像処理装置と画像閲覧装置とを有する画像処理システムの制御方法であって、
前記画像処理装置は、
患部が撮影された複数の画像を取得する取得ステップと、
前記取得ステップにより取得された前記複数の画像それぞれの患部領域に設定された基準線に基づいて、基準線の傾きが一致するように画像を回転させるように制御する制御ステップと、
前記制御ステップにより回転された画像を送信する送信ステップと、を有し、
前記画像閲覧装置は、
前記送信ステップにより送信された画像を表示する表示ステップを有することを特徴とする画像処理システムの制御方法。
【請求項２１】
コンピュータを、請求項１ないし１６の何れか１項に記載の装置の各手段として機能させるためのプログラム。
【請求項２２】
コンピュータを、請求項１ないし１６の何れか１項に記載の装置の各手段として機能させるためのプログラムを記録したコンピュータが読み取り可能な記録媒体。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、画像処理装置、画像閲覧装置、画像処理システム、制御方法、プログラムおよび記録媒体に関するものである。
【背景技術】
【０００２】
人や動物が横になっている状態では体重により接地面と体の接触部位が圧迫されることで褥瘡、いわゆる床ずれが発症することがある。褥瘡を発症した患者は、体圧分散ケアやスキンケア等の褥瘡ケアを施し、定期的に褥瘡を評価および管理していく必要がある。
【０００３】
非特許文献１には、褥瘡評価のツールとして、日本褥瘡学会学術教育委員会が開発した褥瘡状態判定スケール、ＤＥＳＩＧＮ−Ｒ（登録商標）が提案されている。現在、褥瘡のＳｉｚｅ評価は、患部にメジャーを当てて手作業で計測された値に基づいて決定されることが多い。具体的にはまず、皮膚の損傷範囲のうち一番長い直線距離の２点を測定し、それを長径とする。さらに長径と直交する長さを短径とし、長径と短径を掛けた値を褥瘡のＳｉｚｅとしている。
【先行技術文献】
【非特許文献】
【０００４】
【非特許文献１】照林社  褥瘡ガイドブック  第２版  褥瘡予防・管理ガイドライン（第４版）準拠  編集  日本褥瘡学会  ＩＳＢＮ１３  ９７８−４７９６５２３６０８  ２３ページ
【発明の概要】
【発明が解決しようとする課題】
【０００５】
手作業による褥瘡のＳｉｚｅ評価は、褥瘡の形が複雑である場合が多いために、メジャーをどのように当てるかを調整する必要がある。このような問題に対して、褥瘡を撮影した画像に基づいて、褥瘡のＳｉｚｅ評価をすることが考えられる。
【０００６】
しかしながら、褥瘡を撮影する際には、患者の姿勢や撮影者が構える撮像装置の向きが毎回一定ではないために、撮影される画像における褥瘡の向きも一定ではない。したがって、撮影した褥瘡の画像を用いて経過比較を行う場合には、単純に撮影した画像を表示するだけでは経過比較が困難である。
本発明は、上述したような問題点に鑑みてなされたものであり、患部を撮影した複数の画像を容易に比較できるようにすることを目的とする。
【課題を解決するための手段】
【０００７】
本発明の画像処理装置は、患部が撮影された複数の画像を取得する取得手段と、前記複数の画像それぞれの患部領域に設定された基準線に基づいて、基準線の傾きが一致するように画像を回転させるように制御する制御手段と、を有することを特徴とする。
【発明の効果】
【０００８】
本発明によれば、患部を撮影した複数の画像を容易に比較することができる。
【図面の簡単な説明】
【０００９】
【図１】画像処理システムのハードウェア構成を示す図である。
【図２】画像処理システムの概要を示す図である。
【図３】画像処理システムの処理を示すフローチャートである。
【図４】患部の画像に情報を重畳する方法を説明するための図である。
【図５】同一患者の褥瘡を撮影した画像を示す図である。
【図６】画像処理システムの処理を示すフローチャートである。
【図７】患者名一覧の表示例を示す図である。
【図８】褥瘡の画像の表示例を示す図である。
【図９】同一患者の褥瘡を撮影した画像を示す図である。
【図１０】画像処理システムの処理を示すフローチャートである。
【図１１】褥瘡の画像の表示例を示す図である。
【図１２】画像処理システムの処理を示すフローチャートである。
【図１３】褥瘡の画像の表示例を示す図である。
【図１４】長径を指定する表示例を示す図である。
【図１５】同一患者の褥瘡を撮影した画像を示す図である。
【図１６】基準線を指定する表示例を示す図である。
【発明を実施するための形態】
【００１０】
以下、本発明に係る実施形態について図面を参照して説明する。
＜第１の実施形態＞
本実施形態では、撮像装置で撮影した褥瘡の画像を管理サーバに送信することで管理サーバが管理し、管理サーバが褥瘡の画像を外部に送信することで、ユーザが褥瘡の画像を画像閲覧装置で閲覧する場合を例にして説明する。
【００１１】
図２は、画像処理システムの構成の一例を模式的に示した図である。
画像処理システムは、撮像装置１００、画像処理装置１２０、管理サーバ１３０、画像閲覧装置１４０を有する。
撮像装置１００は、患者２０１の患部である褥瘡２０２を撮影する。画像処理装置１２０は、撮像装置１００から送信された画像に含まれる褥瘡２０２の解析を行い、解析結果を撮像装置１００に送信する。撮像装置１００は、画像処理装置１２０から送信された、解析結果を表示する。撮像装置１００により撮影された画像は、最終的に管理サーバ１３０に送信され、患者２０１に付帯されたバーコードタグ２０３の情報と紐づけて管理サーバ１３０内に記憶される。記憶された褥瘡２０２の画像は、画像閲覧装置１４０から閲覧することができる。
【００１２】
図１は、画像処理システムの各ハードウェア構成の一例を示す図である。
撮像装置１００は、患部を撮影し、撮影した画像を画像処理装置１２０に送信する。
撮像装置１００は、光学系１０１、撮像素子１０２、ＣＰＵ１０３、一次記憶装置１０４、二次記憶装置１０５、記録媒体１０６、表示部１０７、操作部１０８、通信装置１０９、測距部１１０を有する。
光学系１０１は、レンズ、シャッター、絞りを有し、被写体からの光を適切な量とタイミングで撮像素子１０２に結像させる。撮像素子１０２は、光学系１０１を通って結像した光を画像に変換する。ＣＰＵ１０３は、入力された信号やプログラムに従って、各種の演算や、撮像装置１００を構成する各部の制御を行う。
【００１３】
一次記憶装置１０４は、一時的なデータを記憶し、ＣＰＵ１０３の作業用に用いられる。二次記憶装置１０５は、撮像装置１００を制御するためのプログラム（ファームウェア）や各種の設定情報等を記憶する。記録媒体１０６は、撮影した画像を記録する、記録媒体１０６は、例えばＳＤカードやＣＦカードを用いることができる。表示部１０７は、撮影した画像や、ライブビュー画像を表示する。操作部１０８は、撮影者の操作を受け付ける。通信装置１０９は、画像処理装置１２０と通信を行う。通信装置１０９は、例えば無線ＬＡＮである。
【００１４】
測距部１１０は、撮像装置１００から被写体までの距離情報を算出する。測距部１１０として、一眼レフカメラに搭載された一般的な位相差方式の測距センサを用いてもよく、ＴＯＦ（Ｔｉｍｅ  Ｏｆ  Ｆｌｉｇｈｔ）センサを用いたシステムを用いてもよい。ＴＯＦセンサは、照射波の送信タイミングと、当該照射波が物体で反射された波である反射波の受信タイミングとの時間差（または位相差）に基づいて、当該物体までの距離を測定するセンサである。更に、測距部１１０には受光素子にＰＳＤ（Ｐｏｓｉｔｉｏｎ  Ｓｅｎｓｉｔｉｖｅ  Ｄｅｖｉｃｅ）を用いたＰＳＤ方式等を用いてもよい。また、撮像素子１０２が画素ごとに複数の光電変換領域を有し、共通の画素内に含まれる複数の光電変換領域に対応する瞳位置を異ならせる構成とする。このような構成とすることで、測距部１１０は、撮像素子１０２から出力された、それぞれの瞳領域に対応する光電変換領域から得られた画像間の位相差から、画素あるいは領域の位置ごとに距離情報を求めることができる。
【００１５】
測距部１１０は、画像内の予め定められた所定の１つ、あるいは、複数の測距エリアにおける距離情報を求める構成であってもよく、画像内の多数の画素あるいは領域の距離情報の分布を示す距離マップを求める構成であってもよい。また、測距部１１０は、画像から高周波成分を抽出して積分し、積分値が最大となるフォーカスレンズの位置を決定するＴＶ−ＡＦまたはコントラストＡＦを行い、このフォーカスレンズの位置から距離情報を得るようにしてもよい。
【００１６】
画像処理装置１２０は、撮像装置１００から送信された患部の画像を解析する。
画像処理装置１２０は、ＣＰＵ１２１、一次記憶装置１２２、二次記憶装置１２３、通信装置１２４を有する。ＣＰＵ１２１は、入力された信号や二次記憶装置１２３に記憶されたプログラムに従って、各種の演算や画像処理装置１２０を構成する各部の制御を行う。一次記憶装置１２２は、一時的なデータを記憶し、ＣＰＵ１２１の作業用に用いられる。また、一次記憶装置１２２は、二次記憶装置１２３から読み込まれたプログラムを記憶する。二次記憶装置１２３は、ＣＰＵ１２１が実行するプログラムを記憶する。二次記憶装置１２３は、ハードディスク等を用いることができる。通信装置１２４は、撮像装置１００や管理サーバ１３０と通信を行う。通信装置１２４は、画像を送受信するだけではなく、解析結果を送信する。
【００１７】
管理サーバ１３０は、撮像装置１００で撮影した患部の画像や画像処理装置１２０で解析した解析結果を記憶する。管理サーバ１３０で記憶したデータは、画像閲覧装置１４０からブラウザや専用アプリケーションを使って閲覧することができる。管理サーバ１３０の１台に対して、画像閲覧装置１４０は複数台、存在してもよい。また、管理サーバ１３０は、患部の画像を回転させる等の画像処理を行う。したがって、管理サーバ１３０は、画像処理装置としても機能する。
管理サーバ１３０は、ＣＰＵ１３１、一次記憶装置１３２、二次記憶装置１３３、通信装置１３４を有する。ＣＰＵ１３１は、入力された信号や二次記憶装置１３３に記憶されたプログラムに従って、各種の演算や、管理サーバ１３０を構成する各部の制御を行う。ＣＰＵ１３１は、取得手段、制御手段、設定手段、送信手段の一例に対応する。一次記憶装置１３２は、一時的なデータを記憶し、ＣＰＵ１３１の作業用に用いられる。また、一次記憶装置１３２は、二次記憶装置１３３から読み込まれたプログラムを記憶する。二次記憶装置１３３は、ＣＰＵ１３１が実行するプログラムを記憶する。二次記憶装置１３３は、ハードディスク等を用いることができる。通信装置１３４は、画像処理装置１２０や画像閲覧装置１４０と通信を行う。
【００１８】
画像閲覧装置１４０は、管理サーバ１３０に記憶された患部の画像や解析結果をユーザに対して閲覧させる。画像閲覧装置１４０は、スマートフォン、タブレット端末、ＰＣ等を用いることができる。
画像閲覧装置１４０は、ＣＰＵ１４１、一次記憶装置１４２、二次記憶装置１４３、通信装置１４４、表示部１４５、操作部１４６を有する。
ＣＰＵ１４１は、入力された信号や二次記憶装置１４３に記憶されたプログラムに従って、各種の演算や、画像閲覧装置１４０を構成する各部の制御を行う。ＣＰＵ１４１は、取得手段、表示手段の一例に対応する。一次記憶装置１４２は、一時的なデータを記憶し、ＣＰＵ１４１の作業用に用いられる。また、一次記憶装置１４２は、二次記憶装置１４３から読み込まれたプログラムを記憶する。二次記憶装置１４３は、ＣＰＵ１４１が実行するプログラムを記憶する。二次記憶装置１４３は、ハードディスク等を用いることができる。通信装置１４４は管理サーバ１３０と通信を行う。表示部１４５は、患部の画像や解析結果を表示する。操作部１４６は、ユーザが閲覧したい患者の選択を受け付けたり、閲覧したい画像の選択を受け付けたりする。操作部１４６は、ボタン、スイッチ、表示部１４５に兼用されるタッチパネル等を用いることができる。
【００１９】
なお、管理サーバ１３０は、画像処理装置１２０と共通であってもよい。この場合は、管理サーバ１３０の機能を画像処理装置１２０が担うことになる。
また、画像処理システムは、画像処理装置１２０と管理サーバ１３０の両方がない構成であってもよい。この場合には、画像処理装置１２０と管理サーバ１３０の機能を撮像装置１００が担うことにより実現できる。
【００２０】
図３は、画像処理システムの処理の一例を示すフローチャートである。図３に示すフローチャートは、撮像装置１００で撮影した褥瘡の画像を画像処理装置１２０で解析し、解析結果を撮像装置１００に表示して、更に管理サーバ１３０に画像と解析結果を登録するまでの処理を示している。図３のフローチャートは、撮像装置１００と画像処理装置１２０が、無線ＬＡＮ規格であるＷｉ−Ｆｉ規格のネットワークにそれぞれ接続することで開始される。
【００２１】
Ｓ３３０では、画像処理装置１２０のＣＰＵ１２１は、接続する撮像装置１００の探索処理を行う。
Ｓ３００では、撮像装置１００のＣＰＵ１０３は、探索処理に対して応答処理を行う。なお、ネットワークを介して機器を探索する技術としては、ＵＰｎＰ（Ｕｎｉｖｅｒｓａｌ  Ｐｌｕｇ  ａｎｄ  Ｐｌａｙ）が用いられる。ここでＵＰｎＰにおいて個々の装置の識別はＵＵＩＤ（Ｕｎｉｖｅｒｓａｌｌｙ  Ｕｎｉｑｕｅ  ＩＤｅｎｔｉｆｉｅｒ）によって行われる。
【００２２】
Ｓ３０１では、撮像装置１００のＣＰＵ１０３は、撮影モードをタグ撮影モードに設定する。タグ撮影モードは、撮影した褥瘡の画像を患者の識別情報に関連付けるために、患者を識別するためのバーコードタグを撮影するモードである。本実施形態では、図２に示すように、患者２０１の患者ＩＤが含まれるバーコードタグ２０３を撮影する。褥瘡の画像を撮影する前に、バーコードタグを撮影して患者ＩＤを特定することで、患者の識別情報に褥瘡の画像を関連付けて管理することができる。タグ撮影モードに設定された後に、ＣＰＵ１０３は、撮影者による撮影指示に応じてバーコードタグを撮影し、撮影したタグの画像を一次記憶装置１０４あるいは二次記憶装置１０５に記憶する。
【００２３】
Ｓ３０２では、ＣＰＵ１０３はライブビュー処理を開始する。ライブビュー処理を開始することで、表示部１０７に撮影中の画像が連続的に表示される。
Ｓ３０３では、ＣＰＵ１０３はＡＦ処理を開始する。具体的には、ＣＰＵ１０３は、上述した何れかの方法によって測距部１１０により被写体までの距離情報を求め、被写体にピントが合うよう光学系１０１の制御を行うＡＦ処理を開始する。ＴＶ−ＡＦまたはコントラストＡＦでピント位置の調整を行った場合には、ピントを合わせた状態の光学系１０１の位置から、ピントを合わせた対象の被写体までの距離情報を求める。ピントを合わせる位置は、画像の中央に位置する被写体であってもよく、撮像装置１００に対して最も至近側の位置に存在する被写体であってもよい。被写体の距離マップが得られている場合には、距離マップから注目すべき領域を推定し、その位置に対してピントを合わせるようにしてもよい。また、既に画像処理装置１２０によってライブビュー画像における患部領域の位置が特定されている場合には、その位置に対してピントを合わせるようにしてもよい。撮像装置１００は、後述するＳ３１０でレリーズボタンが押下されるまでライブビュー画像の表示と共にＡＦ処理を繰り返し行う。
【００２４】
Ｓ３０４では、ＣＰＵ１０３はライブビュー画像の何れかの画像に対して、画像の現像および圧縮処理を行い、例えばＪＰＥＧ規格の画像を生成する。また、ＣＰＵ１０３は、圧縮処理された画像に対してリサイズ処理を行い、画像のサイズを小さくする。
Ｓ３０５では、ＣＰＵ１０３は、Ｓ３０３で求めた距離情報、および、Ｓ３０４で生成したリサイズ処理後の画像を取得する。また、ＣＰＵ１０３はズーム倍率の情報、リサイズ処理後の画像のサイズ（ピクセル数）の情報を必要に応じて取得する。
Ｓ３０６では、ＣＰＵ１０３は、距離情報、および、リサイズ処理後の画像を含む１以上の情報を画像処理装置１２０に送信する。
【００２５】
次に、画像処理装置１２０による処理に移る。
Ｓ３４１では、ＣＰＵ１２１は、撮像装置１００から送信された距離情報、および、画像を含む１以上の情報を受信する。ＣＰＵ１２１は、受信した距離情報、および、画像を一次記憶装置１０４に記憶する。
Ｓ３４２では、ＣＰＵ１２１は、受信した画像から患部領域を抽出する。患部領域を抽出する手法として、深層学習による意味的領域分割を用いる。すなわち、予め学習用の高性能コンピュータに、複数の実際の褥瘡の患部領域の画像を教師データとしてニューラルネットワークのモデルを学習させて、学習済モデルを生成する。ＣＰＵ１２１は、学習済モデルに基づいて画像から褥瘡のエリアを領域推定する。ニューラルネットワークのモデルの一例として、深層学習を用いたセグメンテーション・モデルである完全畳み込みネットワーク（ＦＣＮ（Ｆｕｌｌｙ  Ｃｏｎｖｏｌｕｔｉｏｎａｌ  Ｎｅｔｗｏｒｋ））を適用することができる。深層学習による推論は、積和演算の並列実行を得意とする高性能コンピュータにより処理される。ただし、深層学習による推論は、ＦＰＧＡやＡＳＩＣ等が実行してもよい。なお、他の深層学習のモデルを用いて領域分割を実現してもよい。また、セグメンテーション手法は深層学習に限られず、例えば、グラフカット、領域成長、エッジ検出、統治分割法等を用いてもよい。更に、高性能コンピュータの内部で、褥瘡の患部領域の画像を教師データとしたニューラルネットワークのモデルの学習を行ってもよい。
【００２６】
Ｓ３４３では、ＣＰＵ１２１は、抽出した患部領域のサイズに関する情報として、患部領域の面積を計算する。ここでは、面積の計算方法の詳細は省略するが、ＣＰＵ１２１は撮像装置１００から被写体までの距離情報、撮影時の画角、画像サイズに基づいて、まず画像１ピクセル当りの実距離を幾何学的に算出する。ＣＰＵ１２１は、算出した画像１ピクセル当りの実距離と、患部領域のピクセル数との積を計算することで、患部領域の実際の面積を算出することができる。
Ｓ３４４では、ＣＰＵ１２１は、処理中の画像がレリーズして撮影した画像であるか否かを判定する。この判定を行う方法として２つの方法が想定されるが、何れの方法であってもよい。
【００２７】
１つ目は、撮像装置１００が画像処理装置１２０に画像を送信する際にライブビュー画像であるかレリーズして撮影した画像であるかを示すフラグを送信し、ＣＰＵ１２１はフラグに基づいて判定する方法である。２つ目は、Ｓ３４１〜Ｓ３４７の処理自体を、ライブビュー画像用とレリーズして撮影した画像用の２つに分けて、撮像装置１００が送信する際に、それぞれの処理に分かれるように送信する方法である。Ｓ３０６により送信された場合にはライブビュー画像であって、レリーズして撮影した画像ではないために、Ｓ３４５に進まず、Ｓ３４６に進む。一方、レリーズして撮影した画像である場合にはＳ３４５に進む。
【００２８】
Ｓ３４５では、ＣＰＵ１２１は、受信した画像に対して画像解析を行い、解析結果の情報を一次記憶装置１０４に記憶する。ここでは、ＣＰＵ１２１は抽出した患部領域に長径と短径を設定し、長径と短径の長さ等を算出する。なお、ライブビュー画像に対して画像解析を行わないのは、ライブビュー中では患部領域の抽出結果を撮影者が確認することを主な目的としているためである。このように、ライブビュー画像に対してＳ３４５の画像解析の処理を省略することで、処理時間を削減することができる。ただし、撮像装置１００の性能が高ければ、Ｓ３４５の処理を実行してもよい。
【００２９】
Ｓ３４６では、ＣＰＵ１２１は患部領域を抽出する対象とした画像に対して、患部領域の抽出結果を示す情報と、患部領域のサイズに関する情報とを重畳した画像を生成する。
図４は、患部領域の抽出結果を示す情報と、患部領域のサイズに関する情報とを画像に重畳する方法を説明するための図である。
図４（ａ）に示す画像４００は、重畳処理前の画像を表示した一例であり、褥瘡４０１が含まれる。
図４（ｂ）に示す画像４１０は、重畳処理後の画像を表示した一例である。
【００３０】
図４（ｂ）に示す画像４１０の左上隅には、黒地の背景に白色の文字で、患部領域の面積を表示したラベル４１１が重畳される。また、画像４１０には、Ｓ３４２において抽出された患部領域の推定エリアを示す指標４１２が重畳される。推定エリアを示す指標４１２と、画像４００の元となる画像をαブレンドすることで、患部領域の面積を算出する元となる推定エリアが妥当か否かを撮影者が確認することができる。
【００３１】
Ｓ３４７では、ＣＰＵ１２１は、抽出した患部領域の抽出結果を示す情報と、患部領域のサイズに関する情報とを撮像装置１００に送信する。本実施形態では、ＣＰＵ１２１は、Ｓ３４６で生成した、患部領域の抽出結果を示す情報と、患部領域のサイズに関する情報とを重畳した画像を撮像装置１００に送信する。
【００３２】
次に、撮像装置１００による処理に移る。
Ｓ３０７では、撮像装置１００のＣＰＵ１０３は、画像処理装置１２０から送信されたデータがあれば受信する。
Ｓ３０８では、ＣＰＵ１０３は、画像を受信したか否かを判定する。受信した場合にはＳ３０９に進み、受信していない場合にはＳ３１０に進む。
Ｓ３０９では、ＣＰＵ１０３は、受信した画像を表示部１０７に所定時間表示する。ここでは、ＣＰＵ１０３は、図４（ｂ）に示す画像４１０を表示する。このように、ライブビュー画像に対して、患部領域の抽出結果を示す情報と、患部領域のサイズに関する情報とを重畳して表示することで、撮影者は患部領域の面積および推定エリアが妥当であるかを確認した上で、実際の撮影に進むことができる。なお、本実施形態では、患部領域の抽出結果を示す情報と、患部領域のサイズの情報とを表示する場合について説明したが、何れか一方だけを表示してもよい。
【００３３】
Ｓ３１０では、ＣＰＵ１０３は、撮影者が操作部１０８に含まれるレリーズボタンを押下することによる撮影指示を受け付けたか否かを判定する。撮影指示を受け付けた場合にはＳ３１１に進み、撮影指示を受け付けていない場合にはＳ３０４に戻る。
Ｓ３１１では、ＣＰＵ１０３は、ＡＦ処理を行う。この処理は、Ｓ３０３と同様である。
【００３４】
Ｓ３１２では、ＣＰＵ１０３は、撮影者による撮影指示に応じて、記録用に静止画の撮影を行う。
Ｓ３１３〜３１５までの処理は、上述したＳ３０４〜Ｓ３０６と同様であるために、異なる点だけを説明する。
Ｓ３１３では、ＣＰＵ１０３は記録用に撮影された画像に対して、画像の現像および圧縮処理を行い、例えばＪＰＥＧ規格の画像を生成する。また、ＣＰＵ１０３は、圧縮処理された画像に対してリサイズ処理を行い、画像のサイズを小さくする。このとき、患部領域を計測する際の精度を優先するため、リサイズ処理した画像のサイズは、Ｓ３０４においてリサイズ処理した画像のサイズよりも大きいか、同じ大きさであることが好ましい。
【００３５】
次に、画像処理装置１２０による処理に移る。
Ｓ３４１〜Ｓ３４７までの処理は、上述したＳ３４１〜Ｓ３４７と同様であるが、異なる点が２つある。
１つ目は、Ｓ３４５の処理を実行する点である。
Ｓ３４５では、ＣＰＵ１２１は、画像解析を行う。具体的には、ＣＰＵ１２１は、抽出した患部領域の位置を算出したり、患部領域に対して長径と短径を算出して設定したりする。また、ＣＰＵ１２１は、Ｓ３４３で求めた画像１ピクセル当りの実距離に基づいて、患部領域に対する長径と短径の長さ、傾き（向き）、および、患部領域に外接する矩形の面積を算出する。褥瘡の評価指標のＤＥＳＩＧＮ−Ｒの中で、褥瘡のサイズは長径と短径の積の値を計測することが定められている。本実施形態の画像処理システムにおいて、長径と短径を算出することで、今までＤＥＳＩＧＮ−Ｒで計測されたデータとの互換性を確保することができる。ＤＥＳＩＧＮ−Ｒは厳密な定義がないため、数学的には複数の長径と短径の算出方法が考えられる。
【００３６】
長径と短径の算出方法の第１例として、ＣＰＵ１２１が患部領域に外接する矩形のうち、面積が最小となる矩形（Ｍｉｎｉｍｕｍ  ｂｏｕｎｄｉｎｇ  ｒｅｃｔａｎｇｌｅ）を算出する。次に、この矩形の長辺と短辺の長さを算出し、長辺の長さを長径とし、短辺の長さを短径として算出する。次に、Ｓ３４３で求めた画像１ピクセル当りの実距離に基づいて、矩形の面積を算出する。
長径と短径の算出方法の第２例として、ＣＰＵ１２１が長径として最大のキャリパー長である最大フェレ径を選択し、短径として最小フェレ径を選択する。なお、長径として最大のキャリパー長である最大フェレ径を選択し、短径として最大フェレ径の軸に直交する方向で計測した長さを選択してもよい。
長径と短径の算出方法は、従来の計測結果との互換性に基づいて任意の方法を選択することができる。
【００３７】
２つ目は、画像に重畳する情報が異なる点である。
ライブビュー中の場合には、処理負荷の軽減を図るためにＳ３４５を実行していないために長径や短径等が算出されず、患部領域の推定エリアおよび患部領域の面積のみを重畳して、画像を生成した。一方、レリーズして撮影した場合には、長径や短径等の情報も重畳した画像を生成する。
【００３８】
図４（ｃ）〜（ｅ）は、患部領域の抽出結果を示す情報と、患部領域の長径と短径を含む患部領域のサイズに関する情報とを重畳した図である。患部領域のサイズに関する情報は複数、想定されるために３つに分けて説明する。
図４（ｃ）に示す画像４２０は、長径と短径の算出方法としてＭｉｎｉｍｕｍ  ｂｏｕｎｄｉｎｇ  ｒｅｃｔａｎｇｌｅを用いたものである。画像４２０の左上隅には、患部領域のサイズに関する情報４２１が重畳される。
また、画像４２０の右上隅には、患部領域のサイズに関する情報として、Ｍｉｎｉｍｕｍ  ｂｏｕｎｄｉｎｇ  ｒｅｃｔａｎｇｌｅに基づいて算出した長径および短径を表示したラベル４２２が重畳される。また、画像４２０には、患部領域４２４に外接したＭｉｎｉｍｕｍ  ｂｏｕｎｄｉｎｇ  ｒｅｃｔａｎｇｌｅを表す矩形の枠４２５が重畳される。矩形の枠４２５を長径および短径の長さと一緒に重畳することで、撮影者は画像中のどの箇所の長さが計測されているのかを確認することができる。
【００３９】
また、画像４２０の左下隅には、上述したＤＥＳＩＧＮ−ＲのＳｉｚｅ評価の指標４２３が重畳される。ＤＥＳＩＧＮ−ＲのＳｉｚｅ評価の指標４２３では、皮膚損傷範囲の、長径と短径（長径と直交する最大径）を測定し（単位はｃｍ）、各々を掛け合わせた数値から７段階に分類されている。本実施形態では長径と短径をそれぞれの算出方法によって出力された値に置き換えて得られる指標４２３が重畳される。
【００４０】
図４（ｄ）に示す画像４３０は、長径として最大フェレ径を用い、短径として最小フェレ径を用いたものである。画像４３０の患部領域４３１には、最大フェレ径の計測位置に相当する補助線４３２と、最小フェレ径に相当する補助線４３３とが重畳される。補助線４３２、４３３を長径および短径の長さと一緒に重畳することで、撮影者は画像中のどの箇所の長さが計測されているのかを確認することができる。
【００４１】
図４（ｅ）に示す画像４４０は、長径が図４（ｄ）に示す画像４３０と同じであるが、短径が最小フェレ径ではなく最大フェレ径の軸に直交する方向で計測した長さによるものである。また、画像４４０の患部領域４４１には、最大フェレ径の計測位置に相当する補助線４４２と、最大フェレ径の軸に直交する方向で計測した長さに相当する補助線４４３が重畳される。
【００４２】
なお、図４（ｃ）〜（ｅ）に示した、画像に重畳する各種情報は、何れか１つまたは複数の組み合わせであってもよく、撮影者が表示する情報を選択できるようにしてもよい。また、長径や短径等の情報は、Ｓ３４５における画像解析により取得されている。
また、本実施形態では、画像処理装置１２０が長径や短径等の情報を画像に重畳して撮像装置１００に送信し、撮像装置１００は単純に重畳された画像を表示することで撮像装置１００の処理負荷の軽減している。ただし、画像処理装置１２０が長径や短径等の情報を付随情報として撮像装置１００に送信し、撮像装置１００が重畳して表示するようにしてもよい。
【００４３】
次に、撮像装置１００による処理に移る。
Ｓ３１６では、撮像装置１００のＣＰＵ１０３は、画像処理装置１２０から送信された画像を受信する。
Ｓ３１７では、ＣＰＵ１０３は、受信した画像を表示部１０７に表示する。
Ｓ３１８では、ＣＰＵ１０３は、撮影した画像を管理サーバ１３０に登録するか否かを撮影者に確認するメッセージを表示部１０７に表示する。管理サーバ１３０に登録することを撮影者が選択した場合にはＳ３１９に進み、登録することを撮影者が選択しない場合には処理を終了する。
【００４４】
Ｓ３１９では、ＣＰＵ１０３は、Ｓ３１５において画像処理装置１２０に送信した画像と解析結果の情報とを管理サーバ１３０に登録する指示を、画像処理装置１２０に送信する。本実施形態では、画像処理装置１２０のＣＰＵ１２１は、受信した指示に応じて、記憶した画像と解析結果の情報とを管理サーバ１３０に送信する。ただし、撮像装置１００から直接、画像と解析結果の情報とを管理サーバ１３０に送信してもよい。
【００４５】
次に、画像処理装置１２０の処理に移る。
Ｓ３５０では、ＣＰＵ１２１は、撮像装置１００から画像と解析結果の情報とを管理サーバ１３０に登録する指示を受信する。
Ｓ３５１では、ＣＰＵ１２１は、管理サーバ１３０への登録処理を行うために、必要なデータを管理サーバ１３０に送信する。ここで、送信するデータは、撮影した画像、解析結果の情報（被写体までの距離情報、患部領域の位置、患部領域の面積、長径の長さ、長径の傾き、短径の長さ、短径の傾き、矩形の面積）、タグの画像である。タグの画像は、Ｓ３０１において撮影されたものである。
【００４６】
次に、管理サーバ１３０の処理に移る。
Ｓ３６０では、管理サーバ１３０のＣＰＵ１３１は、画像処理装置１２０から送信されたデータを受信する。
Ｓ３６１では、ＣＰＵ１３１は、タグの画像に含まれるバーコードの情報を読み取る。
Ｓ３６２では、ＣＰＵ１３１は、読み取ったバーコードの情報に基づいて患者ＩＤを取得する。管理サーバ１３０は、バーコードの情報に対して、患者ＩＤおよび患者名が関連付けられたデータベースを二次記憶装置１３３に記憶している。ＣＰＵ１３１は、データベースから、バーコードの情報に関連付けられた患者ＩＤを取得する。
【００４７】
Ｓ３６３では、ＣＰＵ１３１は、画像処理装置１２０から送信されたデータを、管理サーバ１３０の二次記憶装置１３３に記憶されたデータベースのレコードに登録する。管理サーバ１３０は、患者ＩＤおよび患者名に関連付けて画像を登録し、画像に関連付けて解析結果の情報を登録する。データベースのレコードに登録することで、ユーザは画像閲覧装置１４０を用いて患者ごとに褥瘡の画像を閲覧することができる。
Ｓ３６４では、ＣＰＵ１３１は、データを登録した旨の完了通知を画像処理装置１２０に送信する。
【００４８】
次に、画像処理装置１２０の処理に移る。
Ｓ３５２では、画像処理装置１２０のＣＰＵ１２１は、管理サーバ１３０から完了通知を受信する。
Ｓ３５３では、ＣＰＵ１２１は、データを登録した旨の完了通知を撮像装置１００に送信する。
【００４９】
次に、撮像装置１００の処理に移る。
Ｓ３２０では、撮像装置１００のＣＰＵ１０３は、画像処理装置１２０から完了通知を受信する。ＣＰＵ１０３は、完了通知を受信することに応じて、管理サーバ１３０への登録が完了した旨のメッセージを表示部１０７に表示する。
このように、画像処理システムでは、撮像装置１００、画像処理装置１２０、管理サーバ１３０により、褥瘡の撮影、患部領域の解析、管理サーバ１３０への登録を行うことができる。
【００５０】
次に、褥瘡の画像を閲覧する場合について説明する。
一般的には、褥瘡の患者に対して褥瘡を定期的に撮影して、経過を観察することが行われる。ここで、一週間ごとに褥瘡の撮影を行った場合の画像の例について説明する。
図５（ａ）〜（ｃ）は、一週間ごとに同一患者の褥瘡を撮影した画像の一例を示す図である。画像５００〜５２０において、患者および褥瘡の向きが何れも異なっているのは、撮影を行ったときの患者の姿勢、および、撮影者が撮像装置１００を構えたときの姿勢が同じではないためである。
画像閲覧装置１４０では、患者ごとに撮影した画像を時系列に並べて表示することができる。このとき、褥瘡の経過を観察する場合に、褥瘡の向きが揃っていた方が視認性がよい。本実施形態では患部領域の長径を用いて画像の向きを揃える方法について説明する。
【００５１】
図６は、画像閲覧装置１４０および管理サーバ１３０の処理の一例を示すフローチャートである。
図６（ａ）は、ユーザが閲覧したい患者を選択するために、管理サーバ１３０内に記憶されている患者名一覧を画像閲覧装置１４０に表示する処理の一例を示すフローチャートである。なお、管理サーバ１３０がＷｅｂサーバを有していれば、画像閲覧装置１４０からＷｅｂブラウザを通して画像を閲覧することができる。この場合、画像閲覧装置１４０はＷｅｂブラウザを表示できるデバイスであればよく、例えば、スマートフォン、タブレット端末、ＰＣ等を用いることができる。
【００５２】
Ｓ６００では、画像閲覧装置１４０のＣＰＵ１４１は、ユーザの指示に応じて管理サーバ１３０に対して患者名一覧の取得要求を送信する。
Ｓ６１０では、管理サーバ１３０のＣＰＵ１３１は、画像閲覧装置１４０から患者名一覧の取得要求を受信する。
Ｓ６１１では、ＣＰＵ１３１は、二次記憶装置１３３に記憶されたデータベースから患者名一覧の情報を取得する。このとき、ＣＰＵ１３１は、患者名に関連付けられた画像の撮影日時のうち最初の撮影日時および最後の撮影日時の情報を取得してもよい。
Ｓ６１２では、ＣＰＵ１３１は、取得した患者名一覧の情報および撮影日時の情報を画像閲覧装置１４０に送信する。
【００５３】
Ｓ６０１では、画像閲覧装置１４０のＣＰＵ１４１は、管理サーバ１３０から送信された患者名一覧の情報および撮影日時の情報を受信する。
Ｓ６０２では、ＣＰＵ１４１は、取得した情報に基づいて患者名一覧を表示部１４５に表示する。
図７は、患者名一覧を表示した画面７００の一例を示す図である。
画面７００には、フォルダアイコン７０１、撮影日時７０２、検索窓７０３、スクロールバー７０４が表示される。フォルダアイコン７０１には、患者ＩＤおよび患者名が表示される。ここでは、８人分の患者に相当するフォルダアイコン７０１が表示されている。撮影日時７０２は、患者ごとに最初の撮影日時と最後の撮影日時とが表示される。検索窓７０３は、患者が多数いる場合にユーザが患者ＩＤ、患者名、撮影日時を入力して、検索を行うことができる表示アイテムである。スクロールバー７０４は、患者が多数おり、画面に表示されていないフォルダアイコン７０１を表示したい場合に、ユーザが移動させるように操作する表示アイテムである。ここで、ユーザは患者名一覧から褥瘡の画像を閲覧したい患者をタッチパネル等の操作部１４６を介して選択することができる。
【００５４】
図６（ｂ）は、ユーザが褥瘡の画像を閲覧したい患者を選択して、管理サーバ１３０内に記憶されている、選択された患者に対応する褥瘡の画像を画像閲覧装置１４０に表示する処理の一例を示すフローチャートである。
Ｓ６２０では、画像閲覧装置１４０のＣＰＵ１４１は、ユーザによる指示に応じて管理サーバ１３０に対して画像取得要求を送信する。具体的には、ＣＰＵ１４１は、ユーザにより閲覧したい患者に対応するフォルダアイコンが選択されることに応じて、画像取得要求を送信する。このとき、ＣＰＵ１４１は選択された患者の患者ＩＤも送信する。
【００５５】
Ｓ６３０では、管理サーバ１３０のＣＰＵ１３１は、画像閲覧装置１４０から送信された画像取得要求および患者ＩＤを受信する。
Ｓ６３１では、ＣＰＵ１３１は、二次記憶装置１３３に記憶されたデータベースから患者ＩＤに関連付けられた各画像と、各画像に関連付けられた解析結果の情報とを取得する。
Ｓ６３２では、ＣＰＵ１３１は、各画像に関連付けられた解析結果の情報に含まれる、患部領域の長径の情報に基づいて各画像を回転させる。なお、画像を回転させる方法の詳細については後述する。
【００５６】
Ｓ６３３では、ＣＰＵ１３１は、回転させた画像、撮影日時の情報、解析結果の情報を画像閲覧装置１４０に送信する。解析結果の情報には、被写体までの距離情報、患部領域の位置、患部領域の面積、長径の長さ、長径の傾き、短径の長さ、短径の傾き、矩形の面積の情報が含まれる。
Ｓ６２１では、ＣＰＵ１４１は、管理サーバ１３０から回転された各画像と解析結果の情報とを受信する。
Ｓ６２２では、ＣＰＵ１４１は、受信した各画像と解析結果の情報とを表示部１４５に表示する。
【００５７】
（第１表示例）
図８は、受信した褥瘡の画像および解析結果の情報を表示する画面の表示例を示す図である。図８（ａ）に示す画面８００には、患者名８０１、画像８０２〜８０４、評価表示部８０８、撮影日時８０９、スケール８１０、戻るボタン８１１、第１のスライダーバー８１２、第２のスライダーバー８１３等が表示される。
患者名８０１は、ユーザが患者名一覧から選択した患者の名前が表示される。画像８０２〜８０４は、回転させた褥瘡の画像が表示される。また、画像８０２〜８０４には、それぞれ患部領域８０５、患部領域の長径８０６、患部領域の短径８０７が表示される。評価表示部８０８は、解析結果の一部である、患部領域の面積、長径の長さ、短径の長さ、ＤＥＳＩＧＮ−Ｒの値が表示される。
【００５８】
撮影日時８０９は、画像を撮影した日時が表示される。ここで、画像８０２〜８０４は、撮影日時８０９に基づいて左側が右側になるにしたがって日時が新しくなるようにソートして表示される。したがって、ユーザは褥瘡の経過を観察し易くなっている。スケール８１０は、画像１ピクセル当りの実距離に基づいて表示される。したがって、ユーザはスケール８１０を確認することで褥瘡の大きさを把握し易くなっている。
【００５９】
第１のスライダーバー８１２は、画像が多数あり、画面に表示されていない画像を表示したい場合に、ユーザが移動させるように操作する表示アイテムである。ユーザが第１のスライダーバー８１２を操作することで、古い撮影日時あるいは新しい撮影日時の画像が表示される。第２のスライダーバー８１３は、画像の表示サイズを変更して表示したい場合に、ユーザが移動させるように操作する表示アイテムである。ユーザが第２のスライダーバー８１３を操作して表示サイズを小さくすると、一つ一つの画像は小さく表示されるが、一画面に多くの画像を表示することができる。戻るボタン８１１は、図７に示す患者一覧の画面に戻るときに操作する表示アイテムである。
【００６０】
ここで、画像８０２〜８０４はそれぞれ、患部領域の長径の傾きが一致して表示されている。すなわち、上述したＳ６３２では、管理サーバ１３０のＣＰＵ１３１は、各画像の患部領域の長径の傾きが一致するように各画像を回転させる。患部領域の長径は、患部領域に設定された基準線の一例である。このように、長径を基準線にして褥瘡の向きを揃えて画像を表示することで複数の画像を容易に比較でき、褥瘡の経過を観察し易くすることができる。ここで、一致とは、完全に一致する場合に限られず、ユーザが一致していると認識できる場合が含まれる。
【００６１】
なお、図８（ａ）では、１つの画像８０２の患部領域の長径の傾きを基準にして、他の２つの画像８０３、８０４を回転させている。ここで、基準とする画像は、最初の撮影日時の画像、最後の撮影日時の画像、または、ユーザが任意に選択した画像の何れであってもよい。すなわち、上述したＳ６３２では、管理サーバ１３０のＣＰＵ１３１は、各画像のうち基準とする画像を回転させず、他の画像を患部領域の長径の傾きが一致するように回転させる。また、同一患者において一つの長径の傾きの基準となる画像を選択すればよく、異なる患者間で長径の傾きを一致させる必要は無い。
なお、本表示例では、管理サーバ１３０のＣＰＵ１３１が画像を回転する場合について説明したが、画像閲覧装置１４０が画像を回転させてもよい。具体的には、画像閲覧装置１４０のＣＰＵ１４１は、管理サーバ１３０から少なくとも各画像と各画像の患部領域の長径の情報とを受信し、各画像を患部領域の長径の傾きが一致するように回転させる。
【００６２】
図８（ｂ）は、図８（ａ）と異なる画面の表示例を示す図である。なお、図８（ａ）と同一の表示アイテムについては適宜、説明を省略する。図８（ｂ）に示す画面８２０には、画像８２１〜８２３等が表示される。
画像８２１〜８２３は、回転させた褥瘡の画像が表示される。また、画像８２１〜８２３には、それぞれ患部領域８２４、患部領域の長径８２５、患部領域の短径８２６が表示される。
【００６３】
ここで、画像８２１〜８２３はそれぞれ、患部領域の長径の傾きが画面８２０の横方向（水平方向）に対して０度になるように表示されている。すなわち、上述したＳ６３２では、管理サーバ１３０のＣＰＵ１３１は、各画像の患部領域の長径の傾きが横方向と一致するように各画像を回転させる。このように、長径の傾きが横方向と一致するように褥瘡の向きを揃えて画像を表示することで複数の画像を容易に比較でき、褥瘡の経過を更に観察し易くすることができる。
【００６４】
なお、回転させた画像を矩形の表示枠８１４に表示すると、画像の端の部分が切り取られてしまい、そのまま表示すると画像の大きさが揃わなくなる場合が想定される。画像閲覧装置１４０のＣＰＵ１４１は、矩形の表示枠に対して画像の大きさが足りない場合には、画像を拡大して表示したり、足りない部分を黒塗りで表示したりすることで対応することができる。このとき、画像閲覧装置１４０のＣＰＵ１４１は、画像を拡大する場合にはスケール８１０の大きさを調整して表示する。
また、撮像装置１００のＣＰＵ１０３は、画像閲覧装置１４０により画像が回転して表示されることを想定して、撮影時に褥瘡の周囲を余分に撮影するようにユーザに対してガイダンスを表示してもよい。
【００６５】
（第２表示例）
褥瘡を撮影する場合には画像の向きの違いに限られず、画像における褥瘡の大きさの違いが生じる。すなわち、患者の近くで撮影したり、撮像装置１００のズーム倍率を上げて撮影したりすれば、褥瘡が大きく撮影される。逆に、患者から離れて撮影したり、撮像装置１００のズーム倍率を下げて撮影したりすれば、褥瘡が小さく撮影される。
【００６６】
図９（ａ）〜（ｃ）は、同一患者の褥瘡を異なる距離で撮影した画像の一例を示す図である。画像９００〜９２０では、褥瘡のサイズがそれぞれ大きく異なっている。画像９００を基準にすると、画像９１０はより患者の近くで撮影したために、褥瘡が大きく表示されている。また、画像９００を基準にすると、画像９２０は患者から離れて撮影したために、褥瘡が小さく表示されている。
このような画像を上述した第１表示例のように、画像閲覧装置１４０で閲覧すると、褥瘡の向きを揃えることができるが、大きさを揃えることが困難である。褥瘡の状態は大きさが指標となるため、撮像装置１００から被写体までの距離を一定にして撮影することが望ましい。しかしながら、現実的には毎回、被写体までの距離を一定にして撮影することは難しいため、疑似的に撮影距離が一定になるように画像を拡大・縮小して表示することで、褥瘡の経過を適切に観察することができる。
【００６７】
図１０は、画像を拡大・縮小させる処理を含む、画像閲覧装置１４０および管理サーバ１３０の処理の一例を示すフローチャートである。図１０のフローチャートは、図６（ｂ）のフローチャートにＳ１０１３の処理が追加されている。なお、他の処理は、図６（ｂ）のフローチャートと同様であり適宜、説明を省略する。
Ｓ１０１３では、管理サーバ１３０のＣＰＵ１３１は、撮影距離に基づいて画像を拡大・縮小させる。ここで、撮影距離とは、撮像装置１００から被写体までの距離情報であり、Ｓ３１４において画像撮影時に測距部１１０が取得し、Ｓ３１９において解析結果の一部として送信した情報である。また、被写体までの距離情報は、Ｓ３５１において画像処理装置１２０から管理サーバ１３０に送信され、各画像に関連付けて管理サーバ１３０の二次記憶装置１３３に記憶されたデータベースに登録されている。
【００６８】
ここで、画像の拡大・縮小する方法として３つの方法が想定される。
１つ目は、全画像の撮影距離の平均を算出して、その平均値になるように各画像を拡大・縮小する方法である。具体的には、Ｓ１０１１において、管理サーバ１３０のＣＰＵ１３１は、褥瘡の画像を取得するときに、各画像の撮影距離も取得する。したがって、管理サーバ１３０のＣＰＵ１３１は、各画像の撮影距離に基づいて平均値を算出することができる。
２つ目は、撮影日時が最初の画像または最後の画像の撮影距離になるように各画像を拡大・縮小する方法である。具体的には、Ｓ１０１１において、管理サーバ１３０のＣＰＵ１３１は、最初の画像または最後の画像の撮影距離を取得して、取得した撮影距離に基づいて各画像を拡大・縮小する。
３つ目は、撮影距離が最も近い画像または最も遠い画像に合わせて、各画像を拡大・縮小する方法である。具体的には、Ｓ１０１１において、管理サーバ１３０のＣＰＵ１３１は、撮影距離が最も近い画像または最も遠い画像の撮影距離が取得して、取得した撮影距離に基づいて各画像を拡大・縮小する。
【００６９】
図１１は、撮影距離に基づいて拡大・縮小した画像を表示した画面１１００の表示例を示す図である。
図１１に示す画面１１００には、拡大・縮小した画像１１０１〜１１０３等が表示される。画像１１０１は図９（ａ）に示す画像９００が元の画像であり、画像１１０２は図９（ｂ）に示す画像９１０が元の画像であり、画像１１０３は図９（ｃ）に示す画像が元の画像である。
【００７０】
ここで、画像１１０１の患部領域１１０４の大きさは、画像９００の患部領域９０１の大きさと同じあるため、画像１１０１には拡大・縮小がされていない。
画像１１０２の元の画像９１０は近距離で撮影されたものであり、画像９１０の患部領域９１１は大きいが、画像１１０２は縮小されているために患部領域１１０５が小さく表示される。なお、管理サーバ１３０のＣＰＵ１３１は、画像を縮小した場合には元の画像の大きさを示す輪郭１１０７を描画して、輪郭１１０７の外側の部分を黒一色または白一色にするように画像を生成する。
画像１１０３の元の画像９２０は遠距離で撮影されたものであり、画像９２０の患部領域９２１は小さいが、画像１１０３は拡大されているために患部領域１１０６が大きく表示される。
【００７１】
このように、各画像の撮影距離に基づいて、各画像の撮影距離が疑似的に一致するように拡大または縮小することで複数の画像を容易に比較でき、褥瘡の経過を更に観察し易くすることができる。
なお、本表示例では、管理サーバ１３０のＣＰＵ１３１が画像を拡大・縮小する場合について説明したが、画像閲覧装置１４０が画像を拡大・縮小してもよい。具体的には、画像閲覧装置１４０のＣＰＵ１４１は、管理サーバ１３０から少なくとも各画像と各画像の撮影距離とを受信し、各画像の撮影距離が疑似的に一致するように各画像を拡大または縮小してもよい。
【００７２】
（第３表示例）
ユーザが画像を閲覧するのは褥瘡の経過を観察することが目的である。したがって、褥瘡がはっきりと分かるように画像を拡大することで、褥瘡の視認性を向上させることができる。
図１２は、画像を拡大させる処理を含む、画像閲覧装置１４０および管理サーバ１３０の処理の一例を示すフローチャートである。図１２のフローチャートは、図６（ｂ）のフローチャートにＳ１２１３の処理が追加されている。なお、他の処理は、図６（ｂ）のフローチャートと同様であり適宜、説明を省略する。
Ｓ１２１３では、管理サーバ１３０のＣＰＵ１３１は、患部領域の位置に基づいて画像を拡大する。
【００７３】
ここで、画像を拡大する方法として２つの方法が想定される。
１つ目は、患部領域の縦方向または横方向のうち長い方の長さが、画像を表示する表示枠の縦方向または横方向の長さと同一になるように画像を拡大する方法である。具体的には、Ｓ１２１１において、管理サーバ１３０のＣＰＵ１３１は、褥瘡の画像を取得するときに、各画像の患部領域の位置の情報も取得する。ＣＰＵ１３１は、患部領域の位置の情報に基づいて、患部領域が表示枠に収まるように画像を拡大する。この場合には、患部領域が表示枠にフィットするように画像が拡大される。
２つ目は、褥瘡の患部領域の周囲と表示枠との間で一定のマージンを設けるように画像を拡大する方法である。具体的には、Ｓ１２１１において、管理サーバ１３０のＣＰＵ１３１は、患部領域の位置の情報と、設定されたマージンの情報とに基づいて、患部領域が表示枠にマージンを介して収まるように画像を拡大する。
【００７４】
図１３は、患部領域の位置に基づいて拡大した画像を表示した画面１３００の表示例を示す図である。
図１３に示す画面１３００には、拡大した画像１３０１〜１３０３が表示されている。画像１３０１〜１３０３にはそれぞれ、患部領域１３０４〜１３０６が大きく表示される。また、画像１３０１に示すように、患部領域１３０４と表示枠１３０８との間には一定のマージンＭ１、Ｍ２が設けられることで、患部領域１３０４に加えて患部領域１３０４の周辺領域が表示される。
【００７５】
このように、患部領域の位置に基づいて各画像を拡大することで、ユーザは褥瘡をより詳細に観察することができる。なお、画像を拡大すると、画像１ピクセル当りの実距離も変わる。したがって、管理サーバ１３０のＣＰＵ１３１はスケール１３０７の大きさを拡大率に応じて変更する。また、各画像にはスケールが表示されていることからユーザはスケールを確認することで褥瘡の大きさを把握できるが、撮影距離を揃えた画像を確認したい場合がある。したがって、画像閲覧装置１４０のＣＰＵ１４１は、図１１に示す画面１１００の表示形態と図１３に示す画面１３００の表示形態とを、ラジオボタン等でユーザに選択させて切替えて表示するようにしてもよい。
【００７６】
（第４表示例）
上述した処理では、画像処理装置１２０が自動的に患部領域の長径を算出する場合について説明したが、ユーザが自ら長径を指定したい場合がある。この場合には、ユーザが手動で患部領域の長径を指定し、指定された長径に基づいて画像を回転させることで褥瘡の向きが揃えられ、褥瘡の閲覧性を向上させることができる。
図１４は、褥瘡の長径をユーザが手動で指定する方法を説明するための図である。
図１４に示す画面１４００には、画像１４０１〜１４０３が表示されている。ここで、画像１４０１は、既にユーザが長径を指定した状態を示している。一方、画像１４０２、１４０３は、長径が未指定の状態を示している。
【００７７】
ユーザが長径を指定したい場合には、長径指定ボタン１４０５を押下することに応じて、画像閲覧装置１４０のＣＰＵ１４１は長径指定モードに遷移する。長径指定モードでは、ユーザは画像１４０２、１４０３上で長径を指定することができる。ＣＰＵ１４１は、長径指定モードに遷移することに応じて患部領域を拡大して表示して、長径の指定を受け付けるようにしてもよい。このように、拡大して表示することで、ユーザは褥瘡をより詳細に確認しながら長径を指定することができる。
また、ＣＰＵ１４１は、褥瘡の患部領域を拡大して表示していた状態で長径指定モードへの遷移を受け付けた場合には、拡大する前の元の褥瘡を含む画像全体を表示して、画像全体に対して長径の指定を受け付けるようにしてもよい。このように、元の画像全体を表示することで、ユーザは褥瘡以外の体の位置等を確認することができ、複数の画像において同じ向きの長径を指定することができる。
【００７８】
画像１４０１には、指定された長径１４１０と短径１４１１とが表示される。ユーザが２点あるいは線分を指定することに応じて、ＣＰＵ１４１は指定された２点を繋ぐ線分あるいは指定された線分を長径に設定する。ＣＰＵ１４１は設定した長径の情報に基づいて、上述した長径と短径の算出方法を用いて短径を設定する。また、ＣＰＵ１４１は設定した長径と短径とを画像に重畳して表示する。このとき、ＣＰＵ１４１は、設定した長径の傾きが他の画像の長径の傾きと一致するように画像を回転して表示する。指定した長径を修正したい場合には、長径修正ボタン１４０４を押下することにより、ユーザは再び長径を指定することができる。
なお、ＣＰＵ１４１は指定された長径の情報を管理サーバ１３０に送信して、管理サーバ１３０のＣＰＵ１３１が受信した長径の情報に基づいて他の画像に一致させるように回転させて、回転させた画像を画像閲覧装置１４０に送信するようにしてもよい。また、管理サーバ１３０のＣＰＵ１３１は、ユーザにより指定された長径の情報に基づいて短径を設定して、長径の長さ、短径の長さ、矩形の面積等を再度、算出してもよい。
【００７９】
また、長径をユーザが指定する場合には、図３のフローチャートのＳ３４５において長径および短径を算出する処理を省略することができる。一方、ユーザが長径を指定することに応じて、画像閲覧装置１４０のＣＰＵ１４１は長径の長さや傾き等の情報を管理サーバ１３０に送信する。管理サーバ１３０のＣＰＵ１３１は、二次記憶装置１３３に記憶されたデータベースに画像と関連付けて長径の情報を記憶する。したがって、次回以降、管理サーバ１３０のＣＰＵ１３１は記憶された長径の情報に基づいて画像を回転させることができることから、画像閲覧装置１４０のＣＰＵ１４１は褥瘡の向きを揃えて画像を表示することができる。
【００８０】
（第５表示例）
上述した処理では、同一患者では褥瘡の長径の傾きが変わらないことを前提として説明したが、褥瘡が真円に近い形状の場合には褥瘡の治癒が進むにつれて長径の傾きが変化する場合がある。
図１５（ａ）〜（ｃ）は、同一患者の褥瘡を治癒が進むごとに撮影した画像の一例を示す図である。ここで、図１５（ａ）に示す画像１５００の患部領域１５０３に設定される長径１５０６と、図１５（ｂ）に示す画像１５０１の患部領域１５０４に設定される長径１５０７および図１５（ｃ）に示す画像１５０２の患部領域１５０５に設定される長径１５０８とを比較する。この場合、長径１５０６の傾きと、長径１５０７、１５０８の傾きとが異なっている。
図１５に示す画像１５００〜１５０２において、長径の傾きを一致させるように各画像を回転させてしまうと、褥瘡の向きが揃わなくなってしまう。そこで、長径とは別に画像の向きを揃える基準線をユーザが指定できるようにする。
【００８１】
図１６は、基準線を設定する画面１６００の表示例を示す図である。
図１６に示す画面１６００には、画像１６０１〜１６０３、基準線指定ボタン１６０５、チェックボタン１６０６、ラベル１６０８、取り消しボタン１６０９等が表示される。なお、画像１６０１〜１６０３はそれぞれ、図１５に示す画像１５００〜１５０２に対応している。
【００８２】
基準線指定ボタン１６０５は、ユーザが長径とは別に基準線を指定するときに押下するボタンである。基準線指定ボタン１６０５を押下することで、画像閲覧装置１４０のＣＰＵ１４１は基準線指定モードに遷移する。基準線指定モードでは、長径指定モードと同様に、ユーザが２点あるいは線分を指定することに応じて、ＣＰＵ１４１は指定された２点を繋ぐ線分あるいは指定された線分を基準線に設定する。ＣＰＵ１４１は設定した基準線の傾きが、他の画像の長径の傾きと一致するように画像１６０２を回転して表示する。ここでは、ＣＰＵ１４１は、設定した基準線１６０７の傾きが、画像１６０２よりも前の撮影日時である画像１６０１の長径１６１０の傾きと一致するように画像１６０２を回転させる。
なお、ＣＰＵ１４１は指定された基準線の情報を管理サーバ１３０に送信して、管理サーバ１３０のＣＰＵ１３１が受信した基準線の情報に基づいて他の画像に一致させるように回転させ、回転させた画像を画像閲覧装置１４０に送信するようにしてもよい。
【００８３】
チェックボタン１６０６は、ユーザが基準線を指定した画像よりも後の撮影日時である画像についても同じ基準線を用いて画像を回転させたい場合に押下するボタンである。ＣＰＵ１４１は、チェックボタン１６０６がチェックされている場合には、画像１６０２に設定した基準線１６０７の傾きと長径１６０４の傾きとの差分（角度差）を算出する。次に、ＣＰＵ１４１は、画像１６０２よりも後の撮影日時である画像１６０３を、算出した差分（角度差）に相当する角度だけ回転させる。なお、ＣＰＵ１４１はユーザにより指定された基準線の情報を管理サーバ１３０に送信して、管理サーバ１３０のＣＰＵ１３１が受信した基準線の情報に基づいて、基準線の傾きと長径の傾きとの差分を算出してもよい。管理サーバ１３０のＣＰＵ１３１は算出した差分に相当する角度だけ回転させた画像を画像閲覧装置１４０に送信するようにしてもよい。
ラベル１６０８は、基準線を指定済みであることをユーザに通知するための表示である。取り消しボタン１６０９は、ユーザが指定した基準線を取り消したい場合に押下するボタンである。
【００８４】
このように、褥瘡の治癒が進むにつれて長径の傾きが変化した場合であっても、ユーザが指定した基準線に基づいて画像を回転することで複数の画像を容易に比較でき、褥瘡の経過を観察し易くすることができる。
【００８５】
以上、本発明をその好適な実施形態に基づいて詳述したが、本発明は上述した実施形態に限られず、この発明の要旨を逸脱しない範囲の様々な形態も本発明に含まれる。上述した実施形態の一部を適宜、変更したり、組み合わせたりしてもよい。
例えば、図６、図１０、図１２のフローチャートにおいて管理サーバ１３０が行うＳ６３２、Ｓ１０１２、Ｓ１０１３、Ｓ１２１２、Ｓ１２１３のうち少なくとも何れかの処理を画像閲覧装置１４０が行ってもよい。この場合、管理サーバ１３０がＳ６３１、Ｓ１０１１、Ｓ１２１１で取得した情報を画像処理装置１２０に送信することで実現することができる。
また、図６、図１０、図１２のフローチャートにおいて画像閲覧装置１４０が行うＳ６２２、Ｓ１００２、Ｓ１２０２の処理を、管理サーバ１３０が行ってもよい。この場合、管理サーバ１３０は表示部を備えることで実現することができる。
その他、管理サーバ１３０または画像閲覧装置１４０が行う処理を異なる装置が行ってもよく、単独で行ってもよい。
また、本実施形態では、患部が褥瘡である場合を例に挙げて説明を行ったが、褥瘡に限られず、火傷や裂傷であってもよい。
【００８６】
＜その他の実施形態＞
本発明は、上述の実施形態の１以上の機能を実現するプログラムを、ネットワーク又は記録媒体を介してシステム又は装置に供給し、そのシステム又は装置のコンピュータにおける１つ以上のプロセッサがプログラムを読出し実行する処理でも実現可能である。また、１以上の機能を実現する回路（例えば、ＡＳＩＣ）によっても実現可能である。
【符号の説明】
【００８７】
１００：撮像装置  １２０：画像処理装置  １３０：管理サーバ  １３１：ＣＰＵ  １３４：通信装置  １４０：画像閲覧装置  １４１：ＣＰＵ  １４４：通信装置  １４５：表示部
【図１】
2020146200.tif 000003
【図２】
2020146200.tif 000004
【図３】
2020146200.tif 000005
【図４】
2020146200.tif 000006
【図５】
2020146200.tif 000007
【図６】
2020146200.tif 000008
【図７】
2020146200.tif 000009
【図８】
2020146200.tif 000010
【図９】
2020146200.tif 000011
【図１０】
2020146200.tif 000012
【図１１】
2020146200.tif 000013
【図１２】
2020146200.tif 000014
【図１３】
2020146200.tif 000015
【図１４】
2020146200.tif 000016
【図１５】
2020146200.tif 000017
【図１６】
2020146200.tif 000018