(57)【要約】【課題】人体の少なくとも一部が写った画像に基づく死斑の検出を支援できる死斑検出支援装置を提供する。【解決手段】死斑検出支援装置１は、画像上での重力方向を示す情報に基づいて、画像上の人体の一部が写っている第１の領域よりも重力方向に沿って上側または下側に位置し、かつ人体の他の一部が写っている第２の領域を特定し、第１の領域及び第２の領域を表示部２１に表示させる処理部２５を有する。【選択図】図１
2014146178.tif 000002
【特許請求の範囲】
【請求項１】
画像上での重力方向を示す情報に基づいて、前記画像上の人体の一部が写っている第１の領域よりも重力方向に沿って上側または下側に位置し、かつ人体の他の一部が写っている第２の領域を特定し、前記第１の領域及び前記第２の領域を表示部に表示させる処理部、
を有する死斑検出支援装置。
【請求項２】
前記処理部は、前記第１の領域及び前記第２の領域を、重力方向に沿った前記第１の領域と前記第２の領域の位置関係を示す情報とともに前記表示部に表示させる、請求項１に記載の死斑検出支援装置。
【請求項３】
前記処理部は、前記第１の領域から重力方向に沿って上側または下側に位置する人体と背景との境界を検出し、該境界よりも前記第１の領域側に前記第２の領域を設定する、請求項１または２に記載の死斑検出支援装置。
【請求項４】
前記処理部は、前記第１の領域及び前記第２の領域とともに、前記画像と、前記画像上での前記第１の領域の位置を示す情報及び前記画像上での前記第２の領域の位置を示す情報を前記表示部に表示させる、請求項１〜３の何れか一項に記載の死斑検出支援装置。
【請求項５】
前記処理部は、前記第１の領域及び前記第２の領域とともに、前記画像上での重力方向を示す情報を前記表示部に表示させる、請求項１〜４の何れか一項に記載の死斑検出支援装置。
【請求項６】
前記処理部は、前記画像上で人体の一部が写った第３の領域を設定し、前記画像上での重力方向を示す情報に基づいて、前記第３の領域を前記重力方向に直交する方向に移動しつつ、前記第３の領域の色と、前記第３の領域よりも重力方向に沿って上側または下側に位置し、かつ人体の他の一部が写った第４の領域の色との差を求め、当該差が最大となるときの前記第３の領域及び前記第４の領域を、それぞれ、前記第１の領域及び前記第２の領域とする、請求項１または２に記載の死斑検出支援装置。
【請求項７】
重力方向を示す情報が付加された画像を取得し、
前記画像上での重力方向を示す情報に基づいて、前記画像上の人体の一部が写っている第１の領域よりも重力方向に沿って上側または下側に位置し、かつ人体の他の一部が写っている第２の領域を特定し、
前記第１の領域及び前記第２の領域を表示部に表示させる、
ことを含むコンピュータにより実行される死斑検出支援方法。
【請求項８】
画像上での重力方向を示す情報に基づいて、前記画像上の人体の一部が写っている第１の領域よりも重力方向に沿って上側または下側に位置し、かつ人体の他の一部が写っている第２の領域を特定し、
前記第１の領域及び前記第２の領域を表示部に表示させる、
ことをコンピュータに実行させるための死斑検出支援用コンピュータプログラム。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、例えば、人体が写った画像に基づいて死斑の検出を支援する死斑検出支援装置、死斑検出支援方法及び死斑検出支援用コンピュータプログラムに関する。
【背景技術】
【０００２】
検視業務において、死斑は、死後経過時間及び死亡時刻を推定するための極めて重要な情報である。遺体では、血液の循環が停止することにより、血液が自身の重みによって血管内を重力方向に沿って遺体の下部へ移動して溜まる。そのため、その血液の色が皮膚を通して変色して見えることにより、死斑が表れる。死後２０分〜３０分程度経過すると、死斑は斑紋状に表れ始め、その後、徐々に広がっていく。そして死後１２時間程度で死斑は最大となる。その後は、遺体を回転させても、死斑は移動しなくなる。このように、死斑は死後の経過時間に応じて変化するので、検視官は、死斑の状況を調べることによっておおよその死亡時刻を推定できる。
【０００３】
しかし、現場には、死斑から死亡時刻を推定するのに慣れていない者、例えば、検視官以外の捜査員しかいないことがある。そのような場合には、例えば、遺体はカメラによって撮影される。そして遺体が写った画像を、検視官などの専門家が解析することによって死亡時刻の推定が行われることがある。
【０００４】
一方、画像を解析することによって生体上の特定の領域、例えば、病変がある領域を検出する技術が提案されている（例えば、特許文献１を参照）。
【先行技術文献】
【特許文献】
【０００５】
【特許文献１】特開２００８−９３１７２号公報
【発明の概要】
【発明が解決しようとする課題】
【０００６】
上記の技術では、注目する画素とその周囲に位置する複数の画素との画素値の変化量及び周囲の複数の画素間での画素値の変化量に基づいて病変部の候補領域が検出され、病変部の候補領域の特徴の抽出結果に基づいて病変部が写っている領域が検出される。
【０００７】
一方、死斑の検出及び死斑からの死亡時刻の推定においては、死斑は重力方向に沿った遺体の下部に表れるため、重力方向に対する遺体の向きに関する情報も重要である。しかし、上記の技術では、重力方向に関する情報を利用することは想定されていない。
また、現場の捜査員などによって撮影された遺体の画像では、その画像に写っている遺体の上下方向が分からないことがある。特に、手、足、胴部などの特定の部位の一部が画像全体に写るように撮影された画像では、どの部分が画像に写っているかも判然としないことがある。そのような画像に基づくと、検視官が死斑の検出及び死亡時刻の推定を適切に行えないことがある。
【０００８】
そこで本明細書は、人体の少なくとも一部が写った画像に基づく死斑の検出を支援できる死斑検出支援装置を提供することを目的とする。
【課題を解決するための手段】
【０００９】
一つの実施形態によれば、死斑検出支援装置が提供される。この死斑検出支援装置は、画像上での重力方向を示す情報に基づいて、画像上の人体の一部が写っている第１の領域よりも重力方向に沿って上側または下側に位置し、かつ人体の他の一部が写っている第２の領域を特定し、第１の領域及び第２の領域を表示部に表示させる処理部を有する。
【００１０】
本発明の目的及び利点は、請求項において特に指摘されたエレメント及び組み合わせにより実現され、かつ達成される。
上記の一般的な記述及び下記の詳細な記述の何れも、例示的かつ説明的なものであり、請求項のように、本発明を限定するものではないことを理解されたい。
【発明の効果】
【００１１】
本明細書に開示された死斑検出支援装置は、人体の少なくとも一部が写った画像に基づく死斑の検出を支援できる。
【図面の簡単な説明】
【００１２】
【図１】死斑検出支援装置の一例である死斑検出支援システムの概略構成図である。
【図２】（ａ）は、重力方向に対する撮像部の傾きと、画像上での重心方向を表す情報との関係の一例を示す図である。（ｂ）〜（ｄ）は、それぞれ、撮像部の傾きに対する傾き情報の値の一例を示す図である。
【図３】サーバの処理部の機能ブロック図である。
【図４】撮影記録データベースの一例を示す図である。
【図５】画像選択画面の一例を示す図である。
【図６】領域指定画面の一例を示す図である。
【図７】比較領域探索の一例を示す図である。
【図８】着目領域成分ワークテーブルの一例を示す図である。
【図９】比較領域探索の他の一例を示す図である。
【図１０】指定領域の部分画像及び比較領域の部分画像が表示された比較画面の一例を示す図である。
【図１１】死斑検出支援処理の動作フローチャートである。
【図１２】第２の実施形態による、サーバの処理部の機能ブロック図である。
【図１３】指定領域の候補の設定の一例を示す図である。
【図１４】第２の実施形態による、死斑検出支援処理の動作フローチャートである。
【図１５】第２の実施形態による比較画面の一例を示す図である。
【発明を実施するための形態】
【００１３】
以下、図を参照しつつ、様々な実施形態による死斑検出支援装置について説明する。
この死斑検出支援装置は、重力方向を検知可能な傾きセンサを有する撮像部により、人体、例えば遺体の少なくとも一部を撮影することにより、その人体の少なくとも一部が写った画像に、その画像上での重力方向を表す情報を付加する。この死斑検出支援装置は、重力方向を表す情報を参照することで、その画像上で、検視官といったユーザが指定した人体の一部が写っている指定領域から、重力方向に沿って上側または下側の人体と背景の境界付近の人体の他の一部が写っている比較領域を検出する。そしてこの死斑検出支援装置は、指定領域の画像及び比較領域の画像を、指定領域と比較領域の上下方向の位置関係を表す情報とともに表示部に表示させることで、ユーザが死斑を検出することを容易にする。
【００１４】
図１は、死斑検出支援装置の一例である死斑検出支援システム１の概略構成図である。死斑検出支援システム１は、少なくとも一つの携帯端末１０と、サーバ２０とを有する。携帯端末１０とサーバ２０とは、例えば、公衆無線通信回線といった通信ネットワーク３０を介して接続される。なお、図１では、携帯端末１０は１台だけ示されているが、死斑検出支援システム１は、複数の携帯端末１０を有していてもよい。
【００１５】
携帯端末１０は、作業者に携帯されて、人体の少なくとも一部を撮影した画像を生成する。そして携帯端末１０は、画像に関する情報が含まれた撮影情報（例えば、EXIF情報）が付加された画像情報を、サーバ２０へ送信する。
【００１６】
サーバ２０は、例えば、警察署といった、現場と異なる場所に設置されたコンピュータである。そして、検視官といったユーザが、携帯端末１０から受け取った画像に基づいて、その画像に写っている人体の死斑を検出することを、サーバ２０は支援する。
【００１７】
以下、死斑検出支援システム１の各装置の詳細について説明する。
【００１８】
携帯端末１０は、撮像部１１と、表示部１２と、操作部１３と、位置情報取得部１４と、記憶部１５と、通信部１６と、制御部１７とを有する。このうち、操作部１３、位置情報取得部１４、記憶部１５、通信部１６及び制御部１７は、例えば、作業者の腰などに装着可能な筐体内に収容され、撮像部１１及び表示部１２と、信号線を介して接続される。さらに、携帯端末１０は、作業者の声及び作業者の周囲の音を集音するためのマイクロホン、サーバ２０から送信された音声信号を再生するためのスピーカ、及び撮像部１１の撮影範囲を照明する照明光源を有してもよい。
【００１９】
撮像部１１は、所定の撮影範囲を撮影し、その撮影範囲の像が写った静止画像を生成する。そのために、撮像部１１は、例えば、２次元アレイ状に配置された固体撮像素子のイメージセンサと、そのイメージセンサ上にその撮影範囲の像を結像する結像光学系を有する。本実施形態では、撮像部１１により生成された画像はRGB表色系で表されるカラー画像であり、各画素の赤色(R)、緑色(G)及び青色(B)の成分は、それぞれ、8ビットの階調で表される。
【００２０】
さらに、撮像部１１は、３軸加速度センサといった、撮像部１１の撮像面における、重心方向に対する傾き角を検知する傾きセンサを有する。そして撮像部１１は、撮影する度に、その撮影により生成した画像に、その画像上での重力方向を表す傾き情報を付加する。傾き情報は、例えば、画像のEXIF情報に含められてもよい。なお、傾き情報は、他の形式の画像フォーマットに従って画像に付加されてもよい。
【００２１】
図２（ａ）は、重力方向に対する撮像部１１の傾きと、画像上での重心方向を表す情報との関係の一例を示す図である。本実施形態では、矢印２００で表される重力方向に対する撮像面内での傾き角は、360度を16等分した角度の何れかで表される。それぞれの角度には、重力方向と平行な方向から、反時計回りの順に、'0'〜'15'のインデックスが付される。そのため、図２（ｂ）に示されるように、例えば、撮影時において、撮像部１１の撮像面の垂直方向が重力方向と平行で、かつ、撮像面の上側が撮像面の下側よりも上方に位置している場合、傾き情報は'0'となる。また、図２（ｃ）に示されるように、撮影時において、撮像部１１の撮像面の垂直方向が、撮像部１１を正面から見た場合に重力方向２００に対して時計回りに22.5°傾いている場合、傾き情報は'15'となる。逆に、図２（ｄ）に示されるように、撮影時において、撮像部１１の撮像面の垂直方向が、撮像部１１を正面から見た場合に重力方向２００に対して反時計回りに45°傾いている場合、傾き情報は'2'となる。
撮像部１１は、画像を生成する度に、その画像を制御部１７へ送る。
【００２２】
表示部１２は、例えば、ヘッドマウントディスプレイを有する。そして表示部１２は、撮像部１１により撮像された画像をリアルタイムで表示する。さらに、表示部１２は、制御部１７から受け取った各種の情報、例えば、作業者の現在位置を示す情報等を表示してもよい。
【００２３】
操作部１３は、例えば、少なくとも一つの操作スイッチを有する。そして操作部１３は、作業者がその操作スイッチを操作することにより、その操作スイッチに対応する操作信号などを制御部１７へ送信する。その操作信号には、例えば、撮像部１１による撮影を行わせる信号、及び、表示部１２のオン／オフを切り替える信号などが含まれる。
【００２４】
位置情報取得部１４は、例えば、全地球測位システムの衛星からの信号を受信するアンテナ及びその信号に基づいて現在位置を特定する集積回路を有する。そして位置情報取得部１４は、撮像部１１による撮影が行われている間、所定の時間間隔（例えば、1分間隔）、あるいは撮影が行われる度に、携帯端末１０の現在位置を測定し、その現在位置を表す情報を制御部１７へ渡す。
【００２５】
記憶部１５は、例えば、不揮発性の読み出し専用の半導体メモリ及び揮発性の読み書き可能な半導体メモリを有する。そして記憶部１５は、例えば、撮像部１１により生成された画像を一時的に記憶する。また記憶部１５は、制御部１７により実行される各種の処理の際に求められたデータ、及び、サーバ２０から携帯端末１０が受け取った各種の情報などを記憶する。
【００２６】
通信部１６は、例えば、携帯端末１０が移動局として機能するように、Wideband Code Division Multiple Access(W-CDMA)またはLong Term Evolution(LTE)といった通信規格に準拠した無線通信インターフェース回路及びアンテナを有する。そして通信部１６は、通信ネットワーク３０を介してサーバ２０と通信し、サーバ２０から受け取った各種の情報などを制御部１７へ渡す。あるいは、通信部１６は、制御部１７から受け取った画像などをサーバ２０へ送信する。
【００２７】
制御部１７は、一つまたは複数のプロセッサと、その周辺回路とを有する。そして制御部１７は、携帯端末１０の各部と信号線を介して接続されており、携帯端末１０の各部を制御する。また制御部１７は、撮像部１１から画像を受け取ると、その画像を表示部１２に表示させる。さらに制御部１７は、撮像部１１から画像を受け取ると、その時点で位置情報取得部１４から受け取っている最新の現在位置を、その画像についての撮影位置とする。さらに制御部１７は、撮影位置、撮像部１１を識別するための撮影機材番号、及び携帯端末１０を携行している作業者を識別するための撮影者識別番号といった撮影情報を、例えば、EXIF情報としてその画像に付加する。そして制御部１７は、その画像を通信部１６を介してサーバ２０へ送信する。
【００２８】
また制御部１７は、サーバ２０から、撮影位置の指示などの情報、あるいは、既にサーバ２０に送信された画像のうちの部分画像を受け取ると、その情報あるいは部分画像を表示部１２に表示させてもよい。
【００２９】
次に、サーバ２０について説明する。サーバ２０は、表示部２１と、操作部２２と、通信部２３と、記憶部２４と、処理部２５とを有する。
【００３０】
表示部２１は、例えば、液晶ディスプレイ、あるいは有機エレクトロルミネッセンスディスプレイを有する。そして表示部２１は、携帯端末１０から受け取った画像、例えば、その画像上で人体の一部が写っている領域を表す画像などを表示する。
【００３１】
操作部２２は、例えば、キーボードと、マウスまたはトラッキングボールといったポインティングデバイスとを有する。そして操作部２２は、検視官といったユーザによる操作の内容に応じた信号を処理部２５へ出力する。これにより、ユーザは、操作部２２を介して、表示部２１に表示する画像を選択したり、あるいは、選択した画像に対してサーバ２０に死斑検出支援処理を実行させることができる。
【００３２】
通信部２３は、通信ネットワーク３０を介して携帯端末１０と通信し、携帯端末１０から受け取った画像などを処理部２５へ渡す。あるいは、通信部２３は、処理部２５から受け取った各種の情報などを携帯端末１０へ送信する。そのために、通信部２３は、例えば、サーバ２０を通信ネットワーク３０に接続するための通信インターフェース回路を有する。
【００３３】
記憶部２４は、例えば、不揮発性の読み出し専用半導体メモリ及び揮発性の読み書き可能な半導体メモリを有する。さらに記憶部２４は、磁気記憶媒体及びそのアクセス装置を有していてもよい。そして記憶部２４は、処理部２５上で実行される各種のプログラム及び各種のデータを記憶する。また記憶部２４は、死斑検出支援処理において利用される各種のデータ、例えば、撮影記録データベースなどを記憶する。
【００３４】
処理部２５は、一つまたは複数のプロセッサ及びその周辺回路を有する。そして処理部２５は、サーバ２０の各部と信号線を介して接続されており、サーバ２０全体を制御する。さらに処理部２５は、携帯端末１０から受け取った画像に対して死斑検出支援処理を実行する。
【００３５】
次に、死斑検出支援処理について詳細に説明する。
図３は、死斑検出支援処理に関する処理部２５の機能ブロック図である。処理部２５は、選択部４１と、領域指定部４２と、比較位置決定部４３と、表示制御部４４とを有する。処理部２５が有するこれらの各部は、例えば、処理部２５が有するプロセッサ上で実行されるコンピュータプログラムによって実現される機能モジュールとして実装される。
【００３６】
選択部４１は、詳細は後述する撮影記録データベースに登録されている、携帯端末１０により撮影された１以上の画像またはそのサムネイル画像を含む画像選択画面を表示部２１に表示させる。そして選択部４１は、操作部２２を介したユーザの指示に従って、表示部２１に表示された画像の中から、死斑検出支援処理の実行対象となる画像を選択する。
【００３７】
図４は、撮影記録データベースの一例を示す図である。撮影記録データベース４００では、1行ごとに一つの画像が登録されている。そして画像ごとに、画像ＩＤ、撮影機材番号、撮影者識別番号、撮影日時、撮影部位、傾き情報、撮影倍率、及び撮影場所についての情報が関連付けられている。これらの情報は、例えば、携帯端末１０において作業者により操作部１３を介して入力され、あるいは、携帯端末１０の制御部１７または撮像部１１によって設定される。また、これらの情報のうち、撮影機材番号、撮影者識別番号及び撮影部位は、例えば、サーバ２０の操作部２２を介してユーザにより入力されてもよい。この撮影記録データベースは、例えば、上述したように、サーバ２０の記憶部２４、または携帯端末１０の記憶部１５に格納される。なお、撮影記録データベースは、サーバ２０および携帯端末１０のそれぞれが、直接もしくは通信を介して接続可能な場所に格納されていればよい。
【００３８】
図５は、表示部２１に表示される画像選択画面の一例である。画像選択画面５００には、死斑検出支援処理の対象となる、人体の一部が写った画像のサムネイル画像として１枚以上表示される。これらの画像は、撮影記録データベース４００に登録された画像の中から、例えば、所定枚数、あるいは、所定日のものが取得され、撮影日時の新しい方から順に対応するサムネイル画像が表示される。そしてこの例のように、サムネイル画像とともにチェックボックスと撮影日時が表示されてもよい。ユーザが、例えば、操作部２２を介して、何れかのサムネイル画像の左側のチェックボックスを選択することにより、選択部４１は、選択されたチェックボックスに対応する画像と、対応する撮影情報（撮影部位、傾きなど）とを記憶部２４の撮影記録データベース４００から読み込み、その画像と撮影情報とを領域指定部４２及び比較位置決定部４３へ渡す。さらに、画像を含めた撮影情報を用いて指定領域画面を生成し、表示部２１に表示する（図６）。
【００３９】
領域指定部４２は、選択部４１により読み込まれ、指定領域画面に表示された、死斑検出支援処理の対象となる画像上で、操作部２２を介したユーザの指示を受け付けて人体の一部が写っている位置を特定する。以下では、便宜上、死斑検出支援処理の対象となる画像を単に対象画像と呼ぶ。また、ユーザによる指定位置を含む、人体の一部が写っている領域を指定領域と呼ぶ。
本実施形態では、ユーザが領域を指示できるようにするために、領域指定部４２は、対象画像を含む領域指定画面を表示部２１に表示させる。
【００４０】
図６は、領域指定画面の一例を示す図である。領域指定画面６００には、対象画像６０１が表示される。そしてユーザが操作部２２を介して対象画像６０１上で指定した位置（α）を含む領域が指定領域（β）となる。また領域指定画面６００には、指定領域に含まれる人体の皮膚の色と比較するために設定される比較領域を探索する方向を決定するための二つのボタン６１０、６１１が表示されている。例えば、ユーザが、死斑が表れている可能性がある領域を指定領域とした場合には、死斑が表れているか否かを確認するために、指定領域の色を死斑が表れていない領域の色と比較できることが好ましい。この場合には、ユーザが、操作部２２を介してボタン６１０を押下すると、指定領域よりも重力方向に沿った上方で比較領域が探索される。一方、ユーザが、死斑が表れていない領域を指定領域とした場合には、死斑が表れているか否かを確認するために、指定領域の色を死斑が表れている領域の色と比較できることが好ましい。そこでこの場合には、ユーザが、操作部２２を介してボタン６１１を押下すると、指定領域よりも重力方向に沿った下方で比較領域が探索される。
領域指定部４２は、対象画像上での指定位置の座標及び比較領域の探索方向（すなわち、重力方向において上か下かを表す情報）を比較位置決定部４３へ通知する。
【００４１】
比較位置決定部４３は、対象画像上で指定位置（α）を含む領域を指定領域（β）として設定する。また比較位置決定部４３は、指定領域から重力方向に沿って、かつ、探索方向に向かって、人体と背景の境界を検出し、その境界よりも指定領域に近い側で人体の一部が写っている領域を比較領域として検出する。
【００４２】
比較位置決定部４３は、対象画像の傾き情報を参照して、対象画像上での重力方向を決定する。例えば、図２（ｄ）に示されるように、撮像部１１の正面側から見て、撮像部１１が重力方向に対して反時計回りに45°回転している場合、対象画像上では、対象画像の垂直方向に対して時計回りに45°回転した方向が重力方向となる。例えば、図２（ｅ）に示されるような被写体を、図２（ｄ）のように撮像部を傾けて撮影した場合には、撮影された画像は図２（ｆ）に示されるように、重力方向に対して右に45°傾いた画像となる。
比較位置決定部４３は、直交座標系の一方の軸が重力方向と平行になるように、対象画像上に直交座標系を設定する。そしてその直交座標系において、指定位置を中心とする、人体の一部を含む指定領域を設定する。指定領域は、例えば、矩形形状を持つ領域であり、対象画像に対して設定された直交座標系の各軸と、指定領域の各辺が平行となるように設定される。また指定領域のサイズは、例えば、人体において死斑が表れている部位（例えば、上腕、大腿または腰部）においても、死斑が表れている部分のみ、あるいは死斑が表れていない部分のみを含むことができるように予め設定される。例えば、対象画像が1240x1024画素を持つ場合において、指定領域のサイズは、例えば、16x16画素〜32x32画素に設定される。
【００４３】
図７は、比較領域探索の一例を示す図である。図７に示された対象画像７００に対して、対象画像７００の傾き情報に基づいて一方の座標軸が重力方向と平行となるように、直交座標系７０１が設定される。この例では、直交座標系７０１は、左上端を原点とし、指定領域のサイズ単位で座標が表される。そしてこの例では、指定領域７１０の座標は、(k,6)である。
【００４４】
比較位置決定部４３は、指定領域と同じサイズを持つ着目領域を、まずは、指定領域に対して重力方向に沿って隣接する位置に設定する。そして比較位置決定部４３は、重力方向に沿い、かつ、探索方向に向かって、指定領域７１０から離れるように、所定距離ずつ着目領域をずらしつつ、着目領域の色成分ごとの平均を算出する。そして比較位置決定部４３は、その平均値を着目領域の座標位置とともに記憶部２４の着目領域成分ワークテーブルに記憶する。
【００４５】
図８は、着目領域成分ワークテーブル８００の一例を示す図である。着目領域成分ワークテーブル８００の左端の列の各欄には、上から、指定領域に近い順序で着目領域の座標が格納される。そして、各行には、それぞれ、左端に示された着目領域の座標に対応する、その着目領域の赤色(R)成分、緑色(G)成分、青色(B)成分それぞれの平均値が、左から順に格納される。
【００４６】
なお、所定距離は、例えば、着目領域の垂直方向の長さまたはその長さの1/2とすることができる。そして比較位置決定部４３は、現在の着目領域の色成分ごとの平均値と一つ前の着目領域の色成分ごとの平均値との差の絶対値の総和を変化度として算出する。そして比較位置決定部４３は、その変化度が所定の閾値以上となると、現在の着目領域内、または現在の着目領域と一つ前の着目領域との間に、人体と背景との境界があると判定する。なお、所定の閾値は、例えば、肌の色とそれ以外の色との差の最小値に相当する値とすることができる。そして、その変化度がその閾値以上となった場合に、比較位置決定部４３は、一つ前の着目領域を、比較領域とする。図７の例では、指定領域７１０から重力方向に沿って下方における、人体と背景の境界の手前の座標(k,11)に、比較領域７１１が設定される。
【００４７】
図９は、比較領域探索の他の一例を示す図である。この例では、比較位置決定部４３は、対象画像９００の傾き情報を参照して、重力方向が直交座標系９０１の垂直方向軸と平行になるように、例えば、対象画像９００の中心を回転軸として対象画像９００及び指定位置を回転させる。そして比較位置決定部４３は、対象画像を回転させてから指定位置を中心とする、人体の一部を含む指定領域９１０を設定する。この例でも、比較位置決定部４３は、重力方向に沿って、かつ、探索方向へ向かって、指定領域９１０から離れるように着目領域をずらしつつ、着目領域の色の変化度を調べることで人体と背景の境界を検出する。そして比較位置決定部４３は、その境界の手前にある着目領域を比較領域９１１として設定する。
【００４８】
なお、指定領域及び比較領域は矩形でなくてもよく、例えば、指定位置を中心とする円形であってもよい。また、変形例によれば、皮膚としてあり得ない色相の範囲（具体的には、40°から260°等）を、記憶部２４に予め記憶しておき、比較位置決定部４３は、着目領域に含まれる画素の色相の平均値が、その色相の範囲に含まれる場合に、その着目領域内またはその着目領域と一つ前の着目領域の間に人体と背景の境界があると判定してもよい。
【００４９】
比較位置決定部４３は、対象画像から、指定領域を切り出した部分画像及び比較領域を切り出した部分画像を生成し、それらの部分画像を、指定領域の中心の座標及び比較領域の中心の座標とともに、表示制御部４４へ渡す。なおこれらの領域の中心の座標は、画素単位で表される、対象画像上の座標である。さらに、比較位置決定部４３は、指定領域及び比較領域に相当する部分画像を、対象画像と関連付けて記憶部２４に記憶してもよい。
【００５０】
表示制御部４４は、比較位置決定部４３から受け取った部分画像と対象画像とを表示部２１に表示させる。その際、表示制御部４４は、重力方向に沿った指定領域と比較領域の位置関係を示す情報を、指定領域及び比較領域に対応する部分画像とともに表示部２１に表示させる。
【００５１】
図１０は、指定領域の部分画像及び比較領域の部分画像が表示された比較画面の一例を示す図である。比較画面１０００では、対象画像１００１とともに、指定領域の部分画像１００２及び比較領域の部分画像１００３が拡大表示されている。また、重力方向に沿って上側に位置する指定領域の部分画像１００２が、重力方向に沿って下側に位置する比較領域の部分画像１００３よりも上方に表示される。このように、二つの部分画像の表示位置が、指定領域と比較領域の位置関係を表す情報となっている。さらに、対象画像１００１上で、指定領域の位置が矩形のマーク１０１１で表されており、比較領域の位置が矩形のマーク１０１２で表されている。さらにまた、対象画像１００１には、重力方向を表す線１０１３が表示されている。
そのため、ユーザは、重力方向に沿って、異なる二つの位置の色の比較を容易に行うことができる。また、例えば、照明光源からの光によって対象画像上で人体に陰影が生じている場合でも、ユーザは、その陰影によって位置ごとに明るさが異なっているのか、死斑によって下側の皮膚の色が変色しているのかを容易に識別できる。したがって、ユーザは、死斑が表れているか否かを容易に判別できる。
【００５２】
なお、表示制御部４４は、指定領域と比較領域間の位置関係を表す情報として、対象画像上での指定領域の中心の座標及び比較領域の中心の座標を表示部２１に表示させてもよい。あるいは、表示制御部４４は、指定領域と比較領域間の位置関係を表す情報として、指定領域と比較領域のうち、下側に位置する領域の近傍に、下側に位置することを示す文字（例えば、「下」）を表示部２１に表示させてもよい。
【００５３】
図１１は、死斑検出支援処理の動作フローチャートである。
領域指定部４２は、操作部２２を介したユーザの操作（具体的には、指定領域及び探索方向の指定）を受け取ると、対象画像上で人体の一部が写っている位置を指定し、探索方向を決定する（ステップＳ１０１）。
比較位置決定部４３は、撮影記録データベース４００に記録された対象画像の傾き情報を参照することで、対象画像上の重力方向と一方の軸が平行となるように、対象画像に対して直交座標を設定する（ステップＳ１０２）。比較位置決定部４３は、指定領域から重力方向に沿って離れるように、かつ、探索方向に向かって、対象画像上で重力方向に沿って着目領域をずらしつつ、着目領域の色の変化を調べることで人体と背景の境界を検出する（ステップＳ１０３）。そして比較位置決定部４３は、人体と背景の境界よりも指定領域側に設定された、その境界に最も近い着目領域を比較領域とする（ステップＳ１０４）。比較位置決定部４３は、指定領域に相当する部分画像及び比較領域に相当する部分画像を取得し、それらの部分画像を、指定領域の中心の座標及び比較領域の中心の座標とともに表示制御部４４に渡す。
【００５４】
表示制御部４４は、指定領域及び比較領域を、重力方向に沿った指定領域と比較領域の位置関係を示す情報とともに、表示部２１に表示させる（ステップＳ１０５）。
そして処理部２５は、死斑検出支援処理を終了する。
【００５５】
以上に説明してきたように、本実施形態による死斑検出支援装置は、画像に写った人体の一部について、重力方向に沿った異なる位置の色の比較を容易にする。そのため、この死斑検出支援装置は、ユーザが死斑を検出することを容易にすることができる。
【００５６】
次に、第２の実施形態による死斑検出支援装置について説明する。第２の実施形態による死斑検出支援装置は、対象画像上で人体の一部が写っている領域内に自動的に指定領域を設定する。
なお、第２の実施形態による死斑検出支援装置は、第１の実施形態による死斑検出支援装置と比較して、サーバの処理部により実行される処理が異なる。そこで以下では、サーバの処理部について説明する。
【００５７】
図１２は、第２の実施形態によるサーバの処理部２５の機能ブロック図である。処理部２５は、選択部４１と、比較位置決定部４３と、表示制御部４４と、探索部４５とを有する。図１２において、処理部２５の各部には、図３に示された処理部２５の対応する構成要素の参照番号と同じ参照番号を付した。
【００５８】
選択部４１は、第１の実施形態による処理部の選択部と同様に、死斑検出支援処理の対象となる画像のＩＤをユーザの選択操作に応じて決定する。そして選択部４１は、その画像ＩＤに対応する対象画像及び関連する撮影情報を撮影記録データベース４００から取得して探索部４５に渡す。
【００５９】
探索部４５は、対象画像上で人体の皮膚が写っている領域内に、１以上の指定領域の候補を設定する。図１３を参照しつつ、探索部４５による処理を説明する。
探索部４５は、まず、RGB表色系で表された対象画像の各画素の値を、HLS表色系の値に変換する。これにより、対象画像の各画素の値は、色相、彩度、輝度で表される。そして探索部４５は、対象画像を複数のブロックに分割する。各ブロックのサイズは、例えば、指定領域のサイズと等しいサイズに設定される。
探索部４５は、ブロックごとに、そのブロックに含まれる各画素の色相の値を調べ、ブロック内の全ての画素が肌色に相当する値を持つブロックを、指定領域の候補（図１３の枠１３０１で囲まれたブロック）とする。このようなブロックには、人体の皮膚が写っていると推定されるためである。なお、肌色に相当する色相の値は、例えば、0°〜30°、340°〜360°である。
【００６０】
探索部４５は、指定領域の候補の中心の座標（図１３のブロック１３０２）を比較位置決定部４３へ通知する。また探索部４５は、撮影記録データベース４００に記録された対象画像の傾き情報を参照することにより、対象画像上で重力方向と直交する方向を求め、重力方向と直交する方向に沿って、左側または右側へ、指定領域の候補を、指定領域の幅だけ移動する（例えば、左に一つ移動したものが図１３のブロック１３０３、左に５つ移動したものが図１３のブロック１３０４）。そして探索部４５は、移動先の領域内の各画素の色相の値が肌色に相当する範囲に含まれる場合、その移動先の領域を新たな指定領域の候補とし、その候補の中心位置の座標を比較位置決定部４３へ通知する。そして比較位置決定部４３は、指定領域の候補の中心位置の座標を受け取る度に、第１の実施形態と同様の処理を行って、指定領域の候補よりも重力方向に沿って上側または下側に、指定領域の候補に対する比較領域の候補を設定する。死斑が表れている場合、人体の下部側では、肌色と異なる色となっている可能性があるので、指定領域の候補は、死斑が表れていない皮膚が写っている位置に設定される可能性が高い。そこで本実施形態では、比較位置決定部４３は、指定領域の候補よりも下側で比較領域の候補を設定する。
【００６１】
指定領域の候補と比較領域の候補が設定されると、探索部４５は、指定領域の候補内の各画素の色相の値の平均値と、比較領域の候補内の各画素の色相の値の平均値との差の絶対値を、色差として算出する。上記のように、色相の値が340°〜360°付近の値となる画素が含まれることもある。そこで、探索部４５は、色相の値が180°よりも大きい画素については、その色相の値から360を減じた値を用いて色相の平均値を算出することが好ましい。そして探索部４５は、対象画像における、指定領域の候補の中心位置の座標及び比較領域の候補の中心位置の座標と、色差とを記憶部２４に記憶する。
【００６２】
探索部４５は、移動先の領域内の画素の何れかが、肌色と異なる色相の値となるまで、すなわち、移動先の領域が肌色を持たなくなるまで、上記と同様の処理を繰り返すことにより、指定領域の候補を１以上設定する。そして探索部４５は、指定領域の候補ごとに、比較領域の候補と色差とを求める。
【００６３】
探索部４５は、全ての指定領域の候補のうち、色差が最大となる指定領域の候補を指定領域とし、その指定領域の候補に対応する比較領域の候補を比較領域とする。そして探索部４５は、対象画像から指定領域を切り出した部分画像及び比較領域を切り出した部分画像を生成し、それらの部分画像と指定領域の中心位置の座標及び比較領域の中心位置の座標を表示制御部４４に渡す。
【００６４】
図１４は、第２の実施形態による、死斑検出支援処理の動作フローチャートである。
探索部４５は、対象画像上で肌の色を持つ領域を指定領域の候補に設定する（ステップＳ２０１）。比較領域決定部４３は、指定領域の候補に対して、対象画像上の重力方向に沿って、上側または下側で比較領域の候補を設定する（ステップＳ２０２）。指定領域の候補及び比較領域の候補が設定されると、探索部４５は、指定領域の候補内の画素の色相の平均値と比較領域の候補内の画素の色相の平均値との色差を算出する。そして探索部４５は、その色差を、指定領域の候補の位置及び比較領域の候補の位置とともに、記憶部２４に記憶する（ステップＳ２０３）。
【００６５】
探索部４５は、指定領域の候補から、対象画像上の重力方向と直交する方向に指定領域の幅だけ移動した領域が肌の色を持つか否か判定する（ステップＳ２０４）。その移動先の領域が肌の色を持つ場合（ステップＳ２０４−Ｙｅｓ）、探索部４５は、その移動先の領域を次の指定領域の候補に設定する（ステップＳ２０５）。そして処理部２５は、ステップＳ２０２〜Ｓ２０４の処理を繰り返す。
【００６６】
一方、移動先の領域が肌の色を持たない場合（ステップＳ２０４−Ｎｏ）、探索部４５は、記憶部２４に記憶されている色差のうちの最大値に相当する指定領域の候補及び比較領域の候補を、それぞれ指定領域及び比較領域に設定する（ステップＳ２０６）。
表示制御部４４は、指定領域及び比較領域に相当する部分画像を、指定領域及び比較領域間の位置関係を示す情報とともに、表示部２１に表示させる（ステップＳ２０７）。そして処理部２５は、死斑検出支援処理を終了する。
【００６７】
人体に死斑が表れている場合、死斑が表れている部分の皮膚の色と死斑が表れていない部分の皮膚の色とは異なる。そのため、上記のように、重力方向に沿った位置が異なる二つの領域間での色差が最大となるとなるように指定領域と比較領域を設定することで、死斑が表れている部分に指定領域または比較領域が設定される可能性が高くなる。
【００６８】
図１５に、第２の実施形態による比較画面１５００の一例を示す。この例では、上記の処理によって、傾き方向に沿った色差が最大となる指定領域１５０１と比較領域１５０２が選択され、その指定領域を拡大した部分画像１５１１と比較領域を拡大した部分画像１５１２とが表示される。
したがって、第２の実施形態による死斑検出支援装置は、自動的に、死斑が表れている可能性が高い部分をユーザに示すことができる。
【００６９】
なお、背景技術にて記載したが、死斑は、死後２０分〜３０分程度経過すると、斑紋状に表れ始め、その後、徐々に広がっていき、死後１２時間程度で死斑は最大となり、その後は、遺体を回転させても、死斑は移動しなくなるという性質がある。このため、斑紋上に表れている場合には、死亡から20分から30分、遺体を回転させて撮影し死斑が移動しない場合には12時間以上経過しているというような死亡時刻の推定が可能となる。当然ながら、遺体の体型、気温、胴か足かなどの部位にて、出現する時間や広さが大きく異なる場合があるために、あらかじめ条件を設定しておき、死亡推定時刻を表示させることも可能である。
【００７０】
さらに他の変形例によれば、上記の各実施形態またはその変形例による死斑検出支援処理は、携帯端末１０の制御部１７によって実行されてもよい。この場合には、携帯端末１０自身が死斑検出支援装置となり、指定領域及び比較領域は、携帯端末１０の表示部１２に表示される。また、携帯端末１０の記憶部１５が、撮影記録データベースなど、死斑検出支援処理に利用されるデータを記憶する。
【００７１】
上記の各実施形態またはその変形例による死斑検出支援処理に関する各機能をコンピュータに実現させるコンピュータプログラムは、磁気記録媒体あるいは光記録媒体といった、コンピュータによって読み取り可能な媒体に記録された形で提供されてもよい。ただし、このコンピュータによって読み取り可能な媒体には、搬送波は含まれない。
【００７２】
ここに挙げられた全ての例及び特定の用語は、読者が、本発明及び当該技術の促進に対する本発明者により寄与された概念を理解することを助ける、教示的な目的において意図されたものであり、本発明の優位性及び劣等性を示すことに関する、本明細書の如何なる例の構成、そのような特定の挙げられた例及び条件に限定しないように解釈されるべきものである。本発明の実施形態は詳細に説明されているが、本発明の精神及び範囲から外れることなく、様々な変更、置換及び修正をこれに加えることが可能であることを理解されたい。
【００７３】
以上説明した実施形態及びその変形例に関し、更に以下の付記を開示する。
（付記１）
画像上での重力方向を示す情報に基づいて、前記画像上の人体の一部が写っている第１の領域よりも重力方向に沿って上側または下側に位置し、かつ人体の他の一部が写っている第２の領域を特定し、前記第１の領域及び前記第２の領域を表示部に表示させる処理部、
を有する死斑検出支援装置。
（付記２）
前記処理部は、前記第１の領域及び前記第２の領域を、重力方向に沿った前記第１の領域と前記第２の領域の位置関係を示す情報とともに前記表示部に表示させる、付記１に記載の死斑検出支援装置。
（付記３）
前記処理部は、前記第１の領域から重力方向に沿って上側または下側に位置する人体と背景との境界を検出し、該境界よりも前記第１の領域側に前記第２の領域を設定する、付記１または２に記載の死斑検出支援装置。
（付記４）
前記第２の領域を探索する方向を、前記第１の領域よりも上側とするか、または前記第１の領域よりも下側とするかを指定する情報を受け付ける操作部をさらに有する、付記１〜３の何れか一項に記載の死斑検出支援装置。
（付記５）
前記処理部は、前記第１の領域及び前記第２の領域とともに、前記画像と、前記画像上での前記第１の領域の位置を示す情報及び前記画像上での前記第２の領域の位置を示す情報を前記表示部に表示させる、付記１〜４の何れか一項に記載の死斑検出支援装置。
（付記６）
前記処理部は、前記第１の領域及び前記第２の領域とともに、前記画像上での重力方向を示す情報を前記表示部に表示させる、付記１〜５の何れか一項に記載の死斑検出支援装置。
（付記７）
前記処理部は、前記画像上で人体の一部が写った第３の領域を設定し、前記画像上での重力方向を示す情報に基づいて、前記第３の領域を前記重力方向に直交する方向に移動しつつ、前記第３の領域の色と、前記第３の領域よりも重力方向に沿って上側または下側に位置し、かつ人体の他の一部が写った第４の領域の色との差を求め、当該差が最大となるときの前記第３の領域及び前記第４の領域を、それぞれ、前記第１の領域及び前記第２の領域とする、付記１または２に記載の死斑検出支援装置。
（付記８）
端末と、サーバとを有する死斑検出支援システムであって、
前記端末は、
撮像面に平行な面における重力方向を検知する傾きセンサを備え、撮影して得られる画像に前記傾きセンサにより検知された重力方向を示す情報を付加する撮像部と、
前記画像を前記サーバへ送信する通信部とを有し、
前記サーバは、
表示部と、
前記画像上での重力方向を示す情報に基づいて、前記画像上の人体の一部が写っている第１の領域よりも重力方向に沿って上側または下側に位置し、かつ人体の他の一部が写っている第２の領域を特定し、前記第１の領域及び前記第２の領域を前記表示部に表示させる処理部と、
を有する死斑検出支援システム。
（付記９）
重力方向を示す情報が付加された画像を取得し、
前記画像上での重力方向を示す情報に基づいて、前記画像上の人体の一部が写っている第１の領域よりも重力方向に沿って上側または下側に位置し、かつ人体の他の一部が写っている第２の領域を特定し、
前記第１の領域及び前記第２の領域を表示部に表示させる、
ことを含むコンピュータにより実行される死斑検出支援方法。
（付記１０）
画像上での重力方向を示す情報に基づいて、前記画像上の人体の一部が写っている第１の領域よりも重力方向に沿って上側または下側に位置し、かつ人体の他の一部が写っている第２の領域を特定し、
前記第１の領域及び前記第２の領域を表示部に表示させる、
ことをコンピュータに実行させるための死斑検出支援用コンピュータプログラム。
【符号の説明】
【００７４】
１    死斑検出支援システム
１０    携帯端末
１１    撮像部
１２    表示部
１３    操作部
１４    位置情報取得部
１５    記憶部
１６    通信部
１７    制御部
２０    サーバ
２１    表示部
２２    操作部
２３    通信部
２４    記憶部
２５    処理部
３０    通信ネットワーク
４１    選択部
４２    領域指定部
４３    比較位置決定部
４４    表示制御部
４５    探索部
【図１】
2014146178.tif 000003
【図２】
2014146178.tif 000004
【図３】
2014146178.tif 000005
【図８】
2014146178.tif 000006
【図１１】
2014146178.tif 000007
【図１２】
2014146178.tif 000008
【図１４】
2014146178.tif 000009
【図４】
2014146178.tif 000010
【図５】
2014146178.tif 000011
【図６】
2014146178.tif 000012
【図７】
2014146178.tif 000013
【図９】
2014146178.tif 000014
【図１０】
2014146178.tif 000015
【図１３】
2014146178.tif 000016
【図１５】
2014146178.tif 000017