(57)【要約】  赤外線カメラ（１８）は、被写体を撮影して被写体の熱画像を生成する。距離センサ（１９）は、情報処理装置（１０）から被写体の各点までの距離を検出する。ディスプレイ（１３）は熱画像を表示する。記憶装置（１６）は、被写体の温度と画素の色との対応関係を示す温度・色変換テーブルを記憶する。制御装置（１１）は、温度・色変換テーブルに基づいて熱画像を処理してディスプレイ（１３）に表示させる。制御装置（１１）は、距離センサ（１９）により検出された距離に基づいて、被写体の基準点（Ｐａ）から所定距離の範囲にある関心対象領域を特定し、関心対象領域に含まれる各点の温度に基づいて温度範囲の下限値及び上限値を設定し、温度範囲の下限値及び上限値に基づいて温度・色変換テーブルを更新し、更新された温度・色変換テーブルに基づいて、熱画像を再生成してディスプレイ（１３）に表示させる。
2020085303.tif 000002
【特許請求の範囲】
【請求項１】
被写体の温度を色で示す熱画像を撮影して表示する情報処理装置であって、
前記被写体を撮影して前記被写体の熱画像を生成する赤外線カメラと、
前記情報処理装置から前記被写体の各点までの距離を検出する距離センサと、
前記熱画像を表示するディスプレイと、
前記被写体の温度と画素の色との対応関係を示す温度・色変換テーブルを記憶する記憶装置と、
前記温度・色変換テーブルに基づいて前記熱画像を処理して前記ディスプレイに表示させる制御装置とを備え、
前記制御装置は、
前記距離センサにより検出された距離に基づいて、前記被写体の基準点から所定距離の範囲にある関心対象領域を特定し、
前記関心対象領域に含まれる各点の温度に基づいて温度範囲の下限値及び上限値を設定し、
前記温度範囲の下限値及び上限値に基づいて前記温度・色変換テーブルを更新し、
更新された前記温度・色変換テーブルに基づいて、前記熱画像を再生成して前記ディスプレイに表示させる、
情報処理装置。
【請求項２】
前記制御装置は、前記熱画像において指定された位置を含む所定範囲に含まれる各画素の温度値を示す温度値ウィンドウを生成して前記ディスプレイに表示させ、
前記温度値ウィンドウは、前記熱画像の一部の領域の画素に対応して２次元的に配置された複数のセルを有し、各セルにおいて温度を示す数値が配置され、各セルの背景色は、各セルの温度と前記温度・色変換テーブルとに基づいて設定される、
請求項１記載の情報処理装置。
【請求項３】
前記情報処理装置は、前記熱画像と同一の被写体を可視光で撮影して前記被写体の可視画像を生成する可視光カメラをさらに備え、
前記ディスプレイは、前記熱画像に並べて、前記可視画像をさらに表示する、
請求項１又は２記載の情報処理装置。
【請求項４】
タブレット端末装置である、
請求項１〜３のうちの１つに記載の情報処理装置。
【請求項５】
被写体の温度を色で示す熱画像を撮影して表示する情報処理方法であって、
赤外線カメラにより前記被写体を撮影して前記被写体の熱画像を生成するステップと、
距離センサにより前記赤外線カメラから前記被写体の各点までの距離を検出するステップと、
前記被写体の温度と画素の色との対応関係を示す温度・色変換テーブルに基づいて前記熱画像を処理するステップと、
前記処理された熱画像をディスプレイに表示するステップとを含み、
前記熱画像を処理するステップは、
前記距離センサにより検出された距離に基づいて、前記被写体の基準点から所定距離の範囲にある関心対象領域を特定するステップと、
前記関心対象領域に含まれる各点の温度に基づいて温度範囲の下限値及び上限値を設定するステップと、
前記温度範囲の下限値及び上限値に基づいて前記温度・色変換テーブルを更新するステップと、
更新された前記温度・色変換テーブルに基づいて前記熱画像を再生成するステップとを含む、
情報処理方法。
【発明の詳細な説明】
【技術分野】
【０００１】
本開示は、被写体の温度を示す熱画像を撮影して表示する情報処理装置及び情報処理方法に関する。
【背景技術】
【０００２】
熱画像は、物体から放射される遠赤外線を用いて、物体の温度を計測するために使用される画像である。熱画像によって物体の温度がわかるので、物体において異常発熱を起こしている箇所、物体中のパイプなどに入り込んだ水の位置、又は壁面内における空洞などの欠陥箇所を、物体から離れた位置から特定することが可能である。一方、熱画像だけでは実際の位置を特定することが困難であるので、可視画像と併せて撮影し、熱画像と可視画像とを合わせて表示することが考案されている。【０００３】
特許文献１は、物体から放射される遠赤外線を検知することによって撮像された画像の処理を行う遠赤外線画像処理装置を開示する。遠赤外線画像処理装置は、遠赤外線カメラによって撮像された遠赤外線画像を示す画像信号を受け付ける画像信号受付部と、遠赤外線画像のうちの特定の領域を示す領域指定情報の入力を受け付ける領域指定受付手段と、遠赤外線画像における、領域指定情報によって示された特定の領域についての遠赤外線の量の分解能を変換した分解能変換画像情報を生成する分解能変換部と、を有する。この構成によれば、遠赤外線画像のうち特に関心の高い特定の領域の遠赤外線の量の分解能のみを変換可能にすることで、画像全体の分解能を維持しつつ、特定の領域の分解能を適切に設定できる。これによって、画像全体の概要を表現しながら、撮像対象のうち特に関心の高い部分の状態を、より的確に表現することができる。
【先行技術文献】
【特許文献】
【０００４】
【特許文献１】特開２００９−０１４４７５号公報
【発明の概要】
【発明が解決しようとする課題】
【０００５】
本開示は、ユーザが熱源の温度を直感的かつ容易に認識することができる情報処理装置及び情報処理方法を提供する。
【課題を解決するための手段】
【０００６】
本開示の一態様によれば、情報処理装置は、被写体の温度を色で示す熱画像を撮影して表示する。情報処理装置は、赤外線カメラ、距離センサ、ディスプレイ、記憶装置、及び制御装置を備える。赤外線カメラは、被写体を撮影して被写体の熱画像を生成する。距離センサは、情報処理装置から被写体の各点までの距離を検出する。ディスプレイは、熱画像を表示する。記憶装置は、被写体の温度と画素の色との対応関係を示す温度・色変換テーブルを記憶する。制御装置は、温度・色変換テーブルに基づいて熱画像を処理してディスプレイに表示させる。制御装置は、距離センサにより検出された距離に基づいて、被写体の基準点から所定距離の範囲にある関心対象領域を特定する。制御装置は、関心対象領域に含まれる各点の温度に基づいて温度範囲の下限値及び上限値を設定する。制御装置は、温度範囲の下限値及び上限値に基づいて温度・色変換テーブルを更新する。制御装置は、更新された温度・色変換テーブルに基づいて、熱画像を再生成してディスプレイに表示させる。
【発明の効果】
【０００７】
本開示の一態様に係る情報処理装置によれば、熱源の温度を直感的かつ容易に認識することができる態様で表示する。これによりユーザは熱源の温度を直感的かつ容易に認識しやすくなる。
【図面の簡単な説明】
【０００８】
【図１】本開示の実施形態に係る情報処理装置１０の構成を示すブロック図である。
【図２】図１の情報処理装置１０の外観を示す図である。
【図３】図１の情報処理装置１０の外観を示す図である。
【図４】図１の制御装置１１によって実行される温度表示処理を示すフローチャートである。
【図５】図４のステップＳ３の温度値ウィンドウ描画処理のサブルーチンを示すフローチャートである。
【図６】図４のステップＳ６の温度範囲調整処理のサブルーチンを示すフローチャートである。
【図７】図１のディスプレイ１３に表示されるプレビュー画像を示す図である。
【図８】図１のディスプレイ１３に表示される温度値ウィンドウＷＤの一例を示す図である。
【図９】図１のディスプレイ１３に表示される温度値ウィンドウＷＤの他の一例を示す図である。
【図１０】図１のディスプレイ１３に表示される温度と表示色との対応関係を説明する図である。
【図１１】図１の情報処理装置１０と被写体１２１〜１２３との配置を示す概略図である。
【図１２】図１のディスプレイ１３に表示される温度値ウィンドウＷＤの一例であって、温度値の変化を識別しにくい場合を示す図である。
【図１３】図１のディスプレイ１３に表示される温度値ウィンドウＷＤの一例であって、温度値の変化が識別しやすくなるように改善された場合を示す図である。
【発明を実施するための形態】
【０００９】
以下、適宜図面を参照しながら、実施形態を詳細に説明する。但し、必要以上に詳細な説明は省略する場合がある。例えば、既によく知られた事項の詳細説明や実質的に同一の構成に対する重複説明を省略する場合がある。これは、以下の説明が不必要に冗長になるのを避け、当業者の理解を容易にするためである。なお、発明者（ら）は、当業者が本開示を十分に理解するために添付図面及び以下の説明を提供するのであって、これらによって特許請求の範囲に記載の主題を限定することを意図するものではない。
【００１０】
（実施形態）
［１−１．構成］
図１は、本開示の実施形態に係る情報処理装置１０の構成を示すブロック図である。情報処理装置１０は、制御装置１１、ディスプレイ１３、記憶装置１６、可視光カメラ１７、赤外線カメラ１８、距離センサ１９、通信モジュール２１、及び機器インタフェース２３を備える。情報処理装置１０は、被写体の温度を色で示す熱画像を撮影して表示する。
【００１１】
制御装置１１は、情報処理装置１０の全体の動作を制御する。制御装置１１はＣＰＵを含み、制御プログラムを実行することにより以下に説明する情報処理装置１０の機能を実現する。なお、制御装置１１は、所定の機能を実現するように専用に設計されたハードウェア回路のみで実現してもよい。制御装置１１は、ＣＰＵ以外に、ＭＰＵ、ＧＰＵ、ＤＳＰ、ＦＰＧＡ、ＡＳＩＣ等の種々の回路で構成されてもよい。
【００１２】
ディスプレイ１３は、被写体の可視画像及び熱画像など、種々の情報を表示する。ディスプレイ１３は、例えば、液晶ディスプレイ又は有機ＥＬディスプレイである。
【００１３】
タッチパネル１５は、ユーザ入力を受ける。タッチパネル１５は、ユーザの指又はスタイラスペンによるタッチ操作を検出する入力装置である。タッチパネル１５は、その入力領域がディスプレイ１３の表示領域と重畳するように配置されている。情報処理装置１０は、入力装置として、タッチパネル１５に代えて、又は、それに加えて、情報処理装置１０に物理的に設けられたボタン及び／又はスライドスイッチなどを備えてもよい。情報処理装置１０は、タッチパネル１５上でのユーザの操作（例えばピンチイン又はピンチアウト操作）に応じて画像を縮小又は拡大してディスプレイ１３に表示することができる。
【００１４】
記憶装置１６は、情報処理装置１０の機能を実現するために必要なデータ、パラメータ、及び制御プログラム等を記憶する記録媒体である。記憶装置１６は、情報処理装置１０の後述の機能を実現するための、熱画像表示アプリケーション１６ａ（制御プログラム）と、温度・色変換テーブル１６ｂとを格納する。記憶装置１６は、例えば、ハードディスク（ＨＤＤ）、半導体記憶装置（ＳＳＤ）、及び／又は半導体メモリ（ＲＡＭ）である。温度・色変換テーブル１６ｂは、赤外線カメラ１８により生成される被写体の熱画像における各画素の温度と、各画素の色との対応関係を示す。
【００１５】
可視光カメラ１７は、可視光の波長領域に感度を持ち、被写体からの可視光を所定のフレームレートで撮影して画像（以下「可視画像」という）を生成する撮像装置である。
赤外線カメラ１８は、赤外線の波長領域に感度を持ち、被写体からの赤外線を所定のフレームレートで撮影し、各画素に被写体の温度を示す情報を含む画像（以下「熱画像」という）を生成する撮像装置である。
【００１６】
距離センサ１９は、情報処理装置１０から被写体の各点までの距離を検出する。距離センサ１９は、例えば、レーザ又は赤外線を用いた測距装置であってもよく、ステレオ測距装置であってもよい。距離センサ１９は、アクティブステレオ方式、ＴＯＦ（Ｔｉｍｅ  Ｏｆ  Ｆｌｉｇｈｔ）方式など、各種公知技術を実装することにより実現される。距離センサ１９は、例えば、赤外線プロジェクタと、一対の赤外線カメラとを備える。赤外線プロジェクタから特定のパターンを赤外線で照射し、一対の赤外線カメラにより取得された画像の差分に基づいて、情報処理装置１０から被写体までの距離を計算する。
【００１７】
可視光カメラ１７、赤外線カメラ１８、及び距離センサ１９は、互いにほぼ同一の画角を有し、これにより、ほぼ同一の被写体を撮影し、また、情報処理装置１０から同一の被写体の各点までの距離を検出するように配置される。
【００１８】
通信モジュール２１は、ネットワークを介して他の装置に接続するための回路（モジュール）であり、３Ｇ、４Ｇ、ＬＴＥ、ＷｉＭＡＸ（登録商標）といった通信規格に従って他の装置と通信する。機器インタフェース２３は、外部機器と接続するための回路（モジュール）であり、ＵＳＢ（登録商標）、ＨＤＭＩ（登録商標）、Ｂｌｕｅｔｏｏｔｈ（登録商標）等の通信規格に従って外部機器と通信する。
【００１９】
図２は、図１の情報処理装置１０の外観を示す図である。図３は、図１の情報処理装置１０の外観を示す図である。情報処理装置１０は、例えばタブレット端末装置である。図２は情報処理装置１０を背面から見た図であり、図３は情報処理装置１０を表面から見た図である。情報処理装置１０は、その背面側に、可視光カメラ１７、赤外線カメラ１８、及び距離センサ１９を備える。情報処理装置１０は、その表面側に、ディスプレイ１３と、ディスプレイ１３に重畳して配置されたタッチパネル１５とを備える。
【００２０】
［１−２．動作］
次に、上述のように構成される情報処理装置１０の動作について説明する。
【００２１】
［１−２−１．温度表示処理］
図４は、図１の制御装置１１によって実行される温度表示処理を示すフローチャートである。図４（及び図５〜図６）の処理は、制御装置１１が熱画像表示アプリケーション１６ａを実行することにより実施される。
【００２２】
ステップＳ１において、制御装置１１は、可視画像及び熱画像をディスプレイ１３に表示する。本実施形態に係る情報処理装置１０は、赤外線カメラ１８で撮影した熱画像と、可視光カメラ１７で撮影した可視画像とを同時にディスプレイ１３に表示する機能を有する。
【００２３】
図７は、図１のディスプレイ１３に表示されるプレビュー画像を示す図である。図７に示すように、ディスプレイ１３には、可視光カメラ１７で撮影された可視画像Ｍ１と、赤外線カメラ１８で撮影された熱画像Ｍ２とが並べて表示される。熱画像Ｍ２の各画素には、当該画素に対応する被写体の点の温度に基づいて所定の色が設定され、これにより、熱画像Ｍ２は被写体の温度分布を示す。可視画像Ｍ１及び熱画像Ｍ２において、被写体として、パーソナルコンピュータ１００と、２つの電源アダプタ１１１、１１２とが表示されている。
【００２４】
可視画像Ｍ１の右方及び熱画像Ｍ２の左方には、各種の操作ボタンが配置される。ボタンＢ１は、温度値ウィンドウ（詳細は後述）を表示する温度値表示モードに切り換えるための温度値ウィンドウボタンである。可視画像Ｍ１及び熱画像Ｍ２の下方には、熱画像Ｍ２の色と温度との対応関係を示すインジケータＳ１が表示される。
【００２５】
また、熱画像Ｍ２上にポインタＰが表示される。ポインタＰの近傍に、ポインタＰで指定された画素の温度である「２７．２°Ｃ」が表示される。ポインタＰは、後述する温度値ウィンドウの中心の画素を指定する。ポインタＰの位置は、ユーザによるタッチ及び／又はドラッグ操作等により熱画像Ｍ２上で自由に変更することができる。
【００２６】
また、ポインタＰの周囲において、ポインタＰに対応する被写体の基準点から所定距離の範囲にある関心対象領域を示すフレームＦが表示される。
【００２７】
前述のように、可視光カメラ１７と赤外線カメラ１８はほぼ同じ画角を有し、ほぼ同じ被写体の画像を撮影する。これにより、ユーザは、可視画像Ｍ１により被写体を確認しながら、熱画像Ｍ２により被写体の温度分布を認識することができる。
【００２８】
再び図４を参照すると、ステップＳ２において、制御装置１１は、ユーザによりボタンＢ１（「温度値ウィンドウボタン」ともいう）がオンされたか否かを判断し、ＹＥＳのときはステップＳ３に進み、ＮＯのときはステップＳ２を繰り返す。ステップＳ３において、制御装置１１は、情報処理装置１０の動作モードを温度値表示モードに切り換え、温度値ウィンドウ描画処理を実行する。温度値ウィンドウ描画処理では、熱画像Ｍ２においてポインタＰを含む所定範囲に含まれる各画素の温度値を示す温度値ウィンドウが生成されて表示される。
【００２９】
図５は、図４のステップＳ３の温度値ウィンドウ描画処理のサブルーチンを示すフローチャートである。
【００３０】
ステップＳ１１において、制御装置１１は、ポインタＰの位置に基づいて、温度値ウィンドウに表示する画素の範囲を決定する。温度値ウィンドウに表示する画素の範囲は、例えば、ポインタＰにより指定された画素を中心とする、熱画像Ｍ２のＭ×Ｎ個（Ｍ及びＮは整数）の画素である。
【００３１】
ステップＳ１２において、制御装置１１は、決定されたＭ×Ｎ個の画素の範囲における各画素の温度値を抽出する。
【００３２】
ステップＳ１３において、制御装置１１は、抽出されたＭ×Ｎ個の画素の温度値に基づいて温度値ウィンドウを生成してディスプレイ１３に表示する。具体的には、温度値ウィンドウＷＤは、熱画像Ｍ２のＭ×Ｎ個の画素に対応して２次元的に配置されたＭ×Ｎ個のセル（例えば矩形領域）を有し、各セルにおいて、セルに対応する熱画像Ｍ２の画素の温度値が配置される。さらに、各セルの背景色は、温度・色変換テーブル１６ｂに基づいて、そのセルに配置する温度値に対応する色に設定される。
【００３３】
図８は、図１のディスプレイ１３に表示される温度値ウィンドウＷＤの一例を示す図である。温度値ウィンドウＷＤは、例えば、可視画像Ｍ１（又は熱画像Ｍ２）に重畳して表示される。例えば、図８の例では、温度値ウィンドウＷＤは、熱画像Ｍ２においてポインタＰにより指定された画素を中心として７×７画素分の温度値を表示する。温度値ウィンドウＷＤの中心のセルＣには、ポインタＰにより指定された画素の温度（２５．０°Ｃ）が表示されている。
【００３４】
図８の例では、温度値ウィンドウＷＤは、ユーザが温度値ウィンドウＷＤを操作するためのボタンＢ１０、Ｂ１１、及びＢ１２を有する。ユーザがボタンＢ１０をドラッグ操作したとき、温度値ウィンドウＷＤは可視画像Ｍ１及び熱画像Ｍ２の上で移動する。ユーザがボタンＢ１１をオンしたとき、温度値ウィンドウＷＤは可視画像Ｍ１の領域を覆うように最大化される。ユーザがボタンＢ１２をオンしたとき、後述する温度範囲調整処理が実行される。
【００３５】
再び図４を参照すると、ステップＳ４において、制御装置１１は、ユーザによりポインタＰが移動されたか否かを判断し、ＹＥＳのときはステップＳ３に戻り、ＮＯのときはステップＳ５に進む。
【００３６】
図９は、図１のディスプレイ１３に表示される温度値ウィンドウＷＤの他の一例を示す図である。温度値ウィンドウＷＤは、熱画像Ｍ２上のポインタＰの位置を基準とした所定範囲の温度を表示するので、熱画像Ｍ２におけるポインタＰの位置が変更されると、温度値ウィンドウＷＤの内容も変更される。ポインタＰは、ユーザが熱画像Ｍ２上の一点をタッチすることにより、又は、ポインタＰのドラッグ操作により移動される。図９の例では、温度値ウィンドウＷＤは、図８のポインタＰとは異なる位置にあるポインタＰにより指定された画素を中心として、図８の温度値ウィンドウＷＤとは異なる７×７画素分の温度値を表示する。温度値ウィンドウＷＤの中心のセルＣには、ポインタＰにより指定された画素の温度（３２．６°Ｃ）が表示されている。また、各セルの背景色は、図８の各セルの背景色とは異なる、そのセルに配置する温度値に対応する色に設定される。
【００３７】
図４のステップＳ４からステップＳ３に戻ったとき、制御装置１１は、新たなポインタＰの位置に基づいて温度値ウィンドウ描画処理を再び実行する。
【００３８】
ステップＳ５において、制御装置１１は、ユーザにより温度値ウィンドウＷＤのボタンＢ１２（「温度範囲調整ボタン」ともいう）が押下されたか否かを判断し、ＹＥＳのときはステップＳ６に進み、ＮＯのときはステップＳ７に進む。ステップＳ６において、制御装置１１は、温度範囲調整処理を実行してステップＳ３に戻る。温度範囲調整処理については後述する。
【００３９】
ステップＳ７において、制御装置１１は、ユーザにより温度値ウィンドウボタンＢ１がオフされたか否かを判断し、ＹＥＳのときはステップＳ８に進み、ＮＯのときはステップＳ４に戻る。ステップＳ８において、制御装置１１は、温度値ウィンドウを非表示にして、処理を終了する。
【００４０】
［１−２−２．温度範囲調整処理］
図１０は、図１のディスプレイ１３に表示される温度と表示色との対応関係を説明する図である。前述のように、熱画像Ｍ２の各画素には、当該画素に対応する被写体の点の温度に基づいて所定の色が設定される。ここで、予め決められた温度範囲の幅Ｗに含まれる各温度に対応して所定の色が設定される。画素の温度が温度範囲の幅Ｗの下限値Ｔｍｉｎから上限値Ｔｍａｘへ変化する場合、画素の色を温度に応じて下限値Ｔｍｉｎに対応する色Ａから上限値Ｔｍａｘに対応する色Ｂへと変化させていく。このとき、画素の色は例えば２５６段階に変化する。温度範囲の幅Ｗの下限値Ｔｍｉｎに対応する色Ａは例えば「青」であり、温度範囲の幅Ｗの上限値Ｔｍａｘに対応する色Ｂは例えば「赤」である。
【００４１】
図８及び図９の例は、２４〜３５°Ｃの温度範囲に含まれる各温度に対応して所定の色が設定される。図８及び図９の温度値ウィンドウＷＤを比較すると、図９の温度値ウィンドウＷＤにおける各セルの温度値の範囲は、図８の温度値ウィンドウＷＤにおける各セルの温度値の範囲よりも狭くなっている。これにより、図９の温度値ウィンドウＷＤにおける各セルの背景色の変化は、図８の温度値ウィンドウＷＤにおける各セルの背景色の変化よりも識別しにくくなっている。
【００４２】
温度値ウィンドウＷＤにおける各セルの温度値の範囲が狭い場合、温度範囲に応じて、各画素の温度と各画素の色との対応関係を再設定すれば、温度値ウィンドウＷＤにおける各セルの背景色の変化を識別しやすくなると考えられる。また、このとき、ユーザの複雑な操作を必要とすることなく、各画素の温度と各画素の色との対応関係を自動的に再設定することが求められる。
【００４３】
図１１は、図１の情報処理装置１０と被写体１２１〜１２３との配置を示す概略図である。被写体１２２は、情報処理装置１０においてユーザによって設定されるポインタＰに対応する基準点Ｐａを有する。また、被写体１２２は情報処理装置１０から距離ｄ２の位置にあり、他の被写体１２１，１２２は、情報処理装置１０から、距離ｄ２とは異なる距離ｄ１，ｄ２の位置にある。
【００４４】
図７を参照すると、パーソナルコンピュータ１００及び電源アダプタ１１１，１１２は、情報処理装置１０（図７には図示せず）から互いに異なる距離の位置にある。一般に、ユーザが温度分布について関心を有する被写体は、熱的に分離した（すなわち、熱が伝導しない）複数の物体ではなく、熱が伝導する単一の物体であると考えられる。言い換えると、図７の例では、ユーザにとって、パーソナルコンピュータ１００及び電源アダプタ１１１，１１２のうち、単一の物体の温度分布を知ることができれば十分であると考えられる。従って、被写体の基準点から所定距離の範囲にある関心対象領域を特定し、関心対象領域に含まれる各点の温度を識別しやすく表示することが求められる。
【００４５】
次に、適切な関心対象領域を特定し、関心対象領域に含まれる各点の温度を識別しやすく表示する方法について説明する。
【００４６】
図６は、図４のステップＳ６の温度範囲調整処理のサブルーチンを示すフローチャートである。
【００４７】
ステップＳ２１において、制御装置１１は、ポインタＰの位置に対応する被写体の基準点Ｐａを特定する。
【００４８】
ステップＳ２２において、制御装置１１は、被写体の基準点から所定距離の範囲にある関心対象領域を特定する。図１１を参照すると、関心対象領域は、情報処理装置１０からの距離が、情報処理装置１０から被写体１２２までの距離ｄ２に対して−ｄａ〜＋ｄａの範囲になるように設定される。これにより、被写体１２１，１２３は、関心対象領域から除外される。また、関心対象領域は、情報処理装置１０から基準点Ｐａまでの直線に対して垂直な平面において、基準点Ｐａからの距離がｄｂ以下になるように設定される。これにより、被写体１２２において、基準点Ｐａから距離ｄｂよりも離れた部分は、関心対象領域から除外される。
【００４９】
可視光カメラ１７、赤外線カメラ１８、及び距離センサ１９は、視野角θ１を有する。また、情報処理装置１０から見て関心対象領域に含まれる部分（基準点Ｐａを中心として距離ｄｂの半径の円に含まれる部分）は、見込みの角度θ２を有する。距離センサにより情報処理装置１０から被写体１２２までの距離ｄ２がわかれば、距離ｄ２及びｄｂに基づいて角度θ２／２を計算することができる。次いで、角度θ１及びθ２に基づいて、熱画像Ｍ２において関心対象領域を示すフレームＦの大きさを決めることができる。
【００５０】
ステップＳ２３において、制御装置１１は、関心対象領域に含まれる各点の温度に基づいて、温度範囲の下限値及び上限値を再設定する。ここで、温度範囲の下限値は、基準点Ｐａから所定距離の範囲にある各点の温度のうち、最低の温度値に設定される。また、温度範囲の上限値は、基準点Ｐａから所定距離の範囲にある各点の温度のうち、最高の温度値に設定される。
【００５１】
ステップＳ２４において、制御装置１１は、設定された温度範囲の下限値及び上限値の差分から温度範囲の幅Ｗを算出し、記憶装置１６に保持する。
【００５２】
ステップＳ２５において、制御装置１１は、温度範囲の下限値及び上限値に基づいて、温度・色変換テーブルを更新する。具体的には、設定された温度範囲の下限値及び上限値の差を、予め用意された２５６階調のパレットで色情報に変換し、温度・色変換テーブル１６ｂを更新する。
【００５３】
ステップＳ２６において、制御装置１１は、更新された温度・色変換テーブルに基づいて、熱画像を再生成してディスプレイ１３に表示する。その後、処理は、図４のステップＳ３に戻る。
【００５４】
図１２は、図１のディスプレイ１３に表示される温度値ウィンドウＷＤの一例であって、温度値の変化を識別しにくい場合を示す図である。図１３は、図１のディスプレイ１３に表示される温度値ウィンドウＷＤの一例であって、温度値の変化が識別しやすくなるように改善された場合を示す図である。図１２は、図６の温度範囲調整処理を実行する前の状態を示し、図１３は、図６の温度範囲調整処理を実行した後の状態を示す。すなわち、図１２の例では、温度範囲の幅Ｗを１１°Ｃ（＝３５−２４°Ｃ）に設定していた。これに対して、図１３に示すように、温度範囲の幅Ｗをより狭い２°Ｃ（＝３３−３１°Ｃ）に変更することができる。図１２の例では、電源アダプタ１１１及び１１２の温度差（色の差）を視覚的に区別しにくかった。これに対して、図１３に示すように、温度範囲の幅Ｗを狭くすることで、電源アダプタ１１１よりも電源アダプタ１１２のほうが温度が高いことを容易に認識することができるようになった。すなわち、電源アダプタ１１１及び１１２の温度差（色の差）が視覚的に区別しやすくなった。
【００５５】
以上に説明したように、本実施形態の情報処理装置１０は、適切な関心対象領域を特定し、関心対象領域に含まれる各点の温度に基づいて温度・色変換テーブル１６ｂを更新することにより、関心対象領域に含まれる各点の温度を識別しやすく表示することができる。これにより、ユーザは被写体（熱源）の温度を直感的かつ容易に認識することができる。
【００５６】
なお、関心対象領域の外部において、画素の温度が下限値Ｔｍｉｎ未満である場合、又は、上限値Ｔｍａｘより高い場合は、その画素を無色にしてもよい（例えば、白色又は黒色に設定する）。代替として、関心対象領域の外部において、画素の温度が温度範囲の幅Ｗの下限値Ｔｍｉｎ未満である場合、画素の色を下限値Ｔｍｉｎに対応する色Ａに固定し、温度範囲の幅Ｗの上限値Ｔｍａｘより高い場合、画素の色を上限値Ｔｍａｘに対応した色Ｂに固定してもよい。
【００５７】
赤外線カメラ１８を、距離センサ１９として用いてもよい。この場合、赤外線カメラ１８は、熱画像Ｍ２を撮影する前に、又は、熱画像Ｍ２の撮影と交替して、情報処理装置１０から被写体までの距離を検出する。
【００５８】
情報処理装置１０は、温度範囲を手動で設定するための手段（ユーザインターフェースなど）を備えてもよい。
【００５９】
［１−３．効果等］
本開示の実施形態に係る情報処理装置及び情報処理方法は以下の構成及び効果を有する。
【００６０】
本開示の実施形態に係る情報処理装置は、被写体の温度を色で示す熱画像を撮影して表示する。情報処理装置１０は、赤外線カメラ１８、距離センサ１９、ディスプレイ１３、記憶装置１６、及び制御装置１１を備える。赤外線カメラ１８は、被写体を撮影して被写体の熱画像を生成する。距離センサ１９は、情報処理装置１０から被写体の各点までの距離を検出する。ディスプレイ１３は、熱画像を表示する。記憶装置１６は、被写体の温度と画素の色との対応関係を示す温度・色変換テーブルを記憶する。制御装置１１は、温度・色変換テーブルに基づいて熱画像を処理してディスプレイ１３に表示させる。制御装置１１は、距離センサ１９により検出された距離に基づいて、被写体の基準点Ｐａから所定距離の範囲にある関心対象領域を特定する。制御装置１１は、関心対象領域に含まれる各点の温度に基づいて温度範囲の下限値及び上限値を設定する。制御装置１１は、温度範囲の下限値及び上限値に基づいて温度・色変換テーブルを更新する。制御装置１１は、更新された温度・色変換テーブルに基づいて、熱画像を再生成してディスプレイ１３に表示させる。
【００６１】
これにより、適切な関心対象領域を特定し、関心対象領域に含まれる各点の温度に基づいて温度・色変換テーブル１６ｂを更新することにより、関心対象領域に含まれる各点の温度を識別しやすく表示することができる。これにより、ユーザが熱源の温度を直感的かつ容易に認識することができる。
【００６２】
本開示の実施形態に係る情報処理装置は、制御装置１１は、熱画像において指定された位置を含む所定範囲に含まれる各画素の温度値を示す温度値ウィンドウＷＤを生成してディスプレイ１３に表示させてもよい。温度値ウィンドウＷＤは、熱画像の一部の領域の画素に対応して２次元的に配置された複数のセルを有し、各セルにおいて温度を示す数値が配置され、各セルの背景色は、各セルの温度と温度・色変換テーブルとに基づいて設定される。
【００６３】
これにより、ユーザが熱源の温度を直感的かつ容易に認識することができる。
【００６４】
本開示の実施形態に係る情報処理装置は、情報処理装置１０は、熱画像と同一の被写体を可視光で撮影して被写体の可視画像を生成する可視光カメラ１７をさらに備えてもよい。ディスプレイ１３は、熱画像に並べて、可視画像をさらに表示してもよい。
【００６５】
これにより、熱画像によって表される物体を認識しやすくなる。
【００６６】
本開示の実施形態に係る情報処理装置は、タブレット端末装置であってもよい。
【００６７】
これにより、利便性の高い情報処理装置を容易に提供することができる。
【００６８】
本開示の実施形態に係る情報処理方法は、被写体の温度を色で示す熱画像を撮影して表示する。情報処理方法は、赤外線カメラ１８により被写体を撮影して被写体の熱画像を生成するステップと、距離センサ１９により赤外線カメラ１８から被写体の各点までの距離を検出するステップと、被写体の温度と画素の色との対応関係を示す温度・色変換テーブルに基づいて熱画像を処理するステップと、処理された熱画像をディスプレイ１３に表示するステップとを含む。熱画像を処理するステップは、距離センサ１９により検出された距離に基づいて、被写体の基準点Ｐａから所定距離の範囲にある関心対象領域を特定するステップと、関心対象領域に含まれる各点の温度に基づいて温度範囲の下限値及び上限値を設定するステップと、温度範囲の下限値及び上限値に基づいて温度・色変換テーブルを更新するステップと、更新された温度・色変換テーブルに基づいて熱画像を再生成するステップとを含む。
【００６９】
これにより、適切な関心対象領域を特定し、関心対象領域に含まれる各点の温度に基づいて温度・色変換テーブル１６ｂを更新することにより、関心対象領域に含まれる各点の温度を識別しやすく表示することができる。これにより、ユーザが熱源の温度を直感的かつ容易に認識することができる。
【００７０】
（他の実施形態）
以上のように、本出願において開示する技術の例示として、実施形態を説明した。しかしながら、本開示における技術は、これに限定されず、適宜、変更、置き換え、付加、省略などを行った実施形態にも適用可能である。また、上記実施形態で説明した各構成要素を組み合わせて、新たな実施形態とすることも可能である。そこで、以下、他の実施形態を例示する。
【００７１】
上述の実施形態では、情報処理装置の例としてタブレット端末装置を用いて説明したが、本開示の思想は他の種類の電子機器に対しても適用できる。例えば、本開示の思想は、スマートフォン、ノート型ＰＣ、デスクトップ型ＰＣのような電子機器にも適用できる。
【００７２】
上述の実施形態で示した画素数及び階調数の値は一例であり、上述の値に限定されるものではない。
【００７３】
熱画像表示アプリケーション１６ａ及び温度・色変換テーブル１６ｂは、光ディスク又はメモリカードのような可搬性の記録媒体から情報処理装置１０にインストールしてもよく、ネットワークを介してサーバからダウンロードしてもよい。
【００７４】
以上のように、本開示における技術の例示として、実施形態を説明した。そのために、添付図面及び詳細な説明を提供した。
【００７５】
したがって、添付図面及び詳細な説明に記載された構成要素の中には、課題解決のために必須な構成要素だけでなく、上記技術を例示するために、課題解決のためには必須でない構成要素も含まれ得る。そのため、それらの必須ではない構成要素が添付図面や詳細な説明に記載されていることをもって、直ちに、それらの必須ではない構成要素が必須であるとの認定をするべきではない。
【００７６】
本明細書において、記録媒体に記録されるプログラムを記述するステップは、記載された順序に沿って時系列的に行われる処理は、もちろん、必ずしも時系列的に処理されなくとも、並列的あるいは個別に実行される処理を含むものである。
【００７７】
また、上述の実施形態は、本開示における技術を例示するためのものであるから、特許請求の範囲又はその均等の範囲において種々の変更、置き換え、付加、省略などを行うことができる。
【産業上の利用可能性】
【００７８】
本開示の態様に係る情報処理装置は、対象物の温度を直感的に認識しやすい方法でユーザに提示することを可能とする。よって、本開示の情報処理装置は、対象物の温度をユーザに提示する装置に有用である。
【符号の説明】
【００７９】
１０  情報処理装置
１１  制御装置
１３  ディスプレイ
１６  記憶装置
１６ａ  熱画像表示アプリケーション
１６ｂ  温度・色変換テーブル
１７  可視光カメラ
１８  赤外線カメラ
１９  距離センサ
Ｂ１  温度値ウィンドウボタン
Ｂ１２  温度範囲調整ボタン
Ｍ１  可視画像
Ｍ２  熱画像
【図１】
2020085303.tif 000003
【図２】
2020085303.tif 000004
【図３】
2020085303.tif 000005
【図４】
2020085303.tif 000006
【図５】
2020085303.tif 000007
【図６】
2020085303.tif 000008
【図７】
2020085303.tif 000009
【図８】
2020085303.tif 000010
【図９】
2020085303.tif 000011
【図１０】
2020085303.tif 000012
【図１１】
2020085303.tif 000013
【図１２】
2020085303.tif 000014
【図１３】
2020085303.tif 000015
【手続補正書】
【提出日】令和3年4月6日(2021.4.6)
【手続補正１】
【補正対象書類名】明細書
【補正対象項目名】００４３
【補正方法】変更
【補正の内容】
【００４３】
図１１は、図１の情報処理装置１０と被写体１２１〜１２３との配置を示す概略図である。被写体１２２は、情報処理装置１０においてユーザによって設定されるポインタＰに対応する基準点Ｐａを有する。また、被写体１２２は情報処理装置１０から距離ｄ２の位置にあり、他の被写体１２１，１２３は、情報処理装置１０から、距離ｄ２とは異なる距離ｄ１，ｄ３の位置にある。
【国際調査報告】
2020085303.tif 000016
2020085303.tif 000017
2020085303.tif 000018
2020085303.tif 000019