(57)【特許請求の範囲】
【請求項１】
監視対象者の居住空間に位置する第１の端末装置と、監視者が目視する第２の端末装置とを具備する監視システムであって、
前記第１の端末装置は、
前記居住空間を撮像する撮像部と、
前記撮像部が撮像した画像に基づいて前記監視対象者の態様を判定する態様判定部と
を備え、
前記第２の端末装置は、
前記態様判定部の判定結果に対応する画像を生成する画像生成部と、
前記画像生成部が生成した画像を表示する表示部と
を備え、
前記態様判定部は、
前記撮像部が撮像した画像において変化の有無を所定の周期で検出し、検出された変化の頻度に基づいて前記監視対象者の活動量を少なくとも３段階で判定し、判定結果を前記態様とする、
ことを特徴とする監視システム。
【請求項２】
請求項１に記載の監視システムであって、
前記態様判定部は、
前記画像の差分の大きさに基づいて、前記監視対象者の活動量を判定する
ことを特徴とする監視システム。
【請求項３】
請求項１又は請求項２のいずれかに記載の監視システムであって、
前記態様判定部は、
前記画像の差分が生じた時間間隔に基づいて、前記監視対象者の活動量を判定する
ことを特徴とする監視システム。
【請求項４】
請求項１から請求項３のいずれか一項に記載の監視システムであって、
前記第２の端末装置は、更に、
操作を受け付ける入力部と、
前記入力部が受け付けた操作に応じた送信データを前記第１の端末装置に送信する通信部と
を備え、
前記第１の端末装置は、更に、
前記第２の端末装置から受信した送信データに基づいた画像又は音声を出力する出力部
を更に備える
ことを特徴とする監視システム。
【請求項５】
監視対象者の居住空間に設置される第１の端末装置と、監視者が操作する第２の端末装置とを具備する監視システムにおける監視方法であって、
前記第１の端末装置が前記居住空間を撮像する撮像ステップと、
前記撮像ステップにおいて撮像した画像に基づいて前記監視対象者の態様を判定する態様判定ステップと、
前記態様判定ステップにおける判定結果に対応する画像を生成する画像生成ステップと、
前記画像生成ステップにおいて生成した画像を前記第２の端末装置に表示する表示ステップと
を有し、
前記態様判定ステップでは、
前記撮像ステップで撮像された画像において変化の有無を所定の周期で検出し、検出された変化の頻度に基づいて前記監視対象者の活動量を少なくとも３段階で判定し、判定結果を前記態様とする、
ことを特徴とする監視方法。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、監視システム、及び監視方法に関する。
【背景技術】
【０００２】
近年、高齢化が進み、親世帯が生活している地域から遠く離れた地域で生活している子世帯が、親の安否を確認できる監視システムに対する需要が拡大している。このような要求に対しては、電話や電子メールなどを用いて連絡を取ることなどが考えられるが、頻繁に連絡を取る場合、子世帯及び親世帯の双方に負担を強いることになってしまう。
これに対して、特許文献１には、親世帯などの監視対象者（被見守り者）が生活する宅内に設置されている家電製品の操作又は動作を検出し、サーバ装置を介して提供する技術が記載されている。家電製品の操作又は動作から監視対象者の行動を推測して、安否を確認しようとするものである。
【先行技術文献】
【特許文献】
【０００３】
【特許文献１】特開２０００−２８０４５３号公報
【発明の概要】
【発明が解決しようとする課題】
【０００４】
しかしながら、特許文献１に記載されている技術では、監視対象者が使用する家電製品の状態を提供するものであり、提供される情報から監視対象者の状態を推測することが監視者（監視対象者の子や孫、見守り者）に求められる。そのため、監視対象者がどのような状態にあるか直感的に把握しにくいという問題がある。また、特許文献１に記載されている技術では、家電製品の状態を提供するサーバ装置にアクセスする必要があり、頻繁に確認するためには煩雑であるという問題がある。
【０００５】
本発明は、上記問題を解決すべくなされたもので、その目的は、監視対象者（被見守り者）の状態を容易に把握することができる監視システム、及び監視方法を提供することにある。
【課題を解決するための手段】
【０００６】
上記問題を解決するために、本発明は、監視対象者の居住空間に位置する第１の端末装置と、監視者が目視する第２の端末装置とを具備する監視システムであって、前記第１の端末装置は、前記居住空間を撮像する撮像部と、前記撮像部が撮像した画像に基づいて前記監視対象者の態様を判定する態様判定部とを備え、前記第２の端末装置は、前記態様判定部の判定結果に対応する画像を生成する画像生成部と、前記画像生成部が生成した画像を表示する表示部とを備えることを特徴とする監視システムである。
【０００７】
また、本発明は、上記に記載の発明において、前記態様判定部は、前記画像の差分の大きさに基づいて、前記監視対象者の活動量を前記態様として判定することを特徴とする。
【０００８】
また、本発明は、上記に記載の発明において、前記態様判定部は、前記画像の差分が生じた時間間隔に基づいて、前記監視対象者の活動量を前記態様として判定することを特徴とする。
【０００９】
また、本発明は、上記に記載の発明において、前記第２の端末装置は、更に、操作を受け付ける入力部と、前記入力部が受け付けた操作に応じた送信データを前記第１の端末装置に送信する通信部とを備え、前記第１の端末装置は、更に、前記第２の端末装置から受信した送信データに基づいた画像又は音声を出力する出力部を更に備えることを特徴とする。
【００１０】
上記問題を解決するために、本発明は、監視対象者の居住空間に設置される第１の端末装置と、監視者が操作する第２の端末装置とを具備する監視システムにおける監視方法であって、前記第１の端末装置が前記居住空間を撮像する撮像ステップと、前記撮像ステップにおいて撮像した画像に基づいて前記監視対象者の態様を判定する態様判定ステップと、前記態様判定ステップにおける判定結果に対応する画像を生成する画像生成ステップと、前記画像生成ステップにおいて生成した画像を前記第２の端末装置に表示する表示ステップとを有することを特徴とする監視方法である。
【発明の効果】
【００１１】
この発明によれば、撮像された画像に基づいて検出した監視対象者の態様に対応する画像を第２の端末装置に表示させる。これにより、監視者は、画像を視認することで監視対象者の態様を容易に把握することができる。
【図面の簡単な説明】
【００１２】
【図１】本実施形態における通信システム１の構成を示す概略ブロック図である。
【図２】本実施形態における通信システム１の第１の通信処理を示すフローチャートである。
【図３】本実施形態における第２の端末装置２０に表示される画像の一例を示す図である。
【図４】本実施形態における通信システム１の第２の通信処理を示すフローチャートである。
【発明を実施するための形態】
【００１３】
以下、図面を参照して、本発明の実施形態における監視システム、及び監視方法を説明する。
図１は、本実施形態における監視システムとしての通信システム１の構成を示す概略ブロック図である。同図に示すように、通信システム１は、第１の端末装置１０と、第２の端末装置２０と、第１の端末装置１０と第２の端末装置２０とを接続するネットワーク３０とを具備している。
第１の端末装置１０は、例えば、高齢の親（監視対象者、被見守り者）が生活する宅内の居間に位置し（又は設置され）、被見守り者の態様を検出する。また、第１の端末装置１０は、検出した態様を示す態様情報を第２の端末装置２０にネットワーク３０を介して送信する。
第２の端末装置２０は、例えば、子世帯が生活する宅内に設置され、第１の端末装置１０から受信した態様情報を出力して、被見守り者の態様を子世帯の子や孫（監視者、見守り者）に通知する。
【００１４】
第１の端末装置１０は、制御部１１、撮像部１２、通信部１３、及び出力部１４を備えている。制御部１１は、差分算出部１１１、態様判定部１１２、及びデータ復元部１１３を有している。
撮像部１２は、設置された居住空間内を撮像し、撮像して得られた画像データを差分算出部１１１に出力する。例えば、撮像部１２は画角が広い光学系を備え、居室内の広い範囲を撮像できるようにする。また、撮像部１２は、予め定められた時間間隔ごとに撮像して画像データを出力してもよいし、連続して撮像した動画データを差分算出部１１１に出力するようにしてもよい。
通信部１３は、ネットワーク３０を介して、制御部１１から入力される各情報を第２の端末装置２０に送信し、第２の端末装置２０から受信する各情報を制御部１１に出力する。
出力部１４は、例えば、表示装置（液晶ディスプレイ）や、スピーカなどであり、制御部１１からの情報を出力する。
【００１５】
差分算出部１１１は、撮像部１２から入力される画像データ又は動画データにおいて、予め定められた時間間隔において生じている変化を検出する。差分算出部１１１は、検出した変化を示す変化情報を態様判定部１１２に出力する。すなわち、差分算出部１１１は、撮像部１２が撮像した画像から、被見守り者の活動量を検出していることになる。
態様判定部１１２は、差分算出部１１１から入力される変化情報に基づいて、被見守り者の行動の大きさや頻度を判定し、判定結果を示す態様情報を通信部１３に出力する。
例えば、態様判定部１１２は、被見守り者の態様を３段階で判定し、「ほとんど動いていない」、「ある程度の動きが検出される」、「頻繁に動きが検出される」のいずれかを示す態様情報を出力する。「ほとんど動いていない」は、一例として、被見守り者が座って本を読んでいたり、テレビを見ていたり、寝ていたりする状態を示す。「ある程度の動きが検出される」は、一例として、被見守り者の動きが検出される状態を示す。「頻繁に動きが検出される」は、一例として、被見守り者が居室内を頻繁に移動している状態（掃除をしている場合など）を示す。具体的には、態様判定部１１２は、画像内の２割以上の領域が１０秒間隔ごとに変化している状態が連続する場合に「頻繁に動きが検出される」と判定し、画像内の２割以上の領域が１０秒間隔ごとに変化している状態が連続的にではないが検出される場合に「ある程度の動きが検出される」と判定し、画像内の２割以上の領域が検出されない場合に「ほとんど動いていない」と判定するようにしてもよい。すなわち、態様判定部１１２は、画像において変化（差分）が生じている時間間隔に基づいて、被見守り者の活動量を判定している。
【００１６】
データ復元部１１３は、通信部１３を介して、第２の端末装置２０から受信した情報を復元し、復元した情報を出力部１４から出力させる。具体的には、データ復元部１１３は、文字情報からなるメッセージを出力部１４（ディスプレイ）に表示させたり、音声情報を出力部１４（スピーカ）から出力させたりする。
【００１７】
第２の端末装置２０は、制御部２１、通信部２２、画像記憶部２３、表示部２４、及び入力部２５を備えている。制御部２１は、画像生成部２１１、及びデータ生成部２１２を有している。
通信部２２は、ネットワーク３０を介して、制御部２１から入力される各情報を第１の端末装置１０に送信し、第１の端末装置１０から受信する各情報を制御部２１に出力する。
画像記憶部２３は、態様判定部１１２による判定結果に応じた画像データを予め記憶している。本実施形態では、「ほとんど動いていない」、「ある程度の動きが検出される」、「頻繁に動きが検出される」それぞれに対応する画像データであって、判定結果を示すキャラクタの画像データが記憶されている。
表示部２４は、例えば、液晶ディスプレイなどであり、制御部２１から入力される画像データを表示する。
入力部２５は、例えば、ボタンや、タッチパネル、キーボード、マイクなどであり、第２の端末装置２０を利用する利用者（見守り者）の操作に応じた情報を入力する。
【００１８】
画像生成部２１１は、通信部２２を介して、第１の端末装置１０から受信した態様情報に対応する画像データを画像記憶部２３から読み出し、読み出した画像データを表示部２４に出力する。画像生成部２１１は、表示部２４に画像データを表示させることにより、被見守り者の態様を見守り者に知らせる。
データ生成部２１２は、入力部２５が入力した情報から送信データを生成し、生成した送信データを通信部２２に出力する。例えば、データ生成部２１２は、ボタンが押下されたことを示す情報や、タッチパネルを介して表示部２４に表示されているキャラクタに対する操作（タップやフリック、スワイプなど）を示す情報、キーボードから入力されたテキストを示す情報、マイクから入力される音声を示す情報などに対して、デジタル化や、情報量の圧縮、暗号化などを行うことにより送信データを生成する。
【００１９】
図２は、本実施形態における通信システム１の第１の通信処理（監視処理）を示すフローチャートである。
第１の端末装置１０において、通信が開始されると、撮像部１２は居室内を撮像し、撮像により得られた画像データを差分算出部１１１に出力する（ステップＳ１０１）。
差分算出部１１１は、撮像部１２が撮像した画像データから居室内における変化を検出して、変化情報を態様判定部１１２に出力する（ステップＳ１０２）。
態様判定部１１２は、変化情報に基づいて、居室内における被見守り者の態様を判定し、判定結果を示す態様情報を通信部１３に出力する（ステップＳ１０３）。
通信部１３は、ネットワーク３０を介して、態様情報を第２の端末装置２０に送信する（ステップＳ１０４）。
第２の端末装置２０において、通信部１３は、第１の端末装置１０から態様情報を受信し、受信した態様情報を画像生成部２１１に出力する（ステップＳ１０５）。
画像生成部２１１は、入力された態様情報に対応する画像データを画像記憶部２３から読み出すことにより、態様情報に対応する画像を生成する（ステップＳ１０６）。
画像生成部２１１は、読み出した画像データを表示部２４に出力して、生成した画像を表示部２４に表示させる（ステップＳ１０７）。
【００２０】
図３は、本実施形態における第２の端末装置２０に表示される画像の一例を示す図である。図３（Ａ）は、「ある程度の動きが検出される」状態に対応する画像であり、被見守り者が起きている状態をキャラクタによって表している。図３（Ｂ）は、「ほとんど動いていない」状態に対応する画像であり、被見守り者がほとんど動いていない状態をキャラクタが寝ていることにより表している。図３（Ｃ）は、「頻繁に動きが検出される」状態に対応する画像であり、被見守り者が動き回っていることをキャラクタが歩いていることにより表している。
【００２１】
上述の第１の通信処理により、通信システム１は、被見守り者が生活する居室内における変化を第１の端末装置１０が検出し、検出した変化に対応する画像を第２の端末装置２０に表示させる。これにより、通信システム１を用いることにより、見守り者（子世帯における子や孫など）は、第２の端末装置２０に備えられている表示部２４を目視することで、被見守り者（高齢の親）の状態を容易に把握することができる。
また、第２の端末装置２０に表示される画像は、第１の端末装置１０が撮像した画像を直接用いずに、被見守り者の態様を表したキャラクタの画像であるので、被見守り者のプライバシーを保ちつつ、状態の把握をすることができる。
【００２２】
図４は、本実施形態における通信システム１の第２の通信処理を示すフローチャートである。
見守り者（子や孫）が第２の端末装置２０に表示された画像を見て、被見守り者（高齢の親）とのコミュニケーションを行うために第２の端末装置２０に備えられている入力部２５を操作すると、入力部２５は操作に応じた情報を入力する（ステップＳ２０１）。見守り者が行う操作としては、例えば、ボタンを押下したり、キーボードを操作してメッセージを入力したり、マイクに向かって話したりする。
データ生成部２１２は、入力部２５に入力された情報から送信データを生成して、通信部２２に出力する（ステップＳ２０２）。
通信部２２は、ネットワーク３０を介して、入力された送信データを第１の端末装置１０に送信する（ステップＳ２０３）。
第１の端末装置１０において、通信部１３は、第２の端末装置２０から送信データを受信すると、受信した送信データをデータ復元部１１３に出力する（ステップＳ２０４）。
データ復元部１１３は、入力された送信データに対して、復号化や、圧縮された情報量の復元などを行うことにより、見守り者が入力した情報を復元する（ステップＳ２０５）。
データ復元部１１３は、復元した情報を出力部１４から出力させる（ステップＳ２０６）。
【００２３】
上述の第１の通信処理により、通信システム１は、被見守り者と見守り者との間のゆるやかなコミュニケーションを提供することができ、見守り者は、被見守り者の状態に応じて、メッセージを送ったり、声を掛けたりすることができる。
例えば、「頻繁に動きが検出される」状態の画像が第２の端末装置２０に表示されている場合に「おばあちゃん、無理しないでね。」などの文字によるメッセージ又は音声情報を第１の端末装置１０に送ったり、通常であれば「ある程度の動きが検出される」時間帯に「ほとんど動いていない」状態の画像が第２の端末装置２０に表示されている場合に「おばあちゃん、大丈夫？」などの文字によるメッセージ又は音声情報を第１の端末装置１０に送信することにより、声を掛けたりするコミュニケーションを図ることができる。
【００２４】
なお、上述の実施形態において、被見守り者の居室に設置されている第１の端末装置１０と、見守り者が利用する第２の端末装置２０とが異なる構成を有する場合について説明した。しかし、これに限ることなく、被見守り者の居室に設置される端末装置と、見守り者が利用する端末装置とが同じ構成を有していてもよい。この場合、被見守り者と見守り者との双方が相手の態様を把握することができると共に、双方向のコミュニケーションを容易に図ることができる。また、この場合、端末装置は、撮像部１２、出力部１４、入力部２５、制御部、通信部１３（２２）、及び画像記憶部２３を備えることになる。また、制御部は、差分算出部１１１、態様判定部１１２、データ復元部１１３、画像生成部２１１、及びデータ生成部２１２を有することになる。
【００２５】
また、上述の実施形態において、第２の端末装置２０で表示する画像を生成するための判定を、第１の端末装置１０における態様判定部１１２が行う構成について説明した。しかし、これに限ることなく、態様判定部１１２を第１の端末装置１０に設けずに、差分算出部１１１が出力する変化情報を第２の端末装置２０に送信し、第２の端末装置２０において、変化情報を受信する間隔に応じて画像生成部２１１が画像データを読み出して、表示部２４に表示させるようにしてもよい。
例えば、画像生成部２１１は、変化情報を受信してから第１の期間が経過するまで図３（Ｃ）の画像を表示し、第１の期間が経過した後に第２の期間が経過するまで図３（Ａ）の画像を表示し、第２の期間が経過した後に図３（Ｂ）の画像を表示する。すなわち、変化情報を受信してから所定の期間（第２の期間）内に新たな変化情報が受信されない場合、第２の端末装置２０の表示部２４に図３（Ｂ）の画像が表示されることになる。このように、差分算出部１１１から変化情報が出力される頻度に応じて、第２の端末装置２０に表示する画像を変化させるようにしてもよい。これにより、第１の端末装置１０を簡易な構成にして、第１の端末装置１０のコストを下げることができる。
【００２６】
また、上述の第２の通信処理において、第１の端末装置１０は、第２の端末装置２０から受信した送信データを出力する構成について説明した。しかし、これに限ることなく、見守り者（子や孫）の音声情報を予め記憶している記憶部を第１の端末装置１０に設け、第２の端末装置２０において入力部２５を構成するボタンが押下された場合に、ボタンが押下されたことを示す情報を第２の端末装置２０から第１の端末装置１０に送信し、データ復元部１１３が前述の記憶部に記憶されている音声情報を出力部１４に出力して、音声を発するようにしてもよい。これにより、複雑な操作を行わずとも、声掛けを容易に行うことができる。
また、第２の端末装置２０におけるボタンの押下に替えて、タッチパネルの操作することにより、第１の端末装置１０から音声情報が出力されるようにしてもよい。また、タッチパネルの操作（タップや、フリック、スワイプ）に応じて出力される音声情報を変えるようにしてもよい。また、第２の端末装置２０においてボタンが押下された場合に、第１の端末装置１０に定型文、例えば「電話で連絡を下さい。」などを表示するようにしてもよい。
【００２７】
また、上述の実施形態において、第２の端末装置２０は、第１の端末装置１０から受信した態様情報に応じた画像を出力する構成について説明した。しかし、これに限ることなく、画像生成部２１１において生成した画像データを、予め登録しておいた他の端末装置に転送するようにしてもよい。この場合、画像生成部２１１は、生成した画像データを通信部２２に出力する。通信部２２は、予め登録されている他の端末装置宛に、入力された画像データを送信する。これにより、見守り者が所有している携帯情報端末、例えば携帯電話やスマートフォンに、被見守り者の態様を示す画像を表示することができ、常に被見守り者の態様を把握することができる。
【００２８】
また、上述の実施形態において、態様判定部１１２が態様情報を暗号化し、画像生成部２１１が復号して態様情報を得るようにしてもよい。これにより、被見守り者のプライバシーを保つことができる。
また、上述の実施形態において、被見守り者の態様を３段階で表す場合について説明したが、これに限ることなく、２段階や４段階以上の判定を行い、判定結果に応じた画像を第２の端末装置２０に表示するようにしてもよい。なお、２段階の判定を行う場合、必ずしも活動量を検出する必要はなく、態様判定部１１２は活動の有無を検出するようにしてもよい。
【００２９】
また、上述の実施形態において、第１の端末装置１０と第２の端末装置２０とは、直接通信（Peer to Peer：Ｐ２Ｐ）を行う構成を説明したが、ネットワーク３０に接続されたサーバ装置を介して、通信するようにしてもよい。
また、上述の実施形態において、第１の端末装置１０が差分算出部１１１及び態様判定部１１２を有する構成を説明したが、ネットワーク３０に接続されたサーバ装置において差分算出部１１１及び態様判定部１１２が行う処理を行うようにしてもよい。また、画像生成部２１１が行う処理を前述のサーバ装置において行うようにしてもよい。これにより、第１の端末装置１０及び第２の端末装置２０を簡易な構成にして、第１の端末装置１０及び第２の端末装置２０のコストを下げることができる。また、前述のサーバ装置にて、画像に対する差分算出や、態様の判定のアルゴリズムを更新することが容易になり、より精度の高い態様の判定を行うことができ、態様の把握の精度を高めることができる。
【００３０】
また、第１の端末装置１０及び第２の端末装置２０は、ネットワーク３０に対して有線又は無線のいずれを用いて接続されていてもよい。また、ネットワーク３０は、公衆回線網であってもよいし、インターネットであってもよいし、携帯電話網であってもよいし、それらを組み合わせたものであってもよい。
また、上述の実施形態にいて、第１の端末装置１０は、被見守り者が生活する居室に配置される場合について説明した。しかし、これに限ることなく、被見守り者が居る場所であれば室内以外に第１の端末装置１０を配置するようにしてもよい。
【００３１】
なお、本発明における第１の端末装置１０及び第２の端末装置２０の機能を実現するためのプログラムをコンピュータ読み取り可能な記録媒体に記録して、この記録媒体に記録されたプログラムをコンピュータシステムに読み込ませ、実行することにより第１の通信処理、第２の通信処理を行ってもよい。なお、ここでいう「コンピュータシステム」とは、ＯＳや周辺機器等のハードウェアを含むものとする。また、「コンピュータシステム」は、ホームページ提供環境（あるいは表示環境）を備えたＷＷＷシステムも含むものとする。また、「コンピュータ読み取り可能な記録媒体」とは、フレキシブルディスク、光磁気ディスク、ＲＯＭ、ＣＤ−ＲＯＭ等の可搬媒体、コンピュータシステムに内蔵されるハードディスク等の記憶装置のことをいう。更に「コンピュータ読み取り可能な記録媒体」とは、インターネット等のネットワークや電話回線等の通信回線を介してプログラムが送信された場合のサーバやクライアントとなるコンピュータシステム内部の揮発性メモリ（ＲＡＭ）のように、一定時間プログラムを保持しているものも含むものとする。
【００３２】
また、上記プログラムは、このプログラムを記憶装置等に格納したコンピュータシステムから、伝送媒体を介して、あるいは、伝送媒体中の伝送波により他のコンピュータシステムに伝送されてもよい。ここで、プログラムを伝送する「伝送媒体」は、インターネット等のネットワーク（通信網）や電話回線等の通信回線（通信線）のように情報を伝送する機能を有する媒体のことをいう。また、上記プログラムは、前述した機能の一部を実現するためのものであっても良い。更に、前述した機能をコンピュータシステムに既に記録されているプログラムとの組み合わせで実現できるもの、いわゆる差分ファイル（差分プログラム）であっても良い。
【符号の説明】
【００３３】
１…通信システム（監視システム）
１０…第１の端末装置
２０…第２の端末装置
３０…ネットワーク
１１，２１…制御部
１２…撮像部
１３，２２…通信部
１４…出力部
２３…画像記憶部
２４…表示部
２５…入力部
１１１…差分算出部
１１２…態様判定部
１１３…データ復元部
２１１…画像生成部
２１２…データ生成部
【図１】
0005909126.tif 000002
【図２】
0005909126.tif 000003
【図４】
0005909126.tif 000004
【図３】
0005909126.tif 000005