(57)【要約】【課題】  脳障害者などの鑑賞者がＴＶ番組やビデオを閲覧していても気分を害することなくメッセージを受け取ることができるメッセージ伝達装置を提供することを目的とする。【解決手段】  コンテンツを表示するＴＶモニタ１、インターネット１００に接続されメッセージを受信する端末装置２０と、受信したメッセージを格納するメモリと、ユーザのＴＶモニタ１への集中度を判定する判定手段と、この判定手段でユーザがＴＶモニタ１への集中度が低いと判定されるとメモリに格納されたメッセージをＴＶモニタ１に表示するように制御する制御装置１０と、を備える。【選択図】  図１
2006277209.tif 000002
【特許請求の範囲】
【請求項１】
コンテンツを提示する提示手段と、メッセージを受信する端末手段と、受信したメッセージを格納する記憶手段と、前記提示手段を用いるユーザの提示手段への集中度を判定する判定手段と、この判定手段でユーザが前記提示手段への集中度が低いと判定されると前記記憶手段に格納されたメッセージを提示手段に提示するように制御する制御手段と、を備えることを特徴とするメッセージ伝達装置。
【請求項２】
前記端末手段はインターネットと接続され、外部の端末から送られるメッセージを受信することを特徴とする請求項１に記載のメッセージ伝達装置。
【請求項３】
前記提示手段は、スピーカと表示装置とで構成されることを特徴とする請求項１または２に記載のメッセージ伝達装置。
【請求項４】
人間の顔領域を含む画像データを撮影して取得する撮影手段と、この撮影手段からの画像データに基づきユーザの動作を検出する検出手段と、を備え、前記判定手段は、この検出手段の出力に応じてユーザの提示手段への集中度を判定することを特徴とする請求項３に記載のメッセージ伝達装置。
【請求項５】
前記検出手段は、ユーザの顔の向きを検出することを特徴とする請求項４に記載のメッセージ伝達装置。
【請求項６】
前記判定手段は、前記検出手段で検出した顔の向きが正面以外に向いている時間を計測し、その計測結果に応じて集中度を判定することを特徴とする請求項５に記載のメッセージ伝達装置。
【発明の詳細な説明】
【技術分野】
【０００１】
この発明は、メッセージ伝達装置に係り、特に、介護者が外出先からメッセージをメールやビデオレターで被介護者へ伝達するメッセージ伝達装置に関するものである。
【背景技術】
【０００２】
病院、医療機関、老人ホームや一般家庭などにおいて、介護や治療を必要とする人に対してテレビ電話を用いて映像及び音声よりメッセージを伝えるＴＶ電話システムが知られている。また、在宅ケアの支援装置としてビデオメールを管理センターなどと送受信するものも知られている（例えば、特許文献１参照）。
【０００３】
痴呆や事故などによる脳障害者にとって、電話やパーソナルコンピュータなどの操作は困難な場合が多いので、ＴＶ電話システムの端末としては、通常のＴＶモニタが脳障害者などの患者側に利用されている。
【特許文献１】特開２００３−３８４５０号公報
【発明の開示】
【発明が解決しようとする課題】
【０００４】
しかしながら、患者が気に入ったＴＶ番組やビデオコンテンツの鑑賞中に割り込みをかけてメッセージを伝えようとすると、患者が不満を感じて気分を害したり、また、メッセージに従わないなどの問題あった。
【０００５】
そこで、この発明は、脳障害者などの鑑賞者がＴＶ番組やビデオを閲覧していても気分を害することなくメッセージを受け取ることができるメッセージ伝達装置を提供することを目的とするものである。
【課題を解決するための手段】
【０００６】
この発明のメッセージ伝達装置は、コンテンツを提示する提示手段と、メッセージを受信する端末手段と、受信したメッセージを格納する記憶手段と、前記提示手段を用いるユーザの提示手段への集中度を判定する判定手段と、この判定手段でユーザが前記提示手段への集中度が低いと判定されると前記記憶手段に格納されたメッセージを提示手段に提示するように制御する制御手段と、を備えることを特徴とする。
【０００７】
前記端末手段はインターネットと接続され、外部の携帯端末から送られるメッセージを受信するように構成できる。
【０００８】
また、前記提示手段は、ＴＶモニタで構成すればよい。
【０００９】
また、この発明は、人間の顔領域を含む対象画像の画像データを撮影して取得する撮影手段と、この撮影手段からの画像データに基づきユーザの動作を検出する検出手段と、を備え、前記判定手段は、この検出手段の出力に応じてユーザの提示手段への集中度を判定するように構成できる。
【００１０】
また、前記検出手段は、ユーザの顔の向きを検出し、前記判定手段は、前記検出手段で検出した顔の向きが正面以外に向いている時間を計測し、その計測結果に応じて集中度を判定することを特徴とする。
【発明の効果】
【００１１】
この発明によれば、痴呆などの脳障害者等の被介護者に対して、提示手段への集中度が低いタイミングを見計らってビデオメッセージ等を表示できるため、ＴＶ番組等に集中している脳障害者等の被介護者の気分を害することなく安全にメッセージを伝達することができる。
【発明を実施するための最良の形態】
【００１２】
この発明の実施の形態について図面を参照しながら詳細に説明する。なお、図中同一または相当部分には同一符号を付し、説明の重複を避けるためにその説明は繰返さない。図１は、この発明の実施形態にかかるメッセージ伝達装置の全体構成を示す概略図、図２は、この発明の実施形態にかかるメッセージ伝達装置における端末装置の構成を示すブロック図、図３は、この発明のメッセージ伝達装置における制御装置１０の構成を中心にしたブロック図である。
【００１３】
この発明のメッセージ伝達装置は、病院、老人ホーム、一般家庭などに用いられる。図１に示す構成は在宅ケアシステムにおいて、この発明のメッセージ伝達装置を適用した例を示している。図１に示すように、この装置は、パーソナルコンピュータ、ワークステーションなどで構成される制御装置１０を含み、提示手段としてＣＲＴ、液晶表示装置、プラズマディスプレイ装置どのＴＶモニタ１にメッセージを表示させるものである。この図１に示すように、介護家庭とインターネット１００とが端末装置２０を介して接続されている。また、医療機関やボランティアが滞在する管理センタ７０もインターネット１００に接続され、管理センタ７０と介護家庭とはインターネット１００を介して接続されることになる。また、携帯端末、例えば、携帯電話６０からもインターネット１００を介して介護家庭の端末装置２０に接続される。
【００１４】
アンテナ４０からのＴＶ信号も端末装置２０に与えられ、端末装置２０からＴＶモニタ１に映像信号、音声信号が供給され、ＴＶモニタ１でＴＶ番組を被介護者が視聴できる。更に、ビデオやＤＶＤプレイヤなどで構成される映像再生装置３０からの映像信号、音声信号が端末装置２０に供給され、ＴＶモニタ１でビデオコンテンツを楽しむことができるように構成されている。
【００１５】
更に、この実施形態では、被介護者（ユーザ）を撮影するビデオカメラ１１を備え、このビデオカメラ１１からの撮像データが制御装置１０に与えられ、後述するように、被介護者の集中度を非接触で検出する。また、ビデオカメラ１１に内蔵のマイクにより、被介護者の発話・周囲の音などを集音する。
【００１６】
管理センタ７０からは、被介護者への連絡事項等をビデオメッセージとしてインターネット１００を介して端末装置２０に送る。また、ＴＶ電話機能が備わっている携帯電話６０からはビデオメッセージがインターネット１００を介して端末装置２０に送ることができる。これにより、介護者が外出先から被介護者にメッセージを送ることができる。
【００１７】
図２に示すように、端末装置２０は、ＣＰＵ（Ｃｅｎｔｒａｌ  Ｐｒｏｃｅｓｓｉｎｇ  Ｕｎｉｔ）２０１、テレビチューナ２０２と、音声スイッチ２０３、映像多重部２０４、ＬＡＮカード（またはモデム）２０５、ブラウザやメールのソフト、受信したメッセージを格納するメモリ２０６とで構成され、それぞれがバス２１０に接続されている。制御装置１０からの制御信号はＣＰＵ２０１に与えられる。ＣＰＵ２０１は、音声スイッチ２０３、映像多重部２０４や、ＬＡＮカード２０５や、メモリ２０６を制御するために制御信号を出力し、バス２１０により各回路に与えられる。音声スイッチ２０３には、チューナ２０２、映像再生装置３０、メモリ２０６に格納されたビデオメッセージ等の音声信号が与えられる。ＣＰＵ２０１により、どの音声信号を出力するか選択される。また、映像多重部２０４には、チューナ２０２、映像再生装置３０、メモリ２０６に格納されたビデオメッセージの映像信号が与えられる。そして、ＣＰＵ２０１により、チューナ２０２、映像再生装置３０、ビデオメッセージのいずれかの映像信号を選択したり、必要に応じてビデオメッセージをＴＶ番組やビデオコンテンツの映像信号にスーパーインポーズして出力する。
【００１８】
音声スイッチ２０３から送られてきた音声信号や、映像多重部２０４から送られてきた映像信号がＴＶモニタ１に出力される。これによりユーザはテレビ番組やビデオコンテンツを見たり、ビデオメール等のメッセージを見たりすることができる。ＣＰＵ２０１は、制御回路１０からの制御信号に応じて、ＴＶ番組、ビデオコンテンツ、ビデオメッセージのどれを出力するか制御する。制御回路１００が被介護者のＴＶモニタ１への集中度を検出し、その検出結果に応じて制御装置１０が端末装置２０に制御信号を送り、ＴＶ番組等を継続して表示するかメッセージの表示等を行うかが制御される。
【００１９】
また、制御装置１０は、ＴＶモニタ１のオン／オフ制御、ＴＶ番組、ビデオコンテンツの切り替え並びにＴＶモニタ１に内蔵されたスピーカの音量、スピーカに与える音声信号を供給する。
【００２０】
図３は、この発明のメッセージ伝達装置における制御装置１０の構成を中心にしたブロック図である。この発明では、制御装置１０により、被介護者のＴＶモニタ１への集中度の判定、この判定に基づく映像コンテンツの切替を制御するものである。このシステムを構成する制御装置１０は、それぞれバス１１０に接続されたＣＰＵ１０１、起動用プログラムが格納されたＲＯＭ（Ｒｅａｄ  Ｏｎｌｙ  Ｍｅｍｏｒｙ）１０２、ワークメモリなどとして用いられるＲＡＭ（Ｒａｎｄｏｍ  Ａｃｃｅｓｓ  Ｍｅｍｏｒｙ）１０３、ハードディスクドライブ１０４を備える。
【００２１】
更に、この制御装置１０は、カメラ１１からの画像を取り込むための画像取り込み装置１０５，マイク１２からの音声データを取り込むための音声取り込み装置１０６を備え、これら画像取り込み装置１０５、音声取り込み装置１０６がバス１１０と接続されている。更に、フロッピィディスク（ＦＤ）が装填され、データの読み取り／書き込みを行うフロッピィディスクドライブ（ＦＤＤ）装置１０７、ＣＤ−ＲＯＭ、ＤＶＤ−ＲＯＭ等の光ディスク装填され、光ディスクに格納されたソフトウェアなどのデータを読み込む光ディスクドライブ装置１０８を備え、これら両ドライブ１０７，１０８からのデータはバス１１０を介してハードディスクドライブ１０４などに与えられる。ＣＰＵ１０１からの制御信号は、インタフェース回路１０９を介して端末装置２０、映像再生装置３０及びＴＶモニタ１に与えられる。
【００２２】
このメッセージ伝達装置の動作は、制御装置１０のハードウェアとＣＰＵ１０１により実行されるソフトウェアとにより実現される。一般的にこのようなソフトウェアは、ＣＤ−ＲＯＭ、ＤＶＤ−ＲＯＭ、ＦＤ等の記憶媒体に格納されて流通し、光ディスクドライブ１０８、ＦＤＤ１０７等により、記憶媒体から読み取られ、ハードディスクドライブ１０４にそのソフトウェアが格納される。また、当該装置がネットワークに接続されている場合には、サーバからハードディスクドライブ１０４にソフトウェアを取り込む。そして、ハードディスクドライブ１０４からＲＡＭ１０３に読み出されＣＰＵ１０１により実行される。
【００２３】
また、カメラ１１からの画像データは画像取り込み装置１０５、バス１１０を経てＲＡＭ１０３及びハードディスクドライブ１０４に与えられる。また、マイク１２からの音声データも同様に音声取り込み装置１０６、バス１１０を経てＲＡＭ１０３及びハードディスクドライブ１０４に与えられる。
【００２４】
次に、この発明のメッセージ伝達装置における被介護者の集中度を検出する方法につき説明する。
【００２５】
まず、この発明は、ビデオカメラ１１により被介護者の顔を撮像してるか否か判定し、撮像しているならその位置と向きを抽出して追跡を行う。そのため、ビデオカメラ１１で撮像し、その画像取込み装置１０５から与えられる画像データをＣＰＵ１０１が判定する。この実施形態では、ＣＰＵ１０１は、顔の検出に２段階のステップを踏む。まず、ビデオカメラ１１より得た画像データより、粗く顔の候補点を拾い出し、絞った候補点に対して精度の高い顔らしさの判定を実施する。顔らしさの判定のプロセスで目の位置を抽出し、両目の位置に基づいて鼻位置を抽出する。顔の向きは目と鼻の相対位置関係から推定する。顔の追跡は、両目の中点パターンを毎フレーム更新しながらテンプレートマッチングで追跡する。
【００２６】
顔候補点の抽出につき説明する。顔候補点の抽出プロセスでは、まず、図４に示すように、６つのセグメントに分割した一定サイズの矩形枠で全画面を走査する。セグメントＳｉの領域の平均濃度を［Ｓｉ］で表す。左右の目や眉がそれぞれＳ１とＳ３に入った場合の顔の一般的な濃淡パターンから、次の（１）（２）式で示す不等式が成立すると期待できる。
【００２７】
［Ｓ１］＜［Ｓ２］  且つ  ［Ｓ１］＜［Ｓ４］  …（１）
［Ｓ３］＜［Ｓ２］  且つ  ［Ｓ３］＜［Ｓ６］  …（２）
そこで、不等式（１）（２）が同時に満たされる枠は顔候補とする。このようなフィルタを、ここでは６分割矩形（ＳＳＲ：Ｓｉｘ−Ｓｅｇｍｅｎｔｅｄ  Ｒｅｃｔａｎｇｕｌａｒ）フィルタと呼ぶことにする。
【００２８】
ＳＳＲフィルタを高速で計算するために、中間画像としてｉｎｔｅｇｒａｌ  ｉｍａｇｅを利用する。画像ｆ（ｘ、ｙ）に対してｉｎｔｅｇｒａｌ  ｉｍａｇｅ（ｉｉ）は次の式（３）のように定義される。
【００２９】
【数１】
2006277209.tif 000003
このｉｎｔｅｇｒａｌ  ｉｍａｇｅを次のように、ワンパスで計算することができる。
【００３０】
【数２】
2006277209.tif 000004
ここで、Ｓ（ｘ，ｙ）は行の累積値で、ｓ（−１，ｙ）＝０，ｉｉ（ｘ．−１）＝０とする。
【００３１】
ｉｎｔｅｇｒａｌ  ｉｍａｇｅを利用すると、任意の矩形領域Ｄの画素値の総和はそのコーナーの座標を（ｘ１，ｙ１）、（ｘ２，ｙ１）、（ｘ１，ｙ２）、（ｘ２，ｙ２）とすると、その４点の値から次のように計算できる。
【００３２】
【数３】
2006277209.tif 000005
したがって、ＳＳＲフィルタ計算は、フィルタの大きさによらず一定時間で処理できる。
【００３３】
顔の大きさは予め知ることはできないので、例えば、入力画像３２０×２４０に対して、１２０×７２、８０×４８、６０×３６、４０×２４、３０×１８の５種類のフィルタを適用する。
【００３４】
この実施形態で使用したＳＳＲフィルタのセグメントの比は図４の記号でｗ１＝４、ｗ２＝２、Ｗ３＝４、ｈ１＝ｈ２＝３である。
【００３５】
現実には不等式（１）（２）を満たす点は塊で現れるので、そのクラスターの中心を１つの顔候補とする。
【００３６】
背景の中の顔の写真などを顔候補として抽出しないように、背景差分を利用して、顔候補領域に動きが生じていることを確認することにしている。
【００３７】
次に、顔、非顔の判定を行う。候補点が顔か非顔かの判定には、機械学習アルゴリズムの１つであるＳｕｐｐｏｒｔ  Ｖｅｃｔｏｒ  Ｍａｃｈｉｎｅ（ＳＶＭ）を適用した。ヘアスタイルや髭などの影響を小さくするため、ＳＶＭの学習パターンには、額や口の領域を含めないことにした。図５に典型的な学習パターンの一例を示す。パターンの大きさは３５×２１である。スケールと回転は目の座標によって正規化する。この例では、両目間の距離は２３画素で、目は上から８画素目の列に水平に並んでいる。そしてヒストグラム平坦化の処理で濃度も正規化されている。
【００３８】
候補点をＳＶＭにインプットする前に、そのパターンは学習パターンと同じように正規化する必要がある。そこで、ＳＳＲフィルタの（Ｓ１＋Ｓ４）と（Ｓ３＋Ｓ６）の各領域で最も暗い点と２番目に暗い点を目の候補として抽出する。ＳＳＲフィルタで抽出された１つの顔候補に対して最大４つのパターンがＳＶＭで確かめられることになる。２番目に暗い点までの目の候補とするのは、眉が目より暗く撮像されるケースが少なくないからである。
【００３９】
ＳＶＭによる顔・非顔判定プロセスで目の位置も抽出される。目の追跡処理で問題になるのは、瞬きによって目の形状パターンが瞬間的に大きく変化することである。そのため、目のテンプレートを毎フレーム更新しても追従することができない。そこで、この実施形態では、目に代わって眉間を追跡し、その結果を基に目を再度検出する手順を採用している。眉間のパターンは顔表情が変化してもかなり安定しており、また額部鼻筋は比較的明るく、両側の目部分が楔状に暗いパターンとなっているため位置決めしやすい。眉間追跡後、目はその両サイドに、前フレームと相対的に同じ位置に暗い領域として再探索される。追跡結果は、ＳＶＭによって顔らしさを確認する。
【００４０】
眉間のパターンは毎フレーム更新することにより、顔の向きの変化に対応する。顔の見かけの大きさの変化に対応するため、サブサンプリングによる２／３，１／２，１／３，１／４，１／６の一連の縮小画像を用意して、両目間の距離に応じて、追跡用の縮小画像が決定される。その結果、顔の見かけの大きさが大きく変化しても追跡用のテンプレートのサイズは固定サイズで対応できる。
【００４１】
次に、鼻頭の検出と追跡につき説明する。両目の位置が見つけ出されると、鼻頭を抽出するのは難しくはない。鼻頭は凸形状で皮膚の皺も少ない。従って、照明の方向が異なっても、鼻頭のどこかにハイライトが生じる。図６は目に対して相対的な鼻頭の探索領域を示している。この領域内の最も明るい点が鼻頭候補である。そして、その点が両目から等距離になったならば鼻頭として追跡を開始する。鼻頭の追跡においても、更新型テンプレートのサイズは固定サイズで対応できる。追跡の結果が、図６の領域からはずれた場合には誤追跡として判断し、再度検出処理から始める。
【００４２】
次に、顔の向きの推定処理につき説明する。精度の高い顔の向きの推定には、顔の特徴点の三次元位置を計測するステレオシステムが必要であるが、ここでは、対象者が正面を向いているか否かの判定を行うため、シングルカメラの方法を採用している。
【００４３】
一般に、正面顔の画像では左右の目から鼻頭までの距離はほぼ等しい。そこで、図７に示すように、両目を結ぶラインに鼻頭から垂線を下ろし、その垂線の足が両目の中点からどれくらい離れているかによって、正面を向いているか横方向を向いているかを判定する。高精度は期待できないが、シングルカメラの場合、ロングショットの画像にも適用できる利点がある。
【００４４】
両目と鼻頭の座標を（ｘ１，ｙ１）、（ｘ２，ｙ２）、（ｘ３．ｙ３）とし、ｘ２−ｘ１＝ｘ２１，ｙ２−ｙ１＝ｙ２１とすると、垂線の足の座標は次の式のようになる。
【００４５】
【数４】
2006277209.tif 000006
上記の式によれば、ｒの符号は顔が左右のどちらを向いているかを表し、絶対値はその度合いを表す。
【００４６】
また、同様にして、顔が下へ向いているか上へ向いているかは、両目を結ぶラインに鼻頭から垂線を下ろし、その垂線の距離を測定することで、判定できる。垂線の距離が正面でＴＶモニタ１を注視している状態より小さくなれば、顔が下または上を向いていると判断でき、更に鼻頭の輝度により、下を向いているか、上を向いているか判断できる。上を向くと鼻頭は明るくなり、下を向くと鼻頭は暗くなる。
【００４７】
この発明は、被介護者の顔の向きをＣＰＵ１０１が判断し、その結果により、被介護者がＴＶモニタ１に表示されている映像のコンテンツに興味を抱いて集中しているか否か判断するものである。カメラ１１から取り込んだ被介護者の顔の画像から上記した手法により、顔の方向を判断する。被介護者は興味あるＴＶ番組やビデオコンテンツの映像がＴＶモニタ１に表示されていると、被介護者はＴＶモニタ１を注視しているので、顔の向きが正面を向いている。逆に興味が無い場合には、被介護者はＴＶモニタ１以外を見るようになる。このため、顔の向きが正面の向きから横または下もしくは上を向くようになる。この実施形態では、被介護者の顔の向きを判断し、所定時間内にＴＶモニタ１を見ていない割合を判定し、所定の割合を超えると、被介護者がＴＶモニタ１に表示されているＴＶ番組やビデオコンテンツの映像に興味がないと判断する。このとき、管理センター７０や携帯電話６０からのビデオメッセージなどのメッセージが端末装置２０のメモリ２０６に格納されている場合には、ＴＶモニタ１にそのメッセージを表示及び／または音声出力を行う。
【００４８】
上記したこの実施形態の制御につき図８，図９のフローチャートに従い説明する。まず、メッセージの受信があるか否か判断する（ステップＳ１０）。インターネット１００を介して介護者や医療機関、ボランティアからメッセージが送られてくると、端末装置２０は制御装置１０にメッセージの着信があったことを通知するとともにメッセージを受信する。そして、受信されたメッセージをメモリ２０６に格納する（ステップＳ２）。
【００４９】
続いて、制御装置１０は、ＴＶモニタ１にＴＶ番組あるいはビデオコンテンツが表示されているか否か判断する（ステップＳ３）。ＴＶモニタ１にＴＶ番組あるいはビデオコンテンツが表示されている場合には、被介護者がＴＶモニタ１に集中している度合いを判定するルーチンに進む（ステップＳ４）。また、ＴＶモニタ１に映像等が表示されていない場合に、ステップＳ７に進み、メモリ２０６よりメッセージを読み出し、ＴＶモニタ１にビデオメッセージ等のメッセージを表示させる。
【００５０】
ステップＳ４において、集中度判定のルーチンに入ると、ステップＳ４１にて過去Ｔ秒間以内に被介護者がＴＶモニタ１を見ていなかった割合γを算出する。この算出は、例えば、Ｔ秒間を１０秒間とすると、１０秒間の間でステップＳ１において、上述した手法により、検出した顔の向きが正面以外の場合の時間を計測しておき、その累積時間を基準である１０秒間で除した割合で算出する。このため、制御装置１０は、Ｔ時間（１０秒間）の間の顔の向きの時間を計測し、ＲＡＭ１０２に格納している。
【００５１】
続いて、割合γが閾値を超えたか否か判断する（ステップＳ４２）。ここでは、０．５、すなわち、半分の時間以上顔が正面を向いていないか否か判断される。閾値以下の場合には集中していると判断する。閾値を超えた場合には、集中していないと判断する。
【００５２】
ステップＳ４において判定された結果に基づき被介護者がＴＶモニタ１に集中しているか否か判断する（ステップＳ５）。そして、集中していないと判断されると、ステップＳ７に進み、メモリ２０６よりメッセージを読み出し、ＴＶモニタ１にビデオメッセージ等のメッセージを表示させる。
【００５３】
また、ステップＳ５において、集中していると判断されると、ステップＳ６に進み、ＴＶモニタ１に表示されているビデオコンテンツ等が終了したか否か判断される、終了していない場合には、ステップＳ３に戻り、前述の動作を繰り返す。ステップＳにおいて、終了していると判断されると、ステップＳ７に進み、メモリ２０６よりメッセージを読み出し、ＴＶモニタ１にビデオメッセージ等のメッセージを表示させる。
【００５４】
このように、この発明のメッセージ伝達装置は、被介護者のＴＶモニタ１への集中度を常に監視し、メッセージを受信しても被介護者がＴＶモニタ１に集中している間は、メッセージを表示させない。そして、ＴＶモニタ１の表示が終わるか、集中しなくなるとメッセージを表示させることができる。痴呆などの脳障害者等の被介護者に対して、ＴＶモニタ１への集中度が低いタイミングを見計らってビデオメッセージ等を表示できるため、ＴＶ番組等に集中している脳障害者等の被介護者の気分を害することなく安全にメッセージを伝達することができる。
【００５５】
上記した実施形態においては、被介護者の集中度を顔の向きで判定しているが、被介護者が発する声、手拍子などの動作音で被介護者の集中度を判断するように構成することもできる。被介護者がコンテンツ映像を視聴している時、被介護者の好む歌のコンテンツなどにおいては、コンテンツの音声に合わせて歌を歌ったり、手拍子などを取ることもある。このような状態を判断して、集中度を測定することもできる。
【００５６】
なお、上記した複数の集中度の検出を行い、複数の検出結果に応じて、集中度を判定するように制御しても良い。
【００５７】
また、メッセージがテキスト形式の電子メール形式の場合には、音声合成合成装置を更に付加し、端末装置によって音声読み上げ機能を備えたシステムを構成することもできる。
【００５８】
また、上記した実施形態においては、集中度の判断を非接触の状態で行っているが、被介護者の頭に測定装置を取り付け、脳波などから集中度を判断することもできる。
【００５９】
また、上記実施形態においては、映像と音声の両方を提示するように構成したが、音声データのみ提供するシステムにもこの発明は適用できる。
【００６０】
また、上記実施形態においては、端末装置２０と制御装置１０を別構成にしているが、１つのコンピュータで両者の機能を実施することはもちろん可能である。
【００６１】
更に、図１に示した構成ではインターネット１００を介して被介護者の端末装置２０と接続されるが、これに限らず電話回線、専用回線などで接続する場合にもこの発明は適用できる。さらに、病院、老人ホームなどに適用する場合には、ＬＡＮなどと病室などに設置される端末装置２０を接続し、サーバやナースセンタからメッセージを送るように構成する場合にもこの発明は適用できる。
【００６２】
今回開示された実施の形態はすべての点で例示であって制限的なものではないと考えられるべきである。本発明の範囲は、上記した実施の形態の説明ではなくて特許請求の範囲によって示され、特許請求の範囲と均等の意味および範囲内でのすべての変更が含まれることが意図される。
【産業上の利用可能性】
【００６３】
この発明は、脳障害者などを介護する家庭や施設などに用いることができる。
【図面の簡単な説明】
【００６４】
【図１】この発明の実施形態にかかるメッセージ伝達装置の構成を示す概略図である。
【図２】この発明の実施形態にかかるメッセージ伝達装置に用いられる端末装置の構成を示すブロック図である。
【図３】この発明のメッセージ伝達装置におけるコンピュータの構成を中心にしたブロック図である。
【図４】この発明の顔の向きを検出する際に用いる場合の、画像枠を６つのセグメントに分けたＳＳＲフィルタを示す説明図である。
【図５】この発明の顔の向きを検出する際に用いる場合の典型的な学習パターンを示す模式図である。
【図６】目に対して相対的な鼻頭の探索領域を示す模式図である。
【図７】両目と鼻頭との関係を示す図である。
【図８】この発明の第１実施形態にかかるメッセージ伝達装置の動作を説明するためのフローチャートである。
【図９】この発明の第１実施形態にかかるメッセージ伝達装置の動作を説明するためのフロ
【符号の説明】
【００６５】
１  ＴＶモニタ、１０  制御装置、１１  ビデオカメラ、２０  端末装置、６０  携帯電話  ７０  管理センタ  １００  インターネット。
【図１】
2006277209.tif 000007
【図２】
2006277209.tif 000008
【図３】
2006277209.tif 000009
【図４】
2006277209.tif 000010
【図５】
2006277209.tif 000011
【図６】
2006277209.tif 000012
【図７】
2006277209.tif 000013
【図８】
2006277209.tif 000014
【図９】
2006277209.tif 000015