(57)【要約】【課題】人間の動作変化を検知してその動作変化に応じた応答処理を行う場合に、その動作変化の頻度あるいは回数に応じて応答処理を実行できるようにする。【解決手段】室内コントローラ２は、室内に居る人物を撮影した人物画像を解析した結果、その人物の動作変化が特定動作に該当することを検知した場合に、その頻度あるいは回数に応じて応答処理の実行タイミングを決定して特定動作対応の応答処理として空気調和機１の温度調整を行う。【選択図】  図１
2004278912.tif 000002
【特許請求の範囲】
【請求項１】
人物の動作に応じて応答処理を行う人物応答制御システムであって、
室内に居る人物を撮影し、この人物画像を順次解析することによってその人物の動作変化が特定動作に該当するかを検知する検知手段と、
この検知手段によって特定動作が検知される毎に判定された検知頻度あるいは検知回数に応じて応答処理の実行タイミングを決定する決定手段と、
この決定手段によって実行タイミングであることが決定された際に、前記特定動作対応の応答処理を実行する応答手段と、
を具備したことを特徴とする人物応答制御システム。
【請求項２】
人物の動作に応じて応答処理を行う人物応答制御システムであって、
室内に居る複数の人物を撮影し、この複数の人物画像を順次解析することによって各人物の動作変化が特定動作に該当するかを検知する検知手段と、
この検知手段によって特定動作が検知される毎に特定動作を行った人物の割合を求め、この割合に応じて当該特定動作対応の応答処理を実行する応答手段と、
を具備したことを特徴とする人物応答制御システム。
【請求項３】
前記応答手段は、人物の動作変化に応じて屋内環境を調整する調整処理を実行する、
ようにしたことを特徴とする請求項１あるいは請求項２記載の人物応答制御システム。
【請求項４】
前記応答手段は、特定動作対応の応答処理を実行する際に、前記特定動作を行った人物の割合に応じた処理レベルに対応した応答処理を実行する、
ようにしたことを特徴とする請求項２記載の人物応答制御システム。
【請求項５】
屋内に居る人物に応じて応答処理を行う人物応答制御システムであって、
屋内に居る複数の人物全体の変化を検知する検知手段と、
この検知手段によって検知された人物全体の変化に応じた応答処理を実行する応答手段と、
を具備したことを特徴とする人物応答制御システム。
【請求項６】
前記検知手段は、屋内に居る人数の変化を検知し、
前記応答手段は、前記検知手段によって検知された屋内に居る人数変化に応じて現在の人数に最適な応答処理を実行する、
ようにしたことを特徴とする請求項５記載の人物応答制御システム。
【請求項７】
前記検知手段は、屋内に居る人物の生体熱の分布状態に基づいて人物を検知する赤外線カメラであり、この赤外線カメラによって得られた生体熱の分布状態に基づいて屋内に居る人物全員の合計体温を検知し、
前記応答手段は、前記検知手段によって検出された人物全員の合計体温に応じて屋内温度を調整する、
ようにしたことを特徴とする請求項５記載の人物応答制御システム。
【請求項８】
コンピュータに対して、
屋内に居る人物を撮影し、この人物画像を順次解析することによってその人物の動作変化が特定動作に該当するかを検知する機能と、
特定動作が検知される毎に判定された検知頻度あるいは検知回数に応じて応答処理の実行タイミングを決定する機能と、
実行タイミングであることが決定された際に、前記特定動作対応の応答処理を実行する機能と、
を実現させるためのプログラム。
【請求項９】
コンピュータに対して、
屋内に居る複数の人物を撮影し、この複数の人物画像を順次解析することによって各人物の動作変化が特定動作に該当するかを検知する機能と、
特定動作が検知される毎に特定動作を行った人物の割合を求め、この割合に応じて当該特定動作対応の応答処理を実行する機能と、
を実現させるためのプログラム。
【請求項１０】
コンピュータに対して、
屋内に居る複数の人物全体の変化を検知する機能と、
検知された人物全体の変化に応じた応答処理を実行する機能と、
を実現させるためのプログラム。
【発明の詳細な説明】
【０００１】
【発明の属する技術分野】
この発明は、人物の動作に応じて応答処理を行う人物応答制御システムおよびプログラムに関する。
【０００２】
【従来の技術】
従来、この種の人物応答制御システムとしては、例えば、電子玩具や知能ロボット等のように、人間からの話し掛けや動作を検知すると、それに対応する応答処理を行うようにしたものがある。
また、空調施設付きの部屋内をカメラによって撮影し、この撮影画像を解析することによって人物の覚醒度を判別し、この判別結果に基づいて空調施設を制御するようにした空気調和機の制御装置が知られている（特許文献１参照）。
【０００３】
【特許文献１】
特開平１０−２５９９４３号公報
【０００４】
【発明が解決しようとする課題】
しかしながら、上述した各応答制御システムにあっては、人間の特定動作を検知する毎に、それに対応する応答処理を行う為、例えば、特定動作に似ている動作を行った場合や間違って特定動作を行ってしまったような場合、つまり、意図しない動作を行った場合でも敏感に検知してしまう為、不本意な応答処理が行われるという問題があった。
このことは、屋内に複数の人物が居る場合であっても同様であり、その何れか１人が所定の動作を行うと、それに対応する応答処理を実行してしまう為、他の人にとっては、不本意な結果となってしまう。
【０００５】
第１の発明の課題は、人間の動作変化を検知してその動作変化に応じた応答処理を行う場合に、その動作変化の頻度あるいは回数に応じて応答処理を実行できるようにすることである。
第２の発明の課題は、人間の動作変化を検知してその動作変化に応じた応答処理を行う場合に、複数の人物のうち、特定の動作を行った人物の割合に応じて応答処理を実行できるようにすることである。
第３の発明の課題は、屋内に居る複数の人物全体の変化に応じた応答処理を実行できるようにすることである。
【０００６】
【課題を解決するための手段】
請求項１記載の発明（第１の発明）は、人物の動作に応じて応答処理を行う人物応答制御システムであって、屋内に居る人物を撮影し、この人物画像を順次解析することによってその人物の動作変化が特定動作に該当するかを検知する検知手段と、この検知手段によって特定動作が検知される毎に判定された検知頻度あるいは検知回数に応じて応答処理の実行タイミングを決定する決定手段と、この決定手段によって実行タイミングであることが決定された際に、前記特定動作対応の応答処理を実行する応答手段とを具備するものである。
更に、コンピュータに対して、上述した請求項１記載の発明に示した主要機能を実現させるためのプログラムを提供する（請求項８記載の発明）。
【０００７】
したがって、請求項１、８記載の発明は、屋内に居る人物を撮影した人物画像を解析した結果、その人物の動作変化が特定動作に該当することを検知した場合に、その頻度あるいは回数に応じて応答処理の実行タイミングを決定して特定動作対応の応答処理を実行するようにしたから、人物の自然な動作に応じた応答処理が可能となる他に、不本意な動作に対しては応答せず、蓋然性が高い場合に限って応答することができ、実情に即した応答制御の実現が可能となる。
【０００８】
請求項２記載の発明（第２の発明）は、人物の動作に応じて応答処理を行う人物応答制御システムであって、屋内に居る複数の人物を撮影し、この複数の人物画像を順次解析することによって各人物の動作変化が特定動作に該当するかを検知する検知手段と、この検知手段によって特定動作が検知される毎に特定動作を行った人物の割合を求め、この割合に応じて当該特定動作対応の応答処理を実行する応答手段とを具備するものである。
更に、コンピュータに対して、上述した請求項２記載の発明に示した主要機能を実現させるためのプログラムを提供する（請求項９記載の発明）。
【０００９】
したがって、請求項２、９記載の発明は、屋内に居る複数の人物を撮影した複数の人物画像を解析した結果、各人物の動作変化が特定動作に該当する場合に、その特定動作を行った人物の割合に応じて当該特定動作対応の応答処理を実行するようにしたから、屋内に居る複数の人物のうちその何れか１人が特定動作を行っても応答せず、屋内に居る人物全体の動作を考慮して応答することができ、実情に即した応答制御の実現が可能となる。
【００１０】
なお、請求項１、２記載の発明において、人物の動作変化に応じて屋内環境を調整する調整処理を実行するようにすれば（請求項３記載の発明）、例えば、温度調整、湿度調整等を必要に応じて的確に遠隔制御することができる為、一般家庭に限らず、会社等の組織、公共施設における自動環境調整手段としての活用も期待できる。
また、請求項２記載の発明において、特定動作対応の応答処理を実行する際に、特定動作を行った人物の割合に応じた処理レベルに対応した応答処理を実行するようにすれば（請求項４記載の発明）、人物の割合に応じて段階的な制御が可能となり、より実情に即したものとなる。
【００１１】
請求項５記載の発明（第３の発明）は、屋内に居る人物に応じて応答処理を行う人物応答制御システムであって、屋内に居る複数の人物全体の変化を検知する検知手段と、この検知手段によって検知された人物全体の変化に応じた応答処理を実行する応答手段とを具備するものである。
更に、コンピュータに対して、上述した請求項５記載の発明に示した主要機能を実現させるためのプログラムを提供する（請求項１０記載の発明）。
【００１２】
したがって、請求項５、１０記載の発明は、屋内に居る複数の人物全体の変化を検知し、この人物全体の変化に応じた応答処理を実行するようにしたから、個々の人物を対象とせずに、屋内に居る人物全体を対象として応答することができ、一般家庭に限らず、会社等の組織、公共施設における応答制御手段としての活用を期待できる。
【００１３】
なお、屋内に居る人数の変化を検知し、人数変化に応じて現在の人数に最適な応答処理を実行するようにすれば（請求項６記載の発明）、例えば、スピーカの音量調整、温度調整等を人数に応じて的確に遠隔制御することができる。
また、赤外線カメラによって得られた生体熱の分布状態に基づいて屋内に居る人物全員の合計体温を検知し、この人物全員の合計体温に応じて屋内温度を調整するようにすれば（請求項７記載の発明）、屋内温度を調整する場合に、簡単かつ確実な方法で屋内に居る人物全体の変化を検知することができ、更に、実用効果の高いものとなる。
【００１４】
【発明の実施の形態】
（第１実施形態）
以下、図１〜図７を参照してこの発明の第１実施形態を説明する。
図１は、この実施形態における人物応答制御システムの全体構成を示したブロック図である。
この人物応答制御システムは、室内に居る人物の動作に応じて空気調和機の温度を自動調整する室内空調制御システムであり、一般家庭に設置されている空気調和機１と、この各空気調和機１に対して近距離通信手段（例えば、赤外線通信手段）を介して接続されている室内コントローラ２と、この室内コントローラ２に対して近距離通信手段（例えば、微弱無線手段）を介して接続されている複数台の監視カメラ３とを有する構成となっている。
【００１５】
空気調和機１は、冷暖房機能を備え、室内コントローラ２から発信出力された温度調整用の遠隔制御信号（赤外線信号）を受信すると、その制御内容に応じて温度を制御するようにした通常の構成となっている。なお、この遠隔制御信号（赤外線信号）は、遠隔操作用として備えられている通常のハンディ型コントローラから発信出力される信号に相当する。
室内コントローラ２は、自由に移動可能なハンディタイプあるいは固定的に取り付けられている設置タイプの制御装置であり、空気調和機１に対して遠隔制御信号を発信出力する通信機能が備えられている他、監視カメラ３との間で近距離無線通信を行う通信機能が備えられている。
【００１６】
監視カメラ３は、室内に居る人物の動作変化を監視する為に人物を常時カラー撮影するビデオカメラおよびスチルカメラである。なお、ビデオカメラは、人物の動作変化を検知する動作検知用として設けられ、スチルカメラは、人物を特定する為の人物特定用として設けられたものである。また、１つの部屋には、その撮影可能エリアから人物が外れることを防いだり、人物をその前後方向あるいは左右方向から撮影する為に、２台の監視カメラ３が設置されており、ある監視カメラ３の撮影可能エリアから人物が外れたり、そのエリア内に人物が居ても障害物や他の人の影に入ってしまった場合でも、その人物の動作変化を他の方向に設置されている監視カメラ３によって監視できるようにしている。
【００１７】
各監視カメラ３によって撮影された撮影画像は、室内コントローラ２へ順次送信される。ここで、室内コントローラ２は、監視カメラ３からの撮影画像を順次解析することによってそのその人物の動作変化が特定動作に該当するかを検知するようにしている。ここで、室内コントローラ２は、室内に居る人物が１人の場合には、この特定動作が行われた際に、その動作を行った頻度あるいは回数に応じて温度調整用の遠隔制御信号を発信出力するようにしている。
また、室内に複数の人物が居る場合には、特定動作を行った人数の割合に応じて温度調整用の遠隔制御信号を発信出力するようにしている。
【００１８】
図２は、室内コントローラ２側に設けられている動作応答テーブル２０を説明する為の図である。
この動作応答テーブル２０は、室内に居る人物が行った特定動作に対応して所定の応答処理を実行させる為の情報が設定されているもので、例えば、寒い時の各種の特定動作としては、「背を丸めて両手を擦り合わせる動作」、「手に息を吐きかける」、‥‥であり、また、暑い時の各種の特定動作としては、「額の汗を拭う動作」、「手や物で扇ぐ」、‥‥であり、これらの動作変化パターン固有の「動作変化パターン識別情報」が動作応答テーブル２０に設定されている。また、この実施形態においては、寒い時の各種特定動作対応の応答処理、暑い時の各種特定動作対応の応答処理が動作応答テーブル２０に設定されている。ここで、寒い時の各種特定動作対応の応答処理は、室内温度を１℃上昇させる調整処理であり、また、暑い時の各種特定動作対応の応答処理は、室内温度を１℃下げる調整処理である。
【００１９】
図３は、室内コントローラ２側に設けられている応答タイミング決定テーブル２１を説明する為の図である。
この応答タイミング決定テーブル２１は、特定動作に応じて対応する応答処理を実行開始する為の実行タイミングを決定する為のテーブルであり、各種の「動作変化パターン」とその「パターン識別情報」に対応して予め設定されている「基準回数」、「基準頻度」を記憶する他に、動作変化を検知する毎に更新される「合計実回数」、「単位時間当たりの実回数」を記憶する構成となっている。
【００２０】
「合計実回数」は、人物が入室してから現時点までに特定動作を何回行ったかの累計値であり、「基準回数」は、この「合計実回数」に応じて対応する応答処理の実行タイミングを決定する為に基準となる設定値であり、例えば、「５回」、「３回」、‥‥が設定されている。「単位時間当たりの実回数」は、単位時間当たり特定動作を何回行ったかを示す累計値であり、「基準頻度」は、この「単位時間当たりの実回数」に応じて対応する応答処理の実行タイミングを決定する為に基準となる設定値であり、例えば、「３回／１０分」、「２回／５分」、‥‥が設定されている。ここで、室内コントローラ２は、人物が１人の場合に、その人物による特定動作が検知される毎に更新された「合計実回数」あるいは「単位時間当たりの実回数」が、対応する「基準回数」、「基準頻度」に合致した際に、室内温度の調整処理を開始するようにしている。なお、「単位時間当たりの実回数」は、その単位時間の経過が検出される毎にクリアされる。
【００２１】
図４は、室内コントローラ２側に設けられている判定結果テーブル２２を説明する為の図である。
この判定結果テーブル２２は、室内に複数の人物が居る場合において、各人物毎に特定動作（上着を着る／脱ぐ動作）を行ったか否かを示すと共に寒い時の特定動作（上着を着る動作）を行ったのか、暑い時の特定動作（上着を脱ぐ動作）を行ったのかを示す判定結果を記憶するもので、例えば、判定結果が「０」の場合には、上述の特定動作を行っていないことを示し、また、「＋１」は、寒い時の特定動作を行ったことを示している。なお、図示しないが、「−１」は、暑い時の特定動作を行ったことを示す。室内コントローラ２は、判定結果テーブル２２の内容を参照して、寒い時あるいは暑い時の特定動作を行った人数の割合を求め、この人数の割合に応じて温度調整レベルを決定して室内温度の調整処理を行うようにしている。
【００２２】
図５は、室内コントローラ２の基本的構成要素を示したブロック図である。
ＣＰＵ２３は、記憶装置２４内のオペレーティングシステムや各種アプリケーションソフトにしたがってこの室内コントローラ２の全体動作を制御する中央演算処理装置である。記憶装置２４は、プログラム記憶領域とデータ記憶領域とを有し、磁気的、光学的、半導体メモリ等やその駆動系によって構成されている。この記録装置２４はハードディスク等の固定的なメモリの他、ＣＤ−ＲＯＭ、ＤＶＤ等の着脱自在な記憶媒体を装着可能な構成であってもよい。この記憶装置２４内のプログラムやデータは、必要に応じてＲＡＭ（例えば、スタティックＲＡＭ）２５にロードされたり、ＲＡＭ２５内のデータが記憶装置２４にセーブされる。なお、ＲＡＭ２５は、プログラム実行領域と作業領域とを有している。更に、ＣＰＵ２３は、その入出力周辺デバイスである入力装置２６、表示装置２７、赤外線通信装置２８、微弱無線通信装置２９がバスラインを介して接続されており、入出力プログラムにしたがってＣＰＵ２３はそれらの動作を制御する。
【００２３】
次に、この第１実施形態における人物応答制御システム（室内空調制御システム）の動作概念を図６および図７に示すフローチャートを参照して説明する。ここで、これらのフローチャートに記述されている各機能は、読み取り可能なプログラムコードの形態で格納されており、このプログラムコードにしたがった動作を逐次実行する。また、伝送媒体を介して伝送されてきた上述のプログラムコードにしたがった動作を逐次実行することもできる。このことは後述する他の実施形態においても同様であり、記録媒体の他、伝送媒体を介して外部供給されたプログラム／データを利用してこの実施形態特有の動作を実行することもできる。
【００２４】
図６および図７は、室内コントローラ２の全体動作を示したフローチャートであり、空気調和機１への電源投入に応じて実行開始される。
先ず、室内コントローラ２は、各監視カメラ３（スチルカメラ）に対して撮影指示を与えた後（ステップＡ１）、それに応答して監視カメラ３から送られて来た撮影画像（静止画）を受信すると（ステップＡ２）、この撮影画像を解析して人物が写っているか（室内に人物が居るか）否かをチェックし（ステップＡ３）、人物が室内に居なければ、ステップＡ１に戻り、各監視カメラ３に撮影指示を与えながら人物を検知するまで待機状態となるが、室内に１人でも人物が居れば、この撮影画像内から人物および人数を特定する（ステップＡ４）。
【００２５】
この結果、室内に居る人物が１人であれば（ステップＡ５でＹＥＳ）、その人物を監視対象として特定した後（ステップＡ６）、各監視カメラ３（ビデオカメラ）に対して撮影指示を与える（ステップＡ７）。これに応答して監視カメラ３から送られて来た撮影画像（動画）を受信すると（ステップＡ８）、この撮影画像を解析してその撮影範囲内に監視対象の人物が写っているかをチェックし（ステップＡ９）、写っていなければ、各監視カメラ３（ビデオカメラ）に対して動画撮影の中止を指示するが（ステップＡ１１）、監視対象の人物が写っていれば、その動画を解析しながらその人物の動作変化（比較的大きな動作変化）の有無をチェックする（ステップＡ１０）。
【００２６】
いま、人物が停止したままであったり、殆ど動かないような場合には、ステップＡ１０で動作変化が無いことが検出されてステップＡ８に戻り、撮影画像（動画）を取り込みながら動作変化の監視を続ける。ここで、比較的大きな動作変化を検出した場合には（ステップＡ１０でＹＥＳ）、その動作は、予め決められている各種特定動作パターンの何れに相当するか否かをチェックする（ステップＡ１２）。この場合、上半身や腕等の特定部位を順次着目しながら動作の大きさや移動方向等を総合的に解析して動作変化の特徴を抽出し、この特徴パターンと応答タイミング決定テーブル２１内の動作変化パターンとを順次比較することによって行われる。
【００２７】
ここで、何れの動作変化パターンにも該当しなけば、ステップＡ８に戻って動作変化の監視を続けるが、例えば、寒い時の特定動作として「背を丸めて両手を擦り合わせる動作」等を行ったり、暑い時の特定動として「額の汗を拭う動作」等を行った場合には、応答タイミング決定テーブル２１内の動作変化パターンに該当する為、ステップＡ１３に移り、この動作変化パターン対応の「合計実回数」および「単位時間当たりの実回数」に“１”をそれぞれ加算する更新処理を実行した後、この動作変化パターンに対応して応答タイミング決定テーブル２１内に設定されている「基準回数」を読み出し、この「基準回数」と「合計実回数」とを比較することによって、「合計実回数」が「基準回数」以上となったかをチェックする（ステップＡ１４）。
【００２８】
いま、「合計実回数」が「基準回数」未満の場合には、応答タイミング決定テーブル２１内から特定動作対応の「基準頻度」を読み出し、この「基準頻度」と「単位時間当たりの実回数」とを比較することによって、「単位時間当たりの実回数」が「基準頻度」以上となったかをチェックする（ステップＡ１５）。
この結果、上述のステップＡ１４で「合計実回数」が「基準回数」以上あるいは上述のステップＡ１５で「単位時間当たりの実回数」が「基準頻度」以上であることが検出された場合には、動作応答テーブル２０から当該動作パターン対応の室内温度調整処理を選択し（ステップＡ１６）、この選択処理を実行することによって温度調整用の遠隔制御信号を発信出力する（ステップＡ１７）。
【００２９】
一方、室内に複数の人物が居る場合には（ステップＡ５でＮＯ）、図７のステップＡ１８に移り、各人物画像を初期画像として一時保存しておく。更に、所定時間の経過を待った後（ステップＡ１９）、各監視カメラ３のスチルカメラに対して撮影指示を与え、その撮影画像を受信する（ステップＡ２０）。そして、今回の受信画像の中に人物が写っているかすかを調べ（ステップＡ２１）、人物が居なければ、図６のステップＡ１に戻るが、人物が居れば、この撮影画像内から各人物を特定した後（ステップＡ２２）、人物毎にその人物画像を一時保存しておく（ステップＡ２３）。
【００３０】
この状態において、各人物毎に、その初期画像と今回の受信画像とを比較することによって（ステップＡ２４）、服装の変化があったかをチェックする（ステップＡ２５）。つまり、寒い時の動作として上着を着たか、暑い時の動作として上着を脱いだかを室内に居る全員に対して調べる（ステップＡ２４〜Ａ２８）。この結果、何れかの人物が該当する動作を行って服装が変化した場合には（ステップＡ２５でＹＥＳ）、その変化方向（上着を着たか、脱いだか）を判定し（ステップＡ２６）、上着を着た場合には、プラス方向への変化として「＋１」の判定結果を当該人物に対応して判定結果テーブル２２にセットし、また、上着を脱ぐだ場合には、マイナス方向への変化として「−１」の判定結果を当該人物に対応して判定結果テーブル２２にセットする（ステップＡ２７）。
以下、上述の動作を人物全員に対して行った後、判定結果テーブル２２を参照し、プラス方向／マイナス方向別に「＋１」あるいは「−１」がセットされている割合、つまり、室内に居る全員に対して上着を着た人の割合を求めたり、上着を脱いだ人の割合を求める（ステップＡ２９）。
【００３１】
ここで、判定結果として「＋１」がセットされているプラス方向の場合には（ステップＡ３０）、その割合の大きさに応じて温度を上昇させる為の調整値を決定する（ステップＡ３１〜Ａ３４）。すなわち、算出されたプラス方向の割合と予め決められている基準値とを比較した結果、小さいか、大きいか、中ぐらいかを判別し（ステップＡ３１）、小さい場合には、温度上昇値として「１℃」を決定し（ステップＡ３２）、中ぐらいの場合には、温度上昇値として「２℃」を決定し（ステップＡ３３）、大きい場合には、温度上昇値として「３℃」を決定する（ステップＡ３４）。
【００３２】
同様に、判定結果として「−１」がセットされているマイナス方向の場合には（ステップＡ３５）、その割合の大きさに応じて温度を下げるさせる為の調整値を決定する（ステップＡ３６〜Ａ３９）。すなわち、算出されたマイナス方向の割合と予め決められている基準値とを比較した結果、小さいか、大きいか、中ぐらいかを判別し（ステップＡ３６）、小さい場合には、温度を下げる調整値として「１℃」を決定し（ステップＡ３７）、中ぐらいの場合には、「２℃」を決定し（ステップＡ３８）、大きい場合には、「３℃」を決定する（ステップＡ３９）。
【００３３】
以上のように、この第１実施形態において室内コントローラ２は、室内に居る人物を撮影した人物画像を解析した結果、その人物の動作変化が特定動作に該当することを検知した場合に、その頻度あるいは回数に応じて応答処理の実行タイミングを決定して特定動作対応の応答処理として空気調和機１の温度調整を行うようにしたから、人物の自然な動作に応答した温度調整が可能となる他に、不本意な動作に対しては応答せず、蓋然性が高い場合に限って応答することができ、実情に即した応答制御の実現が可能となる。
【００３４】
また、室内コントローラ２は、室内に居る複数の人物を撮影した複数の人物画像を解析した結果、各人物の動作変化が特定動作（寒い時の動作として上着を着たか、暑い時の動作として上着を脱いだか）に該当する場合に、その特定動作を行った人物の割合に応じて当該特定動作対応の応答処理として温度上昇の調整値を決定したり、温度を下げる調整値を決定して空気調和機１の温度調整を行うようにしたから、室内に居る複数の人物のうちその何れか１人が特定動作を行っても応答せず、室内に居る人物全体の動作を考慮して応答することができ、実情に即した応答制御の実現が可能となる。この場合、割合に応じて室内温度を段階的に調整することが可能となる。
【００３５】
なお、上述した第１実施形態においては、寒い時の特定動作として「背を丸めて両手を擦り合わせる動作」、「手に息を吐きかける」を例示し、また、暑い時の特定動として「額の汗を拭う動作」、「手や物で扇ぐ」を例示したが、その他に、寒い時の特定動作としては、「手を擦り合わせる」、「腕を擦る」、「上着を着る」、「首をすぼめる」、「唇が震える」、「耳を擦る」、「体を縮める」等であってもよい。また、暑い時の特定動としては、「体を広げて座る」、「ネクタイを緩める」等であってもよい。勿論、これらの動作の組み合わせを特定動作として検知するようにしてもよい。
【００３６】
また、上述した第１実施形態においては、特定動作毎に対応する「合計実回数」および「単位時間当たりの実回数」を計数するようにしたが、「合計実回数」、「単位時間当たりの実回数」は、上述した個々の特定動作の何れかを行った場合の合計値であってもよい。例えば、「手を擦り合わせる」、「腕を擦る」、「上着を着る」、‥‥のうち、その何れかの動作が行われる毎に、「合計実回数」、「単位時間当たりの実回数」を更新するようにしてもよい。
【００３７】
また、上述した第１実施形態においては、室内に複数の人物が居る場合に、判定結果テーブル２２にセットされる判定結果として、上着を着たか、上着を脱いだかをセットするようにしたが、寒い時の特定動作として「背を丸めて両手を擦り合わせる動作」、「手に息を吐きかける」等の判定結果あるいは暑い時の特定動として「額の汗を拭う動作」、「手や物で扇ぐ」等の判定結果をセットするようにしてもよい。
また、上述した第１実施形態においては、室内温度を調整する場合を例示したが、その他に、例えば、人物毎に撮影した顔画像の額部分に着目してその光り具合（汗のかき具合）を最初の撮影画像と今回の撮影画像との比較によって判別し、室内の湿度調整も合わせて行うようにしてもよい。
【００３８】
一方、コンピュータに対して、上述した各手段を実行させるためのプログラムコードをそれぞれ記録した記録媒体（例えば、ＣＤ−ＲＯＭ、フロッピィデスク、ＲＡＭカード等）を提供するようにしてもよい。
すなわち、コンピュータが読み取り可能なプログラムコードを有する記録媒体であって、屋内に居る人物を撮影し、この人物画像を順次解析することによってその人物の動作変化が特定動作に該当するかを検知する機能と、特定動作が検知される毎に判定された検知頻度あるいは検知回数に応じて応答処理の実行タイミングを決定する機能と、実行タイミングであることが決定された際に、前記特定動作対応の応答処理を実行する機能とを実現させるためのプログラムを記録したコンピュータが読み取り可能な記録媒体を提供するようにしてもよい。、
【００３９】
また、コンピュータが読み取り可能なプログラムコードを有する記録媒体であって、屋内に居る複数の人物を撮影し、この複数の人物画像を順次解析することによって各人物の動作変化が特定動作に該当するかを検知する機能と、特定動作が検知される毎に特定動作を行った人物の割合を求め、この割合に応じて当該特定動作対応の応答処理を実行する機能とを実現させるためのプログラムを記録したコンピュータが読み取り可能な記録媒体を提供するようにしてもよい。
【００４０】
（第２実施形態）
以下、この発明の第２実施形態について図８を参照して説明する。なお、上述した第１実施形態においては、室内に居る人物の動作変化の頻度あるいは回数に応じて温度調整処理を行ったり、特定動作を行った人物の割合に応じて温度調整処理を行うようにしたが、この第２実施形態においては、室内に居る人物全体の変化に応じた応答処理を実行するようにしたものである。
ここで、両実施形態において基本的に同一のものは、同一符号を付して示し、その説明を省略する他、以下、第２実施形態の特徴部分を中心に説明するものとする。
【００４１】
この第２実施形態においては、室内環境を調整する制御対象として、空気調和機１に限らず、音響装置（図示せず）の音量も自動制御可能としたものである。そして、第２実施形態においては、監視カメラ３として赤外線カメラを使用し、人物の生体熱（人体熱）の分布状態に基づいて室内に居る人物の人数の変化を検知し、この人数変化に応じて音響装置に対する音量を自動制御したり、人物全員の合計体温を検知し、この人物全員の合計体温に応じて空気調和機１に対する温度制御を行うようにしている。
【００４２】
図８は、この第２実施形態における室内コントローラ２の動作を示したフローチャートである。
先ず、室内コントローラ２は、空気調和機１等の電源オン等に応じて送信されて来る制御開始の指示待ち状態において（ステップＢ１）、開始指示を受けた場合には、監視カメラ（赤外線カメラ）３に対して室内撮影指示を与えた後（ステップＢ２）、それに応答して赤外線カメラから送信されて来た撮影画像（サーマルマップ）を受信し（ステップＢ３）、これを初期画像として一時保存しておく（ステップＢ４）。そして、このサーマルマップを解析し、人体熱の分布状態に基づいて室内に居る人物の人数を計数する（ステップＢ５）。
【００４３】
この状態において、所定時間の経過を待った後（ステップＢ６）、再び、監視カメラ（赤外線カメラ）３に対して室内撮影指示を与えて（ステップＢ７）、その撮影画像を受信すると共に（ステップＢ８）、この画像解析によって室内に居る人数を計数する（ステップＢ９）。そして、初期時の計数値（人数）と今回の計数値（人数）とを比較して（ステップＢ１０）、人数変化の有無をチェックする（ステップＢ１１）。ここで、人数変化があれば、音響装置の音量を自動制御する（ステップＢ１２〜Ｂ１６）。すなわち、人数が増えたか、減ったかを調べ（ステップＢ１２）、人数が増えた場合には、現在の設定値が“音量大”ではないことを条件に（ステップＢ１３）、“音量大”に変更する音量調整信号を発信出力し（ステップＢ１４）、また、人数が減った場合には、現在の設定値が“音量小”ではないことを条件に（ステップＢ１５）、“音量小”に変更する音量調整信号を発信出力する（ステップＢ１６）。
【００４４】
次に、初期画像と今回の受信画像とを全体比較しながら画像全体に分布している人体熱の分布状態を解析して人体熱の合計量（人物全員の合計体温）を数値化し（ステップＢ１７）、合計体温の変化有無をチェックする（ステップＢ１８）。つまり、その変化量が予め決められている基準値よりも増えているか、減っているかをチェックし（ステップＢ１９）、増えている場合には、室内温度を１℃下げる調整処理を実行し（ステップＢ２０）、減っている場合には、室内温度を１℃上げる調整処理を実行する（ステップＢ２１）。
以下、ステップＢ２２に移り、空気調和機１等の電源オフ等に応じて送信されて来る制御終了指示を受信したか否かを調べ、終了指示があるまでステップＢ６に戻って上述の動作を繰り返す（ステップＢ６〜Ｂ２２）。
【００４５】
以上のように、この第２実施形態において室内コントローラ２は、室内に居る複数の人物全体の変化を検知し、この人物全体の変化に応じた応答処理を実行するようにしたから、個々の人物を対象とせずに、室内に居る人物全体を対象として応答することができ、一般家庭に限らず、会社等の組織、公共施設における応答制御手段としての活用を期待することができる。この場合、室内に居る人数の変化に応じて現在の人数に最適なスピーカ音量を調整したり、人物全員の合計体温に応じて室内温度を調整することができる。また、赤外線カメラによって得られた人体熱の分布状態に基づいて室内に居る人物の変化を検知するようにしたから、簡単かつ確実な方法で室内に居る人物全体の変化を検知することができる。
【００４６】
なお、上述した第２実施形態においては、人数変化に応じてスピーカの音量調整を行うようにしたが、人数変化に応じて室温調整を調整するようにしてもよい。
また、上述した第２実施形態においては、人物全体の変化として、人数変化、人物全員の体温変化を検知するようにしたが、性別変化、年齢層変化を検知し、性別、年齢層に相応しい応答制御を行うようにしてもよい。
【００４７】
また、コンピュータに対して、上述した各手段を実行させるためのプログラムコードをそれぞれ記録した記録媒体（例えば、ＣＤ−ＲＯＭ、フロッピィデスク、ＲＡＭカード等）を提供するようにしてもよい。
すなわち、コンピュータが読み取り可能なプログラムコードを有する記録媒体であって、屋内に居る複数の人物全体の変化を検知する機能と、検知された人物全体の変化に応じた応答処理を実行する機能とを実現させるためのプログラムを記録したコンピュータが読み取り可能な記録媒体を提供するようにしてもよい。
【００４８】
更に、上述した各実施形態においては、一般家庭の室内環境を制御する場合を例示したが、一般家庭に限らず、会社等の組織、公共施設等の屋内環境を制御する場合であってもよい。
更に、屋内環境を制御する場合に限らず、電子玩具や知能ロボット等の応答動作の制御にも適用可能である。
【００４９】
【発明の効果】
第１の発明（請求項１記載の発明）によれば、屋内に居る人物を撮影した人物画像を解析した結果、その人物の動作変化が特定動作に該当することを検知した場合に、その検知頻度あるいは検知回数に応じて応答処理の実行タイミングを決定して特定動作対応の応答処理を実行するようにしたから、人物の自然な動作に応じた応答処理が可能となる他に、不本意な動作に対しては応答せず、蓋然性が高い場合に限って応答することができ、実情に即した応答制御の実現が可能となる。
第２の発明（請求項２記載の発明）によれば、屋内に居る複数の人物を撮影した複数の人物画像を解析した結果、各人物の動作変化が特定動作に該当する場合に、その特定動作を行った人物の割合に応じて当該特定動作対応の応答処理を実行するようにしたから、屋内に居る複数の人物のうちその何れか１人が特定動作を行っても応答せず、屋内に居る人物全体の動作を考慮して応答することができ、実情に即した応答制御の実現が可能となる。
第３の発明（請求項５記載の発明）によれば、屋内に居る複数の人物全体の変化を検知し、この人物全体の変化に応じた応答処理を実行するようにしたから、個々の人物を対象とせずに、屋内に居る人物全体を対象として応答することができ、一般家庭に限らず、会社等の組織、公共施設における応答制御手段としての活用を期待できる。
【図面の簡単な説明】
【図１】人物応答制御システムの全体構成を示したブロック図。
【図２】室内コントローラ２側に設けられている動作応答テーブル２０を説明する為の図。
【図３】室内コントローラ２側に設けられている応答タイミング決定テーブル２１を説明する為の図。
【図４】室内コントローラ２側に設けられている判定結果テーブル２２を説明する為の図。
【図５】室内コントローラ２の基本的構成要素を示したブロック図。
【図６】空気調和機１への電源投入に応じて実行開始される室内コントローラ２の全体動作を示したフローチャート。
【図７】図６に続く、室内コントローラ２の全体動作を示したフローチャート。
【図８】第２実施形態における室内コントローラ２側の動作を示したフローチャート。
【符号の説明】
１  空気調和機
２  室内コントローラ
３  監視カメラ
２０  動作応答テーブル
２１  応答タイミング決定テーブル
２２  判定結果テーブル
２３  ＣＰＵ２３
２４  記憶装置
２８  赤外線通信装置
２９  微弱無線通信装置
【図１】
2004278912.tif 000003
【図２】
2004278912.tif 000004
【図３】
2004278912.tif 000005
【図４】
2004278912.tif 000006
【図５】
2004278912.tif 000007
【図６】
2004278912.tif 000008
【図７】
2004278912.tif 000009
【図８】
2004278912.tif 000010