(57)【特許請求の範囲】
【請求項１】
装置をアクティブモードにするシステムであって、
ユーザの第１の関心度に関する第１の条件が満たされたか否かをパラメータを測定することで判定する第１のセンサと、
前記第１の条件が満たされたことを前記第１のセンサが判定したことに応じて、前記第１の条件に関するものとは異なるパラメータを測定することで、前記第１の関心度より大きなユーザの第２の関心度に対する第２の条件が満たされたか否かを判定する第２のセンサと、
前記第２の条件が満たされたことを前記第２のセンサが判定したことに応じてアクティブモードに入る装置と
を有し、前記アクティブモードがフラーティングモードであり、
前記第１のセンサは、追加的に、前記第１の関心度より大きなユーザの第３の関心度に関連する第３の条件が満たされているか否かを、前記第１の条件に関するものとは異なるパラメータを測定することで、又は前記第１の条件に関するものと同じパラメータの測定値について、より精密な検査を行うことで判定するように形成されており、
前記装置は、追加的に、前記第３の条件が満たされたことを前記第１のセンサが判定したことに応じて、前記フラーティングモードからユーザインタラクションモードに移るように構築されている、システム。
【請求項２】
前記第２のセンサは、前記第１の条件が満たされたことを前記第１のセンサが判定したことに応じて、エネルギ節約モードからセンシングモードに移るように構築されており、
前記第２のセンサが前記センシングモードにある場合、前記第１のセンサは前記第２のセンサよりも低いエネルギ消費量を使用する、請求項１記載のシステム。
【請求項３】
前記第１のセンサは距離センサであり、前記第１の条件は、
ユーザが前記装置から第１の閾値距離未満の距離にいるか否か、
ユーザが前記装置から遠ざかりつつある、近づきつつある及び／又は不変のままである距離にいるか否か、又は
ユーザが或る閾値より高い又は低い速度で前記装置から遠ざかりつつある又は近づきつつある距離にいるか否か
を含む、請求項１記載のシステム。
【請求項４】
前記第２のセンサが、画像取得装置及び視線検出システムを有し、前記視線検出システムは、顔認識部及び／又は顔方向判定部を有し、前記第２の条件は、
ユーザが存在するか否か、
ユーザが前記装置を眺めているか否か、及び／又は
最初の信号が前記第２のセンサにより受信されて以来、所定の時間的割合以上、ユーザが前記装置を眺めているか否か
を含む、請求項１記載のシステム。
【請求項５】
前記アクティブモードはユーザインタラクションモードを含む、請求項１記載のシステム。
【請求項６】
前記第１のセンサが距離センサであり、
前記第１の条件は、ユーザが前記装置から第１の閾値距離未満の距離にいるか否かを含み、
前記第３の条件は、前記装置から前記第１の閾値距離よりも近い第２の閾値距離未満の距離にユーザがいるか否かを含む、請求項１記載のシステム。
【請求項７】
前記装置が、第４の条件を満たしていることに応じて、前記ユーザインタラクションモードから待ち受けモードに移るように構築されており、
前記第２のセンサは、前記第４の条件が満たされていることに応じてセンシングモードからエネルギ節約モードに移るように構築されている、請求項１記載のシステム。
【請求項８】
前記第４の条件は、ユーザが前記装置から第１の閾値距離より遠い距離にいるか否か及び／又はユーザによる前記装置とのやり取りが所定の期間の間なされなかったか否かを含む、請求項７記載のシステム。
【請求項９】
前記装置は、ユーザによる該装置とのやり取りが行われる場合に前記ユーザインタラクションモードに入るように構築されている、請求項１記載のシステム。
【請求項１０】
外部装置とともに使用する装置であって、
ユーザの第１の関心度に関する第１の条件が満たされたか否かをパラメータを測定することで判定する第１のセンサと、
前記第１の条件が満たされたことを前記第１のセンサが判定したことに応じて、前記第１の条件に関するものとは異なるパラメータを測定することで、前記第１の関心度より大きなユーザの第２の関心度に対する第２の条件が満たされたか否かを判定する第２のセンサと
を有し、当該装置は、前記第２の条件が満たされたことを前記第２のセンサが判定したことに応じてアクティブモードに入るように構築されており、
前記アクティブモードがフラーティングモードであり、
前記第１のセンサは、追加的に、前記第１の関心度より大きなユーザの第３の関心度に関連する第３の条件が満たされているか否かを、前記第１の条件に関するものとは異なるパラメータを測定することで、又は前記第１の条件に関するものと同じパラメータの測定値について、より精密な検査を行うことで判定するように形成されており、
当該装置は、追加的に、前記第３の条件が満たされたことを前記第１のセンサが判定したことに応じて、前記フラーティングモードからユーザインタラクションモードに移るように構築されている、装置。
【請求項１１】
装置をアクティブモードにする方法であって、
ユーザの第１の関心度に関する第１の条件が満たされたか否かをパラメータを測定することで第１のセンサにより判定し、
前記第１の条件が満たされたことを前記第１のセンサが判定したことに応じて、前記第１の条件に関するものとは異なるパラメータを測定することで、前記第１の関心度より大きなユーザの第２の関心度に対する第２の条件が満たされたか否かを第２のセンサにより判定し、
前記第２の条件が満たされたことを前記第２のセンサが判定したことに応じて装置をアクティブモードにするステップ
を有し、前記アクティブモードがフラーティングモードであり、
前記第１のセンサは、追加的に、前記第１の関心度より大きなユーザの第３の関心度に関連する第３の条件が満たされているか否かを、前記第１の条件に関するものとは異なるパラメータを測定することで、又は前記第１の条件に関するものと同じパラメータの測定値について、より精密な検査を行うことで判定するように形成されており、
前記装置は、追加的に、前記第３の条件が満たされたことを前記第１のセンサが判定したことに応じて、前記フラーティングモードからユーザインタラクションモードに移るように構築されている、方法。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、装置をアクティブモードにするシステム、方法及び装置に関連する。特に、本発明はユーザの関心度を判定する複数のセンサを用いて装置をアクティブモードにするシステム、方法及び装置に関連するが、これらに限定されない。
【背景技術】
【０００２】
ユーザが接近した場合に装置をアクティブにする及び/又は制御する多くの技法が開発されている。例えば、ユーザの手が装置に近づいているか否か、或いはユーザの注意が装置に向いているか否か等が判定される。そのような従来技術の一例は特許文献1に開示されている。特許文献1は、ユーザが装置とのやり取りを希望しているか否か、すなわちユーザの関心が装置に向いているか否かを判定しようとする入力装置を開示している。そのようなことが確認されると、入力装置は、コマンドに対応する行為をユーザが行ったか否かを判定する。そして、入力装置はコマンドに従って装置を制御する。
【０００３】
特許文献1はユーザの注意が装置に向いているか否かを判定する様々な方法を開示している。例えば、ユーザの視線を判定すること、ユーザが所定の言葉を声に出したことを検出すること、圧力センサ又はスイッチにユーザが触れたことを検出すること、ユーザの真正面の顔を検出したこと(例えば、対称性により検出できる)或いは特定の身振り(ジェスチャー)をユーザが行ったことを検出すること等である。
【０００４】
しかしながら特許文献1に記載の技法は、ユーザの関心及び身振りを検出して装置を制御するコマンドを生成する際に、複雑なセンサの配置構成を必要とする。従ってそのようなシステムは非効率的に非常に高い消費電力及びプロセッサの使用を必要としてしまう。
【先行技術文献】
【特許文献】
【０００５】
【特許文献１】米国特許第6111580号明細書
【発明の概要】
【発明が解決しようとする課題】
【０００６】
本発明の課題は、消費電力及びプロセッサの利用を節約しつつ、装置をアクティブモードにする信頼性の高い正確で効率的なシステムを提供することである。
【課題を解決するための手段】
【０００７】
一実施例によるシステムは、
装置をアクティブモードにするシステムであって、
ユーザの第１の関心度に関する第１の条件が満たされたか否かをパラメータを測定することで判定する第１のセンサと、
前記第１の条件が満たされたことを前記第１のセンサが判定したことに応じて、前記第１の条件に関するものとは異なるパラメータを測定することで、前記第１の関心度より大きなユーザの第２の関心度に対する第２の条件が満たされたか否かを判定する第２のセンサと、
前記第２の条件が満たされたことを前記第２のセンサが判定したことに応じてアクティブモードに入る装置と
を有し、前記アクティブモードがフラーティングモードであり、
前記第１のセンサは、追加的に、前記第１の関心度より大きなユーザの第３の関心度に関連する第３の条件が満たされているか否かを、前記第１の条件に関するものとは異なるパラメータを測定することで、又は前記第１の条件に関するものと同じパラメータの測定値について、より精密な検査を行うことで判定するように形成されており、
前記装置は、追加的に、前記第３の条件が満たされたことを前記第１のセンサが判定したことに応じて、前記フラーティングモードからユーザインタラクションモードに移るように構築されている、システムである。
【図面の簡単な説明】
【０００８】
【図１ａ】本発明の一実施例によるシステムを表現する図。
【図１ｂ】本発明の別の実施例によるシステムを表現する図
【図２ａ】本発明による第1の方法を示すフローチャート。
【図２ｂ】本発明による第2の方法を示すフローチャート。
【図２ｃ】図2a及び図2bのフローチャートに示す方法とともに使用可能な選択的追加的なフローチャート。
【図２ｄ】図2a、図2b及び図2cのフローチャートに示す方法とともに使用可能な選択的追加的なフローチャート。
【図３ａ】本発明によるフローチャート。
【図３ｂ】本発明による代替的なフローチャート。
【発明を実施するための形態】
【０００９】
本発明の第1形態によれば、装置をアクティブモードにするシステムが提供され、本システムは、ユーザの第1の関心度に関する第1の条件が満たされたか否かを判定する第1のセンサと、第1の条件が満たされたことを第1のセンサが判定したことに応じて、第1の関心度より大きなユーザの第2の関心度に対する第2の条件が満たされたか否かを判定する第2のセンサと、第2の条件が満たされたことを第2のセンサが判定したことに応じてアクティブモードに入る装置とを有する。
【００１０】
本発明の第2形態によれば、装置とともに使用する装置が提供され、本装置は、ユーザの第1の関心度に関する第1の条件が満たされたか否かを判定する第1のセンサと、第1の条件が満たされたことを第1のセンサが判定したことに応じて、第1の関心度より大きなユーザの第2の関心度に対する第2の条件が満たされたか否かを判定する第2のセンサとを有し、本装置は、第2の条件が満たされたことを第2のセンサが判定したことに応じてアクティブモードに入るように構築されている。
【００１１】
本発明の第3形態によれば、装置をアクティブモードにする方法が提供され、本方法は、ユーザの第1の関心度に関する第1の条件が満たされたか否かを第1のセンサにより判定し、第1の条件が満たされたことを第1のセンサが判定したことに応じて、第1の関心度より大きなユーザの第2の関心度に対する第2の条件が満たされたか否かを第2のセンサにより判定し、第2の条件が満たされたことを第2のセンサが判定したことに応じて装置をアクティブモードにするステップを有する。
【００１２】
このように、多様なセンサ(multimodal  sensor)を利用してユーザの関心度を信頼性高く正確に判定することができる。第1の条件が満たされた場合に限って第2のセンサを利用するようにすることで、電力消費及びプロセッサの利用を節約できる。更に、第2の関心度は第1の関心度より大きい。その結果、より大きな関心度が検出された場合に限って装置はアクティブモードに入るので、電力消費及びプロセッサの利用を節約しつつシステムの信頼性及び正確さを更に改善できる。
【００１３】
第2のセンサは、第1の条件が満たされたことを第1のセンサが判定したことに応じて、エネルギ節約モード(例えば、第2のセンサがアクティブにセンシング処理(検出動作)を行っていない比較的電力消費が少ないモード)からセンシングモード(例えば、第2のセンサがセンシング処理を行う比較的消費電力が多いモード)に移るように構築されている。第2のセンサがセンシングモードにある場合、第1のセンサは第2のセンサよりも低いエネルギ消費量(より小さなエネルギーフットプリント(energy  footprint))しか使用しない。第2のセンサがスイッチオフにされている場合はエネルギ節約モードであり、第2のセンサがスイッチオンにされている場合はセンシングモードであり、これによりセンサシステムの電力消費を更に節約する。
【００１４】
第1のセンサは一連の測定値を記録するメモリを有する。第1のセンサは、ある条件が満たされているか否かを判定するために測定値を分析するプロセッサを有し、プロセッサの利用度を節約しつつ高精度化を図る。
【００１５】
第1のセンサは距離センサ(例えば、超音波距離センサ、音波探知式距離計、IRセンサ等)であってもよい。第1の条件は、ユーザが装置から第1の閾値距離未満の範囲内にいるか否かを含んでもよい。代替的に又は追加的に、第1の条件は、ユーザの装置からの距離が、減少しつつある及び/又は不変のままであるか否かを含んでもよい。代替的に又は追加的に、第1の条件は、ユーザの装置からの距離が、或る閾値より高い又は低い速度で減少しつつあるか否かを含んでもよい。その結果、簡易で信頼性が高くエネルギ消費量が少ないセンサを使用できる。
【００１６】
代替的に、第1のセンサは、ユーザの視線を判定すること、ユーザが所定の言葉を声に出したことを検出すること、圧力センサ又はスイッチにユーザが触れたことを検出すること、ユーザの真正面の顔を検出したこと(例えば、対称性により検出できる)或いは特定の身振り(ジェスチャー)をユーザが行ったことを検出することにより、ユーザの注目度を判定してもよい。
【００１７】
第2のセンサは一連の測定値を記録するメモリを有する。第2のセンサは、ある条件が満たされているか否かを判定するために測定値を分析するプロセッサを有し、プロセッサの利用度を節約しつつ高精度化を図る。
【００１８】
第2のセンサはカメラのような画像取得装置(例えば、ウェブカメラ形式の装置)及び視線検出システムを備えていてもよい。視線検出システムは、顔認識部(例えば、顔検出アルゴリズム)及び/又は顔方向判定部を有する。顔方向検出部は、A/D変換部(画像取得装置からのアナログ信号をディジタル信号に変換する)を有する。この処理部は、画像取得装置がディジタル信号を生成するディジタル画像取得装置である場合には不要である。顔方向判定部は、顔領域検出部、特徴検出部及び視線方向算出部を有する。顔領域検出部はディジタル信号からユーザの顔の領域を抽出する。抽出は、ユーザの顔の肌の色に基づいて実行されてもよい。顔の領域の情報は、(例えば、目、まつげ、鼻、口及び/又は耳、又はそれらの一部分、或いは他の顔の特徴等のような)顔の特徴がある付近を抽出する特徴検出部に出力される。視線方向算出部は、顔の中の1つ以上の顔特徴の相対的な位置に従ってユーザの視線方向を算出する。従って第2のセンサはより複雑であり、より大きな関心度を判定し、ユーザが装置とのやり取りを希望していることを信頼性高く検出することができる。
【００１９】
第2の条件は、ユーザが存在するか否か、すなわち第1の条件を満たしたものが実際に人物であるか否か、及び他の何らかの物であるか否かにより判定されてもよい。代替的に又は追加的に、第2の条件は、ユーザが装置を眺めているか否か、或いはユーザが装置の方を眺めているか否かを含んでもよい。代替的に又は追加的に、第2の条件は、第1の信号が第2のセンサにより受信されて以来、所定の時間的割合以上(例えば、50％、60％、75％、80％、90％以上の期間)、ユーザが装置を眺めているか否かを含んでもよい。
【００２０】
或いは、ユーザと装置との間の距離を検出すること、所定の言葉をユーザが声に出したことを検出すること、圧力センサ又はスイッチにユーザが触れたことを検出すること、ユーザの顔の真正面を検出すること(例えば、対称性により検出できる)、或いは特定の身振り(ジェスチャー)をユーザが行ったことを検出することで、第2のセンサはユーザの注目度を判定してもよい。
【００２１】
アクティブモードはユーザがやり取りを行うユーザインタラクションモードでもよい。ユーザインタラクションモードは、装置の全ての機能がユーザにとって直接的にアクセス可能なモードであってもよい。
【００２２】
或いはアクティブモードはフラーティングモード(flirting  mode)でもよい。フラーティングモードは、装置に電源が投入されているが、装置の全ての機能がユーザにとって直接的にはアクセス可能でないモードである(例えば、スクリーンセーバモード、スタートアップスクリーンモード等)。或いは、フラーティングモードは、音を鳴らしたり(例えば、呼び出し音、単調な音、コマーシャル音、トーン、ビープ音、チャイム、歓迎音等を鳴らし)、画面を明るくしたり、或いは光を閃光(フラッシュ)させたりすることで、装置が存在するユーザの注意を引く何らかの形式の注意喚起モード又は装置がウェルカムモード(歓迎モード)に入り又は第三者の広告をユーザに提示する何らかの形式の注意喚起モードを継続してもよい。
【００２３】
アクティブモードがフラーティングモードであった場合、第1のセンサは、追加的に、ユーザの第3の関心度に関連する第3の条件が満たされているか否かを判定するように形成されてもよく、第3の関心度は第1の関心度より大きい。すなわち、第3の条件は、第1の閾値距離より接近した第2の閾値未満の範囲内の距離にユーザがいるか否かを含んでもよい。第3の条件は、代替的に又は付加的に、ユーザが、装置から離れつつある、近づきつつある及び/又は不変のままである距離にいるか否かを含んでもよい。第3の条件は、代替的に又は付加的に、ユーザが、ある閾値より高い又は低い速度で遠ざかりつつある又は近づきつつある距離にいるか否かを含んでもよい。第3の条件は、ユーザの視線方向、ユーザが所定の言葉を声に出したこと、圧力センサ又はスイッチにユーザが触れたこと、ユーザの顔の真正面(例えば、対称性により判定可能)又はユーザが行う特定のジェスチャー等に関する精密な閾値を含んでもよい。
【００２４】
装置は、追加的に、第3の条件が満たされたことを第1のセンサが判定したことに応じて、フラーティングモードからユーザインタラクションモードに移るように構築されてもよい。
【００２５】
装置は、第4の条件を満たしたことに応じて、ユーザインタラクションモードから待ち受けモード(スタンバイモード)に移るように構築されてもよく、待ち受けモードは、装置のユーザインタラクションモード(又は場合によってはフラーティングモード)よりも装置の電力消費が少ない何らかのモード(例えば、オフ又はスリープ状態)である。第2のセンサは、第4の条件が満たされたことに応じてセンシングモードからエネルギ節約モードに移るように構築されていてもよい。
【００２６】
第4の条件は、第1の条件が満たされなくなったか否かを含んでもよい。例えば、第4の条件は、ユーザが装置から第1の閾値範囲外の距離にあるか否かを含んでもよい。第4の条件は、代替的に又は付加的に、ユーザが装置から離れつつある及び/又は不変のままである距離にいるか否かを含んでもよい。第4の条件は、代替的に又は追加的に、ユーザが、ある閾値より高い又は低い速度で装置から遠ざかりつつある距離にいるか否かを含んでもよい。あるいは第4の条件はユーザの関心が無くなったことを含んでもよい。第1のセンサは、ユーザの視線を判定すること、ユーザが所定の言葉を声に出したことを検出すること、圧力センサ又はスイッチにユーザが触れたことを検出すること、ユーザの真正面の顔を検出したこと(例えば、対称性により検出できる)或いは特定の身振り(ジェスチャー)をユーザが行ったことを検出すること等により、ユーザの関心が無くなったことを判定してもよい。第4の条件は、代替的に又は追加的に、ユーザによる装置とのやり取りが、所定の期間(例えば、1分間、2分間、5分間、10分間等)にわたって行われなかったことを含んでもよい。
【００２７】
本システムは非対称応答(non-symmetric  response)を提供するように構築されてもよい。例えば、本装置は、第1及び第2の条件が満たされた場合に待ち受けモードからフラーティングモードに移り、第3の条件が満たされた場合にフラーティングモードからユーザインタラクションモードに移るが、第3の条件が満たされなくなったからといって、ユーザインタラクションモードからフラーティングモードには移らなくてもよい。むしろ、本装置は、第1の条件が満たされなくなった場合に、ユーザインタラクションモードから直接的に待ち受けモードに遷移してもよい。
【００２８】
本装置は、ユーザによる装置とのやり取りが行われる場合に、ユーザインタラクションモードに入るように構築されてもよい。本装置は、ユーザによる装置とのやり取りに先行して、生じる及び予想されるイベントを記録することで、ユーザによる装置とのやり取りから学習できるようにし、上述した条件に対する閾値をより適切に決定できるようにしてもよい。例えば、第2の条件が満たされていない場合に、ユーザによる装置とのやり取りが矛盾無く又は首尾良く行われた場合、ユーザによる装置とのやり取りをシステムがより適切に予測できるように、第2の条件に対する閾値が変更される。
【００２９】
本装置はコンシューマ電子装置(例えば、TV、セットトップボックス等)、(例えば、家庭においてエネルギ消費量を表示するような)情報表示装置、鏡及びランプにより形成されるアクティブミラー(ランプの強度が人と鏡の間の距離に基づいて調整される)、又は画像処理装置等でもよい。本装置は、画像取得又は記録装置(画像取得装置を有する第2のセンサとともに位置する)でもよく、その画像取得又は記録装置は、人がある範囲内に居て画像取得装置を眺めていた場合に限ってトリガを受けるように構築されている。
【００３０】
第1及び第2のセンサは本装置の近くにあってもよい。
【００３１】
本発明の一実施例によれば、第1のセンサは大まかな(大凡の又は粗い)関心度を判定し、大まかな関心度が判定された場合に、第2のセンサがより精密な関心度を判定する。より精密な関心度は、様々なパラメータを測定することで判定されてもよく、あるいはそのようなパラメータの測定値に対して厳しい検査(stricter  test)を行うことで判定されてもよい。より精密な関心度が判定されると、本装置がアクティブになる。
【００３２】
本発明の別の実施例によれば、第2のセンサは、第1の条件が満たされた場合に限って「トリガを受ける」又は検出を開始する；すなわち、第2のセンサは、第1の条件が満たされない場合には待ち受け状態にある。更に、第1及び第2の条件が満たされた場合に限って、本装置が「トリガを受ける」又はアクティブになる。
【実施例１】
【００３３】
本発明を十分に理解するため、及び本発明がどのように機能するかを説明するために、添付図面が参照される。
【００３４】
図1aを参照するに、本発明の実施例によるシステム1は第1のセンサ3を有する。第1のセンサ3は、一連の第1の測定値を記録する第1のセンサメモリ3aと、第1の測定値を分析し、第1の条件が満たされたか否かを判定する第1のセンサプロセッサ3bとを有する。第1のセンサ3は第2のセンサ5に通信可能に結合されている。第2のセンサ5は、一連の第2の測定値を記録する第2のセンサメモリ5aと、第2の測定値を分析し、第2の条件が満たされたか否かを判定する第2のセンサプロセッサ5bとを有する。第2のセンサ5及び第1のセンサ3は装置7に通信可能に結合されている。装置7はユーザインタフェース8を有し、及び装置7は少なくとも2つの動作モード(アクティブモード及びインアクティブモード)を有する。第1のセンサ3は第2のセンサ5及び装置7に通信可能に結合され、第1のセンサ3は第2のセンサ5及び装置7に信号を送信する。第2のセンサ5は装置7に通信可能に結合され、第2のセンサ5は装置7に信号を送信する及び装置7から信号を受信する。
【００３５】
図1bを参照するに、本発明の第2の形態によるシステム1は、第1の距離センサ3を有する。第1のセンサ3は、一連の第1の測定値を記録する第1のセンサメモリ3aと、第1の測定値を分析し、第1の条件が満たされたか否かを判定する第1のセンサプロセッサ3bとを有する。第1のセンサ3は第2のセンサ5に通信可能に結合されている。第2のセンサ5は、第2のセンサメモリ5aと、第2のセンサプロセッサ5bと、ディジタルカメラのような画像取得装置6aと、視線検出部6bとを有し、第2の条件が満たされたか否かを判定する。第2のセンサ5及び第1のセンサ3は装置7に通信可能に結合されている。装置7はユーザインタフェース8を有し、及び装置7は少なくとも2つの動作モード(アクティブモード及びインアクティブモード)を有する。
【００３６】
第1の距離センサ3は、第2のセンサ5及び装置7に通信可能に結合され、第1のセンサ3は第2のセンサ5及び装置7に信号を送信する。第2のセンサ5は装置7に通信可能に結合され、第2のセンサ5は装置7に信号を送信する及び装置7から信号を受信する。第1のセンサプロセッサ3は、第1の測定値を分析し、(第1の閾値範囲11に関連する)第1の条件が満たされたか否かを判定する。第2のセンサ5は、第2の一連の測定値を記録する第2のセンサメモリ5aと、第2の測定値を記録し、第2の条件が満たされたか否かを判定する第2のセンサプロセッサ5bとを有する。第1のセンサプロセッサ3bは、第1の測定値を分析し、(第2の閾値範囲13に関連する)第3の条件が満たされたか否かを追加的に判定する。装置7はユーザ9からの入力を受信するユーザインタフェース8を含む。
【００３７】
距離センサ3は第2のセンサ5及び装置7と通信可能に結合され、距離センサ3は第2のセンサ5及び装置7に信号を送信する。第2のセンサ5は装置7に通信可能に結合され、第2のセンサ5は装置7に信号を送信する及び装置7から信号を受信する。
【００３８】
図2aは本発明の実施例による第1の方法を示すフローチャートである。装置7が待ち受けモードにある状態からフローは始まる(ステップ201)。次に、第1の条件が満たされたか否かが判定される(ステップ203)。これに応じて、第2の条件が満たされたか否かが判定される(ステップ205)。これに応じて、装置がユーザインタラクションモードに移る(ステップ207)。
【００３９】
第1の条件は第1の量に対して第1のセンサが測定した測定値に関連してもよい。第2の条件は第2の量に対して第2のセンサが測定した測定値に関連してもよい。
【００４０】
図2bは本発明の実施例による第2の方法を示すフローチャートである。装置が待ち受けモードにある状態からフローは始まり(ステップ201)、第1の条件が満たされたか否かが判定される(ステップ203)。これに応じて、第2の条件が満たされたか否かが判定される(ステップ205)。これに応じて、装置はフラーティングモードに移る(ステップ209)。第3の条件が満たされたか否かが判定される(ステップ211)。これに応じて、装置がユーザインタラクションモードに移る(ステップ207)。
【００４１】
第3の条件は第1の量に対して第1のセンサが測定した別の測定値に関連してもよい。あるいは、第3の条件はユーザによる装置との直接的なやり取りに関連してもよい。
【００４２】
図2cは、図2a及び図2bのフローチャートに示す方法とともに使用可能な選択的追加的なフローチャートを示す。装置が待ち受けモードにある状態からフローは始まり(ステップ201)、第3の条件が満たされたか否が判定される(ステップ211)。これに応じて、装置がユーザインタラクションモードに移る(ステップ207)。
【００４３】
図2dは、図2a、図2b及び図2cのフローチャートに示す方法とともに使用可能な選択的追加的なフローチャートを示す。装置がフラーティングモード又はユーザインタラクションモードにある状態からフローは始まり(ステップ213)、第4の条件が満たされたか否かが判定される(ステップ215)。これに応じて装置は待ち受けモードに移る(ステップ217)。あるいは、装置が待ち受けモードにある状態からフローは始まり(ステップ213)、第4の条件が満たされたか否かが判定され(ステップ215)、これに応じて装置は待ち受けモードを維持してもよい(ステップ217)。後者の場合は、例えば、図2bの方法において、第1の条件が満たされるか否かを判定した後、第2の条件が満たされるか否かを判定する前に適用され、残りのステップを迂回してもよい。
【００４４】
第4の条件は第1の条件がもはや満たされていないことに関連してもよい。あるいは、第4の条件は、ユーザによる装置とのやり取りが所定の期間の間行われていないことに関連していてもよい。
【００４５】
図3a及び図3bを参照しながら、図1a及び1bのシステムの動作を説明する。第2のセンサ5(C)はエネルギ節約モード(エネルギセービングモード)にあり、装置7(D)はスタンバイモードにあるとする(ステップ20)。
【００４６】
第1のセンサ3(R)は、ユーザ9が、装置7の第1閾値距離11の範囲内にいるか否かを判定する(ステップ22)。これは第1のセンサメモリ3aにより保存され、第1のセンサプロセッサ3bにより判定される。その範囲内にいなかった場合、プロセスはステップ20に戻る。範囲内にいた場合、プロセスは処理ステップ24に進み、第1センサ3の第1のセンサプロセッサ3bは、ユーザ9のスピード又は速度を判定する。第1のセンサ3は、ユーザが第1の閾値距離11の範囲内にいることを監視し続ける。
【００４７】
ユーザが第1の閾値距離の範囲内にいることを第1のセンサ3が判定した場合、第1の条件は満たされており、第2のセンサ5が検出モード又はセンシングモードに切り替わる(ステップ26)。第2のセンサ5は、第2の条件が満たされているか否かを判定する。例えば、ユーザによる発音、視線又はジェスチャーを、第2のセンサプロセッサ5bにより、又は視線の方向を画像捕捉装置6a及び視線検出部6bにより判定する。図2bの例において、第2のセンサ5の視線検出部6bは、ユーザの顔を判定する(ステップ28)。顔が確認された場合、第2のセンサ5は、(画像取得装置6a及び視線検出システム6bを用いて)ユーザ9の顔の視線の方向を判定し、(第2のセンサメモリ5a及び第2のセンサプロセッサ5bを用いて)顔が装置7を向いているのがどの程度の時間の割合であるかを判定する(ステップ30)。これが例えば75％より少なかった場合、第2の条件が満たされ、第2のセンサ5はユーザ9の顔を監視し続ける。これが75％より多かった場合、装置7は、例えばフラーティングモード(flirting  mode)であるアクティブモードに切り替わる(ステップ32)。目下の例では75％と記載されているが、任意の割合が使用可能であることが理解できるであろう。
【００４８】
第1のセンサ3は、ユーザ9が第2の閾値距離13未満の距離にいるか否かを判定する。第1の閾値距離11は、第2の閾値距離13よりも大きい。判定結果が「はい」であった場合、装置は例えばユーザインタラクションモードであるアクティブモードに入り、第2のセンサ5はエネルギセービングモードン切り替わる(ステップ36)。判定結果が「いいえ」であった場合、第2のセンサ5は、顔が装置を眺めている時間の割合がどの程度であるかを再び判定する(ステップ38)。これが75％より多かった場合、第1のセンサ3は、装置7から第2の閾値距離13未満の距離にユーザがいるか否かを監視し続ける(ステップ34)。これが75％未満であった場合、装置7は待ち受けモードに切り替わり(ステップ40)、プロセスはステップ28に戻る。
【００４９】
装置7がユーザインタラクションモードの場合、ユーザ9は従来の如何なる方法で装置7とやり取りしてもよい。ステップ42において、ユーザによるやり取りが所定の期間以上検出されなかった場合、プロセスはステップ20に戻り、第2のセンサ5をエネルギセービングモードに設定し、装置7を待ち受けモードに設定する。
【００５０】
装置7が待ち受けモード又はフラーティングモードにある場合において、ユーザインタフェース8によるユーザのやり取りが検出された場合(ステップ44)、装置は速やかにユーザインタラクションモードに切り替わる。
【００５１】
あるいは、図3bに示されているように、追加的なステップ25が含まれ、ユーザ9が装置7から第2の閾値距離13未満の距離にいることが第1のセンサ3により検出された場合、装置7は自動的にユーザインタラクションモードに切り替わってもよい。従ってこの例の場合、ユーザ9が第2の閾値距離13の範囲内にいるならば、たとえ第2のセンサ5が顔を判定できなかったとしても或いは顔が装置7を眺めているか否かを判定できなかったとしても、装置7はユーザインタラクションモードに入ることになる。
【００５２】
以上、本発明の実施例が添付図面により図示され詳細な説明により説明されてきたが、本発明は説明された実施例に限定されず、添付の特許請求の範囲に記載された発明の範囲から逸脱することなく、多くの変形を施すことが可能である。
【図１ａ】
0005620928.tif 000002
【図１ｂ】
0005620928.tif 000003
【図２ａ】
0005620928.tif 000004
【図２ｂ】
0005620928.tif 000005
【図２ｃ】
0005620928.tif 000006
【図２ｄ】
0005620928.tif 000007
【図３ａ】
0005620928.tif 000008
【図３ｂ】
0005620928.tif 000009