(57)【要約】【課題】テレビジョン受像機の電源オンを３回の拍手で認識する構成とした場合、ユーザが電源オンを意図せず３回拍手したならば、テレビジョン受像機の電源がユーザに気付かずオンとなり、長時間に亘って電源が入り放しになり、不要な電力を消費させてしまう。【解決手段】電源オフ状態（本発明の認識に係る装置以外の電源が落ちている状態）にあり、かつ、ＯＮ−ＯＦＦモードにあるテレビジョン受像機の近くで、ユーザが意図せずに何らかの原因で拍手を３回すると、（Ｇ）に示すように３回の拍手認識が時刻ｔ１でなされ、その結果、（Ｂ）に示すように電源オン状態となる。電源がオンした時刻ｔ１から一定期間ｔａ１経過後に（Ａ）に示す確認表示がなされる。その確認表示期間ｔｂ１に、拍手認識操作及びその他の操作で確認作業が入らなかった場合には、誤認識である確率が高いと判断し、時刻ｔ３で（Ｃ）に示すように、強制的に電源をオフさせる。【選択図】図７
2008299477.tif 000002
【特許請求の範囲】
【請求項１】
操作者を撮影した撮影画像又は操作者が断続的に発する音波を使って前記操作者の操作を認識し、制御対象の電子機器に対して前記認識した操作に対応した制御を行う、表示装置を備えた電子機器の制御方法において、
前記操作者を撮影した撮像画像信号、又は前記操作者が断続的に発する音波に対応する音声信号を生成する信号生成ステップと、
前記操作者の特定の動作を前記撮像画像信号に基づいて検出するか、又は前記断続的に発する音波の発音回数を前記音声信号に基づいて検出することで、前記操作者の操作を認識する操作認識ステップと、
前記操作認識ステップで認識された操作が前記電子機器への電源オンの操作であることを検出する検出ステップと、
前記検出ステップで前記電源オンの操作を検出したとき、前記電子機器を電源オンするように制御する第１の電源制御ステップと、
前記電子機器の電源をオン後、予め設定した第１の期間経過後に、予め記憶してある前記操作者に対して操作確認を促すための信号を前記表示装置により表示するか、又は音声発音手段により発音するかの操作確認処理を行う確認ステップと、
前記確認ステップによる前記操作確認処理開始後、予め設定した第２の期間内に、前記信号生成ステップと前記操作認識ステップとを再度実行して、確認のための操作がなされたか否かを判定する確認判定ステップと、
前記第２の期間内に前記確認の操作がなされたと判定したときは、前記電子機器の電源オンの状態を継続し、前記第２の期間内に前記確認の操作がなされないと判定したときは、前記第２の期間経過後に前記電子機器を強制的に電源オフにするように制御する第２の電源制御ステップと
を実行することを特徴とする電子機器の制御方法。
【請求項２】
前記検出ステップで電源オンの操作を検出した時点から前記第１の期間経過する前に、前記撮影画像又は前記音波又は前記撮影画像及び音波による操作以外の任意の操作が前記電子機器に対して行われたか否かを判定する操作判定ステップと、
前記操作判定ステップで前記任意の操作が行われたと判定したときは、前記確認ステップ、前記確認判定ステップ及び前記第２の電源制御ステップを実行することなく、前記電源オンの状態を継続させる動作継続ステップと
を実行することを特徴とする請求項１記載の電子機器の制御方法。
【請求項３】
操作者を撮影した撮影画像又は操作者が断続的に発する音波を使って前記操作者の操作を認識し、制御対象の電子機器に対して前記認識した操作に対応した制御を行う、表示装置を備えた電子機器の制御方法において、
前記操作者を撮影した撮像画像信号、又は前記操作者が断続的に発する音波に対応する音声信号を生成する信号生成ステップと、
前記操作者の特定の動作を前記撮像画像信号に基づいて検出するか、又は前記断続的に発する音波の発音回数を前記音声信号に基づいて検出することで、前記操作者の操作を認識する操作認識ステップと、
前記操作認識ステップで認識された操作が前記電子機器への電源オンの操作であることを検出する検出ステップと、
前記検出ステップで前記電源オンの操作を検出したとき、前記電子機器を電源オンするように制御する第１の電源制御ステップと、
前記電子機器の電源をオン後、予め設定した第１の期間経過後に、予め記憶してある前記操作者に対して操作確認を促すための信号を前記表示装置により表示するか、又は音声発音手段により発音するかの操作確認処理を行う第１の確認ステップと、
前記第１の確認ステップによる前記操作確認処理開始後、予め設定した第２の期間内に、前記信号生成ステップと前記操作認識ステップとを再度実行して、確認のための操作がなされたか否かを判定する第１の確認判定ステップと、
前記第２の期間及び予め設定した第３の期間経過後に、予め記憶してある前記操作者に対して操作確認を促すための信号を、前記表示装置により表示するか、又は音声発音手段により発音するかの操作確認処理を行う第２の確認ステップと、
前記第２の確認ステップによる前記操作確認処理開始後予め設定した第４の期間内に、前記信号生成ステップと前記操作認識ステップとを再度実行して、確認のための操作がなされたか否かを判定する第２の確認判定ステップと、
前記第２の確認ステップと前記第２の確認判定ステップとを、予め設定した回数分交互に繰り返し、少なくとも最終の前記第２の確認判定ステップで前記確認の操作がなされたと判定したときは、前記電子機器の電源オンの状態を継続し、前記第１の確認判定ステップ及びすべての前記第２の確認判定ステップで前記確認の操作がなされないと判定したときは、最終の前記第２の確認判定ステップの前記第４の期間経過後に前記電子機器を強制的に電源オフにするように制御する第２の電源制御ステップと
を実行することを特徴とする電子機器の制御方法。
【請求項４】
前記第１の確認ステップ及び１又は２以上の前記第２の確認ステップのそれぞれは、予め記憶してある前記表示装置により前記操作者に対して操作確認を促すための信号を表示するか、又は前記音声発音手段により発音するかの操作確認処理を、互いに異なる内容で表示又は発音させることを特徴とする請求項３記載の電子機器の制御方法。
【請求項５】
操作者を撮影した撮影画像又は操作者が断続的に発する音波を使って前記操作者の操作を認識し、制御対象の電子機器に対して前記認識した操作に対応した制御を行う、表示装置を備えた電子機器の制御装置において、
音声を発音する音声発音手段と、
前記操作者を撮影した撮影画像に対応する撮像画像信号、又は前記操作者が断続的に発する音波に対応する音声信号を生成する信号生成手段と、
前記操作者の特定の動作を前記撮像画像信号に基づいて検出するか、又は前記断続的に発する音波の発音回数を前記音声信号に基づいて検出することで、前記操作者の操作を認識する操作認識手段と、
前記操作認識手段で認識された操作が前記電子機器への電源オンの操作であることを検出する検出手段と、
前記検出手段で前記電源オンの操作を検出したとき、前記電子機器を電源オンするように制御する第１の電源制御手段と、
前記電子機器の電源をオン後、予め設定した第１の期間経過後に、予め記憶してある前記操作者に対して操作確認を促すための信号を前記表示装置により表示するか、又は音声発音手段により発音するかの操作確認処理を行う確認手段と、
前記確認手段による前記操作確認処理開始後予め設定した第２の期間内に、前記信号生成手段及び前記操作認識手段を再度動作させるように制御して、確認のための操作がなされたか否かを判定する確認判定手段と、
前記第２の期間内に前記確認の操作がなされたと判定したときは、前記電子機器の電源オンの状態を継続し、前記第２の期間内に前記確認の操作がなされないと判定したときは、前記第２の期間経過後に前記電子機器を強制的に電源オフにするように制御する第２の電源制御手段と
を有することを特徴とする電子機器の制御装置。
【請求項６】
前記検出手段で電源オンの操作を検出した時点から前記第１の期間経過する前に、前記撮影画像又は前記音波又は前記撮影画像及び音波による操作以外の任意の操作が前記電子機器に対して行われたか否かを判定する操作判定手段と、
前記操作判定手段で前記任意の操作が行われたと判定したときは、前記電子機器の電源オンの状態を継続させる動作継続手段と
を有することを特徴とする請求項５記載の電子機器の制御装置。
【請求項７】
操作者を撮影した撮影画像又は操作者が断続的に発する音波を使って前記操作者の操作を認識し、制御対象の電子機器に対して前記認識した操作に対応した制御を行う、表示装置を備えた電子機器の制御装置において、
音声を発音する音声発音手段と、
前記操作者を撮影した撮影画像に対応する撮像画像信号、又は前記操作者が断続的に発する音波に対応する音声信号を生成する信号生成手段と、
前記操作者の特定の動作を前記撮像画像信号に基づいて検出するか、又は前記断続的に発する音波の発音回数を前記音声信号に基づいて検出することで、前記操作者の操作を認識する操作認識手段と、
前記操作認識手段で認識された操作が前記電子機器への電源オンの操作であることを検出する検出手段と、
前記検出手段で前記電源オンの操作を検出したとき、前記電子機器を電源オンするように制御する第１の電源制御手段と、
前記電子機器の電源をオン後、予め設定した第１の期間経過後に、予め記憶してある前記操作者に対して操作確認を促すための信号を前記表示装置により表示するか、又は音声発音手段により発音するかの操作確認処理を行う第１の確認手段と、
前記第１の確認手段による前記操作確認処理開始後、予め設定した第２の期間内に、前記信号生成手段と前記操作認識手段とを再度動作させるように制御して、確認のための操作がなされたか否かを判定する第１の確認判定手段と、
前記第２の期間及び予め設定した第３の期間経過後に、予め記憶してある前記操作者に対して操作確認を促すための信号を、前記表示装置により表示するか、又は音声発音手段により発音するかの操作確認処理を行う第２の確認手段と、
前記第２の確認手段による前記操作確認処理開始後予め設定した第４の期間内に、前記信号生成手段と前記操作認識手段とを再度動作させるように制御して、確認のための操作がなされたか否かを判定する第２の確認判定手段と、
前記第２の確認手段による動作と前記第２の確認判定手段による動作とを、予め設定した回数分交互に繰り返し、前記第２の確認判定手段の少なくとも最終回の動作で前記確認の操作がなされたと判定したときは、前記電子機器の電源オンの状態を継続し、前記第１の確認判定手段及びすべての回数の前記第２の確認判定手段の各動作のいずれにおいても前記確認の操作がなされないと判定したときは、前記第２の確認判定手段の最終回の動作における前記第４の期間経過後に前記電子機器を強制的に電源オフにするように制御する第２の電源制御手段と
を有することを特徴とする電子機器の制御装置。
【請求項８】
前記第１の確認手段及び前記第２の確認手段のそれぞれは、予め記憶してある前記表示装置により前記操作者に対して操作確認を促すための信号を表示するか、又は前記音声発音手段により発音するかの操作確認処理を、互いに異なる内容で表示又は発音させることを特徴とする請求項７記載の電子機器の制御装置。
【請求項９】
操作者を撮影した撮影画像又は操作者が断続的に発する音波を使って前記操作者の操作を認識し、制御対象の電子機器に対して前記認識した操作に対応した制御を、コンピュータを用いて行わせる、表示装置を備えた電子機器の制御プログラムにおいて、
前記コンピュータに、
前記操作者を撮影した撮像画像信号、又は前記操作者が断続的に発する音波に対応する音声信号を生成する信号生成ステップと、
前記操作者の特定の動作を前記撮像画像信号に基づいて検出するか、又は前記断続的に発する音波の発音回数を前記音声信号に基づいて検出することで、前記操作者の操作を認識する操作認識ステップと、
前記操作認識ステップで認識された操作が前記電子機器への電源オンの操作であることを検出する検出ステップと、
前記検出ステップで前記電源オンの操作を検出したとき、前記電子機器を電源オンするように制御する第１の電源制御ステップと、
前記電子機器の電源をオン後、予め設定した第１の期間経過後に、予め記憶してある前記操作者に対して操作確認を促すための信号を前記表示装置により表示するか、又は音声発音手段により発音するかの操作確認処理を行う確認ステップと、
前記確認ステップによる前記操作確認処理開始後、予め設定した第２の期間内に、前記信号生成ステップと前記操作認識ステップとを再度実行して、確認のための操作がなされたか否かを判定する確認判定ステップと、
前記第２の期間内に前記確認の操作がなされたと判定したときは、前記電子機器の電源オンの状態を継続し、前記第２の期間内に前記確認の操作がなされないと判定したときは、前記第２の期間経過後に前記電子機器を強制的に電源オフにするように制御する第２の電源制御ステップと
を実行させることを特徴とする電子機器の制御プログラム。
【請求項１０】
前記検出ステップで電源オンの操作を検出した時点から前記第１の期間経過する前に、前記撮影画像又は前記音波又は前記撮影画像及び音波による操作以外の任意の操作が前記電子機器に対して行われたか否かを判定する操作判定ステップと、
前記操作判定ステップで前記任意の操作が行われたと判定したときは、前記確認ステップ、前記確認判定ステップ及び前記第２の電源制御ステップを実行することなく、前記電源オンの状態を継続させる動作継続ステップと
を前記コンピュータに実行させることを特徴とする請求項９記載の電子機器の制御プログラム。
【請求項１１】
操作者を撮影した撮影画像又は操作者が断続的に発する音波を使って前記操作者の操作を認識し、制御対象の電子機器に対して前記認識した操作に対応した制御を、コンピュータを用いて行わせる、表示装置を備えた電子機器の制御プログラムにおいて、
前記コンピュータに、
前記操作者を撮影した撮像画像信号、又は前記操作者が断続的に発する音波に対応する音声信号を生成する信号生成ステップと、
前記操作者の特定の動作を前記撮像画像信号に基づいて検出するか、又は前記断続的に発する音波の発音回数を前記音声信号に基づいて検出することで、前記操作者の操作を認識する操作認識ステップと、
前記操作認識ステップで認識された操作が前記電子機器への電源オンの操作であることを検出する検出ステップと、
前記検出ステップで前記電源オンの操作を検出したとき、前記電子機器を電源オンするように制御する第１の電源制御ステップと、
前記電子機器の電源をオン後、予め設定した第１の期間経過後に、予め記憶してある前記操作者に対して操作確認を促すための信号を前記表示装置により表示するか、又は音声発音手段により発音するかの操作確認処理を行う第１の確認ステップと、
前記第１の確認ステップによる前記操作確認処理開始後、予め設定した第２の期間内に、前記信号生成ステップと前記操作認識ステップとを再度実行して、確認のための操作がなされたか否かを判定する第１の確認判定ステップと、
前記第２の期間及び予め設定した第３の期間経過後に、予め記憶してある前記操作者に対して操作確認を促すための信号を、前記表示装置により表示するか、又は音声発音手段により発音するかの操作確認処理を行う第２の確認ステップと、
前記第２の確認ステップによる前記操作確認処理開始後予め設定した第４の期間内に、前記信号生成ステップと前記操作認識ステップとを再度実行して、確認のための操作がなされたか否かを判定する第２の確認判定ステップと、
前記第２の確認ステップと前記第２の確認判定ステップとを、予め設定した回数分交互に繰り返し、少なくとも最終の前記第２の確認判定ステップで前記確認の操作がなされたと判定したときは、前記電子機器の電源オンの状態を継続し、前記第１の確認判定ステップ及びすべての前記第２の確認判定ステップで前記確認の操作がなされないと判定したときは、最終の前記第２の確認判定ステップの前記第４の期間経過後に前記電子機器を強制的に電源オフにするように制御する第２の電源制御ステップと
を実行させることを特徴とする電子機器の制御プログラム。
【請求項１２】
前記第１の確認ステップ及び１又は２以上の前記第２の確認ステップのそれぞれは、予め記憶してある前記表示装置により前記操作者に対して操作確認を促すための信号を表示するか、又は前記音声発音手段により発音するかの操作確認処理を、互いに異なる内容で表示又は発音させるように前記コンピュータに実行させることを特徴とする請求項１１記載の電子機器の制御プログラム。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は電子機器の制御方法、制御装置及び制御プログラムに係り、特に被操作対象の電子機器を、リモートコントローラを用いることなく遠隔操作する電子機器の制御方法、制御装置及び制御プログラムに関する。
【背景技術】
【０００２】
１９８０年代に赤外線リモートコントローラ（通称リモコン）がテレビジョン受像機をはじめとする家電機器に付属するようになり、手元で家電機器を遠隔制御できるユーザインターフェースが広く普及し、家電製品の操作形態を大きく変貌させた。現在においてもこの操作形態が主流である。リモコンは一機能をその機能に割り当てられた一つのキーを押下することで実行する仕組みが基本となっている操作装置である。例えば、テレビジョン受像機に付属するリモコンでは、「電源」、「チャンネル」、「音量」、「入力切替」などの機能を遠隔操作するためのキーが存在する。このリモコンによる遠隔操作方法は、これまでのテレビジョン受像機にとって大変便利な遠隔の操作方法であった。
【０００３】
しかしながら、最近始まったデジタル放送やデータ放送を受信するテレビジョン受像機において、所望のメニュー画面を選択するためには、リモコンの「上」、「下」、「左」、「右」や「決定」キーを何度も押下する必要があり、リモコンでの操作は煩雑で使いづらくなっている。また、ＥＰＧ（電子プログラムガイド）を用いて操作する場合は、マトリクスに配列された案内画面から所望の位置を選択して、リモコンのキーを押下する必要があるため、データ放送受信用テレビジョン受像機と同様にきめ細かな選択操作が必要であるという課題を有している。また、リモコンに多くの機能の操作が集中し、リモコンなくして操作が困難な状況になった現在、リモコンの操作形態や利用形態の見直しがなされている。
【０００４】
そこで、本発明者は多様な電子機器に対する柔軟性と遠隔操作の利便性を両立させると共に、リモコンのような遠隔操作用機器を手元で利用することを不要とした電子機器の制御装置を開示した（例えば、特許文献１参照）。この本発明者による電子機器の制御装置では、ユーザの手の動作をビデオカメラで撮影して、手の撮影画像を操作ボタンを含む操作用画像と共に表示装置に表示させ、表示された手を表示された操作ボタン上に移動させて指を折り曲げる動作をすると、その動作から対応する制御動作を実行させる構成である。これにより、この電子機器の制御装置では、リモコンを用いることなく、電子機器の遠隔操作を可能とする。
【０００５】
また、リモコンのような遠隔操作用機器を手元で利用することを不要とするための電子機器の制御装置として、拍手音などの人間が発することのできる音で電子機器を操作する提案もなされている（例えば、特許文献２、特許文献３参照）。
【０００６】
【特許文献１】特開２００６−０９１９４８号公報
【特許文献２】特開平０５−０３１４８３号公報
【特許文献３】特開平０６−３１８４２４号公報
【発明の開示】
【発明が解決しようとする課題】
【０００７】
しかしながら、上記の特許文献１〜３に記載の電子機器の制御装置では、画像や非音声（拍手音）を使って認識操作を行うものであるため、認識率の向上策と誤認識への耐性向上策を施したとしても、人と人のコミュニケーションでも認識違いが起きて問題が発覚するように、人と機械とのインタフェースである認識操作についても同様の問題が生じることが想定される。
【０００８】
例えば、電子機器の制御装置を、テレビジョン受像機の電源オンを３回の拍手で認識する構成とした場合、そのことを意識せず人を呼ぶのに３回拍手したならば、テレビジョン受像機の電源がオンとなる。その結果、電源オンに気が付かない場合、長時間に亘ってテレビジョン受像機の電源が入り放しになり、不要な電力を消費させてしまうことになる。
【０００９】
人の場合このようなときは、確認というフィードバック作業が入り、問題の発見後に解決に向けて対処する。しかし、前記認識操作では、確認作業がなくこのような意図しない音や動作に対して誤認識を引き起こす可能性を持っている。このような誤認識を防止するためには、誤認識に対する耐性を技術的に向上させるだけでなく、人と人のコミュニケーションのような確認作業に相当するフィードバックループを構築する必要がある。
【００１０】
本発明は以上の点に鑑みなされたもので、画像や非音声を用いて電子機器を遠隔操作するにあたり、電子機器の全ての認識操作とその他の操作（リモコンや電子機器本体での操作）手段を考慮して、人（ユーザ）の意志の確認作業を行うことで誤認識を防止して電子機器を適切な状態に制御し得る電子機器の制御方法、制御装置及び制御プログラムを提供することを目的とする。
【課題を解決するための手段】
【００１１】
上記の目的を達成するため、第１の発明の電子機器の制御方法は、操作者を撮影した撮影画像又は操作者が断続的に発する音波を使って操作者の操作を認識し、制御対象の電子機器に対して認識した操作に対応した制御を行う、表示装置を備えた電子機器の制御方法において、
操作者を撮影した撮像画像信号、又は操作者が断続的に発する音波に対応する音声信号を生成する信号生成ステップと、操作者の特定の動作を撮像画像信号に基づいて検出するか、又は断続的に発する音波の発音回数を音声信号に基づいて検出することで、操作者の操作を認識する操作認識ステップと、操作認識ステップで認識された操作が電子機器への電源オンの操作であることを検出する検出ステップと、検出ステップで電源オンの操作を検出したとき、電子機器を電源オンするように制御する第１の電源制御ステップと、電子機器の電源をオン後、予め設定した第１の期間経過後に、予め記憶してある操作者に対して操作確認を促すための信号を表示装置により表示するか、又は音声発音手段により発音するかの操作確認処理を行う確認ステップと、確認ステップによる操作確認処理開始後、予め設定した第２の期間内に、信号生成ステップと操作認識ステップとを再度実行して、確認のための操作がなされたか否かを判定する確認判定ステップと、第２の期間内に確認の操作がなされたと判定したときは、電子機器の電源オンの状態を継続し、第２の期間内に確認の操作がなされないと判定したときは、第２の期間経過後に電子機器を強制的に電源オフにするように制御する第２の電源制御ステップとを実行することを特徴とする。
【００１２】
また、上記の目的を達成するため、第２の発明の電子機器の制御装置は、操作者を撮影した撮影画像又は操作者が断続的に発する音波を使って操作者の操作を認識し、制御対象の電子機器に対して認識した操作に対応した制御を行う、表示装置を備えた電子機器の制御装置において、
音声を発音する音声発音手段と、操作者を撮影した撮影画像に対応する撮像画像信号、又は操作者が断続的に発する音波に対応する音声信号を生成する信号生成手段と、操作者の特定の動作を撮像画像信号に基づいて検出するか、又は断続的に発する音波の発音回数を音声信号に基づいて検出することで、操作者の操作を認識する操作認識手段と、操作認識手段で認識された操作が電子機器への電源オンの操作であることを検出する検出手段と、検出手段で電源オンの操作を検出したとき、電子機器を電源オンするように制御する第１の電源制御手段と、電子機器の電源をオン後、予め設定した第１の期間経過後に、予め記憶してある操作者に対して操作確認を促すための信号を表示装置により表示するか、又は音声発音手段により発音するかの操作確認処理を行う確認手段と、確認手段による操作確認処理開始後予め設定した第２の期間内に、信号生成手段及び操作認識手段を再度動作させるように制御して、確認のための操作がなされたか否かを判定する確認判定手段と、第２の期間内に確認の操作がなされたと判定したときは、電子機器の電源オンの状態を継続し、第２の期間内に確認の操作がなされないと判定したときは、第２の期間経過後に電子機器を強制的に電源オフにするように制御する第２の電源制御手段とを有することを特徴とする。
【００１３】
また、上記の目的を達成するため、第３の発明の電子機器の制御プログラムは、操作者を撮影した撮影画像又は操作者が断続的に発する音波を使って操作者の操作を認識し、制御対象の電子機器に対して認識した操作に対応した制御を、コンピュータを用いて行わせる、表示装置を備えた電子機器の制御プログラムにおいて、上記コンピュータに、
操作者を撮影した撮像画像信号、又は操作者が断続的に発する音波に対応する音声信号を生成する信号生成ステップと、操作者の特定の動作を撮像画像信号に基づいて検出するか、又は断続的に発する音波の発音回数を音声信号に基づいて検出することで、操作者の操作を認識する操作認識ステップと、操作認識ステップで認識された操作が電子機器への電源オンの操作であることを検出する検出ステップと、検出ステップで電源オンの操作を検出したとき、電子機器を電源オンするように制御する第１の電源制御ステップと、電子機器の電源をオン後、予め設定した第１の期間経過後に、予め記憶してある操作者に対して操作確認を促すための信号を表示装置により表示するか、又は音声発音手段により発音するかの操作確認処理を行う確認ステップと、確認ステップによる操作確認処理開始後、予め設定した第２の期間内に、信号生成ステップと操作認識ステップとを再度実行して、確認のための操作がなされたか否かを判定する確認判定ステップと、第２の期間内に確認の操作がなされたと判定したときは、電子機器の電源オンの状態を継続し、第２の期間内に確認の操作がなされないと判定したときは、第２の期間経過後に電子機器を強制的に電源オフにするように制御する第２の電源制御ステップとを実行させることを特徴とする。
【発明の効果】
【００１４】
本発明によれば、電源オンの操作を認識して電源オンにしたときは操作者に対して操作確認を促し、その操作確認の設定期間内に、確認の操作がなされないときは、電源を強制的にオフにすることで、電源オンの誤検出に起因する電力の浪費を抑制できる。また、本発明によれば、操作確認を促す前に、一般的な操作が行われた場合は操作確認を行わないことで、操作者の負担を軽減することができる。
【発明を実施するための最良の形態】
【００１５】
次に、本発明を実施するための最良の形態について図面を参照して詳細に説明する。電子機器の操作の方式には、本体の操作スイッチ等を操作する方式と、リモコンなどの制御機器を使って制御コードを赤外線や無線で伝送することで遠隔操作する方式と、リモコンなどの制御機器を使わずに人の動作を操作として制御を実現する認識操作方式とがある。更に、認識操作については、画像認識と非音声認識（拍手音認識）とがある。拍手音認識操作は、音波をマイクで電気信号に変換し、その電気信号が特定の条件を満たしたことを判別することによって、電気機器を制御するものである。以下、説明する本発明の実施例では、拍手音操作による認識操作方式を採用して、電子機器としてテレビジョン受像機を遠隔操作するものとする。
【００１６】
図１は本発明になる電子機器の制御装置の一実施の形態の要部のブロック図を示す。本実施の形態の制御装置は、操作者の拍手音を収音するマイクロフォン（以下、マイクと略す）１０１と、マイク１０１からのアナログ音声信号を増幅するアンプ１０２と、アンプ１０２から出力されたアナログ音声信号と、アンプ２０３で増幅されたテレビデコード音が入力されて拍手音認識を行い、その判定結果である判定信号を出力する拍手音認識部１００とからなる。
【００１７】
拍手音認識部１００は、Ａ／Ｄコンバータ１０３、２０４と、その出力デジタル音声信号のオフセット成分を除去するオフセット成分除去部１０４、２０５と、オフセット成分が除去されたデジタル音声信号を絶対値化して絶対値信号を出力する絶対値化回路１０５、２０６と、絶対値化回路１０５及び２０６からの絶対値信号に基づいて本体音（テレビジョン受像機の本体スピーカ２０１から発音される音）を除去して拍手音成分を取り出すための本体音除去部１０６と、本体音除去部１０６の出力信号が供給されるエッジ信号抽出器１０７及び騒音状態検出部１１０と、エッジ信号に基づいてエッジパルスを生成するエッジパルス生成器１０８と、エッジパルスと騒音状態検出部１１０の各出力信号と判定モードとに基づいて拍手音の回数、タイミング等の判定処理を行う判定処理部１０９とからなる。
【００１８】
次に、この実施の形態の動作について説明する。マイク１０１は被操作電子機器であるテレビジョン受像機の所定位置に設置されており、操作者の拍手音を収音して音響−電気変換してアナログ音声信号を出力する。このアナログ音声信号は、アンプ１０２で後段のＡ／Ｄコンバータ１０３によるＡ／Ｄ変換のダイナミックレンジに対して最適な振幅レベルに増幅された後、Ａ／Ｄコンバータ１０３に供給されてアナログ信号からデジタル信号へ変換される。Ａ／Ｄコンバータ１０３にてデジタル化された音声信号の処理については、ソフトウェア処理またはハードウェア処理にて以降の機能ブロックの内容に添って信号処理されるもので、ここではその処理手法については限定するものではない。
【００１９】
Ａ／Ｄコンバータ１０３の出力デジタル音声信号は、図２のようにＡ／Ｄコンバータ１０３のダイナミックレンジ３０３内で、無音時のレベル３０５のオフセット成分３０４を中心とする音の波形のデジタル信号であり、実際の拍手音の波形３０１、その包路線の波形３０２のようにデジタル音声信号として得られる。音の波形は様々な周波数成分を含んだ実際の波形３０１に相当するが、本実施の形態では実際の波形の包絡線３０２に着目しており、以降の波形の説明では、実際の波形の包絡線３０２にて説明する。
【００２０】
図１に戻って説明するに、Ａ／Ｄコンバータ１０３の出力デジタル音声信号は、オフセット成分除去部１０４にて適切な特性の高域フィルタ（ＨＰＦ）を通されてオフセット成分が除去された後、絶対値化回路１０５により絶対値化され、波形＃１の絶対値信号とされる。この波形＃１の絶対値化信号は、マイク１０１により収音されて得られるアナログ音声信号の平均レベルを基準に絶対値化した信号である。
【００２１】
一方、テレビジョン受像機本体においてデコードされたテレビ放送信号のデコード音声信号は、本体アンプ２０２にて増幅されて本体スピーカ２０１にて電気−音響変換されて本体スピーカ２０１から空中へデコード音として発音され、マイク１０１から回り込んでくる。従って、絶対値化回路１０５から出力される波形＃１の絶対値化信号は、マイク１０１で捉えられる拍手音とテレビのデコード音が混入し混合されたものとなる。
【００２２】
この混入してくるテレビの本体音に相当する信号は、本体アンプ２０２の出力アナログ音声信号（テレビのデコード音信号）をアンプ２０３にて適切な振幅に調整してＡ／Ｄコンバータ２０４にてデジタル信号に変換し、オフセット成分除去部２０５にて適切な特性の高域フィルタ（ＨＰＦ）を通されてオフセット成分を除去し、絶対値化回路２０６で波形を絶対値化して得られる絶対値信号に対応している。
【００２３】
すなわち、絶対値化回路２０６の出力絶対値化信号の波形例としては波形＃２となり、波形＃１の拍手音がない波形に近い内容となる。この波形＃２の絶対値化信号は、本体アンプ２０２の出力アナログ音声信号（テレビのデコード音信号）の平均レベルを基準に絶対値化した信号である。本体音除去部１０６では上記の波形＃１の絶対値化信号から波形＃２の絶対値化信号を減算することにより、波形＃１の絶対値化信号中のマイク１０１から混入してくる本体音（テレビのデコード音）成分をキャンセルするため、本体スピーカ２０１からマイク１０１までの空間を伝わってくる伝送路の伝搬特性を考慮して波形＃２を整形した上で波形＃１を減算する。
【００２４】
このようにして、絶対値化回路１０５から出力された絶対値信号は、それに含まれる本体音が本体音除去部１０６でキャンセルされる。この本体音除去部１０６から出力される信号は拍手音と拍手音以外の音及びキャンセルできなかった微少な残留本体音が混入した音声信号であるが、拍手音のような破裂したような音はインパルス性の音のためエネルギーが大きく音の周波数全帯域に渡っておりエッジ成分を捉えることで区別することができる。そこで、そのエッジ成分を抜き出すのがエッジ信号抽出器１０７でその出力に波形＃３を得る。このエッジ信号抽出器１０７は、例えば、所定周波数以上の高周波数成分で、かつ、所定の第１の閾値以上のレベルを持つ信号成分をエッジ信号として抽出する。
【００２５】
エッジパルス生成器１０８は、波形＃３をトリガとしてエッジパルス波形＃４を生成する。例えば、波形＃３のエッジ信号のレベルが予め定めた第２の閾値以上となったときに、一定幅のエッジパルスを発生し、それを拍手音の検出信号としてエッジ検出フラグＦｐとして判定処理部１０９へ出力する。
【００２６】
騒音状態検出部１１０は、本体音除去部１０６の出力信号である操作者がいる環境下の騒音レベルを評価して、拍手音を認識するにあたり不適切な環境である場合、騒音状態フラグを発生させて判定処理部１０９へ出力する。この騒音状態検出部１１０の構成は、例えば、本体音除去部１０６から絶対値信号を取り出し、その絶対値信号と予め定めた閾値Ａとを逐次比較し、絶対値信号のレベルが閾値Ａ以上であるときはその絶対値信号レベルを累積加算し、閾値Ａ未満であるときはその絶対値信号レベルを累積減算して累積演算値を得て、その累積演算値が閾値Ａより大きな閾値Ｂ以上となったときに、騒音状態と判断して所定値の騒音状態フラグを発生させる。
【００２７】
判定処理部１０９は、エッジパルス生成器１０８からエッジ検出フラグＦｐを得て判定アルゴリズムに添って評価し、条件が合致したとき、判定信号を出力する。判定の条件は、入力される判定モードに応じて切り替えられるものである。また、騒音状態検出部１１０から所定値の騒音状態フラグが発生しているときは、認識操作を停止させて判定信号の出力を禁止する。これにより、騒音状態のときに大音量のテレビ音や環境音などの騒音を拍手音と誤認識して誤動作することを防止することができる。なお、騒音状態検出部１１０は誤動作の耐性を高めるので設けることが望ましいが、必ずしも設ける必要はない。
【００２８】
図３は判定処理部１０９の構成の一例のブロック図を示す。また、図４と図５は判定処理部１０９の判定処理アルゴリズムを説明するためのタイミングチャートを示す。図３に示すように、判定処理部１０９は、カウンタ１０９１と判定処理器１０９２とからなる。判定処理器１０９２には前記エッジ検出フラグＦｐと騒音状態フラグと判定モードとが入力される。カウンタ１０９１は判定処理器１０９２に入力される複数のエッジフラグ間の周期や特定の領域をゲートするゲートパルスなどを発生させる時間軸を管理するためのものである。
【００２９】
判定処理器１０９２のアルゴリズムは、判定モードによって切り替わる。この判定モードは、所定回数の拍手が始まる前後に拍手がない静寂な期間を設定し、複数回の拍手を本実施例では３回または４回等間隔に拍手を行ったとき認識が確定し判定信号が出力されるオン（ＯＮ）−オフ（ＯＦＦ）モードと、拍手が１回で認識を確定させて判定信号が出力される選択アップダウンモードの２種類が設定可能である。
【００３０】
図４は拍手３回を行って認識操作を実現するＯＮ−ＯＦＦモードのタイミングチャートを示す。図４にタイミングチャートを示すＯＮ−ＯＦＦモードのアルゴリズムでは、拍手の回数が３回や４回に係わらず、所定の回数、等間隔で拍手を検出し、更にその前後に一定期間拍手が検出されないことを認識確定の条件とする。この認識確定の条件は、具体的には図４（Ｃ）に示す静寂フラグＦS、同図（Ｄ）〜（Ｆ）に示すフラグＦ1〜Ｆ3、同図（Ｇ）に示す無音フラグＦNがセットされることである。図４の例では、上記所定の拍手回数は３回としている。判定処理動作を図４のタイミングチャートに従って順を追って説明する。
【００３１】
まず、判定処理部１０９の判定処理器１０９２は、図４（Ｃ）に示す静寂フラグＦｓがセットされているかどうか判定する。判定処理器１０９２は、静寂フラグＦｓがセットされておらず、かつ、図４（Ａ）に示すエッジ検出フラグＦＰが０である状態からカウンタ１０９１のカウントを開始させる。カウンタ１０９１のカウント開始時刻（ｔ＝０）から図４（Ｉ）に示すようにカウント値が増加していき、規定値に達するまでの一定期間（ｔｓ）、同図（Ａ）に示すようにエッジ検出フラグＦｐがセットされない状態（論理０の状態）が続くと、静寂と見なして同図（Ｃ）に示すように静寂フラグＦｓがセットされ（論理１となり）、これにより時刻ｔを０にリセットしてから一連の判定動作がスタートする。
【００３２】
一定期間ｔｓ経過しないうちに、エッジ検出フラグＦｐがセットされた場合は、カウンタ１０９１を”０”にリセットし、再度カウントを始める。なお、オーバーフローを防ぐため、図４（Ｉ）に示すようにカウンタ１０９１にはリミッタ値ＬＭを設けておく。
【００３３】
その後、静寂フラグＦｓが”１”で、かつ、後述する１回目の拍手音の検出フラグＦ１が初期値の”０”の状態で、エッジ検出フラグＦｐの入力待ち状態となり、時刻ｔはインクリメン卜していく。そして、１回目の拍手音のエッジ検出フラグが図４（Ａ）に５０１で示すように入力されると、エッジ検出フラグＦｐが”１”と判定され、１回目の拍手音の検出フラグＦ１を同図（Ｄ）に示すようにセットして（論理”１”として）１回目の拍手と判定する。また、この時、時刻ｔを再び”０”にセットして、エッジ検出フラグＦｐの立ち上がりでカウンタ１０９１が同図（Ｉ）に示すように再びカウントし始める。
【００３４】
その後、上記フラグＦｓとＦ１が共に”１”で、かつ、後述する２回目の拍手音の検出フラグＦ２が初期値の”０”の状態で、エッジ検出フラグＦｐの入力待ち状態となる。この状態で、次に、２回目の拍手音のエッジ検出フラグＦｐが図４（Ａ）に５０２で示すように入力されて、エッジ検出フラグＦｐが”１”であると判定すると、２回目の拍手音のエッジ検出フラグＦｐの立ち上がりが
ｔ≧ｔ１、かつ、ｔ＜ｔ1＋ｔ2、
つまり、図４（Ｂ）に示すゲート幅ｔ2を持つゲートフラグＦＧの２回目の拍手音用のゲート５０４内であるかどうか判定する。２回目の拍手音のエッジ検出フラグＦｐの立ち上がりがゲート５０４内であれば、図４（Ｅ）に示すように２回目の拍手音の検出フラグＦ2がセットされる。同時に、その時点でのｔの値を、１回目の拍手音と２回目の拍手音のインターバル期間ｔIとしてストアし、ｔ＝０にリセットして再度カウンタ１０９１のカウントを始める。
【００３５】
次に、上記のフラグＦSとＦ1とＦ2が”１”で、かつ、後述する３回目の拍手音の検出フラグＦ3が初期値の”０”の状態で、３回目の拍手音のエッジ検出フラグＦpが図４（Ａ）に５０３で示すように入力されると、エッジ検出フラグＦpが”１”であることを判定され、３回目の拍手音のエッジ検出フラグＦpの立ち上がりが、
ｔ≧ｔI−（ｔ3／２）、かつ、ｔ＜ｔI＋（ｔ3／２）
つまり、図４（Ｂ）に示すゲート幅ｔ3を持つゲートフラグＦGの３回目の拍手音用のゲート５０５内であるかどうか判定する。３回目の拍手音のエッジ検出フラグＦpの立ち上がりがゲート５０５内であれば、図４（Ｆ）に示すように３回目の拍手音の検出フラグＦ3をセットする。さらに、３回目の検出フラグＦ3がセット（論理”１”）された後、再度ｔ＝０にリセットしてカウンタ１０９１のカウントを始める。
【００３６】
この時点では、静寂フラグＦS、検出フラグＦ1、Ｆ2、Ｆ3はすべて論理”１”であり、また、４回目の拍手音の検出フラグＦ4が初期値の”０”の状態である。この状態でｔ≧ｔI＋（ｔ3／２）となるまでエッジ検出フラグＦpがセットされなければ、時刻ｔはインクリメントされていき、エッジ検出フラグＦpがセットされない状態が上記の時間ｔI＋（ｔ3／２）継続した時点で、図４（Ｇ）に示すように、無音フラグＦNがセットされる（論理”１”とされる）。
【００３７】
そして、上記の各フラグＦS、Ｆ1〜Ｆ3、ＦNが全てセットされたので条件を満たし、入力成功となり、一連の判定動作が完了され、図４（Ｈ）に示すように判定フラグＦJが一定期間ｔFだけ出力される。一定期間ｔF経過後は、全てのフラグとカウンタを”０”にリセットし、カウンタ１０９１は再度カウントし始め、次の判定動作に備える。以上が、本実施例での判定動作である。
【００３８】
以上のように、所定回数の拍手について判定するだけでなく、その前後の状態を判定条件に加えることにより、ユーザは所定回数だけ拍手すれば、判定は所定回数＋２回分行われていることになり、ユーザに拍手回数が増える負担を課すことなく、より深い判定ができるようになる。
【００３９】
なお、２回目の拍手音のエッジ検出フラグＦPが入力されない状態が（ｔ1＋ｔ2）の時間継続した場合は、入力失敗と判定して前記インターバル期間ｔIと１回目の拍手音検出フラグＦ1をリセットする。３回目の拍手音のエッジ検出フラグＦPが入力されない状態がｔI＋（ｔ3／２）の時間継続した場合は、入力失敗と判定して前記静寂フラグＦSと拍手音検出フラグＦ1、Ｆ2をリセットする。また、３回目の拍手音の検出フラグＦ3をセットした後、ｔI＋（ｔ3／２）の期間経過する前に、エッジ検出フラグＦpが入力されたときには、予め定めた拍手音の回数より多いので、やはり入力失敗と判定する。
【００４０】
このように、本実施例によれば、１回目と２回目の拍手音のインターバル期間ｔIを、２回目の拍手音から３回目のゲートまでの期間に反映させることで、ゲートフラグＦGのインターバル期間が等間隔になるように自動的に調整し、また、２回目用のゲート期間ｔ2は比較的長く設定することで、ユーザの様々な拍手のペースに対応することができる。
【００４１】
ここまでがＯＮ−ＯＦＦモードの拍手音認識について述べたもので、アルゴリズムの内容は本発明者による先願（特願２００６−２３０８７９）の内容に添ったもので、誤認識に対する耐性の高い方式である。本実施例ではＯＮ／ＯＦＦモード時、３回等間隔で拍手をした場合に電源をオンさせる。また、選択アップダウンモード時はグラフィックスによるメニュー画面が出て、それに添って拍手を１回する毎に操作が確定してメニューの案内に添った制御が発行される（これについては、本出願人の提案になる発明を記載した特願２００６−３３５２７７に詳しく記載されている。）。
【００４２】
図５は選択アップダウンモードを実現するための拍手音認識の内容説明用タイミングチャートを示す。前記したＯＮ−ＯＦＦモードとして活用するアルゴリズムとは異なり、選択アップダウンモードでは、図５に示すように、拍手音１回毎に出るエッジ検出フラグ１回毎に認識を確定させて判定信号（図４の判定フラグＦｊに相当）を出力させる。
【００４３】
図５（Ａ）はエッジパルス生成器１０８からエッジパルス（以下、エッジ検出フラグという）が時系列に得られた例で、ここでは６０１〜６０４で示すように４回拍手音が検出された場合を表す。正確にはこのモードでは拍手の認識が１回毎に確定して制御が発行される作用が４度行われたことになる。図５（Ｂ）はエッジ検出フラグ６０１、６０２、６０３、６０４が検出された直後にゲートパルス６０５、６０６、６０７、６０８を立てて、拍手がされた直後にエッジ検出フラグが無いことを確認する。このゲートの期間は独りで連続に拍手できる期間よりも短い期間に設定し、複数の人が叩くような場合や意図しない物音に対する誤認識を避けるためのものである。従って、図５（Ｂ）のゲートによる保護は必ずしも必要なわけではないが少しでも誤認識に対する耐性を高める方策として好ましい。
【００４４】
図５（Ｃ）はエッジ検出フラグを検出して認識を確定させた時点で判定信号が出力されて、その結果として特定の値をインクリメントする（アップさせる）場合を描いたものである。エッジ検出フラグに応じて、第１の認識の第１の確定点から第４の認識の第４の確定点までエッジ検出フラグ毎に認識を確定させて判定信号を出力させて、その結果として所望の制御を実行するものである。この選択アップダウンモードはＯＮ−ＯＦＦモードに比べて認識のアルゴリズムはシンプルで誤認識に対する耐性は低いものであるが、メニューが出ている特定の期間であることと、メニューに添って修正が可能であるため、耐性の問題は実用的に許容できるものである。また、選択アップダウンモードは後述するグラフィックスで生成されるメニュー画面などと組み合わせることで、拍手音認識の多様性を生み出すものとして有効である。
【００４５】
図６は拍手音による認識操作が、判定モードに添った制御で、テレビジョン受像機の画面がどのように変化するかの一例を表した図である。図６において、左側の２重線で囲った部分が拍手の判定モードがＯＮ−ＯＦＦモードで認識されて制御される内容を示す。図６の右側の２重線で囲った部分が画面にメニューが現れて拍手の判定モードが選択アップダウンモードで認識されて制御される内容を示す。そして、拍手の判定モードと拍手の回数によるテレビジョン受像機の状態について説明するために、図６では画面１〜画面９に状態を記載している。
【００４６】
前述した本出願人の提案になる特願２００６−３３５２７７記載の制御装置では、図６に示すように、ＯＮ−ＯＦＦモードでは、拍手を等間隔に３回することで電源とメニューをＯＮ、拍手を４回することで電源とメニューをＯＦＦさせる。図６の左上の画面１は電源がＯＦＦの状態である。この状態からテレビジョン受像機に拍手を３回すると、本実施例の制御装置によりテレビジョン受像機の電源がＯＮした画面２ａとなり、テレビ放送またはパッケージメディアの視聴状態になる。視聴状態になった画面２ａにおいて拍手を３回すると、本実施の形態の制御装置によりテレビジョン受像機の音量またはチャンネルを変更するためのメニューがＯＮとなり、画面３の音量・チャンネル選択メニュー画面になる。このメニューが現れた時点で拍手の認識の仕方すなわち判定モードは図面の右側の選択アップダウンモードになる。
【００４７】
メニューが現れた画面３では、拍手を１回することで音量とチャンネルが選択できる。ここでは音量を選択して画面７に遷移した場合について記述し説明する。画面７では音量のアップ・ダウン選択メニューが現れる。この音量のアップ・ダウン選択メニューは音量のアップ選択メニューと音量のダウン選択メニューとが、画面に周期的に交互に現れ、画面に現れているメニューで拍手を１回することでそのメニューを選択できる。従って、音量のアップ選択メニューが画面に表示されているときに、拍手を１回すると、音量アップを選択したとして画面８に遷移し、この画面８で拍手を所望の音量になるまで拍手をする。ここで拍手の回数が音量アップ量となる。これは図５で説明した拍手１回毎に認識が確定して制御がなされるモード、すなわちここで言う選択アップダウンモードで、図５（Ｃ）に描かれているようにアップ時は初期値に対して値をインクリメントすることになる。
【００４８】
図６に戻り、画面３にてチャンネルを選んだ場合の画面４は、音量の場合と同じようにチャンネルアップ画面とチャンネルダウン画面とが周期的に交互に切り替わる状態になり、チャンネルのアップまたはダウンが制御できる。音量またはチャンネルのアップまたはダウン画面５、画面６、画面８、画面９でアップまたはダウンが完了すると、特定の時間経過後テレビ視聴画面２ｂに戻る。または、拍手を４回することで画面２ａのテレビ視聴状態に戻る。そして、テレビ視聴状態の画面２ｂでＯＦＦさせる制御である拍手を４回すると電源がＯＦＦする。なお、画面２ａと画面２ｂは時間的な経過を模式的に表したものである。
【００４９】
以上が特願２００６−３３５２７７記載の制御装置による拍手の認識による電源ＯＮ−ＯＦＦ、チャンネルのアップダウン、音量のアップダウンである。これらの操作はテレビジョン受像機の主要な操作であり既存のリモコン（Remote Controller）を使わずして利用頻度の高い制御が可能となる。
【００５０】
本発明は、誤認識で電源がオンされた場合、それにユーザが気づかないと、修正が利かないまま電源オン状態をユーザの意志に反して継続してしまう問題を回避するものである。本実施例ではユーザが電源オンに気づいているかを問いかけ、その問いかけに対してユーザからの反応が無い場合は自動的に電源をオフさせて保護をかける。しかし、認識操作で電源が入る度にユーザに問いかけるのでは、ユーザはその煩雑さに嫌気をさしてしまい使い勝手の悪いものになってしまう。
【００５１】
そこで、本発明は以下説明するように、ユーザへの確認作業を最小限にして、かつ、保護を確実にかける方策を提案するものである。すなわち、上記の図６の画面２ａの状態にて後述するように、一定期間後に自動的に電源オンを継続する確認画面を表示して拍手認識においては選択アップダウンモードとして操作を促すか、又は上記の一定の期間にテレビの操作が入った場合、ユーザがテレビを視聴している意思があるとして電源オンを継続するように判断する。
【００５２】
図７〜図１０は本発明の実施例１におけるテレビジョン受像機の操作と制御の状態を示すタイミング図で、横軸に時間を示し、縦軸に各部の状態を示している。図７〜図１０においては、（Ａ）に示すグラフィックスの表示は実線で表示を、破線で非表示を示して区別し、（Ｂ）に示す電源のオンと（Ｃ）に示す電源オフの状態を実線で示し、（Ｄ）に示すタイマｂ、（Ｅ）に示すタイマａは時間をカウンタで刻んでいることを示しており、矢印の実線がカウンタの働きを表している。タイマａ及びタイマｂは後述する図１９又は図２０のシステム制御器４０１のソフトウェア処理により実現される。なお、電源オフとは、本発明の認識に係る装置以外の電源が落ちている状態をいう。
【００５３】
また、操作の入力手段として図７〜図１０の（Ｆ）と（Ｇ）にて拍手音認識とその他の操作を表している。拍手音認識については、１回の拍手を１個の黒丸で表し、そしてそれによる作用を認識結果として表す。更に、図７〜図１０（Ｇ）は拍手音認識部１００により得られる判定モードを示している。図７〜図１０（Ｆ）に示すその他の操作はリモコンとテレビジョン受像機本体にあるスイッチ等の操作を模式的に示す。更に、図９（Ｆ）では何れかの操作が入ったことを同一線分上に白丸で示している。
【００５４】
本実施例は認識操作でユーザが意図せずに拍手で電源がオンした場合、これを誤認識として保護をかけるものである。まず、意図した拍手操作、その他の操作、確認操作のいずれも入力されなかった場合の本実施例の動作について図７のタイミング図と共に説明する。図７のテレビジョン受像機の操作及び制御のシーケンスでは、（Ｇ）の拍手認識操作３回でテレビジョン受像機の電源がオンになるところから始まる。すなわち、電源オフ状態にあり、かつ、ＯＮ−ＯＦＦモードにあるテレビジョン受像機の近くで、ユーザが意図せずに何らかの原因で拍手を３回すると、（Ｇ）に模式的に示すように３回の拍手認識が時刻ｔ１でなされ、その結果、時刻ｔ１で示すように（Ｃ）に示す電源オフの状態から（Ｂ）に模式的に示すように電源オン状態となる。
【００５５】
また、拍手で電源がオンした場合はその時刻ｔ１から図７（Ｅ）に模式的に示すようにタイマａがカウントを始め、設定されている期間ｔａ１カウントする。この期間ｔａ１のカウント終了時点が時刻ｔ２で、ここで第１の確認表示を行う。この第１の確認表示の期間では、図７（Ｄ）に模式的に示すように、タイマｂが設定された期間ｔｂ１カウントする。また、この第１の確認表示の期間では、図７（Ａ）に実線で模式的に示しているように、図１１のようなグラフィックスによる確認画面が現れる。この確認画面はユーザに継続してテレビを見るか否かを問い合わせる内容である。また確認画面のみならず音（音声や電子音）によりユーザの注意を喚起させる。
【００５６】
グラフィックスによる確認画面が表示されているこの第１の確認表示の期間では、拍手認識操作はそれまでのＯＮ／ＯＦＦモード（実施例では拍手３回で電源オン、４回でオフ）から、選択アップダウンモードになり、拍手１回毎に操作が確定して制御が発行される。この第１の確認表示の期間であるタイマｂのｔｂ１期間に、図７（Ｆ）、（Ｇ）に示すように、拍手認識操作及びその他の操作で確認作業が入らなかった場合には、誤認識である確率が高いと判断し、タイマｂのｔｂ１期間経過時点の時刻ｔ３で図７（Ｃ）に実線で模式的に示すように、強制的に電源をオフさせる。
【００５７】
次に、確認表示画面が表示されて、ユーザの確認操作が入る場合の本実施例の動作について図８のタイミング図と共に説明する。図８中、図７と同一時刻には同一符号を付し、その説明を省略する。図８のテレビジョン受像機の操作及び制御のシーケンスでは、ユーザの確認操作は図８（Ａ）に示すグラフィックス表示による第１の確認画面の表示期間中である実線部の時刻ｔ２から時刻ｔ３の間に拍手による操作が入った場合を示す。拍手認識操作は選択アップダウンモードであり拍手１回で認識操作が完結される。
【００５８】
すなわち、上記の時刻ｔ２から時刻ｔ３の間の時刻ｔｃで図８（Ｇ）に模式的に示すように、１回の拍手音の認識結果が得られると、その時刻ｔｃで同図（Ａ）に模式的に示すように第１の確認表示場面が消えて画面が視聴状態に戻り、また、同図（Ｂ）に模式的に示すように電源オン状態が継続する。
【００５９】
確認画面で確認の操作が入るということは、ユーザがテレビを視聴していることに他ならず、当初の電源オンが誤確認でなかったか、または認識違いで電源が入ったがテレビを見ることに気が変わったこととして考えられる。従って、確認操作が入ることでユーザがテレビを視聴する確認がとれたとして電源オン状態を継続させる。これにより、確認操作によりテレビの視聴が継続される。なお、図８では確認画面に対する確認の操作は拍手認識による操作であるが、その他の操作である例えばリモコンの決定ボタンなどを押下する操作でも同様の機能が実現できる。
【００６０】
しかしながら、拍手認識操作で電源オンする度にユーザにこのような確認作業を求めるのは使い難いものになってしまう。このため、本実施例では第１の確認画面を表示するまでの期間（ｔａ１）にテレビの操作が入った場合は電源オンが誤認識でなかったとして確認画面を出さないようにする。ここで、上記の「テレビの操作」とは、チャンネル変更や音量などを拍手認識操作やその他の操作が入ることを指す。
【００６１】
図９はそのような確認画面が表示される前にテレビジョン受像機への操作が入った場合のシーケンスを示す。図９中、図７と同一時刻には同一符号を付し、その説明を省略する。図９のテレビジョン受像機の操作及び制御のシーケンスでは、拍手で電源がオンした時刻ｔ１から図９（Ｅ）に模式的に示すようにタイマａがカウントを始め、設定されている期間ｔａ１内で同図（Ｆ）に模式的に白丸で示すようにテレビジョン受像機のその他の操作が入った場合、その操作が入った時刻ｔｄでタイマａは同図（Ｅ）に模式的に示すように、カウンタの動作を停止させる。これにより、その他の操作が入った時刻ｔｄで電源オンの継続が決まり、図９（Ａ）に示すように確認画面が表示されることはない。なお、その他の操作とは、リモコンや本体制御スイッチにてテレビを操作した場合である。
【００６２】
図１０は図９と同様に確認画面が表示される前にテレビジョン受像機への操作が入った場合のシーケンスを示す。図１０中、図７と同一時刻には同一符号を付し、その説明を省略する。図１０のテレビジョン受像機の操作及び制御のシーケンスでは、拍手で電源がオンした時刻ｔ１から図１０（Ｅ）に模式的に示すようにタイマａがカウントを始め、設定されている期間ｔａ１内で同図（Ｇ）に模式的に示すように、拍手認識操作が入った時点で同図（Ｅ）に模式的に示すようにタイマａはカウンタの動作を停止もしくはリセット状態にされる。
【００６３】
これにより拍手認識操作が入った時点で、電源オンの継続が決まる。ここでいう拍手認識操作は、前記した拍手認識によるチャンネルや音量の制御である。テレビの視聴状態で拍手を３回することで、図１０（Ａ）に模式的に示すようにグラフィックスによるメニュー画面が表示（オン）されて、それを拍手で選択及びアップダウンさせるものである。
【００６４】
このように、本実施例によれば、第１の確認画面を表示するまでの期間（ｔａ１）に、その他の操作又は拍手により確認作業をした場合は、電源オンが誤認識でなかったとして確認作業を終了させ、電源オン状態を継続させる。
【００６５】
次に、本発明の電子機器の制御方法の実施例２について、図面と共に説明する。図１２〜図１６は本発明の実施例２におけるテレビジョン受像機の操作と制御の状態を示すタイミング図で、横軸に時間を示し、縦軸に各部の状態を示し、縦軸の項目は図７〜図１０と同様である。この実施例２は１度目の確認が拍手認識のとき２度目の確認を行うことで、より信頼性を向上させたものである。すなわち、選択アップダウンモード時の拍手認識は、１回の拍手で完結するため、拍手と同様の雑音を誤認識して確認が終了することが想定される。そのため、本実施例では再確認をすることで誤認識を避けるのが狙いである。但し、拍手認識によるチャンネルや音量の変更操作は、メニューを出すのに３回拍手をして、メニューを選択するのに１回拍手し、さらにアップダウンさせるために拍手を１回以上するので、誤認識で無いことの確認がとれたとして電源オンを継続させることとする。
【００６６】
まず、意図した拍手操作、その他の操作、確認操作のいずれも入力されなかった場合の本実施例の動作について図１２のタイミング図と共に説明する。図１２のテレビジョン受像機の操作及び制御のシーケンスでは、（Ｇ）の拍手認識操作３回でテレビジョン受像機の電源がオンになるところから始まる。すなわち、電源オフ状態にあり、かつ、ＯＮ−ＯＦＦモードにあるテレビジョン受像機の近くで、ユーザが意図せずに何らかの原因で拍手を３回すると、（Ｇ）に模式的に示すように３回の拍手認識が時刻ｔ１でなされ、その結果、時刻ｔ１で示すように（Ｃ）に示す電源オフの状態から（Ｂ）に模式的に示すように電源オン状態となる。
【００６７】
そして、図７に示した実施例１の場合と同様に、時刻ｔ１から図１２（Ｅ）に模式的に示すようにタイマａがカウントを始め、設定されている期間ｔａ１のカウント終了時点の時刻ｔ２で、図１２（Ｄ）に模式的に示すように、タイマｂが設定された期間ｔｂ１カウントすると共に、図１２（Ａ）に模式的に示すように第１の確認画面が表示される。この実施例２では第１の確認表示の期間に確認の操作が入らなかったことを想定している。この実施例２では第１の確認表示の期間に確認の操作が入らなかった場合は、第１の確認画面の期間ｔｂ１経過後の時刻ｔ３で図１２（Ａ）に模式的に示すように確認画面が自動的に消えると共に、同図（Ｅ）に模式的に示すようにタイマａが再びカウントを始め、かつ、同図（Ｇ）に示すようにＯＮ−ＯＦＦモードに切り替わる。
【００６８】
その後、時刻ｔ３から図１２（Ｅ）に模式的に示すようにタイマａが設定されている期間ｔａ２でカウントを終了すると共に、同図（Ｇ）に示すように選択アップダウンモードに切り替わる。そのカウント終了時点の時刻ｔ４で、図１２（Ｄ）に模式的に示すように、タイマｂが設定された期間ｔｂ２カウントすると共に、同図（Ａ）に模式的に示すように第２の確認画面が表示される。そして、第２の確認表示の期間に確認の操作が入らなかった場合は、第２の確認画面の期間ｔｂ２経過後の時刻ｔ５で図１２（Ａ）に模式的に示すように確認画面が自動的に消えると共に、同図（Ｃ）に模式的に示すように強制的に電源がオフされる。このように、この実施例では、２度目の確認画面の表示期間ｔｂ２までに操作がなく確認画面時に確認操作が入らなかったならば強制的に電源をオフさせる。
【００６９】
図１７（Ａ）は第１の確認画面を示し、同図（Ｂ）は第２の確認画面を示す。図１７（Ａ）に示すように、第１の確認画面は、表示領域を小さくしてテレビを視聴していても邪魔にならない程度にしている。これはこの機会を逃しても電源が強制的にオフされることが無いので見逃しても良いとしているからである。これに対し、図１７（Ｂ）に示すように、第２の確認画面は最終確認として視聴を妨げるような画面の多くの領域を締めるようにして、確認操作を促すようにしている。なお、第１の確認画面と第２の確認画面は、上記のような画面の大きさを変える場合に限らず、画面の色あるいは形状あるいはそれらの両方を変えるようにしてもよい。
【００７０】
なお、実施例１と同じように確認画面が表示されるまでに、拍手音による操作やその他の操作（リモコン／本体操作）が入った場合は確認画面の表示は行わず、電源オンが継続されるものである。また、音によりユーザの注意を喚起させる場合も同様に、最初の確認期間と後の確認期間で音声の内容、音色、音量、あるいは期間を変えて注意を促す。例えば、最初の確認期間では、テレビの視聴の邪魔にならないようにして、最終の確認期間ではより注意を喚起させる音を発生させるようにする。
【００７１】
このように２度の確認は、最終確認までの時間を稼ぐことで、その間に何らかの操作が入ってユーザに確認の手間を省くこと、確認操作を怠って強制電源オフに至らないようにすることを狙いとするためのものである。これにより、本当にユーザの意志でテレビの視聴が行われている場合は、電源オン状態をユーザの手間なく継続させて、誤認識で電源が入ったときは実施例１と同様に電源をオフさせることが可能となる。
【００７２】
次に、第２の確認表示画面が表示されて、ユーザの確認操作が入る場合の本実施例の動作について図１３のタイミング図と共に説明する。図１３中、図１２と同一時刻には同一符号を付し、その説明を省略する。図１３のテレビジョン受像機の操作及び制御のシーケンスでは、ユーザの確認操作は図１３（Ａ）に示すグラフィックス表示による第２の確認画面の表示期間中である実線部の時刻ｔ４から時刻ｔ５の間に拍手による操作が入った場合を示す。拍手認識操作は選択アップダウンモードであり拍手１回で認識操作が完結される。
【００７３】
すなわち、上記の時刻ｔ４から時刻ｔ５の間の時刻ｔｅで図１３（Ｇ）に模式的に示すように、１回の拍手音の認識結果が得られると、その時刻ｔｅで同図（Ａ）に模式的に示すように第２の確認表示場面が消えて画面が視聴状態に戻り、また、同図（Ｂ）に模式的に示すように電源オン状態が継続する。
【００７４】
ここではより誤認識への耐性を確保するために２度の確認操作を求めており、１回目の確認画面が表示されているとき確認操作が入らなくても２度目で確認操作が入れば電源オンを継続する。図１３では１回目の確認操作が入らず、２度目の確認画面が出て、２度目に拍手による確認操作が入った場合で、電源オンが継続される。なお、１度目の確認画面が表示されている期間で確認操作が入った場合は、そこで確認操作を完了させる。これについては図１３には描いていないが図８と同様になる。
【００７５】
図１４は確認操作が認識操作の拍手による場合、２度の確認操作をユーザに求めた場合の実施例２のシーケンスを示す。図１４中、図１２と同一時刻には同一符号を付し、その説明を省略する。図１４のテレビジョン受像機の操作及び制御のシーケンスでは、図１４（Ａ）に示すグラフィックス表示による第1の確認画面の表示期間中である実線部の時刻ｔ２から時刻ｔ３の間の時刻ｔｆで同図（Ｇ）に示す拍手による操作が入った後、更に第２の確認画面の表示期間中である実線部の時刻ｔ４から時刻ｔ５の間の時刻ｔｇで同図（Ｇ）に示す拍手による確認操作が入った例を示す。この場合、時刻ｔｇで同図（Ａ）に模式的に示すように第２の確認表示場面が消えて画面が視聴状態に戻り、また、同図（Ｂ）に模式的に示すように電源オン状態が継続する。
【００７６】
この実施例では、１度目の確認画面で拍手による確認操作が入り、さらに２度目の確認画面で拍手による確認操作が入り確認が完了する。図１４に示す拍手の認識操作の場合は、２度の確認を求めるもので、合わせて２度の確認画面が出ても確認操作が入らなかった場合は図１３と共に説明したように強制的に電源がオフされる。従って、１度の確認操作が入っても２度目の確認操作が入らなかった場合は３度目の確認画面が入り、その際に確認操作が入れば電源オンが継続し、確認操作が入らなかったならば電源が強制オフされる。
【００７７】
図１５は第２の確認画面が出る前にその他の操作が入った場合の実施例２のシーケンスを示す。図１５中、図１２と同一時刻には同一符号を付し、その説明を省略する。図１５のテレビジョン受像機の操作及び制御のシーケンスでは、第１の確認画面が表示されているときには何の操作入力もなされなかったが、第２の確認画面が表示される前の時刻ｔｈで図１５（Ｆ）に白丸で模式的に示すように、その他の操作が行われた場合、ユーザがテレビを視聴しているとして確認作業を完了させて、同図（Ｂ）に示すように第２の確認画面を表示せずに電源オンが継続される。
【００７８】
図１６は拍手音で音量やチャンネルアップダウンの操作が入った場合の実施例２のシーケンスを示す。図１６中、図１２と同一時刻には同一符号を付し、その説明を省略する。図１６のテレビジョン受像機の操作及び制御のシーケンスでは、第１の確認画面が表示されているときには何の操作入力もなされなかったが、第２の確認画面が表示される前に図１５（Ｇ）に模式的に示すように、３回拍手して同図（Ａ）に模式的に示すように、拍手音認識操作メニューを表示させる。
【００７９】
これにより拍手認識操作が入った時点で、１回拍手して同図（Ｅ）に模式的に示すようにタイマａはカウンタの動作を停止もしくはリセット状態にされると共に、電源オンの継続が決まる。ここでいう拍手認識操作は、前記した拍手認識によるチャンネルや音量の制御である。この場合も、本実施例では、図１５と同様にユーザがテレビを視聴しているとして確認作業を完了させて第２の確認画面を表示せずに電源オンを継続させる。
【００８０】
この実施例２では確認操作または確認画面を２回（３以上の複数でもよい）にすることで、より深い確認作業ができる。認識操作の誤認識への対応として、テレビの視聴環境が静かであるか、または騒音などで誤認識が起きそうな環境かでこれらの確認の度合いの最適化を図ることができる。
【００８１】
次に、本発明の電子機器の制御方法の一実施の形態について説明する。図１８は本発明になる電子機器の制御方法の一実施の形態のフローチャートを示す。このフローチャートは、後述する図１９又は図２０のシステム制御器４０１により実行される。まず、電源がオフの状態から開始され、電源オン（ＯＮ）認識判定がなされる（ステップＳ１）。この電源オン認識判定のステップＳ１では、テレビジョン受像機の電源がオフ（ＯＦＦ）状態（本発明の認識に係る装置以外の電源が落ちている状態）であり、拍手音３回を認識すると電源がオンされる（ステップＳ２）。拍手音３回が認識されない場合は、引き続き電源オン認識判定を監視する。このフローチャートでは電源オンは認識操作の場合で、電源オフについてはその他の操作に分類されるリモコンや本体のスイッチ操作も考えられる。このプログラムのアルゴリズムは認識操作の誤認識対する保護に対してであり、認識操作（拍手音や画像認識）で電源がオンされたときの処理である。
【００８２】
ステップＳ２で電源がオンされると、カウンタＣａが初期状態にリセットされた後（ステップＳ５ｒ）、カウンタＣａがインクリメント（カウント値の増加）される（ステップＳ５ｉ）。続いて、電源オフ（ＯＦＦ）の判定が行われる（ステップＳ３）。この電源オフ判定のステップＳ３では拍手音４回を認識するか、またはリモコンや本体の電源スイッチの操作を認識して電源オフを判定したときは、電源をオフとし（ステップＳ４）、開始に戻る。
【００８３】
一方、電源オフ判定ステップＳ３にて電源がオフでない（電源がオンである）と判定すると、認識操作が入ったか（ステップＳ６）、他の操作が入ったか（ステップＳ７）を評価する。この評価がＹＥＳのときカウンタＣａのカウントをストップさせて（ステップＳ８）、このプログラムを終了させる。これはユーザの意志でテレビの電源が入れられたと判断し、このプログラムの目的を達したためである。
【００８４】
前記ステップＳ６とステップＳ７の評価がＮＯのときは、カウンタＣａのカウント値がタイマａの設定期間ｔａに相当する値より大となったかどうか判定する（ステップＳ９）。カウンタＣａのカウンタ値が設定期間ｔａに相当する値を越えていない場合は、ステップＳ５ｉに進み、電源オンの視聴状態のカウンタＣａのインクリメントを行う。一方、カウンタＣａのカウンタ値が設定期間ｔａに相当する値を越えた場合は、カウンタＣｂを初期状態にリセットした後（ステップＳ１０ｒ）、カウンタＣｂをインクリメント（カウント値の増加）する（ステップＳ１０ｉ）。このカウンタＣｂは確認メッセージの表示期間を設定するためのものである。続いて、確認メッセージ表示ステップＳ１１にて図１１の確認メッセージが表示される。この確認メッセージは確認操作をユーザに促すものである。
【００８５】
ステップＳ１１の確認メッセージの表示に続いて、確認操作が入ったかどうか評価される（ステップＳ１２）。確認操作が入っていないときは、カウンタＣｂのカウント値がタイマｂの設定期間ｔｂに相当する値より大となったかどうか判定する（ステップＳ１４）。このタイマｂのステップＳ１４では確認メッセージを表示している期間を評価し、カウンタＣｂのカウント値がタイマｂの設定期間ｔｂに相当する値以下のときは、電源ＯＦＦ判定ステップＳ１５を経由して確認メッセージを継続して表示するためにステップＳ１０ｉに戻る。なお、電源ＯＦＦ判定ステップＳ１５は、リモコン又は本体の電源スイッチにて電源がオフされる場合である。
【００８６】
一方、ステップＳ１４でカウンタＣｂのカウント値がタイマｂの設定期間ｔｂに相当する値以上となったことを判定したときは、ステップＳ４に進み電源を強制的に切断する。これは確認メッセージの表示期間ｔｂでユーザが確認操作しなかった場合は、ユーザが反応しなかったと見なし、電源オンが誤認識で入った疑いが考えられるため電源をオフする処理である。一方、ステップＳ１２で確認操作が入ったと判定したときは、ユーザが反応したと判断し、確認メッセージを消去して（ステップＳ１３）、プログラムを終了する。
【００８７】
次に、本発明の電子機器の制御装置の各実施例について説明する。図１９は本発明になる電子機器の制御装置の実施例１のブロック図である。同図中、図１と同一構成部分は同一符号を付してある。図１９において２重線で囲っているのが制御対象の電子機器であるテレビジョン受像機４０８と、テレビを視聴しているユーザ４０９とを示す。このテレビジョン受像機４０８とユーザ４０９との間で本実施例のテレビの視聴に関する確認作業が行われる。
【００８８】
テレビジョン受像機４０８は本実施例により拍手音により操作を制御する（遠隔操作する）電子機器であり、テレビジョン受像機４０８内には、マイク１０１、アンプ１０２、拍手音認識部１００、その他の操作部３１０、本体スピーカ２０１、本体アンプ２０２、アンプ２０３、システム制御器（ＣＰＵ）４０１、グラフィックス生成器４０２、チューナ４０３、映像混合器４０４、表示装置４０５が設けられている。
【００８９】
テレビジョン受像機４０８には高周波搬送信号でテレビ信号が変調されたＲＦ信号が入力される。チューナ４０３は所望チャンネルの放送局からのＲＦ信号を選局した後、復調して帯域圧縮された信号を得た後、その信号をデコードして映像信号と音声信号を出力する。音声信号は本体アンプ２０２にて増幅されて本体スピーカ２０１に供給され、これにより電気−音響変換されて音波として空中に放射される。また、本体アンプ２０２の出力アナログ音声信号はアンプ２０３にて増幅され、図１で説明した拍手音認識部１００内のＡ／Ｄコンバータ２０４に適切な振幅で供給される。
【００９０】
一方、マイク１０１にて視聴環境の音波が音響−電気変換されてアナログ音声信号に変換され、アンプ１０２にて適切な振幅に増幅されて図１に示した拍手音認識部１００内のＡ／Ｄコンバータ１０３に入力される。拍手音認識部１００はシステム制御器４０１から得られる判定モードに添って拍手音を認識する。この判定モードは前記した通りＯＮ−ＯＦＦモードと選択アップダウンモードの２種類がある。拍手音認識部１００はこの判定モードに添って、前記したアルゴリズムに従って拍手音を認識して、その認識結果を判定信号としてシステム制御器４０１に出力する。
【００９１】
判定信号は判定モードに添って、ＯＮ−ＯＦＦモードのときは３回拍手を認識した場合の電源ＯＮの制御と４回拍手を認識した場合の電源ＯＦＦの制御であるかを区別してシステム制御器４０１に伝える。選択アップダウンモードでは拍手１回毎に認識が確定するので、拍手１回毎に認識したことを判定信号として伝える。
【００９２】
システム制御器４０１はテレビジョン受像機４０８の全体システムを統括的に制御するもので、例えば中央処理装置（ＣＰＵ）により構成されており、電源ＯＮ−ＯＦＦ、メニューＯＮ−ＯＦＦ及び適切なメニューの表示、音量の設定とアップダウン、チャンネルの設定とアップダウンなど、全てのテレビジョン受像機４０８の状態遷移をコントロールするものである。システム制御器４０１は拍手音認識部１００の状態に合わせて適切な判定モードを出力し、拍手音認識部１００から判定信号を受け取り適切な制御信号を出力してテレビジョン受像機４０８をコントロールする。また、システム制御器４０１にはその他の操作部３１０の操作結果が入力される。その他の操作部３１０はリモコンの受光部から得られるコードを解析した結果を出力する場合と、テレビジョン受像機４０８の本体に設置されているスイッチによる操作を想定している。
【００９３】
本実施例では拍手音認識で電源がオンした場合、一定の期間を経てユーザに確認画面を表示する。この確認画面は、システム制御器４０１で前記タイマａの設定期間ｔａ１をカウントした後にグラフィックス生成器４０２にて生成される。また、確認画面の表示期間は、システム制御器４０１にて、前記タイマｂの設定期間ｔｂ１カウントして制御される。
【００９４】
グラフィックス生成器４０２の出力信号は、チューナ４０３から出力された所望ＴＶ放送局の映像信号と映像信号混合器４０４で混合される。混合された映像信号は表示装置４０５にて表示される。従って、表示装置４０５の表示画像はテレビ放送画面にグラフィックス生成器４０２で生成されたメニュー画像が多重された内容である。グラフィックスのみのメニュー画面も考えられるが、テレビ画像が背景に流れていて、かつ、メニュー画面も認識できるのが好ましい。映像混合器４０４での多重の仕方は多様な方法が考えられるが、本発明の要旨ではないので、その詳細な説明は省略する。
【００９５】
図１９の構成ではユーザ４０９は表示装置４０５の確認画面の表示の内容に従って、確認の拍手での操作かその他の操作をしてテレビを視聴していることをテレビ受像機４０８に応答する。従って、図１９に破線で示すように、表示画面４０５をユーザ４０９が見て操作をすることでテレビジョン受像機４０８とユーザ４０９との間にフィードバックループが形成されて確認作業が可能となる。この図１９の実施例はグラフィックス生成器４０２で生成された選択のメニュー画面の画像をユーザ４０９がそれを視覚で認識して適切なタイミングで拍手する場合の例である。また確認操作は、その他の操作部３１０を通じて、あるいはユーザ４０９による拍手音にて行う。
【００９６】
次に、本発明の電子機器の制御装置の実施例２について説明する。図２０は本発明になる電子機器の制御装置の実施例２のブロック図である。同図中、図１９と同一構成部分は同一符号を付し、その説明を省略する。図２０において、テレビジョン受像機４１０が本実施例により拍手音により操作を制御する（遠隔操作する）電子機器であり、テレビジョン受像機４１０内には、図１９に示したテレビジョン受像機４０８と比較すると、映像混合器４０４が削除されると共に、音生成器４０６と音声混合器４０７とが追加されている。本実施例は図１９の実施例のようにグラフィックス確認画面を見て確認の操作を行うのではなく、音生成器４０６により生成された音声による確認操作を促す構成である。なお、この音生成器４０６は報知音のような言葉にならない音を生成するようにしてもよい。
【００９７】
図２０において、音生成器４０６は確認用音声信号をシステム制御器４０１の制御に基づいて発生する。音生成器４０６から出力された確認用音声信号は、チューナ４０３から得られる所望ＴＶ放送のアナログ音声信号と音声混合器４０７にて混合される。混合された音声信号は、本体アンプ２０２で増幅されて本体スピーカ２０１から音波として出力される一方、アンプ２０３で所要レベルに増幅された後拍手音認識部１００に供給される。
【００９８】
図２０の構成ではユーザ４０９は本体スピーカ２０１から出力される所望ＴＶ放送番組の音声と確認音声又は確認の報知音との混合内容に従って、確認の拍手での操作かその他の操作部３１０の操作をしてテレビを視聴していることをテレビ受像機４０８に応答する。従って、図２０に破線で示すように、確認音声又は確認の報知音をユーザ４０９が聞いて操作をすることでテレビジョン受像機４０８とユーザ４０９との間にフィードバックループが形成され、確認の拍手音による操作やその他の操作による確認作業が可能となる。なお、本実施例では確認作業のために、音声と画像とを併用するようにした場合は、ユーザ４０９の注意をより喚起することができる。
【００９９】
なお、図１９や図２０の実施例における電源オフにおいても、アンプ２０３と１０２、拍手音認識部１００、その他の操作部３１０、システム制御器４０１についてはテレビジョン受像機４０８、４１０のスタンバイ時として常に通電しており、リモコンや認識操作にて電源オン操作が得られる状態にある。
【０１００】
以上説明した本発明の実施の形態及び実施例では、画像や非音声の認識操作結果を用いてテレビジョン受像機（電子機器）を遠隔操作するにあたり、認識操作の持つ本質的な問題である誤認識への保護を図ることができる。この場合の誤認識とはあくまでも認識精度の問題だけでなく、人の意図しない動作に対する誤認識も含めた問題である。本発明の実施の形態及び実施例では、人と人の間で認識違いが多々あっても殆どの場合、確認というフィードバック作業が入ると同様に、画面やスピーカを通じてユーザにフィードバックを掛けてテレビジョン受像機とユーザ間で対話的な確認作業を実現することで上記の誤認識の問題を解決するものである。
【０１０１】
このような本実施の形態及び実施例の効果は、誤認識で電源が入った場合にそのまま電源が入り続けるような問題に対して、画面や音で確認することで、適切な状態に制御ができるということである。すなわち、本実施の形態及び実施例によれば、誤認識で電源オンした場合は、強制的に電源をオフすることができ、電力の浪費を抑制できる。また、確認が入る前に、チャンネルや音量などの一般的な作業が入った場合は、ユーザがテレビを見る意思があるものとして確認画面を表示しないので、ユーザへの負担を軽減することができる。更に、本実施の形態及び実施例によれば、確認操作は拍手や画像認識操作で実現できるため、リモコンや本体といった装置を操作する場合に比べて手間がかからない利点がある。
【０１０２】
なお、以上の実施の形態及び実施例の認識操作は拍手音による認識操作で具体的に説明したが、拍手音による認識操作に替えて、例えば、本発明者が特願２００６−２９７４３２や特願２００６−２７７１４０などにて提案したような画像認識による認識操作でも本発明を適用できる。上記の特願２００６−２９７４３２記載の画像認識による電子機器は、電子機器内の表示装置の前に位置する操作者を電子機器に設けたビデオカメラで撮影し、その撮影画像の画面を水平方向にＮ分割（Ｎは２以上の自然数）、垂直方向にＭ分割（Ｍは２以上の自然数）した複数の検出領域それぞれに対応して設けた複数の検出器を用いて、前記ビデオカメラで撮影された操作者が行う動作を、撮影画像が上記複数の検出領域でどのように検出されるかの検出結果に基づいて制御動作を行う。
【０１０３】
この電子機器によれば、電子機器の電源がＯＦＦのままで、表示装置には何も表示されていない状態において、操作者が手を縦（上下）に振る動作をビデオカメラで撮影した撮影画像から認識したときは電源をＯＮにする。また、電子機器の電源がＯＮで表示装置に何らかの画像を表示している状態において、操作者が手を横（左右）に振る動作をビデオカメラで撮影した撮影画像から認識したときは電源をＯＦＦにする。なお、電源ＯＦＦとは、前述したように表示装置の表示が行われていないなど、本発明の認識に係る装置以外の電源が落ちている状態である。
【０１０４】
また、上記の特願２００６−２７７１４０記載の画像認識による電子機器の制御装置では、電子機器内の表示装置の前に位置する操作者を電子機器に設けたビデオカメラで撮影し、その撮影画像を鏡像変換して得た鏡像変換画像信号と複数の操作検出領域を含んだ操作用画像に対応した操作用画像信号とを混合して表示装置に表示し、表示装置に表示された前記混合画像信号の画像における複数の操作検出領域のうちから、前記画像に表示された操作者が指し示したと判断される操作検出領域を検出し、この検出した操作検出領域に対応した電子機器の制御動作を行う。この画像認識による認識操作は、表示装置に前記混合画像信号の画像を表示させた状態において、電源オンさせる場合であれば、例えば手を縦に振る動作や特定のボタンを空間でクリックする手の動作を行う。
【０１０５】
なお、本発明は以上の実施の形態及び実施例に限定されるものではなく、例えば、図１〜図４と共に説明した拍手音認識処理や上記の画像認識処理、あるいは図１８に示したフローチャートをコンピュータにより実行させる電子機器の制御プログラムも包含するものである。この電子機器の制御プログラムは、記録媒体に記録されてコンピュータに取り込まれてもよいし、通信ネットワークを介して配信されてコンピュータに取り込まれてもよく、更には電子機器内に組み込まれていてもよい。
【図面の簡単な説明】
【０１０６】
【図１】本発明の電子機器の制御装置の一実施の形態の要部のブロック図である。
【図２】図１のＡ／Ｄコンバータの入力波形の様子及びＡ／Ｄ変換前と後の信号の関係を示した図である。
【図３】図１中の判定処理部の一例のブロック図である。
【図４】本発明におけるＯＮ−ＯＦＦモードの判定処理アルゴリズムを説明するタイミングチャートである。
【図５】本発明における選択アップダウンモードの判定アルゴリズムを説明するタイミングチャートである。
【図６】本発明の電子機器の制御方法の一例と状態遷移の一例を表した図である。
【図７】本発明の実施例１におけるテレビジョン受像機の操作と制御の状態を示すタイミング図で、意図した拍手操作、その他の操作、確認操作のいずれも入力されなかった場合のタイミング図である。
【図８】本発明の実施例１におけるテレビジョン受像機の操作と制御の状態を示すタイミング図で、確認表示画面が表示されて、ユーザの確認操作が入る場合のタイミング図である。
【図９】本発明の実施例１におけるテレビジョン受像機の操作と制御の状態を示すタイミング図で、確認画面が表示される前にテレビジョン受像機へのその他の操作による操作が入った場合のタイミング図である。
【図１０】本発明の実施例１におけるテレビジョン受像機の操作と制御の状態を示すタイミング図で、確認画面が表示される前にテレビジョン受像機への拍手による操作が入った場合のタイミング図である。
【図１１】実施例１の確認画面の表示内容を示す図である。
【図１２】本発明の実施例２におけるテレビジョン受像機の操作と制御の状態を示すタイミング図で、意図した拍手操作、その他の操作、確認操作のいずれも入力されなかった場合のタイミング図である。
【図１３】本発明の実施例２におけるテレビジョン受像機の操作と制御の状態を示すタイミング図で、２回目の確認画面が表示されているときにテレビジョン受像機への拍手による操作が入った場合のタイミング図である。
【図１４】本発明の実施例２におけるテレビジョン受像機の操作と制御の状態を示すタイミング図で、１回目と２回目の確認画面が表示されているときにテレビジョン受像機への拍手による操作が入った場合のタイミング図である。
【図１５】本発明の実施例２におけるテレビジョン受像機の操作と制御の状態を示すタイミング図で、２回目の確認画面が表示される前にテレビジョン受像機へのその他の操作による操作が入った場合のタイミング図である。
【図１６】本発明の実施例２におけるテレビジョン受像機の操作と制御の状態を示すタイミング図で、２回目の確認画面が表示される前にテレビジョン受像機への拍手による操作が入った場合のタイミング図である。
【図１７】本発明の実施例２における第１の確認画面と第２の確認画面の表示内容を示す図である。
【図１８】本発明の電子機器の制御方法の一実施の形態のフローチャートである。
【図１９】本発明の電子機器の制御装置の実施例１のブロック図である。
【図２０】本発明の電子機器の制御装置の実施例２のブロック図である。
【符号の説明】
【０１０７】
１００  拍手音認識部
１０１  マイク
１０２、２０３  アンプ
１０３、２０４  Ａ／Ｄコンバータ
１０４、２０５  オフセット成分除去部
１０５、２０６  絶対値化回路
１０６  本体音除去部
１０７  エッジ信号抽出器
１０８  エッジパルス生成器
１０９  判定処理部
１１０  騒音状態検出部
２０１  本体スピーカ
３１０  その他の操作部
４０１  システム制御器
４０２  グラフィックス生成器
４０３  チューナ
４０４  映像混合器
４０５  表示装置
４０６  音生成器
４０７  音声混合器
４０８、４１０  テレビジョン受像機
４０９  ユーザ
１０９１  カウンタ
１０９２  判定処理器
【図１】
2008299477.tif 000003
【図２】
2008299477.tif 000004
【図３】
2008299477.tif 000005
【図４】
2008299477.tif 000006
【図５】
2008299477.tif 000007
【図６】
2008299477.tif 000008
【図７】
2008299477.tif 000009
【図８】
2008299477.tif 000010
【図９】
2008299477.tif 000011
【図１０】
2008299477.tif 000012
【図１１】
2008299477.tif 000013
【図１２】
2008299477.tif 000014
【図１３】
2008299477.tif 000015
【図１４】
2008299477.tif 000016
【図１５】
2008299477.tif 000017
【図１６】
2008299477.tif 000018
【図１７】
2008299477.tif 000019
【図１８】
2008299477.tif 000020
【図１９】
2008299477.tif 000021
【図２０】
2008299477.tif 000022