(57)【要約】【課題】ユーザが表示装置に対してどの位置にいても、表示装置に表示された操作ボタンが操作されたことが確実に検出できる電子機器を提供する。【解決手段】電子機器１はビデオカメラ２を有する。ビデオカメラ２によって撮影され表示装置２１の画面上に表示されたユーザの大きさを調整するために、画面上に第１の面積を有する測定領域が設定されている。測定領域にユーザが手をかざしたときの第１の面積に占める手の面積の割合を示す情報を制御情報判断器１８が生成する。生成された情報に応じて、画面上に表示されたユーザの大きさを拡大縮小するよう制御情報判断器１８は画像調整器１４を制御する。【選択図】図２
2008152720.tif 000002
【特許請求の範囲】
【請求項１】
電子機器において、
ビデオカメラと、
前記ビデオカメラの前に位置する操作者を前記ビデオカメラによって撮影した画像信号の鏡像変換を行う鏡像変換器と、
前記ビデオカメラによって撮影した画像信号又は前記鏡像変換器により鏡像変換された画像信号を拡大又は縮小する画像調整器と、
前記鏡像変換器及び前記画像調整器を経た画像信号を表示する表示装置と、
前記表示装置の画面上に表示された操作者の大きさを調整するために前記画面上に第１の面積を有する測定領域が設定され、前記画面に表示された操作者が対象物を前記測定領域にかざしたときの前記第１の面積に占める前記対象物の面積の割合を示す情報を生成する生成部と、
前記生成部によって生成された情報に応じて、前記表示装置の画面上に表示された操作者の大きさを調整するよう前記画像調整器を制御する制御部とを備えることを特徴とする電子機器。
【請求項２】
前記測定領域に重畳する操作ボタン用の操作用画像信号を生成する操作用画像生成器と、
前記鏡像変換器及び前記画像調整器を経た画像信号と前記操作用画像生成器より出力された操作用画像信号とを混合する混合器と、
前記操作ボタンに対応する第１の検出領域を前記対象物により操作する所定の動作に対応した前記第１の検出領域内の画像信号に基づいて第１の検出信号を発生する第１の検出器とを備え、
前記制御部は、前記第１の検出器が前記第１の検出信号を発生したのに応答して前記操作者の大きさを調整することを特徴とする請求項１記載の電子機器。
【請求項３】
前記測定領域と一致した第２の検出領域が設定され、前記鏡像変換器及び前記画像調整器を経た画像信号における前記第２の検出領域に相当する部分的な画像信号を抽出する抽出部と、
前記抽出部によって抽出した前記部分的な画像信号に基づいて前記対象物の面積の割合に応じた第２の検出信号を発生する第２の検出器とを備え、
前記制御部は、前記第２の検出信号に応じて前記画像調整器を制御することを特徴とする請求項１又は２記載の電子機器。
【請求項４】
前記測定領域より小なる第２の面積を有する第３の検出領域が設定され、前記第３の検出領域を前記測定領域内で所定の時間をかけて順次移動させる移動制御部と、
前記移動制御部によって前記第３の検出領域を前記測定領域内で移動させることによって、前記鏡像変換器及び前記画像調整器を経た画像信号における前記測定領域に相当する部分的な画像を抽出する抽出部と、
前記抽出部によって抽出した前記部分的な画像信号に基づいて前記対象物の面積の割合に応じた第２の検出信号を発生する第２の検出器とを備え、
前記制御部は、前記第２の検出信号に応じて前記画像調整器を制御することを特徴とする請求項１又は２記載の電子機器。
【請求項５】
前記第２の検出器が発生する前記第２の検出信号は、前記測定領域における前記対象物の位置を示す情報も含み、
前記画像調整器は、前記第２の検出信号に応じて前記画面に表示された操作者の位置を移動させることを特徴とする請求項４記載の電子機器。
【請求項６】
前記測定領域は、前記検出領域が移動する初期状態の範囲として設定された初期測定領域と前記初期測定領域に隣接した予備測定領域とを含み、
前記第２の検出器が発生する前記第２の検出信号は、前記測定領域における前記対象物の位置を示す情報も含み、
前記対象物の位置を示す情報に基づいて、前記検出領域が移動する領域を前記初期測定領域から前記予備測定領域を含む領域へと移動させる測定領域移動制御部を有することを特徴とする請求項４記載の電子機器。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は電子機器に係り、特にテレビジョン受像機やパーソナルコンピュータのように表示装置を有する電子機器における遠隔操作の仕方を改良した電子機器に関する。
【背景技術】
【０００２】
１９８０年代に赤外線リモートコントローラ（通称リモコン）がテレビジョン受像機をはじめとする家電機器に付属するようになり、手元で制御できるユーザインターフェースが広く普及し、家電製品の利用形態を大きく変貌させた。現在においてもこの操作形態が主流であるが、リモコンは１つの機能を１つのキー（ボタン）を押すことにより実行させる仕組みが基本となっており、例えばテレビジョン受像機では、「電源」「チャンネル」「音量」「入力切替」などのキーがそれに該当し、これまでのテレビジョン受像機にとって大変便利な遠隔の操作方法であった。
【０００３】
しかしながら、最近始まったデータ放送は、所望のメニュー画面を選択するために、リモコンの「上」「下」「左」「右」や「決定」キーを何度も押下することになり、煩雑で使いづらくなっている。また、ＥＰＧ（電子プログラムガイド）は、マトリクスに配列された案内画面から所望の位置を選択してキーを押下するため、同様の課題を有していた。
【０００４】
本出願人による先願である特開２００６−０９１９４８号公報（特許文献１）には、多様な電子機器に対する柔軟性と遠隔操作の利便性を両立させると共に、リモコンのような遠隔操作用機器を手元で利用することを不要とした電子機器が提案されている。特許文献１に記載の電子機器はユーザの手の動作をビデオカメラで撮影して、その動作から表示装置に表示されている操作ボタンに対する操作内容を識別するものである。
【０００５】
【特許文献１】特開２００６−０９１９４８号公報
【発明の開示】
【発明が解決しようとする課題】
【０００６】
特許文献１に記載の電子機器においては、ユーザが表示装置に表示されている操作ボタンに手をかざして操作したことをかなり精度よく検出することが可能である。しかしながら、例えば操作ボタンの大きさや位置に対して撮影されたユーザの手の大きさや位置が適当ではなく、操作ボタンが操作しづらいことがある。
【０００７】
本発明はこの点に着目してなされたものであり、表示装置に表示された操作ボタンに手などをかざして操作ボタンを操作する際に、ユーザの位置に関わらず操作ボタンの操作を更に確実に検出できる電子機器を提供することを目的とする。
【課題を解決するための手段】
【０００８】
上記した課題を解決するために本発明は、次の（ａ）〜（ｆ）の電子機器を提供するものである。
（ａ）電子機器１において、ビデオカメラ２と、前記ビデオカメラの前に位置する操作者３を前記ビデオカメラによって撮影した画像信号の鏡像変換を行う鏡像変換器１３と、前記ビデオカメラによって撮影した画像信号又は前記鏡像変換器により鏡像変換された画像信号を拡大又は縮小する画像調整器１４と、前記鏡像変換器及び前記画像調整器を経た画像信号を表示する表示装置２１と、前記表示装置の画面上に表示された操作者の大きさを調整するために前記画面上に第１の面積を有する測定領域５１，５３，５５が設定され、前記画面に表示された操作者が対象物を前記測定領域にかざしたときの前記第１の面積に占める前記対象物の面積の割合を示す情報を生成する生成部１８と、前記生成部によって生成された情報に応じて、前記表示装置の画面上に表示された操作者の大きさを調整するよう前記画像調整器を制御する制御部１８とを備えることを特徴とする電子機器。
（ｂ）前記測定領域に重畳する操作ボタン５０用の操作用画像信号を生成する操作用画像生成器１５と、前記鏡像変換器及び前記画像調整器を経た画像信号と前記操作用画像生成器より出力された操作用画像信号とを混合する混合器１６と、前記操作ボタンに対応する第１の検出領域５００を前記対象物により操作する所定の動作に対応した前記第１の検出領域内の画像信号に基づいて第１の検出信号を発生する第１の検出器（１７１〜１７ｎいずれかの検出器）とを備え、前記制御部は、前記第１の検出器が前記第１の検出信号を発生したのに応答して前記操作者の大きさを調整することを特徴とする（ａ）記載の電子機器。
（ｃ）前記測定領域と一致した第２の検出領域５２が設定され、前記鏡像変換器及び前記画像調整器を経た画像信号における前記第２の検出領域に相当する部分的な画像信号を抽出する抽出部３０，３１と、前記抽出部によって抽出した前記部分的な画像信号に基づいて前記対象物の面積の割合に応じた第２の検出信号を発生する第２の検出器（１７１〜１７ｎいずれかの検出器）とを備え、前記制御部は、前記第２の検出信号に応じて前記画像調整器を制御することを特徴とする（ａ）又は（ｂ）記載の電子機器。
（ｄ）前記測定領域より小なる第２の面積を有する第３の検出領域５４が設定され、前記第３の検出領域を前記測定領域内で所定の時間をかけて順次移動させる移動制御部１２，１８と、前記移動制御部によって前記第３の検出領域を前記測定領域内で移動させることによって、前記鏡像変換器及び前記画像調整器を経た画像信号における前記測定領域に相当する部分的な画像を抽出する抽出部３０，３１と、前記抽出部によって抽出した前記部分的な画像信号に基づいて前記対象物の面積の割合に応じた第２の検出信号を発生する第２の検出器（１７１〜１７ｎいずれかの検出器）とを備え、前記制御部は、前記第２の検出信号に応じて前記画像調整器を制御することを特徴とする（ａ）又は（ｂ）記載の電子機器。
（ｅ）前記第２の検出器が発生する前記第２の検出信号は、前記測定領域における前記対象物の位置を示す情報も含み、前記画像調整器は、前記第２の検出信号に応じて前記画面に表示された操作者の位置を移動させることを特徴とする（ｄ）記載の電子機器。
（ｆ）前記測定領域は、前記検出領域が移動する初期状態の範囲として設定された初期測定領域５５１と前記初期測定領域に隣接した予備測定領域５５２とを含み、前記第２の検出器が発生する前記第２の検出信号は、前記測定領域における前記対象物の位置を示す情報も含み、前記対象物の位置を示す情報に基づいて、前記検出領域が移動する領域を前記初期測定領域から前記予備測定領域を含む領域５５３へと移動させる測定領域移動制御部１８を有することを特徴とする（ｄ）記載の電子機器。
【発明の効果】
【０００９】
本発明によれば、表示装置に表示された操作ボタンに手などをかざして操作ボタンを操作する際に、ユーザの位置に関わらず操作ボタンの操作を更に確実に検出できる。
【発明を実施するための最良の形態】
【００１０】
図１は、電子機器（テレビジョン受像機１）を操作する方法において、リモコン装置による従来の操作方法と、本発明の一実施形態である操作方法との違いを説明するための図である。
操作者（ユーザ）３がテレビジョン受像機１を従来の操作方法で操作する場合、ユーザ３はリモコン装置４を手に持ち、所望の機能を働かせるキーをテレビジョン受像機１に向けて押下する。したがって、リモコン装置４が無ければテレビジョン受像機１を操作できず、不便を強いられる場合を時々経験する。
【００１１】
これに対し、本実施形態の操作方法では、テレビジョン受像機１に、ビデオカメラ２が設けられており、ビデオカメラ２によりユーザ３が撮影され、ビデオカメラ２の画像からユーザ３の動作を得て、テレビジョン受像機１及びそれに関連する機器の操作が行われる。
ユーザ３の動作とは、具相的にはテレビジョン受像機１に表示されるメニュー画面から所望のボタンを選択する身体（手、足、顔など）の動きのことである。本実施形態では後述するように最も実用的である手の動きで操作する手法が採用されている。またテレビジョン受像機１の周囲が暗いときは、自発光機能を具備した遠隔操作用機器（手元制御機器）を用いることにより、手の動作と同様の効果を得るようにしている。
【００１２】
図２は、テレビジョン受像機１の構成を示すブロック図であり、テレビジョン受像機１は、ビデオカメラ２、基準同期発生器１１、タイミングパルス発生器１２、鏡像変換器１３、スケーラ１４、グラフィックス生成器１５、第１の混合器１６、検出部１７、制御情報判断器（ＣＰＵ）１８、画素数変換器１９、第２の混合器２０、及び表示装置２１を備えている。
【００１３】
基準同期発生器１１は、入力される同期信号に基づいて、テレビジョン受像機１の基準になる水平周期パルスと垂直周期パルスを発生する。ここで、同期信号は画素数変換器１９に入力される映像信号の水平及び垂直同期信号である。テレビジョン放送受信時や外部の機器から映像信号が入力されている場合は、基準同期発生器１１はその入力信号の同期信号に同期するパルスを生成する。タイミングパルス発生器１２は、図２に示す各ブロックで必要とする水平方向と垂直方向の任意の位相と幅を有するパルスを生成する。
ビデオカメラ２は、図１に示すようにテレビジョン受像機１の前面に位置してユーザ３、またはテレビジョン受像機１の前の映像を撮影する。ビデオカメラ２の出力信号は、輝度（Ｙ）信号、及び色差（Ｒ−Ｙ、Ｂ−Ｙ）信号であり、基準同期発生器１１から出力される水平周期パルス及び垂直周期パルスに同期している。
【００１４】
鏡像変換器１３は、ビデオカメラ２で撮影したユーザ３の画像（被写体像）を表示装置２１上に鏡と同じように左右を反転して表示するためのものである。従って、文字を表示する場合は鏡と同じように左右が反転することになる。本実施形態では、メモリを活用して水平方向の画像を反転させる方法により鏡像変換が行われる。表示装置２１として陰極線管（ＣＲＴ（Cathode Ray Tube））を用いる場合には、水平偏向を逆に操作することで同様の効果が得られる。その場合には、グラフィックスやその他混合する側の画像をあらかじめ水平方向に左右逆転させておく必要がある。
【００１５】
スケーラ１４は、ビデオカメラ２により撮影した被写体像の大きさを拡大又は縮小して調整する画像調整器で、制御情報判断器１８の制御で拡大率と縮小率を２次元で調整する。また、拡大縮小を行わずに、水平と垂直の位相調整を行うこともできる。
本実施形態では、図２に示すようにスケーラ１４は鏡像変換器１３の後段に設け、鏡像変換器１３により鏡像変換された画像を調整するが、ビデオカメラ２と鏡像変換器１３の間にスケーラ１４を設け、ビデオカメラ２より出力された画像を調整させてもよい。
【００１６】
グラフィックス生成器１５は、制御情報判断器１８から供給されるメニュー画面（操作用画像）を生成するための制御信号に基づいてメニュー画面を展開するもので、メモリ上の信号がＲ（赤）信号、Ｇ（緑）信号、Ｂ（青）信号の原色信号で展開されていても、後段で映像信号と合成または混合される出力信号は、輝度（Ｙ）信号と色差（Ｒ−Ｙ、Ｂ−Ｙ）信号とする。また生成されるグラフィックスのプレーン数は限定するものではないが、本実施形態では１プレーンでよい。
メニュー画面を構成するグラフィックスの画素数は、本実施形態では表示装置２１の画素数に一致させるようにしている。一致していない場合は、グラフィックス生成器１５内またはグラフィックス生成器１５の後段に画素数変換器を設けて、互いの画素数を一致させればよい。
【００１７】
第１の混合器１６は、スケーラ１４の出力信号Ｓ１とグラフィックス生成器１５の出力信号Ｇｓとを、制御値α１により混合割合を制御して混合する。具体的には、下記（１）式で出力信号Ｍ１ｏが表される。
Ｍ１ｏ＝α１×Ｓ１＋（１−α１）×Ｇｓ…（１）
制御値α１は、「０」から「１」の間の値に設定され、制御値α１を大きくするとスケーラ１４の出力信号Ｓ１の割合が大きくなり、グラフィックス生成器１５の出力信号Ｇｓの割合が小さくなる。混合器の例としてはこれに限らないが、本実施形態では、入力される２系統の信号情報が入っていれば同様の効果が得られる。なお、既述したようにビデオカメラ２と鏡像変換器１３の間にスケーラ１４を設けた場合には、鏡像変換器１３から出力される信号を出力信号Ｓ１とすればよい。
【００１８】
検出部１７は、第１の検出器１７１、第２の検出器１７２、…第ｎの検出器１７ｎを備える。検出部１７に含まれる検出器は数を特定するものではなく、グラフィックス生成器１５で生成されるメニュー画面と連携した制御内容を表す後述する操作ボタンの数に対応して変動する。なお、操作ボタンとはパソコンにおいてマウスでクリック操作する操作ボタンに該当するものである。
【００１９】
制御情報判断器１８は、検出部１７から出力されるデータ（検出信号）の解析を行い、各種制御信号を出力する。制御情報判断器１８は、入力されるデータに基づいて操作された操作ボタンに対応する制御信号を生成し、各部を制御する。制御情報判断器１８はソフトウェアで各種の処理を行うものであり、アルゴリズムについての詳細は後述する。本実施形態では、ハードウェア（各機能ブロック）による処理と、ソフトウェア（制御情報判断器１８のＣＰＵ）による処理とが混在するが、特にここで示す区分けに限定するものではなく、ハードウェアとソフトウェアとをどのように用いてもよい。
【００２０】
画素数変換器１９は、入力される映像信号の画素数と表示装置２１の画素数を合わせるための画素数変換を行う。入力映像信号は、図示を省略している内蔵のチューナにて受信したテレビジョン信号（データ放送なども含む）による映像信号やビデオ（ＶＴＲ）入力などテレビジョン受像機１の外部から入力される映像信号である。ここでは図示を省略するが、入力映像信号から水平及び垂直同期信号を抽出して、基準同期発生器１１によって各部を入力映像信号の水平及び垂直同期信号に同期させるようにしている。
【００２１】
第２の混合器２０は、第１の混合器１６と同様の機能を有する。すなわち、第１の混合器１６の出力信号Ｍ１ｏと、画素数変換器１９の出力信号Ｓ２とを制御値α２で混合割合を制御して混合する。具体的には、下記（２）式で出力信号Ｍ２ｏが表される。
Ｍ２ｏ＝α２×Ｍ１ｏ＋（１−α２）×Ｓ２…（２）
制御値α２は、「０」から「１」の間の値に設定され、制御値α２を大きくすると第１の混合器１６の出力信号Ｍ１ｏの割合が大きくなり、画素数変換器１９の出力信号Ｓ２の割合が小さくなる。混合器の例としてはこれに限らないが、本実施形態では、入力される２系統の信号情報が入っていれば同様の効果が得られる。
【００２２】
表示装置２１は、ＣＲＴ、液晶ディスプレイ（ＬＣＤ）、プラズマディスプレイ（ＰＤＰ）あるいはプロジェクションディスプレイなどを想定しているが、ディスプレイの表示方式を限定するものではない。表示装置２１の入力信号は、輝度信号Ｙと、色差信号Ｒ−Ｙ及びＢ−Ｙであり、表示装置２１の内部にてＲＧＢ原色信号にマトリクス変換されて表示される。
【００２３】
各検出器１７１〜１７ｎは、図３に示すように、オブジェクト抽出器３０と、タイミングゲート器３１と、オブジェクト特徴データ検出部３２とを備えている。オブジェクト抽出器３０は、画像の特徴に添ったフィルタを備えており、フィルタ処理をした画像信号をタイミングゲート器３１に出力する。
タイミングゲート器３１は、タイミングパルスに基づいてビデオカメラ２からの画像信号の通過を制御する。通過する領域は後述する検出エリア内である。この検出エリア内に限定した信号に対して、オブジェクト特徴データ検出部３２は種々のフィルタ処理を施してビデオカメラ２で撮影したユーザ３の手の画像を抽出する。
オブジェクト特徴データ検出部３２は、抽出されたユーザ３の手（対象物）の画像信号から、さまざまな特徴を検出し検出信号を発生するための機能ブロックを備える。本実施形態では、ヒストグラム検出器３３、平均輝度（ＡＰＬ）検出器３４、高域頻度検出器３５、最小値検出器３６、最大値検出器３７を備える。この他にも画像を特徴づける要件はあるが、本実施形態ではこれらの検出器より発生される検出信号を用い、制御情報判断器１８によって手であることを判別すると共にその動作を認識する。
【００２４】
図４に、オブジェクト抽出器３０の詳細ブロック図を示す。本実施形態ではユーザ３の手を検出するために、特に肌色に着目したフィルタ処理を行う。すなわち、本実施形態のオブジェクト抽出器３０は、特定色フィルタ７１と、階調限定器７２と、時間差分フィルタ７５と、合成器７３と、オブジェクトゲート器７４とを備えている。
特定色フィルタ７１、階調限定器７２及び時間差分フィルタ７５は、それぞれオブジェクトを特定するフィルタである。特定色フィルタ７１は、色差信号で入力される色信号の色相と色の濃さ（飽和度）を限定し、階調限定器７２は、輝度信号の特定の階調の範囲を限定する。時間差分フィルタ７５は、人の手の背景が肌色であっても、わずかな輝度の差などを基に手の領域を抽出し、人の手を識別する。本実施形態では人の手を、後述する操作ボタンを操作する対象物としているが、パラメータである色相や階調を調整し最適化することにより、オブジェクト抽出器３０は手以外の対象物も検出することができる。
【００２５】
合成器７３は、特定色フィルタ７１と階調限定器７２と時間差分フィルタ７５から入力される信号を合成し、領域パルスに変換する。本実施形態では、特定色フィルタ７１を通過した信号と階調限定器７２を通過した信号と時間差分フィルタ７５を通過した信号とが全て存在（ＡＮＤ）する場合に、ハイレベルとなる領域パルスを出力する。なお、特定色フィルタ７１と階調限定器７２と時間差分フィルタ７５のうち１つまたは２つを通過した信号が存在すれば、ハイレベルとなる領域パルスを出力するようにしてもよい。
特定色フィルタ７１と階調限定器７２と時間差分フィルタ７５のうちの、２つを通過した信号が存在すればハイレベルとなるようにすれば誤検出しにくく、３つを通過した信号が存在すればハイレベルとなるようにすれば更に誤検出しにくくなる。
合成器７３で生成された領域パルスは、オブジェクトゲート器７４に供給される。オブジェクトゲート器７４は、領域パルスがハイレベルであるとき、輝度信号と色差信号を通過させる。領域パルスがローレベル（領域パルス外の範囲）であるときは、輝度信号も色差信号も通過させず、規定した値の信号を出力する。本実施形態では、黒レベルの輝度信号及び飽和度０の色差信号を出力する。
【００２６】
（実施例１）
実施例１では、画面内のユーザ３の画像の大きさを制御する方法（ズーム機能）の一例を示す。
図５（Ａ）は、図２に示したグラフィックス生成器１５で生成される操作用画像を表示装置２１に表示させた図であり、ズーム機能を働かせるための操作ボタン５０と、操作ボタン５０より画面の水平方向に大きい測定領域５１とを有するズームボタン５Ａを示す図である。操作ボタン５０は測定領域５１に重畳されている。操作用画像には、テレビジョン受像機１を制御するための操作内容をそれぞれ示すメニューボタン４０〜４５も含まれている。
操作ボタン５０は、後述するようにビデオカメラ２から入力される画像に対するズーム機能を働かせるためのものである。測定領域５１は、後述するようにズームボタン５Ａにかざされている手の割合を求めるための領域である。実施例１の測定領域５１は、実際にはユーザ３に視認されない。ズームボタン５Ａは、ユーザ３がどの位置にいても操作しやすい位置に配置してあればよく、例えば図５（Ａ）のように画面の上部中央、または画面の中央部に配置すればよい。
図５（Ｂ）は、手を操作ボタン５０にかざした状態を拡大して示している。
【００２７】
図２に示す第１の混合器１６にて、図５（Ａ）に示す操作用画像と、鏡像変換器１３及びスケーラ１４を経た画像である鏡像変換及びスケーラ処理済みの画像とを、制御値α１に対応する混合割合で混合する。
鏡像変換及びスケーラ処理済みの画像には、検出部１７の各検出器１７１〜１７ｎに対応する検出領域が含まれている。各検出領域は、操作ボタン５０、測定領域５１及びメニューボタン４０〜４５にそれぞれ対応し、鏡像変換及びスケーラ処理済みの画像上に、図５（Ａ）の操作用画像上に示した各ボタン４０〜４５、５０又は測定領域５１と同じ位置に配置されている。ここで、操作ボタン５０に対応した検出領域を検出領域５００、測定領域５１に一致した検出領域を検出領域５２とする。
検出部１７は、ユーザ３が手をかざした各ボタン４０〜４５、５０及び測定領域５１に対応して設けられている各検出領域内の手を検出した検出データを制御情報判断器１８に出力する。
【００２８】
図６（Ａ）は、図５（Ｂ）のようにズームボタン５Ａに対象物（手）をかざした際の、測定領域５１と一致した検出領域５２における手の占める割合を示す図である。検出領域５２に対応する検出器は、測定領域５１にかざされた手の面積の割合に応じた検出信号を発生させる。鏡像変換器１３及びスケーラ１４を経た画像における検出領域５２に相当する部分的な画像信号は、図３に示すオブジェクト抽出器３０及びタイミングゲート器３１からなる抽出部によって抽出される。
手がかざされている領域５２２は、オブジェクト抽出器３０（時間差分フィルタ７５）によって発生した差分が抽出され、輝度信号と色差信号とが出力される。手がかざされている領域５２２以外の何もかざされていない領域５２１は差分が発生しないため、オブジェクト抽出器３０より黒レベルの輝度信号及び飽和度０の色差信号が出力される。
本実施形態ではオブジェクト抽出器３０より出力され、タイミングゲート器３１において検出領域内に限定された画像信号（輝度信号）に基づいて、オブジェクト特徴データ検出部３２のヒストグラム検出器３３より検出領域５２における手の面積の割合に応じた検出信号を発生させる。検出信号を発生させる検出器は、オブジェクト特徴データ検出部３２を構成する他の検出器としてもよい。図６（Ｂ）は、図６（Ａ）の状態の検出領域５２における、明るさの頻度分布（ヒストグラム）を示す図である。縦軸に頻度を示し、横軸に輝度信号の階調（明るさ）を０〜７の８ステップに区切って示している。図６（Ｂ）において階調０は、オブジェクトが検出されない領域５２１、階調４〜７は手がかざされている領域５２２の明るさをそれぞれ示す。
制御情報判断器１８は、ヒストグラム検出器３３から出力された手の面積の割合に応じた各階調における頻度分布の情報を示す検出信号を受け取り、検出領域５２に占める手の割合ＨＲを示す情報を生成する。制御情報判断器１８は生成部として、手の割合ＨＲ［％］を下記（３）式より求める。
【００２９】
【数１】
2008152720.tif 000003
【００３０】
ここで、hist[i]は、階調ｉのヒストグラムを示す。なお本実施形態では、階調２〜７の範囲のヒストグラムを基にして手の割合ＨＲを求めるが、これに限定されるものではない。
実施例１では、手の割合ＨＲの情報（ＨＲ情報）に基づいて制御情報判断器１８がスケーラ１４のパラメータを制御し、スケーラ１４のズーム機能を働かせる。なお、ビデオカメラ２から取り込んだ手の画像に基づいたＨＲ情報によりズーム機能を働かせるため、ユーザ３の手の大きさに応じて最適化されるものであり、大人の手、子供の手と言った絶対的な手の大きさは問題にならない。
【００３１】
図７は、制御情報判断器１８がＨＲ情報を用いてスケーラ１４のズーム機能を制御するためのズームパラメータである。縦軸は、スケーラ１４のズーム倍率を示し、横軸は手の割合ＨＲを示している。手の割合ＨＲが小さい程拡大率を上げ、手の割合ＨＲが大きい程縮小率を上げている。手の割合ＨＲが５０％の時は、ユーザ３が操作に対して最適な位置にいるとみなし、ズーム機能は働かせないものとする。
【００３２】
次に、制御情報判断器１８がスケーラ１４のズーム機能を制御するタイミングを、図８（Ａ）〜（Ｄ）を用いて説明する。図８（Ａ）の縦軸は操作ボタン５０に対応する検出領域５００に占める手の割合ＨＲを表し、横軸は時間を表している。図８（Ｂ）の縦軸は、検出領域５２に占める手の割合ＨＲを表し、横軸は時間を表している。図８（Ｃ）は活性化フラグを表し、横軸は時間を表している。図８（Ｄ）はズーム確定フラグを表し、横軸は時間を表している。図８（Ａ）〜（Ｄ）の全ての時間軸は同じとする。なお、操作ボタン５０に対応する検出領域５００に占める手の割合ＨＲも（３）式を用いて求めた。図８（Ａ）及び（Ｂ）はユーザ３の手が、操作ボタン５０を完全に覆いかつ検出領域５２の半分くらいを覆うようにかざされている場合を示す。
図８（Ａ）において、検出領域５００に占める手の割合ＨＲが１００％に到達し、図８（Ｂ）において、検出領域５２に占める手の割合ＨＲが５０％に到達すると、時定数Ｔ１を経て、（Ｃ）に示す活性化フラグが立ち上がる。続いて、図８（Ａ）に示すｔ１からｔ２までの期間のように、ユーザ３が操作ボタン５０を操作する所定の動作に対応した検出領域５００内の画像信号に基づいた検出信号が検出領域５００に対応する検出器より発生され、操作ボタン５０が操作されたことが確定すると、時定数Ｔ２を経て、（Ｄ）に示すズーム確定フラグが立ち上がる。本実施形態において所定の動作とは、ユーザ３が操作ボタン５０上に手をかざし、２度繰り返し指を折り曲げる動作である。
本実施形態では、検出領域５００に占める手の割合ＨＲが１００％に到達し、検出領域５２に占める手の割合ＨＲが５０％に到達したときに活性化フラグが立ち上がるが、それぞれの手の割合ＨＲはこれに限るものではない。
【００３３】
図８（Ｄ）に示すようにズーム確定フラグがハイになると、制御情報判断器１８は次のように表示装置２１の画面上に表示されたユーザ３の大きさを調整する。
制御情報判断器１８は、時定数Ｔｍを経たあとに続く所望のフレーム数における検出領域５２に占める手の割合ＨＲの平均値を示す情報を生成する。平均値を示す情報に応じて、制御情報判断器１８はスケーラ１４のズーム機能を図７に示すズームパラメータに従って制御する。例えば、ズーム確定フラグがハイになった３フレーム後（Ｔｍ）から、制御情報判断器１８は生成部として３フレーム分の検出領域５２に占める手の割合ＨＲの平均値を示す情報を生成する。続いて制御情報判断器１８は制御部として、平均値の情報に応じて表示装置２１の画面上に表示されたユーザ３の大きさを適当な大きさに調整するよう、スケーラ１４のズーム機能を制御する。
なお、制御情報判断器１８は、図８（Ｃ）に示す活性化フラグがハイになったあとからズーム確定フラグがハイになるまでの期間（ｔ１からｔ２までの期間は除く）に、上記したような方法で手の割合ＨＲの平均値を示す情報を生成してもよい。
【００３４】
（実施例２）
実施例２では、画面内のユーザ３の画像の大きさを制御する方法（ズーム機能）の他の一例を示す。
図９（Ａ）は、図２に示したグラフィックス生成器１５で生成される操作用画像を表示装置２１に表示させた図であり、ズーム機能を働かせるための操作ボタン５０と、スキャン測定領域５３とを有するズームボタン５Ｂを示す図である。操作ボタン５０はスキャン測定領域５３に重畳されている。操作用画像には、既述したメニューボタン４０〜４５も含まれている。スキャン測定領域５３は、実施例１の測定領域５１と同様の働きをもつ領域であり、実施例２では測定領域５１と同じ大きさとした。
ズームボタン５Ｂは、ユーザ３がどの位置にいても操作しやすいように表示装置２１の画面の上部中央や、中央部に配置すればよい。なお、スキャン測定領域５３はユーザ３が視認できなくてもよい。
図９（Ｂ）は、手を操作ボタン５０にかざした状態を拡大して示している。
【００３５】
また既述したように、鏡像変換及びスケーラ処理済みの画像には、操作ボタン５０に対応した図示しない検出領域５００及び各メニューボタン４０〜４５に対応する各検出領域が設定され、図９（Ａ）に示す各ボタンに対応する位置に配置されている。更に、鏡像変換及びスケーラ処理済みの画像にはスキャン測定領域５３より小なる面積を有するスキャン検出領域（スキャナ）５４が設定されている。各メニューボタン４０〜４５に対応する各検出領域、検出領域５００及びスキャナ５４は、検出部１７の各検出器１７１〜１７ｎで検出される。
制御情報判断器１８及びタイミングパルス生成器１２（移動制御部）によって、図３に示したタイミングゲート器３１に入力するタイミングパルスを変更することで、後述するようにスキャナ５４を所定の時間をかけてスキャン測定領域５３内を順次移動させる。スキャナ５４をスキャン測定領域５３内で移動させることで、鏡像変換器１３及びスケーラ１４を経た画像信号におけるスキャン測定領域５３に相当する部分的な画像信号を、抽出部（オブジェクト抽出器３０及びタイミングゲート器３１）が抽出する。スキャナ５４は実際にはユーザ３に視認されない。
【００３６】
図１０は、スキャン測定領域５３をスキャナ（スキャン検出領域）５４が移動する第１のスキャン方法と第２のスキャン方法とを示す。図１０（Ａ）は、スキャン測定領域５３の左端部から右端部に向かって垂直周期単位で、スキャナ５４が移動する第１のスキャン方法を示す。図１０（Ｂ）は、スキャン測定領域５３の中心部から左右端部に向かって交互に、垂直周期単位でスキャナ５４が移動する第２のスキャン方法を示す。図１０の上から下へ向かってスキャンが進んでいる。
第２のスキャン方法は、ユーザ３が手をかざす操作ボタン５０の中心付近からスキャナ５４の移動が開始する。従って、操作ボタン５０にかざされた手によりスキャン測定領域５３に発生する差分を、第１のスキャン方法よりも速い時間において検出できる。しかしながら第１、第２いずれのスキャン方法を用いても、スキャン測定領域５３が全てスキャンされるまで手をかざしておく必要があるため、操作ボタン５０に手をかざしている時間に差異はない。このことから、画面にオンスクリーン表示する等の方法によってスキャンが全て終わるまでユーザ３は操作ボタン５０に手をかざし続けるよう、ユーザ３に知らしめることが好ましい。
【００３７】
図１１は、第１のスキャン方法を用いて、スキャン測定領域５３にかざされた手をスキャンする説明図である。図１１（Ａ）はスキャン測定領域５３にかざされた手を示す上記した部分的な画像信号であり、図１１（Ｂ）はスキャナ５４がスキャン測定領域５３の左から右（０〜１９）へ移動する２０ステップを、図１１（Ｃ）〜（Ｆ）は所定のステップにおけるヒストグラムをそれぞれ示す。なお、ズームボタン５Ｂにおいて操作ボタン５０はスキャン測定領域５３の中心付近に設けられているが、説明を分かりやすくするために、ここでは図示を省略している。
図１１（Ｂ）に示すように本実施形態では、スキャナ５４はスキャン測定領域５３を全２０ステップでスキャンする。ここで、スキャナ５４がスキャン測定領域５３を全てスキャンするのにかかる期間、すなわち２０ステップのスキャンにかかる期間を１スキャン期間とする。
【００３８】
図１１（Ｃ）は、スキャン測定領域５３のステップ０〜５及びステップ１４〜１９のヒストグラムである。スキャン測定領域５３の各ステップ０〜５及びステップ１４〜１９には手がかざされていないため、各ステップ０〜５及びステップ１４〜１９におけるスキャナ５４には差分が発生しない。従って、スキャナ５４に対応する検出器は、オブジェクト抽出器３０より黒レベルの輝度信号及び飽和度０の色差信号を出力し、後段のヒストグラム検出器３３で生成されるヒストグラムは階調０のみとなる。
図１１（Ｄ）は、スキャン測定領域５３のステップ６のヒストグラムである。スキャン測定領域５３のステップ６には、手がかざされている領域と何もかざされていない領域とが存在する。従ってスキャナ５４に対応する検出器より検出された検出信号に基づくヒストグラムは、何もかざされていない領域に基づく階調０と、手がかざされている領域において発生した差分に基づく階調２〜７とに分布している。
【００３９】
図１１（Ｅ）は、スキャン測定領域５３のステップ７〜１２のヒストグラムである。スキャン測定領域５３の各ステップ７〜１２には、手がかざされている。従ってスキャナ５４に対応する検出器より検出された検出信号に基づくヒストグラムは、手がかざされている領域において発生した差分に基づく階調２〜７に分布している。
図１１（Ｆ）は、スキャン測定領域５３のステップ１３のヒストグラムである。スキャン測定領域５３のステップ１３には、手がかざされている領域と何もかざされていない領域とが存在する。従ってスキャナ５４に対応する検出器より検出された検出信号に基づくヒストグラムは、何もかざされていない領域に基づく階調０と、手がかざされている領域において発生した差分に基づく階調２〜７とに分布している。
【００４０】
抽出部によって抽出された部分的な画像信号に基づいて、スキャナ５４に対応した検出器からスキャン測定領域５３における手の面積の割合に応じた検出信号が発生される。制御情報判断器１８は、検出信号に基づいてスキャン測定領域５３の各ステップｊ（ｊ＝０〜１９）における手の割合ＨＲＳ（ｊ）［％］を示す情報を生成する。制御情報判断器１８は生成部として、手の割合ＨＲＳ（ｊ）を下記（４）式より求める。
【００４１】
【数２】
2008152720.tif 000004
【００４２】
ここで、hist(j)[i]はステップｊ（ｊ＝０〜１９）の階調ｉのヒストグラムを示す。本実施形態では、階調２〜７の範囲のヒストグラムを基にして手の割合ＨＲＳを求めるが、これに限定されるものではない。
実施例２では、スキャン測定領域５３の各ステップｊに占める手の割合ＨＲＳ（ｊ）の平均値ＨＲＡを下記の（５）式で求める。平均値ＨＲＡは、実施例１で（３）式より求めた手の割合ＨＲに相当する。制御情報判断器１８は生成部として手の割合ＨＲＳ（ｊ）より平均値ＨＲＡを生成し、制御情報判断器１８は制御部として平均値ＨＲＡを示す情報に応じてスケーラ１４のズーム機能を図７に示すズームパラメータに従って制御する。
【００４３】
【数３】
2008152720.tif 000005
【００４４】
制御情報判断器１８がスケーラ１４のズーム機能を制御するタイミングは、既に図８（Ａ）〜（Ｄ）で説明したものと同様である。
【００４５】
（実施例３）
実施例３では、画面内のユーザ３の画像の大きさと位置を制御する方法（ズーム機能とシフト機能）の一例を示す。
図１２は、図２に示したグラフィックス生成器１５で生成される操作用画像を表示装置２１に表示させた図であり、ズーム機能を働かせるための操作ボタン５０と、測定領域５５とを有するズームボタン５Ｃを示す図である。操作ボタン５０は測定領域５５に重畳されている。操作用画像には、既述したメニューボタン４０〜４５も含まれている。
測定領域５５は、実施例１の測定領域５１と同様の働きをもつ領域である。測定領域５５は、後述するようにスキャナ５４がデータを検出するために移動する初期状態の範囲として設定された初期測定領域５５１と、初期測定領域５５１に隣接した予備測定領域５５２とを含む。初期状態とは、ズームボタン５Ｃにユーザ３の手がかざされる前の状態をさす。初期測定領域５５１は操作ボタン５０を中心として設定されており、実施例３では初期測定領域５５１を測定領域５１と同じ大きさとした。従って、図１１と同様にスキャナ５４は初期測定領域５５１を全２０ステップで移動する。スキャナ５４は、操作ボタン５０がユーザ３によって操作されるまで、初期測定領域５５１内を移動し続ける。
【００４６】
ズームボタン５Ｃは、ユーザ３がどの位置にいても操作しやすいように表示装置２１の画面の上部中央や、中央部に配置すればよい。なお図１２では、操作ボタン５０及び初期測定領域５５１は、測定領域５５の中央部に配置されているがこれに限るものではない。更に、本実施例では初期測定領域５５１はユーザ３から視認でき、測定領域５５は視認できないが、これに限るものではない。
【００４７】
また既述したように、鏡像変換及びスケーラ処理済みの画像には、操作ボタン５０及びメニューボタン４０〜４５に対応する検出領域がそれぞれ設定され、図１２に示す各ボタンと同様に配置されている。操作ボタン５０に対応した検出領域は図示していない検出領域５００、測定領域５５及び初期測定領域５５１に対応する検出領域は、測定領域５５より小なる面積を有するスキャナ５４である。各メニューボタン４０〜４５に対応する各検出領域、検出領域５００及びスキャナ５４は検出部１７の各検出器１７１〜１７ｎで検出される。
スキャナ５４の測定領域５５内での移動は、既述したとおり、移動制御部の制御に基づいてタイミングゲート器３１に入力されるタイミングパルスによるものである。移動制御部は、スキャナ５４を測定領域５５内で所定の時間をかけて順次移動させる。実施例３では、図１０に示した第１のスキャン方法で、操作ボタン５０がユーザ３によって操作されるまでスキャナ５４を初期測定領域５５１内で常時移動させている。
【００４８】
ここで、ユーザ３がズーム機能を起動させるためにズームボタン５Ｃに対して手をかざす際、様々な理由から操作ボタン５０に手がかざされないことが想定できる。図１３（Ａ）〜（Ｃ）は、ユーザ３が手をズームボタン５Ｃにかざした状態を示している。先に述べたように測定領域５５はユーザ３から視認されないため、ユーザ３にとってズームボタン５Ｃの両端は初期測定領域５５１の両端となる。
図１３（Ａ）は、ズームボタン５Ｃの左端に手をかざしている図である。図１３（Ｂ）は、ズームボタン５Ｃの中央部に手をかざしている図である。図１３（Ｃ）は、ズームボタン５Ｃの右端に手をかざしている図である。
【００４９】
図１４（Ａ）〜（Ｃ）は、図１３（Ａ）〜（Ｃ）に示したズームボタン５Ｃにかざされた手の位置に基づいて、操作ボタン５０と、スキャナ５４が移動する領域５５３とが測定領域５５内を移動（シフト）した図をそれぞれ示している。ここで、スキャナ５４が移動する領域５５３を画面上での位置変更後の測定領域５５３と称し、初期測定領域５５１と画面上での位置変更後の測定領域５５３とは同じ面積を有する。
図１４（Ａ）は、図１３（Ａ）でズームボタン５Ｃの左端にかざされていた手の中央部に、操作ボタン５０が位置するように操作ボタン５０と測定領域５５３とからなる可動ボタンが移動している。同様に図１３（Ｂ）、図１３（Ｃ）の手の位置においても、図１４（Ｂ）、図１４（Ｃ）に示すようにかざされた手の中央部に操作ボタン５０が位置するように可動ボタンが移動している。
【００５０】
このような可動ボタンの移動を、以下で詳細に説明する。
まず、ズームボタン５Ｃの手の位置を検出するアルゴリズムについて説明する。
スキャナ５４は、タイミングゲート器３１に入力されるタイミングパルスによって初期測定領域５５１内を全２０ステップで移動する。２０ステップは図１１（Ｂ）に図示したものと同様である。スキャナ５４を初期測定領域５５１内で順次移動させることで、鏡像変換器１３及びスケーラ１４を経た画像信号における初期測定領域５５１に相当する部分的な画像信号を抽出部（オブジェクト抽出器３０及びタイミングゲート器３１）が抽出する。抽出された部分的な画像信号に基づいて、スキャナ５４に対応した検出器から、初期測定領域５５１における手の面積の割合に応じた検出信号が発生される。
制御情報判断器１８は検出信号に基づいて、１スキャン期間毎に上記した初期測定領域５５１の各ステップｊ（ｊ＝０〜１９）における手の割合ＨＲＳ（ｊ）を示す情報を（４）式より生成する。ノイズによる変動を抑えるため、手の割合ＨＲＳ（ｊ）が３０％未満の値を示すステップｊは、手の割合ＨＲＳ（ｊ）を０とする。
実施例３では、スキャナ５４に対応した検出器が発生する検出信号は、初期測定領域５５１にかざされた手の位置を示す情報も含む。制御情報判断器１８は検出信号に基づいて下記（６）式より、初期測定領域５５１にかざされた手の重心ＨＲＣを示す情報を生成する。
【００５１】
【数４】
2008152720.tif 000006
【００５２】
続いて、求めた手の重心ＨＲＣに基づいて、操作ボタン５０が手の重心ＨＲＣに位置するように操作ボタン５０を移動させる。
移動は例えば、操作ボタン５０の設定パラメータの１つである水平スタートポイントと手の重心ＨＲＣとを一致させればよい。水平スタートポイントに対して、図１５に示すＩＩＲフィルタをかけ、操作ボタン５０の移動における不連続な動作を抑圧する。
【００５３】
図１５（Ａ）は、時間軸方向に導入したＩＩＲフィルタの構成を示す図である。ＩＩＲフィルタは、少ない部品点数で抑制効果が大きい、応答特性の変更が容易、ハンチングのない応答(一次の伝達特性の場合)という特徴を有する。伝達特性は、（７）式で示され、ｋは帰還係数（リーク係数）であり、ｋ＜１である。
【００５４】
【数５】
2008152720.tif 000007
【００５５】
図１５（Ｂ）はＩＩＲフィルタの特性図である。横軸はフィールド数、縦軸は（７）式で求めた伝達特性を示している。帰還係数値を導くパラメータｎの値により、応答速度を可変させることができる。
本実施形態のＩＩＲフィルタはソフトウェアで構成したが、ハードウェアで構成してもよい。
【００５６】
以上の処理より、ユーザ３の手がかざされている位置に操作ボタン５０が移動する。
次に制御情報判断器１８は、操作ボタン５０が手のぶれの影響などを受けずに安定して動作するよう、操作ボタン５０の位置を固定する。固定は、図８（Ｃ）に示す活性化フラグがハイになったタイミングで行う。また制御情報判断器１８は、操作ボタン５０に対応する検出領域５００の位置も移動させるよう、タイミングゲート器３１に入力するタイミングパルスを変更する。
続いて制御情報判断器１８は測定領域移動制御部として手の重心ＨＲＣを示す情報に基づいて、スキャナ５４が移動する領域を初期測定領域５５１から画面上での位置変更後の測定領域５５３へと測定領域５５内で移動させる。画面上での位置変更後の測定領域５５３が操作ボタン５０を中心として位置するように設定する。スキャナ５４の移動範囲の変更は、タイミングゲート器３１に入力されるタイミングパルスを移動制御部が制御して行う。従って、図１４（Ａ）〜（Ｃ）に示すようにユーザ３の手の重心（中央部）に操作ボタン５０が位置するように、可動ボタンが移動する。
【００５７】
実施例３で制御情報判断器１８は、手の重心ＨＲＣから求めた手の位置の情報に基づいて、スケーラ１４のシフト機能を制御し可動ボタンをシフトさせる。更に制御情報判断器１８は、（５）式で求める測定領域５５３の各ステップｊにおける手の割合ＨＲＳ（ｊ）の平均値ＨＲＡに基づき、図７に示すスケーラ１４のズーム機能を図７に示すズームパラメータに従って制御する。
制御情報判断器１８が制御部として、スケーラ１４のシフト機能を制御するためのシフトパラメータを図１６に示す。縦軸は、スケーラ１４のシフト方向を示し、横軸は手の位置をステップｊで示している。なお本実施形態では全ステップを２０ステップ（ｊ＝０〜１９）としたが、これに限るものではない。測定開始時に手が、画面に向かって初期測定領域５５１の左側に位置すると、操作ボタン５０及び測定領域５５３（可動ボタン）がユーザ３に対して左にシフトするように、可動ボタンを測定領域５５内で右方向にシフトさせる。可動ボタンの移動に伴い、鏡像変換器１３及びスケーラ１４を経た画像信号における操作ボタン５０に対応する検出領域５００の位置及びスキャナ５４の移動する範囲も変更される。
測定開始時に手が、初期測定領域５５１の中央に位置すると、ユーザ３が操作に対して最適な位置にいるとみなし、スケーラ１４のシフト機能は働かせないものとする。測定開始時に手が、画面に向かって初期測定領域５５１の右側に位置すると、スケーラ１４は可動ボタンがユーザ３に対して右にシフトするように、可動ボタンを測定領域５５内で左方向にシフトさせる。可動ボタンの移動に伴って、検出領域５００の位置及びスキャナ５４の移動する範囲も変更される。
【００５８】
ズーム機能を働かせるタイミングは、図８に示したとおりである。図８（Ｄ）に示すズーム確定フラグがハイになり、時定数Ｔｍを経たあと、スキャナ５４が画面上での位置変更後の測定領域５５３の測定を開始する。
制御情報判断器１８は生成部として、スキャナ５４に対応する検出器から出力された測定領域５５３における手の面積の割合に応じた検出信号に基づいて、（４）式より測定領域５５３における２０ステップ全ての手の割合ＨＲＳ（ｊ）を示す情報を生成し、（５）式より手の平均値ＨＲＡを示す情報を生成する。続いて制御情報判断器１８は制御部として、平均値ＨＲＡを示す情報に応じてスケーラ１４のズーム機能を図７に示すズームパラメータに従って制御する。また、ノイズによる変動を抑えるため、手の割合ＨＲＳ（ｊ）が３０％未満の値を示すステップｊは、手の割合ＨＲＳ（ｊ）を０とする。
【００５９】
図１７に、スキャナ５４の他の実施形態であるスキャナ５４０を示す。スキャンは、図１７の上から下へ向かって進んでいる。スキャナ５４０は、スキャナ５４より水平方向に広い領域のデータを検出できるものであり、例えばスキャン測定領域５３の２ステップ分の領域を一度に検出できる。スキャナ５４０は、スキャン測定領域５３の左端部（０ステップ）から右端部（１９ステップ）に向かって、２ステップ分の領域の半分ずつ移動する。従って、各ステップから重複してデータを検出することとなり、手の重心ＨＲＣを求める際など安定した動作を行え、好ましい。
【００６０】
図１８（Ａ）〜（Ｅ）に、実施例３のスケーラ１４のズーム機能及びシフト機能を用いた、画面内のユーザ３の大きさ及び位置の最適化について説明する。ここで最適化とは、図１８（Ｅ）に示すように画面中央に適当な大きさでユーザ３が映ることを言う。
図１８（Ａ）は、ユーザ３が画面左側に大きく映っている場合を示している。図１８（Ｅ）のように最適化するためスケーラ１４は、ビデオカメラ２より出力された画像信号又は鏡像変換器１３により鏡像変換された画像信号を縮小し、表示画面２１に表示されたユーザ３の位置を左方向にシフトさせる。
図１８（Ｂ）は、ユーザ３が画面右側に大きく映っている場合を示している。図１８（Ｅ）のように最適化するためスケーラ１４は、ビデオカメラ２より出力された画像信号又は鏡像変換器１３により鏡像変換された画像信号を縮小し、表示画面２１に表示されたユーザ３の位置を右方向にシフトさせる。
【００６１】
図１８（Ｃ）は、ユーザ３が画面左側に小さく映っている場合を示している。図１８（Ｅ）のように最適化するためスケーラ１４は、ビデオカメラ２より出力された画像信号又は鏡像変換器１３により鏡像変換された画像信号を拡大し、表示画面２１に表示されたユーザ３の位置を左方向にシフトさせる。
図１８（Ｄ）は、ユーザ３が画面右側に小さく映っている場合を示している。図１８（Ｅ）のように最適化するためスケーラ１４は、ビデオカメラ２より出力された画像信号又は鏡像変換器１３により鏡像変換された画像信号を拡大し、表示画面２１に表示されたユーザ３の位置を右方向にシフトさせる。
【００６２】
ビデオカメラ２より出力される画像信号は、表示装置２１に表示されている画像信号の範囲よりも広い範囲を撮影したものである。従って、図１８で説明したように表示画像を最適化するために拡大縮小及び移動しても、表示画像は切れることがない。
【００６３】
図１９（Ａ）は、ユーザ３が表示装置２１に対して近い位置にいる場合を示し、図１９（Ｂ）は、ユーザ３が表示装置２１に対して遠い位置にいる場合を示す。ユーザ３がいずれの位置にいても、ビデオカメラ２によって撮影され、表示装置２１に表示されているユーザ３の大きさは同じである。本発明の一実施形態であるスケーラ１４のズーム機能及びシフト機能を使用することで、ユーザ３がどこに位置していても、表示装置２１に表示されたユーザ３の大きさと操作用画像との大きさとが同じ関係になるように制御できる。従って、ユーザ３は表示装置２１に対してどの位置にいても、操作ボタン等の操作が確実に検出され、ユーザ３の操作性が向上する。
【図面の簡単な説明】
【００６４】
【図１】本発明の電子機器の操作方法の概要を説明するための図である。
【図２】本発明の一実施形態にかかる電子機器（テレビジョン受像機１）の要部の構成を示すブロック図である。
【図３】図２に示す検出器の構成を示すブロック図である。
【図４】図２に示すオブジェクト抽出器の構成を示すブロック図である。
【図５】実施例１のズームボタン５Ａを示す図である。
【図６】ズームボタン５Ａに占める手の割合と、手の割合に基づいたヒストグラムとを示す図である。
【図７】本実施形態のスケーラ１４のズームパラメータを示す図である。
【図８】本実施形態のスケーラ１４のズーム機能を制御するタイミングを示す図である。
【図９】実施例２のズームボタン５Ｂを示す図である。
【図１０】第１と第２のスキャン方法を示す図である。
【図１１】ズームボタン５Ｂに占める手の割合と、手の割合に基づいたヒストグラムとを示す図である。
【図１２】実施例３のズームボタン５Ｃを示す図である。
【図１３】ユーザ３が手をズームボタン５Ｃにかざした状態を示す図である。
【図１４】可動ボタンが移動した後の状態を示す図である。
【図１５】本実施形態のＩＩＲフィルタを示す図である。
【図１６】本実施形態のスケーラ１４のシフトパラメータを示す図である。
【図１７】スキャナ５４の他の実施形態であるスキャナ５４０を示す図である。
【図１８】実施例３のスケーラ１４を用いた画面内のユーザ３の大きさ及び位置の最適化について説明するための図である。
【図１９】本実施形態のスケーラ１４による画像調整を示す図である。
【符号の説明】
【００６５】
１  テレビジョン受像機（電子機器）
２  ビデオカメラ
３  ユーザ（操作者）
１２  タイミングパルス発生器（移動制御部）
１３  鏡像変換器
１４  スケーラ（画像調整器）
１５  グラフィックス生成器（操作用画像生成器）
１６  第１の混合器（混合器）
１７  検出部
１７ｎ  検出器
１８  制御情報判断器（生成部、制御部、移動制御部、測定領域移動制御部）
２１  表示装置
３０  オブジェクト抽出器（抽出部）
３１  タイミングゲート器（抽出部）
【図１】
2008152720.tif 000008
【図２】
2008152720.tif 000009
【図３】
2008152720.tif 000010
【図４】
2008152720.tif 000011
【図５】
2008152720.tif 000012
【図６】
2008152720.tif 000013
【図７】
2008152720.tif 000014
【図８】
2008152720.tif 000015
【図９】
2008152720.tif 000016
【図１０】
2008152720.tif 000017
【図１１】
2008152720.tif 000018
【図１２】
2008152720.tif 000019
【図１３】
2008152720.tif 000020
【図１４】
2008152720.tif 000021
【図１５】
2008152720.tif 000022
【図１６】
2008152720.tif 000023
【図１７】
2008152720.tif 000024
【図１８】
2008152720.tif 000025
【図１９】
2008152720.tif 000026