(57)【要約】  本発明は、通信端末装置を備えているカメラを使用してグラフィック、オーディオ、そして／又は、ビデオインターフェースを制御する方法に関し、第１画像を取得し且つ／又は保存する工程と、新規画像を取得し且つ保存する工程と、両方の画像に合致させることによって見掛けの運動を計算する工程と、所定の制御モード従って見かけの運動をユーザーコマンドに読み取る工程と、前記の端末のメモリにユーザーコマンドを保存する工程と、ユーザーコマンドによる端末のディスプレイ又は音を変更し且つオプションで要素若しくはグラフィックゾーン若しくはメニューのオープン又はオーディオ若しくはビデオファイルのトリガー若しくはスクロールをなし又はサウンドトラック上のサウンド付加のトリガーをなし又は通信端末上のユーザー及び追加的に第２端末にも転送することによってタスク若しくはアプリケーションの実行をなす工程と、を含む。【特許請求の範囲】
【請求項１】
通信端末を備えるカメラによってグラフィックインタフェイスを制御する方法であって、
−  メモリに保存されている第１画像を取得し又は既に取得され且つ前処理が行なわれた少なくとも一つの画像を保存する工程と
−  メモリ内に新規画像を取得し且つ保存し、前記メモリから不要な画像を削除する工程と、
−  一連の画像に通じるヒストグラム等化を含む工程による前記画像の強度レベルを標準化する工程を含む予備的処理を行う工程であって、前記レベルは一方では標準化され他方では色度強度の表示レベル数が低減され、前記新規画像及び或いはメモリに予め保存されているこれらの予備的処理を行う工程と、
−  前記予備的処理が行われた画像と画像を一致させる技術とを用いて見掛けの運動を計算する工程と、
−  前記見掛けの運動の振幅及び／又は時間にフィルターにかける工程と、
−  所定の制御モードに従って、前記見掛けの運動をユーザーコマンド信号に変換する工程と、
−  前記端末のメモリ内にユーザーコマンドを保存し且つ／又はそれらを第２の端末に送信する工程と、
−  前記ユーザーコマンドに従って前記端末及び／又は第２端末の表示を変更する工程と、
−  前記通信端末上の前記ユーザー及び第２端末への送信によって、メニューのエレメント若しくは画像領域若しくは開始を有効にするコマンドを入力し、又は、タスク若しくはアプリケーションを実行する工程と、を含むことを特徴とする方法。
【請求項２】
前記予備的処理動作は前記画像の縮小及び／又は色数の低減を含むことを特徴とする請求項１に記載の方法。
【請求項３】
前記見掛けの運動を計算する前記一致技術は、全体的なパラメトリックモデルを見積もっていることを特徴とする請求項１に記載の方法。
【請求項４】
使用される前記一致技術は、前記画像の強度差において形成された二次の評価基準を最小にする工程から成ることを特徴とする先行の請求項に係る方法。
【請求項５】
予備的処理が行われた２つの連続する画像による前記見掛けの運動の計算は、
−  所定の因数ｆによって両方の画像を縮小する工程と、
−  既に縮小された画像を用いて大枠の運動を計算しそれに前記因数を乗ずる工程と、
−  第１非縮小画像及び前記大枠の運動を用いてサイズ変更された画像を計算する工程と、
−  前記サイズ変更された画像及び第２非低減画像を用いて残存運動を計算する工程と、
−  前記大まかな運動と前記残存運動を加算ことによって、前記見掛けの運動を計算する工程と、を含むことを特徴とする請求項１に記載の方法。
【請求項６】
画像Ｉ１及びＩ２の両方の間の見掛けの並進運動ｍは、
【数１】
2009503667.tif 000002
によって与えられ、
【数２】
2009503667.tif 000003
であることを特徴とする請求項１に記載の方法
【請求項７】
前記画像を一致させる前記技術は、
−  対象となる点を抽出する工程と、
−  前記画像間での前記対象となる点を対にする工程と、
−  見出された対と一致する見掛けの運動を計算する工程と、を含むことを特徴とする請求項１に記載の方法。
【請求項８】
絶対値における後者が所定の閾値以下で場合であり且つそれをこの同じ閾値だけ低減又は増大する他の場合にあっては、前記見掛けの運動にフィルターにかける工程は、その成分の各々を取り消す工程からなることを特徴とする請求項１に記載の方法。
【請求項９】
前記見掛けの運動の前記フィルターをかける工程は下限と上限の間におけるその成分の各々の値を制限することを特徴とする請求項１に記載の方法。
【請求項１０】
前記グラフィック要素の置換は、前記見かけの運動に比例した利得を以って、前記計算された前記見掛けの運動に比例していることを特徴とする請求項１に記載の方法。
【請求項１１】
前記見掛けの運動によるグラフィックインタフェイスの制御モードは、スケールの置換若しくは変化に関連し、又はメニューにおける回転若しくはスクロール若しくはナビゲーションに関連し、又は画像要素を選択若しくは有効になすことに関連していることを特徴とする請求項１に記載の方法。
【請求項１２】
通信端末若しくは第２端末のディスプレイにおける変化は、画像若しくはテキスト若しくはドキュメント若しくはカーソル若しくは選択領域若しくはアイコン若しくはメニュー若しくはリストに関連していることを特徴とする請求項１に記載の方法。
【請求項１３】
グラフィックインタフェイスの制御モードは、事前に関連付けられたキーボードのキーを押すことによってユーザーによって選択されることを特徴とする請求項１と１０のいずれにかによる方法。
【請求項１４】
前記インターフェイスの制御モードに関連するキーがあらかじめ押され続けられる場合は前記見かけの運動は計算され、これらのキーのいずれもが押されない場合はユーザーコマンドとして前記見かけの運動の計算又は読み取りはなされないことを特徴とする請求項１３に記載の方法。
【請求項１５】
前期制御モードは、音声コマンド、外部のキーボードから受け取られたコマンド、又は、物理的に接続されたか若しくは赤外線、ブルートゥース、Ｗｉｆｉ，  ＧＳＭ，  ＧＰＲＳ，  ＵＭＴＳ，  ＣＤＭＡ若しくはＷ−ＣＤＭＡ若しくはインターネットを介して接続された別の端末から受け取られたコマンドによって、ユーザーによって選択されることを特徴とする請求項１、１１、１３、及び１４のいずれかによる方法。
【請求項１６】
所定の方向における見掛けの運動は、前進のズーミングでスケールを変えるためのコマンドとして読み取られ、反対方向における後方のズーミングでスケールを変えるためのコマンドとして読み取られることを特徴とする請求項１、１０、１１、及び１２のいずれかによる方法。
【請求項１７】
特定方向における見かけの運動は同じ方向又は逆方向におけるグラフィック要素を置き換えるためのコマンドとして読み取られることを特徴とする請求項１、１０、１１、および１２のいずれかによる方法。
【請求項１８】
前記フィルターの掛けられた見かけの運動が逆方向である場合、特定方向における見かけの運動は同じ方向又は逆方向におけるグラフィック要素を置き換えるためのコマンドとして読み取られることを特徴とする請求項１、１０、１１、及び１２のいずれかによる方法。
【発明の詳細な説明】
【発明の分野】
【０００１】
本発明は通信端末を備えるカメラによってインターフェイスを制御する方法に関する。
【０００２】
このインターフェイスは、（スクリーンでディスプレイを制御する）グラフィックインタフェイス、（構成部品のスピーカーによって出された音を制御する）オーディオインターフェイス又は（ビデオを制御する）その両方であってもよい。
【０００３】
この方法は、通信端末を備えるカメラによってリアルタイムで見掛けの運動を計算し、ユーザーコマンドとして見掛けの運動を読み取り、そして、そこから結果として生じるインターフェイスを変更することに特に適用されるが、これに限られない。
【０００４】
本発明による方法は計算機能力とメモリ容量の両方において限定されたリソースを有する通信端末に特に適合させられる。
【０００５】
この方法は、端末のキーを繰り返して押す一連の工程を置換するか又は有利に完了してもよい。端末は、通信端末、コンピュータ、オーディオ又はビデオ端末  （ハイファイのシステム、ビデオリーダー）  であってもよい。
【技術背景】
【０００６】
必要性と技術の発展に続き、通信端末はますます豊富なマルチメディアコンテントに関わっているのを示すことは興味のあることである。通信端末によって、より様々の多数のメディアが提案されているだけでなく、後者のサイズは、増大し続けている。すなわち、画像はますます大きく、保存されるテキストはますます大きくなっている。
【０００７】
ほとんどの通信端末は小型であるので、ディスプレイ又は入力制御デバイスに対する処理能力は限定されている。これにより、これらの端末のグラフィックインタフェイスにかなりの負担が即座にかかってしまっている。例えば、安心した可読性を保持するためには、画像又はテキストを部分的に表示しなければならない。このようにして画像又はテキストの置換には、いくつかのキーを頻繁に押すことが必要である。また、オーディオ又はビデオファイルのスクローリングを制御することによって、キーボードのキー又はリモートコントロールキーの使用を低減することができる。キーボードのキー又はリモートコントロールキーの使用によっては、衝撃効果に加えてミキシング又は他の重畳されたオーディオ若しくはビデオ効果などの光、音若しくはビデオ効果に多くの自由が容認されない。
【０００８】
非常に多くの場合、キーを押す操作数は急速に禁制的となり、ユーザーにとっては非常に重大になる。また、明度、コントラスト、音量レベルの調整、メニュー若しくはアイコン設定におけるナビゲーション、グラフィックカーソルの移動、テキスト又は画像のスクローリング、画像又はテキストが表示される時のスケールの変更、テープ若しくはオーディオ若しくはビデオファイルにおけるトリガと置換、異なる速度でのサウンドトラックのスクローリング、又は、アクションゲームの制御について、非排他的に言及する。
【０００９】
通信端末の単純な自発的運動によってユーザーコマンドを入力すると、キーを連続して反復して押す一連の工程が、有利にも切り替えられてもよいことが知られている。著しく、この原理によって、端末の置換に比例するコマンドの使用が可能となり、これによって、ユーザーと端末間の相互作用をよりよいものとなすフィードバック制御の形態を与え、その結果、安心して使用及びより明確な制御が可能となる。そのうえ、通信端末の自発的な運動で形成されたコマンドの使用は新たな展望を与える。この新しいユーザー入力を、他の端末に関連して有利に使用してもよい。例えば、この方法を用いて、デスクトップコンピュータのグラフィックカーソルが制御されてもよい、又は、オーディオ若しくはビデオファイルのボリューム、コントラスト、強度、又はスクローリングは、通信端末の運動によってハイファイシステム又はビデオリーダー等の装置の一部品において制御されてもよい。また外的事象によって、コマンドへの見かけの運動のその読み取りにおいて通信端末に影響を及ぼしてもよい。このため、この通信又は他のプレーヤーの動きを考慮に入れるネットワーク・ゲームさえ取り入れられることができるために、その方法を禁ずる入力通信について例として簡単に説明する。
【００１０】
通信端末の運動は端末上の特定のセンサーを通して得られてもよい。これらのセンサーは、慣習的には加速度計又はジャイロスコープである。後者を用いて、絶対的な方法で空間における端末の位置又は方位を参照することは、しばしば可能である。しかしながら、これらのセンサーによって、ますます減じられた端末における一体化問題が引き起こされ、生産過剰コストを引き起こす。そのうえ、それらの精度は極低レベル振幅運動によるインターフェイスのファイン制御を常に容認するというわけではない。
【００１１】
現在、カメラを一体化している通信端末は、ますます非常に多い。したがって、端末の動作に関する情報を得るこの一体化されたカメラを使用したいのは合理的である。
【００１２】
動作に関する情報は、テクスチャ及び照明平面表面を観測するカメラによって計算されてもよいことが知られている。しかしながら、通信端末を備えるカメラが照明上のいかなる制約条件がない場合においていかなるシーンも観測する場合、この動作情報を計算することにおける困難は克服することができなくなる。
【００１３】
第１の困難とは、一般に、通信端末を備えるカメラは平面表面又は単一の物体さえ観測しないので、したがって、観測された運動はカメラと物体の動作から生ずることである。情報の唯一の構成部品としてどんな画像列によるカメラの３次元運動を計算するのは、まだ大体において未解決の問題であり、困難の大部分は未解決のままで残っている。現状の認識においては、したがって、カメラによって得られた画像からの端末のすべての運動が後天的にリストアできるとは想像できない。
【００１４】
第２の困難とは、シーンの照明は、デバイスによって、さらにフラッシュを用いても、制御することができないので、カメラの画像に記録されたテクスチャの色彩諸強度は予測できない手法で連続した画像を変えるということである。したがって、このため、観測されたテクスチャのカラーの集約の不変性に基づく見掛けの運動を計算する周知の技術を使用することができない。
【発明の概要】
【００１５】
本発明の目的は、これらの障害に対して救済手法を見出すことである。本発明の目的は、見掛けの運動をカメラからの画像によってリアルタイムで計算することができるようになすことである。本発明の目的は、そして、ユーザーコマンドとしてこの見掛けの運動を読み取ることである。メニューでナビゲートしようとする場合、画像又はテキストを移動させようとする場合、グラフィックカーソルを位置づけようとする場合、いくつかの方向において同時に且つ直感的に動作の制御を必要とするゲームがなされる場合、音量、音若しくは光のコントラスト、光度、オーディオ若しくはビデオファイルのスクローリングを制御しようとする場合、オーディオファイルを重ね合わすことによる音響効果を加える場合、音声若しくはマルチメディアテープにエフェクトをミックスする場合において、このタイプのシステムは有利に使用されてもよい。
【００１６】
本発明による方法は以下の工程を含む。
【００１７】
−  メモリに保存されている第１画像を取得するか又はメモリに既に取得され且つ前処理された少なくとも１つの画像を保存する。
【００１８】
−  新規画像をメモリ内において取得し且つ保存し、且つメモリから不必要な画像を削除する。
【００１９】
−  前記新規画像及びメモリ内に予め保存されたこれらの前処理を行う。
【００２０】
−  前記予備的処理が行われた画像と画像を一致させる技術とを用いて見掛けの運動を計算する。
【００２１】
−  前記見掛けの運動の振幅及び／又は時間にフィルターにかける。
【００２２】
−  所定の制御モードに従って、前記見掛けの運動をユーザーコマンドとして読み取る。
【００２３】
−  前記端末のメモリ内にユーザーコマンドを保存し且つ／又はそれらを第２の端末に送信する。
【００２４】
−  前記ユーザーコマンドに従って前記端末及び／又は第２端末の表示を変更する。
【００２５】
−  前記通信端末上の前記ユーザー及び第２端末への送信によって、メニューのエレメント若しくは画像領域若しくは開始を有効にするコマンドを入力し、又は、タスク若しくはアプリケーションを実行する工程と、を含むことを特徴とする方法。
【００２６】
見掛けの運動の計算は、文献で広く対処されている問題であり、特に、ｊｏｕｒｎａｌｓ  Ｂｒｏｗｎ，  Ｌ．Ｇ．，Ａ  ｓｕｒｖｅｙ  ｏｆ  Ｉｍａｇｅ  Ｒｅｇｉｓｔｒａｔｉｏｎ  Ｔｅｃｈｎｉｑｕｅｓ，  １９９２，  ａｎｄ  Ｚｉｔｏｖａ  ａｎｄ  Ｆｌｕｓｓｅｒ，  Ｉｍａｇｅ  Ｒｅｇｉｓｔｒａｔｉｏｎ  Ｍｅｔｈｏｄｓ：  ａ  ｓｕｒｖｅｙ，  ２００３の論文において見出されている徹底的な統合である。運動において単一の情報が要求される我々の場合とは無関係の密な動作の計算とは別に、我々は、パラメトリックモデルによって見掛けの運動を計算する２つの主要なアプローチについて言及する。その一つは。画像からプリミティブを合致させることから成る間接的なアプローチであり、もう一つは光学的なフロー保存のための方程式を利用する直接的なアプローチであり、“Ｈｏｒｎ  ａｎｄ  Ｓｃｈｕｎｃｋ  Ｄｅｔｅｒｍｉｎｉｎｇ  Ｏｐｔｉｃａｌ  Ｆｌｏｗ，  １９８１”において説明されている。この最後の非常に広範囲のアプローチは、時間経過における画像の強度変化がもっぱら物体の移動、連続した画像において一定であるべき感知強度に起因し、シーンの観測点に起因するという
過程として想定している。
【００２７】
間接方法は続いて以下の３工程において運動の計算と伴に進行する。（ｉ）プリミティブ（コーナ、リージョンなど）を抽出し、  （ｉｉ）いくつかの画像上のプリミティブを対にし、（ｉｉｉ）パラメトリックモデルを調整する。これらの方法のデリケートな点は、抽出されるべきプリミティブ及びそれらの番号の選択に対処し且つ誤ったペアの拒否に対処することである。これらの方法によって、特定プリミティブが連続した画像の間で対にされる場合、振幅の大きい動作を再発見することが可能である。それにもかかわらず、これらのステップの各々は、計算複雑度とメモリ占有の観点において伴にコストがかかることを証明してもよい。従って、これらの方法は、プレビューモードにおける低分解能であるカメラ、限定的なメモリリソース、及び限定的な計算機能力を有する端末の上の適用範囲の中に示すように思えない。
【００２８】
直接法方法は画像の強度から運動を計算する。密な運動の計算は、追加制約条件を加えるのを必要とするサブ決定された問題である。例えば、密な変位場に関する算定は、“Ｈｏｒｎ  ａｎｄ  Ｓｃｈｕｎｃｋ，  Ｄｅｔｅｒｍｉｎｉｎｇ  Ｏｐｔｉｃａｌ  Ｆｌｏｗ，  １９８１”のような従来の規則性又は“Ｌｕｃａｓ  ａｎｄ  Ｋａｎａｄｅ，  Ａｎ  Ｉｔｅｒａｔｉｖｅ  Ｉｍａｇｅ  Ｒｅｇｉｓｔｒａｔｉｏｎ  Ｔｅｃｈｎｉｑｕｅ  ｗｉｔｈ  ａｎ  Ａｐｐｌｉｃａｔｉｏｎ  ｔｏ  Ｓｔｅｒｅｏ  Ｖｉｓｉｏｎ，  １９８１”のような局所的均一性の制約条件によって実行される。  “Ｂｅｒｇｅｎ  ｅｔ  ａｌ．，  Ｈｉｅｒａｒｃｈｉｃａｌ  ｍｏｄｅｌ−ｂａｓｅｄ  ｍｏｔｉｏｎ  ｅｓｔｉｍａｔｉｏｎ，  １９９２“において説明されているような全体的なパラメトリックモデルによって説明された動作を調べることによって、我々は変位場において十分な制約条件を導入する。
【００２９】
２つの画像の間の運動を計算するために、与えられた評価基準を最小にする運動モデルのパラメータが、求められる。この評価基準はたいてい最小二乗タイプの評価基準である。この評価基準は画像のピクセルの全体において全体的に計算される。また、“Ｏｄｏｂｅｚ  ａｎｄ  Ｂｏｕｔｈｅｍｙ，  Ｒｏｂｕｓｔ  Ｍｕｌｔｉｒｅｓｏｌｕｔｉｏｎ  Ｅｓｔｉｍａｔｉｏｎ  ｏｆ  Ｐａｒａｍｅｔｒｉｃ  Ｍｏｔｉｏｎ  Ｍｏｄｅｌｓ，  １９９５”に説明されている一つと同様の確固な基準によってこの評価基準を一般化するのも可能である。しかしながら、そのような評価基準の最小化はコストを計算する観点において反復的であり且つ扱いにくくなる。
【００３０】
“Ｂｕｒｔ  ａｎｄ  Ａｄｅｌｓｏｎ，  Ｔｈｅ  ｌａｐｌａｃｉａｎ  ｐｙｒａｍｉｄ  ａｓ  ａ  ｃｏｍｐａｃｔ  ｉｍａｇｅ  ｃｏｄｅ，  １９８３”にあるように、複数スケール技術の使用にもかかわらず、直接計算技術によって振幅の大きな運動の動作とこれが容認されないことが知られている。これらの障害に対して救済手法を見出し、計算時間及び振幅の大きい見掛けの運動の計算を減じるために、本発明による方法においては、所定の因子ｆによってそれらを減ずることによって画像の予備的処理をなすことを提案している。
【００３１】
上記説明したように、シーンに関する照明条件及びカメラのホワイトバランスの自動制御において、頻繁に起こり且つ予測できない変化の故に、画像における記録されたテクスチャの色彩諸強度は連続した画像において異なる。画像の強度差異に基づく直接方法は画像の強度差異に非常に敏感であり、したがって、近似的又は不合理な結果さえ与える。
【００３２】
この障害に対して救済手法を見出すために、本発明による方法は、ヒストグラム等化によって画像を前処理する工程を含む。これによって、強度レベルが標準化された一連の画像を復元することができる。
【００３３】
さらに，カメラによって経済的モードで得られた画像は、一般に、低分解能であり且つノイズを含む。
【００３４】
この障害を抑えるために、本発明は、色彩諸強度の表示レベル数を減じることによってそれらの前処理をすることを提案する。
【００３５】
複数スケール方法は、１つのスケールからもう一方までの運動情報の伝達というデリケートな問題を引き起こす。しかしながら、それらがよく初期化されている場合、これらの方法は特定の運動を計算する。
【００３６】
本発明による方法の目的は、特に、この障害に対して救済手法を見出すことであり、２つの連続した画像が以下の通り前処理されている状態で見掛けの運動の計算がなされることによって見出される。
【００３７】
−  因子ｆによって両方の画像を縮小させる。
【００３８】
−  大枠の運動は前以って縮小された画像によって計算し且つ因子ｆが乗ぜられる。
【００３９】
−  リサイズされた画像は第１の非縮小画像及び大枠の運動によって計算される。
【００４０】
−  残りの運動がリサイズされた画像及び第２の非縮小画像によって計算される。
【００４１】
−  見掛けの運動はが、大枠の運動及び残りの運動を加えることによって、計算される。
【００４２】
本発明による方法においては、見かけの並進運動ｍの計算が２つの画像Ｉ１及びＩ２によって実行される且つ以下の工程を含む。
【００４３】
−  成分が両方の画像の強度差による第１画像の空間微分の積の和であるベクトルを計算する工程。
【００４４】
−  係数がお互いに第１画像の空間微分の積の和であるマトリックスを計算する工程。
【００４５】
−  前以って計算されたマトリックスの行列式と余因子を計算する工程。
【００４６】
−  前以って計算されたベクトル、行列式、および余因子によって運動の成分を計算する工程。
【００４７】
経済的な取得モードにおけるカメラによって転送された画像のデグラデーションの故に、その計算によって、ノイズによって乱され又は不合理な値を有する見掛けの運動が与えられてもよい。
【００４８】
有利なことには、絶対値としての後者が、予定された閾値より低いか、そして、他のケースではこの同じ閾値によってそれを減少するか又は増強する予定された閾値より低い場合にあっては、見掛けの運動をフィルターにかけることは、その要素の各々をキャンセルすることから成ってもよい。並進移動の場合におけるそのようなフィルタリングの非限定例は以下の式によって出される：
ｍ’＝（ｍ１’，ｍ２’）＝（ｓｉｇｎ（ｍ１）．ｍａｘ（Ｏ，｜ｍ２｜−ｓ），ｓｉｇｎ（ｍ２）．ｍａｘ（Ｏ，｜ｍ２｜−ｓ））．
有利なことには、運動算定から不合理な結果をフィルターにかけるために、フィルタリングはそのコンポーネントの各々に対して上限と下限を課すことから成ってもよい。
【００４９】
有利なことには、グラフィック要素の置換、又は音、ライト若しくはコントラストレベルの調整、又はオーディオ若しくはビデオファイルのスクローリングは、計算された見掛けの運動に比例して、見掛けの運動に比例している利得で実行されるだろう。
【００５０】
また、本発明においては、見掛けの運動は、アプリケーションの内容及び／又はユーザーによるキーボードの１若しくは数個のキーを同時に押すことによる、グラフィック及び／又はオーディオ及び／又はビデオインターフェイスのコマンドとして読み取られることを提案する。
【００５１】
本発明によるグラフィックインタフェイスを制御するための異なったモードは以下に関係がある。
【００５２】
−  置換
−スケールの変更
−回転
−スクロール
−メニューのナビゲーション
−選択及び／又は認証
−明度又はコントラストレベル
本発明による音声インタフェイスを制御するための異なったモードは以下に関係がある。
【００５３】
−音量
−音のコントラスト
このように制御されるグラフィック及び／又はオーディオ及び／又はビデオ成分は以下から成ってもよい。
【００５４】
−画像
−テキスト又はドキュメント
−カーソル
−選択領域
−アイコン
−メニュー
−リスト
−サウンドトラック
−ビデオ
例えば、前方にズームすることによってスケールを変えるコマンドとして、後方にズームすることによって反対方向におけるスケールを変えるコマンドとして、ある一定の方向での見掛けの運動は読み取られてもよい。また、同じ方向若しくは反対方向におけるグラフィック及び／又はオーディオ及び／又はビデオ成分を置換するコマンドとして、ある一定の方向での見掛けの運動は読み取られてもよい。見掛けの運動が反対方向にある場合は、ある一定の方向と反対方向におけるグラフィック成分を回転させるためのコマンドとして、ある一定の方向での見掛けの運動は読み取られてもよい。見掛けの運動が反対方向にある場合は、音若しくは光のコントラストレベルを増大させるためのコマンド及び音若しくは光のコントラストレベルを減少させるためのコマンドとして、ある一定方向での見掛けの運動は読み取られてもよい。
【００５５】
また、本発明による方法は、配線若しくはエアリアルルート（赤外線、ブルートゥース、Ｗｉｆｉ、ＧＳＭ、ＧＰＲＳ、ＵＭＴＳ、ＣＤＭＡ若しくはＷ−ＣＤＭＡ又はインターネットを介した）を介して、見掛けの運動の計測を行う通信端末に接続された別の端末のグラフィック及び／又はオーディオ及び／又はビデオ要素を制御するのに使用されてもよい。したがって、この方法の用途は一体化されたカメラを備えられた通信端末からＰＣ又は別の端末のグラフィックカーソルを制御することから成ってもよい。
【００５６】
有利なことには、あらかじめインターフェイスの制御に関連しているキーが押し続けられる場合のみ、見掛けの運動は、ユーザーコマンドとして計算されて、読み取られてもよい。あらかじめインターフェイスの制御に関連しているキーが押し続けられるときだけ、これらのキーのいずれも押されない場合は、見掛けの運動は、ユーザーコマンドとして計算されないし、読み取られない。
【００５７】
また、本発明による方法によれば、他のユーザー入力が、音声コマンド又は外部キーボードから受け入れられたコマンド又は赤外線、ブルートゥース、Ｗｉｆｉ，  ＧＳＭ，  ＧＰＲＳ，  ＵＭＴＳ，  ＣＤＭＡ若しくはＷ−ＣＤＭＡ若しくはインターネットと物理的に接続された他の端末から受け入れられたコマンドのような見掛けの運動を組み合わせて考慮されることが容認される。また、音、一連の音、オーディオ又はビデオファイルのスクローリング、オーディオ若しくはビデオファイルの一方向又はもう一方向における早いスクローリングをトリガするために、装置部品のユーザーの自発的若しくは非自発的な運動によって、音若しくは画像の重ね合わせ効果又は音のミキシング効果を得るために、音と光のレベル及びコントラストを調整することも本発明で可能である。
【発明の詳細な説明】
【００５８】
添付図面を参照して、本発明の実施例を非限定的な実施例として説明する。
【００５９】
図１は、同じ端末を備えるカメラによって通信端末のグラフィック及び／又はオーディオ及び／又はビデオインターフェースを制御するシステムの概略図である。
【００６０】
図２は、端末を備えるカメラによって、別の通信端末又はローカルネットワーク若しくはインターネットを介して接続された装置の携帯用又はデスクトップコンピュータのグラフィック及び／又はオーディオ及び／又はビデオインターフェースを制御するシステムの概略図である。
【００６１】
図１に示した実施例においては、本発明による方法を適用するためのシステムは、グラフィックディスプレイ（Ａ）中央処理装置（Ｕ）メモリ（Ｍ）カメラ（Ｃ）キーボード（Ｔ）スピーカー（Ｘ）通信手段（Ｇ）とことによるとワイヤ又は架空インターフェイス（Ｅ）をデバイスと少なくとも統合するデバイスを含む。
【００６２】
図２に示した実施例においては、本発明による方法を適用するためのシステムは、図１に既に記載されていた構成要素に加えて、携帯用又はデスクトップコンピュータ（Ｄ）、別の通信端末（Ｐ）等の他のデバイス、又は、ローカルネットワーク又はインターネット（Ｉ）を通して接続されたいかなるデバイス、当該システムによって遠隔操作されるグラフィック及び／又はオーディオ及び／又はビデオインターフェースを含む。
【図面の簡単な説明】
【００６３】
【図１】図１は、同じ端末を備えるカメラによって通信端末のグラフィック及び／又はオーディオ及び／又はビデオインターフェースを制御するシステムの概略図である。
【図２】図２は、端末を備えるカメラによって、別の通信端末又はローカルネットワーク若しくはインターネットを介して接続された装置の携帯用又はデスクトップコンピュータのグラフィック及び／又はオーディオ及び／又はビデオインターフェースを制御するシステムの概略図である。
【図１】
2009503667.tif 000004
【図２】
2009503667.tif 000005
【国際調査報告】
2009503667.tif 000006
2009503667.tif 000007
2009503667.tif 000008
2009503667.tif 000009
2009503667.tif 000010
2009503667.tif 000011