"触知情報を感知する多点接触の2次元センサーと、この触知情報の作用としての命令信号を生成する計算手段とを備えたデバイスにより、コンピューター化された装置をコントロールする方法において、透明な多点接触の触知センサーの下に位置するスクリーン上に、複数のグラフィカルオブジェクトを生成する段階を有しており、該グラフィカルオブジェクトそれぞれが少なくとも一つの所定の処理法則と結び付けられており、前記センサーは、各感知段階中に複数の触知情報を配信し、前記触知情報それぞれが、前記複数のグラフィカルオブジェクトの中の一つの位置との相対的な位置により定められる所定の処理の対象となることを特徴とするコンピューター化された装置をコントロールする方法。マトリックスセンサーを用いており、また該センサーの連続的スキャン段階を備えていることを特徴とする請求項1記載のコンピューター化された装置をコントロールする方法。前記触知センサーでの対象物の前記接触領域の境界領域の検出を備えていることを特徴とする請求項1記載のコンピューター化された装置をコントロールする方法。重心の検出を備えていることを特徴とする請求項1記載のコンピューター化された装置をコントロールする方法。少なくとも一つ前の感知段階中に実行される処理機能として、グラフィカルオブジェクトをリフレッシュする段階を備えていることを特徴とする請求項1記載のコンピューター化された装置をコントロールする方法。グラフィカルコンポーネント及びファンクションのライブラリーからのグラフィック表示の生成及び関連する処理法則の決定で構成される該グラフィカルオブジェクトを編集する段階を備えていることを特徴とする請求項1記載のコンピューター化された装置をコントロールする方法。前記触知情報の検知周波数が、50Hz以上であることを特徴とする請求項1記載のコンピューター化された装置をコントロールする方法。前記デバイスが、前記コンピューター化された装置とイーサネット登録商標リンクにより通信することを特徴とする請求項1記載のコンピューター化された装置をコントロールする方法。触知情報を感知する多点接触の2次元センサーを備えている、コンピューター化された装置をコントロールするデバイスにおいて、前記2次元センサーの下に配された表示スクリーンと、それぞれが、少なくとも一つの処理法則と関連付けられている複数のグラフィカルオブジェクトを記録するメモリーと、感知した前記触知情報の位置を解析し且つ前記グラフィカルオブジェクトの位置との相対的な前記触知情報の位置の作用としての処理法則を適用するローカル計算機とを備えていることを特徴とするコンピューター化された装置をコントロールするデバイス。複数のコントローラーのネットワークを形成するためのハブマルチソケットネットワークとも接続されていることを特徴とする請求項9記載のコンピューター化された装置をコントロールするデバイス。前記多点接触で触知する前記2次元センサーは抵抗性タイルであることを特徴とする請求項9記載のコンピューター化された装置をコントロールするデバイス。受け取ったネットワークケーブルのネットワーク出力ケーブルも備えていることを特徴とする請求項9記載のコンピューター化された装置をコントロールするデバイス。下記のすべてにおいて、コントロールはコンピューター化された一つの装置により行われる。この装置としては、例えば、音楽ソフトウェア、コントローラー、オーディオビジュアル装置、又はマルチメディア装置がある。図1A及び図1B、より正確には図2Aに示すように、本発明の第1の基本的な要素は、キャプチャーインタフェース102の補助で多点接触操作の感知に必要なマトリックスセンサー101である。センサーは、必要ならば、複数のパートに分割して、各パートで同時に走査スキャンすることにより、キャプチャーを加速することができる。一般原則は、センサーに検知されるゾーンにある接触点と同じくらい多くの数のカーソル例えば、マウスカーソルのようなカーソルを生成すること、及びそれら接触点の動きに追従することである。ユーザーがセンサー上から指をのけると、この指に関連しているカーソルも消失する。このように、複数の指の位置とその動きがセンサー上で同時に取得される。これが多点接触キャプチャーであり、このタイプのコントローラーとしては非常に革新的である。本発明の実施形態で使用されているセンサーは、既知の抵抗性の触知タッチマトリックスタイルである。抵抗性のタッチマトリックスタイルは、2つの重ねあわされた層から構成されており、各層上には、半透明の導電性物質であるITOインジウムすず酸化物からなる複数のトラックが形成されている。複数のトラックは、上層上では行方向に並んでおり、下層上では列方向に並んでおり、マトリックスを形成している図2A参照。2枚の導電性層は、互いにスペース支柱により絶縁されている。行方向のトラックと列方向のトラックとの交差点は、接触点を形成する。一本の指がタイルの上に置かれて、一本又は複数の上層上の列方向のトラックが押されて、一本又は複数の下層上の行方向のトラックと接触すると、一つ又は複数の接触点が形成される図2B参照。本発明の変形例として、スペース材を透明な抵抗性物質例えば、導電性ポリマーにより置き換えて構成しても良い。この抵抗性物質の抵抗は、十分な圧力が働くとその抵抗が減少するように、圧力の関数として変化する。このようにして、行方向―列方向の各交差点における抵抗測定を行うことにより、表面に働いた圧力を検知することが可能である。これらのタイルを音楽又はオーディオビジュアルで使用する観点から、指の動きを20ms以内の間隔で測定する必要がある。タイルの状態は、少なくとも1秒間に100回測定される。このタイルは、平行処理を行うために、複数のゾーンに分割されている。従って、本発明では、タイルのサンプリング周波数は、少なくとも100Hzである。第2の基本的な要素は、タッチタイルをスキャンするための電子デバイスである。この電子デバイスは、マトリックスセンサー上の複数の接触点を同時に検知することができる。実際の所、このタイプのセンサーが感知する既知の方法では、同時に複数の接触点を検知することはできなかった。過去における既知の方法では、図2Cに示された問題点は解決できなかった。ある列方向のトラックに給電した状態で、すべての行方向のトラックを同時に測定すると、直交性の問題が生じる。第1の接触点が、第2の接触点を隠してしまう。同様に、すべての列方向のトラックに給電した状態で、ある行方向のトラックを測定すると、第2の接触点が第1の接触点を隠してしまう。この問題点を解決するために提案する方法は、センサーを順番にスキャンすることである。列方向のトラックが、例えば5Vで、順に給電されて、トラックの高い又は低いレベルが順に測定される。ある列方向のトラックに電圧が印加されている時には、他の列方向のトラックは高インピーダンスなので、電圧が印加されている列方向のトラックからの電流が、他の列方向のトラックへ伝播することが防止される。最初に第1の列方向のトラックに給電されている間は、他の列方向のトラックは高インピーダンスである。そして、行方向のトラックは、次々に、つまり順に測定される。最初に第1の行方向のトラックの値が測定されている間は、すべての他の行方向のトラックはアースされている。次に、第1の行方向のトラックがアースされて、第2の行方向のトラックの値が測定される。そして、すべての行方向のトラックの値が測定されるまで続く。その後、第1の列方向のトラックは高インピーダンス状態になり、第2の列方向のトラックが給電される。そして、各行方向のトラックの状態の測定が再開する。このように、最後の列方向のトラックまで、スキャンが行われる。目的は、多点接触タイルを作製することなので、各交差点の値を1秒間に4~5回測定するために、マトリックスのすべてのスキャンが高い周波数で行われる。タイルデータを感知する装置が、図2Dに示されている。図2Dには、100本の行方向のトラックと135本の列方向のトラックとを備えたタイルの感知アルゴリズムが示されている。しかし、ある点が、一つ又は複数の他の接触点により隠されてしまう問題が生じる場合がある。実際の所、列方向のトラック及び行方向のトラックを形成している透明性物質であるITOの抵抗は、トラックの長さに比例して増加する。そして、センサーの下方左隅で測定される電位は、上方右隅で測定される電位よりも大きくなる。図2E及び図2Fにおいて、接触点の固まりは、給電されている列方向のトラックの電位の多くの部分を吸収する。そのため、孤立した接触点で測定される電位は、非常に小さくて測定できない。この問題点の解決法は、行方向のトラックの出力をデジタル処理する電圧コンパレーターを用いて、電圧がタッチタイル上の指の動きから生じたものと十分考えられるのかどうかを決めることにある。コンパレーターの参照値比較スレッシュホールドは、行方向のトラックごとに低減されている。その結果、最後の行方向のトラックの参照値は、最初の行方向のトラックの参照値よりも低くなっており、下方左又は上方右に位置する接触点が、同様に測定されるのを可能にしている。そして、例えばタイルの全部のサンプリングが、列方向及び行方向のトラックに対して1秒間に100回以上行なわれる。そして、キャプチャーインターフェース102からのデータが、センサーの総計を表すイメージを形成する。このイメージはメモリーに記憶されて、プログラムが、フィルタリング処理をして、指を検知して、カーソルを作成する。この作用については、図1を参照のこと。図3Bに示されているフィルタリングの段階では、感知インターフェース又はセンサー自身により生成されたノイズが除去される。複数の接触点の固まりだけが、指の圧力に対応していると考えられる。そこで、孤立した接触点を除去するために、境界領域の検出が行われる。次の段階では、カーソルの各支持点への関連付けを行う図3C。最後には、有界ゾーンごとに重心が計算される。そして、指がタッチセンサーから離されると、この指と対応するカーソルがスクリーンから除かれる。メインプロセッサーによりローカルに実行されるプログラムは、グラフィカルオブジェクトを操作するために、カーソルを、スクリーン105上に表示されている該グラフィカルオブジェクトに関連付けるのを可能にする。同時に、このローカルプログラムは、ホストコンピューター又はコントロールされた機器へ向けて、コントロールメッセージを生成するのに、これらのカーソルを使用する。更に、プログラムは複数の物理モデルのシミュレーターを有しており、このプログラムは、カーソルとグラフィカルオブジェクト間の相互作用規則の変更を可能にする。複数の異なる物理モデルを用いることが可能で、ばね仕掛けのシステム、弦の振動、衝突の操縦、重力の法則、電磁場が使用できる。カーソルの位置と、それぞれのカーソルがどのグラフィカルオブジェクトに位置付けられているのかとが、プログラムにより検討される。検討対象のグラフィカルオブジェクトのファンクションとして、センサーから生じたデータには、所定の処理が与えられる。例えば、短時間の間にタッチタイル上に指により形成されたスポットの動きに対応するある圧力の測定は解釈可能である。また、加速、速度、軌跡等の他のパラメーターが、グラフィカルオブジェクトの性質による機能として推定される。また、異なる指を区別するために、形状認知のアルゴリズムが適用される。メインプログラム103は、また、スクリーン105上に表示されるデータを、グラフィカルインターフェース104へ送る。更に、このグラフィカルインターフェース104は、グラフィカルプロセッサーにより構成されている。このグラフィカルプロセッサーは、例えば既知のタイプでも良い。後者のグラフィカルインターフェース104は、基本的なグラフィカルフンクションから構成されていても良い。このグラフィカルフンクションは、例えば、ビットマップ表示、ポリゴンフォントの表示、2次元又は3次元の図形の表示、ベクトルデザイン、アンチエイリアス処理、テクスチャマッピング、色の透明化や内挿が挙げられる。本実施形態では、メインプログラムが、数学的関数の入力と計算がリアルタイムで行える数学的表示のアナライザーも備えている。これらの関数は、どの変数の値も変えることができる。例えば、グラフィカルオフジェクト内部のカーソルの座標x、yは、0と1との間の値を有する2つの変数と考えることができる。数学的表示のアナライザーにより、x1000600というタイプの表示を作成して、1000と1600との間に値を持つ新しい変数を得ることができる。こうして得られた変数により、例えば、600ヘルツと1600ヘルツとの間の周波数を有する発信器のコントロールができる。数学的表示は、ベクトル量と同様にスカラー量にも用いることができる。数学的表示のアナライザーは、グラフィカルオフジェクトの変数を、リアルタイムで計算して処理できるツールである。また、ローカルプログラム103は、ネットワークポート106に対する通信フォームにデータ形式を整える。ネットワークポート106は、コンピューターアプリケーションが処理されるコンピューターとデータの通信をする。ネットワークインターフェースとしては、例えばTCP/IPプロトコルを用いてパケットにより通信する標準インタフェースである、イーサネット登録商標10/100BASE-Tがある。またネットワークインターフェースは、無線タイプであっても良い。図11に示すように、イーサネット登録商標接続によれば、シンプルなハブマルチソケットネットワークを用いて、本発明のコントローラーのネットワークを構成することにより、ユーザーのコントロール機器を無数に拡張できる可能性がユーザーに提供されることに注目すべきである。ネットワーク内において、一つのコントローラー又は複数のコントローラーは、メッセージを相互に送る形で、コントローラー相互に又はホストコンピューターと通信する。更に、機械装置を構成するユニットは、既知のタイプのバッテリー図示せずか、又はACアダプターにより給電される。更にまた、ユーザーのコンピューターのレベルにおいて、インターフェースエディター107により、インターフェースをグラフィカル的にプログラムすることができる。つまり、スクリーン105上に表示されているグラフィカルオブジェクトの全体が、グラフィカル的にプログラムすることができる。本実施形態では、インターフェース自身が、複数のシーンで構成されており、各インターフェースは高い階層構造を有している。実際、各シーンは、いくつかのインターフェースを備える。ユーザーは、入出力ポート109に接続されたボタンキーボード又はコントロールペダルボードを用いて、インターフェースを入れ替えることができる。インターフェースエディターの他のファンクションとして、コントロールデータに、ユーザーがコントロールしたいパラメーターを割り当てることがある。ユーザーは、例えば、パラメーター設定可能なグラフィカルオブジェクトのライブラリーを自由に持つ。このグラフィカルオブジェクトは、求められるアプリケーションに従って、異なるインターフェースを構成することを可能にする。図4及び図5には、ユーザーの意向による、いくつかのグラフィカルオブジェクトが示されている。グラフィカルオブジェクトは、あらかじめ定義されたり、音楽、オーディオビジュアル機器のコントロール、またはコンピューター化された装置へ特別に専用にすることができる。例えば、直線状ポテンショメーター403,404は、音信号のボリューム、周波数のフィルターとして、連続的パラメーターのコントロールに特に適している。鋸歯状ホイールジョグシャトル401は、例えばオーディオ又はビデオ再生機のコントロールに役立つ。また、グラフィカルオブジェクトは、既知のタイプのデブロップメント開発キット109SDKを用いて、自由に開発することができる。デブロップメントキットにより、コントローラーの基本的なグラフィカルファンクションを利用できる。このように、インターフェースエディター107により、ユーザーは、直ぐにコントロールインターフェースのパーソナライズ化が可能となる。インターフェースエディターは、ユーザーのコンピューター上で実行されるソフトウェアである。インターフェースエディターは、タイルのタッチ表面を表すメインウインドウから成り、メインウインドウ上には、ライブラリーから提案されたグラフィカルオブジェクトを配置することができる。表面上でグラフィカルオブジェクトを操作したり配置することは、例えばマウスを用いて行われる。メインウインドウ上にあるグラフィカルオブジェクトは、同時にコントローラー上にも表示されており、このグラフィカルオブジェクトはコントローラーのメモリーに記録される。都合に応じて、グラフィカルオブジェクトを後で動かしたり、次元を変えることが、コントローラーによりできる。メインウインドウ上にグラフィカルオブジェクトの位置が決められると共に、他の2次ウインドウにより、グラフィカルオブジェクトに固有の異なるパラメーターグラフィカルな性質、物理的動作を調節することができる。例えば、ボタン402は、またスイッチ又はトリガーとして作動できる。トリガーモードの場合には、押圧の測定が任意に行える。パラメーター設定可能なグラフィカルオブジェクトの他の例として、2Dエリア503,544がある。この2Dエリアは、境界ゾーン内部をポーン歩が動き回る構成を原則とする。2Dエリア内部にあるポーンの数は、任意にパラメーター設定可能である。エリアは、一平面図モード又はマルチ平面図モードに設定することができる。一平面図モードは、その平面内で複数のポーンが互いに衝突し合う。マルチ平面図モードは、重なっている異なった平面内に、複数のポーンが置かれている。平面上のポーンの摩擦係数、隅にいるポーン及びポーン間の反発、引力等の物理的パラメーターもまた設定することができる。またインターフェースエディターは、表面上に存在するグラフィカルオブジェクトをリストにしたり、数学的表示のアナライザー用いて、ファンクション及び変数の生成を行える。そして、グラフィカルオブジェクトは、初期設定として、基本軸に対応した所定数の変数x、y、zを有している。これらの変数は、常に0と1との間の値を有しており、32ビット浮動小数点形式で変化する。ユーザーは、自分がコントロールしたい、より代表的な他の値へ、これらの変数を結び付けられるはずである。そして、数学的表示のアナライザーにより、単純な数学的表示を用いて、新しい変数を作成する機会が与えられる。例えば、直線状ポテンショメーターは、基本軸であるxを有している。ユーザーが500Hzから2500Hzの周波数をコントロールしたいならば、a=2000x500という変数を作成しなければならない。また、状態表示オプションが望まれる。このオプションにより、パラメーターの状態を視覚的にコントロールできる。主計算ユニット103のレベルにおいて、タイル上の操作によって、グラフィカルオブジェクトへ適用されるべき更なる処理は、グラフィカルオブジェクトそれぞれのタイプに特有である。実際、仮想的直線状ポテンショメーター403,404上で指を円形に動かすことは、円形のポテンショメーター401の場合にはポテンショメーターの状態を変えるだろうが、直線状ポテンショメーター403,404の状態には影響を与えないだろう。同様に、あるグラフィカルオブジェクト例えば、直線状ポテンショメーターは、一度に一本の指を考慮するだけであるが、他のグラフィカルオブジェクトキーボード、2Dエリアは、複数の指の相互作用を受け入れる。例えば、2Dエリア503,504は、表面が長方形であり、所定数のポーンを有しており、各ポーンは所定の場所に位置している。ポーンはユーザーにより動かされる。全てのグラフィカルオブジェクトに対する物理系へ、以下の法則が導入される。つまり、ユーザーにより動かされたポーンは、ユーザーが該ポーンをとき放した時に、慣性による速度を得る。このように速度を得たポーンは、2Dエリアの隅で反発したり、またポーン間で反発する。更にポーンは、隅及びポーン間で引力及び斥力を受けると共に、エリア2Dの表面の摩擦係数により、所定の時間経過後には停止する。全てのこれらのパラメーターはパラメーター設定可能であろう。2Dエリアの他の変形例には、ばね仕掛けタイプの物理法則を適用して構成されるものがある。ある仮想ゴムバンドが、各カーソル及び各ポーンの間で引き伸ばされる。ユーザーは、摩擦及び内挿ファクターを設定することにより、このグラフィカルオブジェクトの動作を変更することができる。またこれらの性質は、他のグラフィカルオブジェクトを用いて、リアルタイムに変更できる。他の変形例として、マルチスライダー501がある。マルチスライダーは、複数のカーソルからなるテーブルであり、カーソルの数は調節可能である。マルチスライダーの典型的な使用例は、グラフィックイコライザー又はスペクトラル包絡線のコントロールである。マルチスライダーと、複数のシンプルな直線状ポテンショメーターを並列配置したものとの差は、指をスライドすることによって、複数のカーソル全体の構成を変更できることである。マルチスライダーは、また別々な弦として用いることができる。これには、ユーザーにより張力のプログラムが可能な弦の物理的モデルを、マルチスライダーに適用することで足りる。異なるタイプのグラフィカルオブジェクトを結合したインターフェースの他の実施形態を視覚化したものを図6から図9に示す。上述したいくつかのグラフィカルオブジェクトが、図6から図9に見られる。図6には、6つの2Dエリア601が配置されており、各2Dエリアには一つのポーンが含まれている。このインターフェースは、例えば、6つの異なるフィルターをコントロールでき、各フィルターは、一つ又は複数の音源に割り当てられる。この場合には、ゾーンごとにおける各ポーンの横座標の動きが、フィルターの周波数をコントロールしており、一方、縦座標の動きが、クオリティファクター又はフィルターの帯域幅をコントロールする。図7には、既知のタイプの、シンセサイザー又はサンプラーのコントロールの実施形態が示されている。インターフェースは、調律されたキーボード704と、4つの縦型ポテンショメーター703のグループとから成っている。キーボードにより、音程がコントロールされ、ポテンショメーターにより、例えば動的エンベロープアタックタイム、ホールドレベル、リリースタイムがコントロールされる。2Dエリア701は、3つのポーンを有しており、例えば音に適用される影響反響音、エコー、フィルターがコントロールされる。16個のボタンからなるマトリックス702は、例えば16個の異なる録音された音楽シークエンスをリリースしたり、又は上述したコントロールの事前記録された16個の配置を呼び出す。図8には、本発明を適用した他の実施形態が示されている。図8は、複数のラウドスピーカーにより構成されるデバイス上の空間内への、異なる音源の放送のためのデバイスのコントロールが示されている。この配置では、放送空間を表す2Dエリア801は、4つの音源に対応する4つのポーン801を有している。また2Dエリアは、5つのラウドスピーカーの位置を示す5つのアイコン802を有している。閉じた空間に対する各音源のレベル及び/又は位相は、各ポーン802を動かすことにより調節される。音源の空間内における位置は、ポーンにより定められている。また、4つの直線状ポテンショメーター803からなるグループにより、各音源の相対的レベルが調節される。4つのボタン804からなるユニットにより、各音源のON/OFFがなされる。図9には、他の実施形態が示されている。図9は、図7に示されている配置とは異なったシンセサイザー又はサウンドジェネレーターのコントロールが示されている。ここでは、サウンドジェネレーターの周波数は、4つの仮想弦903によりコントロールされる。各弦における初期の張力ピッチは、例えば直線状ポテンショメーター902によりコントロールされる。2Dエリアは、例えば出力レベル、音質、パニング等のサウンドジェネレーターの他のパラメーターをコントロールする。図10には、既知のタイプのオーディオ及び/又はビデオを編集する機器のコントロールが示されている。ジョグシャトル1001により、オーディオ及び/又はビデオソースの再生速度がコントロールされる。状態表示オブジェクト1002により、既知のタイプの形式時間、分、秒、画像に従って再生位置が示される。ボタン1003のセットにより、コントロールされる機器の再生及び編集のファンクションを操作できる。本発明が、上述したように例として説明された。当該技術分野の専門家は、本特許の範囲から逸脱することなしに、本発明の異なる変形例を実現できることが理解される。"