マルチタッチ

コンピューティングにおけるマルチタッチは表面（トラックパッドやタッチパネル）で2点以上のやり取りが存在することを認識するためのタッチセンシングを指す。この複数点認識はたびたびピンチ・トゥ・ズームや前もって定義したプログラムのアクティベーションといった高度な機能を実行するために使用される。 曖昧さ解消の努力や一部企業によるさらなるマーケティング分類によってマルチタッチの様々な定義が分類されている。例として3Mではマルチタッチを、3つ以上異なる位置を登録するためのタッチパネル機能と定義している。 マルチタッチ技術やパーソナルコンピュータ以前よりタッチパネル技術が電子機器を操作するために使用されることはあった。ヒュー・ル・ケイン（英語版）やロバート・モーグといった初期のシンセサイザーや電子楽器製作者はタッチセンサー式静電容量方式センサーで音を奏でる実験をしていた。1960年代にIBMは初めてのタッチパネル生産を開始し、1972年にコントロール・データ・コーポレーションが発売したPLATO IVコンピュータでは教育向け端末としてユーザーインターフェイスに16×16のシングルタッチポイントが使用された。 初期のキャパシタンスマルチタッチスクリーン技術の一つとしてCERNが1977年に開発したのは、1972年にデンマークの電気技術者であるベント・スタンプが開発したキャパシタンスマルチタッチスクリーンが元になっている。この技術はスーパー陽子シンクロトロン（英語版）粒子加速器のコントロールルームで使われるユーザーインターフェイスの新型開発に使用された。 スタンプは1972年3月11日付けの手書きノートで、静電容量式タッチスクリーンを使ってディスプレイに固定数のプログラマブルボタンをディスプレイに表示する計画を書いている。このスクリーンはガラスシート上で銅のフィルムにコンデンサのセットをエッチングし、各コンデンサは指の感触により近くのフラット導体で構築されキャパシティが相当量増える。コンデンサは細い線で構成されガラスシート上で銅にエッチングされる。コンデンサは目に見えないほどの十分な細さ(80 μm)と広がり(80 μm)を必要とする(CERN Courier April 1974 p117)。最新型のデバイスでは指が直接コンデンサに触れないようにシンプルなラッカーコーティングが施されている。 マルチタッチ技術が始まったのは1982年のことでトロント大学の入力研究グループが初めての人による入力のマルチタッチシステムを開発した。このシステムではすりガラスパネルの下にカメラを仕込んでいる。一本もしくは数本の指でガラスを押した時にカメラが白背景の中で動きを示した一つ以上の黒いドットを検知することで入力を登録できるようにする。ドットの大きさは圧力（人がどれだけの圧力でガラスを押したか）で変わり、システムもやや圧力に敏感になる。 1983年、ニュージャージー州マレーヒル（英語版）にあるベル研究所がタッチパネルベースのインターフェイスに関する包括的なディスカッションを行った。1984年、ベル研究所は複数の手で画像を変えるタッチパネルを設計した。1985年、ビル・バクストン（英語版）を含むトロント大学のグループがかさばったカメラベースの光学検知システムに代わる静電容量式のマルチタッチタブレットを開発した。 マルチタッチが発展し始めたのが1991年からで、ピエール・ウェルナーが数本の指とピンチングモーションをサポートしたマルチタッチの「デジタルデスク」を論文として発表した。 初期のタッチスクリーン地図用のテーブルインターフェースの一部として、ダニー・ヒリスによって、現在「ピンチ・トゥ・ズーム」と呼ばれるズームインターフェースを制御するために複数のタッチポイントを使用すること発明が公開され、特許を取得した。マルチタッチにはいくつかの特許があるが、後に法廷紛争となった事例として、アップル社とサムスン間での「ピンチ・トゥ・ズーム」がある。これは「ピンチ・トゥ・ズーム」特許に関するアップル社の主張を、ヒリスの特許に記載されているという理由で却下したUSPTOの決定根拠となった。 21世紀始めにこれらの発明により数社の企業が拡大していった。フィンガーワークス（英語版）という企業はタッチストリームキーボード、iGesture Padといった数種類のマルチタッチ技術を1999年から2005年の間に開発した。マルチタッチ技術のいくつかの研究は2000年代初期にコーネル大学のヒューマンファクター・人間工学教授のアラン・ヘッジによるものである。Appleがフィンガーワークスと同社のマルチタッチ技術を買収したのは2005年のことである。マルチタッチ技術が主流となっていったのはiPhoneが人気を得ていった2007年のことでアップルがiPhoneの発表で「マルチタッチを発明した」と述べた。発表やキャパシティブモバイルスクリーンのようなアプリケーション領域を除く特許の出願以前のマルチタッチに関する機能や用語は少なくともアップルとフィンガーワークスによる技術以前は存在していない（フィンガーワークスは2001年から2005年の間に特許を出願しており、その後改良されたマルチタッチはアップルが特許を取得している）。アップルは最初に携帯電話でマルチタッチを搭載したことになる。2001年に開発が始まったマイクロソフトのテーブルトップタッチプラットフォームであるMicrosoft PixelSenseはユーザーによるタッチと自身の電子デバイス両方による対話を可能にする。同じく2001年に三菱電機の米国研究所がダイアモンドタッチ（英語版）というマルチタッチ、マルチユーザーシステムの開発を始めた。静電容量式がベースだが、ユーザー（各ユーザーの椅子や立っているユーザーのフロアパッド）を同時に識別できる。商品化されたのは2008年のことだった。 小型化されたタッチデバイスの一般化は急速になっており、タッチスクリーン携帯電話の出荷台数は2006年の20万台から2012年の2100万台にまで増加されると予想されている。 アップルはマルチタッチ技術を使用した製品を数多く販売しており、特に有名なのがスマートフォンのiPhoneとタブレットのiPadである。さらに、アップルはユーザーインターフェイスにおけるマルチタッチの実行に関する特許を持っており、加えてアメリカ合衆国で「マルチタッチ」を商標登録しようとしたが、米国特許商標庁は普通名称と判断したため承認しなかった。 マルチタッチによる感知や処理はタッチ面に張り付いているASICセンサーを経由する。通常、別々の企業で生産されたASICとスクリーンを組み合わせてタッチスクリーンとなるが、トラックパッドの表面とASICは通常同じ企業によって生産される。カジュアルユーザーから多国籍企業まで全てのためのシステム設計によるマルチタッチ産業の成長によって数年で拡大した大企業もある。 今どきの一般的なラップトップ製造メーカーは自社のラップトップやタブレットにマルチタッチトラックパッドを搭載しており従来のスタイラス入力からタッチ入力に取って代わっており、従来の多くのオペレーティングシステムに対応している。 一部の企業はパーソナルエレクトロニクスに代わって大型マルチタッチテーブルや壁面の大型面コンピューティングに注目している。これらのシステムは政府組織、博物館や企業が情報の伝達手段や展示ディスプレイとして使用している。 マルチタッチはインターフェイスのサイズや種類によっていくつかの違った方法で実行されている。もっとも普及している形状は携帯デバイス、タブレット、タッチテーブルや壁である。タッチテーブルや壁はLEDバックライトによってアクリル板やガラス板を通して描写される。 種類 静電容量技術 表面静電容量技術（英語版）もしくはニアフィールドイメージング (NFI) 投影型静電容量タッチ (PST) 相互キャパシタンス セルフキャパシタンス インセル式静電容量方式 抵抗技術 アナログ型抵抗（英語版） デジタル型抵抗もしくはインセル式静電容量方式 光学技術 光学イメージングもしくは赤外線技術 Rear Diffused Illumination (DI) 赤外線グリッド（オプトマトリックス）もしくはデジタル・ウェーブガイド・タッチ (DWT)™もしくは赤外線光導波路 減衰全反射 (FTIR) Diffused Surface Illumination (DSI) Laser Light Plane (LLP) インセル式光学 波技術 表面弾性波 (SAW) Bending Wave Touch (BWT) 分散信号タッチ (DST) 音響パルス認識 (APR) Force-Sensing Touch Technology 光学タッチ技術は表面を指か物でタッチたときに光が散乱し反射がセンサーやカメラがキャッチしデータが測定された反射の種類に応じてタッチへの応答を指示するソフトウェアに送信される。タッチ面はまた確実に押されて反射を変えた場合の異なる応じ方を屈曲することで追加された感圧コーティングで感圧を生成できる。ハンドヘルド技術は電荷を伝送するパネルを使用する。指がスクリーンをタッチした場合、パネルの電場をかき乱す。このかき乱しは登録され、ソフトウェアに送信されることでジェスチャーへのレスポンスを開始する。 数年前まではマルチタッチ使用製品を発売していたのは数社にとどまっていたが、高価な技術をより身近にする試みとして、DIYでタッチスクリーンを作る方法が趣味が高じた人物により公開されている。 単にタッチジェスチャー（英語：touch gesture(s)）ともいう。マルチタッチのジェスチャーにはマルチタッチデバイスを操作するために標準化された動作があり、多くのApple製品や一部のラップトップ、デスクトップコンピュータに対応しており、iPhone、iPad、Android携帯電話やタブレット、一部のBlackBerry端末といった最も一般的なスマートフォンやマルチタッチタブレットの一部にもなっている。 これらのうち、1本指操作のものについては、マルチタッチ非対応のトラックパッドやタッチパネルでも言われることがある。 ジェスチャー認識 ヒューマンマシンインターフェース ジェファーソン・ハン（英語版） ナチュラルユーザーインターフェイス（英語版） ペンコンピューティング スケッチ認識 サーフェスコンピューティング（英語版） Tenori-on タッチパッド タッチユーザーインターフェイス（英語版） Usine ^ What is Multitouch, http://solutions.3m.com/wps/portal/3M/en_US/TouchTopics/Home/Terminology/WhatIsMultitouch/ 30 May 2010閲覧。  ^ a b c Buxton, Bill. "Multitouch Overview" ^ The first capacitative touch screens at CERN, CERN Courrier, (31 March 2010), http://cerncourier.com/cws/article/cern/42092 2010年5月25日閲覧。  ^ Bent STUMPE (16 March 1977), A new principle for x-y touch system, CERN, http://cdsweb.cern.ch/record/1266588/files/StumpeMar77.pdf 2010年5月25日閲覧。  ^ Bent STUMPE (6 February 1978), Experiments to find a manufacturing process for an x-y touch screen, CERN, http://cdsweb.cern.ch/record/1266589/files/StumpeFeb78.pdf 2010年5月25日閲覧。  ^ Nakatani, L. H., John A Rohrlich; Rohrlich, John A. (1983). “Soft Machines: A Philosophy of User-Computer Interface Design”. Proceedings of the ACM Conference on Human Factors in Computing Systems (CHI’83): 12–15. doi:10.1145/800045.801573. https://doi.org/10.1145/800045.801573 2009年1月28日閲覧。.  ^ Wellner, Pierre. 1991. The Digital Desk. YouTube video ^ Pierre Wellner's papers via DBLP ^ “Touch driven method and apparatus to integrate and display multiple image layers forming alternate depictions of same subject matter”. US Patent 7,724,242. August 30, 2017時点のオリジナルよりアーカイブ。December 31, 2017閲覧。 ^ Ribero, J (July 29, 2013). “US patent office rejects claims of Apple 'pinch to zoom' patent”. PC World. オリジナルのMay 6, 2018時点におけるアーカイブ。. https://web.archive.org/web/20180506001825/https://www.pcworld.com/article/2045461/us-patent-office-rejects-claims-of-apple-pinch-to-zoom-patent.html December 31, 2017閲覧。  ^ Westerman, W., Elias J.G. and A.Hedge (2001) Multi-touch: a new tactile 2-d gesture interface for human-computer interaction Proceedings of the Human Factors and Ergonomics Society 45th Annual Meeting, Vol. 1, 632-636. ^ Shanis, J. and Hedge, A. (2003) Comparison of mouse, touchpad and multitouch input technologies. Proceedings of the Human Factors and Ergonomics Society 47th Annual Meeting, Oct. 13-17, Denver, CO, 746-750. ^ Thom-Santelli, J. and Hedge, A. (2005) Effects of a multitouch keyboard on wrist posture, typing performance and comfort. Proceedings of the Human Factors and Ergonomics Society 49th Annual Meeting, Orlando, Sept. 26-30, HFES, Santa Monica, 646-650. ^ Steve Jobs (2006). "And Boy Have We Patented It". 2010年5月14日閲覧。And we have invented a new technology called Multi-touch ^ US patent 7,046,230 "Touch pad handheld device", http://patft.uspto.gov/netacgi/nph-Parser?Sect1=PTO2&Sect2=HITOFF&p=1&u=%2Fnetahtml%2FPTO%2Fsearch-bool.html&r=4&f=G&l=50&co1=AND&d=PTXT&s1=%22Touch+Pad+Handheld+Device%22.TI.&OS=TTL/%22Touch+Pad+For+Handheld+Device%22&RS=TTL/%22Touch+Pad+For+Handheld+Device%22  ^ Jobs et al, Touch Screen Device, Method, and Graphical User Interface for Determining Commands by Applying Heuristics, http://appft1.uspto.gov/netacgi/nph-Parser?Sect1=PTO2&Sect2=HITOFF&p=1&u=%2Fnetahtml%2FPTO%2Fsearch-bool.html&r=3&f=G&l=50&co1=AND&d=PG01&s1=%22touch+screen+device%22.TTL.&s2=apple.AS.&OS=TTL/%22touch+screen+device%22+AND+AN/apple&RS=TTL/%22touch+screen+device%22+AND+AN/apple  ^ Neumayr, Tom, and Kerris, Natalie, 2007 "Apple Unveils iPod touch Revolutionary Multi-touch Interface & Built-in Wi-Fi Wireless Networking" accessdate=21 November 2010 ^ Wong, May. 2008. Touch-screen phones poised for growth http://www.usatoday.com/tech/products/2007-06-21-1895245927_x.htm . Retrieved April 2008. ^ Heater, Brian (27 January 2009). “Key Apple Multi-Touch Patent Tech Approved”. PCmag.com. http://www.pcmag.com/article2/0,2817,2339661,00.asp#fbid=lGomcx1lHVv 27 September 2011閲覧。  ^ Golson, Jordan, Apple Denied Trademark for Multi-Touch, MacRumors, http://www.macrumors.com/2011/09/26/apple-denied-trademark-for-multi-touch/ 27 September 2011閲覧。  ^ Knowledge base:Multitouch technologies. Digest author: Gennadi Blindmann ^ Scientific American. 2008. "How It Works: Multitouch Surfaces Explained" . Retrieved January 9, 2010. ^ Brandon, John. 2009. "How the iPhone Works ^ "http://www.humanworkshop.com/index.php?modus=e_zine&sub=articles&item=99 "DIY Multi-touch screen" Multi-Touch Systems that I Have Known and Loved – An overview by researcher Bill Buxton of Microsoft Research, formerly at University of Toronto and Xerox PARC. The Unknown History of Pen Computing contains a history of pen computing, including touch and gesture technology, from approximately 1917 to 1992. Multi-Touch Interaction Research @ NYU Camera-based multi-touch for wall-sized displays David Wessel Multitouch Jeff Han's Multi Touch Screen's chronology archive De Force-Sensing, Multi-Touch, User Interaction Technology LCD In-Cell Touch by Geoff Walker and Mark Fihn Touch technologies for large-format applications by Geoff Walker Surface Acoustic Wave Touch Screens - YouTube How 3M™ Dispersive Signal Technology Works - YouTube Introduction to mTouch Capacitive Touch Sensing - YouTube PQLabs社製マルチタッチパネル　日本バイナリー