(57)【要約】【課題】入力装置に対する物体の接触位置を適切にし得る入力装置を提供する。【解決手段】入力位置を認識させるための画像を表示する表示装置５と、表示装置の表示面に沿って設けられた接触検出面に接触する物体の位置を検出する接触位置検出部２１と、接触位置検出部２１によって検出された位置と入力位置を認識させるための画像の中心位置との差を表すデータを記録する記録部２４と、記録部２４に記録されるデータに基づいて、表示装置５に表示する入力位置を認識させるための画像の修正量を求める演算部２３とを備える。【選択図】図６
2006127488.tif 000002
【特許請求の範囲】
【請求項１】
入力位置を認識させるための画像を表示する表示装置と、
前記表示装置の表示面に沿って設けられた接触検出面に接触する物体の位置を検出する接触位置検出部と、
前記接触位置検出部によって検出された位置と前記入力位置を認識させるための画像の中心位置との差を表すデータを記録する記録部と、
前記記録部に記録されるデータに基づいて、前記表示装置に表示する前記入力位置を認識させるための画像の修正量を求める演算部と
を備えることを特徴とする入力装置。
【請求項２】
前記接触位置検出部は、前記接触検出面に接触した前記物体の形状を認識し、
前記物体の輪郭を前記表示装置に表示する表示制御部を備えることを特徴とする請求項１に記載の入力装置。
【請求項３】
前記接触位置検出部は、前記接触検出面に接触した前記物体の形状を認識し、
前記入力位置を認識させるための画像として、前記物体の輪郭に沿ったマウスを前記表示装置に表示する表示制御部を備えることを特徴とする請求項１に記載の入力装置。
【請求項４】
前記入力位置を認識させるための画像は、キーボードを表す画像であり、
前記演算部は、あらかじめ設定された文字数Ｎの文字列Ｓの入力により得られたＮ個の前記キーボード上の座標セットＵと、現在のキーボード配列で前記文字列Ｓを表現するときの中心座標のセットＣに、２次元の座標変換Ｔを施した後の座標セットＣ’との距離の誤差の総和が最小になる前記座標変換Ｔを決定し、該決定した座標変換Ｔによるキーボード配列Ｃ’を新たなキーボード配列として用いることを特徴とする請求項１に記載の入力装置。
【請求項５】
前記入力位置を認識させるための画像は、キーボードを表す画像であり、
前記記録部は、前記接触位置検出部によって検出した位置と前記キーボードのキーの中心位置と差を表すデータを記録し、
前記記録部に記録されるデータに基づいて、前記物体が前記キーの中心位置に接触したか否かを示す中心ヒット率、又は所望のキーに接触したか否かを示すキーヒット率を集計する集計部を備えることを特徴とする請求項１に記載の入力装置。
【請求項６】
前記入力位置を認識させるための画像は、キーボードを表す画像であり、
前記記録部は、入力取り消しキーの使用頻度、取り消されたキー、および取り消し直後に入力し直されたキーの種類を含むキー情報を記録し、
前記演算部は、前記キー情報に基づき、表示されたキー配列の変更、もしくは、表示されたキーの位置、形状、角度の微調整を行うことを特徴とする請求項１に記載の入力装置。
【請求項７】
前記演算部は、前記微調整を行う時間間隔を設けることを特徴とする請求項６に記載の入力装置。
【請求項８】
前記物体の接触位置と前記入力位置を認識させるための画像の基準位置との差を利用して、前記入力位置を認識させるための画像の表示位置を位置合わせする補正部を備えることを特徴とする請求項１に記載の入力装置。
【請求項９】
前記記録部は、前記接触検知面における前記物体の接触状態に基づいて認識された前記物体を識別するための物体識別情報を、前記修正量に対応付けて記録し、
前記演算部は、次に前記物体が接触した場合、前記物体識別情報から前記修正量を求めることを特徴とする請求項１に記載の入力装置。
【請求項１０】
前記表示面に沿って設けられ、互いの対向面にそれぞれ電極が積層された第１及び第２のベースと、前記第１及び第２のベースの間に設けられた、異なる高さのドットスペーサとを有し、前記物体が前記接触検出面に接触するときの強度を検出する接触強度検出部を備える
ことを特徴とする請求項１に記載の入力装置。
【請求項１１】
入力位置を認識させるための画像を表示する表示装置と、
前記表示装置の表示面に沿って設けられた接触検出面に接触する物体の位置を検出する接触位置検出部と、
前記接触位置検出部によって検出された位置と前記入力位置を認識させるための画像の中心位置との差を表すデータを記録する記録部と、
前記記録部に記録されるデータに基づいて、前記表示装置に表示する前記入力位置を認識させるための画像の修正量を求める演算部と、
前記接触位置検出部によって検出された前記物体の接触位置に基づいて、前記物体の接触結果に応じた処理を実行する処理部と
を備えることを特徴とするコンピュータ装置。
【請求項１２】
入力位置を認識させるための画像を表示する表示装置の表示面に沿って設けられた接触検出面に接触する物体の接触位置と前記入力位置を認識させるための画像の中心位置との差を表すデータを記録する記録部と、
前記記録部に記録されるデータに基づいて、前記表示装置に表示する前記入力位置を認識させるための画像の修正量を求める演算部と、
前記物体の接触位置に基づいて、前記物体の接触結果に応じた処理を実行する処理部と
を備えることを特徴とするコンピュータ装置。
【請求項１３】
入力位置を認識させるための画像を表示装置に表示するステップと、
前記表示装置に重ねて配置された接触検出面に接触する物体の位置を検出するステップと、
前記検出された位置と前記入力位置を認識させるための画像の中心位置との差を表すデータを記録するステップと、
前記記録したデータから前記入力位置を認識させるための画像の修正量を求めるステップと、
前記修正結果に基づく画像を前記表示装置に表示するステップと
を含むことを特徴とする情報処理方法。
【請求項１４】
前記入力位置を認識させるための画像は、キーボードを表す画像であり、
前記修正量を求めるステップでは、あらかじめ設定された文字数Ｎの文字列Ｓの入力により、得られたＮ個の前記キーボード上の座標セットＵと、現在のキーボード配列で前記文字列Ｓを表現するときの中心座標のセットＣに、２次元の座標変換Ｔを施した後の座標セットＣ’との距離の誤差の総和が最小になる前記座標変換Ｔを決定し、該決定した座標変換Ｔによるキーボード配列Ｃ’を新たなキーボード配列として用いることを特徴とする請求項１３に記載の情報処理方法。
【請求項１５】
前記入力位置を認識させるための画像は、キーボードを表す画像であり、
前記データを記録するステップでは、前記検出された前記物体の位置と前記キーボードのキーの中心位置と差を表すデータを記録し、
前記記録部に記録されるデータに基づいて、前記物体が前記キーの中心位置に接触したか否かを示す中心ヒット率、又は所望のキーに接触したか否かを示すキーヒット率を集計するステップを備えることを特徴とする請求項１３に記載の情報処理方法。
【請求項１６】
前記入力位置を認識させるための画像は、キーボードを表す画像であり、
前記データを記録するステップでは、入力取り消しキーの使用頻度、取り消されたキー、および取り消し直後に入力し直されたキーの種類を含むキー情報を記録し、
前記修正量を求めるステップでは、前記キー情報に基づき、表示されたキー配列の変更、もしくは、表示されたキーの位置、形状、角度の微調整を行うことを特徴とする請求項１３に記載の情報処理方法。
【請求項１７】
入力位置を認識させるための画像を表示する表示装置が設けられた入力装置に、
前記表示装置に重ねて配置された接触検出面に接触する物体の位置を検出する手順と、
前記検出した位置と前記入力位置を認識させるための画像の中心位置との差を表すデータを記録する手順と、
前記記録されるデータから前記入力位置を認識させるための画像の修正量を求める手順と、
前記修正結果に基づく画像を前記表示装置に表示する手順と
を実行させることを特徴とする情報処理プログラム。
【請求項１８】
前記入力位置を認識させるための画像は、キーボードを表す画像であり、
前記修正量を求める手順では、あらかじめ設定された文字数Ｎの文字列Ｓの入力により、得られたＮ個の前記キーボード上の座標セットＵと、現在のキーボード配列で前記文字列Ｓを表現するときの中心座標のセットＣに、２次元の座標変換Ｔを施した後の座標セットＣ’との距離の誤差の総和が最小になる前記座標変換Ｔを決定し、該決定した座標変換Ｔによるキーボード配列Ｃ’を新たなキーボード配列として用いることを特徴とする請求項１７に記載の情報処理プログラム。
【請求項１９】
前記入力位置を認識させるための画像は、キーボードを表す画像であり、
前記データを記録する手順では、前記検出された前記物体の位置と前記キーボードのキーの中心位置と差を表すデータを記録し、
前記記録部に記録されるデータに基づいて、前記物体が前記キーの中心位置に接触したか否かを示す中心ヒット率、又は所望のキーに接触したか否かを示すキーヒット率を集計する手順を含むことを特徴とする請求項１７に記載の情報処理プログラム。
【請求項２０】
前記入力位置を認識させるための画像は、キーボードを表す画像であり、
前記データを記録する手順では、入力取り消しキーの使用頻度、取り消されたキー、および取り消し直後に入力し直されたキーの種類を含むキー情報を記録し、
前記修正量を求める手順では、前記キー情報に基づき、表示されたキー配列の変更、もしくは、表示されたキーの位置、形状、角度の微調整を行うことを特徴とする請求項１７に記載の情報処理プログラム。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、例えばコンピュータ等に情報を入力するための入力装置、コンピュータ装置、情報処理方法及び情報処理プログラムに関する。
【背景技術】
【０００２】
従来、コンピュータなどの端末装置のインタフェースとしては、入力装置としてキーボードやマウス、表示装置としてＣＲＴ（cathode-ray tube）やＬＣＤ(liquid crystal display)を具備することが一般的である。
【０００３】
又、表示装置と入力装置とを積層したいわゆるタッチパネルも、各種端末装置のインタフェースや、タブレット型の携行用小型計算機にも用いられ、利用が広がっている。
【０００４】
更に、携帯電話やＰＤＡ(Personal Digital Assistant)などのように文字入力のために利用できる装置表面の面積が小さい場合でも、簡単に文字を入力することができるタッチパネルに関する技術が開示されている（例えば、特許文献１参照）。
【特許文献１】特開２００３−１９６００７号公報（段落番号「００３７」、図２）
【発明の開示】
【発明が解決しようとする課題】
【０００５】
しかしながら、従来のタッチパネル上に、指先やペン状指示棒などの物体を接触させた場合、掌の大きさや視野角度には個人差があるため、タッチパネルに表示された画像の適切な個所に接触していないことがある。
【０００６】
このような技術的課題を解決するためになされた本発明の目的は、入力装置に対する物体の接触位置を適切にし得る入力装置、コンピュータ装置、情報処理方法及び情報処理プログラムを提供することである。
【課題を解決するための手段】
【０００７】
本発明の実施の形態に係る特徴は、入力装置において、入力位置を認識させるための画像を表示する表示装置と、表示装置の表示面に沿って設けられた接触検出面に接触する物体の位置を検出する接触位置検出部と、接触位置検出部によって検出された位置と入力位置を認識させるための画像の中心位置との差を表すデータを記録する記録部と、記録部に記録されるデータに基づいて、表示装置に表示する入力位置を認識させるための画像の修正量を求める演算部とを備えることである。
【０００８】
また本発明の実施の形態に係る特徴は、コンピュータ装置において、入力位置を認識させるための画像を表示する表示装置と、表示装置の表示面に沿って設けられた接触検出面に接触する物体の位置を検出する接触位置検出部と、接触位置検出部によって検出された位置と入力位置を認識させるための画像の中心位置との差を表すデータを記録する記録部と、記録部に記録されるデータに基づいて、表示装置に表示する入力位置を認識させるための画像の修正量を求める演算部と、接触位置検出部によって検出された物体の接触位置に基づいて、物体の接触結果に応じた処理を実行する処理部とを備えることである。
【０００９】
また本発明の実施の形態に係る特徴は、コンピュータ装置において、入力位置を認識させるための画像を表示する表示装置の表示面に沿って設けられた接触検出面に接触する物体の接触位置と入力位置を認識させるための画像の中心位置との差を表すデータを記録する記録部と、記録部に記録されるデータに基づいて、表示装置に表示する入力位置を認識させるための画像の修正量を求める演算部と、物体の接触位置に基づいて、物体の接触結果に応じた処理を実行する処理部とを備えることである。
【００１０】
また本発明の実施の形態に係る特徴は、情報処理方法において、入力位置を認識させるための画像を表示装置に表示するステップと、表示装置に重ねて配置された接触検出面に接触する物体の位置を検出するステップと、検出された位置と入力位置を認識させるための画像の中心位置との差を表すデータを記録するステップと、記録したデータから入力位置を認識させるための画像の修正量を求めるステップと、修正結果に基づく画像を表示装置に表示するステップとを含むことである。
【００１１】
また本発明の実施の形態に係る特徴は、情報処理プログラムにおいて、入力位置を認識させるための画像を表示する表示装置が設けられた入力装置に、表示装置に重ねて配置された接触検出面に接触する物体の位置を検出する手順と、検出した位置と入力位置を認識させるための画像の中心位置との差を表すデータを記録する手順と、記録されるデータから入力位置を認識させるための画像の修正量を求める手順と、修正結果に基づく画像を表示装置に表示する手順とを実行させることである。
【発明の効果】
【００１２】
本発明によると、入力装置に対する物体の接触位置を適切にし得る入力装置、コンピュータ装置、情報処理方法及び情報処理プログラムを提供することができる。
【発明を実施するための最良の形態】
【００１３】
次に、図面を参照して、本発明の実施の形態を説明する。以下の図面の記載において、同一又は類似の部分には、同一又は類似の符号を付している。ただし、図面は模式的なものであり、各寸法の比率等は現実のものとは異なることに留意すべきである。従って、具体的な寸法等は以下の説明を参酌して判断すべきものである。又、図面相互間においても互いの寸法の関係や比率が異なる部分が含まれていることは勿論である。
【００１４】
[第１の実施の形態]
本発明の実施の形態に係る入力装置は、コンピュータ等の端末装置の入出力デバイスの一種である。
【００１５】
図１に示すように、本実施の形態に係る入力装置を備えるノート型コンピュータ１は、中央処理ユニット等の演算部を有するコンピュータ本体３０とこのコンピュータ本体３０に対するユーザインターフェイスである入力部３とが設けられた下筐体２Ａと、ＬＣＤ構成の表示装置２９を含む表示部４が設けられた上筐体２Ｂとを備えている。
【００１６】
コンピュータ本体３０は、下筐体２Ａの入力部３を介して入力された情報を中央処理ユニットにおいて処理し、その結果を上筐体２Ｂの表示部４に表示する。
【００１７】
下筐体２Ａに設けられた入力部３は、ＬＣＤによって構成された表示装置５と、この表示装置５の表示面における物体（指先、ペン状指示棒の先端部等）の接触を検出するための接触検出部とを備え、表示装置５にユーザに入力位置を認識させるための画像（例えばキーボードの各キー、各種入力操作キー、右ボタンや左ボタンやスクロール用ホイールやボディを備えるマウス等、ユーザが操作する入力装置を表す画像）が表示される。図１は、キーボードを表す画像（仮想キーボード５ａ）、マウスを表す画像（仮想マウス５ｂ）が表示された状態を示している。
【００１８】
（入力装置の構成）
図２に示すように、入力部３は、発光領域を備えたバックライト装置６と、このバックライト装置６の発光領域上に積層される表示装置５と、この表示装置５の表示画面上に積層されるタッチパネル１０とを備えている。
【００１９】
バックライト装置６は、近年のノート型パソコンなどの表示装置に一般的に採用されている蛍光管と導光板を組み合わせた構成としても良く、又、最近実用化が進んでいる白色ＬＥＤ（発光ダイオード）を平面上に複数分散配置した構成としても良い。
【００２０】
なお、この表示装置５とバックライト装置６の構成は、従来のノート型コンピュータのディスプレイや、デスクトップ型コンピュータ用の外部ＬＣＤディスプレイに採用されている表示装置と同様の構成でも構わないが、表示装置５に、実用化が進んでいる自発光式の画素を採用すれば、表示装置５が透過性を有する必要は無く、バックライト装置６を省略することも可能である。
【００２１】
表示装置５は、ｘ方向及びｙ方向に格子状に複数の画素５ｃが配列されて表示画面を構成しており、後述するディスプレイドライバ２２（図６）によって駆動され、その表示画面にキーボード等の入力装置の画像が表示される。
【００２２】
タッチパネル１０は、入力部３の最も表層部に設けられ、下筐体２Ａの入力操作面として筐体から露出するように設けられている。このタッチパネル１０は、その接触検出面１０ａにおいて、物体（例えば、指先やペン状指示棒の先端部等）の接触を検出する。
【００２３】
本実施の形態においては、タッチパネル１０として、抵抗膜方式のものが用いられる。この抵抗膜方式のタッチパネルは、アナログ方式のものとデジタル方式のものがある。アナログ方式のタッチパネルは、４〜８線式など複数の種類があるが、基本的には、並行電極を設け、接触した部位の電位を検出することでその座標を取り出すものである。これをＸ方向及びＹ方向のそれぞれについて独立に構成し積層することで、接触した部位のＸ、Ｙ座標を検出することができる。しかしながら、アナログ方式では、多点同時押しの検出は困難であり、接触面積の検出には不向きである。本実施の形態においては、接触位置に加えて接触面積を検出するため、デジタル方式を用いる。なお、いずれの方式を利用する場合でも、接触検出面１０ａが光透過性を有することにより、表示装置５を表層側から視認することができる。
【００２４】
図３及び図４に示すように、タッチパネル１０においては、Ｘ方向に一定の間隔で配置された帯線状の複数（ｎ本）の透明電極でなるＸ電極１２を有するベース１１と、Ｙ方向に一定の間隔で配置された帯線状の複数（ｍ本）の透明電極でなるＹ電極１４を有するベース１３とがそれぞれの電極形成面を対向させるように積層される。この積層構造において、Ｘ電極１２とＹ電極１４とが直交するように積層される。これにより、Ｘ電極１２とＹ電極１４とが交差するｎ×ｍ個の接触検出部１０ｂがマトリクス状に形成される。
【００２５】
またベース１１においては、Ｘ電極１２が設けられた側の面に、各Ｘ電極１２間に一定間隔で絶縁材でなる凸形状のドットスペーサ１５が設けられている。このドットスペーサ１５の高さは、Ｘ電極１２及びＹ電極１４の厚みを合計した厚みよりも大きく形成されており、その先端部は、各Ｙ電極１４間において露出したベース１３の表面１３Ａに当接する。これにより図５に示すように、ベース１１、１３が積層された構成において、ドットスペーサ１５は、ベース１１、１３に挟まれ、Ｘ電極１２とＹ電極１４とは接触しない状態となる。すなわち、ドットスペーサ１５によってＸ電極１２とＹ電極１４とが離間して保持される。このようにＸ電極１２とＹ電極１４とが離間して保持された状態において、ベース１３を撓ませることにより、Ｘ電極１２とＹ電極１４とを接触させることができる。
【００２６】
すなわち、タッチパネル１０においては、ベース１３のＹ電極１４が設けられた面とは反対側の面１３Ｂを入力操作面として筐体外部に露出するように構成されており、この面を指先またはペン状指示棒の先端部等で押圧することにより、ベース１３を撓ませて、Ｙ電極１４をＸ電極１２に接触させることができる。
【００２７】
この場合、タッチパネル１０の入力操作面を指先またはペン状指示棒の先端部等で押圧すると、その圧力が一定圧以下の場合は、ベース１３の撓みが不足し、Ｙ電極１４とＸ電極１２とが接触しない。そして、押圧力が一定圧を超えると、ベース１３が十分に撓むことにより、Ｙ電極１４とＸ電極１２とが接触する。これにより、一定の押圧力よりも大きな押圧力でベース１３を押圧した場合にのみＹ電極１４とＸ電極１２とが接触して電気的に導通する。
【００２８】
本実施の形態のノート型コンピュータ１においては、かかる構成の入力部３におけるＹ電極１４とＸ電極１２との接触位置を接触検出装置２１（図６参照）において検出するようになされている。
【００２９】
すなわち、ノート型コンピュータ１においては、図１に示す入力部３と、この入力部３に設けられたタッチパネル１０のＸ電極１２とＹ電極１４との接触位置を検出する接触検出装置２１とを含む入力装置２０（図６参照）が下筐体２Ａに設けられている。
【００３０】
この入力装置２０は、図２及び図６に示すように、入力部３と、この入力部３のタッチパネル１０における指先等の接触位置を検出すると共に、タッチパネル１０に接触した物体の形状を認識する接触検出装置２１と、接触検出装置２１において検出された接触位置情報をデジタル信号に変換すると共に後述する各種処理やコンピュータ本体３０（図７参照）との通信に係るＩ/Ｏ制御を行うデバイス制御ＩＣ２３と、入力装置２０における各種処理プログラムやデータを格納するメモリ２４と、音声により各種通知やビープ音による警告を行うスピーカドライバ２５及びスピーカ２６とを備えている。
【００３１】
接触検出装置２１は、各Ｘ電極１２（図３）に対して順次電圧を印加すると共に、各Ｙ電極１４（図３）の電圧を測定しながら、Ｘ電極１２に印加した電圧が出力されるＹ電極１４を特定するようになされている。
【００３２】
すなわち図６に示すように、タッチパネル１０においては、電源部とこの電源部の基準電圧を各Ｘ電極１２に対して選択的に印加するスイッチ部とを備えた電圧印加部１１ａが設けられている。この電圧印加部１１ａは、接触検出装置２１から供給される印加電極選択信号に基づいて、基準電圧の印加先のＸ電極１２をスイッチ部により順次選択して基準電圧をそのＸ電極１２に印加するようになされている。
【００３３】
また、タッチパネル１０においては、接触検出装置２１からの測定電極選択信号によって指定されたＹ電極１４の電圧値を選択的に測定する電圧測定部１１ｂが設けられている。この電圧測定部１１ｂは、各Ｙ電極１４に表れる電圧値を、接触検出装置２１から供給される測定電極選択信号に基づいて順次選択的に測定し、この測定結果を接触検出装置２１に送出する。
【００３４】
これらにより、タッチパネル１０を指先やペン状指示棒の先端部で押圧すると、その押圧位置においてＸ電極１２とＹ電極１４とが接触することにより導通状態となり、Ｘ電極１２に印加された基準電圧がこの押圧位置で接触したＹ電極１４を介して測定される。従って、接触検出装置２１においては、Ｙ電極１４の出力電圧として基準電圧が測定された場合、そのＹ電極１４と、その基準電圧が印加されたＸ電極１２とを特定することができる。接触検出装置２１は、このＸ電極１２とＹ電極１４との組み合わせにより、指先またはペン状指示棒の先端部によって押圧された接触検出部１０ｂを特定することができる。
【００３５】
接触検出装置２１は、Ｘ電極１２とＹ電極１４との接触状態を十分に高速で繰り返し検出することにより、Ｘ電極１２の配列間隔及びＹ電極１４の配列間隔の精度で多点同時押しを検出することができる。
【００３６】
例えば、指先がタッチパネル１０を強く押した場合には、接触面積が大きくなり、複数の接触検出部１０ｂが同時に押される状態となるが、この場合においても、接触検出装置２１は、各Ｘ電極１２へ基準電圧の印加を高速で順次繰り返し行い、また各Ｙ電極１４における電圧測定を高速で順次繰り返し行うことにより、同時に押されている接触検出部１０ｂを検出することができる。接触検出装置２１は、このようにして検出した接触検出部１０ｂの数に基づいて、接触面積を検出することができる。
【００３７】
ここで、ディスプレイドライバ２２は、デバイス制御ＩＣ２３からの命令に従って、ボタン、アイコン、キーボード、テンキー、マウスなどコンピュータにおけるユーザインターフェイスとしての入力装置を表す画像（入力位置を認識させるための画像）の１以上を表示する。バックライト装置６において発光した光がＬＣＤの背面側から前面側に透過することにより、表示装置５に表示された入力装置の画像は、前面側から目視することができる。
【００３８】
デバイス制御ＩＣ２３は、表示装置５に表示されるキーボード等の画像における各キーの表示位置と、接触検出装置２１において検出された接触位置、接触面積とに基づいて、接触した位置に表示されているキーの画像を判別する。そして、この判別したキーの情報を、コンピュータ本体３０に通知する。
【００３９】
コンピュータ本体３０では、デバイス制御ＩＣ２３から供給されたキーの情報に基づいて、そのキーが操作された場合の処理を実行する。
【００４０】
すなわち、図７に示すように、下筐体２Ａに設けられたコンピュータ本体３０であるマザーボード３０ａは、ノースブリッジ３１とサウスブリッジ３２とが高速専用バスＢ１によって接続されており、ノースブリッジ３１には、システムバスＢ２を介してＣＰＵ（Central Processing Unit）３３が接続され、メモリバスＢ３を介してメインメモリ３４が接続され、ＡＧＰ（Accelerated Graphics Port）バスＢ４を介してグラフィックス回路３５が接続されている。
【００４１】
グラフィックス回路３５は、上筐体２Ｂの表示部４に設けられたディスプレイドライバ２８にデジタル画像信号を出力する。ディススプレイドライバ２８は、デジタル画像信号に基づいて表示装置２９を駆動することにより、表示装置２９の表示画面（ＬＣＤ）に画像を表示させる。
【００４２】
またサウスブリッジ３２には、ＰＣＩ（Peripheral Component Interconnect）バスＢ５を介してＰＣＩデバイス３７が接続され、ＵＳＢ（Universal Serial Bus）Ｂ６を介してＵＳＢデバイス３８が接続されている。サウスブリッジ３２は、ＰＣＩデバイス３７を介して、ＰＣＩバスＢ５に接続可能な各種の機器を接続することができ、またＵＳＢバスＢ６を介して、ＵＳＢバスＢ６に接続可能な各種の機器を接続することができる。
【００４３】
またサウスブリッジ３２には、ＡＴＡ（AT Attachment）バスＢ７とＩＤＥ（Integrated Drive Electronics）インタフェース３９とを介して、ハードディスク装置（ＨＤＤ）４１が接続されている。さらにサウスブリッジ３２には、ＬＰＣ(Low Pin Count)バスＢ８を介して、リムーバブルメディア装置（磁気ディスク装置）４４、シリアル/パラレルポート４５及びキーボード/マウスポート４６が接続されている。キーボード/マウスポート４６は、入力装置２０から出力されるキーボード、マウスの操作結果を表す信号をサウスブリッジ３２に受け渡す。これによりキーボード、マウスの操作結果は、サウスブリッジ３２からノースブリッジ３１を介してＣＰＵ３３に受け渡され、ＣＰＵ３３において操作結果に応じた処理を実行するようになされている。
【００４４】
さらにサウスブリッジ３２には、専用バスを介してオーディオ信号出力回路４７が接続され、このオーディオ信号出力回路４７からコンピュータ本体３０に内蔵されたスピーカ４８に対してオーディオ信号を出力することにより、スピーカ４８から種々の音声を出力することができる。
【００４５】
ＣＰＵ３３は、ハードディスク装置４１やメインメモリ３４に格納されている各種処理プログラムを実行することにより、上筐体２Ｂの表示部４に設けられた表示装置２９や下筐体２Ａに設けられた表示装置５（図６参照）に画像を表示し、下筐体２Ａのコンピュータ本体３０に内蔵されたスピーカ４８から音声を出力し、また下筐体２Ａの入力部３に設けられた入力装置２０（図６参照）から出力されるキーボード、マウスの操作結果を表す信号に応じた処理を実行する。具体的には、ＣＰＵ３３は、操作結果に応じてグラフィックス回路３５を制御することにより、グラフィックス回路３５から表示装置５に対してデジタル画像信号を出力させ、操作結果に応じた画像を表示装置５に表示させる。またＣＰＵ３３は、操作結果に応じてオーディオ信号出力回路４７を制御することにより、オーディオ信号出力回路４７からスピーカ４８に対してオーディオ信号を出力させ、スピーカ４８から操作結果に応じた音声を出力させる。このように、ＣＰＵ３３（処理部）は、入力装置２０（図６参照）から出力されるキーボード、マウスの操作結果に基づく種々の処理を実行するようになされている。
【００４６】
次に、図６に示すように、入力装置２０において、タッチパネル１０の接触検出面１０ａに指先、ペン状指示棒の先端部等の物体が接触した際の接触状態を検出する処理について説明する。
【００４７】
接触検出装置２１（接触位置検出部）は、表示装置５に積層されたタッチパネル１０の接触検出面１０ａに接触する物体の位置を所定の処理時間間隔毎に検出してデバイス制御ＩＣ２３に出力する。
【００４８】
また、接触検出装置２１（接触強度検出部）は、物体が接触検出面１０ａに接触するときの強度を検出する。この強度は、二もしくは三以上の離散的な値で表現されても良く、連続的な値で表現されても良い。そして、接触検出装置２１は、強度情報を所定の処理時間間隔毎にデバイス制御ＩＣ２３へ出力する。
【００４９】
強度は、例えば、接触検出面１０ａに対する物体の接触面積、又は接触面積の時間変化を利用することによって検出される。図８及び図９に、検出された接触面積の推移の例を示す。図８及び図９は、軸を無次元化してあり単位や目盛りを省略しているが、実装時には真値を用いても良い。
【００５０】
ここで、接触面積の推移は、例えば、所定のスキャン周波数で、タッチパネル１０上の接触が検出された接触検出部１０ｂを周期的に取得することにより算出する。周波数が高いほど、一定時間に取得する信号群の取得回数が多いことを意味し、時間方向の分解能は当然向上するが、その分デバイス側の反応速度や処理回路の性能も高いことが要求されるため、適切なスキャン周波数に設定する。
【００５１】
図８は、接触検出面１０ａに物体を接触させているだけの状態の、接触面積Ａの推移の一例である。ユーザが打鍵を意識せず、接触検出面１０ａ上に指を置いているだけの状態では、このように、比較的なだらかな面積の推移を示すことが多い。
【００５２】
一方、図９は、入力部３の表示装置５に表示されたキーボード等の入力装置の画像を目標にタッチパネル１０に対して打鍵を行う状態の、接触面積Ａの推移の一例である。接触面積は、ゼロもしくはゼロ近傍から急峻に増大し、かつ直後に急峻に減少するという特徴を持つ。
【００５３】
このように、図８の場合が物体を漫然と「置く」という状態に近いとすると、図９の場合は、「叩く」という動作に近いと説明できる。
【００５４】
また、強度は、接触検出面１０ａに対する物体の接触圧力、又は接触圧力の時間変化を利用することによって検出されてもよい。この場合、圧力を電気信号に変換するセンサを接触検出面１０ａとして設けるようにすればよい。
【００５５】
図１０〜図１２に、圧力を電気信号に変換するセンサの例としてのタッチパネル２１０を示す。
【００５６】
図１０及び図１１に示すように、タッチパネル２１０においては、Ｘ方向に一定の間隔で配置された帯線状の複数（ｎ本）の透明電極でなるＸ電極２１２を有するベース２１１と、Ｙ方向に一定の間隔で配置された帯線状の複数（ｍ本）の透明電極でなるＹ電極２１４を有するベース２１３とがそれぞれの電極形成面を対向させるように積層される。この積層構造において、Ｘ電極２１２とＹ電極２１４とが直交するように積層される。これにより、Ｘ電極２１２とＹ電極２１４とが交差するｎ×ｍ個の接触検出部２１０ｂ〜２１０ｄがマトリクス状に形成される。
【００５７】
またベース２１１においては、Ｘ電極２１２が設けられた側の面に、各Ｘ電極２１２間に一定間隔で絶縁材でなる凸形状のドットスペーサ２１５が設けられている。このドットスペーサ２１５の高さは、Ｘ電極２１２及びＹ電極２１４の厚みを合計した厚みよりも大きく形成されており、その先端部は、各Ｙ電極２１４間において露出したベース２１３の表面に当接する。
【００５８】
さらに、ドットスペーサ２１５として高いドットスペーサ２１５ａ（図１１では”Ｈ”と表示される）と低いドットスペーサ２１５ｂ（図１１では”Ｌ”と表示される）が設けられている。図１０に示すように、ドットスペーサ２１５においては、４つの高いドットスペーサ２１５ａがひとつの組を構成し、４つの低いドットスペーサ２１５ｂがひとつの組を構成している。また図１１に示すように、これら４つの高いドットスペーサ２１５ａの組と４つの低いドットスペーサ２１５ｂの組が千鳥格子上に配列されている。なお、それぞれ高いドットスペーサ２１５ａの組を構成するドットスペーサ２１５ａの数、低いドットスペーサ２１５ｂの組を構成するドットスペーサ２１５ｂの数は任意に設定できる。
【００５９】
これにより図１２に示すように、ドットスペーサ２１５は、ベース２１１、２１３に挟まれ、Ｘ電極２１２とＹ電極２１４とは接触しない状態となる。すなわち、ドットスペーサ２１５によってＸ電極２１２とＹ電極２１４とが離間して保持され、接触検出部２１０ｂ〜２１０ｄは電気的に閉に保持される。
【００６０】
このようにＸ電極２１２とＹ電極２１４とが離間して保持された状態において、ベース２１３を撓ませることにより、Ｘ電極２１２とＹ電極２１４とを開にすることができる。
【００６１】
すなわち、タッチパネル２１０においては、ベース２１３のＹ電極２１４が設けられた面２１３Ａ（図１０参照）とは反対側の面２１３Ｂ（図１０参照）を入力操作面として筐体外部に露出するように構成されており、この面を指先等で押圧することにより、ベース２１３を撓ませて、Ｙ電極２１４をＸ電極２１２に接触させることができる。
【００６２】
この場合、タッチパネル２１０の入力操作面を指先等で押圧すると、その圧力が第１の押圧力以下の場合は、ベース２１３の撓みが不足し、Ｙ電極２１４とＸ電極２１２とが接触しない。
【００６３】
そして、押圧力が第１の押圧力を超えると、ベース２１３が十分に撓むことにより、複数の接触検出部のうち周囲４箇所に低いドットスペーサ２１５ｂが隣接（図１０に示すように、４つのスペーサが正方形状に配置された場所、正方形の辺を挟んで隣り合うとき隣接と呼ぶ）する接触検出部２１０ｂが開になる。しかし、複数の接触検出部のうち、周囲２箇所以上に高いドットスペーサ２１５ａが隣接する接触検出部２１０ｃと２１０ｄは閉のままである。
【００６４】
さらに、押圧力が第1の押圧力よりも大きい第２の押圧力を超えると、ベース２１３がさらに撓むことにより、複数の接触検出部のうち周囲２箇所に低いドットスペーサ２１５ｂが隣接する接触検出部２１０ｃが電気的に開になる。しかし、複数の接触検出部のうち周囲４箇所に高いドットスペーサ２１５ａが隣接する接触検出部２１０ｄはまだ閉のままである。
【００６５】
さらに、押圧力が第２の押圧力よりも大きい第３の押圧力を超えると、ベース２１３がさらに撓むことにより、複数の接触検出部のうち周囲４箇所に高いドットスペーサ２１５ａが隣接する接触検出部２１０ｄも開になる。
【００６６】
これら３種類の接触検出部２１０ｂ〜２１０ｄが、指先等で押圧される面積の領域の中に存在するので、接触位置を検出し得てさらに押圧力を３段階の電気信号に変換するセンサとして動作する。
【００６７】
このようなタッチパネル２１０を有する本実施の形態のノート型コンピュータ１においては、接触検出装置２１が、複数の接触検出部のうちどれが開になっているかを検出する。
【００６８】
接触検出装置２１は例えば、隣接しあっている開の接触検出部の一群の中央に位置する接触検出部がある位置を、接触検出面１０ａの押圧された位置として検出する。
【００６９】
また接触検出装置２１は例えば、接触検出部２１０ｂ〜２１０ｄのそれぞれに１〜３のランクを定義付けており、１〜３の分布や密度を検出することで押圧力を検知する。接触検出装置２１の接触面積および圧力分布の検出方法は以下の通りである。
【００７０】
図１３は低いドットスペーサ２１５ｂおよび高いドットスペーサ２１５ａの配置図である。図１１で示した低いドットスペーサ２１５ｂと高いドットスペーサ２１５ａの配置の場合、接触検出部２１０ｂ〜２１０ｄはそれぞれ４つのドットスペーサに囲まれている。このうち、高いドットスペーサ２１５ａのしめる個数を数字で表し、接触検出部２１０ｂ〜２１０ｄの対応部に記したのが図１３である。
【００７１】
図１４内に示す楕円は、指が接触した部分の領域である。これを外円と呼ぶ事にする。
【００７２】
この時の接触領域内の面圧（すなわち、単位面積当たりの押圧力）が、数字「０」で示す接触検出部を接触するだけの大きさしかなかった場合、接触検出装置２１は図１４内に示す楕円の内側に位置する数字「０」で示される接触検出部（図１１に示した接触検出部２１０ｂ）しか接触として出力しない。
【００７３】
しかし、同じ接触面積でも、図１４の場合より、より強い押圧力が働いたとすると、接触検出装置２１は図１５内の外円の内側にあるもう一つの楕円（これを中円と呼ぶ事にする）の内側に存在する数字「２」によって示される接触検出部（図１１に示した接触検出部２１０ｃ）も、接触として検知するようになる。
【００７４】
なお、押圧力が強い場合、実際には、本実施例の動作原理でも記述したように、外円の面積も大きくなる。しかしここでは説明のため外円の大きさは一定と仮定する。
【００７５】
また、実際には、外円も中円も、図１５に示すように面圧分布が正確に楕円状に区分される事は無く、実際には図１６に示す様に、外円の外にも接触と検出される接触検出部があったり、逆に中円の内側でも接触と検出されない「２」や「０」の接触検出部があったりと、各境界で入り交じることが多い。それらの例外は、図１６においてイタリック体の数字によって示している。しかし、接触検出装置２１では、その様な入り交じる誤差が最も少なくなるように、境界線として外円や中円、さらには後述する内円の大きさや位置、形状を決定する。この際、接触検出装置２１では、その境界線を、あまり複雑な形状で自由度を持たせるのではなく、曲率半径を適切に設定する事により、適度に滑らかで、それでいて誤差も少ない境界線形状を決定する。この曲率半径の設定は、経験や実験による機械学習アルゴリズムなどにより適切に設定する。その際の目的関数は、打鍵時の上記外円、中円、内円に囲まれる面積やその時間変化率による打鍵識別誤差率であり、これが最少になる様に最小の曲率半径を決定する。
【００７６】
ここで説明した境界線の決定方法は、前述や後述の図１４、図１５、図１７、図１８でも適用されるものとする。
【００７７】
さて図１５の説明に続いて、図１７の説明に移る。図１７は、図１５よりもさらに強い押圧力が作用している場合である。ここでは中円の内側にさらに内円で示される領域が発現する。この領域では、数字「０」、「２」、「４」で示される接触検出部（図１１に示した接触検出部２１０ｂ、２１０ｃ、２１０ｄ）の全てで接触と判定されている。
【００７８】
続いて、図１８では、中円、内円で示される領域が拡大している。これは、図１７よりもさらに強い押圧力が作用していることを示している。
【００７９】
以上、説明した様に、図１４、図１５、図１７、図１８に示した様に、各円の面積の時間推移や、各円同士の面積比率の時間推移を検出することにより、指などの接触が、単なる接触状態か、打鍵を意図したものであるのかを、誤診断少なく検出する事ができる様になる。例えば上記のような、圧力を電気信号に変換するセンサを用いて、接触検出面１０ａに対する物体の接触圧力、又は接触圧力の時間変化から強度を検出する場合の圧力推移のグラフは、図８及び図９の両グラフにおいて、縦軸を接触圧力に置き換えれば、「置く」と「叩く」でそれぞれほぼ同様の傾向が見られる。
【００８０】
図６に示すデバイス制御ＩＣ２３（判断部）は、接触検出装置２１によって検出された強度を受信し、強度に関する特徴量を抽出し、当該特徴量あるいは当該特徴量から計算された値と予め設定された閾値とを比較することにより、物体の接触状態を判断する。物体の接触状態としては、例えば、「非接触」、「接触」、「打鍵」の３パターンが挙げられる。「非接触」は表示装置５に表示された画像に物体が接触していない状態であり、「接触」は、表示装置５に表示された画像に物体が置かれている状態であり、「打鍵」は、表示装置５に表示された画像を物体が叩いている状態である。このような接触状態の判断方法については、図２２及び図２３を用いて後に詳述する。
【００８１】
接触状態を判断する閾値は調整可能である。例えば、図１９に示すように、入力装置２０のデバイス制御ＩＣ２３は、表示装置５に「弱」ボタン２０ｂと「強」ボタン２０ｃと閾値の大小を表すレベルメータ２０ａとを表示する。このレベルメータ２０ａが「接触」状態と「打鍵」状態との閾値を設定しているとする。ユーザが打鍵を意識して画像をした押下したにも関わらず、打鍵として認識しないことが多い場合、「弱」ボタン２０ｂの表示領域を押下する。デバイス制御ＩＣ２３は、「弱」ボタン２０ｂの表示位置と、接触検出装置２１において検出された接触位置とに基づいて、「弱」ボタン２０ｂが押下されたか否かを判断し、押下されたと判断した場合には、ディスプレイドライバ２２を制御して、表示装置５に表示されているレベルメータ２０ａの表示位置を左側に移動させ、閾値を下げる。尚、画像は実際には「押下」されている（押し下げられている）わけではなく、画面の表面に圧力がかかるだけであるが、ここでは説明の便宜上、ユーザが打鍵を意識して画面に接触することを「押下」とする。又、レベルメータ２０ａに表示されているスライダ表示部２０ｄをドラッグすることで、直接レベルメータ２０ａを変更してもよい。
【００８２】
また、デバイス制御ＩＣ２３（通知部）は、例えば、キーボードやマウス等の入力装置における操作結果に基づいた処理を行うコンピュータ本体３０のマザーボード３０ａ（図７）に対して、接触検出装置２１から受信した、物体の接触位置やこの位置に基づいて検出された接触状態を表す情報を通知する。例えば、「打鍵」状態のキー位置や「接触」状態のキー位置を端末装置へ通知する。
【００８３】
又、デバイス制御ＩＣ２３（演算部）は、接触位置と入力装置を表す画像の中心位置との差を表すベクトルデータから、表示装置に表示する入力装置の画像の位置、寸法もしくは形状の修正量を求める。又、デバイス制御ＩＣ２３（演算部）は、次に物体が接触した場合、ユーザ情報に基づき、表示装置に表示する入力装置の画像の位置、寸法もしくは形状の修正量を求める。ここで、「ユーザ情報（物体識別情報）」とは、ユーザの掌の大きさなど、ユーザを識別可能な情報を指す。このユーザ情報は、メモリ２４（図４５〜図４７に後述するように、入力装置が外付けの場合は、入力装置が接続されるコンピュータ本体の記録部）に記録される。
【００８４】
又、デバイス制御ＩＣ２３（演算部）は、入力装置を表す画像がキーボードの場合、あらかじめ設定された文字数Ｎの文字列Ｓの入力により、キーボート上の座標セットＵをＮ個得る。この得られたＮ個のキーボード上の座標セットＵと、現在のキーボード配列で文字列Ｓを表現するときの中心座標のセットＣに、２次元の座標変換Ｔを施した後の座標セットＣ’との距離の誤差の総和が最小になる前記座標変換Ｔを決定し、該決定した座標変換Ｔによるキーボード配列Ｃ’を新たなキーボード配列として用いることができる。このキーボード配列変更処理については、後に詳述する。
【００８５】
又、デバイス制御ＩＣ２３（演算部）は、キー情報に基づき、表示されたキー配列の変更、もしくは、キーの位置、形状、角度の微調整を行う。このとき、デバイス制御ＩＣ２３（演算部）は、微調整を行う時間間隔を一定以上設ける。
【００８６】
又、デバイス制御ＩＣ２３（演算部）は、物体が接触した場合、前回、物体が接触した際に使用され、メモリ２４に記録された入力装置を表す画像を表示する。
【００８７】
又、デバイス制御ＩＣ２３（集計部）は、入力装置を表す画像がキーボードの場合、ベクトルデータによって、物体がキーの中心位置に接触したかを示す中心ヒット率、あるいは所望のキーに接触したかを示すキーヒット率を集計する。
【００８８】
又、デバイス制御ＩＣ２３（補正部）は、物体がタッチパネル１０の接触検出面１０ａに対して垂直方向に接触した場合と、物体が接触検知面１０ａに対して実際の使用状況において接触した場合と、入力装置を表す画像の表示位置の位置合わせを行う。又、デバイス制御ＩＣ２３（補正部）は、物体が使用状況において接触した場合、接触位置と入力画像の基準位置との差を利用して位置合わせを行う。
【００８９】
図６に示すデバイス制御ＩＣ２３（表示制御部）は、接触検出面１０ａにおける物体の接触状態に応じて、表示装置５に表示された画像の表示形態を変更する。接触状態は、上述したように例えば、「非接触」、「接触」、「打鍵」の３パターンが挙げられる。デバイス制御ＩＣ２３は、このような接触状態に応じて、それぞれ画像の明度、色、形状、輪郭線のパターンや太さ、点滅／点灯、点滅間隔などを変更して表示する。
【００９０】
例えば、表示装置５に仮想キーボードが表示され、ユーザが入力操作を行うことを想定する。図２０に示すように、ユーザが入力操作の準備位置であるいわゆるホームポジションに指を置いている場合、「Ｓ」、「Ｄ」、「Ｆ」、「Ｊ」、「Ｋ」、「Ｌ」のキーは指が「接触」している状態であり、デバイス制御ＩＣ２３は、この「接触」状態に応じて、これらのキーを表す画像を例えば黄色に点灯させる。その他のキーは「非接触」の状態であり、デバイス制御ＩＣ２３は、これらのキーを表す画像を例えば青色に点灯させる。そして、図２１に示すように、「Ｏ」のキーが押下された場合、「Ｏ」のキーは指が「打鍵」している状態であり、デバイス制御ＩＣ２３は、このキーを表す画像を例えば赤色に点灯させ、また「Ｓ」、「Ｄ」、「Ｆ」、「Ｊ」のキーは指が「接触」している状態であり、デバイス制御ＩＣ２３は、これらのキーを表す画像を黄色に点灯させる。
【００９１】
このとき、「非接触」、「接触」、「打鍵」をすべて識別する必要がない場合は、ユーザが、表示形態を変更する接触状態を選択できるようにしてもよい。
【００９２】
又、デバイス制御ＩＣ２３（表示制御部）は、物体の輪郭を表示装置５に表示する。例えば、デバイス制御ＩＣ２３（表示制御部）は、図２０に示すように、ユーザの掌の輪郭（２点破線部分）を表示装置５に表示する。更に、デバイス制御ＩＣ２３（表示制御部）は、入力装置を表す画像として、物体の輪郭に沿ったマウスを表示する。
【００９３】
図６に示すデバイス制御ＩＣ２３（発音部）は、接触検出装置２１によって検出された物体の位置とキーボードやマウス等の入力装置の画像の位置との相対関係により判断した接触状態に応じて所定の認識音を決定し、この決定に基づいてスピーカドライバ２５を制御することにより、この認識音を、スピーカ２６から出力させる。例えば、表示装置５に仮想キーボードが表示され、ユーザがキーを叩くことを想定する。このとき、デバイス制御ＩＣ２３は、接触検出装置２１によって検出されたキー入力の位置と、表示装置５に表示されたキーの中心との相対位置を算出する。この相対位置の算出方法については、図２５〜２７を用いて後に詳述する。
【００９４】
そして、デバイス制御ＩＣ２３は、「打撃」の状態において、キー入力の位置と表示されたキーの中心との相対距離が所定の値より大きいと判断した場合、スピーカドライバ２５を制御して所定の認識音をスピーカ２６から出力させる。この認識音は、通常の「打撃」の状態において発する認識音とは異なる形態（異なる音色、時間、パターンなど）で表現されてもよい。
【００９５】
また、例えば、表示装置５に仮想キーボード５ａが表示され、ユーザが入力操作を行うことを想定する。ユーザは事前に、いわゆるホームポジションの指の位置を登録しておく。そして、ユーザが指を置いたときに、デバイス制御ＩＣ２３がホームポジション以外のキーに指が置かれている（「接触」状態）と判断した場合、ホームポジションに指が置かれている（「接触」状態）と判断した場合と異なる形態（異なる音色、時間、パターンなど）の認識音を発することも可能である。
【００９６】
また、発光装置２７（発光部）は、入力装置２０の表面に備えられ、デバイス制御ＩＣ２３の判断に従って、接触状態に応じて発光する。例えば、ユーザがホームポジションに指を置いたと判断した場合、デバイス制御ＩＣ２３は、発光装置２７を発光させる。
【００９７】
図６に示すメモリ２４（記録部）は、物体の接触位置、接触強度、そして接触位置と入力装置を表す画像の中心位置との差を表すベクトルデータを記録する。
【００９８】
又、メモリ２４（記録部）は、入力装置を表す画像がキーボードの場合、接触検出装置２１によって検出した位置とキーボードのキーの中心位置との差を表すベクトルデータを記録する。又、メモリ２４（記録部）は、入力取り消しキーの使用頻度、取り消されたキー、および取り消し直後に入力し直されたキーの種類を含むキー情報を記録する。
【００９９】
又、メモリ２４（記録部）は、物体に応じた前記入力装置を表す画像と、タッチパネル１０において認識したユーザ情報とを対応付けて記録する。
【０１００】
尚、メモリ２４は、ＲＡＭ（Random Access Memory）、フラッシュメモリ等の不揮発性メモリの他、ハードディスクやフレキシブルディスク等の磁気ディスク、コンパクトディスク等の光学ディスク、ＩＣチップ、カセットテープなどにより構成されてもよい。
【０１０１】
又、本実施の形態に係る入力装置２０は、インタフェースの状態（接触、キータッチ、手の位置、自動調整、認証した個人名など）を図、文字、記号、インジケータ点灯の内少なくとも一つの手段で表示する表示手段を備える。この表示手段は、表示装置５でも良く、これとは別の装置でも構わない。
【０１０２】
次に、各種プログラムの保持について説明する。本実施の形態に係る入力装置２０は、接触位置検出処理、接触強度検出処理、判断処理、自動調整処理、タイピング練習機能処理、打ち直しによる調整処理、マウス表示処理、視野角補正処理などを接触検出装置２１やデバイス制御ＩＣ２３に実行させるための情報処理プログラムをメモリ２４に格納する。このメモリ２４は、ＲＡＭ等で構成されており、入力装置２０においては、このメモリ２４にプログラムを格納するための、情報読み取り装置（図示せず）が設けられている。この情報読み取り装置としては、例えば、フレキシブルディスク等の磁気ディスク、光学ディスク、ＩＣチップ、若しくはカセットテープ等の記録媒体から情報を読み取る装置、又はネットワークからこれらのプログラムをダウンロードする装置等を用いることができる。記録媒体を用いる場合、プログラムの保存、運搬、販売などを容易に行うことができる。なお、メモリ２４に代えて、ハードディスク装置等の記憶装置を用いることもできる。
【０１０３】
（情報処理）
次に、第１の実施の形態に係る情報処理方法について図２２〜２７を用いて説明する。尚、以下において説明する情報処理方法は、メモリ２４などに格納された情報処理プログラムをデバイス制御ＩＣ２３等が実行することによって実現される。即ち、情報処理方法における各ステップは、情報処理プログラムによって実行できる各手順に対応する。
【０１０４】
また、ここでは、入力部３の表示装置５に表示される入力装置の画像として仮想キーボード５ａを想定し、ユーザは指で仮想キーボードのキー５ａに接触して入力操作を行う。
【０１０５】
まず図２２を用いて、図６を参照しながら、基本的な情報処理方法の流れを説明する。
【０１０６】
図２２のステップＳ１０１において、入力装置２０は、表示装置５に入力装置の画像（仮想キーボード５ａ）を表示する。そして、ステップＳ１０２において、タッチパネル１０の接触検出面１０ａにおける検出領域を取得し、ステップＳ１０３において、接触検出面１０ａに指が接触した領域があるか否かを判断する。接触領域がない場合、ステップＳ１０２へ戻り、接触領域がある場合、ステップＳ１０４へ進む。
【０１０７】
ステップＳ１０４において、入力装置２０は、接触検出面１０ａに接触する指の位置を検出し、ステップＳ１０５において、指が接触するときの強度を検出する。
【０１０８】
次に、ステップＳ１０６において、入力装置２０は、検出された強度に関する特徴量を抽出し、当該特徴量あるいは当該特徴量から計算された値と予め設定された閾値とを比較することにより、指先やペン状指示棒の先端部等の接触状態を判断する。接触状態には、例えば上述したように、「非接触」、「接触」、「打鍵」状態があるとする。例えば、図９に示すように、接触面積Ａが、直前までゼロもしくは非常に小さい値であったものが、急峻に立ち上がることを検出し、これを「打鍵」状態と判断する。具体的には、図８及び図９において、特徴量として接触面積を抽出し、この接触面積から面積速度もしくは面積加速度、即ち、それぞれΔA/ΔtもしくはΔ２A/Δt2で表される量の演算を行い、この数値が予め設定された閾値より大きいと「打鍵」状態であると認識する。
【０１０９】
尚、「打鍵」あるいは「接触」と認識する際の、ΔA/ΔtもしくはΔ２A/Δt2の閾値は、個人によって、もしくは使用中のアプリケーションによっても異なり、又、同一ユーザであっても、使用している間に徐々に変化してくることも考えられる。適当なタイミングでこれを学習しキャリブレーションすることにより、所定の固定値とするよりも識別精度が向上する。
【０１１０】
次に、ステップＳ１０７において、「打鍵」状態か否か判断する。「打鍵」状態でない場合はステップＳ１０２へ戻り、検出領域を取得する。一方、「打鍵」状態である場合は、ステップＳ１０８へ進み、入力装置２０は、コンピュータ本体３０へ、キーが「打鍵」されたことを通知する。また、「打鍵」状態である場合においても、次の接触状態を判断するため、ステップＳ１０２へ戻り、検出領域を取得する処理が並行して行われる。
【０１１１】
次に、ステップＳ１０９において、入力装置２０は、仮想キーボードのキー画像の表示形態を「打鍵」状態の表示形態へ変更する。具体的には、「打鍵」されたキーの明度、色、形状、輪郭線のパターンや太さ、点滅／点灯、点滅間隔などを「打鍵」状態の表示形態へ変更して表示する。又、入力装置２０は、「打鍵」状態のキー表示が行われてから、所定の時間が経過したか否か判断し、経過していない場合は表示を続行する。経過した場合はキー画像の表示形態を通常の表示に戻す。尚、ここでは、所定の時間の経過ではなく、点滅回数が所定の回数に達したか否かで判断してもよい。
【０１１２】
次に、ステップＳ１１０において、入力装置２０は、認識音を発生する。この処理については、図２５を用いて後に詳述する。
【０１１３】
そして、入力装置２０は、入力操作が終了するまで、ステップＳ１０２〜Ｓ１１０の処理を繰り返す（ステップＳ１１１）。
【０１１４】
ここで、ステップＳ１０６における接触状態の判断方法のその他の例について、図２３を用いて説明する。
【０１１５】
まずステップＳ１０６１において、多変量（特徴量）の抽出を行う。例えば、図９に示すグラフから、接触時の最大面積Amax、接触面積Ａを積分して求める過渡面積SA、最大面積に到達するまでに要した最大値到達時間（接触面積が最大値に到達するまでの時間）Tp、打鍵開始から終了までに要した打鍵総時間Teを特徴量として抽出する。そして、これらの特徴量に基づいて、立ち上がり傾きk＝Amax/Tpなどを計算する。
【０１１６】
尚、これらの定性的な物理的特性としては、最大面積Amaxは、指が太く、打鍵が強いほど大きく、過渡面積Saは、打鍵が強く、しっかりした打ち方のときほど大きく、最大値到達時間Tpは指が柔らかく、打鍵が強くゆっくりになるほど大きく、打鍵総時間Teは、打鍵速度が遅く、指が柔らかいほど大きく、立ち上がり傾きk＝Amax/Tpは、指が固く、打鍵速度が速く、打鍵が強いほど大きくなるという傾向がある。
【０１１７】
これらの特徴量を、ユーザ毎に、複数回数の打鍵から平均するなどして学習し、打鍵の判断に利用する。打鍵データの収集方法としては、一旦打鍵と判定したものが、ユーザにより取り消された場合は除外することにより、打鍵データのみを蓄積して行くことができるので、その蓄積したデータを解析して打鍵識別の閾値を決定することができる。
【０１１８】
これを全てのキーで共通して計測しても良いが、指毎やキー毎、もしくはキー群をいくつかのグループに分けて、計測することにより、より判断精度を高められる場合もある。
【０１１９】
この際、各変数を独立に閾値を決めて、いずれか一つ以上の所定の変数が閾値を上回ったか、といった論理・条件分岐を判定の拠り所としてもよいし、さらに高度な方法としては、各変数を多変量解析手法により打鍵識別する方法もある。
【０１２０】
多変量解析の一例としては、複数回数の打鍵を記録し、所定回数の多変量のセットから、例えばマハラノビス空間を学習し、次に、入力された打鍵をこのマハラノビス空間でマハラノビス距離を計算し（「The Mahalanobis-Taguchi System, ISBN0-07-136263-0, McGraw-Hill」等参照）、このマハラノビス距離が小さいほど「打鍵」であると判断するアルゴリズムとすることも、判断精度を向上させる一方法である。
【０１２１】
具体的には、図２３のステップＳ１０６２において、対象となる多変量データセットに対し、変数毎に平均値と標準偏差を計算し、元のデータをこの平均値と標準偏差でｚ変換（基準化、標準化ともいう）する。次に、変数間の相関係数を計算し相関行列を求める。ちなみにこの学習は、初期の所定打鍵データが収集できた時点で一度だけ行い、二度と変更しないという場合もあるが、ユーザの打鍵の癖が変化してきた場合や、デバイス側の機械的・電気的特性の経時変化、温度変化など、何らかの理由で判断精度が落ちてきた場合には、再学習することにより、判断精度を回復することができる。なお、複数のユーザがログインなどをして使用する場合、ユーザ毎に判断精度を回復してもよい。
【０１２２】
次に、ステップＳ１０６３において、この変数毎に求められた平均値と標準偏差、及び一組の相関行列を用いて、判断したい打鍵データのマハラノビス距離を計算する。
【０１２３】
そして、ステップＳ１０６４において、多変量（特徴量）を認識することにより接触状態の判別を行う。例えば、マハラノビス距離が所定の閾値より小さい場合、物体の接触状態が「打鍵」状態であると判断する。
【０１２４】
このように、マハラノビス距離が小さいほど「打鍵」である可能性が高いと判断するアルゴリズムを採用すれば、特徴量をそのまま判断に利用する場合に比べて遙かに判断精度が向上する。なぜなら、マハラノビス距離によれば、学習した変数間の相関も考慮した認識、即ち、パターン認識を行うため、ピーク値Amaxだけは打鍵データの平均値と近くても、接触面積が最大値に到達するまでの時間Tpが長い場合など、打鍵とは異なる接触パターンに対しては、高い識別能力を示す様になるという特徴がある。
【０１２５】
本実施の形態では、マハラノビス距離を用いる打鍵識別アルゴリズムで説明したが、その他の多変量解析アルゴリズムを採用して多変量の判断を行っても構わないことは勿論である。
【０１２６】
次に、図２４を用いて、「打鍵」状態だけではなく、「非接触」状態、「接触」状態におけるキーの表示を変更する処理について説明する。
【０１２７】
図２４のステップＳ２０１〜２０２の処理は、図２２のステップＳ１０１〜１０２の処理と同様であるので、ここでは説明を省略する。
【０１２８】
次に、ステップＳ２０３において、入力装置２０は、接触検出面１０ａに物体が接触した領域があるか否か判断する。接触領域がない場合は、ステップＳ２１２へ進み、接触領域がある場合は、ステップＳ２０４へ進む。ステップＳ２１２において、入力装置２０は、仮想キーボードのキーが「非接触」状態であると判断し、キーの表示形態を変更する（「待機」表示する）。具体的には、「非接触」状態のキーの明度、色、形状、輪郭線のパターンや太さ、点滅／点灯、点滅間隔などを、「接触」あるいは「打鍵」状態のキーとは変更して表示する。そして、ステップＳ２０２へ戻り、検出領域を取得する。
【０１２９】
次に、ステップＳ２０４〜２０６の処理は、ステップＳ１０４〜１０６の処理と同様であるので、ここでは説明を省略する。
【０１３０】
次に、ステップＳ２０７において、「打鍵」状態でない場合はステップＳ２１３へ進む。ステップＳ２１３において、入力装置２０は、仮想キーボードのキーが「接触」状態であると判断し、表示形態を変更する（「接触」表示する）。具体的には、「接触」状態のキーの明度、色、形状、輪郭線のパターンや太さ、点滅／点灯、点滅間隔などを、「非接触」あるいは「打鍵」状態のキーとは変更して表示する。そして、ステップＳ２０２へ戻り、検出領域を取得する。一方、「打鍵」状態である場合は、ステップＳ２０８へ進むと共に、次の接触状態を判断するため、ステップＳ２０２へ戻り、検出領域を取得する。
【０１３１】
ステップＳ２０８〜２１１の処理は、ステップＳ１０８〜１１１の処理と同様であるので、ここでは説明を省略する。
【０１３２】
次に、図２２のステップＳ１１０において、「打鍵」状態と認識された際、打鍵した位置と入力装置（キーボード等）の画像のキー位置とがずれていた場合に、認識音（警告音）を発生する処理について、図２５を用いて説明する。
【０１３３】
まず、ステップＳ３０１において、入力装置２０は、打鍵した指の接触検出部１０ｂの座標群から計算される打鍵基準座標（例えば、「打鍵」状態と判断された座標群から近似して推測された接触領域の重心）を取得する。
【０１３４】
次に、ステップＳ３０２において、入力装置２０は、打鍵基準座標と、仮想キーボードにおける当該キーの基準座標（例えば、中心座標）とを比較する。そして、両者のずれ（以下において、「打鍵ずれベクトル」という。）、即ち、打鍵基準座標及び当該キーの基準座標を始点及び終点とするｘ、ｙ面における方向と長さを計算する。
【０１３５】
次に、ステップＳ３０３において、入力装置２０は、指が接触した座標が、表示されたキーのどの領域に存在するか判別する。この領域は、左右２分割としても良く、または図２６及び図２７に示すように、領域５１〜５５の５つの領域に分割するようにしても良い。領域分割の種類は、ユーザが選択してもよい。尚、図２６及び図２７における領域５５は、正確に打鍵したと認識される領域である。
【０１３６】
次に、ステップＳ３０４において、入力装置２０は、領域に従って、認識音を決定する。図２６及び図２７では、領域５１〜５５に対してそれぞれ異なる認識音、例えば、音色、時間、パターンの異なる認識音を決定する。
【０１３７】
また、入力装置２０は、打鍵ずれベクトルの長さに応じて認識音を変化させてもよく、打鍵ずれベクトルの方向に応じて認識音を変化させても良い。例えば、打鍵ずれベクトルの長さが長いほど高音とし、打鍵ずれベクトルの方向に従って認識音の間隔あるいは音色を変えても良い。
【０１３８】
また、２つの領域に跨って指が接触した場合、２つの領域に対応する認識音の中間的な認識音を採用してもよく、また中間的な音色の生成は２つの領域の接触面積に応じて比例配分してもよく、２つの領域のうち接触面積が大きい領域の認識音を採用してもよい。また、このとき２つの音を発生させて和音としてもよい。
【０１３９】
次に、ステップＳ３０５において、入力装置２０は、ステップＳ３０４において決定された認識音を所定の音量で発生する。そして、入力装置２０は、認識音を発生してから、所定の時間が経過したか否か判断し、経過していない場合は認識音を発生し続ける。経過した場合は認識音を停止する。
【０１４０】
尚、ステップＳ３０４において、領域１〜５に対して異なる認識音を決定すると説明したが、領域５５と領域５１〜５４とを異なる認識音としてもよい。例えば、領域５５を打鍵した場合、正確に打鍵したと認識し、領域５１〜５４とは異なるパターン音、もしくは無音としても良い。
【０１４１】
領域５５の形状やサイズは、例えばキートップ全体に対するパーセンテージや、割合や比などの形でユーザ自身が適宜調整しても良く、領域５５のヒット率や打鍵ずれベクトルのｘ、ｙ成分分布等を記録し、それらのデータから自動調整しても良い。
【０１４２】
また、領域５１〜５４の区別はせず、領域５５の内側か外側かのみの区別で認識音を変更しても良い。
【０１４３】
また、領域５５の調整は、キー毎に独立して実施しても良く、全ての領域を一括もしくは複数のグループに分割して実施しても良い。例えば、キーボードの主要なキー、例えば多く使うキーや仮名キー（５０音のキー）だけをまとめて打鍵ずれベクトルを累計し、かつ形状やサイズの変更パラメータも主要なキーのグループは共通として同時に変更しても良い。
【０１４４】
＝自動調整処理＝
次に、表示されたキーボードのキー位置と入力位置との差から、キーボードの表示位置、寸法、形状を変化させる調整処理について、図２８を用いて説明する。ここで、調整処理は、キー毎に独立して実施しても良く、全ての入力領域を一括もしくは複数のグループに分割して実施しても良い。例えばキーボードの主要なキーだけをまとめて打鍵ずれベクトルを累計し、かつ形状やサイズの変更パラメータも主要なキーのグループは共通として同時に変更する構成としても良い。
【０１４５】
まず、ステップＳ４０１において、打鍵ずれベクトルの取得方法は、図２５のステップＳ３０２と同様であるので、ここでは説明を省略する。そして、入力装置２０は、打鍵ずれベクトルデータをメモリ２４に記録する。
【０１４６】
次に、ステップＳ４０２において、入力装置２０は、規定のタイミングに達したか否か判断する。ここで「規定のタイミング」とは、累計する対象の入力領域（キー毎ならキー毎に、グループでならグループに属する入力領域でまとめて）に打鍵が記録された回数、もしくは所定の時間間隔としても良い。又、所定の打鍵回数の場合でも、打鍵毎に、過去の所定のｎ回（ｎは自然数）の打鍵データを基に演算した調整パラメータを用いても良い。このアルゴリズムによれば、ｎを適切な数に設定すれば、打鍵毎に刻々と入力領域のレイアウト、形状やサイズが最適化される上に、ｎ回のデータを用いているので変化が急激過ぎてむしろ使いにくくなると言ったことや違和感を回避することができるという利点が生じる。
【０１４７】
次に、ステップＳ４０３において、入力装置２０は、打鍵ずれの分布を仮定し、最適な分布形状を演算する。そして、ステップＳ４０４において、当該分布形状を規定する一つ以上のパラメータをばらつきの分布データから演算する。
【０１４８】
次に、ステップＳ４０５において、入力装置２０は、キーボード（入力領域）の表示位置、寸法、形状等を変更する。
【０１４９】
次に、ステップＳ４０６において、入力装置２０は、調整処理を終了するか否か判断し、終了しない場合は、ステップＳ４０１〜４０５の処理を繰り返す。
【０１５０】
尚、ユーザ側は入力装置２０のこのような調整が現在どのような状態なのかを知りたいという要求がある。そこで、上記の様なアルゴリズムを実装する際に、同時に、「打鍵ずれ記録中」「自動調整中」「自動調整オフ」といった現状のステイタスを、入力装置側もしくは本体側の表示装置の一部に表示する構成としても良い。
【０１５１】
次に、キーボードを表す画像を表示をしない状態で、ユーザに所定の文字列（パスワード）をキー入力させることで、ユーザの入力意図を読みとり、どの程度のキーピッチを想定してユーザがタイプしたかを演算することにより、そのユーザに最適なキーボードパターンのパラメータを決定する方法について、図２９を用いて説明する。
【０１５２】
ここでは、キーピッチの他に、仮想的にタイプされた文字列の配列や文字列の基準線の傾き、基準線の曲率といったレイアウトに関するパラメータを最適に変更することにより、ユーザ毎に最適なキーボードレイアウトを提供することができる。
【０１５３】
又、五十音順レイアウトや英文キーボードでもいわゆる「QWERTY」配列、「DVORAK」配列を始めとして、様々な配列形式が存在するが、規定の文字列が、どのタイプの配列において入力されたかによって、ユーザが使用したいキーボードを入力装置２０が認識できるようになる。
【０１５４】
まず、図２９のステップＳ５０１において、入力装置２０は、打鍵を認識した位置の位置座標を取得する。そして、ステップＳ５０２において、予め記憶されている所定の文字座標群の位置座標と比較する。
【０１５５】
次に、ステップＳ５０３において、打鍵位置と文字座標群の位置との差を表す差分ベクトル群を導出する。差分ベクトル群は、入力された文字（パスワードの文字）数のベクトルの群からなる。ここで、各差分ベクトルの始点からなる始点群のみ、および各差分ベクトルの終点からなる終点群のみから最小二乗法などにより一次直線を生成し、それぞれを
ｙ＝ａ1ｘ＋ｂ1
ｙ＝ａ2ｘ＋ｂ2
とする。
【０１５６】
ステップＳ５０４において、ａ1とａ2を比較することにより、ｘｙ面内で何度基準に対してユーザの入力が回転しているかを検出し、角度修正量として演算する。もしくは、パスワード文字群に用いられている文字を、単純に行（ｙ座標が同じ筈の文字群）毎に分類してそれぞれでｘ方向の角度を計算し、得られた角度を平均して（１行だけならそのままで）行の角度修正量としてもよい。
【０１５７】
次に、ステップＳ５０５において、始点群のキーボード基準位置と、終点群から推測するキーボード基準位置を比較することにより、ｘピッチ及びｙピッチの修正量を演算する。方法は色々考えられるが、例えば最も単純には、始点群の座標群の重心と、終点群の座標群の重心とを比較しｘ方とｙ方向の差分を計算するだけでも良い。
【０１５８】
次に、ステップＳ５０６において、ｘ方向の拡大率（ｋxとする）とｙ方向の拡大率（ｋｙとする）とを別々に調整し、始点群の座標群と、終点群の座標群のそれぞれｘ座標およびｙ座標の誤差が最小となる様にｋｘとｋｙを決定し、基準原点修正量の演算を行う。決定方法は、例えば、誤差の２乗和が最小となるように探索的に（数値計算的に）求めても良いし、最小二乗法など算術的方法を行っても構わない。
【０１５９】
次に、ステップＳ５０７において、パスワードなど所定の文字列の認証判定を行う。即ち、予め登録されているパスワードと入力されたパスワードが一致するか否か判定する。
【０１６０】
そして、ステップＳ５０８において、ステップＳ５０４〜５０６において演算された、角度修正量、ｘピッチ、ｙピッチ修正量、基準原点修正量を反映させた入力範囲（ここでは、仮想キーボート５ａ）を、再表示する。
【０１６１】
尚、上述した角度修正量演算（ステップＳ５０４）、xピッチ、ｙピッチ修正量演算（ステップＳ５０５）、基準原点修正量演算（ステップＳ５０６）は、現キーボード配列に、適当な変換Ｔを施すことにより、ユーザにとって適切な配列にキーボードを調整するために算出する。ここで、現キーボード配列は、工場出荷時の配列であってもよく、過去に修正された配列でも良い。
【０１６２】
以下に、適当な変換Ｔを求めるための別の手順について説明する。
【０１６３】
適当な変換Ｔを求めるためには、ユーザにあらかじめ決められた文字数Ｎの文字列Ｓを打鍵させ、そのとき得られるＮ個のタッチパネル上の２次元座標のセットＵ（キートップ中心座標からずれている）と現在のキーボード配列において文字列Ｓを表現するときのキートップ中心の座標セットＣとを比べ、最も誤差が小さくなるようにＴを決めればよい。具体的には、以下で述べる手順が考えられるが、この方法に限定されない。以後、２次元座標または２次元のベクトルを［ｘ，ｙ］と表す。
【０１６４】
ＵはＮ個の２次元座標なので、［ｘｉ，ｙｉ］（ｉ＝１，２，…，Ｎ）と書ける。ＣをＴにより変換した座標セットＣ’を［ξｉ，ηｉ］（ｉ＝１，２，…，Ｎ）とする。変換Ｔは、ここでは座標群全体の平行移動と回転と拡大または縮小により構成する。平行移動を表すベクトルを［ｅ，ｆ］とし、回転角をθ、拡大／縮小係数をλとする。［ｅ，ｆ］は、現キーボード配列全体の中心点［ａ，ｂ］と、Ｕの平均座標［ｃ，ｄ］＝［（ｘ１＋ｘ２＋…＋ｘＮ）／Ｎ，（ｙ１＋ｙ２＋…＋ｙＮ）／Ｎ］から、［ｅ，ｆ］＝［ｃ−ａ，ｄ−ｂ］を計算すればよい。θとλにより、現キーボード配列を変換すると、変換後の座標は、［ξｉ，ηｉ］＝［λ｛（Ｘｉ−ｅ）ｃｏｓθ−（Ｙｉ−ｆ）ｓｉｎθ｝，λ｛（Ｘｉ−ｅ）ｓｉｎθ＋（Ｙｉ−ｆ）ｃｏｓθ｝］（ｉ＝１，２，…，Ｎ）と計算できるので、距離の２乗Δｉ＝（ξｉ−ｘｉ）＾２＋（ηｉ−ｙｉ）＾２の和α＝Δ１＋Δ２＋…＋ΔＮを最小化するパラメータθとλを、θとλの初期値をそれぞれ０，１とし、逐次２次計画法を用いて数値的に求めれば、求まったθとλを代入した結果得られる［ξｉ，ηｉ］（ｉ＝１，２，…，Ｎ）が、新キーボード配列になる。タイプミスなどの要因により、誤差が大きいときには、θとλは収束解に至らないことも考えられるが、このような場合はそもそも認証しない場合であり、キーボード配列を調整すべきではないので、ユーザに再度文字列Ｓの入力を促せばよい。
【０１６５】
又、λを、ｘ方向とｙ方向とで別々に調整する構成とすることで、横ピッチと縦ピッチを各々最適化でき、より好ましい結果が得られる場合もある。
【０１６６】
又、変換Ｔを工夫すれば、全体的に湾曲しているようなキーボード配列や、左手で打つキー群と、右手で打つキー群とが、離れた位置にあるようなキーボード配列に調整することも可能である。
【０１６７】
このような補正を、左右の手で独立して実施し、市販されている様な、左右の指の守備範囲を別々に扇状に変則的に配置する様な補正を、本アルゴリズムによりフレキシブルに実施しても良い。
【０１６８】
尚、この補正は認証時にのみ利用し、実際にキーボード領域を表示する際にはこれを反映しないか、ピッチの修正にのみ反映するなど、部分的もしくは加工・工夫して反映させる種々のバリエーションが考えられることは言うまでもない。特に回転角は、筺体の縁とずれている、もしくは左右非対称であると美観上も違和感があるので調整しないもしくは左右対称になる様に調整を工夫するという構成も考えられる。
【０１６９】
以上のように、様々な適切な幾何制約を付加することにより、利便性、美観を高めることができる。
【０１７０】
又、本実施の形態に係る入力装置２０は、指先等の物体に応じた入力装置を表す画像（入力位置を認識させるための画像）と、接触検知面において認識したユーザ情報とを対応付けて記録し、次に前記物体が接触した場合、当該ユーザ情報に基づき、表示装置に表示する入力装置の画像の位置、寸法もしくは形状の修正量を求めてもよい。例えば、接触検知面１０ａにおいて認識したユーザの手の大きさから、手の大きさを代表する指標に変換し、当該該指標に合わせて（パラメトリックに）キーボードを表す画像の大きさを変化させて表示してもよい。
【０１７１】
入力領域（キー）のサイズやレイアウトを、ユーザに応じて動的に調整することにおいては、図２９に示す動作と同様である。しかし、あまりに調整アルゴリズムが複雑であったり、調整パラメータが多すぎると、あまり使いやすくないサイズやレイアウトに調整されてしまったり、表示可能な領域からはみ出すような、調整不可能な値にパラメータが算出されてしまう恐れもある。そこで、図２５と同様のアルゴリズムにおいて、（１）角度修正量演算、（２）xピッチ、ｙピッチ修正量演算、（３）基準原点修正量演算の３種類の調整を個別に行うことに換えて、例えば予め単一もしくは少数のパラメータで規定されるキーボードパターンなどを予め機器が記憶保持しておき、図２９のアルゴリズムによる打鍵座標群取得の後、例えばxピッチ、ｙピッチのみを、規定のキーボードパターンにおける縦横寸法に反映させるだけという単純な調整アルゴリズムにする。
【０１７２】
このような変換によれば、例えば、基準位置の移動、即ち、平行移動や、角度・レイアウトのフレキシブルな調整は行わないこともあるが、実用上十分な場合があり、むしろあまり多彩な変化にユーザが戸惑うといった悪影響の恐れも軽減する。
【０１７３】
＝タイピング練習機能処理＝
次に、指先がキーの中心位置に接触したかを示す中心ヒット率、あるいは所望のキーに接触したかを示すキーヒット率をログインユーザ毎に集計し、成績の悪いキーを多く含む例題を出題するタイピング練習機能処理について、図３０及び図３１を用いて説明する。
【０１７４】
まず、ステップＳ６０１において、入力装置２０は、タイピング練習文字をユーザに入力するよう指示し、ユーザが仮想キーボード５ａを用いて、打鍵したことを認識する。
【０１７５】
次に、ステップＳ６０２において、入力装置２０は、入力位置や修正記録をメモリ２４に記録する。
【０１７６】
次に、ステップＳ６０３において、入力装置２０は、指先がキーの中心位置に接触したかを示す中心ヒット率、あるいは所望のキーに接触したかを示すキーヒット率を計算する。
【０１７７】
次に、ステップＳ６０４において、入力装置２０は、中心ヒット率あるいはキーヒット率の時間的推移をグラフ表示するためのパラメータを設定する。
【０１７８】
そして、ステップＳ６０５において、入力装置２０は、図３１に示すようなヒット率のグラフを表示する。
【０１７９】
又、入力装置２０は、キー毎の成績をランキングし、集中して練習するキーを提示したり、成績の悪い（ヒット率の悪い）キーを多く含む例題をユーザに出題したりしてもよい。
【０１８０】
＝打ち直しによる調整処理＝
次に、入力取り消しキーの使用頻度、取り消されたキー及び取り消し直後に入力し直されたキーの種類を含むキー情報を用いて、キー配列の変更もしくは位置・形状・角度の微調整を行う処理について、図３２を用いて説明する。
【０１８１】
まず、ステップＳ７０１において、入力装置２０は、ユーザが仮想キーボード５ａを用いて、キーを打ち直したことを検出する。例えば、QWERTY配列のキーボードに於いて、装置が「R」の打鍵を認識したあとユーザがこれを取り消しキーにより取り消し、改めて「E」が打鍵されたことを検出する。
【０１８２】
次に、ステップＳ７０２において、入力装置２０は、打鍵ミスした際の指の中心と、打ち直されたキーの中心との差分ベクトルデータを計算する。
【０１８３】
次に、ステップＳ７０３において、入力装置２０は、何度かのミスの際の当該差分ベクトルデータ群を導出する。
【０１８４】
そして、ステップＳ７０４において、当該差分ベクトルデータ群を平均し、これに所定の係数を乗ずることにより、修正量を演算する。この係数を１以下とすれば、小さいほど補正量は緩やかとなり、１に近いほど補正量は大きくなる。又、補正頻度も、誤入力の度に所定の回数分だけ最近の誤入力を平均して実施してもよく、所定の誤入力回数の間隔で実施してもよい。
【０１８５】
次に、ステップＳ７０５において、入力装置２０は、修正量に基づいて、キー位置を修正し、表示する。
【０１８６】
尚、入力装置２０は、キー位置の修正（微調整）を行う時間間隔を一定以上設けることができる。
【０１８７】
＝マウス表示処理＝
次に、指先がマウスを握る形状を取った際、表示装置に仮想マウス５ｂを表示させる処理について、図３３及び図３４を用いて説明する。
【０１８８】
まず、ステップＳ８０１において、入力装置２０は、指の接触形状を検出する。
【０１８９】
次に、ステップＳ８０２において、入力装置２０は、接触形状からマウス使用姿勢であるか否か判断する。マウスの使用姿勢である場合は、ステップＳ８０３へ進む。マウス使用姿勢であるとは、例えば、図３４（ａ）に示すような形状で、指が接触した場合である。図３４（ａ）の斜線部分が、タッチパネル１０に接触している部分である。
【０１９０】
次に、ステップＳ８０３において、入力装置２０は、マウスの基準位置および基準角度を判断し、基準位置、基準角度を利用して、図３４（ｂ）に示すように、表示装置５のディスプレイ上に仮想マウス５ｂを表示する。この基準位置は、ユーザの指によって決定される。このとき、通常のキーボード表示を残してその上に重ねる状態に仮想マウス５ｂを表示しても良く、キーボード表示を消して仮想マウス５ｂを表示しても良い。
【０１９１】
次に、ステップＳ８０４において、入力装置２０は、仮想マウス５ｂに対してユーザが行うクリックやホイールスクロールなどの操作を検出する。そして、ステップＳ８０５において、入力装置２０は、位置の移動量や操作イベントを取得する。
【０１９２】
尚、ステップＳ８０１〜８０５の処理は、高速な周期で繰り返しており、リアルタイムに「接触形状検出」「マウス使用姿勢か？」の判断が行われている状態となっており、ユーザがマウス使用の手の形状を解除して打鍵状態に移行したり、タッチパネル１０から手を離したりしたら直ちにもしくは所定のディレイの後、仮想マウス表示モードから通常使用状態（キーボード表示など）に移行する。
【０１９３】
＝視野角補正処理＝
次に、垂直方向と使用状況で誤差が発生した場合のキャリブレーション処理について説明する。例えば、図３５に示すように、表示装置５上のある画素５ｃに表示された画像をユーザの目が視認し、当該画像に接触することを想定する。このとき、垂直方向から見た場合（ユーザの目２４０ａ）、ユーザは接触検出部１０ｂ１に接触する。一方、通常の使用状況である斜めの方向から見た場合（ユーザの目２４０ｂ）、ユーザは接触検出素子１０ｂ２に接触する。同様に、ペン状指示棒の先端部２４１が画素５ｃに表示された画像に接触する場合、垂直方向から接触する場合は、図３６に示す接触検出部１０ｂ１に接触し、使用状況において斜めから眺めたときには、図３７に示す接触検出部１０ｂ２に接触することとなる。
【０１９４】
このように、垂直方向からのキャリブレーションと、使用時に多い斜め方向からのキャリブレーションと、２回のキャリブレーションを行うことにより、入力装置２０は、視野角補正を正確に計算することができる。
【０１９５】
この視野角補正処理について、図３８を用いて説明する。
【０１９６】
まず、ステップＳ９０１において、入力装置２０は、ユーザが仮想キーボード５ａを用いて、打鍵したことを認識する。
【０１９７】
次に、ステップＳ９０２において、入力装置２０は、図３９に示すように、タッチパネル１０の接触検出部１０ｂと表示装置５上の画素５ｃとの調整量（ずれ量）Ｌを抽出する。このずれ量が大きいと、図４０に示すように、キー表示の中心位置と打鍵位置Ｐがずれることとなる。
【０１９８】
次に、ステップＳ９０３において、入力装置２０は、ずれ量の累計を記録する。具体的には、キー毎の接触座標と接触領域の基準座標とのばらつきを計算し、キー毎に記憶する。
【０１９９】
次に、ステップＳ９０４において、入力装置２０は、ずれ量の分布を仮定し、最適な分布形状を演算する。具体的には、図４１に示す、指２４３の接触面積Ａ及び接触面積中心座標Ｘを用いて、図４２及び図４３に示すように、ｘ及びｙ方向の指の接触面積推移を算出する。そして、この度数の累計から分布をフィッティングし、実際のキーの中心座標と分布中心のずれを求める。又、分布を規定する一つ以上のパラメータをばらつきの分布データから計算する。
【０２００】
次に、ステップＳ９０５において、入力装置２０は、中心ずれ量を演算する。
【０２０１】
次に、ステップＳ９０６において、入力装置２０は、中心ずれ量から視差補正量を演算する。具体的には、上記のパラメータから、表示するキーあるいはキーボードの座標・ジオメトリパラメータのいずれかもしくは全てを調整し、視差補正量を演算する。
【０２０２】
次に、ステップＳ９０７において、入力装置２０は、視差補正後のキーボードを表示する。
【０２０３】
尚、上記の視差補正は、キー毎に独立して実施しても良いし、全てのキーを一括もしくは複数のグループに分割して実施しても良い。又、キー毎もしくは補正の周期やずれ量累計記録のリセット方法であるが、所定の打鍵回数の累計が終わる毎に上記アルゴリズムを繰り返し、累計もリセットしても良いし、打鍵毎に、所定の打鍵回数の累計をファストイン・ファストアウト方式で行い、打鍵毎に分布フィッティングをやり直しても良い。
【０２０４】
又、視差補正量が得られた後、実際に視差補正する対象は、表示装置５あるいはタッチパネル１０のどちらでも良く、又、両方で視差補正量を分担しても良い。
【０２０５】
次に、前述の打鍵ずれベクトルデータによるキーボードの自動調整処理と、本項の視野角補正処理の違いについて説明する。
【０２０６】
ベクトルデータによりキーボードを自動調整したにもかかわらず、以降も同様の打鍵ずれベクトルデータが観測される場合、それはユーザの打鍵の精度が悪いのではなく、本項で問題としている表示装置５とタッチパネル１０との視野角のずれが原因となっている可能性が高い。
【０２０７】
そこで、自動調整処理を行った後、視野角補正処理を行うか否かの判断を含むアルゴリズムについて、図４４を用いて説明する。
【０２０８】
まず、ステップＳ１００１〜１００５は、図３８のステップＳ９０１〜９０５と同様の処理であるので、ここでは説明を省略する。
【０２０９】
次に、ステップＳ１００６において、入力装置２０は、上述したオートアライメント処理による表示領域（キーボードを表す画像）補正量を演算する。そして、ステップＳ１００７において、表示領域（キーボードを表す画像）を補正し、表示する。
【０２１０】
次に、ステップＳ１００８において、入力装置２０は、視差補正実施条件に達したか否か判断する。ここで、「視差補正実施条件」とは、例えば、表示領域補正回数が規定の回数に達する、あるいは表示領域補正回数が規定の回数に達し、かつ表示部の全面もしくは一部において、特定方向への補正が繰り返し行われた場合など、様々な条件設定が考えられる。視差補正実施条件に達した場合、ステップＳ１００９へ進む。
【０２１１】
ステップＳ１００９及びＳ１０１０の処理は、図３８のステップＳ９０６及びＳ９０７と同様であるので、ここでは説明を省略する。
【０２１２】
＝その他の処理＝
本実施の形態に係る入力装置２０は、接触検出装置２１を圧力センサで構成し、接触検出装置２１へのユーザのキー入力押圧の平均値を計算し、当該押圧の経時変化を検知してキータッチ識別のしきい値を変化させる。
【０２１３】
この入力装置２０によると、最近の規定時間、もしくは規定打鍵回数の押圧変化の平均を移動平均の形で算出することにより、打鍵識別のしきい値を決定するので、ユーザが長時間使っているうちに打鍵の強度などの癖が推移するようなケースでも、識別率の低下を防ぎ快適な入力を継続することができる。又、このような押圧変化を観察することにより、得られた情報を、例えばユーザの疲労、もしくは機器側の故障などの検出に利用することもできる。
【０２１４】
本実施の形態に係る入力装置２０は、個人認証のために、予め一人以上のダミーデータを記録しておき、これらと新規登録ユーザとの特徴比較を行う。これは、新規ユーザを登録して例えばマハラノビス距離による判断指標を算出する場合に、特に新規ユーザが一人である場合、学習した新規ユーザのマハラノビス空間のみでマハラノビス距離を計算するのでは、判断精度が不十分な場合が考えられ、その解決手段の一つである。
【０２１５】
基本的には、自身のマハラノビス空間でマハラノビス距離を計算し、これが小さいほど本人である確率が高いと判断すればよいが、学習後の打鍵特徴の変化などで、マハラノビス距離が増加し、判断が難しくなる場合があり、本人であるとの認定／否認のしきい値設定が難しい場合がある。
【０２１６】
これに対して、予め一人以上のダミーデータ（被験者）により、ダミーの人数と同じ数だけのマハラノビス空間を用意しておき、これらのマハラノビス空間で、判断対象であるユーザの入力のマハラノビス距離を計算する。そして、これらダミーのマハラノビス空間によるマハラノビス距離よりも、該ユーザ自身のマハラノビス空間によるマハラノビス距離の方が小さい場合に、本人である可能性が高いと判断するものである。
【０２１７】
この入力装置２０によると、特定の一人もしくは少人数のログインユーザのみのマハラノビス空間しか学習しない場合や、予め多数の被験者から一つの平均的なマハラノビス空間しか保持しない場合に比べて、判断の信頼性が向上するという利点がある。なお、この個人認証に用いるキーや指について、予め決めておくことができる。例えばホームポジションであるＦ（左手の人差し指）やＪ（右手の人差し指）をそれぞれ単独或いはあわせて用いることで個人認証を行うことができる。また、上記実施例において説明した方法により表示するキーボードの位置がだんだんとずれていった場合に、予めセットしておいたユーザ毎の最適なポジションや購入時にセットされている初期ポジションに戻す機能を持たせてもよい。これらのポジションを表す核パラメータなどはユーザ毎にメモリに格納しておくことができる。
【０２１８】
（作用及び効果）
本実施の形態に係る入力装置２０、コンピュータ装置１、情報処理方法及び情報処理プログラムによると、接触検出装置２１（接触位置検出部及び接触強度検出部）と、デバイス制御ＩＣ２３（判断部）とを備えることにより、接触強度に関する特徴量を用いて、タッチパネル１０上に置かれたユーザの指が、打鍵を意図しているのか、もしくは接触しているかだけなのかという接触状態の判断を行うことができる。
【０２１９】
又、接触強度は、接触面積や接触圧力を利用して検出することができる。特に、接触面積を利用して強度を検出すると、従来の圧力センサ式タッチパネルのように「打鍵の圧力強度」のみに依存する方式に比べて、接触状態の判断を精度良く行うことができる。
【０２２０】
又、従来の赤外線式あるいはイメージセンサ式タッチパネルの場合、接触面積や形状のみを検出しているため「打鍵」と「接触」との判断が困難であった。本実施の形態に係る入力装置２０によると、物体の接触状態を容易かつ高精度に判断することができる。
【０２２１】
又、接触圧力を利用して強度を検出する場合、例えばペン状指示棒の先端部のように、指先と違って比較的硬質で、押圧による接触面積の変化が少なく検出し難いような場合でも、圧力の時間軸方向における変化率を評価することにより、物体の接触状態を容易かつ高精度に判断することができる。
【０２２２】
又、従来は非常に短期間の間に、複数キーの打鍵を認識することが困難であったが、本実施の形態に係る入力装置２０によると、接触している指先が複数点であった場合でも、「打鍵している指先」と、「接触させているだけの指先」とを精度良く判断することができる。従って、キー入力熟練者による高速な入力のように、非常に短時間の間に複数のキーに対する打鍵が微少な時間差で、一部時間的に重複して並行して入力が行われるような場合にも、接触状態を正確に把握することができる。
【０２２３】
本実施の形態に係る入力装置２０によると、デバイス制御ＩＣ２３（判断部）が接触強度に関する特徴量あるいは当該特徴量から計算された値と予め設定された閾値とを比較することにより、物体の接触状態を判断することができる。このため、ユーザ自身が打鍵の特徴やクセに併せて閾値を調整することにより、例えば同一マシンを複数ユーザで使い分けるときなどにも、各人に最適な判断を行い、識別精度を向上させることができる。又、しばらく使用を続けているうちに、打鍵強度が変化した場合にも、ユーザが自在に調節することにより、快適な使用環境を維持することができる。更に、個々のログイン・ユーザ毎に閾値を保存することにより、この閾値をログイン・ユーザ毎に初期値として用いることができる。
【０２２４】
図６に示すように、本実施の形態に係る入力装置２０のディスプレイドライバ２２（表示制御部）及び表示装置５によると、接触状態に応じて、入力装置の画像の表示形態を変更することができる。このため、例えば入力装置としてキーボードが表示されている場合、指先のキーに対する「非接触」、「接触」、「打鍵」状態をユーザが容易に認識することができ、ユーザの装置に対する習熟を支援する上でも非常に有効である。又、「接触」状態のキーを異なる表示形態で表示することにより、いわゆるホームポジションに両手が正しく位置しているかを認識し、正しく習慣付けることができる。
【０２２５】
又、接触状態に応じて、キーの明度を変化させる場合、暗い場所でも入力装置２０の利用が容易になる。又、使用状態のカラフルで動的なディスプレイ効果により、ユーザの「使う楽しさ」や「遊び心」、「所有欲」、「満足感」を満たす副次的効果もある。
【０２２６】
本実施の形態に係る入力装置２０のスピーカドライバ２５（発音部）及びスピーカ２６によると、物体の接触位置と入力装置の画像の位置との相対関係により、接触状態に応じた所定の認識音を発することができる。このため、ユーザがミスタイプの頻度や中心からのずれ量を認識することができるので、自らミスを補正するように練習することができ、習熟の上で非常に有効である。
【０２２７】
本実施の形態に係る入力装置２０のデバイス制御ＩＣ２３（通知部）によると、入力装置による出力信号に基づいた処理を行う機器へ接触状態を通知することができる。このため、例えば、事前にユーザが指定したホームポジションに指が置かれていると認識した際、接続された端末装置側にその旨を通知することができる。
【０２２８】
本実施の形態に係る入力装置２０の発光装置２７によると、接触状態に応じて発光することができる。このため、例えば、事前にユーザが指定したホームポジションに指が置かれていると認識した際、ユーザにその旨を視認させることができる。
【０２２９】
本実施の形態に係る入力装置２０の自動調整機能によると、打鍵ずれベクトルデータを用いて、キーボードの大きさや形状を変更することができる。
【０２３０】
本実施の形態に係る入力装置２０のタイピング練習機能によると、ユーザが自身の苦手とするキーを把握し、集中的に練習でき、早期に装置に習熟することができる。又、従来のキーボードを用いる従来のタイピング練習ソフトよりも優れた特徴として、キーの中心と、打鍵した指の中心座標とのずれや、その方向を、連続量のベクトルデータとして認識できるため、打鍵の精度をより細かく診断でき、またその修正指針をユーザにより詳細な情報として提供でき、かつ練習する連続文字列の生成も合理的に行うことができる。
【０２３１】
本実施の形態に係る入力装置２０の打ち直しによる調整機能では、例えば、QWERTY配列のキーボードにおいて、装置が「R」の打鍵を認識したあとユーザがこれを取り消しキーにより取り消し、改めて「E」が打鍵されたとすると、ユーザは、自身の意図したキーよりも実際には左に配置されているキーを押したことになる。このような再入力の履歴を保存し、この誤操作が多発していることが判明した場合、タッチパネル上の「E」キー近傍を右方向に補正することにより、この打鍵ミスを減少することができる。
【０２３２】
尚、キー位置の修正（微調整）を行う時間間隔を一定以上設けることにより、入力装置２０側の補正の頻度もしくは補正量が過大になって、仮想キーボード５ａの移動が不自然に大きく頻繁になり、むしろユーザが使い難さを感じるという不具合を回避することができ、適度な補正を行うことが可能になる。
【０２３３】
本実施の形態に係る入力装置２０の打ち直しによるマウス表示機能では、例えば、タッチパッド上でユーザが右手を半ば握る様な形で構えたことをイメージセンサもしくは圧力センサなどからなるタッチパッドが形状識別した際に、ユーザが、キータイプではなく、座標指示を行う使用意図であることを判断し、該手の基準位置を、ほぼ右手の中心位置と定め、また掌部分と丸めた指の位置から基準角度を算出し、この両情報から仮想マウスの位置と角度を算出してディスプレイ上に仮想マウス５ｂを表示することができる。該仮想マウス５ｂには、例えば通常のホイールマウスと同様に、左右ボタン、ホイールを具備した表示を行い、このタッチパネル状に表示された左右ボタンやホイールなどの領域は、それぞれの機能を割り付け、この領域上でユーザが指でタッチ、クリック、ホイールスクロール同様の摺動動作などを行った際にこれを検出し、通常のマウスと同様のユーザ指示とみなして機器操作やソフトウェア操作の指令として利用することができる。
【０２３４】
[その他の実施の形態]
本発明は上記の実施の形態によって記載したが、この開示の一部をなす論述及び図面はこの発明を限定するものであると理解すべきではない。この開示から当業者には様々な代替実施の形態、実施例及び運用技術が明らかとなろう。
【０２３５】
例えば、上述の実施の形態においては、入力部３をコンピュータ本体３０と一体に構成したが、これに代えて、いわゆる、外付け用機器として、例えばＵＳＢ（Universal Serial Bus）等の既存接続規格を用いてコンピュータ本体に外付けする構成としても良い。
【０２３６】
この場合、例えば図４５に示すように、コンピュータ本体に対して外付けに構成された入力装置２０は、表示装置（ここでは、ＬＣＤ）５に入力装置の画像（ここでは、仮想キーボード５ａ及び仮想マウス５ｂ）を表示する。入力装置２０は、ＵＳＢ(universal serial bus)ケーブル７などにより、コンピュータ本体に外付けされる。入力装置２０から出力されるキーボード等の操作結果は、コンピュータ本体に送信され、コンピュータ本体において処理が行われる。また、この処理結果は、コンピュータ本体に接続された表示装置において表示される。
【０２３７】
なお、図４５の入力装置２０においては、図１に示した入力装置２０と同様にして、入力部３の表示装置５に対する仮想キーボード５ａ等の入力装置の画像を表示する処理、図２２〜図２５に示した物体の接触位置や接触状態を判断する処理、図２８〜図４４に示した仮想キーボード５ａや仮想マウス５ｂの操作結果に基づく処理を入力装置２０側で実行するようにしているが、コンピュータ本体側で実行するようにすることもできる。
【０２３８】
すなわち、図７との対応部分に同一符号を付して示す図４６は、コンピュータ本体１３０に対して、入力部１４０を有する入力装置１４１を外付け構成とする場合の構成例である。図４６に示すように、入力装置１４１は、コンピュータ本体１３０のグラフィックス回路３５からキーボード等を表す画像を表示するためのデジタル画像信号をディスプレイドライバ２２に受け、このディスプレイドライバ２２によって表示装置５に仮想キーボード５ａ等の入力装置の画像を表示する。
【０２３９】
打鍵・接触位置検出装置１４２は、タッチパネル１０の接触検出面１０ａにおいて検出された物体の接触位置や接触状態等を、図２２〜図２５について上述した方法によって検出し、これをキーボードの操作結果またはマウスの操作結果として、キーボード接続ケーブル（ＰＳ／２ケーブル）またはマウス接続ケーブル（ＰＳ／２ケーブル）を介してコンピュータ本体１３０のキーボード／マウスポート４６に出力する。
【０２４０】
コンピュータ本体１３０では、キーボード／マウスポート４６を介して入力された打鍵結果等をキーボードの操作結果、マウスの操作結果として、ハードディスク装置４１等の記録部に一旦記憶し、これらの情報（操作結果）に基づいた処理を実行する。これらの処理としては、図２２〜図２５に示した基本的な情報処理、図２８、図２９に示した自動調整処理、図３０に示したタイピング練習機能処理、図３２に示した打ち直しによる調整処理、図３３に示したマウス表示処理、図３８に示した視野角補正処理等があり、この処理において、コンピュータ本体１３０では、操作結果に応じたデジタル画像信号をグラフィックス回路３５から表示部１５０のディスプレイドライバ２８に出力する。これにより、操作結果に応じた画像が表示装置２９に表示される。また、コンピュータ本体１３０では、キーボード／マウスポート４６を介して入力された打鍵結果等をキーボードの操作結果、マウスの操作結果に基づいた処理として、この操作結果に応じたデジタル画像信号をグラフィックス回路３５から入力装置１４１のディスプレイドライバ２２に出力する。これにより、例えば操作結果に応じてキーボード画像の色等を変化させるといった図２０及び図２１に示した表示処理を表示装置５上で実行させることができる。
【０２４１】
この場合、コンピュータ本体１３０は、表示制御部、接触位置検出部、接触強度検出部及び演算部として動作する。
【０２４２】
なお、図４６において破線で示すように、キーボード及びマウスの操作結果は、キーボード接続ケーブル、マウス接続ケーブルに代えて、ＵＳＢ接続ケーブル７ａ、７ｂを介してコンピュータ本体１３０のＵＳＢデバイス３８に出力するようにしてもよい。
【０２４３】
また入力装置１４１をコンピュータ本体１３０に対して外付け構成とする他の例として、図４７に示すように、入力装置１４１において、タッチパネル制御・処理装置１４３によりタッチパネル１０の操作結果を検出し、この操作結果をシリアル接続ケーブル９を介して、コンピュータ本体１３０のシリアル/パラレルポート４５に出力する。
【０２４４】
コンピュータ本体１３０では、予めインストールされたタッチパネル用ドライバによって、入力装置１４１をタッチパネルとして認識し、この操作結果に基づく処理を実行する。この場合においても、図４６の場合と同様にして、コンピュータ本体１３０では、シリアル/パラレルポート４５を介して入力されたタッチパネルの走査結果等を、ハードディスク装置４１等の記録部に一旦記憶し、これらの情報（操作結果）に基づいた処理を実行する。これらの処理としては、図２２〜図２５に示した基本的な情報処理、図２８、図２９に示した自動調整処理、図３０に示したタイピング練習機能処理、図３２に示した打ち直しによる調整処理、図３３に示したマウス表示処理、図３８に示した視野角補正処理等がある。このように、コンピュータ本体１３０において、入力装置１４1をタッチパネルとして認識した処理を行うことができる。
【０２４５】
この場合、コンピュータ本体１３０は、表示制御部、接触強度検出部及び演算部として動作する。
【０２４６】
なお、図４７において、シリアル接続ケーブル９に代えて、ＵＳＢ接続ケーブル７によってタッチパネルの操作結果をコンピュータ本体１３０のＵＳＢデバイス３８に出力するようにしてもよい。
【０２４７】
また、上述の実施の形態においては、入力部３のみにタッチパネル１０を設けたが、これに加えて、表示部においてもタッチパネル１０を設けるようにしてもよい。
【０２４８】
例えば、図７との対応部分に同一符号を付して示す図４８に示すように、下筐体２Ａに加えて、上筐体２Ｂにタッチパネル１０を設けるようにしてもよい。この図４８に示すように、上筐体２Ｂに設けられたタッチパネル１０の接触検出結果は、タッチパネル制御・処理装置１４３に供給される。タッチパネル制御・処理装置１４３は、この検出結果をタッチパネルの操作結果としてシリアル接続ケーブル９を介して、コンピュータ本体１３０のシリアル/パラレルポート４５に出力する。
【０２４９】
コンピュータ本体１３０では、予めインストールされたタッチパネル用ドライバによって、上筐体２Ｂのタッチパネルを認識し、この操作結果に基づく処理を実行する。
【０２５０】
またコンピュータ本体１３０では、グラフィックス回路３５を介してデジタル画像信号を上筐体２Ｂのディスプレイドライバ２８に出力する。これにより上筐体２Ｂの表示装置２９には、種々の画像が表示される。なお、コンピュータ本体３０と上筐体２Ｂとの間においては、例えば図１に示すヒンジ部１９を介して信号線が接続される。
【０２５１】
下筐体２Ａにおいては、打鍵・接触位置検出装置１４２が設けられている。この打鍵・接触位置検出装置１４２は、タッチパネル１０の接触検出面１０ａにおいて検出された物体の接触位置や接触状態等を、図２２〜図２５について上述した方法によって検出し、これをその接触位置に応じてキーボードの操作結果またはマウスの操作結果として、キーボード接続ケーブル（ＰＳ／２ケーブル）またはマウス接続ケーブル（ＰＳ／２ケーブル）を介してコンピュータ本体１３０のキーボード／マウスポート４６に出力する。
【０２５２】
コンピュータ本体１３０では、キーボード／マウスポート４６を介して入力された打鍵結果等をキーボードの操作結果、マウスの操作結果に基づいた処理として、この操作結果に応じたデジタル画像信号をグラフィックス回路３５から入力装置１４１のディスプレイドライバ２２に出力する。これにより、例えば操作結果に応じてキーボード画像の色等を変化させるといった図２０及び図２１に示した表示処理を表示装置５上で実行させることができる。
【０２５３】
この場合、コンピュータ本体１３０は、表示制御部、接触強度検出部及び演算部として動作する。
【０２５４】
なお、図４８において破線で示すように、キーボード及びマウスの操作結果は、キーボード接続ケーブル、マウス接続ケーブルに代えて、シリアル接続ケーブル９ａを介してコンピュータ本体１３０のシリアル/パラレルポート４５に出力するようにしてもよい。
【０２５５】
また図４８において、下筐体２Ａにおいても、上筐体２Ｂと同様のタッチパネル制御・処理装置１４３を打鍵・接触位置検出装置１４２に代えて設け、コンピュータ本体１３０において、インストールされたタッチパネルドライバによって操作結果を認識し、これに応じた処理を実行するようにしてもよい。
【０２５６】
また上述の実施の形態においては、抵抗膜方式のタッチパネル１０を用いたが、これに代えて、例えば、光学方式のものを用いるようにしてもよい。光学方式による一構成例として、図４９に示すように、赤外線走査型センサアレイが挙げられる。発光用Ｘ軸センサアレイ１５１ｅから受光用Ｘ軸センサアレイ１５１ｃへ、又、発光用Ｙ軸センサアレイ１５１ｄから受光用Ｙ軸センサアレイ１５１ｂへ光が走査する。この光の光路がマトリクス状に交差する空間層がタッチパネル１０に代わる接触検出領域となる。指先等で表示装置５の表示面を押圧しようとすると、指先は、表示面に接触する前に接触検出領域を横切ることになる。指先等の物体がこの接触検出領域を横切ると、光路１５１ｆを遮るため、受光用Ｘ軸センサアレイ１５１ｃ及び受光用Ｙ軸センサアレイ１５１ｂにおいて受光結果が得られないこととなり、図６に示した接触検出装置２１において、これらの位置をＸ座標及びＹ座標で検出することができる。そして、この接触検出領域を横切った物体の強さ（すなわち表示装置５の表示面に接触する際の強さ）及びその強さに基づく特徴量を接触検出装置２１において検出し、接触状態を判断することができる。例えば、一定の断面積を持つ指先が接触検出領域を横切る場合、指先によって複数の赤外線が遮られることになり、この遮られる赤外線の数の単位時間あたりの増加率は、指先が接触検出領域を横切る速度に応じて変化する。そして、表示面を強く押圧しようとすると、指先が接触検出領域を横切る速度が高くなることにより、遮られる赤外線の数の増加率に基づいて、強く押圧したか否かを判断することができる。
【０２５７】
また、上述の実施の形態においては、端末装置としてノート型コンピュータを例示したが、これに限らず、電子手帳、ＰＤＡ（Personal Digital Assistant）、携帯電話などでも構わないことは勿論である。
【０２５８】
また、図２２において、接触位置の検出を行った後（ステップＳ１０４）、接触強度の検出（ステップＳ１０５）を行うと説明したが、この順序は逆でも構わない。同様に、打鍵状態の通知（ステップＳ１０８）、打鍵表示（ステップＳ１０９）、認識音の発生（ステップＳ１１０）の順序で処理を行うと説明したが、この順序はそれぞれ入れ替わっても構わない。図２４においても同様である。
【図面の簡単な説明】
【０２５９】
【図１】第１の実施の形態に係るノート型コンピュータの斜視図である。
【図２】図１のノート型コンピュータの入力部を示す斜視図である。
【図３】図１のノート型コンピュータのタッチパネルを示す斜視図である。
【図４】図１のノート型コンピュータのタッチパネルを示す平面図である。
【図５】図１のノート型コンピュータのタッチパネルを示す断面図である。
【図６】図１のノート型コンピュータの入力装置の構成を示すブロック図である。
【図７】図１のノート型コンピュータを示すブロック図である。
【図８】図１のノート型コンピュータのタッチパネルにおける接触状態を示すグラフである。
【図９】図１のノート型コンピュータのタッチパネルにおける接触状態を示すグラフである。
【図１０】圧力を電気信号に変換するタッチパネルを示す斜視図である。
【図１１】圧力を電気信号に変換するタッチパネルを示す平面図である。
【図１２】圧力を電気信号に変換するタッチパネルを示す断面図である。
【図１３】タッチパネルの接触検出部の配置例を示す略線図である。
【図１４】弱い押圧力で押圧した場合に接触検出される接触検出部を示す略線図である。
【図１５】中程度の押圧力で押圧した場合に接触検出される接触検出部を示す略線図である。
【図１６】中程度の押圧力で押圧した場合に接触検出される接触検出部を示す略線図である。
【図１７】強い押圧力で押圧した場合に接触検出される接触検出部を示す略線図である。
【図１８】最強の押圧力で押圧した場合に接触検出される接触検出部を示す略線図である。
【図１９】図１のノート型コンピュータの下筐体を示す斜視図である。
【図２０】図１のノート型コンピュータの入力装置において情報を入力するために掌を置いた状態を示す平面図である。
【図２１】図１のノート型コンピュータの入力装置において仮想キーを打鍵した状態を示す平面図である。
【図２２】図１のノート型コンピュータの入力装置における情報処理方法を示すフローチャートである。
【図２３】図２２のステップＳ１０６及び図２４のステップＳ２０６の詳細を示すフローチャートである。
【図２４】図１のノート型コンピュータの入力装置における情報処理方法を示すフローチャートである。
【図２５】図２２のステップＳ１１０及び図２４のステップＳ２１０の詳細を示すフローチャートである。
【図２６】図１のノート型コンピュータの入力装置におけるキー領域を示す図である。
【図２７】図１のノート型コンピュータの入力装置におけるキー領域を示す図である。
【図２８】図１のノート型コンピュータの入力装置における自動調整処理手順を示すフローチャートである。
【図２９】図１のノート型コンピュータの入力装置における自動調整処理手順を示すフローチャートである。
【図３０】図１のノート型コンピュータの入力装置におけるタイピング練習機能処理手順を示すフローチャートである。
【図３１】図１のノート型コンピュータの入力装置におけるタイピング練習時のヒット率を示すグラフである。
【図３２】図１のノート型コンピュータの入力装置における打ち直し自動調整処理手順を示すフローチャートである。
【図３３】図１のノート型コンピュータの入力装置におけるマウス表示処理手順を示すフローチャートである。
【図３４】図１のノート型コンピュータの入力装置におけるマウス表示処理を説明するための図である。
【図３５】図１のノート型コンピュータの入力装置における視野角補正処理を説明するための図である。
【図３６】図１のノート型コンピュータの入力装置における視野角補正処理を説明するための図である。
【図３７】図１のノート型コンピュータの入力装置における視野角補正処理を説明するための図である。
【図３８】図１のノート型コンピュータの入力装置における視野角補正処理手順を示すフローチャートである。
【図３９】図１のノート型コンピュータの入力装置における視野角補正処理のずれ量を説明するための図である。
【図４０】図１のノート型コンピュータの入力装置における視野角補正処理のずれ量を説明するための図である。
【図４１】図１のノート型コンピュータの入力装置における視野角補正処理の接触面積を説明するための図である。
【図４２】図１のノート型コンピュータの入力装置における視野角補正処理のｘ方向の接触面積推移を示すグラフである。
【図４３】図１のノート型コンピュータの入力装置における視野角補正処理のｙ方向の接触面積推移を示すグラフである。
【図４４】図１のノート型コンピュータの入力装置における視野角補正処理手順を示すフローチャートである。
【図４５】他の実施の形態に係る入力装置を示す斜視図である。
【図４６】他の実施の形態に係る入力装置を示すブロック図である。
【図４７】他の実施の形態に係る入力装置を示すブロック図である。
【図４８】他の実施の形態に係る入力装置を示すブロック図である。
【図４９】他の実施の形態に係るタッチパネルを示す斜視図である。
【符号の説明】
【０２６０】
１…ノート型コンピュータ
２Ａ…下筐体
２Ｂ…上筐体
３、１４０…入力部
４…表示部
５、２９…表示装置
５ａ…仮想キーボード
５ｂ…仮想マウス
６…バックライト装置
１０、２１０…タッチパネル
１０ａ…接触検出面
１１、１３、２１１、２１３…ベース
１５、２１５…ドットスペーサ
２０、１４１…入力装置
２１…接触検出装置
２２、２８…ディスプレイドライバ
２３…デバイス制御ＩＣ
３０、１３０…コンピュータ本体
３３…ＣＰＵ
【図１】
2006127488.tif 000003
【図２】
2006127488.tif 000004
【図３】
2006127488.tif 000005
【図４】
2006127488.tif 000006
【図５】
2006127488.tif 000007
【図６】
2006127488.tif 000008
【図７】
2006127488.tif 000009
【図８】
2006127488.tif 000010
【図９】
2006127488.tif 000011
【図１０】
2006127488.tif 000012
【図１１】
2006127488.tif 000013
【図１２】
2006127488.tif 000014
【図１３】
2006127488.tif 000015
【図１４】
2006127488.tif 000016
【図１５】
2006127488.tif 000017
【図１６】
2006127488.tif 000018
【図１７】
2006127488.tif 000019
【図１８】
2006127488.tif 000020
【図１９】
2006127488.tif 000021
【図２０】
2006127488.tif 000022
【図２１】
2006127488.tif 000023
【図２２】
2006127488.tif 000024
【図２３】
2006127488.tif 000025
【図２４】
2006127488.tif 000026
【図２５】
2006127488.tif 000027
【図２６】
2006127488.tif 000028
【図２７】
2006127488.tif 000029
【図２８】
2006127488.tif 000030
【図２９】
2006127488.tif 000031
【図３０】
2006127488.tif 000032
【図３１】
2006127488.tif 000033
【図３２】
2006127488.tif 000034
【図３３】
2006127488.tif 000035
【図３４】
2006127488.tif 000036
【図３５】
2006127488.tif 000037
【図３６】
2006127488.tif 000038
【図３７】
2006127488.tif 000039
【図３８】
2006127488.tif 000040
【図３９】
2006127488.tif 000041
【図４０】
2006127488.tif 000042
【図４１】
2006127488.tif 000043
【図４２】
2006127488.tif 000044
【図４３】
2006127488.tif 000045
【図４４】
2006127488.tif 000046
【図４５】
2006127488.tif 000047
【図４６】
2006127488.tif 000048
【図４７】
2006127488.tif 000049
【図４８】
2006127488.tif 000050
【図４９】
2006127488.tif 000051