(57)【要約】【課題】複数の種類の異なるセンサの出力を有効利用する。【解決手段】本実施形態によれば、センサ一体型表示パネルが、第１のセンサに操作入力を与えるための操作面と、画像の表示面とを一体に備える。データ転送デバイスが、前記第１のセンサを駆動する駆動信号を前記センサ一体型表示パネルに入力すると共に、前記第１のセンサからのセンサ出力の電位に応じた検出データを出力する。複数センサ出力判定部が、第２のセンサの出力内容に応じて、前記第１のセンサの出力の処理形態を切り替える。【選択図】図８
2014199494.tif 000002
【特許請求の範囲】
【請求項１】
第１のセンサに操作入力を与えるための操作面と、画像の表示面とを一体に備えたセンサ一体型表示パネルと、
前記第１のセンサを駆動する駆動信号を前記センサ一体型表示パネルに入力すると共に、前記第１のセンサからのセンサ出力の電位に応じた検出データを出力するデータ転送デバイスと、
第２のセンサの出力内容に応じて、前記第１のセンサの出力の処理形態を切り替える複数センサ出力判定部と、を有する電子機器。
【請求項２】
前記第２のセンサは、加速度センサであり、
前記複数センサ出力判定部は、前記第１と第２のセンサの出力が同時にある場合は、前記データ転送デバイスからの前記第１のセンサの出力の検出データを用いた座標演算結果を使用する請求項１記載の電子機器。
【請求項３】
前記第２のセンサは加速度センサであり、
前記複数センサ出力判定部は、前記第１と第２のセンサの出力があるときに、前記第１のセンサの出力に応じた動作を開始する請求項１記載の電子機器。
【請求項４】
前記第２のセンサは、前記操作面に物体が接近したことを検出する、近接検知センサであり、
前記複数センサ出力判定部は、前記近接検知センサからの検知データが入力した場合、前記第１のセンサの検出データの処理を開始する請求項１記載の電子機器。
【請求項５】
前記第２のセンサは、前記操作面に接近した物体を撮像する、撮像デバイスであり、
前記複数センサ出力判定部は、前記撮像デバイスからの撮像データが入力した場合、認証処理を開始する請求項１記載の電子機器。
【請求項６】
前記複数センサ出力判定部は、前記第２のセンサの出力の周波数判定を行い、判定結果に応じて前記第１のセンサの出力の処理形態を制御する請求項１記載の電子機器。
【請求項７】
前記第２のセンサは、アプリケーション動作デバイスにより制御されるセンサである請求項１記載の電子機器。
【請求項８】
前記複数センサ出力判定部の動作は、前記アプリケーション動作デバイスに格納されたアプリケーションにより実行される請求項７記載の電子機器。
【請求項９】
第１のセンサに操作入力を与えるための操作面と、画像の表示面とを一体に備えたセンサ一体型表示パネルと、前記第１のセンサを駆動する駆動信号を前記センサ一体型表示パネルに入力すると共に、前記第１のセンサからのセンサ出力の電位に応じた検出データを出力するデータ転送デバイスと、前記センサ一体型表示パネルとデータ転送デバイスを制御するアプリケーション動作デバイスを有する電子機器の制御方法であって、
前記アプリケーション動作デバイスが、第２のセンサの出力内容に応じて、前記第１のセンサの出力の処理形態を切り替える、電子機器の制御方法。
【請求項１０】
前記第１のセンサからの出力と第２のセンサからの加速度検出出力が同時にある場合は、前記データ転送デバイスからの前記第１のセンサの出力の検出データを用いた座標演算結果を使用する請求項９記載の電子機器の制御方法。
【請求項１１】
前記第１のセンサからの出力と第２のセンサの出力があるときに、前記第１のセンサの出力内容に応じた動作を開始する請求項９記載の電子機器の制御方法。
【請求項１２】
前記操作面に接近した物体を撮像した撮像データが入力した場合、認証処理を開始する請求項９記載の電子機器の制御方法。
【請求項１３】
前記第２のセンサの出力の周波数判定を行い、判定結果に応じて前記第１のセンサの出力の処理形態を制御する請求項９記載の電子機器の制御方法。
【発明の詳細な説明】
【技術分野】
【０００１】
この発明の実施形態は電子機器、電子機器の制御方法に関する。
【背景技術】
【０００２】
携帯電話、タブレット、パーソナルデジタルアシスタント（ＰＤＡ）、及び小型の携帯用パーソナルコンピュータなどが普及している。これら電子機器は、表示パネルと一体となった操作入力パネルを有する。
【０００３】
操作入力パネルは、ユーザが表示面上に触れたとき、触れた位置を、例えば静電容量の変化として検出する。検出信号は、操作入力パネルのために専用に設計され、集積回路（ＩＣ）化されたタッチ信号処理ＩＣに入力される。タッチ信号処理ＩＣは、前記検出信号を予め用意した計算アルゴリズムで処理し、ユーザが触れた位置を座標データに変換して出力している。
【先行技術文献】
【特許文献】
【０００４】
【特許文献１】特開２０１２−４８２９５号公報
【発明の概要】
【発明が解決しようとする課題】
【０００５】
製造技術の進歩とともに、表示パネルの解像度は高解像度化し、また表示パネルの大型化も進んでいる。表示パネルの高解像度化や大型化に伴い、操作入力パネルの位置検出精度も高精細化が要求されている。また、アプリケーションによっては、操作入力パネルの操作入力に対するデータ処理速度も高速化が要求されている。また、アプリケーションを容易に変更できる方式の装置が要望されている。
【０００６】
そこでこの発明に係る一実施形態では、多様のアプリケーションに対して柔軟に適応できるようにし、アプリケーションに対する入力情報も豊富にすることができる電子機器、電子機器の制御方法を提供することを目的とする。
【課題を解決するための手段】
【０００７】
本実施形態によれば、第１のセンサに操作入力を与えるための操作面と、画像の表示面とを一体に備えたセンサ一体型表示パネルと、
前記センサを駆動する駆動信号を前記センサ一体型表示パネルに入力すると共に、前記第１のセンサからのセンサ出力の電位に応じた検出データを出力するデータ転送デバイスと、
第２のセンサの出力内容に応じて、前記第１のセンサの出力の処理形態を切り替える複数センサ出力判定部と、を有する。
【発明の効果】
【０００８】
実施形態によれば、第２のセンサの出力を第１のセンサ出力とともに併用することにより、操作入力の確実な判定を得るとともに、第２のセンサの出力を活用することができ、多様な動作機能を拡張することができる。加えて、実施形態によれば、アプリケーション動作デバイスにより、操作入力など入力情報の利用形態、判定機能を多く拡張することができ、装置全体の多様な使い方を容易に拡張できる。
【図面の簡単な説明】
【０００９】
【図１】一実施形態による電子機器のブロック構成図である。
【図２Ａ】表示面又は表示パネルと操作面又は操作入力パネルを一体に有したセンサ一体型表示デバイスを説明するために示した断面図である。
【図２Ｂ】操作入力パネルから出力される信号からタッチ検出信号を得るための原理を説明するために示す説明図である。
【図３】操作入力パネルのセンサ構成部品とその駆動方法を説明するために示した斜視図である。
【図４】図１に示すデータ転送デバイスのブロック構成例及びアプリケーション動作デバイスの各種アプリケーションにより実現される機能の幾つかの例をブロック化して示す図である。
【図５Ａ】図１及び図４のドライブから出力される表示用の信号とセンサ用検出電極の駆動信号との出力タイミングの例を示す図である。
【図５Ｂ】センサ用検出電極の駆動信号の出力と共通電極との駆動状態を説明するために示した模式図である。
【図６】操作入力が無い場合のセンサ出力の生データ（検出データ）をグラフ化した一例を示す模式図である。
【図７】操作入力が有った場合のセンサ出力の生データ（検出データ）をグラフ化した一例を示す模式図である。
【図８】本実施形態において、複数の種類のセンサ出力を処理するための一例を示すブロック図である。
【図９】本実施形態において、複数の種類のセンサ出力を処理するための他の例を示すブロック図である。
【図１０】本実施形態において、複数の種類のセンサ出力を処理するためのさらに他の例を示すブロック図である。
【図１１】本実施形態において、複数の種類のセンサ出力を処理するためのさらにまた他の例を示すブロック図である。
【発明を実施するための形態】
【００１０】
以下、実施の形態について図面を参照して説明する。図１には、一実施形態が適用された携帯端末１を示している。センサ一体型表示デバイス１００は、表示面（又は表示パネル）と操作面（又は操作入力パネル）を一体に有し、そのために表示素子構成部品１１０、及びセンサ構成部品１５０を有する。
【００１１】
このセンサ一体型表示デバイス１００には、後述するドライバー２１０から表示用信号（又は画素信号）Ｓｉｇｘが供給される。そしてドライバー２１０からゲート信号が供給されると、表示素子構成部品１１０の画素に対して画素信号が書き込まれる。この画素信号に応じて、画素電極と共通電極間の電圧が決まり、この電圧により電極間の液晶分子が変位し、液晶分子の変位に応じた輝度が得られる。
【００１２】
センサ一体型表示デバイス１００の呼び名は、これに限定されるものではなく、入力センサ一体型表示部、ユーザインターフェースなどと称してもよい。
【００１３】
表示素子構成部品１１０は、液晶表示パネル、ＬＥＤ、有機ＥＬなどの発光素子による表示部を採用してもよい。表示素子構成部品１１０は、単純にディスプレイと称されてもよい。センサ構成部品１５０は、静電容量変化検知方式である。センサ構成部品１５０はタッチ入力、ジェスチャーなどを検出するためのパネルと称されてもよい。
【００１４】
センサ一体型表示デバイス１００は、データ転送デバイス２００を介してアプリケーション動作デバイス３００に接続される。
【００１５】
データ転送デバイス２００は、ドライバー２１０、センサ信号検出器２５０を有する。ドライバー２１０は、基本的には、アプリケーション動作デバイス３００から転送されてくるグラフィックデータを表示素子構成部品１１０に入力する。また、センサ信号検出器２５０は、センサ構成部品１５０から出力されるセンサ出力を検出する。
【００１６】
ドライバー２１０とセンサ信号検出器２５０は、相互に同期動作するもので、同期制御は、アプリケーション動作デバイス３００の制御に基づいている。
【００１７】
アプリケーション動作デバイス３００は、携帯電話等の電子機器内に組み込まれている、例えば半導体集積回路（ＬＳＩ）であって、ＯＳなどのソフトウエアによってＷｅｂブラウジングやマルチメディアなどの複数の機能処理を複合的に実行する役割をもつものである。
【００１８】
これらのアプリケーションプロセッサは、高速な演算処理を行うもので、デュアルコア、あるいはQuad-Coreのものであってもよい。動作速度としては例えば５００ＭＨｚ以上、より好ましくは１ＧＨｚのものが好適である。
【００１９】
ドライバー２１０は、アプリケーションに基づいて、表示構成素子構成部品１１０に表示用信号（グラフィックスデータがアナログ変換された信号）を供給する。さらにドライバー２１０は、センサ信号検出器２５０からのタイミング信号に基づいて、センサ構成部品１５０を走査するための駆動信号Ｔｘを出力する。この駆動信号Ｔｘに同期してセンサ構成部品１５０からセンサ信号Ｒｘが読み出され、このセンサ信号Ｒｘはセンサ信号検出器２５０に入力する。
【００２０】
センサ信号検出器２５０は、センサ出力を検出し、ノイズ除去し、生の読み取りイメージデータ（３次元イメージデータと称することができる）としてアプリケーション動作デバイス３００に入力する。
【００２１】
センサ構成部品１５０が容量検出方式である場合、イメージデータは、単純に座標を表す２次元データではなく、容量の大きさに応じて異なる多値（２ビット以上の例えば３値−７値）を持つことができる。したがって、このイメージデータは、物理量と座標を含む３次元データと称することができる。対象物（例えばユーザの指先）とタッチパネルとの遠近に応じて容量の変化があるので、この変化を物理量の変化として捕らえることができる。
【００２２】
上記したようにデータ転送デバイス２００のセンサ信号検出器２５０が、イメージデータを直接、アプリケーション動作デバイス３００に提供する理由は以下の理由に基づいている。
【００２３】
まずアプリケーション動作デバイス３００は、その高速演算機能を活かして、イメージデータを各種の用途に用いることができる。
【００２４】
アプリケーション動作デバイス３００においては、ユーザからの種々の要望に応じて、新しい種々のアプリケーションが適用される。新しいアプリケーションは、データ処理内容に応じて、イメージデータの処理方法、読み出し（または検出）タイミング、読み出し（または検出）フォーマット、読み出し（または検出）領域または、読み出し（または検出）密度などの変化や切り替え望む場合がある。
【００２５】
このような場合、従来の装置のように座標データのみを受け取ると、その取得情報量が制約される。しかし、この装置のように生の３次元イメージデータを解析すると、例えば座標位置情報のほかに、遠近情報も得ることができる。
【００２６】
さらに、アプリケーションによる各種機能の拡張性を得るために、データ転送デバイス２００は、アプリケーション制御に基づく各種の動作に容易に追従できることが望ましい。そこで、データ転送デバイス２００は、できるだけシンプルな機能として、アプリケーション制御に応じて、センサ出力の読み取りタイミング、読み取り領域、読み取り密度などを任意に切り替え可能な構造としている。この点は、後でも説明する。
【００２７】
アプリケーション動作デバイス３００は、グラフィックデータ生成部、無線機インターフェース、カメラ機能インターフェースなどをも含むことができる。
【００２８】
図２Ａには、表示素子構成部品１１０とセンサ構成部品１５０とが一体となった、センサ一体型表示デバイス１００、つまり表示パネルと操作入力パネルが一体化した表示装置の基本的な断面構造を示している。
【００２９】
薄膜トランジスタ（ＴＦＴ）基板１１上に、共通電極１３、さらに絶縁層を介して画素電極１２が形成され、画素基板１０が構成されている。画素基板１０対して、液晶層３０を挟んで、対向基板２０が画素基板１０と平行に配置されている。対向基板２０は、液晶層側から順次カラーフィルタ２２、ガラス基板２３、センサ用検出電極２４、偏光板２５が配置されて構成されている。
【００３０】
共通電極１３は、表示用の共通駆動電極でもあるが、センサ用駆動電極（或いはセンサの共通駆動電極）としても機能する。
【００３１】
図２Ｂは、共通電極とセンサ用検出電極の交差点付近に、導体、例えばユーザの指先が近接した場合であって、この交差点からセンサ用検出電極を介して読み出した電圧がＶ０からＶ１に変化した様子を示している。指を接触していない状態では、交差点の容量（第１容量素子とする）に対する充放電に伴って第１容量素子の容量値に応じた電流が流れる。このときの第１容量素子の他端の電位波形は、例えば図２Ｂの波形Ｖ０のようになる。センサ用検出電極にユーザの指先が近接すると、指によって形成される第２容量素子が第１容量素子に直列に追加された形となる。この状態では、第１容量素子と第２容量素子とに対する充放電に伴って、それぞれ電流が流れる。このときの第１容量素子の他端の電位波形は、例えば図４の波形Ｖ１のようになり、これが検出回路２０によって検出される。このとき、第１容量素子の他端の電位は、第１容量素子と第２容量素子とを流れる電流の値によって定まる分圧電位となる。このため、波形Ｖ１は、非接触状態での波形Ｖ０よりも小さい値となる。したがって、このセンサ信号Ｒｘと閾値Ｖｔｈと比較することにより、センサに接触しているか否かを判断することが可能となる。
【００３２】
図３は、操作入力パネルのセンサ構成部品とその駆動方法を説明するために示した斜視図であり、センサ用検出電極２４と共通電極２１との配置関係を示している。図３に示す例は一例であり、このようなタイプに限定されるものではない。
【００３３】
図４には再度、センサ一体表示デバイス１００、データ転送デバイス２００及びアプリケーション動作デバイス３００を示している。
【００３４】
ここでは、データ転送デバイス２００とアプリケーション動作デバイス３００の内部構成例をさらに示している。
【００３５】
データ転送デバイス２００は、大きく分けてドライバー２１０と、センサ信号検出器２５０を有する。ドライバー２１０、センサ信号検出器２５０の名称は、これに限定されるものではなく、表示器ドライバーＩＣ，タッチＩＣと称されてもよい。ブロックは別々に示されているが、一体に構成され、１チップとしてされてもよい。
【００３６】
ドライバー２１０は、アプリケーション動作デバイス３００から表示用データを受け取る。表示用データは、時分割されておりブランキング期間を備える。表示用データは、バッファとしてのビデオランダムアクセスメモリ（ＶＲＡＭ）２１１を介して、タイミング回路及びデジタルアナログ変換器２１２に入力される。本システムでは、ＶＲＡＭ２１１は、１フレーム以下の容量であってもよい。
【００３７】
アナログ量としての表示用信号ＳｉｇＸは、出力増幅器２１３で増幅されて、表示素子に書き込むためにセンサ一体型表示デバイス１００に入力される。タイミング回路及びデジタルアナログ変換器２１２で検出されたブランキングの信号は、センサ信号検出器２５０のタイミング制御器２５１に入力する。このタイミング制御器２５１は、ドライバー２１０内に設けられてもよい、また同期化回路と称されてもよい。
【００３８】
タイミング制御器２５１は、前記表示用信号の任意の期間（例えばブランキング期間でも良い）にセンサを駆動するための駆動信号を生成する。この駆動信号は、出力増幅器２１４で増幅されてセンサ一体型表示デバイス１００に入力される。
【００３９】
駆動信号Ｔｘがセンサ用検出電極を駆動することにより、センサ信号Ｒｘがセンサ一体型表示デバイス１００から出力される。センサ信号Ｒｘは、センサ信号検出器２５０内の積分回路２５２に入力する。センサ信号Ｒｘは、積分回路２５２で基準電圧（閾値）Ｖｒｅｆと比較され、基準電位以上のレベルのセンサ信号Ｒｘは、コンデンサで積分され、積分出力が出力され、そして検出単位期間ごとにスイッチによりリセットされ、Ｒｘのアナログ出力を得ることができる。積分回路２５２の出力は、サンプルホールド及びアナログデジタル変換器２５３に入力され、デジタル化される。デジタル化された検出データは、デジタルフィルタ２５４を介して生のデータとして、アプリケーション動作デバイス３００に入力する。
【００４０】
検出データは、操作入力の検出データ及び操作入力の非検出データの両方を含む３次元データ（多値のデータ）である。プレゼンス検出器２５５は、例えばアプリケーション動作デバイスがスリープモードにあり、操作面上のタッチ座標の検出が行われていないときに機能する。プレゼンス検出器２５５は、何か接近物があるような場合、接近物を感知し、スリープモードを解除することができる。
【００４１】
アプリケーション動作デバイス３００は、検出データを受け取り解析し、解析結果に応じた前記表示用データを出力することができる、また、システムの動作機能を切り替えることができる。
【００４２】
アプリケーション動作デバイス３００は、各種のアプリケーションを展開して装置の動作手順の設定、機能切り替え、表示用信号の生成、切り替えなどを実行することができる。センサ信号検出器２５０から出力されたセンサ出力を用いて、座標演算処理を行い操作位置の解析を行うことができる。センサ出力は、イメージデータとして捉えられるので、アプリケーションにより３次元イメージデータが構築されることもできる。３次元イメージデータの登録処理、消去処理、確認処理なども実行できる。登録イメージデータと、取得したイメージデータを比較することにより、動作機能のロック及びロック解除を実行することもできる。
【００４３】
またセンサ出力を取得する場合、アプリケーション動作デバイス３００は、タイミング制御器２５１から出力されるセンサ検出用電極への駆動信号の周波数変更、駆動信号の出力タイミングを行うこともできる。これにより、アプリケーション動作デバイスは、センサ構成部品１５０の駆動領域の切り替え、駆動速度の設定を行うことができる。
【００４４】
また、アプリケーション動作デバイス３００は、センサ出力の検出密度、センサ出力に対する付加データの追加なども実行することができる。
【００４５】
図５Ａには、データ転送デバイス２００から出力される時分割の表示用データＳｉｇＸと、センサ駆動信号Ｔｘ（Ｔｘ１−Ｔｘｎ）のタイミングチャートの一例を示している。図５Ｂは、共通電極とセンサ用検出電極とを含むセンサ構成部品１５０を、共通電圧Ｖｃｏｍとセンサ駆動信号Ｔｘとが２次元スキャンを行う様子を模式的に示している。共通電圧Ｖｃｏｍは、共通電極１３に対して順次印加される。また共通電極１３には、任意の期間にセンサ出力を得るための駆動信号Ｔｘが与えられる。
【００４６】
アプリケーション動作デバイス３００から、表示用データＳｉｇｘとセンサ駆動信号Ｔｘとは、同じバスを介して時分割によりドライバー２１０に入力してもよい。タイミング回路及びデジタルアナログ変換器２１２で、表示用データＳｉｇｘとセンサ駆動信号Ｔｘが分離されてもよい。センサ駆動信号Ｔｘは、タイミング制御器２５１、増幅器２１４を介して先に説明した共通電極１３に供給される。タイミング制御器２５１からセンサ駆動信号Ｔｘを出力するタイミング、周波数などはアプリケーション動作デバイス３００の指令により変更することができる。またタイミング制御器２５１は、センサ信号検出器２５０の積分回路２５２に対してリセットタイミング信号を供給し、サンプルホールド及アナログデジタル変換器２５３、デジタルフィルタ２５４にクロックを供給することができる。
【００４７】
図６には、センサ出力の生データの例であり、操作入力が検出されていないときのデータをグラフ化した模式図を示している。
【００４８】
図７には、センサ出力の生データの例であり、操作入力が検出されたときのデータをグラフ化した模式図を示している。
【００４９】
上記のシステムにおいては、イメージデータは、例えば対象物（例えばユーザの指先）とタッチパネルとの遠近に応じて容量の変化があるので、座標情報のみならず、先の変化を物理量の変化として捕らえた３次元イメージデータとして取り扱うことができる。
【００５０】
したがって、使用するアプリケーションとしては、座標以外に立体的な形状認識のためのもの、或いは操作面上で物体が変動するような場合、物体の移動特性の認識などを行うもの等を使用することができる。この種のアプリケーションの場合は、３次元イメージデータを取り込む際の閾値の設定、閾値の可変などを行うことができる。つまり、本システムでは、アプリケーション動作デバイス側に受け渡す、或いは使用する３次元イメージデータを種々の形態に修正、調整、変更して使用することができ、多くの利用価値を生じる。
【００５１】
本装置は、第２のセンサの出力内容に応じて、前記操作面から入力を検出する第１のセンサの出力の処理形態を切り替える複数センサ出力判定部を有する。
【００５２】
図８は、例えば加速度センサが第２のセンサ５００として設けられている例を示している。アプリケーション動作デバイス３００には、複数センサ出力判定部３５０が構築されている。データ転送デバイス２００から出力される第１のセンサの出力データは、イメージデータ受信部３５１で受信され、座標演算部３５２で座標演算される。この座標演算に基づいて、操作面に対するタッチ位置を特定することができる。第２のセンサ５００は、例えば加速度センサである。判定部３５３は、第１のセンサからのセンサ出力と加速度センサからの加速度検出データがあった場合は、ユーザが操作面を操作したもの判定する。特に第２のセンサ５００からインパルス的な出力が得られた場合は、ユーザが操作面にタッチし衝撃が有ったものと判断してもよい。第２のセンサ５００からのインパルス出力を確実に識別するために、閾値以上のパルスを採用してもよい。これはユーザが端末を持ち移動しているようなときに第２のセンサ５００から出力される振動波を除去するためである。
【００５３】
このときは座標演算結果が、座標データ採用部３５６に送られて実際に使用される。しかし、加速度センサからの加速度検出データが得られない場合は、計算されている座標データは、破棄部３５４で破棄される。
【００５４】
上記の複数センサ出力判定部３５０を設けることにより、操作面に対する操作入力の有無を第２のセンサ５００により確実に判定することができる。このためにアプリケーション動作デバイス３００は、誤り入力を防止し、信頼性の高い操作入力情報を処理することができる。
【００５５】
なお第２のセンサ５００は、アプリケーション動作デバイス３００により、そのオンオフ、動作モードなどが制御されることができる。
【００５６】
図９は、他の実施形態である。この実施形態では、第２のセンサ５００として例えば赤外線による近接センサ、或いは磁気や電界などによる近接センサが用いられた例である。
【００５７】
近接センサは、例えばユーザが操作面に近づいたこと、或いは、磁気や電界などをさえぎるものが操作面に近づいたことを検出することができる。操作面にユーザ或いは物体が近づいた場合には、判定部３６１は、何らかの入力操作が開始されるものと判定する。従って、判定部３６１は、第２のセンサ５００から検出データが入力された場合、起動指示部３６３を介して例えばデータ転送デバイス２００を起動し、またイメージデータ受信部３６４の動作を開始させる。これにより、イメージデータ受信部３６４で受信された第１のセンサからの検出データは、座標演算部３６５に送られる。判定部３６１は、第２のセンサ５００からの検出信号が存在しない場合は、待機指令部３６２を介して装置を待機状態に制御する。
【００５８】
図１０は、さらに他の実施形態である。この実施形態では、第２のセンサ５００として例えば撮像カメラがセンサとして用いられた例である。撮像カメラは、装置の前面に対峙する人物の顔画像データを取り込むことができる。撮像カメラが画像データを取り込んだ場合、比較部３７３において、予め登録している画像データとの対比が行われる。これにより、特定のユーザの認証が行われる。認証結果で、許可信号が得られた場合、イメージデータ受信部３６４にて、操作面からの操作入力の受付が開始される。これにより、イメージデータ受信部３６４で受信された第１のセンサからの検出データは、座標演算部３６５に送られる。比較部３７３において、認証が不成功であった場合、警告部３６５による警告（例えば音声による警告）が行われ、装置は待機状態に移行する。
【００５９】
図１１は、さらにまた他の実施形態である。この実施形態では、第２のセンサ５００として加速度センサ又は振動センサとして称してもよいが用いられた例である。振動センサから得られた振動検知データは、振動周波数判断部３８１に入力される。例えばスタイラスなどを用いた操作入力が、特定の強い振動のために途切れる可能性もある。このような場合は、センサ出力スライスレベル制御部３８２を介して、特定の周波数の振動に対応して、センサ出力のスライスレベルを調整し、途切れをなくす対策を施してもよい。例えば、連続する特定の周波数の振動が検出されている場合は、振動の大きい乗り物などに乗車していることが考えられる。このような場合、例えば、振動対策入力モードに切り替えて、上記の途切れをなくす対策を施してもよい。
【００６０】
センサとしては、ジャイロを用いたセンサ、重力センサ、気圧センサ、温度センサなどがある。したがって、上記した第２のセンサとしての複数のセンサ出力をさらに組み合わせて採用してもよい。また温度や気圧センサの出力は、警告・非常事態の情報発信源として利用されてもよい。
【００６１】
なお、上記の説明では、センサ付き表示デバイスが表示デバイスとして液晶表示デバイスを備えた構成について説明したが、有機エレクトロルミネッセンス表示デバイスなど他の表示デバイスを備えた構成であっても良い。また、図２などに示した例では、液晶表示デバイスは、画素電極ＰＥ及び共通電極ＣＥの双方がアレイ基板ＡＲに備えられた構成、すなわち、ＩＰＳ（Ｉｎ−Ｐｌａｎｅ  Ｓｗｉｔｃｈｉｎｇ）モードやＦＦＳ（Ｆｒｉｎｇｅ  Ｆｉｅｌｄ  Ｓｗｉｔｃｈｉｎｇ）モードなどの主として横電界（フリンジ電界も含む）を利用する構成について説明したが、液晶表示デバイスの構成はこれらに限らない。少なくとも画素電極ＰＥはアレイ基板ＡＲに備えられ、共通電極ＣＥはアレイ基板ＡＲ及び対向基板ＣＴのいずれに備えられていても良い。ＴＮ（Ｔｗｉｓｔｅｄ  Ｎｅｍａｔｉｃ）モード、ＯＣＢ（Ｏｐｔｉｃａｌｌｙ  Ｃｏｍｐｅｎｓａｔｅｄ  Ｂｅｎｄ）モード、ＶＡ（Ｖｅｒｔｉｃａｌ  Ａｌｉｇｎｅｄ）モードなどの主として縦電界を利用する構成の場合、共通電極ＣＥは対向基板ＣＴに備えられる。つまり、共通電極ＣＥが配置される位置は、ＴＦＴ基板１２を構成する絶縁基板と対向基板ＣＴを構成する絶縁基板１４との間であれば良い。
【００６２】
上記した説明において、各ブロック、及び部品の名称は、記載されたものに限定されるものではない。また、ブロックの単位、部品の単位も上記した単位区切り限定されるものではなく、複合的に表されても良いし、さらに区分されて細かい単位で表されてもよい。用語においても「部」は、「装置」、「器」、「ブロック」及び「モジュール」に相互に置き換えても本発明の範疇であることは勿論である。さらにまた、請求項の各構成要素において、構成要素を分割して表現した場合、或いは複数を合わせて表現した場合、或いはこれらを組み合わせて表現した場合であっても本発明の範疇である。また請求項を方法として表現した場合であっても本発明の装置を適用したものである。
【００６３】
本発明のいくつかの実施形態を説明したが、これらの実施形態は例として提示したものであり、発明の範囲を限定することは意図していない。これら新規な実施形態は、その他の様々な形態で実施されることが可能であり、発明の要旨を逸脱しない範囲で、種々の省略、置き換え、変更を行うことができる。さらにまた、請求項の各構成要素において、構成要素を分割して表現した場合、或いは複数を合わせて表現した場合、或いはこれらを組み合わせて表現した場合であっても本発明の範疇である。また請求項を方法、ステップ、或いはプログラムとして表現した場合であっても本発明の装置を適用したものである。
【００６４】
これら実施形態やその変形は、発明の範囲や要旨に含まれるとともに、特許請求の範囲に記載された発明とその均等の範囲に含まれる。
【符号の説明】
【００６５】
１・・・携帯端末、１００・・・センサ一体型表示デバイス、２００・・・データ転送デバイス、３００・・・アプリケーション動作デバイス、２１０・・・ドライバー、２５０・・・センサ信号検出器、５００・・・第２のセンサ、３５０・・・複数センサ出力判定部。
【図１】
2014199494.tif 000003
【図２Ａ】
2014199494.tif 000004
【図２Ｂ】
2014199494.tif 000005
【図３】
2014199494.tif 000006
【図４】
2014199494.tif 000007
【図５Ａ】
2014199494.tif 000008
【図５Ｂ】
2014199494.tif 000009
【図６】
2014199494.tif 000010
【図７】
2014199494.tif 000011
【図８】
2014199494.tif 000012
【図９】
2014199494.tif 000013
【図１０】
2014199494.tif 000014
【図１１】
2014199494.tif 000015