(57)【要約】【課題】ユーザにとってタッチパネルに表示されているボタンが押下し易い表示装置を提供する。【解決手段】表示装置１００は、タッチパネル１４０と、タッチパネル１４０に対する接触位置を検知する検知手段１１１と、検知手段１１１がタッチパネル１４０の第１のエリアに対する第１の接触位置を検知したときに、ボタンをタッチパネル１４０の第２のエリアに表示させる表示制御手段１１４と、検知手段１１１がタッチパネル１４０を介してボタンに対する第２の接触位置を検知するとボタンの押下を受け付ける受付手段１１２とを備える。【選択図】図１４
2010266937.tif 000002
【特許請求の範囲】
【請求項１】
タッチパネルと、
前記タッチパネルに対する接触位置を検知する検知手段と、
前記検知手段が前記タッチパネルの第１のエリアに対する第１の接触位置を検知したときに、ボタンを前記タッチパネルの第２のエリアに表示させる表示制御手段と、
前記検知手段が前記タッチパネルを介して前記ボタンに対する第２の接触位置を検知すると前記ボタンの押下を受け付ける受付手段とを備える、表示装置。
【請求項２】
前記検知手段は、前記タッチパネルに対する複数の接触位置を検知し、
前記受付手段は、前記検知手段が前記第１の接触位置を検知しているときに前記第２の接触位置を検知すると前記ボタンの押下を受け付ける、請求項１に記載の表示装置。
【請求項３】
前記第１のエリアは、前記タッチパネルの右部および左部のいずれか一方に位置し、
前記第２のエリアは、前記タッチパネルの右部および左部の他方に位置する、請求項１または２に記載の表示装置。
【請求項４】
前記表示制御手段は、前記検知手段が前記タッチパネルの第３のエリアに対する前記第１の接触位置を検知したときに、前記ボタンを第４のエリアに表示させる、請求項１から３のいずれかに記載の表示装置。
【請求項５】
前記第３のエリアは、前記タッチパネルの右部および左部の前記他方に位置し、
前記第４のエリアは、前記タッチパネルの右部および左部の前記いずれか一方に位置する、請求項４に記載の表示装置。
【請求項６】
前記表示制御手段は、前記検知手段が前記接触位置を検知しないときに、前記ボタンを前記タッチパネルの第５のエリアに表示させる、請求項１から５のいずれかに記載の表示装置。
【請求項７】
前記検知手段は、前記タッチパネルを用いて前記第１の接触位置の移動方向を取得し、
前記表示制御手段は、前記ボタンの表示位置を前記移動方向に移動する、請求項１から６のいずれかに記載の表示装置。
【請求項８】
前記タッチパネルは、
入射光に応じて第１の電気信号を生成する複数の光センサ回路と、
第２の電気信号に応じて光を発する複数の画素回路とを含み、
前記検知手段は、前記複数の光センサ回路からの前記第１の電気信号に基づき、前記接触位置を示す画像データを取得し、
前記表示制御手段は、前記第２の電気信号を前記複数の画素回路へ入力することによって、前記複数の画素回路に前記ボタンを表示させる、請求項１から７のいずれかに記載の表示装置。
【請求項９】
前記検知手段は、前記画像データに基づいて、前記タッチパネル上方の物体の位置を検知し、
前記表示制御手段は、前記物体の位置の下方のボタンをその他のボタンと異なる表示態様にて表示する、請求項８に記載の表示装置。
【請求項１０】
前記表示制御手段は、前記物体の位置の下方のボタンをその他のボタンよりも拡大して表示する、請求項９に記載の表示装置。
【請求項１１】
前記表示制御手段は、前記物体の位置の下方のボタン間の間隔を、他のボタン間の間隔よりも拡大して表示する、請求項９または１０に記載の表示装置。
【請求項１２】
タッチパネルと演算処理部とを備える表示装置における表示方法であって、
前記演算処理部が、前記タッチパネルへの接触位置を検知するステップと、
前記演算処理部が、前記タッチパネルの第１のエリアに対する第１の接触位置を検知したときに、ボタンを前記タッチパネルの第２のエリアに表示させるステップと、
前記演算処理部が、前記タッチパネルを介して前記ボタンに対する第２の接触位置を検知すると前記ボタンの押下を受け付けるステップとを備える、表示方法。
【請求項１３】
タッチパネルと演算処理部とを備える表示装置にボタンを表示させるための表示プログラムであって、
前記演算処理部に、
前記タッチパネルへの接触位置を検知するステップと、
前記タッチパネルの第１のエリアに対する第１の接触位置を検知したときに、ボタンを前記タッチパネルの第２のエリアに表示させるステップと、
前記タッチパネルを介して前記ボタンに対する第２の接触位置を検知すると前記ボタンの押下を受け付けるステップとを実行させる、表示プログラム。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、タッチパネルを介してボタンを表示するとともに、当該タッチパネルを介して当該ボタンに対する命令を受け付けるための表示装置、表示方法、および表示プログラムに関する。
【背景技術】
【０００２】
従来から、当該タッチパネルを介して画像やテキストを表示することができる表示装置が知られている。このような表示装置の中には、タッチパネルを用いてボタンを表す画像を表示するとともに、タッチパネルのうちのボタンを示すエリアへの接触を検知することによって当該ボタンに対応する命令を受け付けるものがある。
【０００３】
たとえば、特開２００６−１３９６１５号公報（特許文献１）には、表示装置、メニュー表示プログラムおよびタブ表示プログラムが開示されている。特開２００６−１３９６１５号公報（特許文献１）によると、表示画面に重なる入力領域を有するタッチ入力部を備えた表示装置において、第１のタッチのタッチ位置を中心としてほぼ環状に配置された複数のメニュー項目を含む円形メニューを表示画面上に表示する。第２のタッチに応じて、第１のタッチに対する第２のタッチの相対位置関係に応じて、どのメニュー項目が選択されたかを決定する。その際、円形メニューの表示完了前であっても第２のタッチを受け付ける。タブブラウザ画面内に１つのタブウィンドウとしてＴＶ画面を表示する際、ＴＶ画面がフロントとなっている場合となっていない場合とで、ＴＶ画面のタブウィンドウのタブのサイズおよび表示内容を変える。
【０００４】
また、特開２００８−２７１８３号公報（特許文献２）には、情報処理装置が開示されている。特開２００８−２７１８３号公報（特許文献２）によると、情報処理装置は、片手で保持可能な大きさの、主表面を有する概略長方体形状を有する扁平な筐体を含み、筐体は、主表面をはさんで配置された第１及び第２の側面を有する。情報処理装置はさらに、主表面に設けられた表示面を有する表示装置と、第１及び第２の側面に設けられ、第１及び第２の側面と人の手との接触領域の分布を検知するためのシート状の感圧センサと、感圧センサの出力に基づいて、表示装置により表示面上に表示される内容を制御するための制御部とを含む。
【０００５】
また、特開２００５−２６９２４３号公報（特許文献３）には、電子機器及びアイコン表示制御方法が開示されている。特開２００５−２６９２４３号公報（特許文献３）によると、メニュー選択画面には、アイコン、カーソル、インデックス、インジケータ、選択キーが表示されている。インジケータは、複数に分割された扇形部分による指標要素のそれぞれが全体のアイコン配列における各アイコンの位置に対応している。カーソルで指示されたアイコンに対応する扇形部分は、他の扇形部分とは識別可能に表示されている。操作者がシフトキーを押下する度に、アイコンおよびインデックスが回転移動し、カーソルにより指示されるアイコンが置き換わるのに伴い、そのアイコンに対応する扇形部分の色もしくは濃度が変化し、現在選択指示されているアイコンが明瞭に示される。
【０００６】
また、特開平６−５１９０８号公報（特許文献４）には、タッチパネル式入力装置を備えた情報処理装置が開示されている。特開平６−５１９０８号公報（特許文献４）によると、指によるタッチ位置から所定方向に所定距離隔てた位置に、ポインタ（矢印）を表示する。指の位置を動かすことで、ポインタの位置を選択項目に合わせることにより、指で隠れない状態で、目で確認しながら、選択項目を指定することを可能にする。したがって、指定したい項目を正確に指示することができ、またポインタの指示点の大きさに応じて、選択項目の間隔を狭めることができるようになる。
【先行技術文献】
【特許文献】
【０００７】
【特許文献１】特開２００６−１３９６１５号公報
【特許文献２】特開２００８−２７１８３号公報
【特許文献３】特開２００５−２６９２４３号公報
【特許文献４】特開平６−５１９０８号公報
【発明の概要】
【発明が解決しようとする課題】
【０００８】
しかしながら、タッチパネルの大きさ、あるいはボタンが表示されるエリアの大きさによっては、ユーザの指がタッチパネルに表示されているボタンを押下し難い場合がある。たとえば、ボタンが広いエリア渡って表示されている場合、小さい手を有するユーザの指が全てのボタンに届かない虞がある。
【０００９】
本発明は、このような問題を解決するためになされたものであり、その目的は、ユーザにとってタッチパネルに表示されているボタンが押下し易い表示装置、表示方法、および表示プログラムを提供することである。
【課題を解決するための手段】
【００１０】
この発明のある局面に従うと、表示装置が提供される。表示装置は、タッチパネルと、  タッチパネルに対する接触位置を検知する検知手段と、検知手段がタッチパネルの第１のエリアに対する第１の接触位置を検知したときに、ボタンをタッチパネルの第２のエリアに表示させる表示制御手段と、検知手段がタッチパネルを介してボタンに対する第２の接触位置を検知するとボタンの押下を受け付ける受付手段とを備える。
【００１１】
好ましくは、検知手段は、タッチパネルに対する複数の接触位置を検知する。受付手段は、検知手段が第１の接触位置を検知しているときに第２の接触位置を検知するとボタンの押下を受け付ける。
【００１２】
好ましくは、第１のエリアは、タッチパネルの右部および左部のいずれか一方に位置する。第２のエリアは、タッチパネルの右部および左部の他方に位置する。
【００１３】
好ましくは、表示制御手段は、検知手段がタッチパネルの第３のエリアに対する第１の接触位置を検知したときに、ボタンを第４のエリアに表示させる。
【００１４】
好ましくは、第３のエリアは、タッチパネルの右部および左部の他方に位置する。第４のエリアは、タッチパネルの右部および左部のいずれか一方に位置する。
【００１５】
好ましくは、表示制御手段は、検知手段が接触位置を検知しないときに、ボタンをタッチパネルの第５のエリアに表示させる。
【００１６】
好ましくは、検知手段は、タッチパネルを用いて第１の接触位置の移動方向を取得する。表示制御手段は、ボタンの表示位置を移動方向に移動する。
【００１７】
好ましくは、タッチパネルは、入射光に応じて第１の電気信号を生成する複数の光センサ回路と、第２の電気信号に応じて光を発する複数の画素回路とを含む。検知手段は、複数の光センサ回路からの第１の電気信号に基づき、接触位置を示す画像データを取得する。表示制御手段は、第２の電気信号を複数の画素回路へ入力することによって、複数の画素回路にボタンを表示させる。
【００１８】
好ましくは、検知手段は、画像データに基づいて、タッチパネル上方の物体の位置を検知する。表示制御手段は、物体の位置の下方のボタンをその他のボタンと異なる表示態様にて表示する。
【００１９】
好ましくは、表示制御手段は、物体の位置の下方のボタンをその他のボタンよりも拡大して表示する。
【００２０】
好ましくは、表示制御手段は、物体の位置の下方のボタン間の間隔を、他のボタン間の間隔よりも拡大して表示する。
【００２１】
この発明の別の局面に従うと、タッチパネルと演算処理部とを備える表示装置における表示方法が提供される。表示方法は、演算処理部が、タッチパネルへの接触位置を検知するステップと、演算処理部が、タッチパネルの第１のエリアに対する第１の接触位置を検知したときに、ボタンをタッチパネルの第２のエリアに表示させるステップと、演算処理部が、タッチパネルを介してボタンに対する第２の接触位置を検知するとボタンの押下を受け付けるステップとを備える。
【００２２】
この発明の別の局面に従うと、タッチパネルと演算処理部とを備える表示装置にボタンを表示させるための表示プログラムが提供される。表示プログラムは、演算処理部に、タッチパネルへの接触位置を検知するステップと、タッチパネルの第１のエリアに対する第１の接触位置を検知したときに、ボタンをタッチパネルの第２のエリアに表示させるステップと、タッチパネルを介してボタンに対する第２の接触位置を検知するとボタンの押下を受け付けるステップとを実行させる。
【発明の効果】
【００２３】
以上のように、本発明によって、ユーザにとってタッチパネルに表示されているボタンが押下し易い表示装置、表示方法、および表示プログラムが提供される。
【図面の簡単な説明】
【００２４】
【図１】実施の形態１に係る表示装置の第１の動作概要を示すイメージ図である。
【図２】実施の形態１に係る表示装置の第２の動作概要を示すイメージ図である。
【図３】本実施の形態に係る表示装置のハードウェア構成を表わすブロック図である。
【図４】タッチパネルの構成と当該タッチパネルの周辺回路とを示した図である。
【図５】タッチパネルとバックライトとの断面図である。
【図６】光センサ回路を動作させる際のタイミングチャートを示した図である。
【図７】スキャンの際にフォトダイオードがバックライトからの光を受光する構成を示した断面図である。
【図８】センシングコマンドの概略構成を示した図である。
【図９】センシングコマンドの各領域におけるデータの値と当該値が示す意味内容とを示した図である。
【図１０】応答データの概略構成を示した図である。
【図１１】指をスキャンすることにより得られた画像を示した図である。
【図１２】光センサ内蔵液晶パネルの変形例を示す回路図である。
【図１３】スキャンの際にフォトダイオードが外光を受光する構成を示した断面図である。
【図１４】本実施の形態に係る表示装置の機能構成を示すブロック図である。
【図１５】実施の形態１に係る表示装置における表示処理の処理手順を示す第１のフローチャートである。
【図１６】実施の形態１に係る表示装置における表示処理の処理手順を示す第２のフローチャートである。
【図１７】実施の形態２に係る表示装置の第３の動作概要を示すイメージ図である。
【図１８】実施の形態２に係る表示装置における表示処理の処理手順を示すフローチャートである。
【発明を実施するための形態】
【００２５】
以下、図面を参照しつつ、本発明の実施の形態について説明する。以下の説明では、同一の部品には同一の符号を付してある。それらの名称および機能も同じである。したがって、それらについての詳細な説明は繰り返さない。
【００２６】
［実施の形態１］
＜表示装置１００の概略構成＞
まず、図１を参照して、タッチパネルを有する表示装置の一例としての、本実施の形態に係る光センサ内蔵液晶パネル１４０（以下、タッチパネル１４０ともいう。）を有する表示装置１００の概略構成について説明する。なお、表示装置１００は、ＰＤＡ（Personal Digital Assistant）、パーソナルコンピュータ、携帯型電話機、電子辞書などの情報機器によって実現される。
【００２７】
図１は、本実施の形態に係る表示装置１００の第１の動作概要を示すイメージ図である。より詳細には、図１（Ａ）は、通常時において複数のボタン（以下、ボタン群１４０Ａともいう。）がタッチパネル１４０の中央に表示されているときのタッチパネル１４０の画面を示すイメージ図である。図１（Ｂ）は、ユーザの右手の親指９００Ｒがタッチパネル１４０の右部にタッチしたときのタッチパネル１４０の画面を示す。図１（Ｃ）は、ユーザの左手の親指９００Ｌがボタン群１４０Ａの上方に位置した（タッチしていない）ときのタッチパネル１４０の画面を示す。図１（Ｄ）は、ユーザの左手の親指９００Ｌがボタンにタッチしたときのタッチパネル１４０の画面を示す。図１（Ｅ）は、ユーザの左手の親指９００Ｌがタッチパネル１４０の左部にタッチしたときのタッチパネル１４０の画面を示す。図１（Ｆ）は、ユーザの右手の親指９００Ｒがボタン群１４０Ａの上方に位置した（タッチしていない）ときのタッチパネル１４０の画面を示す。図１（Ｇ）は、ユーザの右手の親指９００Ｒがボタンにタッチしたときのタッチパネル１４０の画面を示す。
【００２８】
図１を参照して、表示装置１００は、タッチパネル１４０を含む。タッチパネル１４０は、ユーザの指やスタイラスペンなどをよるタッチ操作を受け付ける。表示装置１００は、タッチパネル１４０を介して当該タッチ操作に対応する命令を実行する。本実施の形態に係るタッチパネル１４０は、外部の物体とタッチパネル１４０との接触位置（接触領域）を検知することができる。タッチパネル１４０は、本実施の形態に係る光センサ内臓液晶パネル１４０であってもよいし、多数の接触位置が検知できる静電容量方式や赤外線方式のタッチパネルであっても良い。
【００２９】
＜表示装置１００の動作概要１＞
次に、本実施の形態に係る表示装置１００の第１の動作概要について説明する。まず、図１（Ａ）を参照して、表示装置１００は、ユーザの指がタッチパネル１４０に触れていない状態（以下、通常状態ともいう。）においては、ボタン群１４０Ａをタッチパネル１４０の中央に表示する。
【００３０】
通常状態においてユーザの右手の親指９００Ｒがタッチパネル１４０の右部にタッチすると、図１（Ｂ）に示すように、表示装置１００はボタン群１４０Ａをタッチパネル１４０の左部に表示する。これによって、ユーザは、左手の親指９００Ｌによってボタン群１４０Ａに含まれるボタンを押下し易くなる。
【００３１】
ユーザの左手の親指９００Ｌがボタン群１４０Ａの上方に位置すると、図１（Ｃ）に示すように、表示装置１００は、ユーザの左手の親指９００Ｌの先端の下方に位置するボタンを拡大して表示する。このとき、表示装置１００は、ユーザの左手の親指９００Ｌの下方に位置するボタン間の間隔を大きくする。これによって、ユーザがボタンを押し間違え難くなる。図１（Ｄ）に示すように、ユーザの左手の親指９００Ｌがタッチパネル１４０上のボタンにタッチすると、表示装置１００は、当該ボタンに対応する命令の入力を受け付ける。
【００３２】
一方、通常状態においてユーザの左手の親指９００Ｌがタッチパネル１４０の左部にタッチすると、図１（Ｅ）に示すように、表示装置１００はボタン群１４０Ａをタッチパネル１４０の右部に表示する。これによって、ユーザは、右手の親指９００Ｒによってボタン群１４０Ａに含まれるボタンを押下し易くなる。
【００３３】
ユーザの右手の親指９００Ｒがボタン群１４０Ａの上方に位置すると、図１（Ｆ）に示すように、表示装置１００は、ユーザの右手の親指９００Ｒの下方に位置するボタンを拡大して表示する。このとき、表示装置１００は、ユーザの右手の親指９００Ｒの下方に位置するボタン間の間隔を大きくする。これによって、ユーザがボタンを押し間違え難くなる。図１（Ｇ）に示すように、ユーザの右手の親指９００Ｒがタッチパネル１４０上のボタンにタッチすると、表示装置１００は、当該ボタンに対応する命令の入力を受け付ける。
【００３４】
このように、本実施の形態に係る表示装置１００は、タッチパネル１４０のうち、ユーザが最初に一方の指（９００Ｒ）でタッチしたサイドと逆のサイドにボタン群１４０Ａを表示するため、ユーザが他方の指（９００Ｌ）でボタン群１４０Ａに含まれるボタンを押下し易くなる。また、通常状態において、ユーザが誤ってタッチパネル１４０にタッチしてしまっても、表示装置１００は最初のタッチに対する命令を受け付けないため、表示装置１００への命令の誤入力も防止することができる。たとえば、ユーザがカバンから表示装置１００を取り出す際などに、ユーザが誤った命令を表示装置１００に入力することを防止することができる。
【００３５】
＜表示装置１００の動作概要２＞
さらに、本実施の形態に係る表示装置１００は、以下のような機能も有する。図２は、本実施の形態に係る表示装置１００の第２の動作概要を示すイメージ図である。より詳細には、図２（Ａ）は、図１（Ｂ）と同様に、ユーザの右手の親指９００Ｒがタッチパネル１４０の右部にタッチしたときのタッチパネル１４０の画面を示す。図２（Ｂ）は、ユーザの右手の親指９００Ｒが左下方向にスライドしたときのタッチパネル１４０の画面を示す。図２（Ｃ）は、ユーザの左手の親指９００Ｌがボタン群１４０Ａの上方に位置した（タッチしていない）ときのタッチパネル１４０の画面を示す。図２（Ｄ）は、ユーザの右手の親指９００Ｒが左上方向にスライドしたときのタッチパネル１４０の画面を示す。図２（Ｅ）は、ユーザの右手の親指９００Ｒがボタン群１４０Ａの上方に位置した（タッチしていない）ときのタッチパネル１４０の画面を示す。
【００３６】
まず、図２（Ａ）に示す状態においては、すなわち図１（Ｂ）に示す状態においては、表示装置１００がボタン群１４０Ａをタッチパネル１４０の左部に表示している。この状態において、図２（Ｂ）に示すようにユーザが右手の親指９００Ｒを左下にスライドさせると、表示装置１００はボタン群１４０Ａを全体的に縮小して、当該縮小したボタン群１４０Ａをタッチパネル１４０の左下に表示する。これによって、手が小さい（指が短い）ユーザであっても、容易にボタン群１４０Ａに含まれるボタンを押下することができるようになる。すなわち、図２（Ａ）に示す状態よりも、ユーザの左手の親指９００Ｌがボタン群１４０Ａに含まれるボタンに届き易くなる。
【００３７】
ユーザの左手の親指９００Ｌがボタン群１４０Ａの上方に位置すると、図２（Ｃ）に示すように、表示装置１００は、ユーザの左手の親指９００Ｌの下方に位置するボタンを拡大して表示する。このとき、表示装置１００は、ユーザの左手の親指９００Ｌの下方に位置するボタン間の間隔を大きくする。これによって、ユーザがボタンを押し間違え難くなる。図示しないが、図１（Ｄ）と同様に、ユーザの左手の親指９００Ｌがタッチパネル１４０上のボタンにタッチすると、表示装置１００は、当該ボタンに対応する命令の入力を受け付ける。
【００３８】
一方、図２（Ａ）に示す状態において、図２（Ｄ）に示すようにユーザが右手の親指９００Ｒを左上にスライドさせると、表示装置１００はボタン群１４０Ａを全体的に縮小して、当該縮小したボタン群１４０Ａをタッチパネル１４０の左上に表示する。これによって、手が小さい（指が短い）ユーザであっても、容易にボタン群１４０Ａに含まれるボタンを押下することができるようになる。すなわち、図２（Ａ）に示す状態よりも、ユーザの左手の親指９００Ｌがボタン群１４０Ａに含まれるボタンに届き易くなる。
【００３９】
ユーザの左手の親指９００Ｌがボタン群１４０Ａの上方に位置すると、図２（Ｅ）に示すように、表示装置１００は、ユーザの左手の親指９００Ｌの下方に位置するボタンを拡大して表示する。このとき、表示装置１００は、ユーザの左手の親指９００Ｌの下方に位置するボタン間の間隔を大きくする。これによって、ユーザがボタンを押し間違え難くなる。図示しないが、図１（Ｄ）と同様に、ユーザの左手の親指９００Ｌがタッチパネル１４０上のボタンにタッチすると、表示装置１００は、当該ボタンに対応する命令の入力を受け付ける。
【００４０】
なお、ユーザが右手の親指９００Ｒを右上や右下などにスライドさせた場合の動作については、上記の動作に基づいて容易に想像できるものであるため、ここでは詳細な説明を繰り返さない。また、図１（Ｅ）に示す状態において、ユーザが左手の親指９００Ｌをスライドさせた場合の動作についても、上記の動作に基づいて容易に想像できるものであるため、ここでは詳細な説明を繰り返さない。
【００４１】
以下、このような機能を実現するための構成について詳述する。
＜表示装置１００のハードウェア構成＞
次に、本実施の形態に係る表示装置１００の具体的構成の一態様について説明する。図３は、本実施の形態に係る表示装置１００のハードウェア構成を表わすブロック図である。図３を参照して、表示装置１００は、主たる構成要素として、本体ユニット１０１と、表示ユニット１０２とを含む。
【００４２】
本体ユニット１０１は、ＣＰＵ（Central  Processing  Unit）１１０と、ＲＡＭ（Random  Access  Memory）１７１と、ＲＯＭ（Read-Only  Memory）１７２と、メモリカードリーダライタ１７３と、通信部１７４と、マイク１７５と、スピーカ１７６と、操作キー１７７とを含む。各構成要素は、相互にデータバスＤＢ１によって接続されている。メモリカードリーダライタ１７３には、メモリカード１７３１が装着される。
【００４３】
ＣＰＵ１１０は、プログラムを実行する。操作キー１７７は、表示装置１００のユーザによる指示の入力を受ける。ＲＡＭ１７１は、ＣＰＵ１１０によるプログラムの実行により生成されたデータ、または操作キー１７７を介して入力されたデータを揮発的に格納する。ＲＯＭ１７２は、データを不揮発的に格納する。また、ＲＯＭ１７２は、ＥＰＲＯＭ（Erasable  Programmable  Read-Only  Memory）やフラッシュメモリなどの書き込みおよび消去が可能なＲＯＭである。通信部１７４は、図示しない他の電子機器との間で無線通信を行なう。なお、図３には図示していないが、表示装置１００が、他の電子機器に有線により接続するためのインターフェイス（ＩＦ）を含む構成としてもよい。
【００４４】
表示ユニット１０２は、ドライバ１３０と、光センサ内蔵液晶パネル１４０（タッチパネル１４０）と、内部ＩＦ１７８と、バックライト１７９と、画像処理エンジン１８０とを含む。
【００４５】
ドライバ１３０は、タッチパネル１４０およびバックライト１７９を駆動するための駆動回路である。ドライバ１３０に含まれる各種の駆動回路については、後述する。
【００４６】
タッチパネル１４０は、液晶ディスプレイの機能と光センサの機能とを備えたデバイスである。つまり、タッチパネル１４０は、液晶を用いた画像の表示と、光センサを用いたセンシングとを行なうことができる。タッチパネル１４０の詳細については、後述する。
【００４７】
内部ＩＦ（Interface）１７８は、本体ユニット１０１と表示ユニット１０２との間で、データの遣り取りを仲介する。
【００４８】
バックライト１７９は、タッチパネル１４０の裏面に配置された光源である。バックライト１７９は、当該裏面に対して均一な光を照射する。
【００４９】
画像処理エンジン１８０は、ドライバ１３０を介してタッチパネル１４０の動作を制御する。ここで、当該制御は、内部ＩＦ１７８を介して本体ユニット１０１から送られてくる各種データに基づいて行われる。なお、当該各種データは、後述するコマンドを含む。また、画像処理エンジン１８０は、タッチパネル１４０から出力されるデータを処理し、処理したデータを内部ＩＦ１７８を介して本体ユニット１０１に送る。さらに、画像処理エンジン１８０は、ドライバ制御部１８１と、タイマ１８２と、信号処理部１８３とを含む。
【００５０】
ドライバ制御部１８１は、ドライバ１３０に対して制御信号を送ることによりドライバ１３０の動作を制御する。また、ドライバ制御部１８１は、本体ユニット１０１から送られてくるコマンドを解析する。そして、ドライバ制御部１８１は、当該解析の結果に基づいた制御信号をドライバ１３０に送る。ドライバ１３０の動作の詳細については、後述する。
【００５１】
タイマ１８２は、時刻情報を生成し、信号処理部１８３に対して時刻情報を送る。
信号処理部１８３は、上記光センサから出力されるデータを受け取る。ここで、上記光センサから出力されるデータはアナログデータであるため、信号処理部１８３は、まず当該アナログデータをデジタルデータに変換する。さらに、信号処理部１８３は、当該デジタルデータに対して、本体ユニット１０１から送られてくるコマンドの内容に応じたデータ処理を行なう。そして、信号処理部１８３は、上記データ処理を行った後のデータと、タイマ１８２から取得した時刻情報とを含んだデータ（以下、応答データと称する）を本体ユニット１０１に送る。また、信号処理部１８３は、後述するスキャンデータを連続して複数格納できるＲＡＭ（図示せず）を備えている。
【００５２】
上記コマンドは、上記光センサによりセンシングを指示するセンシングコマンドを含む。当該センシングコマンドの詳細および上記応答データの詳細については、後述する（図８〜図１０）。
【００５３】
なお、タイマ１８２は、必ずしも画像処理エンジン１８０に備えられている必要はない。たとえば、タイマ１８２は、表示ユニット１０２内における、画像処理エンジン１８０の外部に備えられていてもよい。あるいは、タイマ１８２は、本体ユニット１０１に備えられていてもよい。また、マイク１７５およびスピーカ１７６は、表示装置１００が常に含む構成ではなく、表示装置１００の実施例によっては、マイク１７５およびスピーカ１７６のいずれかあるいは両方を有さない構成であってもよい。
【００５４】
ここで、表示ユニット１０２は、システム液晶を含んでいる。なお、システム液晶とは、タッチパネル１４０の周辺機器を当該タッチパネル１４０のガラス基板上に一体形成することにより得られるデバイスである。本実施の形態では、ドライバ１３０（バックライト１７９を駆動する回路を除く）と、内部ＩＦ１７８と、画像処理エンジン１８０とが、タッチパネル１４０のガラス基板上に一体形成されている。なお、表示ユニット１０２が、必ずしもシステム液晶を用いて構成されている必要はなく、ドライバ１３０（バックライト１７９を駆動する回路を除く）と、内部ＩＦ１７８と、画像処理エンジン１８０とが、上記ガラス基板以外の基板に構成されていてもよい。
【００５５】
ところで、表示装置１００における処理は、各ハードウェアおよびＣＰＵ１１０により実行されるソフトウェアによって実現される。このようなソフトウェアは、ＲＯＭ１７２に予め記憶されている場合がある。また、ソフトウェアは、メモリカード１７３１その他の記憶媒体に格納されて、プログラム製品として流通している場合もある。あるいは、ソフトウェアは、いわゆるインターネットに接続されている情報提供事業者によってダウンロード可能なプログラム製品として提供される場合もある。このようなソフトウェアは、メモリカードリーダライタ１７３その他の読取装置によりその記憶媒体から読み取られて、あるいは、通信部１７４または通信ＩＦ（図示せず）を介してダウンロードされた後、ＲＯＭ１７２に一旦格納される。そのソフトウェアは、ＣＰＵ１１０によってＲＯＭ１７２から読み出され、ＲＡＭ１７１に実行可能なプログラムの形式で格納される。ＣＰＵ１１０は、そのプログラムを実行する。
【００５６】
図３に示される表示装置１００の本体ユニット１０１を構成する各構成要素は、一般的なものである。したがって、本実施の形態の本質的な部分は、ＲＡＭ１７１、ＲＯＭ１７２、メモリカード１７３１その他の記憶媒体に格納されたソフトウェア、あるいはネットワークを介してダウンロード可能なソフトウェアであるともいえる。なお、表示装置１００の本体ユニット１０１のハードウェアの動作は周知であるので、詳細な説明は繰り返さない。
【００５７】
なお、記憶媒体としては、メモリカードに限られず、ＣＤ−ＲＯＭ、ＦＤ（Flexible  Disk）、ハードディスク、磁気テープ、カセットテープ、光ディスク（ＭＯ（Magnetic  Optical  Disc）／ＭＤ（Mini  Disc）／ＤＶＤ（Digital  Versatile  Disc））、ＩＣ（Integrated  Circuit）カード（メモリカードを除く）、光カード、マスクＲＯＭ、ＥＰＲＯＭ、ＥＥＰＲＯＭ（Electronically  Erasable  Programmable  Read-Only  Memory）、フラッシュＲＯＭなどの半導体メモリ等の固定的にプログラムを格納する媒体でもよい。
【００５８】
ここでいうプログラムとは、ＣＰＵにより直接実行可能なプログラムだけでなく、ソースプログラム形式のプログラム、圧縮処理されたプログラム、暗号化されたプログラム等を含む。
【００５９】
＜タッチパネル１４０の構成および駆動について＞
次に、タッチパネル１４０の構成と、当該タッチパネル１４０の周辺回路の構成とについて説明する。図４は、タッチパネル１４０の構成と、当該タッチパネル１４０の周辺回路とを示した図である。
【００６０】
図４を参照して、タッチパネル１４０は、画素回路１４１と、光センサ回路１４４と、走査信号線Ｇｉと、データ信号線ＳＲｊと、データ信号線ＳＧｊと、データ信号線ＳＢｊと、センサ信号線ＳＳｊと、センサ信号線ＳＤｊと、読出信号線ＲＷｉと、リセット信号線ＲＳｉとを含む。なお、ｉは、１≦ｉ≦ｍを満たす自然数であり、ｊは１≦ｊ≦ｎを満たす自然数である。
【００６１】
また、図３に示した表示ユニット１０２のドライバ１３０は、タッチパネル１４０の周辺回路として、走査信号線駆動回路１３１と、データ信号線駆動回路１３２と、光センサ駆動回路１３３と、スイッチ１３４と、アンプ１３５とを含む。
【００６２】
走査信号線駆動回路１３１は、図３に示すドライバ制御部１８１から制御信号ＴＣ１を受ける。そして、走査信号線駆動回路１３１は、制御信号ＴＣ１に基づき、各走査信号線（Ｇ１〜Ｇｍ）に対して、走査信号線Ｇ１から順に予め定められた電圧を印加する。より詳しくは、走査信号線駆動回路１３１は、単位時間毎に走査信号線（Ｇ１〜Ｇｍ）の中から１つの走査信号線を順次選択し、当該選択した走査信号線に対して後述するＴＦＴ（Thin  Film  Transistor）１４２のゲートをターンオンできるだけの電圧（以下、ハイレベル電圧）を印加する。なお、選択されていない走査信号線に対しては、ハイレベル電圧を印加することなく、ローレベル電圧を印加したままとする。
【００６３】
データ信号線駆動回路１３２は、図３に示すドライバ制御部１８１から画像データ（ＤＲ，ＤＧ，ＤＢ）を受ける。そして、データ信号線駆動回路１３２は、３ｎ個のデータ信号線（ＳＲ１〜ＳＲｎ，ＳＧ１〜ＳＧｎ，ＳＢ１〜ＳＢｎ）に対して、上記単位時間毎に、１行分の画像データに対応する電圧を順次印加する。
【００６４】
なお、ここでは、いわゆる線順次方式と呼ばれる駆動方式を用いて説明したが、駆動方式はこれに限定されるものではない。
【００６５】
画素回路１４１は、１つの画素の輝度（透過率）を設定するための回路である。また、画素回路１４１は、マトリクス状にｍ×ｎ個配されている。より詳しくは、画素回路１４１は、図４の縦方向にｍ個、横方向にｎ個配されている。
【００６６】
画素回路１４１は、Ｒサブピクセル回路１４１ｒと、Ｇサブピクセル回路１４１ｇと、Ｂサブピクセル回路１４１ｂとからなる。これら３つの回路（１４１ｒ，１４１ｇ，１４１ｂ）は、それぞれ、ＴＦＴ１４２と、画素電極と対向電極とからなる１組の電極対１４３と、図示しないコンデンサとを含む。
【００６７】
なお、ｎ型のトランジスタとｐ型のトランジスタとを作れるＣＭＯＳ（Complementary  Metal  Oxide  Semiconductor）を実現できること、キャリア（電子または正孔）の移動速度がアモルファスシリコン薄膜トランジスタ（a-Si  TFT）に比べて数百倍早いことなどから、表示ユニット１０２では、ＴＦＴ１４２として多結晶シリコン薄膜トランジスタ(p-Si  TFT)が用いられる。なお、ＴＦＴ１４２は、ｎ型チャネルの電界効果トランジスタであるとして説明する。ただし、ＴＦＴ１４２がｐ型チャネルの電界効果トランジスタであってもよい。
【００６８】
Ｒサブピクセル回路１４１ｒ内のＴＦＴ１４２のソースはデータ信号線ＳＲｊに接続されている。また、当該ＴＦＴ１４２のゲートは走査信号線Ｇｉに接続されている。さらに、当該ＴＦＴ１４２のドレインは、電極対１４３の画素電極に接続される。そして、画素電極と対向電極との間には、液晶が配される。なお、Ｇサブピクセル回路１４１ｇおよびＢサブピクセル回路１４１ｂについても、各ＴＦＴ１４２のソースが接続されるデータ信号線が異なる以外は、Ｒサブピクセル回路１４１ｒと同じ構成である。このため、これら２つの回路（１４１ｇ，１４１ｂ）についての説明は、繰り返さない。
【００６９】
ここで、画素回路１４１における輝度の設定について説明する。まず、走査信号線Ｇｉに上記ハイレベル電圧を印加する。当該ハイレベル電圧の印加により、ＴＦＴ１４２のゲートがターンオンする。このようにＴＦＴ１４２のゲートがターンオンした状態で、各データ信号線（ＳＲｊ，ＳＧｊ，ＳＢｊ）に対して、それぞれ指定された電圧（１画素分の画像データに対応する電圧）を印加する。これにより、当該指定された電圧に基づいた電圧が画素電極に印加される。その結果、画素電極と対向電極との間に電位差が生じる。この電位差に基づいて、液晶が応答し、画素の輝度は予め定められた輝度に設定される。なお、当該電位差は、上記図示しないコンデンサ（補助容量）によって、次のフレーム期間において走査信号線Ｇｉが選択されるまで保持される。
【００７０】
光センサ駆動回路１３３は、図３に示すドライバ制御部１８１から制御信号ＴＣ２を受ける。
【００７１】
そして、光センサ駆動回路１３３は、制御信号ＴＣ２に基づき、単位時間毎にリセット信号線（ＲＳ１〜ＲＳｍ）の中から１つの信号線を順次選択し、当該選択した信号線に対して、予め定められたタイミングで通常よりもハイレベルな電圧ＶＤＤＲを印加する。なお、選択されていないリセット信号線に対しては、選択されたリセット信号線に印加した電圧よりも低い電圧ＶＳＳＲを印加したままとする。たとえば、電圧ＶＤＤＲを０Ｖに、電圧ＶＳＳＲを−５Ｖに設定すればよい。
【００７２】
また、光センサ駆動回路１３３は、制御信号ＴＣ２に基づき、単位時間毎に読出信号線（ＲＷ１〜ＲＷｍ）の中から１つの信号線を順次選択し、当該選択した信号線に対して、予め定められたタイミングで通常よりもハイレベルな電圧ＶＤＤを印加する。なお、選択されていない読出信号線に対しては、上記電圧ＶＳＳＲを印加したままとする。たとえば、ＶＤＤの値を８Ｖに設定すればよい。
【００７３】
なお、電圧ＶＤＤＲを印加するタイミング、および電圧ＶＤＤを印加するタイミングについては、後述する。
【００７４】
光センサ回路１４４は、フォトダイオード１４５と、コンデンサ１４６と、ＴＦＴ１４７とを含む。なお、以下では、ＴＦＴ１４７がｎ型チャネルの電界効果トランジスタであるとして説明する。ただし、ＴＦＴ１４７がｐ型チャネルの電界効果トランジスタであってもよい。
【００７５】
フォトダイオード１４５のアノードは、リセット信号線ＲＳｉに接続されている。一方、フォトダイオード１４５のカソードは、コンデンサ１４６の一方の電極に接続されている。また、コンデンサ１４６の他方の電極は、読出信号線ＲＷｉに接続されている。なお、以下では、フォトダイオード１４５とコンデンサ１４６との接続点をノードＮと称する。
【００７６】
ＴＦＴ１４７のゲートは、ノードＮに接続されている。また、ＴＦＴ１４７のドレインは、センサ信号線ＳＤｊに接続されている。さらに、ＴＦＴ１４７のソースは、センサ信号線ＳＳｊに接続されている。光センサ回路１４４を用いたセンシングの詳細については、後述する。
【００７７】
スイッチ１３４は、センサ信号線（ＳＤ１〜ＳＤｎ）に対して、予め定められた電圧を印加するか否かを切り換えるために設けられたスイッチである。スイッチ１３４の切り換え動作は、光センサ駆動回路１３３により行われる。なお、スイッチ１３４が導通状態となった場合にセンサ信号線（ＳＤ１〜ＳＤｎ）に印加される電圧については、後述する。
【００７８】
アンプ１３５は、各センサ信号線（ＳＳ１〜ＳＳｎ）から出力された電圧を増幅する。なお、増幅された電圧は、図３に示した信号処理部１８３に送られる。
【００７９】
なお、画素回路１４１を用いて画像をタッチパネル１４０に表示させるタイミングと、光センサ回路１４４を用いてセンシングするタイミングとについては、画像処理エンジン１８０が制御する。
【００８０】
図５は、タッチパネル１４０とバックライト１７９との断面図である。図５を参照して、タッチパネル１４０は、アクティブマトリクス基板１５１Ａと、対向基板１５１Ｂと、液晶層１５２とを含む。対向基板１５１Ｂは、アクティブマトリクス基板１５１Ａに対向して配されている。液晶層１５２は、アクティブマトリクス基板１５１Ａと対向基板１５１Ｂとに挟まれている。バックライト１７９は、アクティブマトリクス基板１５１Ａに関し液晶層１５２と反対側に配されている。
【００８１】
アクティブマトリクス基板１５１Ａは、偏光フィルタ１６１と、ガラス基板１６２と、電極対１４３を構成する画素電極１４３ａと、フォトダイオード１４５と、データ信号線１５７と、配向膜１６４とを含む。さらに、図５には示していないが、アクティブマトリクス基板１５１Ａは、図４に示した、コンデンサ１４６と、ＴＦＴ１４７と、ＴＦＴ１４２と、走査信号線Ｇｉとを含む。
【００８２】
また、アクティブマトリクス基板１５１Ａにおいては、バックライト１７９側から、偏光フィルタ１６１、ガラス基板１６２、画素電極１４３ａ、および配向膜１６４が、この順に配されている。フォトダイオード１４５とデータ信号線１５７とは、ガラス基板１６２の液晶層１５２側に形成されている。
【００８３】
対向基板１５１Ｂは、偏光フィルタ１６１と、ガラス基板１６２と、遮光膜１６３と、カラーフィルタ（１５３ｒ，１５３ｇ，１５３ｂ）と、電極対１４３を構成する対向電極１４３ｂと、配向膜１６４とを含む。
【００８４】
また、対向基板１５１Ｂにおいては、液晶層１５２側から、配向膜１６４、対向電極１４３ｂ、カラーフィルタ（１５３ｒ，１５３ｇ，１５３ｂ）、ガラス基板１６２、および偏光フィルタ１６１が、この順に配されている。遮光膜１６３は、カラーフィルタ（１５３ｒ，１５３ｇ，１５３ｂ）と同一の層に形成されている。
【００８５】
カラーフィルタ１５３ｒは、赤色の波長の光を透過させるフィルタである。カラーフィルタ１５３ｇは、緑色の波長の光を透過させるフィルタである。カラーフィルタ１５３ｂは、青色の波長の光を透過させるフィルタである。ここで、フォトダイオード１４５は、カラーフィルタ１５３ｂに対向する位置に配されている。
【００８６】
タッチパネル１４０は、外光やバックライト１７９などの光源により発せられた光を遮ったり又は当該光を透過させたりすることによって、画像の表示をする。具体的には、タッチパネル１４０は、画素電極１４３ａと対向電極１４３ｂとの間に電圧を印加することにより液晶層１５２の液晶分子の向きを変化させ、上記光を遮ったり、あるいは透過させる。ただし、液晶だけでは光を完全に遮ることができないため、特定の偏光方向の光のみを透過させる偏光フィルタ１６１を配置している。
【００８７】
なお、フォトダイオード１４５の位置は、上記の位置に限定されるものではなく、カラーフィルタ１５３ｒに対向する位置やカラーフィルタ１５３ｇに対向する位置に設けることも可能である。
【００８８】
ここで、光センサ回路１４４の動作について説明する。図６は、光センサ回路１４４を動作させる際のタイミングチャートを示した図である。図６において、電圧ＶＩＮＴは、光センサ回路１４４内のノードＮにおける電位を示している。また、電圧ＶＰＩＸは、図４に示したセンサ信号線ＳＳｊからの出力電圧であって、アンプ１３５によって増幅される前の電圧を示している。
【００８９】
以下では、光センサ回路１４４をリセットするためのリセット期間と、光センサ回路１４４を用いて光をセンシングするためのセンシング期間と、センシングした結果を読み出す読出期間とに分けて説明する。
【００９０】
まず、リセット期間について説明する。リセット期間においては、リセット信号線ＲＳｉに印加する電圧を、ローレベル（電圧ＶＳＳＲ）からハイレベル（電圧ＶＤＤＲ）へと瞬間的に切り換える。一方、読出信号線ＲＷｉに印加する電圧は、ローレベル（電圧ＶＳＳＲ）のままとする。このように、リセット信号線ＲＳｉに上記ハイレベルの電圧を印加することにより、フォトダイオード１４５の順方向（アノード側からカソード側）に電流が流れ始める。その結果、ノードＮの電位である電圧ＶＩＮＴは、以下の式（１）で示す値となる。なお、式（１）では、フォトダイオード１４５における順方向の電圧降下量をＶｆとしている。
【００９１】
ＶＩＮＴ＝ＶＳＳＲ＋｜ＶＤＤＲ−ＶＳＳＲ｜−Ｖｆ  …  （１）
それゆえ、ノードＮの電位は、図６に示すとおり、電圧ＶＤＤＲよりもＶｆだけ小さな値となる。
【００９２】
ここで、電圧ＶＩＮＴは、ＴＦＴ１４７のゲートをターンオンさせる閾値以下であるため、センサ信号線ＳＳｊからの出力はない。このため、電圧ＶＰＩＸは変化しない。また、コンデンサ１４６の電極間には、上記電圧ＶＩＮＴ分の差が生じる。このため、コンデンサ１４６には、当該差に応じた電荷が蓄積される。
【００９３】
次に、センシング期間について説明する。リセット期間に続くセンシング期間においては、リセット信号線ＲＳｉに印加する電圧は、ハイレベル（電圧ＶＤＤＲ）からローレベル（電圧ＶＳＳＲ）へと瞬間的に切り換わる。一方、読出信号線ＲＷｉに印加する電圧は、ローレベル（電圧ＶＳＳＲ）のままとする。
【００９４】
このように、リセット信号線ＲＳｉに印加する電圧をローレベルに変化させることにより、ノードＮの電位は、リセット信号線ＲＳｉの電圧および読出信号線ＲＷｉの電圧よりも高くなる。このため、フォトダイオード１４５においては、カソード側の電圧がアノード側の電圧よりも高くなる。つまり、フォトダイオード１４５は、逆バイアスの状態となる。このような逆バイアスの状態において、光源からの光をフォトダイオード１４５が受光すると、フォトダイオード１４５のカソード側からアノード側へと電流が流れ始める。その結果、図６に示すとおり、ノードＮの電位（つまり、電圧ＶＩＮＴ）は時間の経過とともに低くなる。
【００９５】
なお、このように電圧ＶＩＮＴが低下し続けるため、ＴＦＴ１４７のゲートはターンオンした状態にはならない。それゆえ、センサ信号線ＳＳｊからの出力はない。このため、電圧ＶＰＩＸは変化しない。
【００９６】
次に、読出期間について説明する。センシング期間に続く読出期間においては、リセット信号線ＲＳｉに印加する電圧をローレベル（電圧ＶＳＳＲ）のままとする。一方、読出信号線ＲＷｉに印加する電圧は、ローレベル（電圧ＶＳＳＲ）からハイレベル（電圧ＶＤＤ）へと瞬間的に切り換わる。ここで、電圧ＶＤＤは、電圧ＶＤＤＲよりも高い値である。
【００９７】
このように、読出信号線ＲＷｉにハイレベルの電圧を瞬間的に印加することにより、図６に示すとおり、コンデンサ１４６を介してノードＮの電位が引き上げられる。なお、ノードＮの電位の上昇幅は、読出信号線ＲＷｉに印加する電圧に応じた値となる。ここで、ノードＮの電位（つまり、電圧ＶＩＮＴ）が、ＴＦＴ１４７のゲートをターンオンさせる閾値以上まで引き上げられるため、ＴＦＴ１４７のゲートがターンオンする。
【００９８】
この際、ＴＦＴ１４７のドレイン側に接続されたセンサ信号線ＳＤｊ（図４参照）に予め一定電圧を印加しておけば、ＴＦＴ１４７のソース側に接続されたセンサ信号線ＳＳｊからは、図６のＶＰＩＸのグラフに示すとおり、ノードＮの電位に応じた電圧が出力される。
【００９９】
ここで、フォトダイオード１４５が受光する光の量（以下、受光量と称する）が少ないと、図６のＶＩＮＴのグラフに示す直線の傾きが緩やかになる。その結果、電圧ＶＰＩＸは、受光量が多い場合に比べて高くなる。このように、光センサ回路１４４は、フォトダイオード１４５の受光量に応じて、センサ信号線ＳＳｊに出力する電圧の値を変化させる。
【０１００】
ところで、上記においては、ｍ×ｎ個存在する光センサ回路のうち、１つの光センサ回路１４４に着目して、その動作を説明した。以下では、タッチパネル１４０における各光センサ回路の動作について説明する。
【０１０１】
まず、光センサ駆動回路１３３は、ｎ個のセンサ信号線（ＳＤ１〜ＳＤｎ）の全てに対して、予め定められた電圧を印加する。次に、光センサ駆動回路１３３は、リセット信号線ＲＳ１に対して、通常よりもハイレベルな電圧ＶＤＤＲを印加する。なお、他のリセット信号線（ＲＳ２〜ＲＳｍ）および読出信号線（ＲＷ１〜ＲＷｍ）については、ローレベルの電圧を印加したままの状態とする。これにより、図４における１行目のｎ個の光センサ回路が、上述したリセット期間に入る。その後、１行目のｎ個の光センサ回路は、センシング期間に入る。さらに、その後、１行目のｎ個の光センサ回路は、読出期間に入る。
【０１０２】
なお、ｎ個のセンサ信号線（ＳＤ１〜ＳＤｎ）の全てに対して予め定められた電圧を印加するタイミングは、上記のタイミングに限定されず、少なくとも読出期間前に印加されるタイミングであればよい。
【０１０３】
１行目のｎ個の光センサ回路の読出期間が終了すると、光センサ駆動回路１３３は、リセット信号線ＲＳ２に対して、通常よりもハイレベルな電圧ＶＤＤＲを印加する。つまり、２行目のｎ個の光センサ回路のリセット期間に入る。リセット期間が終了すると、２行目のｎ個の光センサ回路は、センシング期間に入り、その後は、読出期間に入る。
【０１０４】
以降は、上述した処理が、順に、３行目のｎ個の光センサ回路、４行目のｎ個の光センサ回路、…ｍ行目のｎ個の光センサ回路に対して行われる。その結果、センサ信号線（ＳＳ１〜ＳＳｎ）からは、１行目のセンシング結果、２行目のセンシング結果、…、ｍ行目のセンシング結果が、この順に出力される。
【０１０５】
なお、表示ユニット１０２においては、上記のように行毎にセンシングが行われるとともに、行毎にセンシング結果がタッチパネル１４０から出力される。このため、以下では、タッチパネル１４０から出力される１行目からｍ行目までのｍ行分の電圧に関するデータに対して、信号処理部１８３が上述したデータ処理を行った後のデータを、「スキャンデータ」と称する。つまり、スキャンデータとは、スキャン対象物（たとえば、ユーザの指）をスキャンすることにより得られる画像データを指す。また、当該スキャンデータに基づいて表示された画像を、「スキャン画像」と称する。さらに、以下では、センシングを「スキャン」と称する。
【０１０６】
また、上記においては、ｍ×ｎ個の光センサ回路全てを用いてスキャンを行なう構成を例に挙げたが、これに限定されるものではない。予め選択された光センサ回路を用いて、タッチパネル１４０の表面の一部の領域に関してスキャンを行なうことも構成としてもよい。
【０１０７】
以下では、表示装置１００が、両構成のいずれの構成をも採れるものとする。さらに、当該構成間の切り換えは、操作キー１７７を介した入力などに基づく本体ユニット１０１から送られてくるコマンドにより行われるものとする。なお、タッチパネル１４０の表面の一部の領域に関してスキャンを行なう場合、画像処理エンジン１８０が、スキャン対象領域の設定を行なう。なお、当該領域の設定を、操作キー１７７を介してユーザが指定できる構成としてもよい。
【０１０８】
このように、タッチパネル１４０の表面の一部の領域に関してスキャンを行なう場合には、画像の表示に関し、以下のような利用の態様がある。１つ目は、上記一部の領域（以下、スキャン領域と称する）以外の表面の領域において、画像を表示させる態様である。２つ目は、上記スキャン領域以外の表面の領域において、画像を表示させない態様である。いずれの態様とするかは、本体ユニット１０１から画像処理エンジン１８０に送られてくるコマンドに基づく。
【０１０９】
図７は、タッチパネル１４０とバックライト１７９との断面図であって、スキャンの際にフォトダイオード１４５がバックライト１７９からの光を受光する構成を示した図である。
【０１１０】
図７を参照して、ユーザの指９００がタッチパネル１４０の表面に接触している場合、バックライト１７９から発せられた光の一部は、当該接触している領域ではユーザの指９００（略平面）にて反射される。そして、フォトダイオード１４５は、当該反射された光を受光する。
【０１１１】
また、指９００が接触していない領域においても、バックライト１７９から発せられた光の一部は、ユーザの指９００にて反射される。この場合においても、フォトダイオード１４５は、当該反射された光を受光する。ただし、当該領域においてはタッチパネル１４０の表面に指９００が接触していないため、指９００が接触している領域よりも、フォトダイオード１４５の受光量は少なくなる。なお、バックライト１７９から発せられた光のうち、ユーザの指９００に到達しない光のほとんどについては、フォトダイオード１４５は受光できない。
【０１１２】
ここで、バックライト１７９を、少なくともセンシング期間においては点灯させておくことにより、光センサ回路１４４は、ユーザの指９００により反射した光の光量に応じた電圧をセンサ信号線ＳＳｊから出力することができる。このように、バックライト１７９の点灯と消灯とを制御することにより、タッチパネル１４０では、指９００の接触位置、指９００の接触している範囲（指９００の押圧力によって定まる）、タッチパネル１４０の表面に対する指９００の方向などに応じて、センサ信号線（ＳＳ１からＳＳｎ）から出力される電圧が変化することになる。
【０１１３】
以上により、表示ユニット１０２は、指９００によって光が反射されることにより得られる像（以下、反射像とも称する）をスキャンすることができる。なお、指９００以外のスキャン対象物としては、スタイラスペンなどが挙げられる。
【０１１４】
ところで、本実施の形態においては、表示装置１００の表示装置としてタッチパネルを例に挙げて説明しているが、タッチパネルの代わりに有機ＥＬ（Electro-Luminescence）パネルなどの他のパネルを用いてもよい。
【０１１５】
＜データについて＞
次に、センシングコマンドについて説明する。なお、表示ユニット１０２においては、画像処理エンジン１８０は、センシングコマンドの内容を解析し、当該解析の結果に従ったデータ（つまり、応答データ）を本体ユニット１０１に送り返す。
【０１１６】
図８は、センシングコマンドの概略構成を示した図である。図８を参照して、センシングコマンドは、ヘッダのデータ領域ＤＡ０１と、タイミングを示すデータ領域ＤＡ０２と、データ種別を示すデータ領域ＤＡ０３と、読取方式を示すデータ領域ＤＡ０４と、画像階調を示すデータ領域ＤＡ０５と、解像度を示すデータ領域ＤＡ０６と、予備のデータ領域ＤＡ０７とを含む。
【０１１７】
図９は、センシングコマンドの各領域におけるデータの値と、当該値が示す意味内容とを示した図である。
【０１１８】
図９を参照して、タイミングを示すデータ領域に「００」が設定されたセンシングコマンドは、画像処理エンジン１８０に対して、そのときのスキャンデータの送信を要求する。つまり、センシングコマンドは、当該センシングコマンドを画像処理エンジン１８０が受信した後に、光センサ回路１４４を用いてスキャンすることにより得られるスキャンデータの送信を要求する。また、タイミングを示すデータ領域に「０１」が設定されたセンシングコマンドは、スキャン結果に変化があったときのスキャンデータの送信を要求する。さらに、タイミングを示すデータ領域に「１０」が設定されたセンシングコマンドは、一定周期毎にスキャンデータの送信を要求する。
【０１１９】
データ種別を示すデータ領域に「００１」が設定されたセンシングコマンドは、部分画像における中心座標の座標値の送信を要求する。また、データ種別を示すデータ領域に「０１０」が設定されたセンシングコマンドは、スキャン結果が変化した部分画像のみの送信を要求する。なお、スキャン結果が変化したとは、前回のスキャン結果と今回のスキャン結果が異なっていることを指す。さらに、データ種別を示すデータ領域に「１００」が設定されたセンシングコマンドは、全体画像の送信を要求する。
【０１２０】
ここで、「全体画像」とは、ｍ×ｎ個の光センサ回路を用いてスキャンした際に、各光センサ回路から出力される電圧に基づいて、画像処理エンジン１８０により生成された画像である。また、「部分画像」とは、全体画像の一部である。部分画像に関して、スキャン結果が変化した部分画像のみの送信を要求する構成とした理由については後述する。
【０１２１】
なお、上記座標値と上記部分画像または上記全体画像とを同時に要求する構成としてもよい。また、タッチパネル１４０の表面の一部の領域に関してスキャンを行なう構成の場合には、上記全体画像はスキャンが行われる領域に対応した画像となる。
【０１２２】
読取方式を示すデータ領域に「００」が設定されたセンシングコマンドは、バックライト１７９を点灯してスキャンすることを要求する。また、読取方式を示すデータ領域に「０１」が設定されたセンシングコマンドは、バックライト１７９を消灯してスキャンすることを要求する。なお、バックライト１７９を消灯してスキャンする構成については後述する（図１３）。さらに、読取方式を示すデータ領域に「１０」が設定されたセンシングコマンドは、反射と透過とを併用してスキャンすることを要求する。なお、反射と透過とを併用するとは、バックライト１７９を点灯してスキャンする方式と、バックライトを消灯してスキャンする方式とを切り換えて、スキャン対象物のスキャンを行なうことを指す。
【０１２３】
画像階調を示すデータ領域に「００」が設定されたセンシングコマンドは、白黒の２値の画像データを要求する。たとえば、ＣＰＵ１１０が、接触領域を示すデータとして２値画像データを画像処理エンジン１８０に要求してもよい。画像処理エンジン１８０が、後述する検知部１１１を実現してもよい。また、画像階調を示すデータ領域に「０１」が設定されたセンシングコマンドは、多階調の画像データを要求する。さらに、画像階調を示すデータ領域に「１０」が設定されたセンシングコマンドは、ＲＧＢのカラーの画像データを要求する。
【０１２４】
解像度を示すデータ領域に「０」が設定されたセンシングコマンドは、解像度の高い画像データを要求する。また、解像度を示すデータ領域に「１」が設定されたセンシングコマンドは、解像度の低い画像データを要求する。
【０１２５】
また、センシングコマンドには、図８および図９に示したデータ以外に、スキャンを行なう領域（光センサ回路１４４を駆動する画素の領域）の指定、スキャンを行なうタイミング、バックライト１７９の点灯のタイミングなどが記述されている。
【０１２６】
図１０は、応答データの概略構成を示した図である。応答データは、センシングコマンドの内容に応じたデータであって、表示ユニット１０２の画像処理エンジン１８０が本体ユニット１０１に対して送信するデータである。
【０１２７】
図１０を参照して、応答データは、ヘッダのデータ領域ＤＡ１１と、座標を示すデータ領域ＤＡ１２と、時刻を示すデータ領域ＤＡ１３と、画像を示すデータ領域ＤＡ１４とを含む。ここで、座標を示すデータ領域ＤＡ１２には、部分画像の中心座標の値が書き込まれる。また、時刻を示すデータ領域には、画像処理エンジン１８０のタイマ１８２から取得した時刻情報が書き込まれる。さらに、画像を示すデータ領域には、画像処理エンジン１８０により処理がされた後の画像データ（つまり、スキャンデータ）が書き込まれる。
【０１２８】
図１１は、指９００をスキャンすることにより得られた画像（つまり、スキャン画像）を示した図である。図１１を参照して、太実線で囲まれた領域Ｗ１の画像が全体画像であり、破線で囲まれた領域Ｐ１の画像が部分画像である。また、太線で示した十字の中心点Ｃ１が、中心座標となる。
【０１２９】
本実施の形態では、矩形の領域であって、かつセンサ信号線ＳＳｊからの出力電圧が予め定められた値以上となった光センサ回路が備えられた画素（つまり、予め定められた階調または予め定められた輝度以上の画素）全てを含む領域を、部分画像の領域としている。
【０１３０】
また、中心座標は、部分画像の領域における各画素の階調を考慮して決定される座標である。具体的には、中心座標は、部分画像内の各画素に関し、画素の階調と、当該画素と上記矩形の中心点（つまり図心）との距離とに基づき、重み付け処理を行なうことにより決定される。つまり、中心座標は、部分画像の図心とは必ずしも一致しない。
【０１３１】
ただし、必ずしも中心座標の位置は上記に限定されるものではなく、中心座標を上記図心の座標あるいは図心の近傍の座標としてもよい。
【０１３２】
センシングコマンドのデータ種別を示すデータ領域に「００１」が設定されている場合には、画像処理エンジン１８０は、座標を示すデータ領域ＤＡ１２に上記中心座標の値を書き込む。この場合、画像処理エンジン１８０は、画像を示すデータ領域ＤＡ１４には画像データを書き込まない。画像処理エンジン１８０は、上記中心座標の値の書き込みを行なった後、当該中心座標の値を含む応答データを本体ユニット１０１に送る。このように、データ種別を示すデータ領域に「００１」が設定されている場合には、センシングコマンドは、画像データの出力を要求せずに、中心座標の値の出力を要求する。
【０１３３】
また、センシングコマンドのデータ種別を示すデータ領域に「０１０」が設定されている場合には、画像処理エンジン１８０は、画像を示すデータ領域ＤＡ１４に、スキャン結果が変化した部分画像の画像データを書き込む。この場合、画像処理エンジン１８０は、中心座標の値を座標を示すデータ領域ＤＡ１２に書き込まない。画像処理エンジン１８０は、上記スキャン結果が変化した部分画像の画像データの書き込みを行なった後、当該部分画像の画像データを含む応答データを本体ユニット１０１に送る。このように、データ種別を示すデータ領域に「０１０」が設定されている場合には、センシングコマンドは、中心座標の値の出力を要求せずに、スキャン結果が変化した部分画像の画像データの出力を要求する。
【０１３４】
なお、上記のように、スキャン結果が変化した部分画像のみの送信を要求する構成とした理由は、スキャンデータのうち部分画像の領域のスキャンデータが、当該領域以外のスキャンデータよりも重要度の高いデータであること、および、指９００などのスキャン対象物との接触状態により、スキャンデータのうち部分画像の領域に相当する領域のスキャンデータが変化しやすいことによる。
【０１３５】
また、センシングコマンドのデータ種別を示すデータ領域に「０１１」が設定されている場合には、画像処理エンジン１８０は、座標を示すデータ領域ＤＡ１２に中心座標の値を書き込むとともに、画像を示すデータ領域ＤＡ１４にスキャン結果が変化した部分画像の画像データを書き込む。その後、画像処理エンジン１８０は、当該中心座標の値と当該部分画像の画像データとを含む応答データを本体ユニット１０１に送る。このように、データ種別を示すデータ領域に「０１１」が設定されている場合には、センシングコマンドは、中心座標の値の出力と、スキャン結果が変化した部分画像の画像データの出力とを要求する。
【０１３６】
また、センシングコマンドのデータ種別を示すデータ領域に「１００」が設定されている場合には、画像処理エンジン１８０は、図１０に示した応答データの画像を示すデータ領域ＤＡ１４に、全体画像の画像データを書き込む。この場合、画像処理エンジン１８０は、中心座標の値を座標を示すデータ領域ＤＡ１２に書き込まない。画像処理エンジン１８０は、上記全体画像の画像データの書き込みを行なった後、当該全体画像の画像データを含む応答データを本体ユニット１０１に送る。このように、データ種別を示すデータ領域に「１００」が設定されている場合には、センシングコマンドは、中心座標の値の出力を要求せずに、全体画像の画像データの出力を要求する。
【０１３７】
また、センシングコマンドのデータ種別を示すデータ領域に「１０１」が設定されている場合には、画像処理エンジン１８０は、座標を示すデータ領域ＤＡ１２に中心座標の値を書き込むとともに、画像を示すデータ領域ＤＡ１４に全体画像の画像データを書き込む。その後、画像処理エンジン１８０は、当該中心座標の値と当該全体画像の画像データとを含む応答データを本体ユニット１０１に送る。このように、データ種別を示すデータ領域に「１０１」が設定されている場合には、センシングコマンドは、中心座標の値の出力と、全体画像の画像データの出力とを要求する。
【０１３８】
＜変形例について＞
ところで、タッチパネル１４０の構成は、図４に示した構成に限定されるものではない。以下では、図４とは異なる態様のタッチパネルについて説明する。
【０１３９】
図１２は、上記異なる態様である光センサ内蔵液晶パネル１４０Ｘの回路図である。図１２を参照して、光センサ内蔵液晶パネル１４０Ｘ（タッチパネル１４０Ｘ）は、１画素内に３つの光センサ回路（１４４ｒ，１４４ｇ，１４４ｂ）を含んでいる。このようにタッチパネル１４０Ｘが１画素内に３つの光センサ回路（１４４ｒ，１４４ｇ，１４４ｂ）を含む点において、タッチパネル１４０Ｘは、１画素内に１つの光センサ回路を含むタッチパネル１４０と異なる。なお、光センサ回路１４４の構成と、３つの各光センサ回路（１４４ｒ，１４４ｇ，１４４ｂ）との構成は同じである。
【０１４０】
また、１画素内における３つのフォトダイオード（１４５ｒ，１４５ｇ，１４５ｂ）は、それぞれ、カラーフィルタ１５３ｒ、カラーフィルタ１５３ｇ、カラーフィルタ１５３ｂに対向する位置に配されている。それゆえ、フォトダイオード１４５ｒは赤色の光を受光し、フォトダイオード１４５ｇは緑色の光を受光し、フォトダイオード１４５ｂは青色の光を受光する。
【０１４１】
また、タッチパネル１４０は１画素内において１つの光センサ回路１４４しか含まないため、１画素内に配設されるＴＦＴ１４７用のデータ信号線は、センサ信号線ＳＳｊとセンサ信号線ＳＤｊとの２本であった。しかしながら、タッチパネル１４０Ｘは１画素内において３つの光センサ回路（１４４ｒ，１４４ｇ，１４４ｂ）を含むため、１画素内に配設されるＴＦＴ（１４７ｒ，１４７ｇ，１４７ｂ）用のデータ信号線は６本となる。
【０１４２】
具体的には、カラーフィルタ１５３ｒに対向する位置に配されたフォトダイオード１４５ｒのカソードに接続されたＴＦＴ１４７ｒに対応して、センサ信号線ＳＳＲｊとセンサ信号線ＳＤＲｊとが配設される。また、カラーフィルタ１５３ｇに対向する位置に配されたフォトダイオード１４５ｇのカソードに接続されたＴＦＴ１４７ｇに対応して、センサ信号線ＳＳＧｊとセンサ信号線ＳＤＧｊとが配設される。さらに、カラーフィルタ１５３ｂに対向する位置に配されたフォトダイオード１４５ｂのカソードに接続されたＴＦＴ１４７ｂに対応して、センサ信号線ＳＳＢｊとセンサ信号線ＳＤＢｊとが配設される。
【０１４３】
このようなタッチパネル１４０Ｘにおいては、バックライト１７９から照射された白色光は、３つのカラーフィルタ（１５３ｒ，１５３ｇ，１５３ｂ）を透過し、タッチパネル１４０Ｘの表面では、赤、緑、および青とが混ざり白色光となる。ここで、スキャン対象物により白色光が反射されると、スキャン対象物の表面の色素に白色光の一部が吸収され、また一部が反射される。そして、反射された光は、再度、３つのカラーフィルタ（１５３ｒ，１５３ｇ，１５３ｂ）を透過する。
【０１４４】
この際、カラーフィルタ１５３ｒは赤色の波長の光を透過し、フォトダイオード１４５ｒは、当該赤色の波長の光を受光する。また、カラーフィルタ１５３ｇは緑色の波長の光を透過し、フォトダイオード１４５ｇは、当該緑色の波長の光を受光する。また、カラーフィルタ１５３ｂは青色の波長の光を透過し、フォトダイオード１４５ｂは、当該青色の波長の光を受光する。つまり、スキャン対象物によって反射された光は３つのカラーフィルタ（１５３ｒ，１５３ｇ，１５３ｂ）によって３原色（Ｒ，Ｇ，Ｂ）に色分解され、各フォトダイオード（１４５ｒ，１４５ｇ，１４５ｂ）は、それぞれに対応した色の光を受光する。
【０１４５】
スキャン対象物の表面の色素に白色光の一部が吸収されると、各フォトダイオード（１４５ｒ，１４５ｇ，１４５ｂ）の受光量が各フォトダイオード（１４５ｒ，１４５ｇ，１４５ｂ）で異なることになる。このため、センサ信号線ＳＳＲｊとセンサ信号線ＳＳＧｊとセンサ信号線ＳＳＢｊとの出力電圧は互いに異なる。
【０１４６】
それゆえ、各出力電圧に応じて、Ｒの階調とＧの階調とＢの階調とを画像処理エンジン１８０が決定することにより、画像処理エンジン１８０はＲＧＢのカラー画像を本体ユニット１０１へ送ることができる。
【０１４７】
以上述べたように、表示装置１００がタッチパネル１４０Ｘを備えた構成とすることにより、スキャン対象物をカラーでスキャンできることになる。
【０１４８】
次に、図７を参照して説明したスキャンの方法（つまり、反射像をスキャンする方法）とは異なるスキャンの方法について、図１３を参照して説明する。
【０１４９】
図１３は、スキャンの際にフォトダイオードが外光を受光する構成を示した断面図である。図１３を参照して、外光の一部は、指９００によって遮られる。それゆえ、指９００と接触しているタッチパネル１４０の表面領域の下部に配されたフォトダイオードは、ほとんど外光を受光できない。また、指９００の影が形成された表面領域の下部に配されたフォトダイオードは、ある程度の外光を受光できるものの、影が形成されていない表面領域に比べると外光の受光量が少ない。
【０１５０】
ここで、バックライト１７９を、少なくともセンシング期間においては消灯させておくことにより、光センサ回路１４４は、タッチパネル１４０の表面に対する指９００の位置に応じた電圧をセンサ信号線ＳＳｊから出力することができる。このように、バックライト１７９を点灯と消灯とを制御することにより、タッチパネル１４０では、指９００の接触位置、指９００の接触している範囲（指９００の押圧力によって定まる）、タッチパネル１４０の表面に対する指９００の方向などに応じて、センサ信号線（ＳＳ１からＳＳｎ）から出力される電圧が変化することになる。
【０１５１】
以上により、表示ユニット１０２は、指９００によって外光が遮られることにより得られる像（以下、影像とも称する）をスキャンすることができる。
【０１５２】
さらに、表示ユニット１０２を、バックライト１７９を点灯させてスキャンを行った後に、バックライト１７９を消灯させて再度スキャンを行なう構成としてもよい。あるいは、表示ユニット１０２を、バックライト１７９を消灯させてスキャンを行った後に、バックライト１７９を点灯させて再度スキャンを行なう構成としてもよい。
【０１５３】
この場合には、２つのスキャン方式を併用することになるため、２つのスキャンデータを得ることができる。それゆえ、一方のスキャン方式のみを用いてスキャンする場合に比べて、精度の高い結果を得ることができる。
【０１５４】
＜表示装置１００の機能構成＞
次に、本実施の形態に係る表示装置１００の機能構成について説明する。図１４は、本実施の形態に係る表示装置１００の機能構成を示すブロック図である。
【０１５５】
図１４を参照して、表示装置１００は、検知部１１１と、受付部１１２と、表示制御部１１４とを含む。また、表示装置１００は、図３にも示したように、タッチパネル１４０とＲＡＭ１７１とを含む。
【０１５６】
まず、複数の光センサ回路１４４のそれぞれは、入射光を受光して、当該入射光に応じた電気信号を生成する。複数の光センサ回路１４４は全体として、画像処理エンジン１８０（図３）などを介して、タッチパネル１４０に入力される景色に対応する画像データを検知部１１１に入力する。
【０１５７】
複数の画素回路１４１のそれぞれは、画像処理エンジン１８０を介して、表示制御部１１４からの画像データに基づき、外部に可視光を発する。より詳細には、複数の画素回路１４１は全体として、画像処理エンジン１８０（図３）などを介して、表示制御部１１４からの画像データ（電気信号）に基づいて、バックライト１７９からの光を利用しながらボタンを表す画像やテキストなどを表示する。
【０１５８】
ＲＡＭ１７１は、画像処理エンジン１８０からの画像データ１７１Ａを記憶する。たとえば、ＲＡＭ１７１は、画像処理エンジン１８０からの各センサタイミングにおける一連の接触領域を示す画像データ１７１Ａを記憶する。
【０１５９】
以下では、一連の当該接触領域に対応するスライド動作を、ストロークともいう。より詳細には、ストロークとは、スタイラスペンや指９００がタッチパネル１４０に接触してから、スタイラスペンや指９００がタッチパネル１４０から持ち上げられるまでの間における、スタイラスペンや指９００のタッチパネル１４０表面上での軌跡をいう。
【０１６０】
検知部１１１と、受付部１１２と、表示制御部１１４とは、ＣＰＵ１１０あるいは画像処理エンジン１８０などによって実現される機能である。より詳細には、ＣＰＵ１１０が有する各機能は、ＣＰＵ１１０がＲＡＭ１７１などに記憶される制御プログラムを実行して、図３に示される各ハードウェアを制御することによって実現される機能である。
【０１６１】
検知部１１１は、たとえば、ＣＰＵ１１０によって実現される。検知部１１１は、画像処理エンジン１８０を介して複数の光センサ回路１４４から入力される電気信号に基づいて「２値画像データ」（図４の場合）あるいは「カラー画像データ」（図１２の場合）を生成する。
【０１６２】
前述したように、検知部１１１は、タッチパネル１４０からの「２値画像データ」あるいは「カラー画像データ」（これらを合わせて画像データともいう。）を一時的にＲＡＭ１７１に記憶する。たとえば、検知部１１１は、画像処理エンジン１８０からの画像データに基づいて、ＲＡＭ１７１の画像データを最新の画像データに更新する。検知部１１１は、タッチパネル１４０から順次入力される画像データに基づいて、接触領域が検知されている期間だけ、当該接触領域を示す画像データを順次ＲＡＭ１７１に蓄積してもよい。
【０１６３】
検知部１１１は、タッチパネル１４０への複数の接触位置を検知する。より詳細には、検知部１１１は、タッチパネル１４０からの画像データ毎に、接触領域の中心座標（接触位置の座標）を取得する。ただし、タッチパネル１４０の画像処理エンジン１８０が接触領域の中心座標を取得して、検知部１１１はタッチパネル１４０から直接接触位置を取得してもよい。
【０１６４】
検知部１１１は、１つ目の接触位置（第１の接触位置）がタッチパネル１４０の右部であるか左部であるかを判断する。また、検知部１１１は、２つ目の接触位置（第２の接触位置）がタッチパネル１４０の右部であるか左部であるかを判断する。
【０１６５】
検知部１１１は、タッチパネル１４０を用いて１つ目の接触位置の移動を検出する。本実施の形態に係る検知部１１１は、タッチパネル１４０から順次入力される画像データに基づいて、接触位置の移動方向や移動距離や移動速度などを取得する。より詳細には、検知部１１１は、各センサタイミングに係る接触領域の中心座標に基づいて、タッチパネル１４０と指９００Ｒ，９００Ｌとの接触領域の軌跡を取得する。表示制御部１１４は、接触領域の軌跡を線画像（１つのストローク）としてＲＡＭ１７１に記憶するとともに、当該線画像をタッチパネル１４０に表示させる。ただし、上述したように、検知部１１１は、タッチパネル１４０から直接に順次接触位置を取得してもよい。
【０１６６】
さらに、本実施の形態においては、タッチパネル１４０が光センサ回路１４４を含むので、検知部１１１は、画像データに基づいて、タッチパネル１４０の上方に位置する（浮遊する）物体の位置を検知することができる。より詳細には、検知部１１１は、タッチパネル１４０からの画像データに基づいて、タッチパネル１４０上に接する物体と、タッチパネル１４０の上方に位置する物体とを区別して認識できることが好ましい。
【０１６７】
たとえば、検知部１１１は、タッチパネル１４０からの画像データに基づいて、白い画像領域をタッチパネル１４０上に接する物体として検知し、赤い画像領域をタッチパネル１４０の上方に位置する物体として検知する。あるいは、検知部１１１は、タッチパネル１４０からの画像データに基づいて、所定値以上の面積を有する画像領域をタッチパネル１４０上に接する物体として検知し、所定値未満の面積を有する画像領域をタッチパネル１４０の上方に位置する物体として検知する。
【０１６８】
受付部１１２は、検知部１１１がタッチパネル１４０を介してボタン群１４０Ａに含まれるボタンに対する２つ目の接触位置を検知すると、当該ボタンの押下を受け付ける。受付部１１２は、ボタンに対応する命令を受け付ける。あるいは、受付部１１２は、ユーザインターフェイスとして、ボタンが押下された旨の情報を他の上位のアプリケーションに受け渡す。
【０１６９】
本実施の形態においては、受付部１１２は、検知部１１１が１つ目の接触位置を検知している最中に、２つ目の接触位置を検知するとボタンの押下を受け付ける。すなわち、本実施の形態においては、検知部１１１が２つ目の接触位置を検知する前に１つ目の接触位置を検知しなくなると、受付部１１２はボタンの押下を受け付けない。次に検知される接触位置は、新たな１つ目の接触位置となるからである。
【０１７０】
より詳細には、本実施の形態においては、検知部１１１が２つ目の接触位置を検知する前に１つ目の接触位置を検知しなくなると、表示装置１００がボタン群１４０Ａを元の表示位置（タッチパネル１４０の中央）に表示する。
【０１７１】
表示制御部１１４は、ＣＰＵ１１０あるいは画像処理エンジン１８０によって実現される。表示制御部１１４は、検知部１１１からの画像データあるいは１または複数の接触位置に基づいて、タッチパネル１４０にボタン群１４０Ａを表示させる。
【０１７２】
表示制御部１１４は、検知部１１１がタッチパネル１４０の第１のエリアへの１つ目の接触位置を検知したときにボタンを第２のエリアに表示させる。ユーザが、両手を使って、表示装置１００の両サイドを把持する場合には、第１のエリアと第２のエリアは、互いに、タッチパネル１４０における逆サイドに位置することが好ましい。本実施の形態においては、第１のエリアは、タッチパネル１４０の右部（あるいは左部）である。第２のエリアは、タッチパネル１４０の左部（あるいは右部）の中の所定エリアである。
【０１７３】
表示制御部１１４は、検知部１１１がタッチパネル１４０の第３のエリアへの１つ目の接触位置を検知したときにボタン群１４０Ａを第４のエリアに表示させる。ユーザが、両手を使って、表示装置１００の両サイドを把持する場合には、第３のエリアと第４のエリアは、互いに、タッチパネル１４０における逆サイドに位置することが好ましい。本実施の形態においては、第３のエリアは、タッチパネル１４０の左部（あるいは右部）である。第４のエリアは、タッチパネル１４０の右部（あるいは左部）の中の所定エリアである。
【０１７４】
表示制御部１１４は、ボタン群１４０Ａの表示位置を検知部１１１が取得した１つ目の接触位置の移動方向に移動させる。すなわち、表示制御部１１４は、１つ目の接触位置の移動方向に基づいて、ボタン群１４０Ａをタッチパネル１４０上の新たな位置に表示し直す。
【０１７５】
表示制御部１１４は、検知部１１１の検知結果に基づいて、外部の物体が存在している（浮遊している）位置の下方に位置するボタンをその他のボタンと異なる表示態様にて表示する。たとえば、表示制御部１１４は、浮遊位置下方のボタンをその他のボタンよりも拡大して表示する。また、表示制御部１１４は、浮遊位置下方のボタン同士の間隔を、他のボタン同士の間隔よりも拡大して表示する。
【０１７６】
＜表示処理＞
次に、図３、図１４〜図１６を参照して、本実施の形態に係る表示装置１００における表示処理について説明する。なお、図１５は、本実施の形態に係る表示装置１００における表示処理の処理手順を示す第１のフローチャートである。図１６は、本実施の形態に係る表示装置１００における表示処理の処理手順を示す第２のフローチャートである。
【０１７７】
まず、図１（Ａ）に示すように、表示制御部１１４として機能するＣＰＵ１１０は、タッチパネル１４０の中央にボタン群１４０Ａを表示する。
【０１７８】
本実施の形態においては、タッチパネル１４０に含まれる複数の光センサ回路１４４は、常時、入射光に応じて電気信号を生成する。複数の光センサ回路１４４は、画像処理エンジン１８０を介して、入射光に対応する電気信号（画像データ）をＣＰＵ１１０に入力する。すなわち、検知部１１１として機能するＣＰＵ１１０は、複数の光センサ回路１４４からの電気信号（画像データ）を、画像処理エンジン１８０を介して取得する。
【０１７９】
ＣＰＵ１１０は、画像処理エンジン１８０からの画像データに基づいて接触位置（１つ目の接触位置）を検知したか否かを判断する（ステップＳ１０４）。ＣＰＵ１１０は、接触位置を検知しない場合（ステップＳ１０４においてＮＯである場合）、ステップＳ１０４からの処理を繰り返す。
【０１８０】
図１（Ｂ）あるいは図１（Ｅ）に示すように、表示制御部１１４として機能するＣＰＵ１１０は、接触位置を検知した場合（ステップＳ１０４においてＹＥＳである場合）、当該接触位置がタッチパネル１４０の右部であるか否かを判断する（ステップＳ１０６）。図１（Ｂ）に示すように、当該接触位置がタッチパネル１４０の右部である場合（ステップＳ１０６においてＹＥＳである場合）、表示制御部１１４として機能するＣＰＵ１１０は、ボタン群１４０Ａをタッチパネル１４０の左部の所定エリア（左エリア）に表示する（ステップＳ１０８）。検知部１１１として機能するＣＰＵ１１０は、タッチパネル１４０を介して接触が解除されたか否かを判断する（ステップＳ１１２）。
【０１８１】
図１（Ｅ）に示すように、当該接触位置がタッチパネル１４０の左部である場合（ステップＳ１０６においてＮＯである場合）、表示制御部１１４として機能するＣＰＵ１１０は、ボタン群１４０Ａをタッチパネル１４０の右部の所定エリア（右エリア）に表示する（ステップＳ１１０）。検知部１１１として機能するＣＰＵ１１０は、タッチパネル１４０を介して接触が解除されたか否かを判断する（ステップＳ１１２）。
【０１８２】
図１（Ａ）に示すように、接触が解除された場合（ステップＳ１１２においてＹＥＳである場合）、ＣＰＵ１１０はステップＳ１０２からの処理を繰り返す。
【０１８３】
接触が解除されない場合（ステップＳ１１２においてＮＯである場合）、検知部１１１として機能するＣＰＵ１１０は、タッチパネル１４０を用いて新たな外部の物体の存在を検知したか否かを判断する（ステップＳ１１４）。より詳細には、ＣＰＵ１１０は、タッチパネル１４０を用いて、タッチパネル１４０の上方であって、１つ目の接触位置とは離間した場所に存在する物体を検知したか否かを判断する。
【０１８４】
新たな物体の存在を検知しない場合（ステップＳ１１４においてＮＯである場合）、ＣＰＵ１１０は、タッチパネル１４０を用いて１つ目の接触位置が移動したか否かを判断する（ステップＳ１２４）。１つ目の接触領域が移動しない場合（ステップＳ１２４においてＮＯである場合）、ステップＳ１１２からの処理を繰り返す。
【０１８５】
図２（Ｂ）および図２（Ｄ）に示すように、１つ目の接触領域が移動する場合（ステップＳ１２４においてＹＥＳである場合）、表示制御部１１４として機能するＣＰＵ１１０は、ボタン群１４０Ａの表示位置を移動させる（ステップＳ１２６）。すなわち、ＣＰＵ１１０は、ボタン群１４０Ａの表示座標を変更することによって、タッチパネル１４０にボタン群１４０Ａを表示し直す。ＣＰＵ１１０は、ステップＳ１１２からの処理を繰り返す。このとき、ＣＰＵ１１０は、図１（Ｂ）に示す状態よりもボタン群１４０Ａを縮小するとともに、ボタン群１４０Ａを移動させてもよい。
【０１８６】
図１（Ｃ）、図１（Ｆ）、図２（Ｃ）、図２（Ｅ）に示すように、新たな物体を検知した場合（ステップＳ１１４においてＹＥＳである場合）、ＣＰＵ１１０は、タッチパネル１４０に、当該物体の先端部の下方に位置するボタンを拡大して表示させる（ステップＳ１１６）。ＣＰＵ１１０は、当該物体の先端部の下方に位置する複数のボタンの間隔を拡大させてもよい。ＣＰＵ１１０は、当該物体の先端部の下方に位置するボタンの周囲のボタンを縮小してもよい。ＣＰＵ１１０は、当該物体の先端部の下方に位置するボタンの周囲のボタンをひずませてもよい。
【０１８７】
検知部１１１として機能するＣＰＵ１１０は、タッチパネル１４０を用いて、新たな接触があったか否かを判断する（ステップＳ１１８）。すなわち、ＣＰＵ１１０は、１つ目の接触位置を検知している最中に、２つ目の接触位置を検知したか否かを判断する。
【０１８８】
図１（Ｄ）および図１（Ｇ）に示すように、新たな接触があった場合（ステップＳ１１８においてＹＥＳである場合）、ＣＰＵ１１０は、新たな接触位置がボタンの表示エリア内であるか否かを判断する（ステップＳ１２０）。新たな接触位置がボタンの表示エリア内でない場合（ステップＳ１２０においてＮＯである場合）、ＣＰＵ１１０は、ステップＳ１１４からの処理を繰り返す。
【０１８９】
新たな接触位置がボタンの表示エリア内である場合（ステップＳ１２０においてＹＥＳである場合）、ＣＰＵ１１０は、当該ボタンに対する命令を受け付ける（ステップＳ１２２）。ＣＰＵ１１０は、ステップＳ１１４からの処理を繰り返す。
【０１９０】
このように、本実施の形態においては、表示装置１００が１つ目の接触位置の逆側にボタン群１４０Ａを表示し直すので、ユーザが当該逆側の指９００Ｌ，９００Ｒでボタン群１４０Ａに含まれるボタンを押下し易くなる。また、ユーザが誤ってタッチパネル１４０にタッチしてしまっても、表示装置１００は最初のタッチに対する命令を受け付けないため、表示装置１００への命令の誤入力も防止することができる。また、表示装置１００はユーザの指９００Ｌ，９００Ｒの下方に位置するボタン間の間隔を大きくするので、ユーザがボタンを押し間違え難くなる。また、表示装置１００はユーザの指９００Ｌ，９００Ｒのスライド操作に応じて、ボタン群１４０Ａを全体的に縮小するとともに当該縮小したボタン群１４０Ａを移動させるので、ユーザが当該逆側の指９００Ｌ，９００Ｒでボタン群１４０Ａに含まれるボタンをさらに押下し易くなる。
【０１９１】
［実施の形態２］
次に、本発明の実施の形態２について説明する。上述の実施の形態１に係る表示装置１００は、図２に示すように、１つ目の接触領域のスライドに応じて、ボタン群１４０Ａを移動させるものであった。一方、本実施の形態に係る表示装置１００は、１つ目の接触領域のスライドに応じて、ボタンを拡大したり、拡大するボタンを変更したりするものである。
【０１９２】
すなわち、本実施の形態に係る表示装置１００の第１の動作概要は、実施の形態１に係る表示装置１００の第１の動作概要と同様であるため、ここでは説明を繰り返さない。換言すれば、本実施の形態に係る表示装置１００は、実施の形態１に係る表示装置１００の第２の動作概要の代わりに、以下で説明する第３の動作概要を実現するものである。
【０１９３】
＜表示装置１００の動作概要３＞
本実施の形態に係る表示装置１００の第３の動作概要について説明する。図１７は、本実施の形態に係る表示装置１００の第３の動作概要を示すイメージ図である。上述したように、本実施の形態に係る表示装置１００は、図１に示す第１の動作概要と図１７に示す第３の動作概要とを実現する。
【０１９４】
図１７（Ａ）は、図１（Ｂ）と同様に、ユーザの右手の親指９００Ｒがタッチパネル１４０の右部にタッチしたときのタッチパネル１４０の画面を示す。図１７（Ｂ）は、ユーザの右手の親指９００Ｒが右方向にスライドしたときのタッチパネル１４０の画面を示す。図１７（Ｃ）は、ユーザの右手の親指９００Ｒが上下方向にスライドしたときのタッチパネル１４０の画面を示す。図１７（Ｄ）は、ユーザの右手の親指９００Ｒが左方向にスライドしたときのタッチパネル１４０の画面を示す。図１７（Ｅ）は、ユーザの右手の親指９００Ｒが上下方向にスライドしたときのタッチパネル１４０の画面を示す。
【０１９５】
まず、図１７（Ａ）に示す状態においては、すなわち図１（Ｂ）に示す状態においては、表示装置１００がボタン群１４０Ａをタッチパネル１４０の左部に表示している。この状態において、図１７（Ｂ）に示すように、ユーザが右手の親指９００Ｒを右にスライドさせると、表示装置１００はボタン群１４０Ａのうちの、たとえば中央の列のボタンを拡大して表示する。そして、スライド量（スライド距離）に応じて、拡大すべき列を右方向へ変更する。このとき、表示装置１００は、その他の列のボタンを縮小して表示することが好ましい。
【０１９６】
これによって、手が小さい（指が短い）ユーザであっても、容易にボタン群１４０Ａに含まれるボタンを押下することができるようになる。すなわち、図１７（Ａ）に示す状態よりも、ユーザの左手の親指９００Ｌがボタン群１４０Ａに含まれるボタンに届き易くなる。その上、拡大された列のボタンを押し間違え難くなる。
【０１９７】
図１７（Ｃ）に示すように、ユーザが右手の親指９００Ｒを上下にスライドさせると、表示装置１００はボタン群１４０Ａの右列のボタンのうちの、たとえば上下中央に位置するボタンを拡大して表示する。そして、スライド方向とスライド量（スライド距離）に応じて、右列のボタンのうちで拡大すべきボタンを変更する。このとき、表示装置１００は、その他のボタンを縮小して表示することが好ましい。
【０１９８】
一方、図１７（Ａ）に示す状態において、図１７（Ｄ）に示すように、ユーザが右手の親指９００Ｒを左にスライドさせると、表示装置１００はボタン群１４０Ａのうちの、たとえば中央の列のボタンを拡大して表示する。そして、スライド量（スライド距離）に応じて、拡大すべき列を左方向に変更する。このとき、表示装置１００は、その他の列のボタンを縮小して表示することが好ましい。
【０１９９】
これによって、手が小さい（指が短い）ユーザであっても、容易にボタン群１４０Ａに含まれるボタンを押下することができるようになる。すなわち、図１７（Ａ）に示す状態よりも、ユーザの左手の親指９００Ｌがボタン群１４０Ａに含まれるボタンに届き易くなる。その上、拡大された列のボタンの押し間違え難くなる。
【０２００】
図１７（Ｅ）に示すように、ユーザが右手の親指９００Ｒを上下にスライドさせると、表示装置１００はボタン群１４０Ａの左列のボタンのうちの、たとえば上下中央に位置するボタンを拡大して表示する。そして、スライド方向とスライド量（スライド距離）に応じて、左列のボタンのうちで拡大すべきボタンを変更する。このとき、表示装置１００は、その他のボタンを縮小して表示することが好ましい。
【０２０１】
図示しないが、図１（Ｄ）と同様に、ユーザの左手の親指９００Ｌがタッチパネル１４０上のボタンにタッチすると、表示装置１００は、当該ボタンに対応する命令の入力を受け付ける。
【０２０２】
なお、図１（Ｅ）に示す状態において、ユーザが左手の親指９００Ｌをスライドさせた場合の動作についても、上記の動作に基づいて容易に想像できるものであるため、ここでは詳細な説明を繰り返さない。
【０２０３】
以下、このような機能を実現するための構成について詳述する。なお、本実施の形態に係る表示装置１００の全体構成、ハードウェア構成などは、実施の形態１に係る表示装置１００のそれと同様であるため、ここでは説明を繰り返さない。
【０２０４】
＜本実施の形態に係る表示装置１００の機能構成＞
以下では、図３および図１４を参照して、本実施の形態に係る表示装置１００の機能構成について説明する。なお、以下では、実施の形態１に係る表示装置１００と同様の機能を有するブロックについては説明を繰り返さない。
【０２０５】
表示装置１００は、検知部１１１と、受付部１１２と、表示制御部１１４とを含む。また、表示装置１００は、図３にも示したように、タッチパネル１４０とＲＡＭ１７１とを含む。
【０２０６】
本実施の形態においても、検知部１１１と、受付部１１２と、表示制御部１１４とは、ＣＰＵ１１０あるいは画像処理エンジン１８０などによって実現される機能である。より詳細には、ＣＰＵ１１０が有する各機能は、ＣＰＵ１１０がＲＡＭ１７１などに記憶される制御プログラムを実行して、図３に示される各ハードウェアを制御することによって実現される機能である。
【０２０７】
本実施の形態においては、表示制御部１１４は、ＣＰＵ１１０あるいは画像処理エンジン１８０によって実現される。表示制御部１１４は、検知部１１１からの画像データあるいは１または複数の接触位置に基づいて、タッチパネル１４０にボタン群１４０Ａを表す画像を表示させる。
【０２０８】
表示制御部１１４は、検知部１１１がタッチパネル１４０の第１のエリアへの１つ目の接触位置を検知したときにボタンを第２のエリアに表示させる。なお、本実施の形態においては、第１のエリアは、タッチパネル１４０の右部（あるいは左部）である。第２のエリアは、タッチパネル１４０の左部（あるいは右部）の中の所定エリアである。
【０２０９】
表示制御部１１４は、検知部１１１がタッチパネル１４０の第３のエリアへの１つ目の接触位置を検知したときにボタン群１４０Ａを第４のエリアに表示させる。本実施の形態においては、第３のエリアは、タッチパネル１４０の左部（あるいは右部）である。第４のエリアは、タッチパネル１４０の右部（あるいは左部）の中の所定エリアである。
【０２１０】
表示制御部１１４は、検知部１１１が１つ目の接触位置の左右方向への移動を検知したときに、ボタン群１４０Ａの所定の列のボタンを拡大表示する。すなわち、表示制御部１１４は、検知部１１１が１つ目の接触位置の左右方向への移動を検知したときに、当該所定の列以外のボタンを縮小表示する。同時に、表示制御部１１４は、接触位置の右方向への移動に応じて拡大表示する列を右方向に移動し、接触位置の左方向への移動に応じて拡大表示する列を左方向に移動する。さらに、表示制御部１１４は、移動量に応じて、拡大表示する列の移動量を変更することが好ましい。
【０２１１】
表示制御部１１４は、検知部１１１が１つ目の接触位置の上下方向への移動を検知したときに、ボタン群１４０Ａのうちの拡大表示されている列の所定のボタンを拡大表示する。すなわち、表示制御部１１４は、検知部１１１が１つ目の接触位置の上下方向への移動を検知したときに、当該所定のボタン以外を縮小表示する。同時に、表示制御部１１４は、上方向への移動に応じて拡大表示するボタンをより上のボタンへと変更し、下方向への移動に応じて拡大表示するボタンをより下のボタンへと変更する。表示制御部１１４は、移動量に応じて、拡大表示するボタンを変更させることが好ましい。
【０２１２】
表示制御部１１４は、検知部１１１の検知結果に基づいて、外部の物体が存在している（浮遊している）位置の下方に位置するボタンをその他のボタンと異なる表示態様にて表示する。たとえば、表示制御部１１４は、浮遊位置下方のボタンをその他のボタンよりも拡大して表示する。また、表示制御部１１４は、浮遊位置の下方のボタン間の間隔を、他のボタン間の間隔よりも拡大して表示する。
【０２１３】
＜表示処理＞
次に、図３、図１４、図１８を参照して、本実施の形態に係る表示装置１００における表示処理について説明する。なお、図１８は、本実施の形態に係る表示装置１００における表示処理の処理手順を示すフローチャートである。なお、本実施の形態に係る表示装置１００における表示処理の前半は、図１５に示す実施の形態１に係るそれと同様であるため、ここでは詳細な説明を繰り返さない。すなわち、ここでは、図１５における１つ目の接触が解除されない場合（ステップＳ１１２においてＮＯである場合）以降の処理について説明する。
【０２１４】
１つ目の接触が解除されない場合（ステップＳ１１２においてＮＯである場合）、検知部１１１として機能するＣＰＵ１１０は、タッチパネル１４０を用いて新たな物体の存在を検知したか否かを判断する（ステップＳ２１４）。より詳細には、ＣＰＵ１１０は、タッチパネル１４０を用いて、タッチパネル１４０の上方であって、１つ目の接触位置とは離間した場所に存在する物体を検知したか否かを判断する。
【０２１５】
新たな物体の存在を検知しない場合（ステップＳ２１４においてＮＯである場合）、ＣＰＵ１１０は、タッチパネル１４０を用いて１つ目の接触位置が移動したか否かを判断する（ステップＳ２２４）。１つ目の接触領域が移動しない場合（ステップＳ２２４においてＮＯである場合）、ステップＳ２１２からの処理を繰り返す。
【０２１６】
１つ目の接触領域が移動する場合（ステップＳ２２４においてＹＥＳである場合）、表示制御部１１４として機能するＣＰＵ１１０は、図１８（Ｂ）〜図１８（Ｅ）に示すように、ボタン群１４０Ａの一部のボタンを拡大表示するとともに、移動方向および移動量に応じて拡大するボタンを変更する（ステップＳ２２６）。ＣＰＵ１１０は、ステップＳ２１２からの処理を繰り返す。
【０２１７】
図１（Ｃ）および図１（Ｆ）に示すように、新たな物体を検知した場合（ステップＳ２１４においてＹＥＳである場合）、ＣＰＵ１１０は、タッチパネル１４０に、当該物体の先端部の下方に位置するボタンを拡大して表示させる（ステップＳ２１６）。ＣＰＵ１１０は、当該物体の先端部の下方に位置する複数のボタンの間隔を拡大させてもよい。ＣＰＵ１１０は、当該物体の先端部の下方に位置するボタンの周囲のボタンを縮小してもよい。ＣＰＵ１１０は、当該物体の先端部の下方に位置するボタンの周囲のボタンをひずませてもよい。
【０２１８】
なお、本実施の形態においては、接触領域のスライド操作によって拡大されたボタンと、新たな物体の先端部の下方に位置するボタンとが、共に拡大される場合があるものとしている。ただし、ステップＳ１１６において、接触領域の移動によって拡大されたボタンは、このときに通常のサイズに戻してもよいし、縮小してもよい。
【０２１９】
検知部１１１として機能するＣＰＵ１１０は、タッチパネル１４０を用いて、新たな接触があったか否かを判断する（ステップＳ２１８）。すなわち、ＣＰＵ１１０は、１つ目の接触位置を検知している最中に、２つ目の接触位置を検知したか否かを判断する。
【０２２０】
図１（Ｄ）および図１（Ｇ）に示すように、新たな接触があった場合（ステップＳ２１８においてＹＥＳである場合）、ＣＰＵ１１０は、新たな接触位置がボタンの表示エリア内であるか否かを判断する（ステップＳ２２０）。新たな接触位置がボタンの表示エリア内でない場合（ステップＳ２２０においてＮＯである場合）、ＣＰＵ１１０は、ステップＳ２１４からの処理を繰り返す。
【０２２１】
新たな接触位置がボタンの表示エリア内である場合（ステップＳ２２０においてＹＥＳである場合）、ＣＰＵ１１０は、当該ボタンに対する命令を受け付ける（ステップＳ２２２）。ＣＰＵ１１０は、ステップＳ２１４からの処理を繰り返す。
【０２２２】
このように、本実施の形態においては、表示装置１００が１つ目の接触位置の逆側にボタン群１４０Ａを表示し直すので、ユーザが当該逆側の指９００Ｌ，９００Ｒでボタン群１４０Ａに含まれるボタンを押下し易くなる。また、ユーザが誤ってタッチパネル１４０にタッチしてしまっても、表示装置１００は最初のタッチに対する命令を受け付けないため、表示装置１００への命令の誤入力も防止することができる。また、表示装置１００はユーザの指９００Ｌ，９００Ｒの下方に位置するボタン間の間隔を大きくするので、ユーザがボタンを押し間違え難くなる。また、表示装置１００はユーザの指９００Ｌ，９００Ｒのスライド操作に応じて、ボタン群１４０Ａのうち、所望の列に属するボタンや所望のボタンを拡大しつつ、他のボタンを縮小するので、ユーザが当該逆側の指９００Ｌ，９００Ｒでボタン群１４０Ａに含まれるボタンをさらに押下し易く、押し間違え難くなる。
【０２２３】
＜その他の実施の形態＞
本発明は、システム或いは装置にプログラムを供給することによって達成される場合にも適用できることはいうまでもない。そして、本発明を達成するためのソフトウェアによって表されるプログラムを格納した記憶媒体を、システム或いは装置に供給し、そのシステム或いは装置のコンピュータ（又はＣＰＵやＭＰＵ）が記憶媒体に格納されたプログラムコードを読出し実行することによっても、本発明の効果を享受することが可能となる。
【０２２４】
この場合、記憶媒体から読出されたプログラムコード自体が前述した実施の形態の機能を実現することになり、そのプログラムコードを記憶した記憶媒体は本発明を構成することになる。
【０２２５】
プログラムコードを供給するための記憶媒体としては、例えば、ハードディスク、光ディスク、光磁気ディスク、ＣＤ−ＲＯＭ、ＣＤ−Ｒ、磁気テープ、不揮発性のメモリカード（ＩＣメモリカード）、ＲＯＭ（マスクＲＯＭ、フラッシュＥＥＰＲＯＭなど）などを用いることができる。
【０２２６】
また、コンピュータが読出したプログラムコードを実行することにより、前述した実施の形態の機能が実現されるだけでなく、そのプログラムコードの指示に基づき、コンピュータ上で稼動しているＯＳ（オペレーティングシステム）などが実際の処理の一部または全部を行い、その処理によって前述した実施の形態の機能が実現される場合も含まれることは言うまでもない。
【０２２７】
さらに、記憶媒体から読み出されたプログラムコードが、コンピュータに挿入された機能拡張ボードやコンピュータに接続された機能拡張ユニットに備わるメモリに書き込まれた後、そのプログラムコードの指示に基づき、その機能拡張ボードや機能拡張ユニットに備わるＣＰＵなどが実際の処理の一部または全部を行い、その処理によって前述した実施の形態の機能が実現される場合も含まれることは言うまでもない。
【０２２８】
今回開示された実施の形態はすべての点で例示であって制限的なものではないと考えられるべきである。本発明の範囲は、上記した説明ではなく、特許請求の範囲によって示され、特許請求の範囲と均等の意味および範囲内でのすべての変更が含まれることが意図される。
【符号の説明】
【０２２９】
１００  表示装置、１０１  本体ユニット、１０２  表示ユニット、１１０  ＣＰＵ、１１１  取得部、１１２  受付部、１１４  表示制御部、１３０  ドライバ、１３１  走査信号線駆動回路、１３２  データ信号線駆動回路、１３３  光センサ駆動回路、１３４  スイッチ、１３５  アンプ、１４０  光センサ内蔵液晶パネル、１４１  画素回路、１４１ｂ，１４１ｇ，１４１ｒ  サブピクセル回路、１４３  電極対、１４３ａ  画素電極、１４３ｂ  対向電極、１４４  光センサ回路、１４５，１４５ｂ，１４５ｇ，１４５ｒ  フォトダイオード、１４６  コンデンサ、１５１Ａ  アクティブマトリクス基板、１５１Ｂ  対向基板、１５２  液晶層、１５３ｂ，１５３ｇ，１５３ｒ  カラーフィルタ、１５７  データ信号線、１６１  偏光フィルタ、１６２  ガラス基板、１６３  遮光膜、１６４  配向膜、１７１  ＲＡＭ、１７１Ａ  画像データ、１７３  メモリカードリーダライタ、１７４  通信装置、１７５  マイク、１７６  スピーカ、１７７  操作キー、１７９  バックライト、１８０  画像処理エンジン、１８１  ドライバ制御部、１８２  タイマ、１８３  信号処理部、９００  指、９００Ｌ  左手の親指、９００Ｒ  右手の親指、１７３１  メモリカード、ＤＢ１，ＤＢ２  データバス。
【図１】
2010266937.tif 000003
【図２】
2010266937.tif 000004
【図３】
2010266937.tif 000005
【図４】
2010266937.tif 000006
【図５】
2010266937.tif 000007
【図６】
2010266937.tif 000008
【図７】
2010266937.tif 000009
【図８】
2010266937.tif 000010
【図９】
2010266937.tif 000011
【図１０】
2010266937.tif 000012
【図１１】
2010266937.tif 000013
【図１２】
2010266937.tif 000014
【図１３】
2010266937.tif 000015
【図１４】
2010266937.tif 000016
【図１５】
2010266937.tif 000017
【図１６】
2010266937.tif 000018
【図１７】
2010266937.tif 000019
【図１８】
2010266937.tif 000020