(57)【要約】【課題】表示領域間の移動が容易になる表示装置を提供する。【解決手段】表示装置の一態様である電子機器は、画像を表示するための表示領域に沿って複数の光センサが内蔵されている液晶パネル１４０、２４０を備える。電子機器は、液晶パネル２４０からの出力に基づいて、その表示領域に表示されている画像１５００がスタイラスペン１５１０によって選択されたことを検知する選択検知部と、液晶パネル１４０においてスタイラスペン１５１０によって選択された位置を検知する位置検知部と、液晶パネル２４０に内蔵されている複数の光センサからの出力に応じて、画像１５００を、液晶パネル１４０において選択された位置に画像１５３０として表示する表示制御部とを備える。【選択図】図１５
2010102581.tif 000002
【特許請求の範囲】
【請求項１】
表示装置であって、
画像を表示するための第１の表示領域を有する第１の表示手段と、
画像を表示するための第２の表示領域を有する第２の表示手段と、
前記第１の表示領域に表示されている画像が選択されたことを検知する第１の選択検知手段と、
選択された前記画像を移動するための操作入力に基づいて、選択された前記画像の表示場所を、前記第１の表示手段から前記第２の表示手段に切り換える表示制御手段とを備える、表示装置。
【請求項２】
前記第１の表示手段は、前記第１の表示領域に沿って内蔵された複数の光センサを含む、請求項１に記載の表示装置。
【請求項３】
前記第２の表示手段は、前記第２の表示領域に沿って内蔵された複数の光センサを含む、請求項１または請求項２に記載の表示装置。
【請求項４】
前記第２の表示領域において指定された位置の座標値を検出する座標値検出手段をさらに備え、
前記表示制御手段は、前記第１の表示領域に表示されていた画像を、前記座標値に基づいて、前記第２の表示領域において指定された位置に表示する、請求項１から請求項３のいずれかに記載の表示装置。
【請求項５】
前記表示制御手段は、
前記選択後の出力に基づいて特定される前記第１の表示領域における軌跡が予め規定されたパターンに対応するか否かを判断し、
前記軌跡が前記予め規定されたパターンに対応する場合に、前記画像の表示を前記第１の表示領域から前記第２の表示領域に切り換える、請求項１から請求項４のいずれかに記載の表示装置。
【請求項６】
前記選択後の出力に基づいて特定される前記第１の表示領域における軌跡の長さが予め定められた長さを上回る場合に、または、前記選択後の出力に基づいて特定される前記第１の表示領域における軌跡の始点から終点までの操作入力の速さが定められた速さを上回る場合に、前記表示制御手段は、前記第１の表示領域に表示されていた画像を、前記第２の表示領域において指定された位置に表示する、請求項１から請求項４のいずれかに記載の表示装置。
【請求項７】
前記選択後の出力に基づいて特定される前記第１の表示領域における軌跡の長さが予め定められた長さを下回る場合に、または、前記選択後の出力に基づいて特定される前記第１の表示領域における軌跡の始点から終点までの操作入力の速さが定められた速さを下回る場合に、前記表示制御手段は、前記第１の表示領域に表示されていた画像を、前記第１の表示領域において前記軌跡の終点により特定される位置に表示する、請求項１から請求項４のいずれかに記載の表示装置。
【請求項８】
前記第１の表示領域のうちの周辺領域として予め設定された領域に前記画像が表示されている場合、前記表示制御手段は、前記第１の表示領域における前記軌跡の検知に応答して、前記画像を前記第２の表示領域に表示する、請求項６または請求項７に記載の表示装置。
【請求項９】
前記軌跡の終点を含むベクトルの方向に前記第２の表示手段が位置している場合に、前記表示制御手段は、前記第１の表示領域に表示されていた画像を前記第２の表示領域に表示する、請求項１から請求項８のいずれかに記載の表示装置。
【請求項１０】
第１の表示領域に画像を表示するステップと、
前記画像を移動するための操作入力に基づいて、前記第１の表示領域に表示された画像が選択されたことを検知するステップと、
前記選択された画像を、前記第１の表示領域または前記第１の表示領域と異なる第２の表示領域のいずれの表示領域に表示するかを決定するステップと、
前記第１の表示領域に表示されていた画像を、決定された表示領域に表示するステップとを含む、表示装置の制御方法。
【請求項１１】
表示装置を制御するためのプログラムであって、前記プログラムは、前記表示装置が備えるコンピュータに、
第１の表示領域に画像を表示するステップと、
前記画像を移動するための操作入力に基づいて、前記第１の表示領域に表示された画像が選択されたことを検知するステップと、
前記選択された画像を、前記第１の表示領域または前記第１の表示領域と異なる第２の表示領域のいずれの表示領域に表示するかを決定するステップと、
前記第１の表示領域に表示されていた画像を、決定された表示領域に表示するステップとを実行させる、プログラム。
【請求項１２】
請求項１１に記載のプログラムを格納した、コンピュータ読み取り可能な記録媒体。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は表示装置の制御に関し、特に、複数の表示領域を有する表示装置の制御に関する。
【背景技術】
【０００２】
コンピュータその他の情報処理装置に表示される画像その他のオブジェクトは、マウス、キーボードその他の入力装置を用いて操作される。その操作を容易にするために、他の入力インターフェイスも開示されている。
【０００３】
たとえば、特開平９−１６０９１４号公報（特許文献１）は、「カットアンドペースト・コピーアンドペーストのテキストの移動を効率良く行うことができるペン入力装置」を開示している。
【０００４】
また、特開平７−１７５５８７号公報（特許文献２）は、「現実の物をマンマシンインタフェースの部品として利用可能とし、手のジェスチャによりモードレスで表示対象物を直感的に操作する」ための技術を開示している（［要約］の［課題］）。
【特許文献１】特開平９−１６０９１４号公報
【特許文献２】特開平７−１７５５８７号公報
【発明の開示】
【発明が解決しようとする課題】
【０００５】
しかしながら、複数のタブレット型ディスプレイ装置の場合、たとえば第１の表示領域から第２の表示領域に跨る際、ペンがタブレットから一旦離れる。そのため、第１の表示領域に表示されていた画像その他のオブジェクトを第２の表示領域に表示させることができなかった。
【０００６】
本発明は、上述のような問題点を解決するためになされたものであって、その目的は、表示領域間のオブジェクトの移動を容易に実現できる表示装置を提供することである。他の目的は、オブジェクトの操作に関する利便性が向上する表示装置を提供することである。
【０００７】
他の目的は、表示領域間のオブジェクトの移動を容易に実現できる表示装置の制御方法を提供することである。他の目的は、オブジェクトの操作に関する利便性が向上する表示装置の制御方法を提供することである。
【０００８】
他の目的は、表示領域間のオブジェクトの移動を容易に実現できる表示装置を制御するためのプログラムを提供することである。他の目的は、オブジェクトの操作に関する利便性が向上する表示装置を制御するためのプログラムを提供することである。
【０００９】
さらに他の目的は、表示領域間のオブジェクトの移動を容易に実現できる表示装置を制御するためのプログラムを格納した記録媒体を提供することである。他の目的は、オブジェクトの操作に関する利便性が向上する表示装置を制御するためのプログラムを格納した記録媒体を提供することである。
【課題を解決するための手段】
【００１０】
ある局面に従う表示装置は、画像を表示するための第１の表示領域を有する第１の表示手段と、画像を表示するための第２の表示領域を有する第２の表示手段と、第１の表示領域に表示されている画像が選択されたことを検知する第１の選択検知手段と、選択された画像を移動するための操作入力に基づいて、選択された画像の表示場所を、第１の表示手段から第２の表示手段に切り換える表示制御手段とを備える。
【００１１】
好ましくは、第１の表示手段は、第１の表示領域に沿って内蔵された複数の光センサを含む。
【００１２】
好ましくは、第２の表示手段は、第２の表示領域に沿って内蔵された複数の光センサを含む。
【００１３】
好ましくは、表示装置は、第２の表示領域において指定された位置の座標値を検出する座標値検出手段をさらに備える。表示制御手段は、第１の表示領域に表示されていた画像を、座標値に基づいて、第２の表示領域において指定された位置に表示する。
【００１４】
好ましくは、表示制御手段は、選択後の出力に基づいて特定される第１の表示領域における軌跡が予め規定されたパターンに対応するか否かを判断し、軌跡が予め規定されたパターンに対応する場合に、画像の表示を第１の表示領域から第２の表示領域に切り換える。
【００１５】
好ましくは、選択後の出力に基づいて特定される第１の表示領域における軌跡の長さが予め定められた長さを上回る場合に、または、選択後の出力に基づいて特定される第１の表示領域における軌跡の始点から終点までの操作入力の速さが定められた速さを上回る場合に、表示制御手段は、第１の表示領域に表示されていた画像を、第２の表示領域において指定された位置に表示する。
【００１６】
好ましくは、選択後の出力に基づいて特定される第１の表示領域における軌跡の長さが予め定められた長さを下回る場合に、または、選択後の出力に基づいて特定される第１の表示領域における軌跡の始点から終点までの操作入力の速さが定められた速さを下回る場合に、表示制御手段は、第１の表示領域に表示されていた画像を、第１の表示領域において軌跡の終点により特定される位置に表示する。
【００１７】
好ましくは、第１の表示領域のうちの周辺領域として予め設定された領域に画像が表示されている場合、表示制御手段は、第１の表示領域における軌跡の検知に応答して、画像を第２の表示領域に表示する。
【００１８】
好ましくは、軌跡の終点を含むベクトルの方向に第２の表示手段が位置している場合に、表示制御手段は、第１の表示領域に表示されていた画像を第２の表示領域に表示する。
【００１９】
他の局面に従うと、表示装置を制御するための方法が提供される。この方法は、第１の表示領域に画像を表示するステップと、画像を移動するための操作入力に基づいて、第１の表示領域に表示された画像が選択されたことを検知するステップと、選択された画像を、第１の表示領域または第１の表示領域と異なる第２の表示領域のいずれの表示領域に表示するかを決定するステップと、第１の表示領域に表示されていた画像を、決定された表示領域に表示するステップとを含む。
【００２０】
他の局面に従うと、表示装置が備えるコンピュータに表示装置を制御させるためのプログラムが提供される。このプログラムは、コンピュータに、第１の表示領域に画像を表示するステップと、画像を移動するための操作入力に基づいて、第１の表示領域に表示された画像が選択されたことを検知するステップと、選択された画像を、第１の表示領域または第１の表示領域と異なる第２の表示領域のいずれの表示領域に表示するかを決定するステップと、第１の表示領域に表示されていた画像を、決定された表示領域に表示するステップとを実行させる。
【００２１】
さらに他の局面に従うと、上記のプログラムを格納したコンピュータ読み取り可能な記録媒体が提供される。
【発明の効果】
【００２２】
ある局面によると、表示領域間のオブジェクトの移動を容易に実現できる。また、他の局面によると、表示されているオブジェクトの操作に関する利便性が向上する。
【発明を実施するための最良の形態】
【００２３】
以下、図面を参照しつつ、本発明の実施の形態について説明する。以下の説明では、同一の部品には同一の符号を付してある。それらの名称および機能も同じである。したがって、それらについての詳細な説明は繰り返さない。また、異なる実施の形態が説明される場合には、その実施の形態に係る構成の説明は、当該実施の形態に固有な構成を除き、繰り返さない。
【００２４】
図１から図１３を参照して、本発明の実施の形態に係る表示装置の一態様について説明する。表示装置は、たとえば、電子機器１００として実現される。
【００２５】
＜電子機器の外観＞
図１は、本実施の形態に係る電子機器１００の外観を示した図である。図１を参照して、電子機器１００は、第１の筐体１００Ａと第２の筐体１００Ｂとを含む。
【００２６】
第１の筐体１００Ａと第２の筐体１００Ｂとは、ヒンジ１００Ｃにより折畳み可能に接続されている。第１の筐体１００Ａは、光センサ内蔵液晶パネル１４０を備える。第２の筐体１００Ｂは、光センサ内蔵液晶パネル２４０を備える。このように、電子機器１００は、光センサ内蔵液晶パネルを２つ備える。
【００２７】
なお、電子機器１００は、ＰＤＡ（Personal Digital Assistant）、ノート型のパーソナルコンピュータ、携帯型電話機、電子辞書などの表示機能を有する携帯型デバイスとして構成される。
【００２８】
＜ハードウェア構成について＞
次に、図２を参照して、電子機器１００の具体的構成の一態様について説明する。図２は、電子機器１００のハードウェア構成を表わすブロック図である。電子機器１００は、主たる構成要素として、本体装置１０１と、表示装置１０２と、表示装置１０３とを含む。
【００２９】
第１の筐体１００Ａは、表示装置１０２を含む。第２の筐体１００Ｂは、本体装置１０１と表示装置１０３とを含む。なお、電子機器１００は、第２の筐体１００Ｂの代わりに第１の筐体１００Ａに本体装置１０１を含んでもよい。
【００３０】
本体装置１０１は、ＣＰＵ（Central Processing Unit）１１０と、ＲＡＭ（Random Access Memory）１７１と、ＲＯＭ（Read-Only Memory）１７２と、メモリカードリーダライタ１７３と、通信部１７４と、マイク１７５と、スピーカ１７６と、操作キー１７７とを含む。各構成要素は、相互にデータバスＤＢ１によって接続されている。メモリカードリーダライタ１７３には、メモリカード１７３１が装着される。
【００３１】
ＣＰＵ１１０は、プログラムを実行する。操作キー１７７は、電子機器１００の使用者による指示の入力を受ける。ＲＡＭ１７１は、ＣＰＵ１１０によるプログラムの実行により生成されたデータ、または操作キー１７７を介して入力されたデータを揮発的に格納する。ＲＯＭ１７２は、データを不揮発的に格納する。また、ＲＯＭ１７２は、ＥＰＲＯＭ（Erasable Programmable Read-Only Memory）やフラッシュメモリなどのデータの書込みおよび消去が可能なＲＯＭである。通信部１７４は、図示しない他の電子機器との間で無線通信を行う。なお、図２には図示していないが、電子機器１００が、他の電子機器に有線により接続するためのインターフェイス（ＩＦ）を備える構成としてもよい。
【００３２】
表示装置１０２は、ドライバ１３０と、光センサ内蔵液晶パネル１４０（以下、液晶パネル１４０と称する）と、内部ＩＦ１７８と、バックライト１７９と、画像処理エンジン１８０とを含む。
【００３３】
ドライバ１３０は、液晶パネル１４０およびバックライト１７９を駆動するための駆動回路である。ドライバ１３０に含まれる各種の駆動回路については、後述する。
【００３４】
液晶パネル１４０は、液晶ディスプレイの機能と光センサの機能とを備えたデバイスである。つまり、液晶パネル１４０は、液晶を用いた画像の表示と、光センサを用いたセンシングとを行うことができる。液晶パネル１４０の詳細については、後述する。
【００３５】
内部ＩＦ（Interface）１７８は、本体装置１０１と表示装置１０２との間で、データの遣り取りを仲介する。
【００３６】
バックライト１７９は、液晶パネル１４０の裏面に配置された光源である。バックライト１７９は、当該裏面に対して均一な光を照射する。
【００３７】
画像処理エンジン１８０は、ドライバ１３０を介して液晶パネル１４０の動作を制御する。ここで、当該制御は、内部ＩＦ１７８を介して本体装置１０１から送られてくる各種データに基づいて行われる。なお、当該各種データは、後述するコマンドを含む。また、画像処理エンジン１８０は、液晶パネル１４０から出力されるデータを処理し、処理したデータを内部ＩＦ１７８を介して本体装置１０１に送る。さらに、画像処理エンジン１８０は、ドライバ制御部１８１と、タイマ１８２と、信号処理部１８３とを含む。
【００３８】
ドライバ制御部１８１は、ドライバ１３０に対して制御信号を送ることによりドライバ１３０の動作を制御する。また、ドライバ制御部１８１は、本体装置１０１から送られてくるコマンドを解析する。そして、ドライバ制御部１８１は、当該解析の結果に基づいた制御信号をドライバ１３０に送る。ドライバ１３０の動作の詳細については、後述する。
【００３９】
タイマ１８２は、時刻情報を生成し、信号処理部１８３に対して時刻情報を送る。
信号処理部１８３は、上記光センサから出力されるデータを受け取る。ここで、上記光センサから出力されるデータはアナログデータであるため、信号処理部１８３は、まず当該アナログデータをデジタルデータに変換する。さらに、信号処理部１８３は、当該デジタルデータに対して、本体装置１０１から送られてくるコマンドの内容に応じたデータ処理を行う。そして、信号処理部１８３は、上記データ処理を行った後のデータと、タイマ１８２から取得した時刻情報とを含んだデータ（以下、応答データと称する）を本体装置１０１に送る。また、信号処理部１８３は、後述するスキャンデータを連続して複数格納できるＲＡＭ（図示せず）を備えている。
【００４０】
上記コマンドは、上記光センサによりセンシングを指示するセンシングコマンドを含む。当該センシングコマンドの詳細および上記応答データの詳細については、後述する（図７〜図９）。
【００４１】
なお、タイマ１８２は、必ずしも画像処理エンジン１８０に備えられている必要はない。たとえば、タイマ１８２は、表示装置１０２内における、画像処理エンジン１８０の外部に備えられていてもよい。あるいは、タイマ１８２は、本体装置１０１に備えられていてもよい。また、マイク１７５およびスピーカ１７６は、電子機器１００が常に備える構成ではなく、電子機器１００の実施例によっては、マイク１７５およびスピーカ１７６のいずれかあるいは両方を有さない構成であってもよい。
【００４２】
ここで、表示装置１０２は、システム液晶を含んでいる。なお、システム液晶とは、液晶パネル１４０の周辺機器を当該液晶パネル１４０のガラス基板上に一体形成することにより得られるデバイスである。本実施の形態では、ドライバ１３０（バックライト１７９を駆動する回路を除く）と、内部ＩＦ１７８と、画像処理エンジン１８０とが、液晶パネル１４０のガラス基板上に一体形成されている。なお、表示装置１０２が、必ずしもシステム液晶を用いて構成されている必要はなく、ドライバ１３０（バックライト１７９を駆動する回路を除く）と、内部ＩＦ１７８と、画像処理エンジン１８０とが、上記ガラス基板以外の基板に構成されていてもよい。
【００４３】
表示装置１０３は、ドライバ２３０と、光センサ内蔵液晶パネル２４０（以下、「液晶パネル２４０」と称する）と、内部ＩＦ２７８と、バックライト２７９と、画像処理エンジン２８０とを含む。画像処理エンジン２８０は、ドライバ制御部２８１と、タイマ２８２と、信号処理部２８３とを含む。
【００４４】
表示装置１０３は、表示装置１０２と同様な構成を有する。つまり、ドライバ２３０、液晶パネル２４０、内部ＩＦ２７８、バックライト２７９、および画像処理エンジン２８０は、表示装置１０２における、ドライバ１３０、液晶パネル１４０、内部ＩＦ１７８、バックライト１７９、画像処理エンジン１８０と同じ構成をそれぞれ有する。ドライバ制御部２８１、タイマ２８２、および信号処理部２８３は、表示装置１０２における、ドライバ制御部１８１、タイマ１８２、信号処理部１８３と同じ構成をそれぞれ有する。したがって、表示装置１０３に含まれる各機能ブロックについての説明は、繰り返さない。
【００４５】
ところで、電子機器１００における処理は、各ハードウェアおよびＣＰＵ１１０により実行されるソフトウェアによって実現される。このようなソフトウェアは、ＲＯＭ１７２に予め記憶されている場合がある。また、ソフトウェアは、メモリカード１７３１その他の記憶媒体に格納されて、プログラム製品として流通している場合もある。あるいは、ソフトウェアは、いわゆるインターネットに接続されている情報提供事業者によってダウンロード可能なプログラム製品として提供される場合もある。このようなソフトウェアは、メモリカードリーダライタ１７３その他の読取装置によりその記憶媒体から読み取られて、あるいは、通信部１７４または通信ＩＦ（図示せず）を介してダウンロードされた後、ＲＯＭ１７２に一旦格納される。そのソフトウェアは、ＣＰＵ１１０によってＲＯＭ１７２から読み出され、ＲＡＭ１７１に実行可能なプログラムの形式で格納される。ＣＰＵ１１０は、そのプログラムを実行する。
【００４６】
図２に示される電子機器１００の本体装置１０１を構成する各構成要素は、一般的なものである。したがって、本発明の本質的な部分は、ＲＡＭ１７１、ＲＯＭ１７２、メモリカード１７３１その他の記憶媒体に格納されたソフトウェア、あるいはネットワークを介してダウンロード可能なソフトウェアであるともいえる。なお、電子機器１００の本体装置１０１のハードウェアの動作は周知であるので、詳細な説明は繰り返さない。
【００４７】
なお、記憶媒体としては、メモリカードに限られず、ＣＤ−ＲＯＭ、ＦＤ（Flexible  Disk）、ハードディスク、磁気テープ、カセットテープ、光ディスク（ＭＯ（Magnetic Optical Disc）／ＭＤ（Mini Disc）／ＤＶＤ（Digital Versatile Disc））、ＩＣ（Integrated Circuit）カード（メモリカードを除く）、光カード、マスクＲＯＭ、ＥＰＲＯＭ、ＥＥＰＲＯＭ（Electronically Erasable Programmable Read-Only Memory）、フラッシュＲＯＭなどの半導体メモリ等の固定的にプログラムを格納する媒体でもよい。
【００４８】
ここでいうプログラムとは、ＣＰＵにより直接実行可能なプログラムだけでなく、ソースプログラム形式のプログラム、圧縮処理されたプログラム、暗号化されたプログラム等を含む。
【００４９】
＜光センサ内蔵液晶パネルの構成および駆動について＞
次に、液晶パネル１４０の構成と、当該液晶パネル１４０の周辺回路の構成とについて説明する。図３は、液晶パネル１４０の構成と、当該液晶パネル１４０の周辺回路とを示した図である。
【００５０】
図３を参照して、液晶パネル１４０は、画素回路１４１と、光センサ回路１４４と、走査信号線Ｇｉと、データ信号線ＳＲｊと、データ信号線ＳＧｊと、データ信号線ＳＢｊと、センサ信号線ＳＳｊと、センサ信号線ＳＤｊと、読出信号線ＲＷｉと、リセット信号線ＲＳｉとを含む。なお、ｉは、１≦ｉ≦ｍを満たす自然数であり、ｊは１≦ｊ≦ｎを満たす自然数である。
【００５１】
また、図２に示した表示装置１０２のドライバ１３０は、液晶パネル１４０の周辺回路として、走査信号線駆動回路１３１と、データ信号線駆動回路１３２と、光センサ駆動回路１３３と、スイッチ１３４と、アンプ１３５とを含む。
【００５２】
走査信号線駆動回路１３１は、図２に示すドライバ制御部１８１から制御信号ＴＣ１を受ける。そして、走査信号線駆動回路１３１は、制御信号ＴＣ１に基づき、各走査信号線（Ｇ１〜Ｇｍ）に対して、走査信号線Ｇ１から順に予め定められた電圧を印加する。より詳しくは、走査信号線駆動回路１３１は、単位時間毎に走査信号線（Ｇ１〜Ｇｍ）の中から１つの走査信号線を順次選択し、当該選択した走査信号線に対して後述するＴＦＴ（Thin Film Transistor）１４２のゲートをターンオンできるだけの電圧（以下、ハイレベル電圧）を印加する。なお、選択されていない走査信号線に対しては、ハイレベル電圧を印加することなく、ローレベル電圧を印加したままとする。
【００５３】
データ信号線駆動回路１３２は、図２に示すドライバ制御部１８１から画像データ（ＤＲ，ＤＧ，ＤＢ）を受ける。そして、データ信号線駆動回路１３２は、３ｎ個のデータ信号線（ＳＲ１〜ＳＲｎ，ＳＧ１〜ＳＧｎ，ＳＢ１〜ＳＢｎ）に対して、上記単位時間毎に、１行分の画像データに対応する電圧を順次印加する。
【００５４】
なお、ここでは、いわゆる線順次方式と呼ばれる駆動方式を用いて説明したが、駆動方式はこれに限定されるものではない。
【００５５】
画素回路１４１は、１つの画素の輝度（透過率）を設定するための回路である。また、画素回路１４１は、マトリクス状にｍ×ｎ個配されている。より詳しくは、画素回路１４１は、図３の縦方向にｍ個、横方向にｎ個配されている。
【００５６】
画素回路１４１は、Ｒサブピクセル回路１４１ｒと、Ｇサブピクセル回路１４１ｇと、Ｂサブピクセル回路１４１ｂとからなる。これら３つの回路（１４１ｒ，１４１ｇ，１４１ｂ）は、それぞれ、ＴＦＴ１４２と、画素電極と対向電極とからなる１組の電極対１４３と、図示しないコンデンサとを含む。
【００５７】
なお、ｎ型のトランジスタとｐ型のトランジスタとを作れるＣＭＯＳ（Complementary Metal Oxide Semiconductor）を実現できること、キャリア（電子または正孔）の移動速度がアモルファスシリコン薄膜トランジスタ（a-Si TFT）に比べて数百倍早いことなどから、表示装置１０２では、ＴＦＴ１４２として多結晶シリコン薄膜トランジスタ(p-Si TFT)が用いられる。なお、ＴＦＴ１４２は、ｎ型チャネルの電界効果トランジスタであるとして説明する。ただし、ＴＦＴ１４２がｐ型チャネルの電界効果トランジスタであってもよい。
【００５８】
Ｒサブピクセル回路１４１ｒ内のＴＦＴ１４２のソースはデータ信号線ＳＲｊに接続されている。また、当該ＴＦＴ１４２のゲートは走査信号線Ｇｉに接続されている。さらに、当該ＴＦＴ１４２のドレインは、電極対１４３の画素電極に接続される。そして、画素電極と対向電極との間には、液晶が配される。なお、Ｇサブピクセル回路１４１ｇおよびＢサブピクセル回路１４１ｂについても、各ＴＦＴ１４２のソースが接続されるデータ信号線が異なる以外は、画素回路１４１ｒと同じ構成である。このため、これら２つの回路（１４１ｇ，１４１ｂ）についての説明は、繰り返さない。
【００５９】
ここで、画素回路１４１における輝度の設定について説明する。まず、走査信号線Ｇｉに上記ハイレベル電圧を印加する。当該ハイレベル電圧の印加により、ＴＦＴ１４２のゲートがターンオンする。このようにＴＦＴ１４２のゲートがターンオンした状態で、各データ信号線（ＳＲｊ，ＳＧｊ，ＳＢｊ）に対して、それぞれ指定された電圧（１画素分の画像データに対応する電圧）を印加する。これにより、当該指定された電圧に基づいた電圧が画素電極に印加される。その結果、画素電極と対向電極との間に電位差が生じる。この電位差に基づいて、液晶が応答し、画素の輝度は予め定められた輝度に設定される。なお、当該電位差は、上記図示しないコンデンサ（補助容量）によって、次のフレーム期間において走査信号線Ｇｉが選択されるまで保持される。
【００６０】
光センサ駆動回路１３３は、図２に示すドライバ制御部１８１から制御信号ＴＣ２を受ける。
【００６１】
そして、光センサ駆動回路１３３は、制御信号ＴＣ２に基づき、単位時間毎にリセット信号線（ＲＳ１〜ＲＳｍ）の中から１つの信号線を順次選択し、当該選択した信号線に対して、予め定められたタイミングで通常よりもハイレベルな電圧ＶＤＤＲを印加する。なお、選択されていないリセット信号線に対しては、選択されたリセット信号線に印加した電圧よりも低い電圧ＶＳＳＲを印加したままとする。たとえば、電圧ＶＤＤＲを０Ｖに、電圧ＶＳＳＲを−５Ｖに設定すればよい。
【００６２】
また、光センサ駆動回路１３３は、制御信号ＴＣ２に基づき、単位時間毎に読出信号線（ＲＷ１〜ＲＷｍ）の中から１つの信号線を順次選択し、当該選択した信号線に対して、予め定められたタイミングで通常よりもハイレベルな電圧ＶＤＤを印加する。なお、選択されていない読出信号線に対しては、上記電圧ＶＳＳＲを印加したままとする。たとえば、ＶＤＤの値を８Ｖに設定すればよい。
【００６３】
なお、電圧ＶＤＤＲを印加するタイミング、および電圧ＶＤＤを印加するタイミングについては、後述する。
【００６４】
光センサ回路１４４は、フォトダイオード１４５と、コンデンサ１４６と、ＴＦＴ１４７とを含む。なお、以下では、ＴＦＴ１４７がｎ型チャネルの電界効果トランジスタであるとして説明する。ただし、ＴＦＴ１４７がｐ型チャネルの電界効果トランジスタであってもよい。
【００６５】
フォトダイオード１４５のアノードは、リセット信号線ＲＳｉに接続されている。一方、フォトダイオード１４５のカソードは、コンデンサ１４６の一方の電極に接続されている。また、コンデンサ１４６の他方の電極は、読出信号線ＲＷｉに接続されている。なお、以下では、フォトダイオード１４５とコンデンサ１４６との接続点をノードＮと称する。
【００６６】
ＴＦＴ１４７のゲートは、ノードＮに接続されている。また、ＴＦＴ１４７のドレインは、センサ信号線ＳＤｊに接続されている。さらに、ＴＦＴ１４７のソースは、センサ信号線ＳＳｊに接続されている。光センサ回路１４４を用いたセンシングの詳細については、後述する。
【００６７】
スイッチ１３４は、センサ信号線（ＳＤ１〜ＳＤｎ）に対して、予め定められた電圧を印加するか否かを切り換えるために設けられたスイッチである。スイッチ１３４の切り換え動作は、光センサ駆動回路１３３により行われる。なお、スイッチ１３４が導通状態となった場合にセンサ信号線（ＳＤ１〜ＳＤｎ）に印加される電圧については、後述する。
【００６８】
アンプ１３５は、各センサ信号線（ＳＳ１〜ＳＳｎ）から出力された電圧を増幅する。なお、増幅された電圧は、図２に示した信号処理部１８３に送られる。
【００６９】
なお、画素回路１４１を用いて画像を液晶パネル１４０に表示させるタイミングと、光センサ回路１４４を用いてセンシングするタイミングとについては、画像処理エンジン１８０が制御する。
【００７０】
図４は、液晶パネル１４０とバックライト１７９との断面図である。図４を参照して、液晶パネル１４０は、アクティブマトリクス基板１５１Ａと、対向基板１５１Ｂと、液晶層１５２とを含む。対向基板１５１Ｂは、アクティブマトリクス基板１５１Ａに対向して配されている。液晶層１５２は、アクティブマトリクス基板１５１Ａと対向基板１５１Ｂとに挟まれている。バックライト１７９は、アクティブマトリクス基板１５１Ａに関し液晶層１５２と反対側に配されている。
【００７１】
アクティブマトリクス基板１５１Ａは、偏光フィルタ１６１と、ガラス基板１６２と、電極対１４３を構成する画素電極１４３ａと、フォトダイオード１４５と、データ信号線１５７と、配向膜１６４とを含む。さらに、図４には示していないが、アクティブマトリクス基板１５１Ａは、図３に示した、コンデンサ１４６と、ＴＦＴ１４７と、ＴＦＴ１４２と、走査信号線Ｇｉとを含む。
【００７２】
また、アクティブマトリクス基板１５１Ａにおいては、バックライト１７９側から、偏光フィルタ１６１、ガラス基板１６２、画素電極１４３ａ、および配向膜１６４が、この順に配されている。フォトダイオード１４５とデータ信号線１５７とは、ガラス基板１６２の液晶層１５２側に形成されている。
【００７３】
対向基板１５１Ｂは、偏光フィルタ１６１と、ガラス基板１６２と、遮光膜１６３と、カラーフィルタ（１５３ｒ，１５３ｇ，１５３ｂ）と、電極対１４３を構成する対向電極１４３ｂと、配向膜１６４とを含む。
【００７４】
また、対向基板１５１Ｂにおいては、液晶層１５２側から、配向膜１６４、対向電極１４３ｂ、カラーフィルタ（１５３ｒ，１５３ｇ，１５３ｂ）、ガラス基板１６２、および偏光フィルタ１６１が、この順に配されている。遮光膜１６３は、カラーフィルタ（１５３ｒ，１５３ｇ，１５３ｂ）と同一の層に形成されている。
【００７５】
カラーフィルタ１５３ｒは、赤色の波長の光を透過させるフィルタである。カラーフィルタ１５３ｇは、緑色の波長の光を透過させるフィルタである。カラーフィルタ１５３ｂは、青色の波長の光を透過させるフィルタである。ここで、フォトダイオード１４５は、カラーフィルタ１５３ｂに対向する位置に配されている。
【００７６】
液晶パネル１４０は、外光やバックライト１７９などの光源により発せられた光を遮ったり又は当該光を透過させたりすることによって、画像の表示をする。具体的には、液晶パネル１４０は、画素電極１４３ａと対向電極１４３ｂとの間に電圧を印加することにより液晶層１５２の液晶分子の向きを変化させ、上記光を遮ったり、あるいは透過させる。ただし、液晶だけでは光を完全に遮ることができないため、特定の偏光方向の光のみを透過させる偏光フィルタ１６１を配置している。
【００７７】
なお、フォトダイオード１４５の位置は、上記の位置に限定されるものではなく、カラーフィルタ１５３ｒに対向する位置やカラーフィルタ１５３ｇに対向する位置に設けることも可能である。
【００７８】
ここで、光センサ回路１４４の動作について説明する。図５は、光センサ回路１４４を動作させる際のタイミングチャートを示した図である。図５において、電圧ＶＩＮＴは、光センサ回路１４４内のノードＮにおける電位を示している。また、電圧ＶＰＩＸは、図３に示したセンサ信号線ＳＳｊからの出力電圧であって、アンプ１３５によって増幅される前の電圧を示している。
【００７９】
以下では、光センサ回路１４４をリセットするためのリセット期間と、光センサ回路１４４を用いて光をセンシングするためのセンシング期間と、センシングした結果を読み出す読出期間とに分けて説明する。
【００８０】
まず、リセット期間について説明する。リセット期間においては、リセット信号線ＲＳｉに印加する電圧を、ローレベル（電圧ＶＳＳＲ）からハイレベル（電圧ＶＤＤＲ）へと瞬間的に切り換える。一方、読出信号線ＲＷｉに印加する電圧は、ローレベル（電圧ＶＳＳＲ）のままとする。このように、リセット信号線ＲＳｉに上記ハイレベルの電圧を印加することにより、フォトダイオード１４５の順方向（アノード側からカソード側）に電流が流れ始める。その結果、ノードＮの電位である電圧ＶＩＮＴは、以下の式（１）で示す値となる。なお、式（１）では、フォトダイオード１４５における順方向の電圧降下量をＶｆとしている。
【００８１】
ＶＩＮＴ＝ＶＳＳＲ＋｜ＶＤＤＲ−ＶＳＳＲ｜−Ｖｆ  …  （１）
それゆえ、ノードＮの電位は、図５に示すとおり、電圧ＶＤＤＲよりもＶｆだけ小さな値となる。
【００８２】
ここで、電圧ＶＩＮＴは、ＴＦＴ１４７のゲートをターンオンさせる閾値以下であるため、センサ信号線ＳＳｊからの出力はない。このため、電圧ＶＰＩＸは変化しない。また、コンデンサ１４６の電極間には、上記電圧ＶＩＮＴ分の差が生じる。このため、コンデンサ１４６には、当該差に応じた電荷が蓄積される。
【００８３】
次に、センシング期間について説明する。リセット期間に続くセンシング期間においては、リセット信号線ＲＳｉに印加する電圧は、ハイレベル（電圧ＶＤＤＲ）からローレベル（電圧ＶＳＳＲ）へと瞬間的に切り換わる。一方、読出信号線ＲＷｉに印加する電圧は、ローレベル（電圧ＶＳＳＲ）のままとする。
【００８４】
このように、リセット信号線ＲＳｉに印加する電圧をローレベルに変化させることにより、ノードＮの電位は、リセット信号線ＲＳｉの電圧および読出信号線ＲＷｉの電圧よりも高くなる。このため、フォトダイオード１４５においては、カソード側の電圧がアノード側の電圧よりも高くなる。つまり、フォトダイオード１４５は、逆バイアスの状態となる。このような逆バイアスの状態において、光源からの光をフォトダイオード１４５が受光すると、フォトダイオード１４５のカソード側からアノード側へと電流が流れ始める。その結果、図５に示すとおり、ノードＮの電位（つまり、電圧ＶＩＮＴ）は時間の経過とともに低くなる。
【００８５】
なお、このように電圧ＶＩＮＴが低下し続けるため、ＴＦＴ１４７のゲートはターンオンした状態にはならない。それゆえ、センサ信号線ＳＳｊからの出力はない。このため、電圧ＶＰＩＸは変化しない。
【００８６】
次に、読出期間について説明する。センシング期間に続く読出期間においては、リセット信号線ＲＳｉに印加する電圧をローレベル（電圧ＶＳＳＲ）のままとする。一方、読出信号線ＲＷｉに印加する電圧は、ローレベル（電圧ＶＳＳＲ）からハイレベル（電圧ＶＤＤ）へと瞬間的に切り換わる。ここで、電圧ＶＤＤは、電圧ＶＤＤＲよりも高い値である。
【００８７】
このように、読出信号線ＲＷｉにハイレベルの電圧を瞬間的に印加することにより、図５に示すとおり、コンデンサ１４６を介してノードＮの電位が引き上げられる。なお、ノードＮの電位の上昇幅は、読出信号線ＲＷｉに印加する電圧に応じた値となる。ここで、ノードＮの電位（つまり、電圧ＶＩＮＴ）が、ＴＦＴ１４７のゲートをターンオンさせる閾値以上まで引き上げられるため、ＴＦＴ１４７のゲートがターンオンする。
【００８８】
この際、ＴＦＴ１４７のドレイン側に接続されたセンサ信号線ＳＤｊ（図３参照）に予め一定電圧を印加しておけば、ＴＦＴ１４７のソース側に接続されたセンサ信号線ＳＳｊからは、図５のＶＰＩＸのグラフに示すとおり、ノードＮの電位に応じた電圧が出力される。
【００８９】
ここで、フォトダイオード１４５が受光する光の量（以下、受光量と称する）が少ないと、図５のＶＩＮＴのグラフに示す直線の傾きが緩やかになる。その結果、電圧ＶＰＩＸは、受光量が多い場合に比べて高くなる。このように、光センサ回路１４４は、フォトダイオード１４５の受光量に応じて、センサ信号線ＳＳｊに出力する電圧の値を変化させる。
【００９０】
ところで、上記においては、ｍ×ｎ個存在する光センサ回路のうち、１つの光センサ回路１４４に着目して、その動作を説明した。以下では、液晶パネル１４０における各光センサ回路の動作について説明する。
【００９１】
まず、光センサ駆動回路１３３は、ｎ個のセンサ信号線（ＳＤ１〜ＳＤｎ）の全てに対して、予め定められた電圧を印加する。次に、光センサ駆動回路１３３は、リセット信号線ＲＳ１に対して、通常よりもハイレベルな電圧ＶＤＤＲを印加する。なお、他のリセット信号線（ＲＳ２〜ＲＳｍ）および読出信号線（ＲＷ１〜ＲＷｍ）については、ローレベルの電圧を印加したままの状態とする。これにより、図３における１行目のｎ個の光センサ回路が、上述したリセット期間に入る。その後、１行目のｎ個の光センサ回路は、センシング期間に入る。さらに、その後、１行目のｎ個の光センサ回路は、読出期間に入る。
【００９２】
なお、ｎ個のセンサ信号線（ＳＤ１〜ＳＤｎ）の全てに対して予め定められた電圧を印加するタイミングは、上記のタイミングに限定されず、少なくとも読出期間前に印加されるタイミングであればよい。
【００９３】
１行目のｎ個の光センサ回路の読出期間が終了すると、光センサ駆動回路１３３は、リセット信号線ＲＳ２に対して、通常よりもハイレベルな電圧ＶＤＤＲを印加する。つまり、２行目のｎ個の光センサ回路のリセット期間に入る。リセット期間が終了すると、２行目のｎ個の光センサ回路は、センシング期間に入り、その後は、読出期間に入る。
【００９４】
以降は、上述した処理が、順に、３行目のｎ個の光センサ回路、４行目のｎ個の光センサ回路、…ｍ行目のｎ個の光センサ回路に対して行われる。その結果、センサ信号線（ＳＳ１〜ＳＳｎ）からは、１行目のセンシング結果、２行目のセンシング結果、…、ｍ行目のセンシング結果が、この順に出力される。
【００９５】
なお、表示装置１０２においては、上記のように行毎にセンシングが行われるとともに、行毎にセンシング結果が液晶パネル１４０から出力される。このため、以下では、液晶パネル１４０から出力される１行目からｍ行目までのｍ行分の電圧に関するデータに対して、信号処理部１８３が上述したデータ処理を行った後のデータを、「スキャンデータ」と称する。つまり、スキャンデータとは、スキャン対象物（たとえば、ユーザの指）をスキャンすることにより得られる画像データを指す。また、当該スキャンデータに基づいて表示された画像を、「スキャン画像」と称する。さらに、以下では、センシングを「スキャン」と称する。
【００９６】
また、上記においては、ｍ×ｎ個の光センサ回路全てを用いてスキャンを行う構成を例に挙げたが、これに限定されるものではない。予め選択された光センサ回路を用いて、液晶パネル１４０の表面の一部の領域に関してスキャンを行うことも構成としてもよい。
【００９７】
以下では、電子機器１００が、両構成のいずれの構成をも採れるものとする。さらに、当該構成間の切り換えは、操作キー１７７を介した入力などに基づく本体装置１０１から送られてくるコマンドにより行われるものとする。なお、液晶パネル１４０の表面の一部の領域に関してスキャンを行う場合、画像処理エンジン１８０が、スキャン対象領域の設定を行う。なお、当該領域の設定を、操作キー１７７を介してユーザが指定できる構成としてもよい。
【００９８】
このように、液晶パネル１４０の表面の一部の領域に関してスキャンを行う場合には、画像の表示に関し、以下のような利用の態様がある。１つ目は、上記一部の領域（以下、スキャン領域と称する）以外の表面の領域において、画像を表示させる態様である。２つ目は、上記スキャン領域以外の表面の領域において、画像を表示させない態様である。いずれの態様とするかは、本体装置１０１から画像処理エンジン１８０に送られてくるコマンドに基づく。
【００９９】
図６は、液晶パネル１４０とバックライト１７９との断面図であって、スキャンの際にフォトダイオード１４５がバックライト１７９からの光を受光する構成を示した図である。
【０１００】
図６を参照して、ユーザの指９００が液晶パネル１４０の表面に接触している場合、バックライト１７９から発せられた光の一部は、当該接触している領域ではユーザの指９００（略平面）にて反射される。そして、フォトダイオード１４５は、当該反射された光を受光する。
【０１０１】
また、指９００が接触していない領域においても、バックライト１７９から発せられた光の一部は、ユーザの指９００にて反射される。この場合においても、フォトダイオード１４５は、当該反射された光を受光する。ただし、当該領域においては液晶パネル１４０の表面に指９００が接触していないため、指９００が接触している領域よりも、フォトダイオード１４５の受光量は少なくなる。なお、バックライト１７９から発せられた光のうち、ユーザの指９００に到達しない光のほとんどについては、フォトダイオード１４５は受光できない。
【０１０２】
ここで、バックライト１７９を、少なくともセンシング期間においては点灯させておくことにより、光センサ回路１４４は、ユーザの指９００により反射した光の光量に応じた電圧をセンサ信号線ＳＳｊから出力することができる。このように、バックライト１７９の点灯と消灯とを制御することにより、液晶パネル１４０では、指９００の接触位置、指９００の接触している範囲（指９００の押圧力によって定まる）、液晶パネル１４０の表面に対する指９００の方向などに応じて、センサ信号線（ＳＳ１からＳＳｎ）から出力される電圧が変化することになる。
【０１０３】
以上により、表示装置１０２は、指９００によって光が反射されることにより得られる像（以下、反射像とも称する）をスキャンすることができる。
【０１０４】
なお、指９００以外のスキャン対象物としては、スタイラスなどが挙げられる。
ところで、本実施の形態においては、電子機器１００の表示装置として液晶パネルを例に挙げて説明しているが、液晶パネルの代わりに有機ＥＬ（Electro-Luminescence）パネルなどの他のパネルを用いてもよい。
【０１０５】
＜データについて＞
次に、センシングコマンドについて説明する。なお、表示装置１０２においては、画像処理エンジン１８０は、センシングコマンドの内容を解析し、当該解析の結果に従ったデータ（つまり、応答データ）を本体装置１０１に送り返す。
【０１０６】
図７は、センシングコマンドの概略構成を示した図である。図７を参照して、センシングコマンドは、ヘッダのデータ領域ＤＡ０１と、タイミングを示すデータ領域ＤＡ０２と、データ種別を示すデータ領域ＤＡ０３と、読取方式を示すデータ領域ＤＡ０４と、画像階調を示すデータ領域ＤＡ０５と、解像度を示すデータ領域ＤＡ０６と、予備のデータ領域ＤＡ０７とを含む。
【０１０７】
図８は、センシングコマンドの各領域におけるデータの値と、当該値が示す意味内容とを示した図である。
【０１０８】
図８を参照して、タイミングを示すデータ領域に「００」が設定されたセンシングコマンドは、画像処理エンジン１８０に対して、そのときのスキャンデータの送信を要求する。つまり、センシングコマンドは、当該センシングコマンドを画像処理エンジン１８０が受信した後に、光センサ回路１４４を用いてスキャンすることにより得られるスキャンデータの送信を要求する。また、タイミングを示すデータ領域に「０１」が設定されたセンシングコマンドは、スキャン結果に変化があったときのスキャンデータの送信を要求する。さらに、タイミングを示すデータ領域に「１０」が設定されたセンシングコマンドは、一定周期毎にスキャンデータの送信を要求する。
【０１０９】
データ種別を示すデータ領域に「００１」が設定されたセンシングコマンドは、部分画像における中心座標の座標値の送信を要求する。また、データ種別を示すデータ領域に「０１０」が設定されたセンシングコマンドは、スキャン結果が変化した部分画像のみの送信を要求する。なお、スキャン結果が変化したとは、前回のスキャン結果と今回のスキャン結果が異なっていることを指す。さらに、データ種別を示すデータ領域に「１００」が設定されたセンシングコマンドは、全体画像の送信を要求する。
【０１１０】
ここで、「全体画像」とは、ｍ×ｎ個の光センサ回路を用いてスキャンした際に、各光センサ回路から出力される電圧に基づいて、画像処理エンジン１８０により生成された画像である。また、「部分画像」とは、全体画像の一部である。部分画像に関して、スキャン結果が変化した部分画像のみの送信を要求する構成とした理由については後述する。
【０１１１】
なお、上記座標値と上記部分画像または上記全体画像とを同時に要求する構成としてもよい。また、液晶パネル１４０の表面の一部の領域に関してスキャンを行う構成の場合には、上記全体画像はスキャンが行われる領域に対応した画像となる。
【０１１２】
読取方式を示すデータ領域に「００」が設定されたセンシングコマンドは、バックライト１７９を点灯してスキャンすることを要求する。また、読取方式を示すデータ領域に「０１」が設定されたセンシングコマンドは、バックライト１７９を消灯してスキャンすることを要求する。なお、バックライト１７９を消灯してスキャンする構成については後述する（図１２）。さらに、読取方式を示すデータ領域に「１０」が設定されたセンシングコマンドは、反射と透過とを併用してスキャンすることを要求する。なお、反射と透過とを併用するとは、バックライト１７９を点灯してスキャンする方式と、バックライトを消灯してスキャンする方式とを切り換えて、スキャン対象物のスキャンを行うことを指す。
【０１１３】
画像階調を示すデータ領域に「００」が設定されたセンシングコマンドは、白黒の２値の画像データを要求する。また、画像階調を示すデータ領域に「０１」が設定されたセンシングコマンドは、多階調の画像データを要求する。さらに、画像階調を示すデータ領域に「１０」が設定されたセンシングコマンドは、ＲＧＢのカラーの画像データを要求する。
【０１１４】
解像度を示すデータ領域に「０」が設定されたセンシングコマンドは、解像度の高い画像データを要求する。また、解像度を示すデータ領域に「１」が設定されたセンシングコマンドは、解像度の低い画像データを要求する。
【０１１５】
また、センシングコマンドには、図７および図８に示したデータ以外に、スキャンを行う領域（光センサ回路１４４を駆動する画素の領域）の指定、スキャンを行うタイミング、バックライト１７９の点灯のタイミングなどが記述されている。
【０１１６】
図９は、応答データの概略構成を示した図である。応答データは、センシングコマンドの内容に応じたデータであって、表示装置１０２の画像処理エンジン１８０が本体装置１０１に対して送信するデータである。
【０１１７】
図９を参照して、応答データは、ヘッダのデータ領域ＤＡ１１と、座標を示すデータ領域ＤＡ１２と、時刻を示すデータ領域ＤＡ１３と、画像を示すデータ領域ＤＡ１４とを含む。ここで、座標を示すデータ領域ＤＡ１２には、部分画像の中心座標の値が書き込まれる。また、時刻を示すデータ領域には、画像処理エンジン１８０のタイマ１８２から取得した時刻情報が書き込まれる。さらに、画像を示すデータ領域には、画像処理エンジン１８０により処理がされた後の画像データ（つまり、スキャンデータ）が書き込まれる。
【０１１８】
図１０は、指９００をスキャンすることにより得られた画像（つまり、スキャン画像）を示した図である。図１０を参照して、太実線で囲まれた領域Ｗ１の画像が全体画像であり、破線で囲まれた領域Ｐ１の画像が部分画像である。また、太線で示した十字の中心点Ｃ１が、中心座標となる。
【０１１９】
本実施の形態では、矩形の領域であって、かつセンサ信号線ＳＳｊからの出力電圧が予め定められた値以上となった光センサ回路が備えられた画素（つまり、予め定められた階調または予め定められた輝度以上の画素）全てを含む領域を、部分画像の領域としている。
【０１２０】
また、中心座標は、部分画像の領域における各画素の階調を考慮して決定される座標である。具体的には、中心座標は、部分画像内の各画素に関し、画素の階調と、当該画素と上記矩形の中心点（つまり図心）との距離とに基づき、重み付け処理を行うことにより決定される。つまり、中心座標は、部分画像の図心とは必ずしも一致しない。
【０１２１】
ただし、必ずしも中心座標の位置は上記に限定されるものではなく、中心座標を上記図心の座標あるいは図心の近傍の座標としてもよい。
【０１２２】
センシングコマンドのデータ種別を示すデータ領域に「００１」が設定されている場合には、画像処理エンジン１８０は、座標を示すデータ領域ＤＡ１２に上記中心座標の値を書き込む。この場合、画像処理エンジン１８０は、画像を示すデータ領域ＤＡ１４には画像データを書き込まない。画像処理エンジン１８０は、上記中心座標の値の書き込みを行なった後、当該中心座標の値を含む応答データを本体装置１０１に送る。このように、データ種別を示すデータ領域に「００１」が設定されている場合には、センシングコマンドは、画像データの出力を要求せずに、中心座標の値の出力を要求する。
【０１２３】
また、センシングコマンドのデータ種別を示すデータ領域に「０１０」が設定されている場合には、画像処理エンジン１８０は、画像を示すデータ領域ＤＡ１４に、スキャン結果が変化した部分画像の画像データを書き込む。この場合、画像処理エンジン１８０は、中心座標の値を座標を示すデータ領域ＤＡ１２に書き込まない。画像処理エンジン１８０は、上記スキャン結果が変化した部分画像の画像データの書き込みを行なった後、当該部分画像の画像データを含む応答データを本体装置１０１に送る。このように、データ種別を示すデータ領域に「０１０」が設定されている場合には、センシングコマンドは、中心座標の値の出力を要求せずに、スキャン結果が変化した部分画像の画像データの出力を要求する。
【０１２４】
なお、上記のように、スキャン結果が変化した部分画像のみの送信を要求する構成とした理由は、スキャンデータのうち部分画像の領域のスキャンデータが、当該領域以外のスキャンデータよりも重要度の高いデータであること、および、指９００などのスキャン対象物との接触状態により、スキャンデータのうち部分画像の領域に相当する領域のスキャンデータが変化しやすいことによる。
【０１２５】
また、センシングコマンドのデータ種別を示すデータ領域に「０１１」が設定されている場合には、画像処理エンジン１８０は、座標を示すデータ領域ＤＡ１２に中心座標の値を書き込むとともに、画像を示すデータ領域ＤＡ１４にスキャン結果が変化した部分画像の画像データを書き込む。その後、画像処理エンジン１８０は、当該中心座標の値と当該部分画像の画像データとを含む応答データを本体装置１０１に送る。このように、データ種別を示すデータ領域に「０１１」が設定されている場合には、センシングコマンドは、中心座標の値の出力と、スキャン結果が変化した部分画像の画像データの出力とを要求する。
【０１２６】
また、センシングコマンドのデータ種別を示すデータ領域に「１００」が設定されている場合には、画像処理エンジン１８０は、図９に示した応答データの画像を示すデータ領域ＤＡ１４に、全体画像の画像データを書き込む。この場合、画像処理エンジン１８０は、中心座標の値を座標を示すデータ領域ＤＡ１２に書き込まない。画像処理エンジン１８０は、上記全体画像の画像データの書き込みを行なった後、当該全体画像の画像データを含む応答データを本体装置１０１に送る。このように、データ種別を示すデータ領域に「１００」が設定されている場合には、センシングコマンドは、中心座標の値の出力を要求せずに、全体画像の画像データの出力を要求する。
【０１２７】
また、センシングコマンドのデータ種別を示すデータ領域に「１０１」が設定されている場合には、画像処理エンジン１８０は、座標を示すデータ領域ＤＡ１２に中心座標の値を書き込むとともに、画像を示すデータ領域ＤＡ１４に全体画像の画像データを書き込む。その後、画像処理エンジン１８０は、当該中心座標の値と当該全体画像の画像データとを含む応答データを本体装置１０１に送る。このように、データ種別を示すデータ領域に「１０１」が設定されている場合には、センシングコマンドは、中心座標の値の出力と、全体画像の画像データの出力とを要求する。
【０１２８】
＜構成の第１の変形例について＞
ところで、液晶パネル１４０の構成は、図３に示した構成に限定されるものではない。以下では、図３とは異なる態様の液晶パネルについて説明する。
【０１２９】
図１１は、上記異なる態様である光センサ内蔵液晶パネル１４０Ａの回路図である。図１１を参照して、光センサ内蔵液晶パネル１４０Ａ（以下、液晶パネル１４０Ａと称する）は、１画素内に３つの光センサ回路（１４４ｒ，１４４ｇ，１４４ｂ）を含んでいる。このように液晶パネル１４０Ａが１画素内に３つの光センサ回路（１４４ｒ，１４４ｇ，１４４ｂ）を備える点において、液晶パネル１４０Ａは、１画素内に１つの光センサ回路を備える液晶パネル１４０と異なる。なお、光センサ回路１４４の構成と、３つの各光センサ回路（１４４ｒ，１４４ｇ，１４４ｂ）との構成は同じである。
【０１３０】
また、１画素内における３つのフォトダイオード（１４５ｒ，１４５ｇ，１４５ｂ）は、それぞれ、カラーフィルタ１５３ｒ、カラーフィルタ１５３ｇ、カラーフィルタ１５３ｂに対向する位置に配されている。それゆえ、フォトダイオード１４５ｒは赤色の光を受光し、フォトダイオード１４５ｇは緑色の光を受光し、フォトダイオード１４５ｂは青色の光を受光する。
【０１３１】
また、液晶パネル１４０は１画素内において１つの光センサ回路１４４しか含まないため、１画素内に配設されるＴＦＴ１４７用のデータ信号線は、センサ信号線ＳＳｊとセンサ信号線ＳＤｊとの２本であった。しかしながら、液晶パネル１４０Ａは１画素内において３つの光センサ回路（１４４ｒ，１４４ｇ，１４４ｂ）を含むため、１画素内に配設されるＴＦＴ（１４７ｒ，１４７ｇ，１４７ｂ）用のデータ信号線は６本となる。
【０１３２】
具体的には、カラーフィルタ１５３ｒに対向する位置に配されたフォトダイオード１４５ｒのカソードに接続されたＴＦＴ１４７ｒに対応して、センサ信号線ＳＳＲｊとセンサ信号線ＳＤＲｊとが配設される。また、カラーフィルタ１５３ｇに対向する位置に配されたフォトダイオード１４５ｇのカソードに接続されたＴＦＴ１４７ｇに対応して、センサ信号線ＳＳＧｊとセンサ信号線ＳＤＧｊとが配設される。さらに、カラーフィルタ１５３ｂに対向する位置に配されたフォトダイオード１４５ｂのカソードに接続されたＴＦＴ１４７ｂに対応して、センサ信号線ＳＳＢｊとセンサ信号線ＳＤＢｊとが配設される。
【０１３３】
このような液晶パネル１４０Ａにおいては、バックライト１７９から照射された白色光は、３つのカラーフィルタ（１５３ｒ，１５３ｇ，１５３ｂ）を透過し、液晶パネル１４０Ａの表面では、赤、緑、および青とが混ざり白色光となる。ここで、スキャン対象物により白色光が反射されると、スキャン対象物の表面の色素に白色光の一部が吸収され、また一部が反射される。そして、反射された光は、再度、３つのカラーフィルタ（１５３ｒ，１５３ｇ，１５３ｂ）を透過する。
【０１３４】
この際、カラーフィルタ１５３ｒは赤色の波長の光を透過し、フォトダイオード１４５ｒは、当該赤色の波長の光を受光する。また、カラーフィルタ１５３ｇは緑色の波長の光を透過し、フォトダイオード１４５ｇは、当該緑色の波長の光を受光する。また、カラーフィルタ１５３ｂは青色の波長の光を透過し、フォトダイオード１４５ｂは、当該青色の波長の光を受光する。つまり、スキャン対象物によって反射された光は３つのカラーフィルタ（１５３ｒ，１５３ｇ，１５３ｂ）によって３原色（Ｒ，Ｇ，Ｂ）に色分解され、各フォトダイオード（１４５ｒ，１４５ｇ，１４５ｂ）は、それぞれに対応した色の光を受光する。
【０１３５】
スキャン対象物の表面の色素に白色光の一部が吸収されると、各フォトダイオード（１４５ｒ，１４５ｇ，１４５ｂ）の受光量が各フォトダイオード（１４５ｒ，１４５ｇ，１４５ｂ）で異なることになる。このため、センサ信号線ＳＳＲｊとセンサ信号線ＳＳＧｊとセンサ信号線ＳＳＢｊとの出力電圧は互いに異なる。
【０１３６】
それゆえ、各出力電圧に応じて、Ｒの階調とＧの階調とＢの階調とを画像処理エンジン１８０が決定することにより、画像処理エンジン１８０はＲＧＢのカラー画像を本体装置１０１へ送ることができる。
【０１３７】
以上述べたように、電子機器１００が液晶パネル１４０Ａを備えた構成とすることにより、スキャン対象物をカラーでスキャンできることになる。
【０１３８】
次に、図１２を参照して、前述のスキャンの方法（つまり、図６における反射像をスキャンする方法）とは異なるスキャンの方法について説明する。
【０１３９】
図１２は、スキャンの際にフォトダイオードが外光を受光する構成を示した断面図である。図１２に示されるように、外光の一部は、指９００によって遮られる。それゆえ、指９００と接触している液晶パネル１４０の表面領域の下部に配されたフォトダイオードは、ほとんど外光を受光できない。また、指９００の影が形成された表面領域の下部に配されたフォトダイオードは、ある程度の外光を受光できるものの、影が形成されていない表面領域に比べると外光の受光量が少ない。
【０１４０】
ここで、バックライト１７９を、少なくともセンシング期間においては消灯させておくことにより、光センサ回路１４４は、液晶パネル１４０の表面に対する指９００の位置に応じた電圧をセンサ信号線ＳＳｊから出力することができる。このように、バックライト１７９を点灯と消灯とを制御することにより、液晶パネル１４０では、指９００の接触位置、指９００の接触している範囲（指９００の押圧力によって定まる）、液晶パネル１４０の表面に対する指９００の方向などに応じて、センサ信号線（ＳＳ１からＳＳｎ）から出力される電圧が変化することになる。
【０１４１】
以上により、表示装置１０２は、指９００によって外光が遮られることにより得られる像（以下、影像とも称する）をスキャンすることができる。
【０１４２】
さらに、表示装置１０２を、バックライト１７９を点灯させてスキャンを行った後に、バックライト１７９を消灯させて再度スキャンを行う構成としてもよい。あるいは、表示装置１０２を、バックライト１７９を消灯させてスキャンを行った後に、バックライト１７９を点灯させて再度スキャンを行う構成としてもよい。
【０１４３】
この場合には、２つのスキャン方式を併用することになるため、２つのスキャンデータを得ることができる。それゆえ、一方のスキャン方式のみを用いてスキャンする場合に比べて、精度の高い結果を得ることができる。
【０１４４】
＜表示装置について＞
表示装置１０３の動作は、表示装置１０２の動作と同様、本体装置１０１からのコマンド（たとえば、センシングコマンド）に応じて制御される。表示装置１０３は表示装置１０２と同様な構成を有する。それゆえ、表示装置１０３が表示装置１０２と同じコマンドを本体装置１０１から受け付けた場合、表示装置１０３は表示装置１０２と同様の動作を行う。このため、表示装置１０３の構成や動作についての説明は繰り返さない。
【０１４５】
なお、本体装置１０１は、表示装置１０２と表示装置１０３とに対して、命令が異なるコマンドを送ることができる。この場合、表示装置１０２と表示装置１０３とは別々の動作を行う。また、本体装置１０１は、表示装置１０２および表示装置１０３のいずれかに対して、コマンドを送ってもよい。この場合、一方の表示装置のみがコマンドに応じた動作を行う。また、本体装置１０１が、表示装置１０２と表示装置１０３とに命令が同じコマンドを送ってもよい。この場合、表示装置１０２と表示装置１０３とは、同じ動作を行う。
【０１４６】
なお、表示装置１０２の液晶パネル１４０のサイズと表示装置１０３の液晶パネル２４０のサイズとは、同じであってもよいし又は異なっていてもよい。また、液晶パネル１４０の解像度と液晶パネル２４０の解像度とは、同じであってもよいし又は異なっていてもよい。
【０１４７】
＜構成の第２の変形例について＞
本実施の形態では、電子機器１００が、液晶パネル１４０と液晶パネル２４０といったそれぞれに光センサを内蔵した液晶パネルを備える構成について説明するが、一方の液晶パネルのみが光センサを内蔵している構成であってもよい。
【０１４８】
図１３は、電子機器１００Ａのハードウェア構成を表すブロック図である。電子機器１００Ａは、電子機器１００と同様、第１の筐体１００Ａと、第２の筐体１００Ｂとを含む。第１の筐体１００Ａは、表示装置１０２を含む。第２の筐体１００Ｂは、光センサを内蔵しない液晶パネル（つまり、表示機能のみを有する液晶パネル）を含む。電子機器１００Ａは、第２の筐体１００Ｂが光センサを内蔵しない液晶パネルを含む点で、第２の筐体１００Ｂが光センサを内蔵した液晶パネル２４０を含む電子機器１００と異なる。このような電子機器１００Ａは、第１の筐体１００Ａの表示装置１０２を用いて上述したセンシングを行なう。
【０１４９】
また、第２の筐体１００Ｂは、光センサを内蔵した液晶パネル２４０の代わりに、たとえば抵抗膜方式や静電容量方式のタッチパネルを備えてもよい。
【０１５０】
また、本実施の形態では、表示装置１０２がタイマ１８２を備え、表示装置１０３がタイマ２８２を備える構成として説明するが、表示装置１０２と表示装置１０３とが１つのタイマを共有する構成としてもよい。
【０１５１】
また、本実施の形態では、電子機器１００を折畳型の機器として説明するが、電子機器１００は必ずしも折畳型に限定されるものではない。たとえば、電子機器１００は、第１の筐体１００Ａが第２の筐体１００Ｂに対してスライドする構成のスライド式の機器であってもよい。
【０１５２】
＜＜具体的な実現例＞＞
次に、上述の構成を用いる電子機器１００の具体的な実現例について説明する。
【０１５３】
［第１の実施の形態］
機能構成
図１４を参照して、本実施の形態に係る電子機器１００によって実現される機能について説明する。図１４は、電子機器１００の機能の構成を表わすブロック図である。電子機器１００は、第１の表示部１４１０と、第２の表示部１４２０と、選択検知部１４３０と、位置検知部１４４０と、表示制御部１４５０と、記憶部１４６０とを備える。
【０１５４】
第１の表示部１４１０は、液晶パネル２４０によって実現される。第２の表示部１４２０は、液晶パネル１４０によって実現される。選択検知部１４３０と位置検知部１４４０と表示制御部１４５０とは、ＣＰＵ１１０によって実現される。他の局面において、選択検知部１４３０は、画像処理エンジン２８０によって実現され得る。位置検知部１４４０は、画像処理エンジン１８０によっても実現され得る。
【０１５５】
第１の表示部１４１０には、画像を表示するための表示領域に沿って複数の光センサが内蔵されている。第２の表示部１４２０には、画像を表示するための表示領域に沿って、複数の光センサが内蔵されている。
【０１５６】
なお、本実施の形態において、第１の表示部１４１０または第２の表示部１４２０が表示する画像とは、文書、写真、音楽、プログラムその他のファイルを示すサムネイル画像、フォルダを示す画像、ショートカットのための画像等を含み得るが、その他のファイルも含み得る。第１の表示部１４１０または第２の表示部１４２０が表示する画像は、少なくとも、電子機器１００の使用者がアクセス可能なファイルを示す画像であればよい。
【０１５７】
選択検知部１４３０は、第１の表示部１４１０からの出力に基づいて、第１の表示部１４１０の表示領域に表示されている画像が選択されたことを検知する。具体的には、画像を表示する場所として与えている座標値と、第１の表示部１４１０からの出力に基づいて特定される座標値とを比較する。これらの座標値が一致する場合、あるいはこれらの座標値の差が予め定められた範囲内である場合、選択検知部１４３０は、当該画像が選択されたことを検知する。
【０１５８】
位置検知部１４４０は、第２の表示部１４２０において使用者によって選択された位置を検知する。位置の選択は、使用者の指（図示しない）によって、あるいは、後述するスタイラスペンその他の入力装置によって行なわれる。他の局面において、位置検知部１４４０は、第１の表示部１４１０において使用者によって選択された位置を検知する。たとえば、使用者の入力操作が終了した場所が、使用者が選択した位置として検知される。この場合、画像の移動は、第１の表示部１４１０の表示領域内で行われ得る。
【０１５９】
表示制御部１４５０は、第１の表示部１４１０に内蔵されている複数の光センサからの当該選択後の出力に応じて、当該画像の表示を第１の表示部１４１０の表示領域から第２の表示部１４２０の表示領域に切り換えるように構成されている。位置検知部１４４０は、第２の表示部１４２０の表示領域において指定された位置の座標値を検出する。この場合、表示制御部１４５０は、第１の表示部１４１０に表示されていた画像を、位置検知部１４４０によって検知された座標値に基づいて第２の表示部１４２０において指定された位置に表示する。
【０１６０】
記憶部１４６０は、表示制御部１４５０による判断のために予め準備されたパターンを格納している。当該パターンは、たとえば、自由曲線によって形成されるパターン、文字、図形、記号その他液晶パネル２４０に入力することが可能な画像であるが、これらに限られない。
【０１６１】
好ましくは、表示制御部１４５０は、当該選択後の出力に基づいて特定される第１の表示部１４１０における軌跡が予め規定されたパターンに対応するか否かを判断する。表示制御部１４５０は、その軌跡が予め規定されたパターンに対応する場合に、画像の表示を第１の表示部１４１０の表示領域から第２の表示部１４２０の表示領域に切り換える。
【０１６２】
他の局面において、液晶パネル２４０の表示領域のうちの周辺領域として予め設定された領域に画像が表示されている場合、表示制御部１４５０は、その表示領域における軌跡の検知に応答して、画像を液晶パネル１４０の表示領域に表示する。
【０１６３】
他の局面において、軌跡の終点を含むベクトルの方向に第２の表示部が位置している場合に、表示制御部１４５０は、第１の表示部の表示領域に表示されていた画像を第２の表示部の表示領域に表示する。
【０１６４】
表示態様
図１５を参照して本実施の形態に係る電子機器１００における画面の表示態様について説明する。図１５は、液晶パネル２４０に表示されている画像を液晶パネル１４０に移動する場合における画面の切り換わりを表わす図である。
【０１６５】
図１５（Ａ）を参照して、画像の一態様である画像１５００は、液晶パネル２４０に表示されている。電子機器１００の使用者は、スタイラスペン１５１０を用いて、液晶パネル２４０に表示されている画像１５００を選択し、軌跡１５２０によって示されるような動作を行なう。このような動作を、「ジェスチャー」ともいう。そうすると、図１５（Ｂ）に示されるように、使用者がスタイラスペン１５１０を用いて液晶パネル１４０の表示領域においてある１点を指定すると、画像１５００は、液晶パネル１４０において画像１５３０として表示される。その結果、液晶パネル２４０に表示されていた画像１５００の表示は消える。
【０１６６】
図１６を参照して、本実施の形態に係る電子機器１００に対するジェスチャーの種類について説明する。液晶パネル２４０に表示されている画像を液晶パネル１４０に移動させるために電子機器１００の使用者が行なう操作として、たとえばスタイラスペン１５１０による曲線１６１０，１６２０または曲線１６３０，１６４０がそれぞれ考えられる。曲線１６１０の場合、液晶パネル２４０に表示されている画像を選択した後に予め規定された時間以上液晶パネル２４０の表示領域をなぞるように形成される。この形成される曲線は、たとえば、自由曲線であるが、文字、記号その他の線図が用いられてもよい。曲線１６１０の最後の部分は、液晶パネル２４０の上部に設けられる液晶パネル１４０を向いているため、画像処理エンジン２８０からの信号を受けたＣＰＵ１１０は、液晶パネル２４０に表示されている画像を液晶パネル１４０に表示させる命令と解釈する。その結果、図１５に示されるように、液晶パネル２４０に表示されていた画像は、液晶パネル１４０に表示される。
【０１６７】
他の局面において、曲線１６２０のようなジェスチャーが用いられてもよい。曲線１６２０は、液晶パネル２４０に表示されていた画像を選択した後、液晶パネル１４０が設けられている方向とは逆の方向に表示領域においてなぞられた後、液晶パネル１４０が設けられている方向に向くように軌跡が描かれている。この場合も、軌跡の終点は、液晶パネル２４０から液晶パネル１４０を向いているため、画像処理エンジン２８０からの信号を受けたＣＰＵ１１０は、液晶パネル２４０に表示されている画像を液晶パネル１４０に表示させる命令と判断する。ＣＰＵ１１０は、ＲＡＭ１７１において、描画データの出力先を、液晶パネル２４０から液晶パネル１４０に切り換える。これにより、液晶パネル１４０は、当該画像を表示することができる。
【０１６８】
さらに他の局面において、複数の曲線が画像を移動させるための命令として用いられてもよい。たとえば、曲線１６３０と直線１６４０とが、液晶パネル２４０に表示されている画像を液晶パネル１４０に移動させるための命令として使用され得る。この場合、複数の曲線１６３０，１６４０が予め設定された時間内に入力されることにより、ＣＰＵ１１０は、液晶パネル２４０に表示されている画像を液晶パネル１４０に表示させる命令と判断する。仮に、複数の曲線１６３０，１６４０が描かれた時間が予め設定された時間を上回る場合には、ＣＰＵ１１０は、そのような軌跡の入力は画像の移動ではないと判断し、液晶パネル２４０に表示されている画像の表示を切り換えない。
【０１６９】
制御構造
図１７を参照して、本実施の形態に係る電子機器１００の制御構造について説明する。図１７は、ＣＰＵ１１０が実行する一連の処理の一部を表わすフローチャートである。
【０１７０】
ステップＳ１７１０にて、ＣＰＵ１１０は、液晶パネル２４０からの出力に基づいて、液晶パネル２４０の表示領域におけるジェスチャー（たとえばスタイラスペン１５１０による入力）を検知する。
【０１７１】
ステップＳ１７２０にて、ＣＰＵ１１０は、予め登録されている軌跡パターンを、ＲＯＭ１７２からＲＡＭ１７１にロードする。
【０１７２】
ステップＳ１７３０にて、ＣＰＵ１１０は、画像処理エンジン２８０からの出力信号に基づいて、液晶パネル２４０に対するジェスチャーの軌跡を特定する。
【０１７３】
ステップＳ１７４０にて、ＣＰＵ１１０は、そのジェスチャーの始点に基づいて、電子機器１００の使用者によって選択された画像（たとえば画像１５００）を特定する。
【０１７４】
ステップＳ１７５０にて、ＣＰＵ１１０は、液晶パネル１４０からの出力に基づいて、液晶パネル１４０の表示領域に対する入力（たとえば、タップ操作）を検知する。
【０１７５】
ステップＳ１７６０にて、ＣＰＵ１１０は、ＲＡＭ１７１にロードされた軌跡パターンと、液晶パネル２４０に対して与えられた軌跡とが一致するか否かを判断する。ＣＰＵ１１０は、これらの軌跡パターンと軌跡とが一致すると判断すると、制御をステップＳ１７７０に切り換える。そうでない場合には（ステップＳ１７６０にてＮＯ）、ＣＰＵ１１０は処理を終了する。
【０１７６】
ステップＳ１７７０にて、ＣＰＵ１１０は、液晶パネル２４０に対する操作の終了時刻から液晶パネル１４０に対する操作が行なわれた時刻までのタイミング（入力時間）を算出する。たとえば、ＣＰＵ１１０は、画像処理エンジン２８０および画像処理エンジン１８０からそれぞれ送られてくる信号に関連付けられているタイムスタンプに基づいて、この時間を算出する。あるいは他の局面において、ＣＰＵ１１０は、電子機器１００における内部の動作を規定するカウンタの値に基づいて入力時間を算出してもよい。たとえば、ＣＰＵ１１０は、液晶パネル２４０における操作が終了した時と、液晶パネル１４０に対する操作が与えられた時との差を当該入力時間として算出してもよい。
【０１７７】
ステップＳ１７８０にて、ＣＰＵ１１０は、算出したタイミングが予め設定された一定のタイミング以内であるか否かを判定する。ＣＰＵ１１０は、そのタイミングが一定のタイミング以内であると判定すると（ステップＳ１７８０にてＹＥＳ）、制御をステップＳ１７９０に切り換える。そうでない場合には（ステップＳ１７８０にてＮＯ）、ＣＰＵ１１０は、制御を終了する。
【０１７８】
ステップＳ１７９０にて、ＣＰＵ１１０は、液晶パネル１４０において入力された場所を、画像１５００の新たな表示先として指定する。その結果、液晶パネル１４０は、画像１５３０として当該画像を液晶パネル１４０に表示する（図１５（Ｂ））。
【０１７９】
以上のようにして、第１の実施の形態に係る電子機器１００によると、２つの表示部のうちの１つに表示されていた画像を、その画像が表示されていた領域に対するスタイラスペン１５１０の操作に応じて、他の表示部に移動させることができる。これにより、画像の整理が容易になる。あるいは、当該画像を用いたコンテンツファイルの作成が容易になる。
【０１８０】
［第２の実施の形態］
以下、本発明の第２の実施の形態について説明する。本実施の形態に係る電子機器１００を、画像の移動を与えられたジェスチャーの形成された速さに応じて切り換える点で、前述の第１の実施の形態と異なる。
【０１８１】
そこで、図１８を参照して、本発明の第２の実施の形態に係る電子機器１００を実現する構成について説明する。図１８は、本実施の形態に係る電子機器１００によって実現される機能の構成を表わすブロック図である。電子機器１００は、図１４に示される構成に加えて、速さ算出部１８１０をさらに備える。速さ算出部１８１０は、第１の表示部１４１０に対する操作入力として基点の始点から終点までを描くために入力された操作の速さが予め定められた速さを上回るか否かを判断する。ある局面において、速さ算出部１８１０は、画像処理エンジン２８０から送られる各画素に基づいて特定される位置情報とその位置情報に関連付けられる時刻情報とを用いて、軌跡の始点から終点までの入力が行なわれた速さを算出する。
【０１８２】
第１の表示部１４１０におけるジェスチャーは、たとえば、第１の表示部１４１０において画像が選択された後の出力に基づいて特定される。当該ジェスチャーは、使用者によって描かれた軌跡の始点から終点までの操作入力である。この操作入力の速さが予め定められた速さを上回る場合、表示制御部１４５０は、第１の表示部１４１０に表示されていた画像を第２の表示部１４２０において指定された位置に表示する。
【０１８３】
あるいは、当該操作入力の速さが予め定められた速さを下回る場合、表示制御部１４５０は、第１の表示部１４１０に表示されていた画像を、その第１の表示部１４１０の表示領域におい当該軌跡の終点によって特定される新たな位置に表示する。この場合、画像の表示は、同一の表示部である第１の表示部１４１０内で場所が切り換わるに過ぎない。その他の機能は、第１の実施の形態に係る電子機器１００によって実現される機能と同じであるため説明は繰り返さない。
【０１８４】
次に、図１９および図２０を参照して、本実施の形態に係る電子機器１００における画像の移動について説明する。図１９は、液晶パネル２４０に表示されている画像が液晶パネル１４０に移動されない場合、すなわち同一の液晶パネル２４０内での移動に留まる場合を表わす図である。図２０は、液晶パネル２４０に表示されている画像が液晶パネル１４０に移動される場合を表わす図である。
【０１８５】
図１９を参照して、たとえば、電子機器１００の使用者がスタイラスペン１５１０を用いて画像１９１０を選択する。その後、使用者はスタイラスペン１５１０を軌跡１９２０のように移動させると、液晶パネル２４０における操作入力の時間と速度等の関係は、図１９（Ｂ）のように示される。すなわち、液晶パネル２４０において軌跡１９２０の入力が完了するため、画像処理エンジン２８０からの信号に基づいて算出される操作入力の速さは、最後には「０」となる。この場合、ＣＰＵ１１０は、液晶パネル２４０における入力を当該液晶パネル２４０内のみ移動と判断する。ＣＰＵ１１０は、スタイラスペン１５１０によって最後に入力された場所を移動先として決定する。ＣＰＵ１１０は、その入力された場所を含む信号を、画像１９１０の移動先としてドライバ制御部２８１に与える。ドライバ制御部２８１は、その信号に基づいて液晶パネル２４０に画像１９１０に対応する画像を表示する。液晶パネル２４０に表示されていた画像は、液晶パネル１４０に表示されなくなる。
【０１８６】
図２０を参照して、電子機器１００の使用者がスタイラスペン１５１０を用いて液晶パネル２４０から液晶パネル１４０まで横断するように軌跡を与えると、液晶パネル２４０に表示されていた画像２０１０は、液晶パネル１４０において画像２０２０として表示される。この場合、液晶パネル２４０に対して与えられる操作入力は、表示領域が終わるまで一定の速度によって与えられるため、画像処理エンジン２８０からの出力に基づいて算出される速さも「０」にはならない（図２０（Ｂ）参照）。したがって、ＣＰＵ１１０は、そのような入力は液晶パネル２４０に表示されていた画像を液晶パネル１４０に移動させるための命令であると判定する。ＣＰＵ１１０は、液晶パネル２４０に表示されていた画像２０１０を、液晶パネル１４０に対して最後に与えられた入力によって特定される場所に出力先を切り換える。その結果、液晶パネル１４０は、スタイラスペン１５１０が最後に接触していた場所に画像２０２０を表示する。
【０１８７】
制御構造
図２１を参照して、本実施の形態に係る電子機器１００の制御構造について説明する。図２１は、電子機器１００が備えるＣＰＵ１１０によって実現される一連の処理の一部を表わすフローチャートである。なお、第１の実施の形態に係る処理と同一の処理には同一のステップ番号を付してある。したがってそれらの説明は繰り返さない。
【０１８８】
ステップＳ２１１０にて、ＣＰＵ１１０は、液晶パネル２４０からの出力に基づいて、液晶パネル２４０の表示領域におけるジェスチャーの終了を検知する。
【０１８９】
ステップＳ２１２０にて、ＣＰＵ１１０は、液晶パネル２４０からの出力タイミングに基づいて、液晶パネル２４０に与えられたジェスチャーの終了時の速度を算出する。
【０１９０】
ステップＳ２１４０にて、ＣＰＵ１１０は、算出した速度が予め設定された速度以上であるか否かを判定する。ＣＰＵ１１０は、算出した速度が当該予め設定された速度以上であると判定すると（ステップＳ２１４０にてＹＥＳ）、制御をステップＳ２１５０に切り換える。そうでない場合には（ステップＳ２１４０にてＮＯ）、ＣＰＵ１１０は、制御をステップＳ２１７０に切り換える。
【０１９１】
ステップＳ２１５０にて、ＣＰＵ１１０は、電子機器１００に対するスタイラスペン１５１０による操作入力は、液晶パネル２４０から液晶パネル１４０へ画像の表示先を切り換える命令であると判断する。
【０１９２】
ステップＳ２１６０にて、ＣＰＵ１１０は、液晶パネル１４０の表示領域においてタッチされた場所に、その選択された画像の出力先を指定する。液晶パネル１４０は、ドライバ１３０からの命令に基づいて対応する画像を表示する。
【０１９３】
ステップＳ２１７０にて、ＣＰＵ１１０は、電子機器１００に対する操作入力を、液晶パネル２４０の表示内での移動と判断する。
【０１９４】
ステップＳ２１８０にて、ＣＰＵ１１０は、液晶パネル２４０の表示領域においてスタイラスペン１５１０を用いたジェスチャーが終了した場所（最後に入力された地点）を、当該画像の新たな表示先として指定する。液晶パネル２４０は、当初表示されていた場所から新たに指定された場所に画像を切り換えて表示する。
【０１９５】
以上のようにして、本実施の形態に係る電子機器１００によると、画像の表示先の切り換えは、液晶パネル２４０に対する操作入力の速度に応じて行なわれる。このようにすると、電子機器１００の使用者の意図をスタイラスペン１５１０その他の入力装置に反映することにより、表示先を切り換えることができる。したがって、使用者の直感に従った操作が可能となるため、使用者に対するストレスを抑制することができる。
【０１９６】
［第３の実施の形態］
以下、本発明の第３の実施の形態について説明する。本実施の形態に係る電子機器１００は、液晶パネル間の画像の移動を、画像が表示されている液晶パネルに対して与えられた軌跡の長さに応じて判断する機能を有する点で、前述の各実施の形態と異なる。
【０１９７】
機能構成
そこで、図２２を参照して、本発明の第３の実施の形態に係る電子機器を実現する構成について説明する。図２２は、本実施の形態に係る電子機器１００の機能的構成を表わすブロック図である。本実施の形態に係る電子機器１００は、第１の実施の形態に係る電子機器１００の構成（図４）に加えて、軌跡長さ算出部２２１０をさらに備える。軌跡長さ算出部２２１０は、選択検知部１４３０からの出力に基づいて、第１の表示部１４１０に対して与えられたスタイラスペン１５１０による軌跡の長さを算出する。軌跡長さ算出部２２１０の出力は、表示制御部１４５０に入力される。
【０１９８】
第１の表示領域における軌跡の長さは、第１の表示部１４１０における選択後の出力に基づいて特定される。この軌跡の長さが予め定められた長さを上回る場合、表示制御部１４５０は、第１の表示部１４１０に表示されていた画像を、第２の表示部１４２０の表示領域において指定された位置に表示する。第２の表示部１４２０における表示の位置は、たとえば、スタイラスペン１５１０によるタッチ操作に基づいて決定される。
【０１９９】
他の局面において、当該軌跡の長さが当該予め定められた長さを下回る場合には、表示制御部１４５０は、第１の表示領域に表示されていた画像を、第２の表示部１４２０に移動させることなく、第１の表示部１４１０においてスタイラスペン１５１０のタッチ操作によって特定される位置に表示する。この場合、画像は、第１の表示部１４１０の表示領域内の移動に留まる。
【０２００】
制御構造
図２３を参照して、本発明の実施の形態に係る電子機器１００の制御構造について説明する。図２３は、ＣＰＵ１１０が実行する一連の動作の一部を表わすフローチャートである。なお、前述の各実施の形態における処理と同一の処理には同一のステップ番号を付してある。したがってそれらの説明は繰り返さない。
【０２０１】
ステップＳ２３１０にて、ＣＰＵ１１０は、画像処理エンジン２８０からの出力に基づいて、液晶パネル２４０における軌跡の長さを算出する。ステップＳ２３２０にて、ＣＰＵ１１０は、その算出した長さが予め設定された長さ以上であるか否かを判定する。ＣＰＵ１１０は、その長さが当該設定された長さ以上であると判定すると（ステップＳ２３２０にてＹＥＳ）、制御をステップＳ２１５０に切り換える。そうでない場合には（ステップＳ２３２０にてＮＯ）、ＣＰＵ１１０は、制御をステップＳ２１７０に切り換える。
【０２０２】
ステップＳ２１５０にて、ＣＰＵ１１０は、液晶パネル２４０に対するタッチ操作が液晶パネル２４０に表示されていた画像を液晶パネル１４０に移動するための切り換えと判断し、前述のような処理を実行する（ステップＳ２１６０）。一方、ステップＳ２１７０にて、ＣＰＵ１１０は、液晶パネル２４０に対する操作を、液晶パネル２４０の表示領域内における画像の移動と判断し、前述の処理を繰り返す（ステップＳ２１８０）。
【０２０３】
表示態様
図２４および図２５を参照して、本実施の形態に係る電子機器１００における画面の表示態様について説明する。図２４は、画像が同一パネル内において移動される場合の状態を表わす図である。図２５は、画像が液晶パネル２４０から液晶パネル１４０に移動して表示される場合を表わす図である。
【０２０４】
・同一画面内の移動
図２４（Ａ）を参照して、電子機器１００の使用者は、スタイラスペン１５１０を用いて液晶パネル２４０に表示されている画像２４１０を選択する。その後、使用者が、スタイラスペン１５１０を用いて画像２４１０を方向２４２０のようになぞる動作を行なうと、ＣＰＵ１１０は、移動距離２４４０を算出する。この場合、スタイラスペン１５１０による選択と、なぞる動作との間の時間は、予め設定された時間以内であることが好ましい。すなわち、電子機器が連続した動作として認識できる場合に、画像の移動を行なう。ＣＰＵ１１０は、算出した移動距離２４４０が予め設定された長さ以下であると判定すると（ステップＳ２３２０にてＮＯ）、画像２４１０の移動が、液晶パネル２４０の表示領域内の移動である判断する（ステップＳ２１７０）。その結果、ＣＰＵ１１０は、画像２４３０として液晶パネル２４０においてスタイラスペン１５１０によって選択された位置に画像２４１０を表示する。
【０２０５】
・２画面間の移動
一方、図２５を参照して、使用者が画像２５１０を選択して方向２５２０に向かってスタイラスペン１５１０を操作する。このとき操作した距離２５４０が予め設定された距離以上である場合（ステップＳ２３２０にてＹＥＳ）、ＣＰＵ１１０は、スタイラスペン１５１０による操作が液晶パネル２４０から液晶パネル１４０に画像の表示を切り換えるための入力であると判断する（ステップＳ２１５０）。使用者がスタイラスペン１５１０を用いて液晶パネル１４０における１点をタッチすると、ＣＰＵ１１０は、そのタッチされた場所に画像２５３０を表示する（図２５（Ｂ））。
【０２０６】
以上のようにして、本実施の形態に係る電子機器１００は、画像の移動の態様を、液晶パネル２４０に対して入力された軌跡の長さに応じて判断する。このようにすると、たとえば、予め設定された長さよりも長い入力が行なわれた場合に、画像を２画面間で移動させるように構成することができる。その結果、電子機器１００の使用者は、移動の態様を直感で判断することができるため、電子機器１００の操作性を向上させることができる。
【０２０７】
以上詳述した各実施の形態は、移動前の画像は液晶パネル２４０に表示されており、移動後の画像は液晶パネル１４０に表示される態様であるが、この態様に限られない。すなわち、液晶パネル１４０に表示されている画像を液晶パネル２４０に表示させる態様であってもよい。また、双方向の移動が組み合わされてもよく、また、各方向の移動の判断基準は異なってもよい。
【０２０８】
［変形例］
以下、本発明の実施の形態の変形例について説明する。前述の各実施の形態においては、液晶パネル１４０，２４０が上下方向に構成されており、スタイラスペン１５１０を用いた画面間の移動が上下方向に行なわれる場合について説明した。しかしながら、本発明に係る技術的思想は、上下方向に限られて適用されるものではない。たとえば、横方向に並んで配置された複数の表示装置間においても同様に適用することができる。
【０２０９】
そこで、図２６を参照して、本変形例に係る電子機器について説明する。図２６は、液晶パネル１４０と液晶パネル２４０とが横方向に並べて配置された構成を表わす図である。たとえば画像２６１０が液晶パネル２４０に表示されている場合において、使用者がスタイラスペン１５１０を用いて軌跡２６２０のような操作を行なう。この場合、本変形例に係るＣＰＵ１１０は、軌跡２６２０の最後の方向が液晶パネル２４０から液晶パネル１４０に向かっていることを検知する。使用者がスタイラスペン１５１０を用いて液晶パネル１４０の１点をタッチすると、ＣＰＵ１５０は、そのタッチを検知し、その検知した場所に、画像２６３０を表示する。これにより、横方向に並べて配置された２画面間の画像の移動を実現することができる。
【０２１０】
また、他の局面において、電子機器１００が備える液晶パネルは２つに限られず、それよりも多くてもよい。たとえば、４枚の液晶パネルがマトリクス状に配置された構成であってもよい。同様の配列として、９枚の液晶パネルがマトリクス状に配置された構成であってもよい。
【０２１１】
また、電子機器１００に対する入力操作は、スタイラスペン１５１０を用いた操作に限られない。たとえば、電子機器１００の使用者の指が用いられてもよい。少なくとも、液晶パネルの表示領域において光の入射を妨げることによって画像の選択、移動方向が電子機器１００によって認識される入力操作であればよい。
【０２１２】
［実施例の効果］
以上詳述したように、各実施の形態に係る電子機器１００によると、画像が表示されている液晶パネルにおいて、当該画像を選択した後の液晶パネルに対する入力操作に応じて、当該画像を当該液晶パネルの他の位置に表示し、あるいは、他の液晶パネルに表示することができる。これにより、電子機器１００の使用者は、画像の移動を直感的に行なうことができるため、電子機器１００の利便性が向上し得る。
【０２１３】
なお、上記の説明は、光センサ機能を有する液晶パネルを有する電子機器１００を参照して行なわれたが、電子機器１００は、必ずしも常に、当該液晶パネルを有する必要はない。すなわち、表示されている画像の移動のための操作入力は、液晶パネル以外の構成によっても受け付けられ得る。たとえば、タッチパネル式の表示装置を有する電子機器、あるいは、ノートブックコンピュータ等が使用するタッチパッドを有する電子機器等も、同様に、表示されている画像の移動のための操作入力を検知し、その検知結果に応じて、画像の表示場所の変更を実現することができる。
【０２１４】
今回開示された実施の形態はすべての点で例示であって制限的なものではないと考えられるべきである。本発明の範囲は上記した説明ではなくて特許請求の範囲によって示され、特許請求の範囲と均等の意味および範囲内でのすべての変更が含まれることが意図される。
【図面の簡単な説明】
【０２１５】
【図１】本発明の実施の形態に係る電子機器１００の外観を示した図である。
【図２】電子機器１００のハードウェア構成を表わすブロック図である。
【図３】液晶パネル１４０の構成と、液晶パネル１４０の周辺回路とを示した図である。
【図４】液晶パネル１４０とバックライト１７９との断面図である。
【図５】光センサ回路１４４を動作させる際のタイミングチャートを示した図である。
【図６】液晶パネル１４０とバックライト１７９との断面図であって、スキャンの際にフォトダイオード１４５がバックライト１７９からの光を受光する構成を示した図である。
【図７】センシングコマンドの概略構成を示した図である。
【図８】センシングコマンドの各領域におけるデータの値と、当該値が示す意味内容とを示した図である。
【図９】応答データの概略構成を示した図である。
【図１０】指９００をスキャンすることにより得られた画像を示した図である。
【図１１】構成の変形例に係る光センサ内蔵液晶パネル１４０Ａの回路図である。
【図１２】スキャンの際にフォトダイオードが外光を受光する構成を示した断面図である。
【図１３】電子機器１００Ａのハードウェア構成を表すブロック図である。
【図１４】電子機器１００の機能の構成を表わすブロック図である。
【図１５】液晶パネル２４０に表示されている画像を液晶パネル１４０に移動する場合における画面の切り換わりを表わす図である。
【図１６】電子機器１００に対するジェスチャーを表わす図である。
【図１７】電子機器１００のＣＰＵ１１０が実行する一連の処理の一部を表わすフローチャートである。
【図１８】本発明の第２の実施の形態に係る電子機器１００によって実現される機能の構成を表わすブロック図である。
【図１９】液晶パネル２４０に表示されている画像が液晶パネル１４０に移動されずに液晶パネル２４０内で移動される場合を表わす図である。
【図２０】液晶パネル２４０に表示されている画像が液晶パネル１４０に移動される場合を表わす図である。
【図２１】電子機器１００が備えるＣＰＵ１１０によって実現される一連の処理の一部を表わすフローチャートである。
【図２２】本発明の第３の実施の形態に係る電子機器１００の機能的構成を表わすブロック図である。
【図２３】本発明の第３の実施の形態に係る電子機器１００のＣＰＵ１１０が実行する一連の動作の一部を表わすフローチャートである。
【図２４】画像が同一パネル内において移動される場合の状態を表わす図である。
【図２５】画像が液晶パネル２４０から液晶パネル１４０に移動して表示される場合を表わす図である。
【図２６】液晶パネル１４０と液晶パネル２４０とが横方向に並べて配置された構成を表わす図である。
【符号の説明】
【０２１６】
１００  電子機器、１００Ａ  第１の筐体、１００Ｂ  第２の筐体、１００Ｃ  ヒンジ、１０１  本体装置、１０２，１０３  表示装置、１３４  スイッチ、１３５  アンプ、１４０，１４０Ａ，２４０  光センサ液晶内蔵パネル、１４１  画素回路、１４１ｒ  Ｒサブピクセル回路、１４１ｇ  Ｇサブピクセル回路、１４１ｂ  Ｂサブピクセル回路、１４２，１４７，１４７ｒ，１４７ｇ，１４７ｂ  ＴＦＴ、１４３  電極対、１４３ａ  画素電極、１４３ｂ  対向電極、１４４，１４４ｒ，１４４ｇ，１４４ｂ  光センサ回路、１４５  フォトダイオード、１４６  コンデンサ、１５１Ａ  アクティブマトリクス基板、１５１Ｂ  対向基板、１５２  液晶層、１５３ｒ，１５３ｇ，１５３ｂ  カラーフィルタ、１５７  データ信号線、１６１  偏光フィルタ、１６２  ガラス基板、１６３  遮光膜、１６４  配光膜、１７７  操作キー、１７９  バックライト、９００  指、１３００  電子機器、１５００  画像、１５１０  スタイラスペン、１５２０  軌跡、１６１０，１６２０，１６３０，１６４０  曲線、１９１０  画像、１９２０  軌跡、２０１０，２０２０  画像、２４１０，２４３０  画像、２４２０  方向、２４４０  移動距離、２５１０，２５３０  画像、２５２０  方向、２５４０  移動距離、２６１０，２６３０  画像、２６２０  方向、Ｃ１  中心点、Ｐ１  領域、ＲＷｉ  読出信号線、ＳＲｊ，ＳＧｊ，ＳＢｊ  データ信号線、ＳＳｊ，ＳＤｊ，ＳＳＲｊ，ＳＳＧｊ，ＳＳＢｊ，ＳＤＲｊ，ＳＤＧｊ，ＳＤＲｊ  センサ信号線、Ｗ１  領域。
【図１】
2010102581.tif 000003
【図２】
2010102581.tif 000004
【図３】
2010102581.tif 000005
【図４】
2010102581.tif 000006
【図５】
2010102581.tif 000007
【図６】
2010102581.tif 000008
【図７】
2010102581.tif 000009
【図８】
2010102581.tif 000010
【図９】
2010102581.tif 000011
【図１０】
2010102581.tif 000012
【図１１】
2010102581.tif 000013
【図１２】
2010102581.tif 000014
【図１３】
2010102581.tif 000015
【図１４】
2010102581.tif 000016
【図１５】
2010102581.tif 000017
【図１６】
2010102581.tif 000018
【図１７】
2010102581.tif 000019
【図１８】
2010102581.tif 000020
【図１９】
2010102581.tif 000021
【図２０】
2010102581.tif 000022
【図２１】
2010102581.tif 000023
【図２２】
2010102581.tif 000024
【図２３】
2010102581.tif 000025
【図２４】
2010102581.tif 000026
【図２５】
2010102581.tif 000027
【図２６】
2010102581.tif 000028