(57)【要約】【課題】オブジェクトの表示変更によらないで、オブジェクトを指示するユーザの操作について誤操作の発生を抑える。【解決手段】表示装置１０は、表示面１４１に画像を表示するとともに、指Ｆを表示面１４１に非接触により近接させて行う近接操作、及び、表示面１４１に指を接触させて行接触操作を検出可能である。表示装置１０は、選択可能なオブジェクトを含むメール作成画面ＳＣ１を表示面１４１に表示させ、オブジェクトｂ１を指示する近接操作を検出すると、オブジェクトｂ１の選択を有効とし、周囲にあるオブジェクトｂ２〜ｂ５（（ｂ）で斜線で示すオブジェクト）の選択を無効とする。表示装置１０は、選択を有効としたオブジェクトｂ１を指示する接触操作を検出すると、オブジェクトｂ１を、ユーザの選択オブジェクトとして特定する。表示装置１０は、選択を無効としたオブジェクトを選択オブジェクトとして特定しない。【選択図】図６
2014078116.tif 000002
【特許請求の範囲】
【請求項１】
表示面に画像を表示する表示部と、
指示体を前記表示面に非接触により近接させて行う第１操作、及び、前記第１操作よりも前記指示体を前記表示面に近接させて行う第２操作をそれぞれ検出する操作検出部と、
選択可能なオブジェクトを含む画像を前記表示面に表示させる表示制御部と、
前記操作検出部により検出された前記第１操作で指示されたオブジェクトの選択を有効とし、前記表示面に表示された他のオブジェクトの選択を無効とする設定部と、
前記表示面に表示されたオブジェクトのうち、前記設定部により選択が有効とされたオブジェクトを指示する前記第２操作が前記操作検出部により検出されると、当該オブジェクトを、ユーザの選択オブジェクトとして特定する選択オブジェクト特定部と
を備えることを特徴とするユーザインタフェース装置。
【請求項２】
前記第１操作で指示されたオブジェクトと、前記他のオブジェクトとの配置関係を特定する配置関係特定部を備え、
前記設定部は、
前記配置関係特定部により特定された配置関係が特定条件を満たす前記他のオブジェクトの選択を無効とする
ことを特徴とする請求項１に記載のユーザインタフェース装置。
【請求項３】
前記表示制御部は、
前記第１操作で指示されたオブジェクトの位置から、所定範囲内に前記他のオブジェクトが配置されていることを、前記特定条件とする
ことを特徴とする請求項２に記載のユーザインタフェース装置。
【請求項４】
前記設定部は、
前記第１操作で指示されたオブジェクトが複数ある場合に、いずれか１のオブジェクトの選択を有効とし、それ以外のオブジェクトの選択を無効とする
ことを特徴とする請求項１から３のいずれか１項に記載のユーザインタフェース装置。
【請求項５】
前記設定部は、
前記第１操作で指示された複数のオブジェクトのうち、前記指示体が重なる面積が最も大きいオブジェクトの選択を有効とする
ことを特徴とする請求項４に記載のユーザインタフェース装置。
【請求項６】
前記設定部は、
前記第１操作で指示されたオブジェクトのサイズが閾値未満である場合に、前記他のオブジェクトの選択を無効とする
ことを特徴とする請求項１から５のいずれか１項に記載のユーザインタフェース装置。
【請求項７】
前記表示制御部は、
前記設定部に設定された結果に応じて、選択が有効とされたオブジェクト又は選択が無効とされたオブジェクトの表示態様を変化させる
ことを特徴とする請求項１から６のいずれか１項に記載のユーザインタフェース装置。
【請求項８】
画像が表示される表示面に指示体を非接触により近接させて行う第１操作、及び、前記第１操作よりも前記指示体を前記表示面に近接させて行う第２操作をそれぞれ検出する操作検出ステップと、
選択可能なオブジェクトを含む画像を前記表示面に表示させる表示制御ステップと、
前記操作検出ステップで検出された前記第１操作で指示されたオブジェクトの選択を有効とし、前記表示面に表示された他のオブジェクトの選択を無効とする設定ステップと、
前記表示面に表示されたオブジェクトのうち、前記設定ステップで選択が有効とされたオブジェクトを指示する前記第２操作が前記操作検出ステップで検出されると、当該オブジェクトを、ユーザの選択オブジェクトとして特定する選択オブジェクト特定ステップと
を有するユーザインタフェース方法。
【請求項９】
表示面に画像を表示する表示装置のコンピュータに、
前記表示面に指示体を非接触により近接させて行う第１操作、及び、前記第１操作よりも前記指示体を前記表示面に近接させて行う第２操作をそれぞれ検出する操作検出ステップと、
選択可能なオブジェクトを含む画像を前記表示面に表示させる表示制御ステップと、
前記操作検出ステップで検出された前記第１操作で指示されたオブジェクトの選択を有効とし、前記表示面に表示された他のオブジェクトの選択を無効とする設定ステップと、
前記表示面に表示されたオブジェクトのうち、前記設定ステップで選択が有効とされたオブジェクトを指示する前記第２操作が前記操作検出ステップで検出されると、当該オブジェクトを、ユーザの選択オブジェクトとして特定する選択オブジェクト特定ステップと
を実行させるためのプログラム。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、ユーザインタフェースにおけるオブジェクトを選択する操作に関する。
【背景技術】
【０００２】
スマートフォンやタブレット端末等の表示装置には、選択可能なオブジェクト（例えば、アイコン画像などの操作アイテム）を表示し、ユーザが選択した選択オブジェクトに対応した機能を利用させるユーザインタフェースを備えたものがある。特許文献１，２は、この種のユーザインタフェースで、ユーザがオブジェクトを選択する際の誤操作を防ぐための技術を開示している。特許文献１は、タッチパネルへの指の接近を検出した場合に、この検出位置付近に配置されたキーを拡大表示することを開示している。特許文献２は、拡大表示の対象とする表示対象部品を予め登録しておき、登録しておいた表示対象部品への指の接近を検知すると、この表示対象部品を拡大表示することを開示している。
【先行技術文献】
【特許文献】
【０００３】
【特許文献１】特開２００６−５９２３８号公報
【特許文献２】特開２００９−３８６７号公報
【発明の概要】
【発明が解決しようとする課題】
【０００４】
特許文献１，２に記載の発明は、オブジェクトを拡大表示してユーザの操作性を向上させるものであり、オブジェクトの表示を変更することを免れることができないものである。
これに対し、本発明の目的は、オブジェクトの表示変更によらないで、オブジェクトを指示するユーザの操作について誤操作の発生を抑えることである。
【課題を解決するための手段】
【０００５】
上述した課題を解決するため、本発明のユーザインタフェース装置は、表示面に画像を表示する表示部と、指示体を前記表示面に非接触により近接させて行う第１操作、及び、前記第１操作よりも前記指示体を前記表示面に近接させて行う第２操作をそれぞれ検出する操作検出部と、選択可能なオブジェクトを含む画像を前記表示面に表示させる表示制御部と、前記操作検出部により検出された前記第１操作で指示されたオブジェクトの選択を有効とし、前記表示面に表示された他のオブジェクトの選択を無効とする設定部と、前記表示面に表示されたオブジェクトのうち、前記設定部により選択が有効とされたオブジェクトを指示する前記第２操作が前記操作検出部により検出されると、当該オブジェクトを、ユーザの選択オブジェクトとして特定する選択オブジェクト特定部とを備えることを特徴とする。
【０００６】
本発明において、前記第１操作で指示されたオブジェクトと、前記他のオブジェクトとの配置関係を特定する配置関係特定部を備え、前記設定部は、前記配置関係特定部により特定された配置関係が特定条件を満たす前記他のオブジェクトの選択を無効とするようにしてもよい。
この発明において、前記表示制御部は、前記第１操作で指示されたオブジェクトの位置から、所定範囲内に前記他のオブジェクトが配置されていることを、前記特定条件とするようにしてもよい。
【０００７】
また、本発明において、前記設定部は、前記第１操作で指示されたオブジェクトが複数ある場合に、いずれか１のオブジェクトの選択を有効とし、それ以外のオブジェクトの選択を無効とするようにしてもよい。
この発明において、前記設定部は、前記第１操作で指示された複数のオブジェクトのうち、前記指示体が重なる面積が最も大きいオブジェクトの選択を有効とするようにしてもよい。
【０００８】
本発明において、前記設定部は、前記第１操作で指示されたオブジェクトのサイズが閾値未満である場合に、前記他のオブジェクトの選択を無効とするようにしてもよい。
【０００９】
本発明において、前記表示制御部は、前記設定部に設定された結果に応じて、選択が有効とされたオブジェクト又は選択が無効とされたオブジェクトの表示態様を変化させるようにしてもよい。
【００１０】
本発明のユーザインタフェース方法は、画像が表示される表示面に指示体を非接触により近接させて行う第１操作、及び、前記第１操作よりも前記指示体を前記表示面に近接させて行う第２操作をそれぞれ検出する操作検出ステップと、選択可能なオブジェクトを含む画像を前記表示面に表示させる表示制御ステップと、前記操作検出ステップで検出された前記第１操作で指示されたオブジェクトの選択を有効とし、前記表示面に表示された他のオブジェクトの選択を無効とする設定ステップと、前記表示面に表示されたオブジェクトのうち、前記設定ステップで選択が有効とされたオブジェクトを指示する前記第２操作が前記操作検出ステップで検出されると、当該オブジェクトを、ユーザの選択オブジェクトとして特定する選択オブジェクト特定ステップとを有する。
【００１１】
本発明のプログラムは、表示面に画像を表示する表示装置のコンピュータに、前記表示面に指示体を非接触により近接させて行う第１操作、及び、前記第１操作よりも前記指示体を前記表示面に近接させて行う第２操作をそれぞれ検出する操作検出ステップと、選択可能なオブジェクトを含む画像を前記表示面に表示させる表示制御ステップと、前記操作検出ステップで検出された前記第１操作で指示されたオブジェクトの選択を有効とし、前記表示面に表示された他のオブジェクトの選択を無効とする設定ステップと、前記表示面に表示されたオブジェクトのうち、前記設定ステップで選択が有効とされたオブジェクトを指示する前記第２操作が前記操作検出ステップで検出されると、当該オブジェクトを、ユーザの選択オブジェクトとして特定する選択オブジェクト特定ステップとを実行させるためのプログラムである。
【発明の効果】
【００１２】
本発明によれば、オブジェクトの表示変更によらないで、オブジェクトを指示するユーザの操作について誤操作の発生を抑えることができる。
【図面の簡単な説明】
【００１３】
【図１】表示装置のハードウェア構成を示すブロック図。
【図２】近接センサ及び接触センサを用いて特定可能な操作の説明図。
【図３】オブジェクトを含む画面の説明図。
【図４】表示装置の制御部の機能構成を示す機能ブロック図（第１実施形態）。
【図５】表示装置の処理の手順を示すフローチャート（第１実施形態）。
【図６】オブジェクトを含む画面の説明図（第１実施形態）。
【図７】オブジェクトを含む画面の説明図（第１実施形態）。
【図８】オブジェクトを含む画面の説明図（第１実施形態）。
【図９】オブジェクトを含む画面の説明図（第１実施形態）。
【図１０】表示装置の制御部の機能構成を示す機能ブロック図（第２実施形態）。
【図１１】表示装置の処理の手順を示すフローチャート（第２実施形態）。
【図１２】オブジェクトを含む画面の説明図（第２実施形態）。
【図１３】接触操作によりオブジェクトを選択するときの様子を表す図。
【図１４】表示装置の制御部の機能構成を示す機能ブロック図（第３実施形態）。
【図１５】オブジェクトを含む画面の説明図（第３実施形態）。
【発明を実施するための形態】
【００１４】
以下、図面を参照しつつ本発明の実施形態を説明する。
［第１実施形態］
まず、本発明の第１実施形態を説明する。
図１は、表示装置１０のハードウェア構成を示すブロック図である。図１に示すように、表示装置１０は、制御部１１と、操作部１２と、通信部１３と、表示部１４と、記憶部１５とを備える。
制御部１１は、ＣＰＵ（Central Processing Unit）、ＲＯＭ(Read Only Memory)、及びＲＡＭ（Random Access Memory）を有するマイクロコンピュータを備える。ＣＰＵは、ＲＯＭや記憶部１５に記憶されたプログラムをＲＡＭに読み出して実行することにより、表示装置１０の各部を制御する。通信部１３は、無線通信回路やアンテナを有し、ネットワークに接続して通信するためのインタフェースである。表示部１４は、液晶パネルなどの複数画素を配置した矩形の表示面１４１を有し、表示面１４１に画像を表示する。記憶部１５は、例えばＥＥＰＲＯＭ（Electronically Erasable and Programmable ROM）やフラッシュメモリなどの記憶装置を備え、制御部１１により実行されるプログラムを記憶する。
【００１５】
操作部１２は、近接センサ１２１及び接触センサ１２２を有し、ユーザに操作される操作装置である。近接センサ１２１は、ユーザの指（指先）が表示面１４１に非接触により近接している状態を検出するセンサである。近接センサ１２１は、例えば、静電容量の変化に応じてユーザの指の位置を検出する静電容量型のセンサであるが、超音波を用いる超音波センサや赤外光型のセンサ、電磁誘導を利用した高周波発振型、磁石を用いた磁気型のセンサなどを用いてもよく、センサの検出方式は特に問わない。接触センサ１２２は、ユーザの指が表示面１４１に接触している状態を検出するセンサである。接触センサ１２２は、例えば静電容量型のセンサであるが、抵抗膜型や赤外光型のセンサなどを用いてもよく、センサの検出方式は特に問わない。
近接センサ１２１及び接触センサ１２２は、ユーザの指で指示された位置を検出すると、検出した位置を示す位置情報を制御部１１に供給する。ここで、近接センサ１２１及び接触センサ１２２が供給する位置情報を用いて特定可能な操作について説明する。
【００１６】
図２は、近接センサ１２１及び接触センサ１２２が供給する位置情報を用いて特定可能な操作の説明図である。図２（ａ）は、表示装置１０を正面から見た様子を表す図である。図２（ｂ）は、表示装置１０を側面側から見た様子を表す図である。
本実施形態では、図２（ａ）に示すように表示装置１０を正面から見て、表示面１４１の上下方向における位置と、表示面１４１の左右方向における位置と、表示面１４１の法線方向における位置とを表す座標情報によって、近接センサ１２１及び接触センサ１２２の検出位置を示す位置情報を表す。
【００１７】
図２（ｂ）に「検出可能領域」と付して二点鎖線を用いて示した範囲のように、近接センサ１２１は、表示面１４１の法線方向に位置する空間領域を検出可能領域として、ユーザの指Ｆの位置を検出し、検出した位置を示す位置情報を供給する。近接センサ１２１が供給する位置情報によって特定される操作のことを、以下では「近接操作」（第１操作）という。接触センサ１２２は、表示面１４１に接触するユーザの指Ｆの位置を検出して、検出した位置を示す位置情報を供給する。接触センサ１２２が供給する位置情報によって特定される操作のことを、以下では「接触操作」（第２操作）という。接触操作は、近接操作よりも、ユーザの指Ｆを表示面１４１に近接させて行う操作に相当する。
なお、近接センサ１２１及び接触センサ１２２が位置を検出する指示体は、ユーザの指に限らず、スタイラスペンなどのユーザが手に持って動かす指示用の器具であってもよい。また、操作部１２は、ユーザに操作される対象として、物理キーなどの他の操作子を有していてもよい。
【００１８】
以上の構成を有する表示装置１０は、前述の操作部１２及び表示部１４を用いて、ＧＵＩ（Graphical User Interface）と呼ばれるユーザインタフェースを提供する。表示装置１０は、ここではスマートフォンであり、図１に示す構成以外にも、撮影するためのカメラや音声の入出力を行うためのマイクロホン及びスピーカなど、通常のスマートフォンと共通の構成を有している。表示装置１０は、スマートフォン以外の表示装置であってもよく、例えばタブレット型コンピュータや携帯電話機、携帯型ゲーム機、携帯型音楽プレーヤ、パーソナルコンピュータ、ＰＤＡ（Personal Digital Assistant）などの、ユーザインタフェースを提供する他の表示装置であってもよい。
【００１９】
図３は、表示装置１０が表示する画面の説明図である。図３（ａ）は、電子メールの作成中に表示部１４に表示されるメール作成画面ＳＣ１を示す図である。メール作成画面ＳＣ１は、作成中の電子メールを表示する領域（「（メール本文）」と記した矩形領域）のほか、ユーザに操作されるオブジェクトを配置した操作領域Ｋ１を含む。操作領域Ｋ１は、例えば、１０キーボード（テンキーボード）を意味するソフトウェアキーボードを表示する領域であり、各キーに対応したオブジェクトを含んでいる。
【００２０】
図３（ａ）に示すように、メール作成画面ＳＣ１では、「な」行の文字を入力するためのオブジェクトｂ１がメール作成画面ＳＣ１の中央付近に配置され、オブジェクトｂ１の周囲を取り囲むように、他のオブジェクトが配置されている。例えば、オブジェクトｂ１の上方には、「か」行の文字を入力するためのオブジェクトｂ２が配置されている。オブジェクトｂ１の右方には、「は」行の文字を入力するためのオブジェクトｂ３が配置されている。オブジェクトｂ１の下方には、「や」行の文字を入力するためのオブジェクトｂ４が配置されている。オブジェクトｂ１の左方には、「た」行の文字を入力するためのオブジェクトｂ５が配置されている。
【００２１】
ところで、メール作成画面ＳＣ１に対する操作をユーザが行う場合に、ユーザが「な」行の文字を入力しようとするときは、図３（ｂ）に示すように、ユーザは指Ｆをオブジェクトｂ１に近づけて、オブジェクトｂ１を指示する近接操作を行う。そして、ユーザは、そのまま指Ｆを表示面１４１に近づけて、オブジェクトｂ１を指示する接触操作を行う。この接触操作の際に、オブジェクトｂ１の周囲にある他のオブジェクト（ここでは、オブジェクトｂ２〜ｂ５）にも指Ｆが跨って触れてしまい、ユーザの目的外のオブジェクトが接触操作で指示されることがある。このような理由で、ユーザの目的外のオブジェクトが指示される誤操作の発生の可能性があるのに対し、表示装置１０では、目的とするオブジェクトをユーザが的確に選択できるように、ユーザの接触操作を支援するユーザインタフェースを備えている。
【００２２】
前述したように表示面１４１に表示されるオブジェクトは、ユーザがオブジェクトを指示して接触操作することにより選択できるオブジェクトである。表示装置１０は、ユーザの接触操作によりオブジェクトが選択されると、このオブジェクトを選択オブジェクトとして特定し、選択オブジェクトに応じた処理を実行する。ただし、本実施形態のオブジェクトは、例えばソフトボタンであるが、デスクトップ画面などに配置される、アプリケーションプログラムに対応したアイコン画像や、ハイパーリンクが選択された文字列などであってもよい。このように本実施形態のオブジェクトは、ユーザが選択可能であり、ユーザにより選択されたことを契機に、表示装置１０が選択オブジェクトに応じた特定の処理を行うものであればよい。
次に、表示装置１０におけるユーザインタフェースに関わる機能の構成を説明する。
【００２３】
図４は、表示装置１０の制御部１１の機能構成を示す機能ブロック図である。図４に示すように、表示装置１０の制御部１１は、操作検出部１１１と、表示制御部１１２と、配置関係特定部１１３と、設定部１１４と、選択オブジェクト特定部１１５と、処理実行部１１６とに相当する機能を実現する。
操作検出部１１１は、ユーザにより表示面１４１に対して行われた近接操作及び接触操作をそれぞれ検出する。操作検出部１１１は、近接センサ１２１から供給された位置情に基づいて、ユーザの近接操作を検出する。操作検出部１１１は、接触センサ１２２から供給された位置情報に基づいて、ユーザの接触操作を検出する。
【００２４】
操作検出部１１１は、例えば、表示面１４１に表示されたオブジェクトの表示領域内の位置情報と、表示面１４１の水平方向におけるユーザの指の位置を示す位置情報とが一致した場合、この位置情報により特定される近接操作又は接触操作を、オブジェクトを指示する操作として検出する。また、操作検出部１１１は、表示面１４１に表示されたオブジェクトの表示領域内の位置情報と、表示面１４１の水平方向におけるユーザの指の位置を示す位置情報とが一致しなくとも、両位置情報が所定範囲内で一致した場合（例えば、オブジェクトの近傍に指が触れた場合）にも、オブジェクトを指示する操作として検出してもよい。この場合において、操作検出部１１１は、接触操作よりも近接操作の方を、オブジェクトを指示する操作として検出する範囲を広くしてもよい。
【００２５】
表示制御部１１２は、表示部１４を制御して、選択可能なオブジェクトを含む画像を表示面１４１に表示させる。
配置関係特定部１１３は、近接操作で指示されたオブジェクトと、表示面１４１に表示された他のオブジェクトとの配置関係を特定する。配置関係特定部１１３は、例えば、近接操作で指示されたオブジェクトの位置から所定範囲内にある他のオブジェクトを特定する。
【００２６】
設定部１１４は、表示面１４１に表示されたオブジェクトについて、オブジェクトの選択を有効又は無効のいずれかとする設定を行う。詳しくは後述するが、選択が有効とされたオブジェクトは、ユーザに接触操作で指示された場合に選択オブジェクトとして特定されるオブジェクトである。選択が無効とされたオブジェクトは、ユーザに接触操作で指示された場合であっても選択オブジェクトとして特定されないオブジェクトである。設定部１１４は、具体的に、操作検出部１１１により検出された近接操作で指示されたオブジェクトの選択を有効とし、表示面１４１に表示された他のオブジェクトの選択を無効とする。ここにおいて、設定部１１４は、配置関係特定部１１３により特定された配置関係が特定条件を満たしたオブジェクトについてその選択を無効にするが、ここでは、近接操作で指示されたオブジェクトから所定範囲内にあるオブジェクトの選択を無効にする。
【００２７】
選択オブジェクト特定部１１５は、表示面１４１に表示されたオブジェクトのうち、設定部１１４により選択が有効とされたオブジェクトを指示する接触操作が操作検出部１１１により検出されると、このオブジェクトを、ユーザの選択オブジェクトとして特定する。選択オブジェクト特定部１１５は、選択オブジェクトを示す情報を処理実行部１１６に供給する。一方で、選択オブジェクト特定部１１５は、設定部１１４により選択が無効とされたオブジェクトを指示する接触操作が操作検出部１１１により検出されても、このオブジェクトを選択オブジェクトとして特定しない。
【００２８】
処理実行部１１６は、選択オブジェクト特定部１１５により特定された選択オブジェクトに応じた処理を実行する。処理実行部１１６は、例えば、選択オブジェクトに対応する機能をユーザに利用させるための特定の処理を実行する。よって、処理実行部１１６は、選択が有効とされたオブジェクトについては、そのオブジェクトが選択オブジェクトとして特定された場合に、対応する特定の処理を実行する一方、選択が無効とされたオブジェクトについては、そのオブジェクトが選択オブジェクトとして特定されることがないので、対応する特定の処理を実行しないこととなる。
【００２９】
図５は、表示装置１０がユーザインタフェースを提供するときの処理の手順を示すフローチャートである。表示装置１０は、オブジェクトを含む画像を表示面１４１に表示させているときは、以下の処理ステップを繰り返し実行する。以下、表示装置１０が図３（ａ）に示すメール作成画面ＳＣ１を表示させた場合の動作例を示しながら、表示装置１０の動作説明を行う。
表示装置１０の制御部１１は、近接センサ１２１から供給された位置情報に基づいて、近接操作を検出したか否かを判断する（ステップＳ１）。ここにおいて、制御部１１は、検出可能領域内の位置を示す位置情報が近接センサ１２１から供給されるまで待機する（ステップＳ１；ＮＯ）。そして、制御部１１は、検出可能領域内の位置情報が近接センサ１２１から供給されると、近接操作を検出したと判断する（ステップＳ１；ＹＥＳ）。
図３（ｂ）に示すように、制御部１１は、例えば指Ｆによるオブジェクトｂ１を指示する近接操作を検出する。ここにおいて、制御部１１が、複数のオブジェクトを指示する近接操作を検出した場合（つまり、複数オブジェクトに跨ってユーザの指が触れた場合）、指Ｆと重なる面積が最も大きいオブジェクトを、ユーザがこれから操作しようとするオブジェクトとみなして、近接操作で指示されたオブジェクトを検出するとよい。ただし、制御部１１は、近接操作を検出した複数のオブジェクトのうち、例えば、最も左端に位置するオブジェクトや最も上端に位置するオブジェクトを、近接操作で指示されたオブジェクトとして検出してもよい。このように制御部１１は、所定条件に基づいて、いずれか１つのオブジェクトを近接操作で指示されたオブジェクトとして検出するとよい。
【００３０】
次に、制御部１１は、近接操作で指示されたオブジェクトのサイズが閾値未満であるか否かを判断する（ステップＳ２）。制御部１１は、近接操作で指示されたオブジェクトのサイズ（ここでは、面積）ＳＺを取得し、取得したサイズＳＺと閾値Ｔｈとを比較する。そして、制御部１１は、サイズＳＺ＜Ｔｈという関係を満たした場合には、ステップＳ２の処理で「ＹＥＳ」と判断する。一方、制御部１１は、サイズＳＺ≧Ｔｈという関係を満たした場合には、ステップＳ２の処理で「ＮＯ」と判断し、ステップＳ５の処理に進む。
制御部１１が、オブジェクトｂ１を指示する近接操作を検出していた場合、オブジェクトのサイズＳＺが閾値Ｔｈ未満であると判断し（ステップＳ２；ＹＥＳ）、ステップＳ３の処理に進む。
【００３１】
次に、制御部１１は、近接操作で指示されたオブジェクトと、他のオブジェクトとの配置関係を特定する（ステップＳ３）。ここでは、制御部１１は、まず、図６（ａ）に示すように、近接操作で指示されたオブジェクト（ここでは、オブジェクトｂ１）の位置を基準として、円形の参照範囲Ｔを定める。そして、制御部１１は、参照範囲Ｔに含まれる他のオブジェクトを特定する。図６（ａ）に示すように、ここでは、制御部１１は、オブジェクトの重心が参照範囲Ｔに含まれているオブジェクトｂ２〜ｂ５を特定する。
参照範囲Ｔは、近接操作で指示されたオブジェクトの近傍に他のオブジェクトが配置されているか否かを判断するために、設計段階などで決められた範囲を有している。これにより、ステップＳ３の処理によれば、制御部１１は近接操作で指示されたオブジェクトと、他のオブジェクトとの近接度合いの指標となる配置関係を特定することができる。
【００３２】
次に、制御部１１は、近接操作で指示されたオブジェクトの選択を有効にし、参照範囲Ｔ内の他のオブジェクトの選択を無効にするよう、オブジェクトの選択設定を行う（ステップＳ４）。図６（ｂ）に示すように、ここでは、制御部１１がオブジェクトｂ１の近接操作を検出したから、オブジェクトｂ１の選択を有効とする。一方で、制御部１１は、参照範囲Ｔ内の他のオブジェクトとして、オブジェクトｂ２〜ｂ５の選択を無効とする。図６（ｂ）及び他の図面において、斜線で塗りつぶしたオブジェクトが、選択が無効とされたオブジェクトを意味している。
なお、制御部１１は、参照範囲Ｔ外の他オブジェクトについてはその選択を有効のままとする。
【００３３】
次に、制御部１１は、選択を有効としたオブジェクトを指示する接触操作を検出したか否かを判断する（ステップＳ５）。制御部１１は、近接操作を検出してからオブジェクトを指示する接触操作を検出しなければ、ステップＳ５の処理で「ＮＯ」と判断する。次に、制御部１１は、近接操作を検出中であるか否かを判断する（ステップＳ６）。近接操作を検出中であると判断した場合には（ステップＳ６；ＹＥＳ）、制御部１１は、オブジェクトの選択の有効又は無効の設定を維持したまま、ステップＳ５の処理に戻る。一方、制御部１１は、近接操作を検出しなくなったと判断した場合には（ステップＳ６；ＮＯ）、ステップＳ１の処理に戻る。ステップＳ１の処理に戻った場合には、制御部１１は、オブジェクトの選択の有効又は無効の設定を解除し、全オブジェクトの選択を有効にする。このように制御部１１は、オブジェクトを指示する近接操作を検出しなくなると、選択を無効としていたオブジェクトを含め、全てのオブジェクトの選択を有効にする設定に戻す。
【００３４】
ステップＳ５の処理で、制御部１１が、選択を有効としたオブジェクトを指示する接触操作を検出したと判断すると（ステップＳ５；ＹＥＳ）、そのオブジェクトを選択オブジェクトとして特定する（ステップＳ７）。オブジェクトｂ１が接触操作により指示された場合は、制御部１１は、オブジェクトｂ１を選択オブジェクトとして特定する。ここで、仮にオブジェクトｂ２〜ｂ５のいずれかが接触操作により指示された場合であっても、制御部１１はこれらを選択オブジェクトとして特定することはない。
【００３５】
そして、制御部１１は、選択オブジェクトに応じた処理を実行する（ステップＳ８）。ここでは、制御部１１は、オブジェクトｂ１に応じた処理として、「な」行の文字入力を行う。ここにおいて、制御部１１は、ステップＳ７の処理で選択オブジェクトを特定したか、又は、ステップＳ８の処理で選択オブジェクトに応じた処理を実行したタイミングで、オブジェクトを指示する近接操作を検出しなくなった場合にも、オブジェクトの選択の有効又は無効の設定を解除する。
なお、制御部１１がステップＳ８の処理で実行する選択オブジェクトに応じた処理はどのようなものでもよい。制御部１１は、例えばＵＲＬ（Uniform Resource Locator）を用いてハイパーリンクが設定されたオブジェクトが選択された場合には、そのＵＲＬに対応したｗｅｂページを表示面１４１に表示させる。また、制御部１１は、ユーザの入力データの送信を指示するためのオブジェクトが接触操作により選択された場合には、そのデータを通信部１３により送信する。
【００３６】
近接操作時において、図３（ｂ）に示すように、オブジェクトｂ１以外のオブジェクトｂ２〜ｂ５のいずれかにも指Ｆが重なっていた場合、オブジェクトｂ２〜ｂ５のいずれかを指示する接触操作を表示装置１０が検出する場合がある。この場合、ユーザの目的外のオブジェクトが選択されたことになり、結果としてユーザの誤操作となってしまう。これに対し、表示装置１０は、近接操作で指示された１つのオブジェクトを、これから接触操作で指示される可能性のあるオブジェクトとし、その周囲にある他のオブジェクトの選択を予め無効にしておく。これにより、ユーザが指Ｆを表示面１４１に近づけて、目的外のオブジェクトに指Ｆが触れたとしても、制御部１１が目的外のオブジェクトを指示する接触操作を検出し、このオブジェクトを選択オブジェクトとして特定してしまうことがない。
【００３７】
ここでは、表示装置１０は、参照範囲Ｔに重心が含まれているオブジェクトの選択を無効にしていたが、参照範囲Ｔに少なくとも一部が含まれているオブジェクトの選択を無効にしてもよい。この場合、図７に示すように、制御部１１は、オブジェクトｂ２〜ｂ５のほか、「あ」行の文字を入力するためのオブジェクト、「さ」行の文字を入力するためのオブジェクト、「ま」行の文字を入力するためのオブジェクト、及び「ら」行の文字を入力するためのオブジェクトの選択も無効とする。
以降、制御部１１は、近接操作を検出するたびに、図５に示す処理ステップを実行して、近接操作を検出したオブジェクトの選択を有効とし、参照範囲Ｔ内の他のオブジェクトの選択を無効にする。
なお、ステップＳ２の処理で「ＮＯ」と判断した場合、つまり、近接操作で指示されたオブジェクトのサイズが閾値以上である場合、制御部１１は、ステップＳ３，Ｓ４の処理を行うことなくステップＳ５の処理に進む。
【００３８】
ところで、表示装置１０は、図８（ａ）に示すように、キーがＱＷＥＲＴＹ配列されたＱＷＥＲＴＹキーボードを意味するソフトウェアキーボードを表示する操作領域Ｋ２を、テンキーボードを表示する操作領域Ｋ１に代えて表示させてもよい。一般に、テンキーボードに比べてＱＷＥＲＴＹキーボードの方がキーの数が多い。よって、表示装置１０は、テンキーボードの表示時よりもＱＷＥＲＴＹキーボードの表示時の方が、より多くのオブジェクトを表示面１４１に表示させることになる。このような理由から、テンキーボードの表示時よりも、ＱＷＥＲＴＹキーボードの表示時の方が、ユーザが目的外のオブジェクトを選択してしまう誤操作が発生しやすいと考えられる。
【００３９】
そこで、表示装置１０は、図８（ｂ）に示すように、ＱＷＥＲＴＹキーボードで文字入力される場合にも（ここでは、「ｔ」と記したオブジェクト）、オブジェクトを指示する近接操作を検出したときに、上記方法と同様にして、参照範囲Ｔ内にある他のオブジェクトを特定し（図９（ａ）参照）、参照範囲Ｔ内のオブジェクトの選択を無効にしてもよい（図９（ｂ）参照）。
【００４０】
なお、表示装置１０は、テンキーボードの表示時には、オブジェクトの選択を無効とする設定を行わず、ＱＷＥＲＴＹキーボードの表示時において、オブジェクトの選択を無効とする設定を行ってもよい。
また、表示装置１０は、メール作成画面以外の画面表示時（電話番号入力画面やその他の文字入力画面など）においても、画面に含まれるオブジェクトのサイズや数などの情報に応じて、その画面表示時におけるオブジェクトの選択の有効又は無効の設定方法を異ならせるようにしてもよい。
【００４１】
以上説明した第１実施形態において、表示装置１０は、オブジェクトを指示する近接操作を検出すると、その周囲にある参照範囲Ｔ内のオブジェクトを特定する。そして、表示装置１０は、近接操作で指示されたオブジェクトの選択を有効にし、参照範囲Ｔ内の他のオブジェクトの選択を無効にする。これにより、ユーザが複数オブジェクトに跨るようにオブジェクトに指で触れた場合であっても、周囲のオブジェクトが誤って選択されてしまうことがない。また、表示装置１０は、オブジェクトの選択を有効又は無効に設定することより誤操作を抑えるようにしているので、オブジェクトの表示を変更（例えば、オブジェクトの拡大や位置変更）しなくとも、ユーザによるオブジェクトの誤操作を抑えることができる。また、表示装置１０によれば、ユーザの誤操作のおそれが元々少なく、近接指示されたオブジェクトの位置から遠いオブジェクトについては選択を無効にしないので、例えば、同時に複数オブジェクトを選択する接触操作がユーザにより意図的に行われる場合であっても、表示装置１０はこの接触操作を検出することができる。
【００４２】
［第２実施形態］
次に、本発明の第２実施形態を説明する。
上述した第１実施形態では、表示装置１０は、参照範囲を用いて選択を無効にするオブジェクトを特定していたが、この第２実施形態では、表示装置１０は、参照範囲を用いないで、選択を無効にするオブジェクトを特定する。
この実施形態の表示装置１０のハードウェア構成は、上述した第１実施形態と同じであるから、ここではその説明を省略する。以下の説明において、上述した第１実施形態と同じハードウェア構成、機能構成及び処理ステップについては同一の符号を付して表し、その説明については適宜省略する。
【００４３】
図１０は、表示装置１０の制御部１１の機能構成を示す機能ブロック図である。図１０に示すように、表示装置１０の制御部１１は、操作検出部１１１と、表示制御部１１２と、設定部１１４と、選択オブジェクト特定部１１５と、処理実行部１１６とに相当する機能を実現する。これらのうち、操作検出部１１１、表示制御部１１２、選択オブジェクト特定部１１５及び処理実行部１１６は、上述した第１実施形態と同じ機能を実現するので、ここではその説明を省略する。一方で、制御部１１は、配置関係特定部１１３に相当する機能を実現しなくてよい。
設定部１１４は、操作検出部１１１により検出された近接操作で指示されたオブジェクトの選択を有効とし、表示面１４１に表示された他のオブジェクトの選択を無効とする。設定部１１４は、例えば、表示面１４１に表示された他のすべてのオブジェクトの選択を無効にする。
【００４４】
図１１は、表示装置１０がユーザインタフェースを提供するときの処理の手順を示すフローチャートである。本実施形態の各処理ステップについて、上述した第１実施形態と同じ符号を付した処理ステップは第１実施形態と同じ処理を行うステップであり、ここではその説明を適宜省略する。表示装置１０は、ユーザが選択可能なオブジェクトを含む画像を表示面１４１に表示させているときは、以下の処理ステップを繰り返し実行する。
【００４５】
表示装置１０の制御部１１は、ステップＳ１の処理でオブジェクトを指示する近接操作を検出したと判断し（ステップＳ１；ＹＥＳ）、このオブジェクトのサイズが閾値未満であると判断すると（ステップＳ２；ＹＥＳ）、近接操作で指示されたオブジェクトの選択を有効にし、表示面１４１に表示したその他のすべてのオブジェクトの選択を無効にする（ステップＳ４ａ）。図３（ｂ）に示すメール作成画面ＳＣ１に対する近接操作を例に挙げて説明すると、制御部１１は、図１２に示すように、オブジェクトｂ１のみの選択を有効にし、その他の全てのオブジェクトの選択を無効とする。
以降、表示装置１０は、上述した第１実施形態と同じ手順で、ステップＳ５以降の処理ステップを実行する。
【００４６】
この実施形態において、表示装置１０は、近接操作で指示されたオブジェクト以外のすべてのオブジェクトの選択を無効としていたが、例えば、近接操作で指示されたオブジェクトの上下左右に隣り合うオブジェクトの選択を無効にするなど、表示面１４１に表示した一部のオブジェクトについてのみ、その選択を無効にしてもよい。
以上説明した第２実施形態の表示装置１０によれば、上述した第１実施形態と同等の作用効果を奏するほか、配置関係を特定して選択を無効にするオブジェクトを特定しないので、誤操作の発生を抑えるための処理量を少なくすることができる。
【００４７】
［第３実施形態］
次に、本発明の第３実施形態を説明する。
この第３実施形態の表示装置１０は、前述した第１実施形態の構成に加えて、ユーザによる接触操作の方法に応じて参照範囲を異ならせる構成を有している。
この実施形態の表示装置１０のハードウェア構成は、上述した第１実施形態と同じであるから、ここではその説明を省略する。以下の説明において、第１実施形態と同じハードウェア構成、機能構成及び処理ステップについては同一の符号を付して表し、その説明については適宜省略する。
【００４８】
図１３は、ユーザが接触操作によりオブジェクトを選択するときの様子を、表示装置１０の側面側から見た様子を表す図である。
例えば図１３（ａ）に示すように、ユーザは、指Ｆと表示面１４１とが成す角度が比較的小さくなるように、指Ｆを表示面１４１に対して或る程度寝かした状態で、接触操作を行うことがある。この接触操作の場合、指Ｆと表示面１４１との接触領域のサイズ（以下、「接触サイズ」といい、ここでは接触面積とする。）は比較的大きい。このときの接触サイズをｃ１とする。一方で、図１３（ｂ）に示すように、ユーザは、指Ｆと表示面１４１とが成す角度が比較的大きくなるように、指Ｆを表示面１４１に対して立てた状態で接触操作を行うことがある。この接触操作の場合、指Ｆと表示面１４１との接触サイズは、図１３（ａ）に示す場合よりも小さい。このときの接触サイズをｃ２（＜ｃ１）とする。
【００４９】
図１３（ａ），（ｂ）に示す接触操作を対比しても明らかなように、ユーザが指Ｆを寝かせて接触操作を行った場合ほど、接触サイズが大きくなりやすく、指Ｆがユーザの目的外のオブジェクトに触れてしまうなどの理由で、ユーザの誤操作も発生しやすいと考えられる。逆に言えば、図１３（ａ）に示すような接触サイズが比較的小さい接触操作が行われた場合、ユーザの誤操作は発生しにくいと考えられる。接触操作の方法は、ユーザの表示装置１０の持ち方や操作時のユーザの癖などによるから、同一ユーザは、同じ方法で接触操作を継続的に行うと予想することもできる。
【００５０】
そこで、表示装置１０は、指Ｆと表示面１４１との接触サイズを普段から蓄積しておき、蓄積しておいた接触サイズが小さいほど参照範囲を小さくする（又は、接触サイズが大きいほど参照範囲を大きくする）ことにより、接触操作の方法に応じて適切な参照範囲を設定する。
【００５１】
図１４は、表示装置１０の制御部１１の機能構成を示す機能ブロック図である。図１４に示すように、表示装置１０の制御部１１は、操作検出部１１１と、表示制御部１１２と、配置関係特定部１１３と、設定部１１４と、選択オブジェクト特定部１１５と、処理実行部１１６とに相当する機能を実現する。これらのうち、操作検出部１１１、表示制御部１１２、設定部１１４、選択オブジェクト特定部１１５及び処理実行部１１６は、上述した第１実施形態と同じ機能を実現するので、ここではその説明を省略する。
配置関係特定部１１３は、操作検出部１１１により接触操作が検出された場合、その接触操作時における指Ｆと表示面１４１との接触サイズを記憶部１５に記憶させる。ここにおいて、配置関係特定部１１３は、オブジェクトを指示する接触操作のみに基づいて接触サイズを特定して蓄積させてもよいし、オブジェクトを指示するものでない接触操作も含めて、接触サイズを蓄積させてもよい。
【００５２】
また、配置関係特定部１１３は、近接操作で指示されたオブジェクトと、表示面１４１に表示された他のオブジェクトとの配置関係を特定する場合に、配置関係特定部１１３により蓄積された接触サイズに応じた参照範囲を設定する。配置関係特定部１１３は、参照範囲を異ならせること以外は、前述の第１実施形態と同じ機能を実現すればよい。
【００５３】
この実施形態の表示装置１０は、基本的には、図５に示す手順に従って、上述した第１実施形態と同様に動作すればよい。ただし、表示装置１０は、ステップＳ３の処理では、記憶部１５に蓄積された接触サイズに応じた参照範囲を設定して、近接操作で指示されたオブジェクトと他のオブジェクトとの配置関係を特定する。図３（ａ）に示したメール作成画面ＳＣ１を例に挙げて説明すると、図１３（ａ）に示すように普段から接触サイズが大きくなるような接触操作が行われている場合、表示装置１０は、図１５（ａ）に示すように、半径が大きい参照範囲Ｔ１を用いて、この参照範囲Ｔ１内に他のオブジェクトが配置されているか否かを判断する。ここでは、オブジェクトｂ２〜ｂ５が参照範囲内に配置されているため、表示装置１０は上述した第１実施形態と同様に、近接操作で指示されたオブジェクトｂ１の選択を有効にし、オブジェクトｂ２〜ｂ５の選択を無効にする。表示装置１０は、例えば、記憶部１５に蓄積された接触サイズの平均値や中央値、接触サイズの最大値などの、接触サイズの統計結果に基づいて、接触サイズが大きくなるほど大きくなる参照範囲を用いるとよい。
【００５４】
一方で、図１３（ｂ）に示すように、普段から接触サイズが小さくなるような接触操作が行われている場合、表示装置１０は、図１５（ｂ）に示すように、半径が図１５（ａ）の場合よりも小さい参照範囲Ｔ２（＜Ｔ１）を用いて、この参照範囲Ｔ２内に他のオブジェクトが配置されているか否かを判断する。ここでは、参照範囲Ｔ２内に他のオブジェクトが配置されていないため、表示装置１０は近接操作で指示されたオブジェクト以外のオブジェクトの選択を無効としない。このとき、ユーザは接触サイズが小さくなる接触操作を行っていると考えられる。よって、図１５（ｂ）に示すように、仮にオブジェクトのサイズが閾値以下であったり、周囲にオブジェクトが密集していたりしたとても、ユーザの誤操作は発生しにくいと考えられる。これにより、同時に複数オブジェクトを選択する接触操作がユーザにより意図的に行われる場合であっても、表示装置１０はこの接触操作を検出することができる。
【００５５】
なお、表示装置１０は、接触サイズと参照範囲との対応関係を記憶していることにより、接触サイズをより多くの段階に分けてそれぞれ異なる参照範囲を設定してもよい。
また、表示装置１０は、接触サイズそのものを記憶部１５に蓄積させるのではなく、接触操作時の表示面１４１に対する指の傾きの大きさを検出できるのであれば、指の傾きの大きさを蓄積して、参照範囲に反映させてもよい。
【００５６】
［変形例］
本発明は、上述した実施形態と異なる形態で実施することが可能である。本発明は、例えば、以下のような形態で実施することも可能である。また、以下に示す変形例は、各々を適宜に組み合わせてもよい。
（変形例１）
上述した各実施形態において、表示装置１０は、選択を有効としたオブジェクト又は無効に設定したオブジェクトの表示態様を変更させてもよい。表示装置１０は、選択を有効としたオブジェクトの色や明るさ、サイズなどの所定の表示態様を変更して、ユーザが視覚的に有効なオブジェクトを把握できるようにする。また、表示装置１０は、選択を無効としたオブジェクトの色や明るさ、サイズなどの所定の表示態様を変更して、ユーザが視覚的に有効なオブジェクトを把握できるようにしてもよい。また、表示装置１０は、選択を有効としたオブジェクト、及び選択を無効としたオブジェクトの双方の表示態様を変更させてもよい。
【００５７】
（変形例２）
上述した各実施形態において、表示装置１０は、オブジェクトのサイズを面積によって特定していたが、別の方法でオブジェクトのサイズを特定してもよい。例えば、表示装置１０は、オブジェクトが正方形又は長方形であれば一辺の長さ（例えば、最大の長さ）や、対角線の長さなどの、所定方向の長さによってオブジェクトのサイズを特定してもよい。また、表示装置１０は、オブジェクトが円形であれば径方向の長さ（例えば、最大の長さ）でオブジェクトのサイズを特定してもよい。これ以外の形状であっても、表示装置１０は、面積でなく任意の方向の長さによってサイズを特定してもよい。また、表示装置１０は、面積と長さとによってオブジェクトのサイズを特定してもよい。
【００５８】
（変形例３）
上述した各実施形態において、表示装置１０は、サイズが閾値未満であるオブジェクトについてのみ、他のオブジェクトを無効にする設定を行っていたが、ステップＳ２の処理、つまり、オブジェクトのサイズが閾値以上であるか否かの判断を行わないようにしてもよい。この構成の場合、表示装置１０は、サイズが大きいオブジェクトについても、参照範囲を用いて他のオブジェクトとの配置関係と特定することになる。
このようにオブジェクトのサイズを特定しない構成であっても、表示装置１０は、参照範囲を用いて、近接操作で指示されたオブジェクトの近傍にある他のオブジェクトがあると判断して、選択の有効又は無効を設定する構成を有する。したがって、この表示装置１０によっても、誤って付近のオブジェクトに触れてしまうことによるユーザの誤操作の発生を抑えることができる。
【００５９】
（変形例４）
上述した第１，第３実施形態において、表示装置１０は、参照範囲に含まれる他のオブジェクトの数が閾値以上（例えば３以上）であることを特定条件に含めてもよい。近接するオブジェクトの数が多いほど、ユーザの誤操作を招きやすいので、表示装置１０は、オブジェクトの数が少なく誤操作の可能性が低い場合には、オブジェクトの選択の有効又は無効の設定をしなくてもよい。このように表示装置１０は、近接操作で指示されたオブジェクトの周辺における他のオブジェクトの密集度合いに応じて、オブジェクトの選択の有効又は無効を設定する。
【００６０】
（変形例５）
上述した各実施形態において、表示装置１０は、近接操作で指示されたオブジェクトの選択を有効として、接触操作で指示されたオブジェクトを選択オブジェクトとして特定していた。この接触操作に代えて、表示装置１０は、オブジェクトの選択を有効とするための近接操作よりも更に指などの指示体をオブジェクトに近接させた、非接触の操作（第２操作）で指示されたオブジェクトを、選択オブジェクトとして特定してもよい。この場合、表示装置１０は、例えば、近接センサ１２１の検出可能領域のうち、表示面１４１からその法線方向に第１距離までの操作に応じて選択オブジェクトを特定すればよい。このように本発明の表示装置は、表示面１４１に指示体が接触した状態を検出する接触センサを備えていなくてもよい。
また、表示部１４の表示面１４１に表示されるオブジェクトを含む画像（画面）はどのような画面であってもよい。
【００６１】
（変形例６）
上述した各実施形態において、表示装置１０は、接触操作を検出するセンサと近接操作を検出するセンサとを別個に備えていたが、接触操作と近接操作を単一のセンサによって検出する構成であってもよい。
また、本発明のユーザインタフェース装置は、少なくとも、オブジェクトを表示してから選択オブジェクトを特定するまでの処理を行うものであればよく、選択オブジェクトに応じた処理を行う処理装置とは独立して構成された装置であってもよい。
【００６２】
（変形例７）
上述した各実施形態において、表示装置１０の制御部１１が実現する各機能は、複数のプログラムの組み合わせによって実現され、又は、複数のハードウェア資源の協働によって実現されうる。
また、本発明のユーザインタフェース装置は、コンピュータや制御部１１が実行するプログラムやユーザインタフェース方法として把握することも可能である。
【符号の説明】
【００６３】
１０…表示装置、１１…制御部、１１１…操作検出部、１１２…表示制御部、１１３…配置関係特定部、１１４…設定部、１１５…選択オブジェクト特定部、１１６…処理実行部、１２…操作部、１２１…近接センサ、１２２…接触センサ、１３…通信部、１４…表示部、１４１…表示面、１５…記憶部。
【図１】
2014078116.tif 000003
【図２】
2014078116.tif 000004
【図３】
2014078116.tif 000005
【図４】
2014078116.tif 000006
【図５】
2014078116.tif 000007
【図６】
2014078116.tif 000008
【図７】
2014078116.tif 000009
【図８】
2014078116.tif 000010
【図９】
2014078116.tif 000011
【図１０】
2014078116.tif 000012
【図１１】
2014078116.tif 000013
【図１２】
2014078116.tif 000014
【図１３】
2014078116.tif 000015
【図１４】
2014078116.tif 000016
【図１５】
2014078116.tif 000017