(57)【特許請求の範囲】
【請求項１】
一のオブジェクトを３次元表示する表示部と、
前記オブジェクトの視認空間における所定の物体の変位を検出する検出部と、
前記検出部によって検出される前記所定の物体の変位に応じて前記オブジェクトに関連づけられた動作を行う制御部と、
前記オブジェクトに関連した画像を投影する投影部と、
を備え、
前記制御部は、前記検出部によって検出される前記所定の物体が、前記オブジェクトのどの位置に接触したかに基づいて、前記投影部が投影する画像の内容を変化させることを特徴とする電子機器。
【請求項２】
前記制御部は、前記検出部によって前記所定の物体の前記オブジェクトに沿って移動する変位が検出された場合に、当該物体の移動方向に対応させて前記オブジェクトを回転させることを特徴とする請求項１に記載の電子機器。
【請求項３】
前記制御部は、前記動作の移動量に応じた角度だけ前記オブジェクトを回転させることを特徴とする請求項２に記載の電子機器。
【請求項４】
前記制御部は、前記検出部によって前記所定の物体が前記オブジェクトに接触した後に離れる動作が検出された場合に、前記オブジェクトの接触された位置に対応する処理を実行することを特徴とする請求項１から３のいずれか１つに記載の電子機器。
【請求項５】
一のオブジェクトを３次元表示する表示部と、
前記オブジェクトの視認空間における所定の物体の変位を検出する検出部と、
前記検出部によって検出される前記所定の物体の変位に応じて前記オブジェクトに関連づけられた動作を行う制御部と、
前記オブジェクトに関連した画像を表示する第２の表示部と、
を備え、
前記制御部は、前記検出部によって検出される前記所定の物体が、前記オブジェクトのどの位置に接触したかに基づいて、前記第２の表示部が表示する画像の内容を変化させることを特徴とする電子機器。
【請求項６】
前記制御部は、前記検出部によって前記所定の物体の前記オブジェクトに沿って移動する変位が検出された場合に、当該物体の移動方向に対応させて前記オブジェクトを回転させることを特徴とする請求項５に記載の電子機器。
【請求項７】
前記検出部は、静電容量式のタッチセンサであることを特徴とする請求項１から６のいずれか１つに記載の電子機器。
【請求項８】
前記検出部は、画像を撮影する撮影部であることを特徴とする請求項１から６のいずれか１つに記載の電子機器。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、電子機器、制御方法および制御プログラムに関する。
【背景技術】
【０００２】
近年、直感的な操作を可能にするとともに、キーボードのように物理的に大きな面積を必要とするデバイスを具備しない小型の電子機器を実現するために、タッチパネルが広く利用されるようになっている。タッチパネルを備える電子機器では、タッチパネルによって検出されるタップ等の動作に対して特定の処理が割り当てられる（例えば、特許文献１）。
【先行技術文献】
【特許文献】
【０００３】
【特許文献１】特開２００９−１６４７９４号公報
【発明の概要】
【発明が解決しようとする課題】
【０００４】
しかしながら、タッチパネルによって検出される動作は、タップ、フリック、スワイプ等の数種類に過ぎない。このため、タッチパネルを備える従来の電子機器では、利用者に対して多様な操作方法を提供することができなかった。
【０００５】
本発明は、上記に鑑みてなされたものであって、利用者に対して多様な操作方法を提供することができる電子機器、制御方法および制御プログラムを提供することを目的とする。
【課題を解決するための手段】
【０００６】
本発明に係る電子機器は、所定のオブジェクトを３次元表示する表示部と、前記オブジェクトの視認空間における所定の物体の変位を検出する検出部と、前記検出部によって検出される前記所定の物体の変位に応じて前記オブジェクトに関連づけられた動作を行う制御部とを備える。
【０００７】
ここで、前記制御部は、前記検出部によって前記所定の物体の前記オブジェクトに沿って移動する変位が検出された場合に、当該物体の移動方向に対応させて前記オブジェクトを回転させることが好ましい。さらに、前記制御部は、前記動作の移動量に応じた角度だけ前記オブジェクトを回転させることとしてもよい。
【０００８】
また、前記制御部は、前記検出部によって前記所定の物体が前記オブジェクトに接触した後に離れる動作が検出された場合に、前記オブジェクトの接触された位置に対応する処理を実行することが好ましい。
【０００９】
また、前記電子機器は、画像を投影する投影部をさらに備え、前記制御部は、前記オブジェクトに関連する画像を前記投影部から投影させることが好ましい。
【００１０】
また、前記電子機器は、第２の表示部をさらに備え、前記制御部は、前記オブジェクトに関連する画像を前記第２の表示部に表示させることが好ましい。
【００１１】
また、前記検出部は、例えば、静電容量式のタッチセンサであってもよいし、画像を撮影する撮影部であってもよい。
【００１２】
また、本発明に係る制御方法は、表示部を有する電子機器によって実行される制御方法であって、所定のオブジェクトを前記表示部に３次元表示するステップと、前記オブジェクトの視認空間における所定の物体の変位を検出するステップと、検出される前記所定の物体の変位に応じて前記オブジェクトに関連づけられた動作を行うステップとを含む。
【００１３】
また、本発明に係る制御プログラムは、表示部を有する電子機器に、所定のオブジェクトを前記表示部に３次元表示するステップと、前記オブジェクトの視認空間における所定の物体の変位を検出するステップと、検出される前記所定の物体の変位に応じて前記オブジェクトに関連づけられた動作を行うステップとを実行させる。
【発明の効果】
【００１４】
本発明は、利用者に対して多様な操作方法を提供することができるという効果を奏する。
【図面の簡単な説明】
【００１５】
【図１】図１は、本実施例に係る携帯電話端末（電子機器）の外観を示す正面図である。
【図２】図２は、本実施例に係る携帯電話端末の機能的な構成を示すブロック図である。
【図３】図３は、３次元オブジェクトに対する操作の検出について説明するための図である。
【図４】図４は、３次元オブジェクトに対する操作を検出することによって実現される制御の一例を示す図である。
【図５】図５は、指を３次元オブジェクトに一瞬接触させる操作の軌跡の一例を示す図である。
【図６】図６は、指を３次元オブジェクトに沿って移動させる操作の軌跡の一例を示す図である。
【図７】図７は、指で３次元オブジェクト押しつぶす操作の軌跡の一例を示す図である。
【図８】図８は、３次元オブジェクトに対する操作の検出にともなって携帯電話端末１が実行する制御の処理手順を示すフローチャートである。
【図９】図９は、２つのタッチパネルを備える携帯電話端末の外観を示す正面図である。
【発明を実施するための形態】
【００１６】
以下、本発明につき図面を参照しつつ詳細に説明する。なお、以下の説明により本発明が限定されるものではない。また、以下の説明における構成要素には、当業者が容易に想定できるもの、実質的に同一のもの、いわゆる均等の範囲のものが含まれる。以下においては、電子機器の一例として携帯電話端末について説明するが、本発明の適用対象は携帯電話端末に限定されるものではなく、例えば、ＰＨＳ（Personal Handyphone System）、ＰＤＡ、ポータブルナビゲーション装置、ノートパソコン、ゲーム機等に対しても本発明は適用できる。
【実施例】
【００１７】
まず、図１および図２を参照しながら、本実施例に係る携帯電話端末（電子機器）１の構成について説明する。図１は、携帯電話端末１の外観を示す正面図である。図２は、携帯電話端末１の機能的な構成を示すブロック図である。
【００１８】
図１および図２に示すように、携帯電話端末１は、操作部１３と、マイク１５と、レシーバ１６と、制御部２２と、記憶部２４と、通信部２６と、音声処理部３０と、タッチパネル３２と、プロジェクタ３４と、撮影部４０とを有する。操作部１３、マイク１５、レシーバ１６、タッチパネル３２および撮影部４０は、携帯電話端末１の正面に一部が露出する。
【００１９】
操作部１３は、物理的なボタンを有し、押下されたボタンに対応する信号を制御部２２へ出力する。なお、図１に示す例では、操作部１３はボタンを１つしか有していないが、操作部１３は複数のボタンを有していてもよい。
【００２０】
マイク１５は、外部の音声を取得する。レシーバ１６は、通話時に通話相手の音声を出力する。音声処理部３０は、マイク１５から入力される音声をデジタル信号化して制御部２２へ出力する。また、音声処理部３０は、制御部２２から入力されるデジタル信号を復号してレシーバ１６へ出力する。
【００２１】
通信部２６は、アンテナ２６ａを有し、基地局によって割り当てられるチャネルを介して、基地局との間にＣＤＭＡ（Code Division Multiple Access）方式などによる無線信号回線を確立する。通信部２６は、基地局との間に確立された無線信号回線を通じて、他の装置との間で電話通信および情報通信を行う。
【００２２】
タッチパネル３２は、文字、図形、画像等の各種の情報を表示するとともに、表示されたアイコン、ボタン、文字入力領域等の所定領域に対する入力操作を検出する。タッチパネル３２は、表示部３２ａと、タッチセンサ３２ｂとを重畳して構成される。
【００２３】
表示部３２ａは、液晶ディスプレイ（Liquid Crystal Display）や有機ＥＬ（Organic Electro−Luminescence）パネル等の表示装置を備え、制御部２２から入力される制御信号に従って各種の情報を表示する。タッチセンサ３２ｂは、タッチパネル３２の表面に対して行われる入力操作を検出し、検出した入力操作に応じた信号を制御部２２へ出力する。本実施例において、タッチセンサ３２ｂは、静電容量式のセンサであるものとする。
【００２４】
また、本実施例において、タッチパネル３２は、３次元オブジェクトを表示できるものとする。３次元オブジェクトは、視差を利用して立体的に見えるように作成された画像や形状である。なお、３次元オブジェクトを表示する方式は、眼鏡等の器具を用いて立体視を実現する方式であってもよいし、裸眼で立体視を実現する方式であってもよい。
【００２５】
プロジェクタ３４は、制御部２２から入力される制御信号に従って、画像を壁面やスクリーンに投影する。なお、プロジェクタ３４が画像を投影する方式は特に限定しない。例えば、プロジェクタ３４は、光源から照射されるレーザー光をＭＥＭＳ（Micro Electro Mechanical System）ミラーで反射して画像を描画してもよい。また、プロジェクタ３４は、ハロゲンライト、ＬＥＤ、ＬＤ等の光源と、ＬＣＤ、ＤＭＤ（Digital Micro-mirror Device）等の光学系とを組み合わせて構成されてもよい。
【００２６】
撮影部４０は、撮像センサによって画像を電子的に取得する。撮影部４０は、タッチパネル３２上のどの位置に指が置かれていてもその指を撮影することができるように画角や配置が設定されていることが好ましい。なお、撮影部４０は、可視光の画像を取得する装置であってもよいし、赤外線等の不可視光の画像を取得する装置であってもよい。
【００２７】
制御部２２は、演算手段であるＣＰＵ（Central Processing Unit）と、記憶手段であるメモリとを備え、これらのハードウェア資源を用いてプログラムを実行することによって各種の機能を実現する。具体的には、制御部２２は、記憶部２４に記憶されているプログラムやデータを読み出してメモリに展開し、メモリに展開されたプログラムに含まれる命令をＣＰＵに実行させる。そして、制御部２２は、ＣＰＵによる命令の実行結果に応じて、メモリおよび記憶部２４に対してデータの読み書きを行ったり、通信部２６や表示部３２ａ等の動作を制御したりする。ＣＰＵが命令を実行するに際しては、メモリに展開されているデータやタッチセンサ３２ｂ等から入力される信号がパラメータや判定条件の一部として利用される。
【００２８】
記憶部２４は、フラッシュメモリ等の不揮発性を有する記憶装置からなり、各種のプログラムやデータを記憶する。記憶部２４に記憶されるプログラムには、制御プログラム２４ａが含まれる。なお、記憶部２４は、メモリカード等の可搬の記憶媒体と、記憶媒体に対して読み書きを行う読み書き装置との組み合わせによって構成されてもよい。この場合、制御プログラム２４ａは、記憶媒体に記憶されていてもよい。また、制御プログラム２４ａは、通信部２６による無線通信によってサーバ装置等の他の装置から取得することとしてもよい。
【００２９】
制御プログラム２４ａは、携帯電話端末１を稼働させるための各種制御に関する機能を提供する。制御プログラム２４ａが提供する機能には、タッチパネル３２での３次元オブジェクトの表示を制御する機能や、プロジェクタ３４による画像の投影を制御する機能や、タッチパネル３２によって表示される３次元オブジェクトに対する利用者の操作を検出する機能が含まれる。
【００３０】
次に、図３を参照しながら、３次元オブジェクトに対する操作の検出について説明する。図３は、３次元オブジェクトに対する操作の検出について説明するための図である。図３に示すように、タッチパネル３２が、３次元オブジェクトＯＢ１を表示しているものとする。３次元オブジェクトＯＢ１は、利用者には、視認空間中に、タッチパネル３２から浮き上がって見えるため、３次元オブジェクトＯＢ１を操作しようとする利用者の指Ｆ１は、必ずしもタッチパネル３２と接触しない。なお、視認空間とは、３次元オブジェクトを表示する表示部３２の表示面に対向した位置で、利用者にはあたかもオブジェクトＯＢ１存在しているように見えている空間をいう。
【００３１】
したがって、３次元オブジェクトに対する操作を検出するには、タッチパネル３２の表面に平行なＸ軸方向およびＹ軸方向への指Ｆ１の動きだけでなく、タッチパネル３２の表面と垂直なＺ軸方向への指Ｆ１の動きを検出することが好ましい。Ｚ軸方向への指Ｆ１の動きを検出することは、Ｘ軸方向およびＹ軸方向への指Ｆ１の動きの検出だけでは実現できない多様な操作を可能にするという点においても好ましい。
【００３２】
制御部２２は、３次元オブジェクトに対する利用者の操作を検出するための検出部として、タッチセンサ３２ｂおよび撮影部４０のいずれか一方または両方を利用する。タッチセンサ３２ｂは、感度を高めることで、例えば、指Ｆ１とタッチパネル３２の表面とのＺ軸方向の距離Ｈが１０ｃｍ程度ある場合でも、指Ｆ１のＸ軸方向およびＹ軸方向の位置を検出することができる。また、制御部２２は、タッチセンサ３２ｂが検出する静電容量の大きさに基づいて距離Ｈを算出することができる。
【００３３】
また、制御部２２は、撮影部４０によって撮影される画像に含まれる指Ｆ１の位置および大きさから、指Ｆ１のＸ軸方向、Ｙ軸方向およびＺ軸方向の位置を算出することができる。なお、算出される位置の精度を向上させるために、指Ｆ１のテンプレート画像を予め携帯電話端末１に記憶させておいてもよい。また、制御部２２は、撮影部４０が被写体に焦点を合わせるために合焦機構によって測定される撮影部４０と指Ｆ１との距離を併用して、指Ｆ１の位置を算出してもよい。
【００３４】
タッチセンサ３２ｂおよび撮影部４０を併用する場合、それぞれの検出結果を平均して指Ｆ１の位置を特定してもよい。この場合、タッチパネル３２と近い領域は撮影部４０では、指Ｆ１の画像を取得し難いのでタッチセンサ３２ｂの重みづけを大きくし、タッチパネル３２と遠い領域では、タッチセンサ３２ｂの検出精度が低くなるので撮影部４０の重みづけを大きくした加重平均を用いてもよい。
【００３５】
なお、近接センサ等の他のセンサを単独利用または併用して、３次元オブジェクトに対する利用者の操作を検出するための検出部として機能させてもよい。
【００３６】
次に、図４から図７を参照しながら、３次元オブジェクトに対する操作を検出することによって実現される制御の例について説明する。図４は、３次元オブジェクトに対する操作を検出することによって実現される制御の一例を示す図である。図５は、指Ｆ１を３次元オブジェクトに一瞬接触させる操作の軌跡の一例を示す図である。図６は、指Ｆ１を３次元オブジェクトに沿って移動させる操作の軌跡の一例を示す図である。図７は、指Ｆ１で３次元オブジェクト押しつぶす操作の軌跡の一例を示す図である。
【００３７】
図４に示すステップＳ１１では、制御部２２は、球形の地球儀を３次元オブジェクトＯＢ１として、タッチパネル３２に表示させている。さらに、制御部２２は、上から見た３次元オブジェクトＯＢ１の中心に表示されている日本を拡大した地図を投影画像Ｐ１としてプロジェクタ３４から投影している。このように、制御部２２は、タッチパネル３２に表示される３次元オブジェクトとプロジェクタ３４から投影される画像とを連動させる。
【００３８】
なお、ここでは、３次元オブジェクトＯＢ１の中心に表示されている日本に関連する画像として日本の地図を投影させているが、日本の国旗、国花等日本に関連する他の画像を投影させてもよい。また、表示される３次元オブジェクトおよび画像は、記憶部２４に予め記憶されていてもよいし、通信部２６による通信によって取得されてもよい。
【００３９】
ステップＳ１１の状態において、図５に示すような指Ｆ１を斜め下へ移動させて３次元オブジェクトＯＢ１に一瞬接触させて直ぐに離す操作が検出されたものとする。この操作は、タッチパネル３２に指Ｆ１を一瞬接触させて直ぐに離すタップ操作と類似しているが、タップ操作は平面状の点しか選択できないのに対して、３次元オブジェクトＯＢ１の任意の場所を選択できる点において優れている。
【００４０】
なお、利用者から見える３次元オブジェクトの大きさについては、予め算出された値が３次元オブジェクトのデータ中に含まれていれば、その値を使用することとしてもよい。また、制御部２２は、３次元オブジェクトの表示を制御しながら、利用者から見える３次元オブジェクトの大きさを動的に算出してもよい。あるいは、事前にキャリブレーションを行って、利用者から見た３次元オブジェクトの範囲と、タッチセンサ３２ｂ等が検出する指Ｆ１の位置との対応を記憶しておいてもよい。
【００４１】
図５に示すような操作が検出されると、制御部２２は、指Ｆ１によって接触された位置が選択されたと判定し、選択された位置に対応する処理を実行する。選択された位置に対応する処理とは、例えば、選択された位置に対応する詳細情報をプロジェクタ３４から投影する処理である。本実施例では、選択された位置に対応する処理として、選択された位置が中心になるように３次元オブジェクトＯＢ１を回転させる処理が実行されるものとする。
【００４２】
図１４に示すステップＳ１２では、図５に示すような操作が検出された結果、制御部２２は、接触されたフロリダ半島付近が中心になるように３次元オブジェクトＯＢ１を回転させている。３次元オブジェクトＯＢ１の回転と連動して、制御部２２は、３次元オブジェクトＯＢ１の中心へ移動したフロリダ半島付近の地図を投影画像Ｐ１としてプロジェクタ３４から投影させている。なお、３次元オブジェクトＯＢ１に一瞬接触させるために指Ｆ１を移動させる方向は、斜め下方向に限定されず、どの方向であってもよい。
【００４３】
また、ステップＳ１１の状態において、図６に示すような指Ｆ１を３次元オブジェクトＯＢ１に沿って移動させる操作が検出されたものとする。図６に示すような操作が検出されると、制御部２２は、指Ｆ１の移動方向および移動量に応じて３次元オブジェクトＯＢ１を回転させる。このように、３次元オブジェクトＯＢ１に沿った指Ｆ１の移動に応じた処理として３次元オブジェクトＯＢ１を回転させることは、利用者にとって直感的で覚えやすい。
【００４４】
図１４に示すステップＳ１３では、図６に示すような操作が検出された結果、制御部２２は、３次元オブジェクトＯＢ１を左方向に指Ｆ１の移動量に応じた角度だけ回転させている。３次元オブジェクトＯＢ１の回転と連動して、制御部２２は、３次元オブジェクトＯＢ１の中心へ移動したフロリダ半島付近の地図を投影画像Ｐ１としてプロジェクタ３４から投影させている。
【００４５】
また、ステップＳ１１の状態において、図７に示すような指Ｆ１を使って３次元オブジェクトＯＢ１を上から押しつぶすような操作が検出されたものとする。図７に示すような操作が検出されると、制御部２２は、利用者が指Ｆ１を３次元オブジェクトＯＢ１に押し込む量に応じて３次元オブジェクトＯＢ１を縮小させる。このように、３次元オブジェクトＯＢ１を押しつぶす操作に応じた処理として３次元オブジェクトＯＢ１を縮小させることは、利用者にとって直感的で覚えやすい。
【００４６】
図１４に示すステップＳ１４では、図７に示すような操作が検出された結果、制御部２２は、３次元オブジェクトＯＢ１を縮小させている。また、制御部２２は、３次元オブジェクトＯＢ１の縮小と連動して、投影画像Ｐ１としてプロジェクタ３４から投影される地図も縮小させている。
【００４７】
次に、図８を参照しながら、３次元オブジェクトに対する操作の検出にともなって携帯電話端末１が実行する制御の処理手順について説明する。図８は、３次元オブジェクトに対する操作の検出にともなって携帯電話端末１が実行する制御の処理手順を示すフローチャートである。図８に示す処理手順は、制御部２２が制御プログラム２４ａを実行することによって実現される。
【００４８】
図８に示すように、制御部２２は、まず、ステップＳ１０１として、３次元オブジェクトをタッチパネル３２に表示させる。また、制御部２２は、ステップＳ１０２として、３次元オブジェクトに対応する画像をプロジェクタ３４から投影させる。
【００４９】
続いて、制御部２２は、ステップＳ１０３として、検出部によって指が検出されているかを判定する。検出部によって指が検出されていない場合（ステップＳ１０３，Ｎｏ）、制御部２２は、ステップＳ１０８として、利用者による終了操作が検出されたかを判定する。終了操作が検出されていない場合（ステップＳ１０８，Ｎｏ）、制御部２２は、ステップＳ１０３以降を再実行する。一方、終了操作が検出されていた場合（ステップＳ１０８，Ｙｅｓ）、制御部２２は、一連の処理手順を終了させる。
【００５０】
ステップＳ１０３において指が検出されている場合（ステップＳ１０３，Ｙｅｓ）、制御部２２は、ステップＳ１０４として、検出部の検出結果に基づいて、３次元空間での指の動きを判定する。そして、３次元オブジェクトに指が一瞬接触する動作が検出された場合（ステップＳ１０５，Ｙｅｓ）、制御部２２は、ステップＳ１０６として、接触された位置に対応する処理を実行する。そして、制御部２２は、ステップＳ１０７として、３次元オブジェクトに対応づけて投影されている画像を更新し、上述したステップＳ１０８を実行する。
【００５１】
また、３次元オブジェクトに沿って指が移動する動作に対応する変位が検出された場合（ステップＳ１０５，Ｎｏ、ステップＳ１０９，Ｙｅｓ）、制御部２２は、ステップＳ１１０として、指の移動方向および移動量に応じて３次元オブジェクトを回転させる。そして、制御部２２は、ステップＳ１０７として、３次元オブジェクトに対応づけて投影されている画像を更新し、上述したステップＳ１０８を実行する。
【００５２】
また、指で３次元オブジェクトを押しつぶすような動作に対応する変位が検出された場合（ステップＳ１０９，Ｎｏ、ステップＳ１１１，Ｙｅｓ）、制御部２２は、ステップＳ１１２として、指を３次元オブジェクトに押し込む量に応じて３次元オブジェクトを縮小させる。そして、制御部２２は、ステップＳ１０７として、３次元オブジェクトに対応づけて投影されている画像を更新し、上述したステップＳ１０８を実行する。
【００５３】
上記の動作のいずれも検出されない場合（ステップＳ１１１，Ｎｏ）、制御部２２は、投影されている画像をそのまま維持して、上述したステップＳ１０８を実行する。
【００５４】
上述してきたように、本実施例では、３次元空間での指の動きに基づいて利用者の操作を検出することとしたため、利用者に多様な操作方法を提供することができる。
【００５５】
なお、上記の実施例で示した本発明の態様は、本発明の要旨を逸脱しない範囲で任意に変更することができる。例えば、上記の実施例で示した制御プログラム２４ａは、複数のモジュールに分割されていてもよいし、他のプログラムと統合されていてもよい。また、上記の実施例では、３次元オブジェクトに対して指で操作を行うこととしたが、先端に静電気を帯びた棒状の物等を指の代わりに用いてもよい。
【００５６】
また、上記の実施例では、３次元空間での指の動きに基づいて３種類の操作を検出することとしたが、３次元空間での指や手の動きに基づいて検出される操作は、これらに限定されない。例えば、創作プログラムと連係して、利用者が３次元表示されたブロックや粘度を指で操作して像や建物を製作できるようにしてもよい。また、レースゲームプログラムと連係して、利用者が３次元表示されたハンドルを手で操作してレースを楽しめるようにしてもよい。
【００５７】
また、楽器演奏プログラムと連係して、利用者が３次元表示されたピアノや鍵盤を指で操作して演奏を楽しめるようにしてもよい。また、データ表示プログラムと連係して、３次元表示された形状の任意の部分を手で切断すると、切断面の画像がプロジェクタ３４から投影されることとしてもよい。
【００５８】
また、上記の実施例では、携帯電話端末１が、表示手段として静電容量式のタッチパネルを備えることとしたが、撮影部４０によって３次元空間での指や手の動きを精度よく検出できる場合は、携帯電話端末１は、静電容量式のタッチパネルを備えなくてもよい。この場合、携帯電話端末１は、表示手段として静電容量式以外の検出方式のタッチパネルを備えてもよいし、表示手段として単に情報を表示するだけの装置を備えてもよい。
【００５９】
また、上記の実施例では、３次元オブジェクトと関連する画像をプロジェクタから投影することとしたが、携帯電話端末が複数の表示手段を備える場合は、１つの表示手段に３次元オブジェクトを表示し、他の表示手段に画像を表示することとしてもよい。
【００６０】
図９は、２つのタッチパネルを備える携帯電話端末２の外観を示す正面図である。携帯電話端末２は、スライド可能に構成された筐体２ａおよび筐体２ｂとを有する。筐体２ａは、タッチパネル３３ａを有し、筐体２ｂはタッチパネル３３ｂを有する。携帯電話端末２は、筐体２ａおよび筐体２ｂの重複が最も小さい開状態では、タッチパネル３３ａおよびタッチパネル３３ｂを外部に露出し、筐体２ａおよび筐体２ｂが重なり合う閉状態では、タッチパネル３３ａのみを外部に露出する。
【００６１】
開状態において、タッチパネル３３ａは、３次元オブジェクトを表示するために用いられることがあり、その場合、タッチパネル３３ｂは、関連する画像を表示するために用いられる。なお、携帯電話端末２は、複数のタッチパネルを備える折り畳み式の電子機器であってもよい。
【００６２】
なお、上記実施例では、所定の物体の変位を検出するために撮影部やタッチセンサを用いた例を示したが、これに限られない。たとえば撮影部に変えて、ＴＯＦ（Time-of-Flight）法を用いたセンサでもよい。また立体表示がされた空間における面方向の移動を検出できる近接センサ等を、所定の物体の移動方向とほぼ水平に配置すると、所定の物体の変位が非接触でも検出できることから、もちろんこれらを用いてもよい。なお、所定の物体にセンサ等を配置することなく、上記変位の検出ができるとよく、その場合、指にわざわざ加速度センサを取り付けたり、加速度を備えた電子機器そのものを移動させたりする必要がないので、コスト低減が図れる。
【００６３】
また、検出した変位に対応して行われるオブジェクトに関連する動作はなんでもよい。たとえば、検出された変位に対応して、オブジェクトを移動させる、オブジェクトを変形させる等、オブジェクト自体についてのなんらかの変化があるようにしてもよい。
【００６４】
また、上述の実施例では、３次元オブジェクトが利用者側に飛び出す場合について記載したが、表示部よりも奥側に３次元オブジェクトが存在するように見せる場合でも本発明を適用できる。この場合、表示部の裏面側にセンサやカメラを配置すればよい。
電子機器がたとえば携帯電話の場合、利用者自身を撮影するためのインカメラと、風景等を撮影するためのアウトカメラを共に備えていることが多い。そこで、このアウトカメラを用いることで裏面側における所定の物体の変位を捕捉することができるようにしてもよい。
【符号の説明】
【００６５】
１    携帯電話端末
１３    操作部
２２    制御部
２４    記憶部
２４ａ  制御プログラム
２６    通信部
３０    音声処理部
３２    タッチパネル
３２ａ  表示部
３２ｂ  タッチセンサ（検出部）
３４    プロジェクタ
４０    撮影部（検出部）
【図１】
0005785753.tif 000002
【図２】
0005785753.tif 000003
【図３】
0005785753.tif 000004
【図４】
0005785753.tif 000005
【図５】
0005785753.tif 000006
【図６】
0005785753.tif 000007
【図７】
0005785753.tif 000008
【図８】
0005785753.tif 000009
【図９】
0005785753.tif 000010