(57)【要約】【課題】所望の画面部品を見付けやすく、選択しやすい情報端末を提供すること。【解決手段】複数のサムネイル画像１２を表示する表示部１１と、サムネイル画像１２を決定する指５０が、表示部１１に対してＺ１以内に接近したことを非接触検出デバイス１４によって検出し、サムネイル画像１２に関連する複数のサムネイル画像を立体視認部１３によって表示部１１よりも高い位置に見えるように並べて描画し、指が再度Ｚ２以内に入った際、非接触検出デバイス１４によって検出された位置の直下に存在するサムネイル画像１２が選択される。【選択図】図１１
2012155506.tif 000002
【特許請求の範囲】
【請求項１】
画面部品を表示する表示部と、
前記表示部内の指示位置を検出する指示位置検出手段と、
関連する複数の前記画面部品を一体的に前記表示部に表示させ、
前記指示位置検出手段によって前記一体的に表示された画面部品が指示されたと判断されたときに、その後の前記指示位置の移動軌跡に基づいて前記一体的に表示された画面部品を離散的に上記表示部に表示させる制御部と、
を備えることを特徴とする情報端末。
【請求項２】
前記表示部は、
前記画面部品を立体的に表示することが可能であり、
前記制御部は、
前記指示位置検出手段によって前記一体的に表示された画面部品が指示されたと判断されたときに、前記一体的に表示された画面部品を立体的に前記表示部に表示させる、
ことを特徴とする請求項１に記載の情報端末。
【請求項３】
画面部品を表示する表示部と、
指示物の位置を検出する三次元位置検出部と、
関連する複数の前記画面部品を一体的に前記表示部に表示させ、
前記三次元位置検出部によって前記指示物が前記表示部から所定の距離以内に近づいたときの前記表示部と平行な面内における前記指示物の位置と前記表示部における前記一体的に表示された画面部品の位置とに基づいて前記指示物が前記一体的に表示された画面部品を指示すると判断し、
前記三次元位置検出部によって前記指示物が前記一体的に表示された画面部品を指示すると判断された場合、前記三次元位置検出部によって得られたその後の前記指示物の移動軌跡に基づいて前記一体的に表示された画面部品を離散的に前記表示部に表示させる、
制御部と、
を備えることを特徴とする情報端末。
【請求項４】
前記表示部は、
前記画面部品を立体的に表示することが可能であり、
前記制御部は、
前記三次元位置検出部によって前記指示物が前記一体的に表示された画面部品を指示すると判断された場合、前記一体的に表示された画面部品を立体的に前記表示部に表示させる、
ことを特徴とする請求項３に記載の情報端末。
【請求項５】
前記制御部は、
前記一体的に表示された画面部品を立体的に前記表示部に表示させた後、前記三次元位置検出部によって前記指示物の位置が所定の時間変化していないと判断された場合、前記立体的に表示された画面部品の並び順を変更して前記表示手段に表示させる、
ことを特徴とする請求項４に記載の情報端末。
【請求項６】
前記制御部は、
前記三次元位置検出部によって検出された指示物の検出面積が増加した場合、前記表示面と平行な面内における前記指示物の位置と前記表示面における前記立体的に表示された画面部品の位置とに基づいて前記指示物が前記立体的に表示された画面部品のいずれを指示するかを判断する、
ことを特徴とする請求項４に記載の情報端末。
【請求項７】
前記制御部は、
前記三次元位置検出部によって前記指示物が前記表示面に近づいたと判断された場合、前記表示面と平行な面内における前記指示物の位置と前記表示面における前記立体的に表示された画面部品の位置とに基づいて前記指示物が前記立体的に表示された画面部品のいずれを指示するかを判断する、
ことを特徴とする請求項４に記載の情報端末。
【請求項８】
前記制御部は、
前記三次元位置検出部によって前記指示物が前記所定の距離よりも大きい第２の所定の距離以上に遠ざかったと判断された場合、前記立体的に表示された画面部品を一体的に前記表示部に表示させる、
ことを特徴とする請求項４に記載の情報端末。
【請求項９】
前記制御部は、
前記三次元位置検出部によって前記指示物が前記所定の距離よりも大きい第２の所定の距離以上に遠ざかったと判断された場合、前記立体的に表示された画面部品をその状態で固定する、
ことを特徴とする請求項５に記載の情報端末。
【請求項１０】
前記制御部は、
前記三次元位置検出部によって前記指示物が前記表示部から所定の距離以内に近づいたときの前記表示部と平行な面内における前記指示物の位置と前記表示部における前記立体的に表示された画面部品の位置とに基づいて前記指示物が前記立体的に表示された画面部品のいずれを指示するかを判断する、
ことを特徴とする請求項９に記載の情報端末。
【請求項１１】
関連する複数の画面部品を一体的に表示部に表示させる第１表示ステップと、
三次元位置検出部によって指示物が前記表示部から所定の距離以内に近づいたときの前記表示部と平行な面内における前記指示物の位置と前記表示部における前記一体的に表示された画面部品の位置とに基づいて前記指示物が前記一体的に表示された画面部品を指示するか否かを判断する第１判断ステップと、
前記第１判断ステップにおいて前記三次元位置検出部によって前記指示物が前記一体的に表示された画面部品を指示すると判断された場合、前記三次元位置検出部によって得られたその後の前記指示物の移動軌跡に基づいて前記一体的に表示された画面部品を立体的に前記表示部に表示させる第２表示ステップと、
前記三次元位置検出部によって前記指示物が前記立体的に表示された画面部品のいずれかを指示するか否かを判断する第２判断ステップと、
前記第２判断ステップにおいて前記三次元位置検出部によって前記指示物が前記立体的に表示された画面部品のいずれかを指示すると判断された場合、前記指示された画面部品が選択されたと判断する第３判断ステップと、
を含むことを特徴とする画面部品選択方法。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、情報端末及び画面部品選択方法等に関する。
【背景技術】
【０００２】
近年、ＰＤＡ、スマートフォン、タブレットＰＣ、カーナビゲーションシステム等の情報端末が普及している。これらの情報端末は、一般的に小型化のためディスプレイに表示されるアイコン等のＧＵＩ（Graphical User Interface）の画面部品をタッチペンや指でタッチすることにより情報の入力を行うタッチパネルが採用されている。タッチパネルでは、表示画面に複数のアイコン等を含む画面部品が表示され、スタイラスや指でタッチすることにより決定がされ、アイコンに割り当てられているアプリケーションプログラムを起動したり、所望のコンテンツを再生したりする。また、記憶媒体の大容量化に伴い、大量のコンテンツを情報端末内に保存することが可能となっており、大量に保存されたコンテンツから所望のコンテンツを選択する必要がある。
【０００３】
大量に保存されたコンテンツを見やすく表示する手段として、例えば、特許文献１が挙げられる。図１２は、特許文献１に示す情報端末の表示画面を示す図である。図１２において、縦軸は時刻を、横軸は曜日を、奥行方向は週を、それぞれ示す。図１２に示す三次元画像６１０にて関連する複数のコンテンツのサムネイル画像６１１をコンテンツの日時情報に従って三次元表示するとともに、日ごとの録画コンテンツの有無を別の二次元画像６２０上にマーク６２１で表示することで認識しやすくし、さらに枠６２２を移動することでサムネイル画像６１１の最前面を切り替えることができるという情報端末が開示されている。二次元画像６２０において、縦軸は週を、横軸は曜日を、それぞれ示す。したがって、枠６２２を上下に移動することで三次元画像６１０の奥行方向の週が選択され、サムネイル画像６１１のうち選択された週に録画されたコンテンツに対応するサムネイル画像がサムネイル画像６１１の最前面に表示されることになる。
【先行技術文献】
【特許文献】
【０００４】
【特許文献１】特開２００８−１９３６４９号公報
【発明の概要】
【発明が解決しようとする課題】
【０００５】
しかしながら、上記特許文献１の情報端末では、三次元表示と二次元表示をひとつの表示装置に表示するため見にくくなってしまうという課題があった。
【０００６】
また、選択方法が直感的にわかりにくいという課題もあるため、とくに小型の情報端末であった場合にはさらに見にくく、選択しにくくなってしまう。
【０００７】
本発明は、上記従来の情報端末の課題を考慮し、所望の画面部品およびコンテンツを見付けやすく、選択しやすい情報端末及び画面部品選択方法を提供することを目的とする。
【課題を解決するための手段】
【０００８】
上記目的を達成するために、本発明の情報端末は、画面部品を表示する表示部と、前記表示部内の指示位置を検出する指示位置検出手段と、関連する複数の前記画面部品を一体的に前記表示部に表示させ、前記指示位置検出手段によって前記一体的に表示された画面部品が指示されたと判断されたときに、その後の前記指示位置の移動軌跡に基づいて前記一体的に表示された画面部品を離散的に上記表示部に表示させる制御部と、を備えることを特徴とする。
【０００９】
前記表示部は、前記画面部品を立体的に表示することが可能であり、前記制御部は、前記指示位置検出手段によって前記一体的に表示された画面部品が指示されたと判断されたときに、前記一体的に表示された画面部品を立体的に前記表示部に表示させる、ことを特徴とする。
【００１０】
上記目的を達成するために、本発明の情報端末は、画面部品を表示する表示部と、指示物の位置を検出する三次元位置検出部と、関連する複数の前記画面部品を一体的に前記表示部に表示させ、前記三次元位置検出部によって前記指示物が前記表示部から所定の距離以内に近づいたときの前記表示部と平行な面内における前記指示物の位置と前記表示部における前記一体的に表示された画面部品の位置とに基づいて前記指示物が前記一体的に表示された画面部品を指示すると判断し、前記三次元位置検出部によって前記指示物が前記一体的に表示された画面部品を指示すると判断された場合、前記三次元位置検出部によって得られたその後の前記指示物の移動軌跡に基づいて前記一体的に表示された画面部品を離散的に前記表示部に表示させる、制御部と、を備えることを特徴とする。
【００１１】
前記表示部は、前記画面部品を立体的に表示することが可能であり、前記制御部は、前記三次元位置検出部によって前記指示物が前記一体的に表示された画面部品を指示すると判断された場合、前記一体的に表示された画面部品を立体的に前記表示部に表示させる、ことを特徴とすることができる。
【００１２】
前記制御部は、前記一体的に表示された画面部品を立体的に前記表示部に表示させた後、前記三次元位置検出部によって前記指示物の位置が所定の時間変化していないと判断された場合、前記立体的に表示された画面部品の並び順を変更して前記表示手段に表示させる、
ことを特徴とすることができる。
【００１３】
前記制御部は、前記三次元位置検出部によって検出された指示物の検出面積が増加した場合、前記表示面と平行な面内における前記指示物の位置と前記表示面における前記立体的に表示された画面部品の位置とに基づいて前記指示物が前記立体的に表示された画面部品のいずれを指示するかを判断する、ことを特徴とすることができる。
【００１４】
前記制御部は、前記三次元位置検出部によって前記指示物が前記表示面に近づいたと判断された場合、前記表示面と平行な面内における前記指示物の位置と前記表示面における前記立体的に表示された画面部品の位置とに基づいて前記指示物が前記立体的に表示された画面部品のいずれを指示するかを判断する、ことを特徴とすることができる。
【００１５】
前記制御部は、前記三次元位置検出部によって前記指示物が前記所定の距離よりも大きい第２の所定の距離以上に遠ざかったと判断された場合、前記立体的に表示された画面部品を一体的に前記表示部に表示させる、ことを特徴とすることができる。
【００１６】
前記制御部は、前記三次元位置検出部によって前記指示物が前記所定の距離よりも大きい第２の所定の距離以上に遠ざかったと判断された場合、前記立体的に表示された画面部品をその状態で固定する、ことを特徴とすることができる。
【００１７】
前記制御部は、前記三次元位置検出部によって前記指示物が前記表示部から所定の距離以内に近づいたときの前記表示部と平行な面内における前記指示物の位置と前記表示部における前記立体的に表示された画面部品の位置とに基づいて前記指示物が前記立体的に表示された画面部品のいずれを指示するかを判断する、ことを特徴とすることができる。
【００１８】
上記目的を達成するために、本発明の画面部品選択方法は、関連する複数の画面部品を一体的に表示部に表示させる第１表示ステップと、三次元位置検出部によって指示物が前記表示部から所定の距離以内に近づいたときの前記表示部と平行な面内における前記指示物の位置と前記表示部における前記一体的に表示された画面部品の位置とに基づいて前記指示物が前記一体的に表示された画面部品を指示するか否かを判断する第１判断ステップと、前記第１判断ステップにおいて前記三次元位置検出部によって前記指示物が前記一体的に表示された画面部品を指示すると判断された場合、前記三次元位置検出部によって得られたその後の前記指示物の移動軌跡に基づいて前記一体的に表示された画面部品を立体的に前記表示部に表示させる第２表示ステップと、前記三次元位置検出部によって前記指示物が前記立体的に表示された画面部品のいずれかを指示するか否かを判断する第２判断ステップと、前記第２判断ステップにおいて前記三次元位置検出部によって前記指示物が前記立体的に表示された画面部品のいずれかを指示すると判断された場合、前記指示された画面部品が選択されたと判断する第３判断ステップと、を含むことを特徴とする。
【発明の効果】
【００１９】
本発明によれば、所望の画面部品やコンテンツを見付けやすく、選択しやすい情報端末及び画面部品選択方法を提供することができる。
【図面の簡単な説明】
【００２０】
【図１】本発明にかかる実施の形態１における情報端末の正面構成図
【図２】本発明にかかる実施の形態１における表示部と立体視認部と非接触入力部の側面構成図
【図３】本発明にかかる実施の形態１における表示部と立体視認部と非接触入力部の斜視構成図
【図４】本発明にかかる実施の形態１における情報端末の第１の制御フロー図
【図５】本発明にかかる実施の形態１における情報端末の第２の制御フロー図
【図６】本発明にかかる実施の形態１における情報端末の制御を説明するための表示面を示す第１の図
【図７】本発明にかかる実施の形態１における情報端末の制御を説明するための表示面を示す第２の図
【図８】本発明にかかる実施の形態１における情報端末の制御を説明するための表示面を示す第３の図
【図９】本発明にかかる実施の形態１における情報端末をコンピュータに適用した構成図
【図１０】本発明にかかる実施の形態２における情報端末の制御フロー図
【図１１】本実施の形態２の表示部と立体視認部と非接触入力部の側面を模式的に示した図
【図１２】従来の情報端末の表示面を示す図
【発明を実施するための形態】
【００２１】
以下、本発明の実施の形態を図面に基づいて詳細に説明する。
【００２２】
（実施の形態１）
以下に、本発明にかかる実施の形態１における情報端末について説明する。
【００２３】
図１は、本発明の実施の形態１の情報端末の正面図である。図１に示すように、本実施の形態１の情報端末１０には、表示部１１が設けられており、表示部１１には、画面部品の一例である複数のコンテンツのサムネイル画像１２が表示されている。複数のサムネイル画像１２は、図中表示部１１に縦に整列して表示されている。尚、表示部１１としては、液晶ディスプレイ、有機ＥＬディスプレイ等を挙げられる。本実施の形態では、動画コンテンツの代表サムネイル画像１２を例に挙げているが、アイコンや音楽ＣＤのジャケット画像、写真の縮小画像、文字、あるいは文字列などのようなものを総称して画面部品と呼び、画面部品が表示部１１に現れるように構成することができる。
【００２４】
図１において、ドラマＡの代表サムネイル画像１２は複数存在する。例えば、ドラマＡは連続ドラマであって、その第１回から第５回までの放送が録画されているので、ドラマＡの代表サムネイル画像１２は５つ存在する。ドラマＡの代表サムネイル画像１２は、５つのうち３つの代表サムネイル画像１２を少しずつずらせた状態で重ねて表示することによって複数の代表サムネイル画像１２が存在することを示している。このとき、最も手前に表示されている代表サムネイル画像１２をドラマＡグループの代表サムネイル画像１２Ａと呼ぶ。
【００２５】
ニュースＣ、朝のドラマＤにおいても同様に、最も手前に表示されている代表サムネイル画像１２をそれぞれニュースＣクループの代表サムネイル画像１２Ｃ、朝のドラマＤグループの代表サムネイル画像１２Ｄと呼ぶ。なお、ドラマＡの代表サムネイル画像１２、ニュースＣの代表サムネイル画像１２、朝のドラマＤの代表サムネイル画像１２はいずれも３つの代表サムネイル画像１２を少しずつずらせた状態で重ねて表示しているが、図面作成の便宜のためであり、同数である必然性はないし、３つに限定する必要もない。要するに、１つのグループに複数の動画コンテンツが含まれることがわかればよい。また、ドラマＢと映画Ｅの代表サムネイル画像１２はそれぞれ１つである。ドラマＢと映画Ｅはそれぞれ１つの動画コンテンツのみを含むからである。
【００２６】
図２は、本実施の形態１の表示部１１及びその上側に配置された立体視認させるための立体視認部１３および非接触検出デバイス１４の側断面構成図である。また、図３は、本実施の形態１の情報端末１０の斜視構成図である。図２、図３に示すように、本実施の形態１の情報端末１０は、表示部１１の上側に立体視認部１３が設けられており、裸眼にて三次元的に立体映像を見ることができる。この立体視認部１３としては、本実施の形態１ではパララックス・バリア方式が用いられている。
【００２７】
立体視認部１３の上側には非接触検出デバイス１４が設けられており、この非接触検出デバイス１４によって指５０が表示部１１へ接近した時の三次元的な位置情報を検出することができる。この非接触検出デバイス１４としては、本実施の形態１では静電容量方式が用いられている。
【００２８】
本実施の形態１では、表示部１１からＺ２よりも高い位置は検出外領域１７として設定されており、指５０が存在していても検出されない領域となっている。表示部１１からＺ２以内の領域は、検出領域として設定されており、指５０の存在が検出される。この検出領域は２つに分けられており、表示部１１からＺ１までの第１検出領域１５と、Ｚ１からＺ２までの第２検出領域１６に分けられている。詳しくは後述するが、第２検出領域１６から第１検出領域１５に指５０が移動すると、指５０の直下に少しずつずらせた状態で重ねて表示されていた代表サムネイル画像１２が複数の代表サムネイル画像１２に分離され、立体視認の対象となる。
【００２９】
本実施の形態１では、表示部１１の上側の非接触検出デバイス１４にマトリックス状に検出ポイント１４ａが形成されており、指５０が近づくに従って、その指５０の直下近傍の検出ポイント１４ａにおいて静電容量の変化量が大きくなる。そして、最大の変化量を検出した検出ポイント１４ａにおける静電容量の変化量から、その検出ポイント１４ａに対してどの程度の位置（Ｚ軸方向の位置）まで指５０が接近したかが検出される。すなわち、検出外領域１７と第２検出領域１６、及び第２検出領域１６と第１検出領域１５の間における指５０の出入りを検出することができる。
【００３０】
なお、第２検出領域１６はさらにｎ分割したＺ軸方向の指５０の位置を検出することができる。又、静電容量の変化量が最大の検出ポイント１４ａを検出することによって、表示部１１と平行な面における指５０の位置（ＸＹ座標）が検出される。静電容量方式の非接触検出デバイス１４では、一定のサンプリング周期で検出ポイント１４ａの静電容量をサンプリングすることによって、指５０が接近すること若しくは離れることを検出することが可能となる。
【００３１】
また、本実施の形態１では、指５０の三次元的な位置を検出するために静電容量方式の非接触検出デバイス１４を用いているが、赤外線方式の非接触検出デバイスを用いてもよく、その場合には、例えば表示部１１の端に複数の赤外線照射部と受光部を設け、指によって赤外線が遮られることを検出することによって指の三次元的な位置が検出される。
【００３２】
本実施の形態１では、表示部１１の上側の立体視認部１３として複数のスリットを配置し、右目と左目とで見える画素が異なるように映像を作成することで、裸眼により映像を立体的に見ることができる。
【００３３】
また、本実施の形態１では、映像を立体視認させる方法としてパララックス・バリア方式を用いているが、レンチキュラー・レンズ方式を用いてもよく、その場合には、例えば、表示部１１の上部に半円筒型のレンチキュラー・レンズを並べ、レンチキュラー・レンズを通して表示部１１を見ることで右目と左目が錯視を起こし、立体映像として見ることができる。また、角度が異なる多数の光を出すことで立体的な映像表現が可能なインテグラル・イメージング方式を用いてもよい。また、特殊なデバイスを利用せず、擬似的に立体となるように描画してもよいが、高さ方向（Ｚ軸方向）の距離感を認識させるのは困難であるため、上記いずれかの方式を用いるのが望ましい。
【００３４】
次に、本実施の形態１の情報端末１０の動作について説明するとともに、本発明の画面部品選択方法の一例についても同時に述べる。本実施の形態１では、画面部品が動画コンテンツから一場面を抽出した代表サムネイル画像１２である場合とするが、画面部品をこれに限定するものではない。
【００３５】
図４および図５は、本実施の形態１の情報端末１０の制御を示すフロー図である。図４は、本実施の形態１の情報端末１０の表示部１１に図１に示す一覧画面を表示するためのフロー図である。まず、Ｓ１０において、情報端末１０内に記録された動画コンテンツ一覧を抽出する。次に、Ｓ１１において、関連する動画コンテンツごとにグループ分けを行う。関連するコンテンツとは、例えば同じ曜日の同じ時間に録画された番組や、同じタイトル文字を含む番組、同じアーティストが出演する番組、映画などの同じジャンルの番組、等である。次に、Ｓ１２において、グループごとにグループの代表となる代表サムネイル画像１２を選択する。グループの代表となる代表サムネイル画像１２の選択方法としては、最近録画されたもの、最初に録画されたもの、ユーザーから指定されたもの、等が挙げられる。代表サムネイル画像１２の作成タイミングは、番組の録画時、初めて再生する時、夜中等のユーザーが情報端末１０を利用していない時、初めて図１のような一覧画面を表示する時、等が考えられる。また、代表サムネイル画像１２を保存する領域の確保が困難な場合においては、図１のような一覧画面を表示する都度、代表サムネイル画像１２を作成しても構わない。Ｓ１３において、代表サムネイル画像１２とタイトル一覧を表示する。なお、図１のＡ、Ｃ、ＤとＢ、Ｅのように、関連する動画コンテンツが複数存在するグループ（Ａ、Ｃ、Ｄ）とそうでないグループ（Ｂ、Ｅ）とが、一目で区別できるように関連する動画コンテンツが複数存在するグループ（Ａ、Ｃ、Ｄ）においては、代表サムネイル画像１２を少しずつずらせた状態で重ねて表示することが望ましい。
【００３６】
図５は図６（ａ）に示すような一覧画面から図８に示すような代表サムネイル画像１２の選択を行うためのフロー図である。まず、Ｓ２０において、指５０が図２の第２検出領域１６から第１検出領域１５に入った際、表示部１１と平行な面におけるどの位置で指５０が第２検出領域１６と第1検出領域１５との境界を通過したかを検出する。なお、本実施の形態１では、静電容量方式を用いた非接触検出デバイス１４によって、第２検出領域１６から第１検出領域１５に指５０が入ったことと、指５０が第１検出領域１５に入った際の表示部１１と平行な面における指５０の位置（ＸＹ座標）が同時に検出される。なお、第１検出領域１５の高さ、すなわち非接触検出デバイス１４とＺ１との距離は０であっても構わない。この場合、指５０が第２検出領域１６から第１検出領域１５に入ると、指５０は非接触検出デバイス１４に直接触れることになる。
【００３７】
次に、Ｓ２１において、Ｓ２０で検出された指５０の位置（ＸＹ座標）にある動画コンテンツの代表サムネイル画像１２を特定する。例えば、図６（ａ）は、指５０が表示部１１に接近し、第２検出領域１６から第１検出領域１５に入った際の指５０の位置（ＸＹ座標）にあるドラマＡグループの代表サムネイル画像１２Ａが選ばれた際の例を示したものである。
【００３８】
次に、Ｓ２２において、選択されたドラマＡグループの代表サムネイル画像１２Ａに紐付けされた関連する動画コンテンツが複数存在するか否かを判断する。図６（ａ）に示すドラマＢの代表サムネイル画像１２Ｂ、映画Ｅの代表サムネイル画像１２Ｅのように、選択された代表サムネイル画像１２に紐付けされた動画コンテンツが１つしか存在しない場合は、その動画コンテンツが選択されたことになり、例えば、その動画コンテンツの再生を開始したり、削除やコピーなど、その動画コンテンツを操作するためのメニューを表示したりする。なお、図５において、Ｓ２２にてＮｏの場合、「終了」と記載しているが、これはコンテンツ選択処理を終了する意であって、その後、上記のように選択された動画コンテンツの再生を開始したり、削除やコピーなど、その動画コンテンツを操作するためのメニューを表示したりするものである。
【００３９】
次に、Ｓ２３において、Ｓ２２にて複数の動画コンテンツが存在すると判断された場合（Ｓ２２にてＹｅｓ）に、指５０が第１検出領域１５から第２検出領域１６に移動したことを検出する。
【００４０】
このとき、指５０が第１検出領域１５から第２検出領域１６に移動した後、指５０が第２検出領域１６内を移動すると、Ｓ２４では選択されたドラマＡグループの代表サムネイル画像１２Ａに関連する動画コンテンツに関する複数の代表サムネイル画像１２を指５０の移動軌跡に追従させて、三次元的に立体に見えるように表示する。例えば、図６（ｂ）は、指５０のＺ座標が第２検出領域１６内にあり、指５０の位置（ＸＹ座標）が図６（ａ）に示す指５０の位置から図６（ｂ）に示す指５０の位置まで移動したことを検出した場合の例である。このとき、後述するタイマー処理部４４３を用い、短い周期で指５０の位置（ＸＹ座標）を繰り返し検出し、検出した指５０の位置に対して等間隔で代表サムネイル画像１２Ａ、１２Ａ−４、１２Ａ−３、１２Ａ−２、１２Ａ−１を三次元的に立体に見えるように表示するのが望ましい。図６（ｂ）では、指５０の位置（ＸＹ座標）までドラマＡグループの代表サムネイル画像１２Ａを移動させ、それに関連する代表サムネイル画像１２Ａ−４、１２Ａ−３、１２Ａ−２、１２Ａ−１を等間隔で三次元的に立体に見えるように表示したものである。なお、図６（ｂ）の例では５つの代表サムネイル画像１２を表示しているが、代表サムネイル画像１２の数はそれ以外の数であっても構わないし、選択されたグループの代表サムネイル画像に関連する動画コンテンツが大量に存在する場合、その中から優先度の高い数個の動画コンテンツ（例えば新しい順）に関連する代表サムネイル画像１２を選んで表示してもよい。また、図６（ｂ）の状態では、ドラマＢ、ニュースＣ、朝のドラマＤ、映画Ｅは既に選択の対象から外れているのでグレーアウト等の処理を施すことが望ましい。これによって、等間隔で三次元的に立体に見えるように表示した代表サムネイル画像１２Ａ、１２Ａ−４、１２Ａ−３、１２Ａ−２、１２Ａ−１がより見やすくなる。
【００４１】
なお、図６（ａ）において、関連する動画コンテンツが５つ存在するドラマＡグループについて、３つの代表サムネイル画像１２を少しずつずらせた状態で重ねて表示したが、これも図面作成の便宜のためである。ドラマＡグループについて、５つの代表サムネイル画像１２を少しずつずらせた状態で重ねて表示してもよい。また、関連する動画コンテンツが複数存在するということを知らしめるのみであれば、図６（ａ）、（ｂ）のように代表サムネイル画像１２を少しずつずらせた状態で重ねて表示する数と代表サムネイル画像１２を等間隔で三次元的に立体に見えるように表示する数とが一致しなくても構わない。
【００４２】
なお、指５０が第１検出領域１５から第２検出領域１６に移動した後、指５０が第２検出領域１６内を移動すると、Ｓ２４では選択されたドラマＡグループの代表サムネイル画像１２Ａに関連する動画コンテンツに関する複数の代表サムネイル画像１２を指５０の移動軌跡に追従させて、三次元的に立体に見えるように表示するとしたが、必ずしも、指５０が第１検出領域１５から第２検出領域１６に移動した後、指５０が第２検出領域１６内を移動した場合に限定するものではない。要するに、代表サムネイル画像１２が選択され、選択された代表サムネイル画像１２に紐付けされた関連する動画コンテンツが複数存在することが判断された後、代表サムネイル画像１２に関連する動画コンテンツに関する複数の代表サムネイル画像１２を指５０の移動軌跡に追従させて、三次元的に立体に見えるように表示すればよい。このとき、指５０は第1検出領域１５内を移動してもよいし、第1検出領域１５と第２検出領域１６を行き来しながら移動してもよい。
【００４３】
次に、Ｓ２５において、指５０が第２検出領域１６から検出外領域１７に移動したことを検出した場合（Ｓ２５にてＹｅｓ）、いずれの動画コンテンツも選択されなかったと判断し、Ｓ２６にて三次元的に立体に見えるように表示した代表サムネイル画像１２Ａ、１２Ａ−４、１２Ａ−３、１２Ａ−２、１２Ａ−１を元の位置に戻す。すなわち、図６（ｂ）に示すように三次元的に立体に見えるように表示した代表サムネイル画像１２Ａ、１２Ａ−４、１２Ａ−３、１２Ａ−２、１２Ａ−１を図６（ａ）のドラマＡグループの代表サムネイル画像１２Ａの位置に戻すことになる。このとき、図６（ｂ）から図６（ａ）への変化を図６（ａ）から図６（ｂ）への変化の逆順に高速アニメーションで戻していくと、さらによい。
【００４４】
Ｓ２７では、指５０が第２検出領域１６から検出外領域１７に移動することもなく（Ｓ２５にてＮｏ）、指５０の位置が前回検出した位置と変わらなかった場合、あるいは一定の閾値範囲内の変化であった場合（Ｓ２７にてＹｅｓ）、Ｓ２８にて代表サムネイル画像１２Ａ、１２Ａ−４、１２Ａ−３、１２Ａ−２、１２Ａ−１の並び順を変更する。図７（ａ）および図７（ｂ）は代表サムネイル画像１２Ａ、１２Ａ−４、１２Ａ−３、１２Ａ−２、１２Ａ−１の並び順を変更した例であり、図６（ｂ）から図７（ａ）への変更例では、指５０の位置にあったドラマＡグループの代表サムネイル画像１２Ａを指５０から最も離れた位置に戻し、ドラマＡの代表サムネイル画像１２Ａの次に指５０に近かった代表サムネイル画像１２Ａ−４を指５０の位置に移動している。さらに一定の時間が経過した際、同じルールにて図７（ａ）から図７（ｂ）へ代表サムネイル画像１２Ａ、１２Ａ−４、１２Ａ−３、１２Ａ−２、１２Ａ−１の並び順を変更している。すなわち、一定の時間が経過するごとに指５０の位置にある代表サムネイル画像１２は、代表サムネイル画像１２Ａ、１２Ａ−４、１２Ａ−３、１２Ａ−２、１２Ａ−１、再び１２Ａ、１２Ａ−４、１２Ａ−３、１２Ａ−２、１２Ａ−１、・・・のように変更される。
【００４５】
Ｓ２９では、指５０付近の検出面積が増加したか否かを判断する。指５０付近の検出面積が増加していた場合（Ｓ２９にてＹｅｓ）、Ｓ３０にて、その際、指５０の位置に表示されている代表サムネイル画像１２に関連する動画コンテンツが選択されたことになり、例えば、その動画コンテンツの再生を開始したり、削除やコピーなど、その動画コンテンツを操作するためのメニューを表示したりする。図８の例は、指５０の位置にもう一本の指５０−２を添えたとき、指５０付近の検出面積が増加し、代表サムネイル画像１２Ａ−３が選択されたことを示している。なお、Ｓ２９のように指５０付近の検出面積が増加したか否かを判断する代わりに、指５０の位置（ＸＹ座標）に大きな変化がなく、指５０のＺ座標に変化が生じたことを検出した場合に指５０の位置に表示されている代表サムネイル画像１２に関連する動画コンテンツが選択されたとしても構わない。例えば、指５０の位置（ＸＹ座標）に大きな変化がなく、指５０のＺ座標が小さくなった、すなわち指５０が表示部１１に近づく向きに移動したときに指５０の位置に表示されている代表サムネイル画像１２に関連する動画コンテンツが選択されたとする。同様に、指５０の位置（ＸＹ座標）に大きな変化がなく、指５０が第２検出領域１６から第１検出領域１５に入ったときに指５０の位置に表示されている代表サムネイル画像１２に関連する動画コンテンツが選択されたとしてもよい。指５０を表示部１１に近づく向きに移動させる動作は、指５０の位置に表示されている代表サムネイル画像１２に関連する動画コンテンツを選択するための動作として自然なものである。指５０の位置に表示されている代表サムネイル画像１２に関連する動画コンテンツを選択するための指５０の動作は、指５０の位置にもう一本の指５０−２を添えたり、指５０を表示部１１に近づく向きに移動させたりする他にも様々な動作が考えられる。
【００４６】
なお、上記の過程は一例としてコンピュータによって実現可能であり、例えば図９に示すような情報端末の構成として実現できる。
【００４７】
図９に示す情報端末では、出力デバイス４１と、入力デバイス４２と、映像処理部４３と、ＣＰＵ処理部４４と、メモリ４５が設けられている。入力デバイス４２として上記非接触検出デバイス１４が用いられるが、更に、電源スイッチや、タッチセンサ、キー、トラックボールなどの接触入力部が設けられていてもよい。出力デバイス４１として上記表示部１１が用いられており、映像を立体的に表示するための上記立体視認部１３も設けられている。更に、ボリューム変更やイコイライザ設定などを行って音声を出力する音声出力部４１１が設けられている。この音声出力部４１１としては、ＤＡＣやアンプと、スピーカー、ヘッドフォンなどが挙げられる。処理部４３には、圧縮された音声、映像データをデコードするためのデコード部４３１と、代表サムネイル画像の表示・移動、及びデコードされた映像の回転・拡大・縮小等を行う描画処理部４３２が設けられており、上記立体視認部１３は、描画処理部４３２によって制御される。ＣＰＵ処理部４４には、関連するコンテンツ一覧および代表となるサムネイル画像を決定する一覧抽出部４４１、選択判定部４４２、及びタイマー処理部４４３が設けられている。選択判定部４４２は、指５０の位置に表示された代表サムネイル画像に関連するコンテンツが選択されたか否かを判定する。タイマー処理部４４３は、代表サムネイル画像を指５０の移動軌跡に追従させて、三次元的に立体に見えるように表示する場合に一定の時間周期で代表サムネイル画像の並び順を変更するときなどに利用される。メモリ４５は、揮発領域と不揮発領域を含み、具体的に、ＤＲＡＭ（Dynamic Random Access Memory）などの揮発性メモリ、フラッシュメモリなどの不揮発性メモリやハードディスク装置などで構成されている。メモリ４５には、動画や音楽を再生するための複数のアプリケーション４５１や、動画や音楽、写真などのコンテンツ４５２及びそれらの代表サムネイル画像１２、サムネイル画像、アイコンなどが記録されている。ここで、代表サムネイル画像は一例として動画コンテンツを構成する１つの静止画の縮小画像をいい、サムネイル画像は一例として写真コンテンツのような静止画の縮小画像をいい、アイコンとは一例として音楽コンテンツにおけるＣＤジャケットなどの縮小画像や、アプリケーションを起動するためのショートカットアイコン等をいう。
【００４８】
（実施の形態２）
次に、本発明にかかる実施の形態２における情報端末について説明する。
【００４９】
本実施の形態２の情報端末は、実施の形態１と基本的な構成は同じであるが、サムネイル画像（代表サムネイル画像、サムネイル画像、アイコンなどを含む。）の再描画方法及びコンテンツの選択方法が異なっている。そのため、本相違点を中心に説明する。なお、実施の形態１と同様の構成については同一の符号が付されている。
【００５０】
図１０は、本実施の形態２の情報端末１０の制御を示すフロー図である。Ｓ２０からＳ２４までは実施の形態１における図５のフロー図と同様である。
【００５１】
Ｓ２５において、指５０が第２検出領域１６から検出外領域１７に移動したことを検出した場合（Ｓ２５にてＹｅｓ）、Ｓ３１において、サムネイル画像の描画位置を固定したと判断し、以降のサムネイル画像の再描画は行わない。このとき、図８のように、代表サムネイル画像１２Ａ−３は指５０の位置（ＸＹ座標）まで移動されて固定され、それに関連する別の代表サムネイル画像１２Ａ−２、１２Ａ−１、１２Ａ、１２Ａ−４は等間隔で三次元的に立体に見えるように表示され固定されているとする。
【００５２】
Ｓ３２において、指５０が検出外領域１７から再び第２検出領域１６に入ったことを検出すると（Ｓ３２にてＹｅｓ）、Ｓ３３において、指５０が検出外領域１７から再び第２検出領域１６に入ったときの指５０の位置（ＸＹ座標）がいずれかのサムネイル画像の位置と一致したか否かを確認する。指５０の位置（ＸＹ座標）がいずれかのサムネイル画像の位置と一致したと判断した場合（Ｓ３３にてＹｅｓ）は、Ｓ３４において、指５０の位置（ＸＹ座標）と一致した位置にあるサムネイル画像に関連するコンテンツが選択されたことになり、例えば、そのコンテンツの再生を開始したり、削除やコピーなど、そのコンテンツを操作するためのメニューを表示したりする。
【００５３】
なお、情報端末１０の傾きを検出する傾きセンサーを新たに設けることで、Ｓ３１においてサムネイル画像の描画位置を固体した後でも、例えば、傾きを検出した方向にサムネイル画像の間隔を拡げて再描画したり、サムネイル画像の並び順を変更したりすることができる。傾きセンサーとしては、例えば、加速度センサーによってＸ、Ｙ軸の傾斜角度を検出可能なものと、地磁気センサーによってＺ軸の回転角度を検出可能なものと、ジャイロによってＸ、Ｙ、Ｚ軸の回転速度を検出可能なものを組み合わせたもののように、実際の動きに近く、精度の高い傾き検出が可能であることが望ましい。
【００５４】
なお、実施の形態２の情報端末１０では、指５０が検出外領域１７から再び第２検出領域１６に入ったときの指５０の位置（ＸＹ座標）と一致する位置のサムネイル画像に関連するコンテンツが選択されたと判断するが、指５０のＺ軸方向の位置も含めて判断してもよい。図１１の例は、本実施の形態２の情報端末１０の表示部１１と立体視認部１３と非接触入力部１４の側面を模式的に示した図である。図１１におけるサムネイル画像の並び順は図８におけるサムネイル画像の並び順と同じである。指のＺ軸方向の位置が５０’であった場合、サムネイル画像１２Ａ−２が選択されたと判断する。また、指のＺ軸方向の位置が５０’’であった場合、サムネイル画像１２Ａ−３が選択されたと判断する。なお、サムネイル画像１２Ａ、サムネイル画像１２Ａ−１、サムネイル画像１２Ａ−２、サムネイル画像１２Ａ−３が表示部１１よりも上部に示されているのは、立体視認部１３によって擬似的に浮かんで見えるだけであり、実際の描画は、それぞれ表示部１１の、サムネイル画像１２Ａ−Ｒ、サムネイル画像１２Ａ−１Ｒ、サムネイル画像１２Ａ−２Ｒ、サムネイル画像１２Ａ−３Ｒの位置にされる。また、サムネイル画像１２Ａ−４Ｒは表示部１１上にあるように表示されている。すなわち、サムネイル画像１２Ａ−４Ｒは擬似的に浮かんで見えるように表示されていない。なお、図１１の例では指のＺ軸方向の位置と擬似的に浮かんで見えるサムネイル画像１２Ａ−２、サムネイル画像１２Ａ−３の擬似的なＺ軸方向の位置とが完全に一致しているが、指の位置（ＸＹ座標）とサムネイル画像の位置（ＸＹ座標）の一致だけで選択されたと判断しても構わない。
【００５５】
なお、上記実施の形態１、２の情報端末１０において、現在の機能が音楽再生機能である場合には、表示部１１に表示されるサムネイル画像１２の代わりに、音楽コンテンツに関するアイコンが表示される。この場合、アイコンとしては、ＣＤジャケットの縮小画面やアーティストの写真などを利用することができる。また、関連するコンテンツ一覧の抽出方法としては、例えばアーティスト別、年代別、プレイリスト別などが挙げられる。
【００５６】
また、上記実施の形態１、２の情報端末１０において、現在の機能がホーム画面である場合には、表示部１１に表示されるサムネイル画像１２の代わりに、アプリケーションを起動するためのショートカットアイコンが表示される。また、関連するアプリケーション一覧の抽出方法としては、ゲームや仕事などのジャンル別などが挙げられる。
【００５７】
また、上記実施の形態１、２の情報端末１０において、現在の機能が写真表示機能である場合には、表示部１１に表示されるサムネイル画像１２は写真を縮小したサムネイル画像である。また、関連する写真一覧の抽出方法としては、人物別、撮影日時別、撮影場所別などが挙げられる。
【００５８】
また、本発明の指示物の一例は、上記実施の形態１、２では、指５０に相当するが、これに限らずスタイラスなどのポインティングデバイスであってもよい。
【００５９】
なお、以上説明したように、本発明の構成は、ソフトウェア的に実現してもよいし、ハードウェア的に実現してもよい。
【００６０】
（その他の実施の形態）
実施の形態１、２の情報端末１０は表示部１１の上側に配置された立体視認させるための立体視認部１３および非接触検出デバイス１４を備えていた。しかし、本発明はさらに簡易な情報端末においても実施することができる。
【００６１】
本発明は表示部の上側に立体視認部および非接触検出デバイスを備えない情報端末においても実施することができる。このとき、実施の形態１、２の指示物である指５０に相当するのは表示部に表示されるカーソルである。カーソルは情報端末に設けられた四方向キーやトラックボールなどによって表示部内を自由に移動することができる。
【００６２】
カーソルの位置にあるグループの代表サムネイル画像が選択されるものとする。あるいは、カーソルをグループの代表サムネイル画像の位置に移動させた後、特定のボタン等を押すことによってカーソルの位置にあるグループの代表サムネイル画像が選択されるものとする。
【００６３】
次に、選択されたグループの代表サムネイル画像に紐付けされた関連するコンテンツが複数存在するか否かを判断する。選択されたグループの代表サムネイル画像に紐付けされた関連するコンテンツが１つしか存在しない場合は、そのコンテンツが選択されたことになる。選択されたグループの代表サムネイル画像に紐付けされた関連するコンテンツが複数存在する場合は、その後、カーソルが表示部内を移動したか否かを判断する。カーソルが表示部内を移動したときは、選択されたグループの代表サムネイル画像に紐付けされた複数の関連するコンテンツの代表サムネイル画像をカーソルの移動軌跡に追従させて表示部に表示させる。以後は、適当な方法によってカーソルの移動軌跡に追従させて表示部に表示された複数の関連するコンテンツの代表サムネイル画像のいずれかを選択する。
【００６４】
なお、情報端末は表示部の上にタッチパネルを備えていても良い。情報端末が表示部の上にタッチパネルを備えている場合、四方向キーやトラックボール等によってカーソルを移動させるのではなく、タッチパネルに触れることによってカーソルを移動させることができる。
【００６５】
なお、本発明は表示部の上側に立体視認部を備えるが非接触検出デバイスを備えない情報端末においても実施することができる。その場合、カーソルが表示部内を移動したときは、選択されたグループの代表サムネイル画像に紐付けされた複数の関連するコンテンツの代表サムネイル画像をカーソルの移動軌跡に追従させてカーソルの移動軌跡の上部に立体的に表示させる。
【産業上の利用可能性】
【００６６】
本発明の情報端末及び画面部品選択方法によれば、所望の画面部品を見付けやすく、所望のコンテンツを選択しやすいという効果を有し、スマートフォン、ＰＤＡなどの情報端末及びその画面部品選択方法として有用である。
【符号の説明】
【００６７】
１０  情報端末
１１  表示部
１２  サムネイル画像
１２Ａ  サムネイル画像
１２Ａ−１  サムネイル画像
１２Ａ−２  サムネイル画像
１２Ａ−３  サムネイル画像
１２Ａ−４  サムネイル画像
１２Ａ−Ｒ  サムネイル画像（実像）
１２Ａ−１Ｒ  サムネイル画像（実像）
１２Ａ−２Ｒ  サムネイル画像（実像）
１２Ａ−３Ｒ  サムネイル画像（実像）
１２Ａ−４Ｒ  サムネイル画像（実像）
１３  立体視認部
１４  非接触検出デバイス
１５  第１検出領域
１６  第２検出領域
１７  検出外領域
４１  出力デバイス
４１１  音声出力部
４２  入力デバイス
４３  映像処理部
４３１  デコード部
４３２  描画処理部
４４  ＣＰＵ処理部
４４１  一覧抽出部
４４２  選択判定部
４４３  タイマー処理部
４５  メモリ
４５１  アプリケーション
４５２  コンテンツ
５０  指
５０’  指
５０’’  指
【図１】
2012155506.tif 000003
【図２】
2012155506.tif 000004
【図３】
2012155506.tif 000005
【図４】
2012155506.tif 000006
【図５】
2012155506.tif 000007
【図６】
2012155506.tif 000008
【図７】
2012155506.tif 000009
【図８】
2012155506.tif 000010
【図９】
2012155506.tif 000011
【図１０】
2012155506.tif 000012
【図１１】
2012155506.tif 000013
【図１２】
2012155506.tif 000014