(57)【要約】【課題】位置情報に基づいて多様な形態で情報を表現する携帯端末機におけるコンテンツ表示装置及び方法を提供する。【解決手段】携帯端末機におけるコンテンツ表示方法は、コンテンツの生成時に位置感知部からコンテンツが生成される緯度、経度、及び高度の３次元位置情報を取得してコンテンツと共にコンテンツ格納部に格納するステップと、コンテンツの表示時にコンテンツの表示領域を設定し、格納されたコンテンツの位置情報を分析して表示領域内に位置するコンテンツを選択し、選択されたコンテンツを表示領域の対応する位置に３次元表示するステップと、を有する。【選択図】図７
2013120606.tif 000002
【特許請求の範囲】
【請求項１】
携帯端末機におけるコンテンツ表示装置であって、
前記端末機の緯度、経度、及び高度の３次元位置情報を感知する位置感知部を有する感知部と、
コンテンツを格納するコンテンツ格納部と、
生成されたコンテンツを前記位置情報と共に前記コンテンツ格納部に格納し、コンテンツの表示時にコンテンツ表示領域を設定し、前記格納されたコンテンツの位置情報を分析して前記表示領域内に位置するコンテンツを３次元表示されるように制御する制御部と、
前記制御部の制御によって設定領域の対応する位置にコンテンツを表示する表示部と、を備えることを特徴とするコンテンツ表示装置。
【請求項２】
前記制御部は、前記コンテンツの生成時に前記位置感知部から前記コンテンツが生成される３次元位置情報を取得して前記コンテンツと共に前記コンテンツ格納部に格納することを特徴とする請求項１に記載のコンテンツ表示装置。
【請求項３】
３次元マップを格納するマップ格納部を更に備え、
前記制御部は、
マップ表示モード時に前記マップ格納部から選択されたマップを前記表示部に表示し、ユーザによって指定された表示領域を設定する表示領域決定部と、
前記コンテンツ格納部に格納されたコンテンツの３次元位置情報を分析して前記表示領域内に位置するコンテンツを選択するコンテンツ選択部と、
前記選択されたコンテンツを前記表示部に３次元表示する表示制御部と、を含むことを特徴とする請求項２に記載のコンテンツ表示装置。
【請求項４】
カメラを更に備え、
前記感知部は、カメラの撮影方位を感知する方位感知部と、カメラの画角を感知する画角感知部と、端末機の勾配角度を検出する角度検出部と、を更に備え、
前記制御部は、
前記コンテンツの生成時に前記位置感知部から前記コンテンツが生成される前記３次元位置情報を取得して前記コンテンツと共に前記コンテンツ格納部に格納し、
前記コンテンツの表示時に前記端末機の３次元位置情報、前記カメラの撮影方位情報、前記カメラの画角情報、及び前記端末機の勾配角度情報を分析して前記カメラで撮影される表示領域を設定し、前記格納されたコンテンツの３次元位置情報を分析して前記表示領域内に位置するコンテンツを３次元表示されるように制御することを特徴とする請求項１に記載のコンテンツ表示装置。
【請求項５】
前記制御部は、
前記カメラを駆動し、前記感知部から取得した前記端末機の緯度、経度、及び高度の３次元位置情報、前記カメラの撮影方位情報、前記カメラの画角情報、及び前記端末機の勾配角度情報を分析して前記カメラで撮影される表示領域を決定する表示領域決定部と、
前記コンテンツ格納部に格納されたコンテンツの３次元位置情報を分析して前記表示領域内で予め設定された表示距離内に位置するコンテンツを選択するコンテンツ選択部と、
前記選択されたコンテンツを前記表示部に３次元表示する表示制御部と、を含むことを特徴とする請求項４に記載のコンテンツ表示装置。
【請求項６】
前記位置感知部は、緯度及び経度を感知するＧＰＳ受信部と高度を感知する高度センサとで構成され、前記方位感知部は、地磁気センサであり、前記角度検出部は、加速度センサ及びジャイロセンサの少なくともいずれかであることを特徴とする請求項５に記載のコンテンツ表示装置。
【請求項７】
基地局及びインターネット網の少なくともいずれかと連結される通信部と、文字データを発生する入力部と、を更に備え、
前記コンテンツは、カメラで撮影される写真、前記通信部を通じてダウンロードされるデータ、入力部を通じて作成されるデータの少なくともいずれかであることを特徴とする請求項６に記載のコンテンツ表示装置。
【請求項８】
携帯端末機におけるコンテンツ表示方法であって、
コンテンツの生成時に位置感知部から前記コンテンツが生成される緯度、経度、及び高度の３次元位置情報を取得して前記コンテンツと共にコンテンツ格納部に格納するステップと、
コンテンツの表示時にコンテンツの表示領域を設定し、前記格納されたコンテンツの位置情報を分析して前記表示領域内に位置するコンテンツを選択し、前記選択されたコンテンツを前記表示領域の対応する位置に３次元表示するステップと、を有することを特徴とするコンテンツ表示方法。
【請求項９】
前記コンテンツを表示するステップは、
マップ表示モード時に３次元マップを格納するマップ格納部から選択されたマップを表示部に表示し、ユーザによって指定された表示領域を設定するステップと、
前記コンテンツ格納部に格納されたコンテンツの３次元位置情報を分析して前記表示領域内に位置するコンテンツを選択するステップと、
前記選択されたコンテンツを前記表示部に３次元表示するステップと、を含むことを特徴とする請求項８に記載のコンテンツ表示方法。
【請求項１０】
前記コンテンツは、カメラで撮影される写真、通信部を通じてダウンロードされるデータ、入力部を通じて作成される文字情報、及びマルチメディア情報の少なくともいずれかであることを特徴とする請求項９に記載のコンテンツ表示方法。
【請求項１１】
ＡＲ（拡張現実）表示モード時にカメラを駆動し、前記端末機の３次元位置情報、前記カメラの撮影方位情報、前記カメラの画角情報、及び前記端末機の勾配角度情報を分析して前記カメラで撮影される表示領域を設定し、前記格納されたコンテンツの３次元位置情報を分析して前記表示領域で予め設定された表示距離内に位置するコンテンツを３次元表示するステップを更に備えることを特徴とする請求項８に記載のコンテンツ表示方法。
【請求項１２】
前記コンテンツを表示するステップは、
前記カメラを駆動し、前記感知部から取得した前記端末機の緯度、経度、及び高度の位置情報、前記カメラの撮影方位情報、前記カメラの画角情報、及び前記端末機の勾配角度情報を分析して前記カメラで撮影される表示領域を決定するステップと、
前記コンテンツ格納部に格納されたコンテンツの３次元位置情報を分析して前記表示領域内で予め設定された表示距離内に位置するコンテンツを選択するステップと、
前記選択されたコンテンツを前記表示部に３次元表示するステップと、を含むことを特徴とする請求項１１に記載のコンテンツ表示方法。
【請求項１３】
前記位置感知部は、ＧＰＳ受信部を通じて緯度及び経度を感知し、高度センサを通じて高度を感知し、前記カメラの撮影方位は、地磁気センサを通じて感知し、前記端末機の勾配角度は、加速度センサ及びジャイロセンサの少なくともいずれかを通じて感知することを特徴とする請求項１２に記載のコンテンツ表示方法。
【請求項１４】
前記コンテンツは、カメラで撮影される写真、前記通信部を通じてダウンロードされるデータ、入力部を通じて作成されるデータの少なくともいずれかであることを特徴とする請求項１３に記載のコンテンツ表示方法。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、携帯端末機のコンテンツ表示装置及び方法に関し、より詳細には、コンテンツの生成環境に基づいてコンテンツを３次元的に表示する装置及び方法に関する。
【背景技術】
【０００２】
現在、携帯端末機は、高性能のカメラ、高速の通信部、高解像度の表示部を備え、多様な形態の通信及びマルチメディアサービスを行うことができる。携帯端末機は、多様なコンテンツ（ｃｏｎｔｅｎｔｓ）を外部から受信するか、又は内部で生成することができ、このようなコンテンツに付加的な情報を追加してコンテンツを多様な形態で処理することができる。
【０００３】
しかし、携帯端末機において、コンテンツに付加した情報を確認しようとする場合、コンテンツを個別に確認しなければならない不便さがあった。例えば、写真を撮影する場合、撮影された写真を格納する際に、写真を撮影した位置などの情報を取得して一緒に格納する。このため、写真の撮影位置を確認しようとする場合、該当する写真を選択し、撮影された位置を確認しなければならなかった。即ち、特定地域又は特定位置で生成されたコンテンツを統合して確認する方法がなかった。
【発明の概要】
【発明が解決しようとする課題】
【０００４】
本発明は、上記従来の問題点に鑑みてなされたものであって、本発明の目的は、携帯端末機においてコンテンツ（ｃｏｎｔｅｎｔｓ、ｉｔｅｍ）を生成する時にコンテンツの位置情報を一緒に取得して格納し、コンテンツを表示する際に位置情報に基づいてコンテンツが生成された位置を多様な方法で表現する装置及び方法を提供することにある。
【０００５】
このため、本発明は、コンテンツの生成時に端末に搭載されている多様なセンサを組み合わせてコンテンツが生成される位置情報を格納し、当該コンテンツを表現する際に、多様なセンサ又は地図と該当するコンテンツと共に格納された位置情報とを組み合わせて多様な形態でコンテンツを表現（ｃｏｎｔｅｎｔｓ  ｖｉｅｗｅｒ）する装置及び方法を提案する。
【０００６】
本発明の実施形態では、コンテンツの生成時に、緯度、経度及び、高度を含む位置情報を取得してコンテンツと共に格納する。コンテンツの表示の際に、本発明の実施形態による携帯端末機は、マップ上で表示領域が設定されると、設定された領域内に位置するコンデンツを選択し、選択されたコンテンツを高度に基づいてマップ表示領域に表示する。また、本発明の実施形態では、コンテンツの表示の際に、現在の端末機の位置、カメラの撮影方位、カメラの画角、端末機の勾配角度などに基づいて表示領域を設定し、設定された表示領域内に位置するコンテンツを選択してカメラで撮影される画面の当該位置に表示する。
【課題を解決するための手段】
【０００７】
上記目的を達成するためになされた本発明の携帯端末機におけるコンテンツ表示装置は、前記端末機の緯度、経度、及び高度の３次元位置情報を感知する位置感知部を有する感知部と、コンテンツを格納するコンテンツ格納部と、生成されたコンテンツを前記位置情報と共に前記コンテンツ格納部に格納し、コンテンツの表示時にコンテンツ表示領域を設定し、前記格納されたコンテンツの位置情報を分析して前記表示領域内に位置するコンテンツを３次元表示されるように制御する制御部と、前記制御部の制御によって設定領域の対応する位置にコンテンツを表示する表示部と、を備えることを特徴とする。
【０００８】
前記制御部は、前記コンテンツの生成時に前記位置感知部から前記コンテンツが生成される３次元位置情報を取得して前記コンテンツと共に前記コンテンツ格納部に格納し得る。
前記コンテンツ表示装置は、３次元マップを格納するマップ格納部を更に備えることができ、前記制御部は、マップ表示モード時に前記マップ格納部から選択されたマップを表示部に表示し、ユーザによって指定された表示領域を設定する表示領域決定部と、前記コンテンツ格納部に格納されたコンテンツの３次元位置情報を分析して前記表示領域内に位置するコンテンツを選択するコンテンツ選択部と、前記選択されたコンテンツを前記表示部に３次元表示する表示制御部と、を含み得る。
前記コンテンツ表示装置は、カメラを更に備えることができ、前記感知部は、カメラの撮影方位を感知する方位感知部と、カメラの画角を感知する画角感知部と、端末機の勾配角度を検出する角度検出部と、を更に備え、前記制御部は、前記コンテンツの生成時に前記位置感知部から前記コンテンツが生成される前記３次元位置情報を取得して前記コンテンツと共に前記コンテンツ格納部に格納し、前記コンテンツの表示時に前記端末機の３次元位置情報、前記カメラの撮影方位情報、前記カメラの画角情報、及び前記端末機の勾配角度情報を分析して前記カメラで撮影される表示領域を設定し、前記格納されたコンテンツの３次元位置情報を分析して前記表示領域内で予め設定された表示距離内に位置するコンテンツを３次元表示されるように制御し得る。
前記制御部は、前記カメラを駆動し、前記感知部から取得した前記端末機の緯度、経度、及び高度の３次元位置情報、前記カメラの撮影方位情報、前記カメラの画角情報、及び前記端末機の勾配角度情報を分析して前記カメラで撮影される表示領域を決定する表示領域決定部と、前記コンテンツ格納部に格納されたコンテンツの３次元位置情報を分析して前記表示領域内で予め設定された表示距離内に位置するコンテンツを選択するコンテンツ選択部と、前記選択されたコンテンツを前記表示部に３次元表示する表示制御部と、を含み得る。
前記位置感知部は、緯度及び経度を感知するＧＰＳ受信部と高度を感知する高度センサとで構成され、前記方位感知部は、地磁気センサであり、前記角度検出部は、加速度センサ及びジャイロセンサの少なくともいずれかであり得る。
前記コンテンツ表示装置は、基地局及びインターネット網の少なくともいずれかと連結される通信部と、文字データを発生する入力部と、を更に備えることができ、前記コンテンツは、カメラで撮影される写真、前記通信部を通じてダウンロードされるデータ、入力部を通じて作成されるデータの少なくともいずれかであり得る。
【０００９】
上記目的を達成するためになされた本発明の携帯端末機におけるコンテンツ表示方法は、コンテンツの生成時に位置感知部から前記コンテンツが生成される緯度、経度、及び高度の３次元位置情報を取得して前記コンテンツと共に前記コンテンツ格納部に格納するステップと、コンテンツの表示時にコンテンツの表示領域を設定し、前記格納されたコンテンツの位置情報を分析して前記表示領域内に位置するコンテンツを選択し、前記選択されたコンテンツを前記表示領域の対応する位置に３次元表示するステップと、を有することを特徴とする。
【発明の効果】
【００１０】
本発明によれば、携帯端末機においてコンテンツ（ｃｏｎｔｅｎｔｓ、ｉｔｅｍ）を生成する時にコンテンツの位置情報を一緒に取得して格納することで、コンテンツを表示する際に位置情報に基づいてコンテンツが生成された位置を多様な方法で表現することができる利点がある。また、コンテンツの生成時に端末機に搭載されている多様なセンサを組み合わせることで、コンテンツが生成される位置情報を格納して当該コンテンツを表現する際に多様なセンサ又は地図と該当するコンテンツと共に格納された位置情報とを組み合わせて多様な形態でコンテンツを３次元マップ又はＡＲ表示機能によりカメラで撮影される映像にコンテンツを３次元的に表現することができる。
【図面の簡単な説明】
【００１１】
【図１】本発明の一実施形態による携帯端末機の構成を示す図である。
【図２】本発明の一実施形態による携帯端末機におけるコンテンツを生成する構成を示す図である。
【図３】本発明の一実施形態による携帯端末機において生成されるコンテンツの位置情報を取得する方法を説明する図である。
【図４】本発明の一実施形態による携帯端末機において位置情報を有するコンテンツを、マップを通じて表示する構成を示す図である。
【図５】３Ｄマップ及び３Ｄマップに位置情報を有するコンテンツを表示する一例を示す図面である。
【図６】同一の位置情報を有するコンテンツを表示する一例を示す図である。
【図７】本発明の一実施形態による携帯端末機において位置情報を有するコンテンツをＡＲ表示モードで表示する構成を示す図である。
【図８】携帯端末機において位置情報を有するコンテンツをＡＲ表示機能で表示する一例を示す図である。
【図９】携帯端末機において位置情報を有するコンテンツをＡＲ表示機能で表示する一例を示す図である。
【図１０】携帯端末機において位置情報を有するコンテンツをＡＲ表示機能で表示する一例を示す図である。
【図１１】本発明の一実施形態により位置情報を有するコンテンツを生成してこれを表示する方法を示す流れ図である。
【図１２】本発明の一実施形態による携帯端末機において位置情報を有するコンテンツを表示する手続きを説明する流れ図である。
【図１３】本発明の一実施形態によるコンテンツの種類を説明する図である。
【図１４】図１３のコンテンツの生成時のメモ情報を表示する一例を示す図である。
【発明を実施するための形態】
【００１２】
以下、本発明を実施するための形態の具体例を、図面を参照しながら詳細に説明する。図面において、同一の構成は、できるだけ同一の符号で示している。
【００１３】
本発明は、携帯端末機において、コンテンツの生成時に、コンテンツが生成される位置情報（緯度、経度、及び／又は高度情報など）を取得してコンテンツと共に格納する。この際、生成されるコンテンツは、カメラで撮影される動画及び／又はイメージ、ユーザによって作成される情報（ｍｅｍｏ、ｎｏｔｅなど）、音声情報（ｖｏｉｃｅ  ｒｅｃｏｒｄなど）、ダウンロードで取得される情報などである。
【００１４】
上記のように生成されるコンテンツを表示する際、３Ｄ（３次元）マップ又はＡＲ（Ａｕｇｍｅｎｔｅｄ  Ｒｅａｌｉｔｙ：拡張現実）表示機能を利用して表現する。前者の場合、携帯端末機は、表示されるマップ上でユーザによって表示領域が設定されると、格納しているコンテンツの位置情報を分析し、設定された領域内に位置するコンデンツを選択し、選択されたコンテンツを、高度に基づいて表示領域内のマップに表示する。ここで、マップは、３Ｄ（３次元）マップであり、その種類は、ｓｔｒｅｅｔ  ｖｉｅｗ、人工衛星ｖｉｅｗ、３Ｄ  ｖｉｅｗなどである。また、後者の場合、本発明の実施形態では、現在の端末機の位置、カメラの撮影方位、カメラの画角、端末機の勾配角度などに基づいてコンテンツが表示されるべき表示領域を設定し、格納しているコンテンツの位置情報を分析して、設定された表示領域内に位置するコンテンツを選択した後、選択されたコンテンツをカメラで撮影される画面の当該位置に表示する。ここで、端末機の位置、カメラの撮影方位、及び端末機の勾配角度などの情報は、携帯端末機が備えているセンサを利用して取得することができる。
【００１５】
従って、本発明の実施形態による携帯端末機は、コンテンツ（Ｃａｍｅｒａ、Ｎｏｔｅ、ｍｅｍｏ、ｖｏｉｃｅ  ｒｅｃｏｒｄなど）を生成することができるアプリケーションと、コンテンツの生成位置情報を取得するための感知部（緯度、経度、高度などの感知部）と、コンテンツを表示するための表示領域を決定するための情報を取得する感知部（勾配、位置、方位など）、及び／又はマップなどを備える。
【００１６】
以下の説明において、３次元位置情報という用語は、緯度、経度、及び高度情報を意味し、３次元表示という用語は、表示領域にコンテンツが生成された位置を表示する際に、緯度、経度、及び高度情報に基づいて表示することを意味するものとして説明する。また、表示領域という用語は、３次元表示モードでユーザによって設定されて表示部に表示される３次元マップを意味し、また、ＡＲ表示モード時にカメラで撮影されて表示部に表示されるイメージを意味する。ＡＲ表示という用語は、３次元位置情報を有するコンテンツを表示する際、カメラで撮影されるイメージにコンテンツを３次元的に表示する意味として使用する。
【００１７】
図１は、本発明の一実施形態による携帯端末機の構成を示す図である。
【００１８】
図１を参照すると、感知部１３０は、本実施形態によってコンテンツが生成される位置情報及びコンテンツ表現時に表示領域を設定するための情報を取得するする機能を行う。ＧＰＳ（Ｇｌｏｂａｌ  Ｐｏｓｉｔｉｏｎｉｎｇ  ｓｙｓｔｅｍ）受信部１３１は、端末機の位置情報を発生する。ここで、位置情報は、緯度及び経度情報である。高度センサ１３３は、端末機が位置する高さ（高度）情報を発生する。高度センサ１３３は、気圧を測定する圧力センサ、衛星信号（及び圧力）を利用するセンサ、レーダーなどを利用する方法を使用することができる。ここで、ＧＰＳ受信部１３１が端末機の高度を感知する場合、高度センサ１３３は、省略することができる。方位センサ１３５は、端末機が位置する方向を感知する。方位センサ１３５は、地磁気センサ（ｍａｇｎｅｔｉｃ  ｓｅｎｓｏｒ；ｃｏｍｐａｓｓ）及び／又はジャイロセンサ（ｇｙｒｏｓｃｏｐｅ）などで具現することができる。角度検出センサ１３７は、端末機の傾いた角度及び動き（回転）などを感知する。ここで、角度検出という用語は、ユーザが端末機を把持した状態で地表の水平面と端末機が成す角度及び端末機の動きを含む用語として使用する。勾配センサは、加速度センサ及び／又はジャイロセンサなどで具現することができる。
【００１９】
通信部１２０は、携帯端末機とそれぞれ対応する通信網を無線連結する機能を行う。ここで、通信網は、基地局通信網又はインターネット通信網などである。通信部１２０は、送信信号をＲＦ帯域に上昇変換する変換器（ｆｒｅｑｕｅｎｃｙ  ｕｐ  ｃｏｎｖｅｒｔｅｒ）と電力増幅器などで構成される送信部と、ＲＦ受信信号を低雑音増幅する増幅器とＲＦ信号を基底帯域に下降変換する変換器（ｆｒｅｑｕｅｎｃｙ  ｄｏｗｎ  ｃｏｎｖｅｒｔｅｒ）などを備える。また、通信部１２０は、送信信号を変調し、送信部に伝達する変調部及び受信部で出力された信号を復調する復調部を備える。変調・復調部は、通信方式によってＷＣＤＭＡ、ＣＤＭＡなどの３Ｇ、ＧＳＭ（登録商標）又はＬＴＥ方式の４Ｇ変調・復調部であり、また、変調・復調部は、ＷｉＦｉ、Ｗｉｂｒｏ、Ｗｉｍａｘなどの変調・復調部であり得る。
【００２０】
カメラ１４０は、外部映像を撮影する機能を行う。
【００２１】
表示部１５０は、制御部１００の制御下で表示データを表示する機能を行う。入力部１５５は、携帯端末機の動作を制御するための命令及び文字／数字などのデータを入力する機能を行う。ここで、入力部１５５及び表示部１５０は、一体化されたタッチスクリーン（Ｔｏｕｃｈ  Ｓｃｒｅｅｎ  Ｐａｎｅｌ）であり得る。
【００２２】
マップ格納部１１５は、本実施形態によって生成されたコンテンツを表現するための地図データを格納する。マップ格納部１１５に格納される地図データは、３Ｄ（３次元）形態のｓｔｒｅｅｔ  ｖｉｅｗ、人工衛星ｖｉｅｗ、３Ｄ  ｖｉｅｗであり得る。
【００２３】
制御部１００は、携帯端末機の全般的な動作を制御する。また、制御部１００は、本実施形態によってコンテンツを生成及び格納し、格納されたコンテンツを表示する機能を行う。
【００２４】
メモリ１１０は、携帯端末機の動作プログラム及び本実施形態によるプログラムを格納するプログラムメモリと、インストールデータ及びプログラム実行中に発生するデータを格納するデータメモリを備える。メモリ１１０は、制御部１００によってコンテンツが生成された位置情報と共に該当するコンテンツを格納するコンテンツ格納部を備える。ここで、メモリ１１０は、マップ格納部１１５を含む。
【００２５】
上述したように、携帯端末機において、制御部１００は、コンテンツの生成時にＧＰＳ受信部１３１及び高度センサ１３３を通じてコンテンツが生成された位置情報（緯度、経度、及び／又は高度情報など）を取得し、位置情報と共にコンテンツをメモリ１１０のコンテンツ格納部に格納されるように制御する。コンテンツは、カメラ１４０で撮影される動画及び静止画イメージと、通信部１２０を通じてダウンロードされるマルチメディア情報と、入力部１５５を通じて入力されるメモ及びノート情報と、図示しないマイクなどで入力される録音情報などである。コンテンツ格納部に格納されるコンテンツ情報には、当該コンテンツのサムネイル映像又はアイコンも一緒に格納される。
【００２６】
制御部１００は、格納されたコンテンツを、表示部１５０を通じて表示する際に、３Ｄマップ又はＡＲ（Ａｕｇｍｅｎｔｅｄ  Ｒｅａｌｉｔｙ：拡張現実）表示機能で表現されるように制御する。この際、コンテンツは、３Ｄマップ又はＡＲ表示機能で表現されるコンテンツの当該位置にサムネイルイメージ又はアイコンで表現される。
【００２７】
先ず、マップを利用する場合、制御部１００は、マップ格納部１１５から選択されたマップデータを表示部１５０に表示し、表示されたマップ上でユーザによって表示領域が設定されると、メモリ１１０のコンテンツ格納部に格納しているコンテンツの位置情報を分析し、設定された領域内に位置するコンテンツを選択し、選択されたコンテンツを高度に基づいて表示領域内のマップに表示する。
【００２８】
また、ＡＲ表示を利用する場合、制御部１００は、ＧＰＳ受信部１３１（及び／又は高度センサ１３３）を通じて現在の端末機の位置を感知し、方位センサ１３５を通じて端末機が向いている方向（即ち、カメラ１４０のレンズが向いている方向）の方位（Ｎｏｒｔｈ、Ｅａｓｔ、Ｗｅｓｔ、Ｓｏｕｔｈ  ｄｉｒｅｃｔｉｏｎ）を感知し、カメラ１４０の設定されたズーム比率（ｚｏｏｍ  ｒａｔｉｏ）を利用して撮影される映像の画角を決定し、角度検出センサ１３７を通じて端末機の傾いた角度を感知した後、感知された端末機の位置、端末機の方位、カメラ１４０の画角、及び端末機の傾いた角度などに基づいてコンテンツを表示する表示領域を決定する。その後、制御部１００は、メモリ１１０のコンテンツ格納部に格納されたコンテンツの位置情報を分析し、設定された表示領域内に位置するコンテンツを選択し、選択されたコンテンツを表示部１５０に表示するように制御する。この際、表示部１５０は、カメラ１４０で撮影される映像が表示される状態であり、従って、選択されたコンテンツは、表示部１５０上で表示される映像の当該位置に表示される。
【００２９】
上述したように、マップ上に表示されるコンテンツ又はＡＲで表現される映像に表示されるコンテンツは、サムネイルイメージ又はアイコン形態で表示される。当該位置に複数のコンテンツが存在する場合、制御部１００は、これをサムネイルイメージ及び／又はアイコンを重畳させて表示し、またコンテンツの数を表示する。サムネイルイメージ及びアイコンで表現されるコンテンツを選択した場合、制御部１００は、当該コンテンツを選択して表示部１５０に表示する。
【００３０】
先ず、本実施形態によるコンテンツ生成及び表示方法を具体的に説明する。以下の説明では、コンテンツが写真イメージ又は動画イメージの場合を仮定して説明する。
【００３１】
図２は、本発明の一実施形態による携帯端末機におけるコンテンツを生成する構成を示す図である。
【００３２】
図２を参照すると、携帯端末機のユーザは、携帯端末機を通じて多様な種類のコンテンツを生成する。ここで、コンテンツは、カメラ１４０で撮影される写真イメージ及び動画、ユーザが入力部１５５を通じて作成するメモ及びスケージュリング情報、図示しないオーディオ処理部を通じて処理されるオーディオデータ（例えば、マイク又は通信部１２０を通じて入力されるオーディオデータ）、通信部１２０を通じてダウンロードするマルチメディアデータ（映画、文書データ、音楽、これらが統合された情報など）、ユーザによって生成されるビデオ、オーディオ、イメージ及び／又は文書データを含む情報などである。コンテンツ生成部２１０は、３Ｄ（３次元）画面で表示するためのコンテンツを生成する。従って、コンテンツ生成部２１０は、カメラ１４０、通信部１２０、及び入力部１５５を含み、これらから発生するコンテンツを、格納される形態に符号化し、また複数のコンテンツの場合にこれらを結合する機能を行う。ユーザは、携帯端末機の設定モードで、３Ｄ画面に表示するためのコンテンツを設定することができ、また製造時に設定することもできる。
【００３３】
ここで、コンテンツが写真イメージの場合、カメラ１４０で撮影される写真イメージは、表示部１５０を通じて表示される。この際、ユーザから格納要求が発生すると、コンテンツ生成部２１０は、撮影された写真イメージを映像処理（スケーリング、圧縮変換など）する。コンテンツ生成部２１０は、カメラ１４０を含む。位置感知部２２０は、現在ユーザが写真を撮影した位置情報を受信し、コンテンツの位置情報を取得する。ＧＰＳ受信部１３１は、緯度、経度、及び高度を全て感知するか、又は緯度及び経度のみを感知する。ここで、ＧＰＳ受信部１３１は、緯度及び経度の平面位置情報のみを感知するものと仮定する。このように、ＧＰＳ受信部１３１がユーザの位置する平面座標（即ち、緯度及び経度）を感知し、高度センサ１３３がユーザの位置する高度を感知する場合、位置感知部２２０は、ＧＰＳセンサ１３１及び高度１３３から、コンテンツが生成される位置（緯度、経度及び高度）を感知する。位置感知部２２０は、ＧＰＳ受信部１３１及び／又は高度センサ１３３を含む。
【００３４】
コンテンツ処理部２３０は、生成されたコンテンツ及びコンテンツの位置情報をコンテンツ格納部２４０に格納する。コンテンツ格納部２４０は、メモリ１１０内に位置し、格納されるコンテンツ及び情報は、コンテンツ名、コンテンツ生成時間、位置情報（緯度、経度、高度）、コンテンツなどである。また、コンテンツ処理部２３０は、入力部１５５を通じて入力されたコンテンツの簡単なメモ情報をコンテンツに付加する。このような場合、コンテンツ格納部２４０に格納されるコンテンツ情報は、下記表１のような構造を有する。
【００３５】
【表１】
2013120606.tif 000003
【００３６】
図３は、本発明の一実施形態による携帯端末機において生成されるコンテンツの位置情報を取得する方法を説明する図である。
【００３７】
図３を参照すると、本実施形態では、生成されるコンテンツの位置情報を取得する際に、緯度（Ｘ座標）及び経度（Ｙ座標）以外に高度（高さＨ）情報を追加する。例えば、ユーザがカメラ１４０を利用して写真を撮影する場合、ユーザは、道路、建物の上、地下街の店など高さの多様な場所を撮影する。本実施形態では、表示モードで当該コンテンツのコンテンツが生成された位置及び高さを一緒に表示する。このため、図３に示すように、ユーザが３１１〜３１４の位置で写真を撮ったと仮定すると、位置感知部２２０は、生成されたコンテンツの緯度及び経度と共に高さ情報も一緒に生成し、コンテンツ処理部２３０は、コンテンツ生成部２１０で生成されたコンテンツに位置感知部２２０で生成された位置情報を付加して、コンテンツ格納部２４０に格納する。コンテンツ格納部２４０に格納されたコンテンツは、コンテンツの表示時に当該コンテンツの位置情報によって３次元的に表示される。
【００３８】
コンテンツ格納部２４０に格納されたコンテンツは、コンテンツが生成された位置情報によって３次元表示される。即ち、コンテンツは、３次元地図上に表示され、またユーザが選択した３次元画面で表示される。本実施形態において、コンデンツ表示モードは、マップ表示モード（ｍａｐ  ｍｏｄｅ）及びＡＲ表示モード（Ａｕｇｍｅｎｔｅｄ  Ｒｅａｌｉｔｙ  ｍｏｄｅ）を備える。ここで、マップ表示モードは３次元マップを利用して表示し、ＡＲ表示モードはカメラ１４０を利用して行う。
【００３９】
先ず、３Ｄマップ表示モードの動作を説明する。
【００４０】
図４は、本発明の一実施形態による携帯端末機において位置情報を有するコンテンツを、マップを通じて表示する構成を示す図である。図５は、３Ｄマップ及び３Ｄマップに位置情報を有するコンテンツを表示する一例を示す図であり、図６は、同一の位置情報を有するコンテンツを表示する一例を示す図である。
【００４１】
図４〜図６を参照すると、マップを通じて位置情報を有するコンテンツを表示する場合、ユーザは、入力部１５５を通じてマップ表示を要求し、制御部１００は、これを感知し、ユーザが要求したマップを、マップ格納部１１５にアクセスして表示部１５０を通じて表示する。３次元マップは、ｓｔｒｅｅｔ  ｖｉｅｗ、人工衛星ｖｉｅｗ、３Ｄ  ｖｉｅｗなどである。また、マップ格納部１１５に格納されるマップは、通信部１２０を通じてダウンロードすることができる。また、マップ格納部１１５は、外装メモリであって、外部でマップデータを格納し、マップが格納されたメモリを携帯端末機に連結して使用することもできる。ユーザは、表示されたマップのコンテンツで、コンテンツを表示する領域を選択する。制御部１００は、ユーザによって選択されたマップ領域に位置するコンテンツを選択し、マップ上に３次元表示する。
【００４２】
表示領域決定部４１０は、位置情報を有するコンテンツを表示するためのマップが選択されると、マップ格納部１１５から該当する選択されたマップを図５のように表示する。即ち、表示領域決定部４１０は、ユーザによって設定されたマップ領域を選択して表示部１５０に表示する。設定された表示領域は、マップデータであり、緯度、経度、及び高度が表示される３次元マップである。表示領域が設定されると、図５のように３次元マップで表示され、コンテンツ選択部４２０は、コンテンツ格納部２４０から図５のように表示領域に表示されるコンテンツを決定する。コンテンツ格納部２４０に格納されたコンテンツは、表１のように、緯度、経度、及び高度の位置情報を有する。コンテンツ選択部４２０は、決定された表示領域内に位置する緯度及び経度情報を有するコンテンツを選択する。表示制御部４３０は、マップの表示領域に位置するコンテンツをサムネイルイメージで表示し、コンテンツの高度情報を利用して図５のように立体的に表示する。ここで、サムネイルイメージは、コンテンツの種類によってそれぞれ対応するイメージで表示される。即ち、写真や動画の場合には、サムネイル写真イメージや動画になり、メッセージなどの文字コンテンツの場合には、当該コンテンツのシンボルアイコンイメージになる。
【００４３】
図５において、参照番号、５１１、５１２、５１４、５１６、５１７は、表１の構造を有するコンテンツであり、表示される位置は、当該コンテンツが生成された位置になる。この際、コンテンツは、緯度及び経度以外に高さ情報を有するので、表示制御部４３０は、各コンテンツの緯度及び経度位置情報によってマップ上で平面位置を決定し、各コンテンツの高さ情報によって当該コンテンツの表示高さを決定して表示部１５０に表示する。従って、最終的に表示されるコンテンツは、図５のようにコンテンツの生成位置を３次元表示することができる。
【００４４】
また、コンテンツは、同一の位置で多数個が生成されることがある。このような場合、表示制御部４３０は、当該位置で複数のコンテンツが生成されたことを表示する。本実施形態において、表示制御部４３０は、図６の５２０のように、複数のコンテンツがあることを表示する。表示制御部４３０は、コンテンツのサムネイルイメージが重なる形態で表示するか、コンテンツの数を数字で表示するか、又は上記２つの形態を組み合わせて５２０のように表示する。そして５２０のようなコンテンツを表示する状態でサムネイルイメージをドラッグするなどのアクションを取った場合、表示制御部４３０は、５２５のように表示形態を変更することもできる。
【００４５】
また、図５のように、コンテンツが生成された位置を３次元マップに表示した状態で、ユーザが、特定コンテンツをタッチし、当該コンテンツ情報（例えばメモなど）を表示させて選択（例えば、ｄｏｕｂｌｅ  ｔｏｕｃｈ）すると、表示制御部４３０は、これを感知して当該コンテンツを表示部１５０に表示する。
【００４６】
次に、ＡＲ表示モードの動作を説明する。
【００４７】
図７は、本発明の一実施形態による携帯端末機において位置情報を有するコンテンツをＡＲ表示モードで表示する構成を示す図である。図８〜図１０は、携帯端末機において位置情報を有するコンテンツをＡＲ表示機能で表示する一例を示す図である。
【００４８】
図７〜図１０を参照すると、ＡＲ機能で位置情報を有するコンテンツを表示しようとする場合、ユーザは、カメラ１４０を駆動し、制御部１００は、カメラ１４０で撮影された映像を表示部１５０に表示する。そして、制御部１００は、カメラ１４０で撮影されたイメージの位置で生成されたコンテンツを３次元表示する。このため、制御部１００は、現在のユーザの緯度、経度、及び高度に対する位置情報、端末機が向いている方位（即ち、カメラ１４０の撮影方向）、端末機の傾いた角度、カメラ１４０で撮影されるイメージの画角などを感知しなければならず、また、ユーザ又は製造会社によって設定された表示領域の距離情報などを必要とする。
【００４９】
ユーザがＡＲ表示モードを選択し、カメラ１４０を駆動すると、制御部１００は、カメラ１４０で撮影される映像を表示部１５０に表示し、現在の端末機の位置情報の感知及びコンテンツを表示する領域を設定する。先ず、位置感知部２２０は、現在端末機が位置する緯度、経度、及び高さに対する位置情報を感知する。位置感知部２２０は、上述したように、ＧＰＳ受信部１３１及び／又は高度センサ１３３を備え、ＧＰＳ受信部１３１及び高度センサ１３３の出力から端末機が位置する緯度、経度、及び高度情報を感知する。
【００５０】
方位感知部６１０は、現在カメラ１４０が向いている方向を感知する。ここで、方位感知部６１０は、方位センサ１３５を備え、方位センサ１３５は、地磁気センサ及び／又はジャイロセンサなどである。方位感知部６１０で感知される方位情報は、カメラ１４０が向いている前面方向にＮ極を基準とする角度、又は予め設定された角度（ユーザ又は製造会社による設定角度）で表現される。
【００５１】
角度検出部６３０は、端末機の勾配（即ち、地面と成す端末機の傾いた角度）を検出する。例えば、ユーザがカメラ１４０を使用する際、被写体に向けてカメラを下方に下げて撮影するハイアングルショット（ｈｉｇｈ−ａｎｇｌｅ  ｓｈｏｔ）、又は上方に上げて撮影するロウアングルショット（ｌｏｗ−ａｎｇｌｅ  ｓｈｏｔ）などの技法を使用することができる。このような場合、カメラ１４０で撮影されるイメージは、同じ位置で撮影しても、異なるイメージに表示される。従って、コンテンツＡＲ表示モード時に、端末機の傾いた角度を検出してコンテンツを表示する領域を設定する。
【００５２】
画角感知部６２０は、カメラ１４０で撮影されるイメージの撮影角度を感知する。画角（ａｎｇｌｅ  ｏｆ  ｖｉｅｗ）は、カメラ１４０で捕捉する映像の視野角であり、広角で撮影する場合に画角が広く、望遠で撮影する場合に画角が狭い。従って、カメラ１４０の画角によって撮影されるイメージが変わり、これにより、コンテンツを表示する領域のサイズも変わる。カメラ１４０の広角から望遠までの画角は、ズーム比率によって決定され、これは、カメラ１４０を携帯端末機に装着する際に予め設定されなければならず、制御部１００は、ズーム比率によって画角を知ることができる。従って、画角感知部６２０は、カメラ１４０の駆動時にユーザによって設定されるズーム比率を確認し、確認されたズーム比率によってカメラ１４０の画角を感知する。
【００５３】
表示領域決定部６４０は、位置感知部２２０から出力される端末機の位置情報（緯度、経度、及び高度情報）、方位感知部６１０から出力される端末機が向いている方位、画角感知部６２０から出力されるカメラ１４０の画角、及び角度検出部６３０から出力される端末機の傾いた角度情報などを利用してコンテンツを表示する領域を図８〜図１０の参照番号７００のように設定する。この際、コンテンツ格納部２４０に格納されたコンテンツは、ユーザが可視圏内のコンテンツ以外に可視圏外の遠い位置で生成されたコンテンツをも格納している。従って、設定された表示領域内で表示されるコンテンツを決定するために、端末機から一定距離以内のコンテンツを表示するようにすることが好ましい。このため、表示領域決定部６４０は、現在の端末機の位置で一定距離以内のコンテンツを表示するための表示距離情報を備える。ここで、表示距離は、製造時に設定することができ、端末機の表示距離設定モードでユーザによって設定することもできる。従って、表示領域決定部６４０は、端末機の位置情報（緯度、経度、及び／又は高度）、端末機が向いている方位、端末機の傾いた角度、カメラ１４０の画角、及び設定された表示距離を利用してＡＲ機能で表示するコンテンツの表示領域を設定する。
【００５４】
コンテンツ選択部６５０は、表示領域の緯度、経度、及び高度の位置範囲を確認し、コンテンツ格納部２４０に格納されたコンテンツの位置情報を分析し、確認された表示領域内に位置するコンテンツを選択する。この際、コンテンツ格納部２４０に格納されるコンテンツには、表示領域内で表示距離を超過するコンテンツがあり得る。コンテンツ選択部６５０は、表示領域内で設定された表示距離を満足する位置情報（緯度、経度、及び高度）を有するコンテンツのみを選択する。表示制御部６６０は、選択されたコンテンツの緯度及び経度位置に高度情報を付加して表示部１５０に表示されるように制御する。表示部１５０には、カメラ１４０で撮影される写真イメージが表示され、また写真イメージ上でコンテンツが生成された位置に当該コンテンツのサムネイルイメージが表示される。この際、表示されるコンテンツは、端末機との間で表示距離を満たす表示領域内に位置するコンテンツである。ここで、表示制御部６６０は、表示領域内で近くに位置するコンテンツと遠くに位置するコンテンツを区別して表示するために、表示されるコンテンツのサイズを変えて表示（近いコンテンツは大きく、遠いコンテンツは相対的に小さく）するか又は異なる色相で表示する。
【００５５】
図８〜図１０は、端末機の傾いた角度によって表示領域が変更されてコンテンツサムネイルイメージが表示される一例を示す図である。ここで、図８〜図１０は、端末機の位置情報、端末機の方位情報、カメラ１４０の画角情報が同一であり、端末機の傾いた角度が異なる状態を仮定している。図８は、端末機で建物を撮影するイメージであり、図９は、図８と同一の条件で端末機を上に傾けてロウアングルで撮影する一例を示すイメージであり、図１０は、図８と同一の条件で端末機を下に傾けてハイアングルで撮影する一例を示すイメージである。このような場合、表示領域決定部６４０は、角度検出部６３０で検出された端末機の勾配角度によって図８〜図１０のようにそれぞれ異なるコンテンツ表示領域を設定する。コンテンツ選択部６５０は、コンテンツ格納部２４０内に格納されたコンテンツの位置情報を分析して端末機との間で表示距離を満たすように設定された表示領域内に位置するコンテンツを選択し、表示制御部６６０は、選択されたコンテンツを表示部１５０に表示する。
【００５６】
図１１は、本発明の一実施形態により位置情報を有するコンテンツを生成してこれを表示する方法を示す流れ図である。
【００５７】
図１１を参照すると、コンテンツ処理モードの場合、制御部１００は、８１１段階でこれを感知し、８１３段階で、コンテンツを生成してこれを処理し、その結果を表示する。ここで、コンテンツ処理モードは、コンテンツを生成するモードであり、コンテンツは、カメラ１４０で撮影される写真及び動画、入力部１５５を通じて作成するメモ、文書、及びスケージュリング情報、図示しないオーディオ処理部を通じて生成するオーディオ録音データ、通信部１２０を通じてダウンロードするマルチメディアデータ（映画、文書データ、音楽、これらが統合された情報など）、ユーザによって生成されるビデオ、オーディオ、イメージ、及び／又は文書データを含む情報などである。携帯端末機の設定モードで３Ｄ画面に表示するコンテンツを設定することができ、また、製造時に設定することもできる。
【００５８】
次に、ユーザから格納要求が発生すると、制御部１００は、８１５段階でこれを感知し、８１７段階で、ＧＰＳ受信部１３１及び高度センサ１３３を通じてコンテンツが生成された位置情報を取得する。ここで、位置情報は、緯度、経度、及び高度である。この際、ＧＰＳ受信部１３１が緯度、経度、及び高度を全て感知する場合、高度センサ１３３は、省略される。ここで、ＧＰＳ受信部１３１は、緯度及び経度の平面位置情報のみを感知するものと仮定する。このように、ＧＰＳ受信部１３１がユーザの位置する平面座標（即ち、緯度及び経度）を感知し、高度センサ１３３がユーザの位置する高度を感知する場合、制御部１００は、ＧＰＳ受信部１３１及び高度センサ１３３からコンテンツが生成される位置（緯度、経度及び高度）を取得する。その後、制御部１００は、８１９段階で、生成されたコンテンツ及びコンテンツの位置情報をメモリ１１０のコンテンツ格納部に格納する。ここで、コンテンツ格納部は、メモリ１１０内に位置し、格納されるコンテンツ及び情報は、表１のような構造を有する。
【００５９】
上述のように、メモリ１１０のコンテンツ格納部に格納されたコンテンツは、コンテンツが生成された位置情報によって３次元表示される。端末機のユーザからコンテンツ表示モードが要求されると、制御部１００は、８２１段階でこれを感知し、８２３段階で、表示するコンテンツが位置情報を含むコンテンツであるか否かを検査する。位置情報が含まれたコンテンツの表示の場合、制御部１００は、８２５段階に進行し、設定された表示領域内のコンテンツを選択して表示する。この際、コンテンツは、３次元地図上に表示され、またユーザが選択する３次元画面に表示される。本実施形態において、コンテンツ表示モードは、マップ表示モード（ｍａｐ  ｍｏｄｅ）及びＡＲ表示モード（Ａｕｇｍｅｎｔｅｄ  Ｒｅａｌｉｔｙ  ｍｏｄｅ）を備える。ここで、マップ表示モードは３次元マップを利用して表示し、ＡＲモードはカメラ１４０を利用して行う。しかし、８２３段階で、位置情報が含まれないコンテンツの場合、制御部１００は、８２７段階に進行して一般的なコンテンツ表示手続きを行う。また、８２１段階で、コンテンツ表示モードではない場合、制御部１００は、８３１段階に進行して当該機能を行う。
【００６０】
制御部１００は、ユーザのコンテンツ表示モード要求時に、携帯端末機において表示することができる表示モードをメニューに案内する。この場合、本発明の実施形態では、マップ表示モード及びＡＲ表示モードなどがメニューに設定されて表示される。そしてマップ表示モードが選択されると、制御部１００は、ユーザが選択可能なマップ（３次元的に表現可能なマップ、例えばｓｔｒｅｅｔ  ｖｉｅｗ、人工衛星ｖｉｅｗ、３Ｄ  ｖｉｅｗなど）をメニューに表示し、ユーザによって選択されたマップを選択して表示する。
【００６１】
図１２は、本発明の一実施形態による携帯端末機において位置情報を有するコンテンツを表示する手続きを説明する流れ図であり、図１１の８２５段階の動作手続きに相当する。
【００６２】
先ず、３Ｄマップ表示モードの動作を説明する。
【００６３】
ユーザがコンテンツ表示モードでマップ表示モードを選択すると、制御部１００は、９１１段階でこれを感知し、９１３段階で、ユーザが要求したマップを、マップ格納部１１５にアクセスして表示部１５０を通じて表示する。この際、マップは、ｓｔｒｅｅｔ  ｖｉｅｗ、人工衛星ｖｉｅｗ、３Ｄ  ｖｉｅｗなどであり、制御部１００は、ユーザによって選択されたマップを表示部１５０に表示する。また、マップ格納部１１５に格納されるマップは、通信部１２０を通じてダウンロードすることができ、また、マップを格納する外装メモリであり得る。上述のように、マップが表示された状態で、ユーザは、入力部１５５を通じてマップの領域を拡張するか又は縮小することができる。また、マップが表示された状態で、ユーザは、コンテンツを表示する領域を指定することができる。ユーザがコンテンツを表示する領域をマップ上に指定すると、制御部１００は、９１５段階で表示領域が選択されたことを感知し、９１７段階でコンテンツ表示領域を設定する。マップに表示領域が設定された場合、制御部１００は、設定された表示領域の位置情報（緯度及び経度、そして高度情報）を知る。これにより、その後、制御部１００は、９１９段階で、表示領域の位置情報を確認し、コンテンツ格納部に格納されたコンテンツの位置情報を確認して表示領域内に属するコンテンツを選択する。制御部１００は、９２１段階で、選択されたコンテンツを高度情報に基づいてマップの設定された表示領域に表示する。即ち、制御部１００は、ユーザによって設定されたマップ領域に位置するコンテンツを選択してマップ上に３次元表示する。
【００６４】
上述したように、制御部１００は、位置情報を有するコンテンツを表示するためのマップが選択されると、マップ格納部１１５から該当する選択されたマップを表示する。ここで、マップは、緯度、経度、及び高度が表示される３次元マップである。表示領域が設定されると、制御部１００は、メモリ１１０のコンテンツ格納部から、設定された表示領域に表示されるコンテンツの位置情報を分析した後、マップの表示領域内に位置する緯度及び経度情報を有するコンテンツを選択する。その後、制御部１００は、マップの表示領域に位置するコンテンツをサムネイルイメージで表示する。この際、コンテンツの高度情報を利用して図５のように緯度、経度、及び高度に基づいて３次元表示する。また、図５のように、コンテンツが生成された位置を３次元マップに表示した状態で、ユーザが特定コンテンツをタッチすると、当該コンテンツの情報（例えばメモなど）を表示し、コンテンツを選択すると、表示制御部４３０は、これを感知して当該コンテンツを表示部１５０に表示する。
【００６５】
次に、ＡＲ表示モードの動作を説明する。
【００６６】
ユーザがＡＲ表示モードを選択し、カメラ１４０を駆動すると、制御部１００は、９３１段階でこれを感知し、９３３段階で、カメラ１４０で撮影された映像を表示部１５０に表示する。その後、制御部１００は、コンテンツを表示する領域を設定するために、９３５段階で、次のようなパラメータを感知する。第一に、前記制御部１００は、ＧＰＳ受信部１３１及び／又は高度センサ１３３の出力から端末機の位置を取得する。ここで、端末機の位置を取得する理由は、現在位置からカメラが向いている方向に位置する表示領域の間に位置するコンテンツを選択するためである。第二に、制御部１００は、方位センサ１３５を通じて現在カメラ１４０が向いている方向を取得する。方位センサ１３５は、地磁気センサ及び／又はジャイロセンサなどである。ここで、カメラが向いている方向を取得する理由は、カメラ１４０で撮影される映像の方向を確認するためである。即ち、本実施形態によるＡＲ表示機能は、カメラ１４０で撮影される映像にコンテンツを表示する。このため、方位センサ１３５を通じてカメラ１４０で撮影される方位を決定する。第三に、制御部１００は、角度検出センサ１３７の出力から端末機の勾配（即ち、地面と成す端末機の傾いた角度）を取得する。ここで、カメラ１４０の勾配を取得する理由は、カメラアングルによって表示領域の方向が異なるように設定されるからである。即ち、同一の条件でカメラ１４０のアングルを変えて撮影する場合、表示部１５０に表示される画面は、同一の緯度及び経度を有するが、その高度情報が異なる。このような場合、カメラ１４０で撮影されるイメージは、同じ位置で撮影しても異なるイメージで表示される。従って、コンテンツのＡＲ表示モード時に端末機の傾いた角度を検出してコンテンツを表示する領域を設定する。第四に、制御部１００は、カメラ１４０で撮影される映像の視野角である画角を取得する。カメラ１４０の広角から望遠までの画角は、ズーム比率によって決定され、制御部１００は、ズーム比率によって画角を知ることができる。従って、制御部１００は、カメラ１４０の駆動時にユーザによって設定されるズーム比率を確認し、確認されたズーム比率によってカメラ１４０の画角を取得する。ここで、画角を取得する理由は、表示部１５０に表示される表示領域のサイズ（望遠画角又は広角画角）を確認するためである。
【００６７】
コンテンツ表示領域を決定するための各パラメータを取得した後、制御部１００は、９３７段階で、端末機の位置情報（緯度、経度、及び高度情報）、端末機が向いている方位、カメラ１４０の画角、及び端末機の傾いた角度情報などを利用してコンテンツを表示する領域を設定する。この際、コンテンツ格納部に格納されたコンテンツは、ユーザが可視圏内のコンテンツ以外に可視圏外の遠い位置で生成されたコンテンツをも格納している。従って、制御部１００は、カメラ１４０に表示される表示領域内で端末機と一定距離以内に位置するコンテンツを表示することが好ましい。このため、制御部１００は、現在の端末機の位置で一定距離以内のコンテンツを表示するための表示距離情報を備える。従って、制御部１００は、端末機の位置情報（緯度、経度、及び／又は高度）、端末機が向いている方位、端末機の傾いた角度、カメラ１４０の画角、及び設定された表示距離を利用してＡＲ機能で表示するコンテンツの表示領域を設定する。
【００６８】
その後、制御部１００は、９３９段階で、表示領域の緯度、経度、及び高度の位置範囲を確認し、メモリ１１０のコンテンツ格納部に格納されたコンテンツの位置情報を分析し、表示部１５０に表示される表示領域内に位置するコンテンツを選択する。この際、制御部１００は、表示領域内で設定された表示距離を満足する位置情報（緯度、経度、及び高度）を有するコンテンツのみを選択し、９４１段階で、制御部１００は、選択されたコンテンツの緯度及び経度位置に高度情報を付加して表示部１４０に図８〜図１０のように表示されるように制御する。表示部１５０には、カメラ１４０で撮影された写真イメージが表示され、また写真イメージ上でコンテンツが生成された位置に当該コンテンツのサムネイルイメージが表示される。この際、表示されるコンテンツは、端末機との間で表示距離を満たす表示領域内に位置するコンテンツである。ここで、表示制御部６６０は、表示領域内で近くに位置するコンテンツと遠くに位置するコンテンツを区別して表示するために、表示されるコンテンツのサイズを変えて表示（近いコンテンツは大きく、遠いコンテンツは相対的に小さく）するか又は異なる色相で表示する。
【００６９】
９３１段階で、コンテンツ表示モードではない場合、制御部１００は、９５１段階に進行して当該機能を行う。
【００７０】
本実施形態によるコンテンツは、上述したように、多様な形態を有することができる。  
【００７１】
図１３は、本発明の一実施形態によるコンテンツの種類を説明する図であり、図１４は、図１３のコンテンツの生成時のメモ情報を表示する一例を示す図である。
【００７２】
図１３及び図１４を参照すると、コンテンツ１０１１〜１０１４は、表示領域内で同時に表示される位置でそれぞれ生成されたコンテンツであり、１０１１はメモ、１０１２及び１０１４は写真、１０１３は音声録音コンテンツである場合を仮定している。このように、コンテンツ処理モードでコンテンツを生成して格納する場合、制御部１００は、表１のような構造でコンテンツを生成してメモリ１１０のコンテンツ格納部に格納する。その後、表示モード（３Ｄマップ表示モード又はＡＲ表示モード）を実行すると、制御部１００は、コンテンツ表示領域を設定し、図１３のように表示領域内に位置するコンテンツをサムネイルイメージ又はサムネイルアイコンで表示する。そして図１３のように、コンテンツを３次元イメージで表示した状態でユーザが特定コンテンツを選択すると、制御部１００は、当該コンデンツを生成した位置情報を表示する。
【００７３】
上述したように、本発明の実施形態は、コンテンツの生成時に緯度、経度、及び高度の位置情報を取得してコンテンツと共に格納し、コンテンツの表示モード時に位置情報を利用して表示領域に当該コンテンツをサムネイルイメージで表示する。この表示方法は、イメージを撮影した場所の位置情報を基盤としてギャラリー（ｇａｌｌｅｒｙ）で位置情報を一緒に表記するｖｉｅｗｅｒが提供される場合、イメージを３Ｄ  ｖｉｅｗｅｒのように見せるｇａｌｌｅｒｙ表示を可能にする。この際、コンテンツは、多様な種類（ａｌｌ  ｋｉｎｄｓ  ｏｆ  ｕｓｅｒ  ｍａｋｅ  ｃｏｎｔｅｎｔｓ（Ｍｅｍｏ、Ｖｏｉｃｅｒｅｃｏｒｄ、Ｖｉｄｅｏ、Ｐｈｏｔｏｅｄｉｔ…ｅｔｃ））のコンテンツである。
【００７４】
また、本発明の実施形態では、格納されたコンテンツを結合（ａｇｇｒｅｇａｔｉｏｎ）することで、カメラを活性化した状態でコンテンツが作られた位置を提供する場合、端末機は、サービスなしでもユーザにＡＲ  ｃｏｎｔｅｎｔｓ  ｖｉｅｗを提示することができる。このような場合、端末機は、ＡＲ  ｍｏｄｅで特定位置に向けて端末のカメラ１４０を利用して撮影し、撮影された写真とビデオ、格納されたメモなどを現実空間の位置にマッピングして表示することができる。
【００７５】
また、マップを利用して３次元ｖｉｅｗｅｒを提供する場合、ｓｔｒｅｅｔ  ｖｉｅｗ、人工衛星ｖｉｅｗ、３Ｄ  ｖｉｅｗでコンテンツが作られた位置にアイテム（ｉｔｅｍ）が位置（ｐｏｓｉｔｉｏｎｉｎｇ）するｖｉｅｗｅｒ機能を行うことができる。
【００７６】
以上、図面を参照しながら本発明の実施形態を説明したが、本発明は、上述の実施形態に限定されるものではなく、本発明の技術的範囲を逸脱しない範囲内で多様に変形実施することが可能である。
【符号の説明】
【００７７】
１００    制御部
１１０    メモリ
１１５    マップ格納部
１２０    通信部
１３０    感知部
１３１    ＧＰＳ受信部
１３３    高度センサ
１３５    方位センサ
１３７    角度検出センサ
１４０    カメラ
１５０    表示部
１５５    入力部
２１０    コンテンツ生成部
２２０    位置感知部
２３０    コンテンツ処理部
２４０    コンテンツ格納部
３１１〜３１４    写真撮影位置
４１０、６４０    表示領域決定部
４２０、６５０    コンテンツ選択部
４３０、６６０    表示制御部
５１１、５１２、５１４、５１６、５１７    コンテンツ生成位置
６１０    方位感知部
６２０    画角感知部
６３０    角度検出部
７００    コンテンツ表示領域
１０１１〜１０１４    コンテンツ
【図１】
2013120606.tif 000004
【図２】
2013120606.tif 000005
【図３】
2013120606.tif 000006
【図４】
2013120606.tif 000007
【図５】
2013120606.tif 000008
【図６】
2013120606.tif 000009
【図７】
2013120606.tif 000010
【図８】
2013120606.tif 000011
【図９】
2013120606.tif 000012
【図１０】
2013120606.tif 000013
【図１１】
2013120606.tif 000014
【図１２】
2013120606.tif 000015
【図１３】
2013120606.tif 000016
【図１４】
2013120606.tif 000017