(57)【要約】【課題】三次元画像で表示可能な画像を好適に撮影できる電子機器を提供すること。【解決手段】筐体と、筐体に配置され、被写体を撮影する撮影部と、被写体の撮影部に対する相対的な回転角度を検出する角度検出部と、撮影部で撮影した画像と角度検出部で検出した当該画像の撮影時の被写体の角度とを対応つけて記憶する記憶部と、を有し、記憶部に記憶された画像は、記憶部に記憶された同一被写体の他の画像と組み合わせて表示することで三次元画像となる画像であることで上記課題を解決する。【選択図】図３
2012175694.tif 000002
【特許請求の範囲】
【請求項１】
筐体と、
前記筐体に配置され、被写体を撮影する撮影部と、
前記被写体の前記撮影部に対する相対的な回転角度を検出する角度検出部と、
前記撮影部で撮影した画像と前記角度検出部で検出した当該画像の撮影時の被写体の角度とを対応つけて記憶する記憶部と、を有し、
前記記憶部に記憶された画像は、前記記憶部に記憶された同一被写体の他の画像と組み合わせて表示することで三次元画像となる画像であることを特徴とする電子機器。
【請求項２】
前記角度検出部は、前記撮影部で取得した画像を解析し、前記被写体とともに相対的に回転する角度特定部の位置を検出することで、前記被写体の相対的な回転角度を検出することを特徴とする請求項１に記載の電子機器。
【請求項３】
前記角度検出部は、前記撮影部で取得した画像を解析し、前記被写体の特徴点を検出し、前記特徴点を前記角度特定部とすることを特徴とする請求項２に記載の電子機器。
【請求項４】
前記角度検出部は、前記被写体の形状を検出する形状検出部を有し、
前記形状検出部で検出した被写体の形状の変化に基づいて前記被写体の回転角度を検出することを特徴とする請求項１に記載の電子機器。
【請求項５】
前記角度検出部は、前記被写体を支持している支持台の角度情報を取得し、前記支持台の角度情報に基づいて前記被写体の角度変化を検出することを特徴とする請求項１に記載の電子機器。
【請求項６】
前記記憶部は、前記筐体と前記被写体との距離を算出する距離算出部を有し、
前記距離算出部で算出した距離と前記角度検出部で検出した角度を対応付けて記憶することを特徴とする請求項１から５のいずれか一項に記載の電子機器。
【請求項７】
前記距離算出部は、前記撮影部で検出した焦点距離に基づいて、前記被写体との距離を算出することを特徴とする請求項６に記載の電子機器。
【請求項８】
前記撮影部は、前記角度検出部で前記被写体が回転したことを検出した場合、撮影を行うことを特徴とする請求項１から７のいずれか一項に記載の電子機器。
【請求項９】
前記撮影部は、連続して画像を撮影することを特徴とする請求項１から７のいずれか一項に記載の電子機器。
【請求項１０】
前記撮影部は、前記角度検出部で検出した被写体の回転角度と既に撮影した画像に対応付けられた被写体の回転角度とに基づいて、当該既に撮影した画像と組み合わせて表示することで三次元表示ができる位置に前記被写体が配置されているときには、画像を撮影することを特徴とする請求項１から７のいずれか一項に記載の電子機器。
【請求項１１】
前記撮影部は、１つの被写体に対して、前記被写体を三次元表示できる画像の組み合わせを複数の異なる回転角度で撮影することを特徴とする請求項１から１０のいずれか一項に記載の電子機器。
【請求項１２】
複数の画像を重ねて表示させて三次元画像を表示可能な表示部と、
どの回転角度からの三次元画像を表示させるかの操作を受け付ける操作部と、をさらに有し、
前記表示部は、前記操作部で検出した操作と前記画像データに対応付けられた角度情報とに基づいて、少なくとも２枚の画像データにより前記被写体を三次元画像として表示することを特徴とする請求項１から１１のいずれか一項に記載の電子機器。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、三次元画像で表示可能な画像の撮影を行う電子機器に関する。
【背景技術】
【０００２】
近年では、三次元画像を表示させる電子機器が提案されている。この電子機器に表示させる三次元画像を撮影する装置は、例えばミラー等を配置して角度をずらした２つの画像を撮影することで、三次元画像として再生可能な画像を撮影できる（特許文献１、２、３参照）。また、複数台の撮影装置を配置して夫々の撮影装置で同時に画像を撮影することでも、三次元画像として再生可能な画像を撮影できる（特許文献４参照）。
【先行技術文献】
【特許文献】
【０００３】
【特許文献１】特開２０００−９２５１７号公報
【特許文献２】特開２０００−１３４６４１号公報
【特許文献３】特開２００４−７０３０２号公報
【特許文献４】特開平１１−３４１５１８号公報
【発明の概要】
【発明が解決しようとする課題】
【０００４】
しかしながら、特許文献１から３に記載の装置は、画像を撮影する撮影機構として三次元画像を撮影するための光学系、撮像素子が必要となる。また、特許文献４に記載の装置は、複数台の撮影装置が必要となる。このため、装置構成が複雑化、大型化し、装置が高価になる。
【０００５】
また、三次元画像を撮影する装置としては、ユーザが１つの電子機器で１回目の撮影をした後、場所を移動して２回目の撮影を行うことで、三次元画像として再生可能な画像を撮影する装置もある。このように場所を移動しつつ２枚の画像を取得することで１枚の画像を撮影できない電子機器でも三次元画像として再生可能な画像を撮影することができる。
【０００６】
しかしながら、１台の装置で移動しながら撮影する方法では、撮影領域のずれや被写体との距離のずれ等が生じ、撮影した画像が三次元画像にならない、つまり立体画像に見えない恐れがある。
【０００７】
本発明は、上記に鑑みてなされたものであって、三次元画像で表示可能な画像を好適に撮影できる電子機器を提供することを目的とする。
【課題を解決するための手段】
【０００８】
上述した課題を解決し、目的を達成するために、本発明は、電子機器であって、筐体と、前記筐体に配置され、被写体を撮影する撮影部と、前記被写体の前記撮影部に対する相対的な回転角度を検出する角度検出部と、前記撮影部で撮影した画像と、前記角度検出部で検出した当該画像の撮影時の被写体の角度と、を対応つけて記憶する記憶部と、を有し、前記記憶部に記憶された画像は、前記記憶部に記憶された同一被写体の他の画像と組み合わせて表示することで三次元画像となる画像である。
【０００９】
ここで、前記角度検出部は、前記撮影部で取得した画像を解析し、前記被写体とともに相対的に回転する角度特定部の位置を検出することで、前記被写体の相対的な回転角度を検出することが好ましい。
【００１０】
また、前記角度検出部は、前記撮影部で取得した画像を解析し、前記被写体の特徴点を検出し、前記特徴点を前記角度特定部とすることが好ましい。
【００１１】
また、前記角度検出部は、前記被写体の形状を検出する形状検出部を有し、前記形状検出部で検出した被写体の形状の変化に基づいて前記被写体の回転角度を検出することが好ましい。
【００１２】
また、前記角度検出部は、前記被写体を支持している支持台の角度情報を取得し、前記支持台の角度情報に基づいて前記被写体の角度変化を検出することが好ましい。
【００１３】
また、前記記憶部は、前記筐体と前記被写体との距離を算出する距離算出部を有し、前記距離算出部で算出した距離と前記角度検出部で検出した角度を対応付けて記憶することが好ましい。
【００１４】
また、前記距離算出部は、前記撮影部で検出した焦点距離に基づいて、前記被写体との距離を算出することが好ましい。
【００１５】
また、前記撮影部は、前記角度検出部で前記被写体が回転したことを検出した場合、撮影を行うことが好ましい。
【００１６】
また、前記撮影部は、連続して画像を撮影することが好ましい。
【００１７】
また、前記撮影部は、前記角度検出部で検出した被写体の回転角度と既に撮影した画像に対応付けられた被写体の回転角度とに基づいて、当該既に撮影した画像と組み合わせて表示することで三次元表示ができる位置に前記被写体が配置されているときには、画像を撮影することが好ましい。
【００１８】
また、前記撮影部は、１つの被写体に対して、前記被写体を三次元表示できる画像の組み合わせを複数の異なる回転角度で撮影することが好ましい。
【００１９】
また、複数の画像を重ねて表示させて三次元画像を表示可能な表示部と、どの回転角度からの三次元画像を表示させるかの操作を受け付ける操作部と、をさらに有し、前記表示部は、前記操作部で検出した操作と前記画像データに対応付けられた角度情報とに基づいて、少なくとも２枚の画像データにより前記被写体を三次元画像として表示することが好ましい。
【発明の効果】
【００２０】
本発明にかかる電子機器は、三次元画像で表示可能な画像を好適に撮影できるという効果を奏する。
【図面の簡単な説明】
【００２１】
【図１】図１は、携帯電話端末の外観を示す正面図である。
【図２】図２は、カメラの概略構成を示す説明図である。
【図３】図３は、携帯電話端末の機能の概略構成を示すブロック図である。
【図４】図４は、画像フォルダに記憶されるデータの一例を示す説明図である。
【図５】図５は、携帯電話端末の撮影動作を説明するための説明図である。
【図６】図６は、携帯電話端末の撮影動作表示される画面の一例を示す説明図である。
【図７】図７は、携帯電話端末の撮影動作時の処理の一例を示すフロー図である。
【図８】図８は、携帯電話端末の撮影動作を説明するための説明図である。
【図９】図９は、携帯電話端末の撮影動作表示される画面の一例を示す説明図である。
【図１０】図１０は、携帯電話端末の撮影動作を説明するための説明図である。
【図１１】図１１は、携帯電話端末の撮影動作表示される画面の一例を示す説明図である。
【図１２】図１２は、携帯電話端末の表示動作時の処理の一例を示すフロー図である。
【図１３】図１３は、携帯電話端末の表示動作を説明するための説明図である。
【発明を実施するための形態】
【００２２】
以下、本発明につき図面を参照しつつ詳細に説明する。なお、以下の説明により本発明が限定されるものではない。また、以下の説明における構成要素には、当業者が容易に想定できるもの、実質的に同一のもの、いわゆる均等の範囲のものが含まれる。以下においては、電子機器として携帯電話端末を例として説明するが、本発明の適用対象は携帯電話端末に限定されるものではなく、三次元（３Ｄ）画像表示機能および画像撮影機能の少なくとも一方を備える各種装置、例えば、ＰＨＳ（Personal  Handy-phone  System）、ＰＤＡ、ポータブルナビゲーション装置、パーソナルコンピュータ、ゲーム機等に対しても本発明は適用できる。また、三次元（３Ｄ）画像表示機能のみを有する電子機器の場合は、携帯電子機器に限定されず、テレビ、モニタ等、固定型の各種装置にも用いることができる。
【００２３】
図１は、本発明の携帯電子機器の一実施形態である携帯電話端末１の外観を示す正面図であり、携帯電話端末１は、薄板状の筐体１２を有する。携帯電話端末１は、筐体１２の表面に、タッチパネル２と、ボタン２０、ボタン２２及び入力デバイス２４からなる入力部３と、レシーバ７と、マイク８と、カメラ１６と、が配置されている。タッチパネル２は、板状の筐体１２の面積が最も広い面に配置されている。また、入力部３も、筐体１２のタッチパネル２が配置されている面の、長手方向の一方の端部に配置されている。入力部３は、短手方向の一方から他方に向かって、ボタン２０、入力デバイス２４、ボタン２２の順で配置されている。また、レシーバ７は、筐体１２のタッチパネル２が配置されている面の長手方向の他方の端部、つまり、入力部３が配置されている端部とは反対側の端部に配置されている。また、マイク８は、筐体１２のタッチパネル２が配置されている面の長手方向の一方の端部、つまり、入力部３が配置されている端部に配置されている。また、カメラ１６は、タッチパネル２が配置されている面とは反対側の面に配置されている。
【００２４】
タッチパネル２は、文字、図形、画像等を表示するとともに、指、スタイラス、ペン（ペンの先端、棒状部材の先端）等（以下、単に「指」という）を用いてタッチパネル２に対して行われる各種動作を検出する。例えば、携帯電話端末１は、利用者から文字の入力を受け付けるために、タッチパネル２上に仮想キーボードを表示させる。携帯電話端末１は、タッチパネル２上に仮想キーボードを表示させた状態で、指によってタッチパネル２に入力される各種動作を検出し、仮想キーボードのどのキーが押下されたか、接触されたかを検出し、押下、接触を検出したキーを入力したキーとすることで、文字入力を行うことができる。また、タッチパネル２は、文字の入力によらず、表示させている画像と、指によってタッチパネル２に対して行われる各種動作とに基づいて、各種操作の入力を検出し、入力された操作に基づいて各種制御を行う。
【００２５】
入力部３は、ボタン２０、２２が押下された場合に、押下されたボタンに対応する機能を起動させる。また、入力部３は、入力デバイス２４に入力された動作も操作として検出し、入力された操作に基づいて各種制御を行う。例えば、入力デバイス２４は、方向指示操作や決定操作を検出する。入力デバイス２４は、タッチパッド、光学式入力デバイス、４方及び中央にボタンを備える入力デバイス等で構成される。
【００２６】
カメラ１６は、画像を撮影する撮影装置であり、図２に示すように、撮影窓５２と光学系５４と受光部５８と撮影角度調整機構５９とを有する。撮影窓５２は、筐体１２のタッチパネル２が配置されている面とは反対側の面に露出して配置されている。撮影窓５２は、透明な部材で構成されており、筐体１２の外部の光から入射する光を内部に入射（案内）させる。光学系５４は、撮影窓５２から筐体１２内部に入射した光を受光部５８に案内するレンズ等の光学部材で構成されている。なお、光学系５４は、撮影窓５２から入射した光のうち、所定の角度範囲（撮影領域）から入射した光を選択的に受光部５８に案内する。受光部５８は、撮影領域の画像情報を取得する装置であり、受光面にフォトダイオードをマトリックス状に配列させた撮像素子（ＣＭＯＳイメージセンサ、ＣＣＤイメージセンサ等）を備える。受光部５８は、受光面に画像が結像されると、撮像素子で結像された画像を読み取り、読み取った画像を電子データである画像情報に変換する。撮影角度調整機構５９は、光学系５４の角度を調整し、撮影窓５２から入射し、受光部５８に入射される光の範囲を調整する。つまり、撮影角度調整機構５９は、光軸の位置を調整する。撮影角度調整機構５９は、光学系５４の少なくとも１つのレンズの位置を調整する機構、光学系５４の全体の向きを調整する機構等で構成される。また、撮影角度調整機構５９は、撮影領域の移動に伴い、受光部５８の位置も移動させる。なお、撮影角度調整機構５９は、手振れ補正処理も行うことができるようにしてもよい。
【００２７】
カメラ１６は、以上のような構成であり、撮影窓５２から入射した撮影領域の光を光学系５４で受光部５８に案内し、受光部５８で結像された光を読み取ることで、撮影領域の画像を取得する。また、カメラ１６は、撮影角度調整機構５９で撮影領域の角度を調整することができる。なお、カメラ１６は、これらの機能に加え、オートフォーカス機能やズーム機能も備えている。
【００２８】
次に、携帯電話端末１の機能と制御部との関係を説明する。図３は、図１に示す携帯電話端末１の機能の概略構成を示すブロック図である。図３に示すように携帯電話端末１は、タッチパネル２と、入力部３と、電源部５と、通信部６と、レシーバ７と、マイク８と、記憶部９と、主制御部１０と、ＲＡＭ（Random  Access  Memory）１１と、カメラ１６と、を有する。なお、本実施形態では、カメラ１６で撮影した画像を主制御部１０で解析する機能（後述する位置検出プログラム９Ｄで実現される機能）が被写体の角度（被写体６０のカメラ１６に対する相対的な回転角度）を検出する角度検出部となる。また、カメラ１６で検出した焦点距離を主制御部１０で解析する機能（後述する位置検出プログラム９Ｄで実現される機能）が自身（筐体１２）と被写体との距離を検出する距離算出部となる。
【００２９】
タッチパネル２は、表示部２Ｂと、表示部２Ｂに重畳されたタッチセンサ２Ａとを有する。タッチセンサ２Ａは、指を用いてタッチパネル２に対して行われた各種動作を、動作が行われた場所のタッチパネル２上での位置とともに検出する。タッチセンサ２Ａによって検出される動作には、指をタッチパネル２の表面に接触させる動作や、指をタッチパネル２の表面に接触させたまま移動させる動作や、指をタッチパネル２の表面から離す動作が含まれる。なお、タッチセンサ２Ａは、感圧式、静電式等のいずれの検出方式を採用していてもよい。表示部２Ｂは、例えば、液晶ディスプレイ（ＬＣＤ、Liquid  Crystal  Display）や、有機ＥＬ（Organic  Electro−Luminescence）パネル等で構成され、文字、図形、画像等を表示する。また、表示部２Ｂは、複数の画像を重ねて表示させて三次元（３Ｄ）画像、つまり利用者が立体視できる画像を表示できる。つまり、表示部２Ｂは、複数の画像を重ねて表示させることで三次元（３Ｄ）画像を表示できる。
【００３０】
入力部３は、上述したようにボタン２０、２２と、入力デバイス２４とを有する。ボタン２０、２２は、物理的な入力（押下）を通じて利用者の操作を受け付け、受け付けた操作に対応する信号を主制御部１０へ送信する。また、入力デバイス２４も、利用者の操作を受け付け、受け付けた操作に対応する信号を主制御部１０へ送信する。
【００３１】
電源部５は、蓄電池または外部電源から得られる電力を、主制御部１０を含む携帯電話端末１の各機能部へ供給する。通信部６は、基地局によって割り当てられるチャネルを介し、基地局との間でＣＤＭＡ方式等による無線信号回線を確立し、基地局との間で電話通信及び情報通信を行う。レシーバ７は、電話通信における相手側の音声や着信音等を出力する。マイク８は、利用者等の音声を電気的な信号へ変換する。
【００３２】
記憶部９は、例えば、不揮発性メモリや磁気記憶装置であり、主制御部１０での処理に利用されるプログラムやデータを保存する。具体的には、記憶部９は、メールの送受信や閲覧のためのメールプログラム９Ａや、ＷＥＢページの閲覧のためのブラウザプログラム９Ｂや、カメラ１６で画像を撮影するためのカメラプログラム９Ｃやカメラ１６で撮影下画像等の解析結果に基づいて自身の位置または自身と被写体との相対位置を検出するための位置検出プログラム９Ｄや、３Ｄ（三次元）画像として表示可能な画像を撮影するためおよび３Ｄ画像を表示するための３Ｄ（三次元）画像処理プログラム９Ｅや、各種プログラムを実行する際に用いる各種条件を対応付けた処理条件テーブル９Ｆや、撮影等により取得された画像が格納された画像フォルダ９Ｇを記憶する。また、記憶部９には、携帯電話端末１の基本的な機能を実現するオペレーティングシステムプログラムや、氏名、電話番号、メールアドレス等が登録されたアドレス帳データ等の他のプログラムやデータも記憶される。また、記憶部９には、タッチパネル２に入力された入力操作に基づいて制御動作、処理を決定するプログラム等も記憶される。なお、制御動作、処理とは、携帯電話端末１で実行する各種動作、処理が含まれ、例えば、カーソル、ポインタの移動、画面の表示切替、文字入力処理、各種アプリケーションの起動処理、終了処理がある。
【００３３】
ここで、図４は、画像フォルダに記憶されるデータの一例を示す説明図である。画像フォルダ９Ｇには、図４に示すように、複数の画像データが記憶されており、夫々の画像データに対して、フォルダ名、ファイル名、座標情報が対応付けられている。なお、画像ファイル９Ｇには、同一の被写体について撮影した画像データが同じフォルダ名で対応付けられ、記憶されている。また、座標情報は、被写体と撮影位置との相対位置の情報であり、同じフォルダに対応付けられている画像データは、同一軸で算出された座標情報が対応付けられている。
【００３４】
主制御部１０は、例えば、ＣＰＵ（Central  Processing  Unit）であり、携帯電話端末１の動作を統括的に制御する。具体的には、主制御部１０は、記憶部９に記憶されているデータを必要に応じて参照しつつ、記憶部９に記憶されているプログラムを実行して、タッチパネル２、入力部３、通信部６、カメラ１６等を制御することによって各種処理を実行する。主制御部１０は、記憶部９に記憶されているプログラムや、処理を実行することによって取得／生成／加工されたデータを、一時的な記憶領域を提供するＲＡＭ１１に必要に応じて展開する。なお、主制御部１０が実行するプログラムや参照するデータは、通信部６による無線通信でサーバ装置からダウンロードすることとしてもよい。
【００３５】
カメラ１６は、上述したように画像を撮影する撮影窓５２が、筐体１２から露出して配置されており、撮影領域の画像を取得する撮像機構である。
【００３６】
次に、図５から図７を用いて、撮影動作（三次元画像として表示可能な画像を撮影する撮影動作）の一例について説明する。図５は、携帯電話端末の撮影動作を説明するための説明図である。図６は、携帯電話端末の撮影動作表示される画面の一例を示す説明図である。
【００３７】
図５に示すように、携帯電話端末１が撮影する対象の被写体６０は、支持台７０に載置されている。支持台７０は、回転可能な部材である。なお、本実施形態では、紙、薄板等の薄い板状部材を用いるが、土台に回転可能な状態で支持されているターンテーブルを用いてもよい。支持台７０は、被写体６０が載置されている部分の周りに、被写体６０を中心とした円７１が配置され、円７１上に９０度間隔でマーク７２、７４、７６、７８が配置されている。つまり、被写体６０は、支持台７０の円７１の中心に載置されている。また、マーク７２の位置を０度の位置とし矢印７９の方向をなす角とした場合、マーク７４は９０度の位置に配置され、マーク７６は１８０度の位置に配置され、マーク７８は２７０度の位置に配置される。マーク７２は、四角形状であり、マーク７４は、丸形状であり、マーク７６は、ハート形状であり、マーク７８は三角形状である。なお、円７１、マーク７２、７４、７６、７８は、支持台７０に印刷等で形成しても、着脱可能な状態で配置してもよい。なお、円７１、マーク７２、７４、７６、７８は、支持台７０に固定されており、支持台７０と一体で移動する。また、被写体６０も支持台７０と一体で回転する。
【００３８】
図５に示す状態で、角度０度の方向から携帯電話端末１が画像を撮影すると、図６に示すように、撮影した画像がタッチパネル２に表示される。ここで撮影した画像は、被写体６０の画像８０と、円７１の画像８１と、マーク７２の画像８２と、マーク７４の画像８４と、マーク７８の画像８８と、を含む画像となる。携帯電話端末１は、撮影した画像に含まれるマーク７２の画像８２と、マーク７４の画像８４と、マーク７８の画像８８との位置関係を解析することで、被写体の角度を検出することができる。なお、被写体の角度は、任意の位置を基準位置として、その位置からの回転角度（角度のズレ）であり、被写体６０のカメラ１６に対する相対的な回転角度である。
【００３９】
携帯電話端末１は、このように、被写体６０が載置され、被写体６０とともに回転する支持台７０に配置したマークの位置を検出することで、被写体６０の角度を検出することができる。また、携帯電話端末１は、撮影時にカメラ１６で検出される焦点距離を用いることで自身（筐体１２）と被写体６０との距離を算出することができる。携帯電話端末１は、このようにして算出した被写体６０の角度と、自身（筐体１２）と被写体６０との距離と、を用いることで、被写体６０のカメラ１６に対する相対的な回転角度を含む自身（筐体１２）と被写体６０との相対的な位置関係（座標情報）算出することができる。
【００４０】
次に、図７を用いて、携帯電話端末１の処理動作について説明する。ここで、図７は、携帯電話端末の撮影動作時の処理の一例を示すフロー図である。図７に示す処理は、携帯電話端末１により三次元画像で表示可能な画像を撮影する撮影動作の一例である。図７に示す処理手順は、カメラプログラム９Ｃ、位置検出プログラム９Ｄ、３Ｄ画像処理プログラム９Ｅが提供する機能に基づいて繰り返し実行される。より具体的には、カメラプログラム９Ｃが提供する機能（画像撮影機能）、位置検出プログラム９Ｄが提供する機能（位置検出機能）により取得した各種検出結果および画像を３Ｄ画像処理プログラム９Ｅが提供する機能に基づいて、解析してカメラプログラム９Ｃが提供する機能（撮影機能）の動作を制御し、被写体の撮影を行う。携帯電話端末１は、三次元画像の撮影を行う機能を起動する指示が入力された場合、図７に示す処理を行う。
【００４１】
携帯電話端末１は、ステップＳ１２としてカメラ１６を起動させる。携帯電話端末１は、ステップＳ１２でカメラ１６を起動させたら、ステップＳ１４として、撮影の開始指示を検出する。具体的には、携帯電話端末１は、利用者からの撮影開始指示（シャッタ）の押下等を検出する。
【００４２】
携帯電話端末１は、ステップＳ１４で撮影の開始指示を検出したら、ステップＳ１６として画像の撮影を行う。つまり、画像を取得する。携帯電話端末１は、取得した画像のデータをＲＡＭ１１、記憶部９等に一時的に保存する。携帯電話端末１は、ステップＳ１６で画像を取得したら、ステップＳ１８として相対位置情報、つまり座標情報を取得する。具体的には、携帯電話端末１は、取得した画像を解析し、画像に含まれるマークを抽出し、マークの位置で被写体の角度を検出し、さらにカメラ１６のフォーカス機能で自身（筐体１２）と被写体との距離を検出し、相対的な位置関係（相対位置）の情報を取得する。なお、携帯電話端末１は、最初に検出した相対位置を基準の相対位置とする。携帯電話端末１は、取得した撮影位置情報を一時的に保存する。
【００４３】
携帯電話端末１は、ステップＳ１８で撮影位置情報を取得したら、ステップＳ２０として、撮影した画像を保存するかを判定する。なお、撮影した画像を保存するかの基準は、種々の設定とすることができる。例えば、既に撮影し保存している画像と組み合わせることで被写体の立体画像を表示することが可能な座標である場合は保存すると判定する設定とすることができる。また、座標情報の被写体の角度が予め設定した角度である場合は保存すると判定する設定とすることもできる。また、座標情報の被写体の角度が直前に保存した画像の被写体の角度から変化している場合は保存すると判定する設定とすることもできる。
【００４４】
携帯電話端末１は、ステップＳ２０で画像を保存する（Ｙｅｓ）と判定したら、ステップＳ２２として、一時保存を維持する。つまり、取得した画像データとそれに対応する座標情報をそのまま維持する。携帯電話端末１は、ステップＳ２０で画像を保存しない（Ｎｏ）と判定したら、ステップＳ２４として、画像データを破棄する。つまり、判定対象である画像データとそれに対応する座標情報を破棄する。
【００４５】
携帯電話端末１は、ステップＳ２２またはステップＳ２４の処理を行ったら、ステップＳ２６として、撮影完了かを判定する。ここで、撮影完了かの判定の基準は、種々の設定とすることができる。例えば、被写体が設定した角度分回転した場合、撮影が完了したと判定する設定や、利用者が入力した終了指示を検出した場合、撮影が完了したと判定する設定等とすることができる。
【００４６】
携帯電話端末１は、ステップＳ２６で撮影完了ではない（Ｎｏ）と判定したら、ステップＳ１６に進み、上述した処理を繰り返す。携帯電話端末１は、ステップＳ２６で撮影完了である（Ｙｅｓ）と判定したら、ステップＳ２８として、保存処理を行う。具体的には、携帯電話端末１は、撮影した画像と位置情報とを対応付けて記憶部９の画像フォルダ９Ｇに保存する。なお、携帯電話端末１は、タッチパネル２に撮影した画像および撮影した画像を保存するかの問い合わせ画像を表示させ、利用者による保存指示を検出したら画像を保存してもよい。携帯電話端末１は、ステップＳ２８の保存処理を行ったら、本処理を終了する。
【００４７】
このように、携帯電話端末１は、被写体の回転角度を検出し、自身（筐体１２、携帯電話端末１）と被写体６０との相対位置を検出することで、被写体６０（同一の被写体）を撮影した複数の画像の相対的な位置関係（特に被写体６０のカメラ１６に対する相対的な回転角度）を高い精度で検出することができる。これにより、被写体の三次元画像を撮影可能な位置での画像をより好適に取得することができる。つまり、組み合わせる２つの画像の相対位置関係がより明確であるため、重ねて表示させた場合により適切な三次元画像となる画像の組み合わせを撮影することができる。また、１台の携帯電話端末１で三次元表示が可能な画像データの組み合わせを撮影することができる。
【００４８】
また、携帯電話端末１は、画像データ同士の座標情報（被写体と撮影位置との相対位置の情報）を併せて保存することができる。これにより、三次元表示に用いる画像間の関係が明確となり、好適に三次元画像を表示することができる。また、画像の相対位置がわかるため、三次元画像として表示させる際に使用する画像の選択や表示方法の調整を自動的に行うことができる。つまり、携帯電話端末１は、三次元画像を表示させる装置で使いやすい画像のユニット（複数の画像データとそれに対応する座標情報）を取得することができる。
【００４９】
ここで、携帯電話端末１は、撮影により取得し、表示可能とする三次元画像の数は、特に限定されない。１つの三次元画像を表示するために画像を撮影しても、複数枚の三次元画像を表示できるように画像を撮影してもよい。複数枚の三次元画像を表示できるように画像を撮影することで、１つの被写体を異なる複数の角度から見た場合の三次元画像を表示できる画像を撮影することができる。
【００５０】
携帯電話端末１は、連続的に画像の撮影を行い、さらに画像データと座標情報（相対位置）とを対応付けることで、異なる角度で被写体を撮影した複数の画像を撮影することができる。これにより、１つの被写体を異なる複数の角度から見た三次元画像を表示できる画像データを撮影することができる。またそれぞれの画像データに相対位置情報を対応付けて保存することで、それぞれの相対位置の角度において適切な画像を組み合わせて三次元画像を作成することができる。
【００５１】
また、携帯電話端末１は、被写体の回転に合わせて連続的に画像の撮影を行うことで、被写体の全周（３６０度）のいずれの向きの三次元画像でも表示できる画像データの組み合わせを撮影することも可能となる。
【００５２】
また、上記実施形態では、静止画で画像を撮影したが、動画で画像を撮影してもよい。つまり、画像を取得した全てのコマの画像を保存してもよい。この場合は、動画で撮影した画像の各コマに対してそれぞれ相対位置情報を対応付けて記憶する。このように、取得した全コマを保存することで、より多くの組み合わせで三次元画像を表示することが可能となり、より細かい角度での三次元画像の表示が可能となる。
【００５３】
また、画像の撮影方法は特に限定されない。例えば、利用者のシャッタ操作で１枚目の画像を撮影し、その後、１枚目の画像と組み合わせることで被写体の三次元画像を表示できる撮影位置の画像を取得したら、当該画像を２枚目の画像として保存するようにしてもよい。つまり、１枚目の画像の撮影は利用者による指示をトリガーとし、１枚目の画像に対応する２枚目の画像を自動で撮影し、保存するようにしてもよい。
【００５４】
また、携帯電話端末１は、２枚の画像で１つの三次元画像を表示させる画像の組み合わせを撮影することに限定されず、さらに多くの枚数で１つの三次元画像を表示させる画像の組み合わせを撮影してもよい。この場合、携帯電話端末１は、必要な相対位置の画像を対応する枚数分撮影することで、複数枚の画像データで構成される三次元画像を撮影することができる。
【００５５】
携帯電話端末１は、画像を調整することが好ましい。具体的には、撮影した画像、当該画像と組み合わせ三次元画像を表示させる他の画像とを比較し、いずれか一方の画像のみに含まれる周囲の景色等を切り取り、２つの画像に含まれる被写体、景色等を同一の構成とする。これにより、２つの画像を組み合わせ表示させた場合に違和感が生じることを抑制できる。
【００５６】
以下、図８から図１１を用いて撮影動作の好適な一例について説明する。図８は、携帯電話端末の撮影動作を説明するための説明図である。図９は、携帯電話端末の撮影動作表示される画面の一例を示す説明図である。相対情報の検出、具体的には、被写体の回転角度の検出方法は、上記実施形態に限定されず、種々の方法を用いることができる。
【００５７】
図８に示すように、携帯電話端末１が撮影する対象の被写体６０は、支持台９０に載置されている。支持台９０は、回転可能な部材である。本実施形態の支持台９０は、被写体の載置位置の基準とする円９１以外は、目印が形成されていない。なお、円９１は、周方向に均一な形状である。また、被写体６０は支持台９０と一体で回転する。
【００５８】
図８に示す状態で、携帯電話端末１が画像を撮影すると、図９に示すように、撮影した画像がタッチパネル２に表示される。ここで撮影した画像は、被写体６０の画像８０と、円９１の画像９２と、を含む画像となる。携帯電話端末１は、撮影した画像に含まれる被写体８０の画像を解析することで、被写体の特徴点を検出する。なお、携帯電話端末１は、被写体の特徴点を複数点検出する。
【００５９】
携帯電話端末１は、このように、被写体６０の特徴点を検出し、特徴点の位置関係の変化を検出することでも被写体６０の角度を検出することができる。より具体的には、撮影画像と前に撮影した画像とを比較し、特徴点の位置の変化を検出することで、相対的な位置の変化を検出し、被写体６０の角度変化を検出することができる。携帯電話端末１は、画像を取得するたびに角度変化を検出し、その検出値を積算することで、基準位置からの被写体６０の相対的な回転角度（角度変化、相対位置）を算出することができる。
【００６０】
携帯電話端末１は、このようにして算出した被写体６０の角度と、自身（筐体１２）と被写体６０との距離と、を用いることでも、自身（筐体１２）と被写体６０との相対的な位置関係（座標情報）を算出することができる。また、図８および図９に示すように、被写体の特徴点を用いることで、上記実施形態のようにマークを配置しなくても被写体６０の角度を検出することができる。
【００６１】
次に、図１０は、携帯電話端末の撮影動作を説明するための説明図である。図１１は、携帯電話端末の撮影動作表示される画面の一例を示す説明図である。図１０に示すように、携帯電話端末１が撮影する対象の被写体６０は、支持台１０１に載置されている。また、被写体６０には、マーク１０２、１０４が配置されている。マーク１０２、１０４は、それぞれ被写体６０の異なる位置に固定されている。なお、図１０に示す例では、被写体６０は、利用者の手Ｈによって回転される。
【００６２】
図１０に示す状態で、携帯電話端末１が画像を撮影すると、図１１に示すように、撮影した画像がタッチパネル２に表示される。ここで撮影した画像は、被写体６０の画像８０と、マーク１０２の画像１１２と、マーク１０４の画像１１４と、を含む画像となる。携帯電話端末１は、撮影した画像に含まれるマーク１０２の画像１１２と、マーク１０４の画像１１４と、の位置関係を解析することで、被写体の角度を検出することができる。なお、被写体の角度は、任意の位置を基準位置として、その位置からの回転角度（角度のズレ）である。
【００６３】
携帯電話端末１は、このように、被写体６０に配置したマークの位置を検出することで、被写体６０の角度を検出することができる。また、携帯電話端末１は、このようにして算出した被写体６０の角度と、自身（筐体１２）と被写体６０との距離と、を用いることで、自身（筐体１２）と被写体６０との相対的な位置関係（座標情報）を算出することができる。
【００６４】
このように、被写体６０に目印となるマークを配置することで、支持台を被写体６０とともに回転させなくても、マークの位置関係を検出することで被写体６０の角度を検出することができる。また、被写体６０にマークを配置することで、特徴点よりも明確な目印となり、被写体の角度をより正確に算出することができる。
【００６５】
なお、マークとしては、単なる記号や、二次元バーコードや、肉眼では視認できない画像（赤外線に反応する画像）等を用いることができる。なお、携帯電話端末１は、撮影した画像から画像処理によりマークの画像を消去することが好ましい。これにより、撮影した画像に被写体以外の画像が含まれることを抑制でき、被写体の三次元画像をより好適に表示させることができる画像を作製することができる。
【００６６】
また、上記実施形態では、装置構成が簡単になるため、被写体との角度（自身と被写体との相対角度）を検出する角度検出部として、撮影した画像を解析して被写体の角度を検出する機構を用いたがこれには限定されない。角度検出部としては、被写体の三次元画像を検出するセンサ、例えばＴＯＦ（Time-of-Flight）センサを用いることができる。携帯電話端末１は、被写体の三次元形状を算出し、三次元形状の変化を算出することでも被写体の角度を算出することができる。また、被写体と支持台が一体で回転する構成の場合、角度検出部は、通信等により支持台の角度情報を取得することでも、被写体の角度を検出することができる。
【００６７】
また、携帯電話端末１は、被写体の位置に応じて撮影領域を調整することが好ましい。これにより、筐体１２の向きが変わって、相対位置がずれた場合も被写体が画像の中央に配置された画像を撮影することができる。これにより、被写体が画像に含まれない状態となり、被写体の三次元画像を作成できない状態となることを抑制することができる。
【００６８】
また、携帯電話端末１は、カメラ１６の撮影領域を機械的に調整しても、予め撮影領域の一部のみを画像の取得領域とし、つまり画像をトリミングして取得し、相対位置のずれに応じて画像をトリミングする位置を変化させるようにしてもよい。
【００６９】
また、携帯電話端末１は、主制御部１０でカメラプログラム９Ｃの処理を実行することで、焦点距離、倍率（ズーム）露出量等の撮影条件を調整し、撮影した画像の被写体の明るさ、大きさ等を同等とすることが好ましい。これにより、三次元画像を表示させるために画像を重ねたときに違和感が生じることを抑制することができる。
【００７０】
次に、図１２および図１３を用いて、撮影した画像を三次元表示させる際の動作の一例について説明する。ここで、図１２は、携帯電話端末の表示動作時の処理の一例を示すフロー図である。図１３は、携帯電話端末の表示動作を説明するための説明図である。図１２に示す処理は、携帯電話端末１により三次元画像を表示させる表示動作の一例である。図１２に示す処理手順は、３Ｄ画像処理プログラム９Ｅが提供する機能に基づいて繰り返し実行される。
【００７１】
まず、携帯電話端末１は、三次元画像を表示させる指示が入力され、表示させる対象の被写体（画像フォルダ）が特定されると、ステップＳ７０として、表示角度を決定する。つまり、表示対象の被写体の表示角度を決定する。なお、表示角度は、利用者の操作や、予め設定された条件に基づいて決定する。
【００７２】
携帯電話端末１は、ステップＳ７０で表示角度を決定したら、ステップＳ７２として、表示する画像を２枚決定する。つまり、携帯電話端末１は、決定した表示角度で画像フォルダ９Ｇに記憶されている座標情報（相対位置の情報）に基づいて被写体の三次元画像を表示できる画像の組み合わせを決定する。携帯電話端末１は、ステップＳ７２で２枚の画像を決定したら、ステップＳ７４として、決定した２枚の画像をタッチパネル２に表示させる。具体的には、２枚の画像を重ねて表示させ、被写体の三次元画像を表示させる。
【００７３】
携帯電話端末１は、ステップＳ７４で三次元画像を表示させたら、ステップＳ７６として操作があるかを判定する。携帯電話端末１は、ステップＳ７６で操作あり（Ｙｅｓ）と判定したら、ステップＳ７８として回転操作かを判定する。つまり被写体の表示角度を変更する操作であるかを判定する。
【００７４】
携帯電話端末１は、ステップＳ７８で回転操作である（Ｙｅｓ）と判定したら、ステップＳ７０に進む。このように、携帯電話端末１は、表示角度を変更する操作が入力されたら、その操作に基づいて再び表示角度を決定し、その角度の被写体の三次元画像を表示させる。
【００７５】
携帯電話端末１は、ステップＳ７８で回転操作ではない（Ｎｏ）と判定したら、ステップＳ８０として、対応した操作を行う。つまり、入力された操作に対応した処理を実行する。携帯電話端末１は、ステップＳ８０の処理を行ったらステップＳ８２に進む。
【００７６】
携帯電話端末１は、ステップＳ７６で操作なし（Ｎｏ）と判定したらまたはステップＳ８０の処理を行ったら、ステップＳ８２として表示終了かを判定する。つまり、三次元画像の表示を終了するかを判定する。携帯電話端末１は、ステップＳ８２で表示終了ではない（Ｎｏ）と判定したら、ステップＳ７６に進み、操作が入力されたかを再び判定し、上述した処理を繰り返す。携帯電話端末１は、ステップＳ８２で表示終了である（Ｙｅｓ）と判定したら、三次元画像の表示を終了し、本処理を終了する。
【００７７】
図１３を用いて具体的な一例を説明する。携帯電話端末１は、図１３に示すように、タッチパネル２に被写体を所定角度で表示させる三次元画像１２０を表示させている状態で、指Ｆで矢印１２１の操作を入力すると、被写体を回転させる操作が入力されたと判定する。携帯電話端末１は、指Ｆで入力された操作に基づいて被写体の回転量を算出し、被写体を表示させる角度を決定する。その後決定された角度で三次元画像を表示可能な画像の組み合わせを決定し、決定した画像の組み合わせをタッチパネル２に表示させる。これにより、携帯電話端末１は、タッチパネル２に被写体を三次元画像１２０から矢印１２４方向に所定角度回転させた状態の三次元画像１２２を表示することができる。
【００７８】
このように携帯電話端末１は、１つの被写体を異なる相対位置で撮影した複数の画像データと当該画像データの座標情報とを記憶し、決定した表示角度と画像データの座標情報とに基づいて、複数の画像データの中から２枚の画像データを決定し、その決定した２枚の画像データを重ねて表示することで、被写体が任意の角度で表示された三次元画像を表示することができる。
【００７９】
これにより、種々の角度の被写体の三次元画像を表示することができ、被写体の形状をより好適に把握することができる。また、実際の画像を選択するのみで、三次元画像を表示できるため、複雑な三次元の形状データ等を解析する必要がなく、簡単な制御で三次元画像を表示することができる。また、実際の撮影画像を用いることでより違和感の無い三次元画像を表示することができる。
【００８０】
なお、図１２および図１３は、１つの被写体について複数の角度で三次元画像を表示可能な画像データの組み合わせを記憶している場合の表示方法である。画像の組み合わせが１つの場合は、その画像を組み合わせてタッチパネル２に表示させればよい。また、上記実施形態では、２つの画像を組み合わせて三次元画像を表示させたがこれには限定されず、３枚以上の画像を組み合わせて三次元画像を表示させてもよい。このように、３枚以上の画像を組み合わせて（重ねて）表示させることで、タッチパネル２を見る角度を変えると異なる状態で浮き出る画像を表示させることもできる。
【００８１】
また、表示させる画像データは自身で撮影した画像データに限定されず、１つの被写体を異なる角度で撮影した複数の画像データと当該画像データの座標情報との組み合わせを外部から取得し、取得したデータを用いて、当該被写体の三次元画像を表示させてもよい。また、本実施形態では、１つの被写体の複数の画像データを画像フォルダ９Ｇに記憶させたが、本発明はこれに限定されず、外部の記憶装置から通信等で画像データ及び座標データを取得しても良い。なおこの場合もＲＡＭ等に一時的に記憶しつつ処理をする。
【００８２】
また、上記実施形態では、既存の装置構成で実現可能であり、装置構成を簡単にできるため、カメラのオートフォーカス機能（絞りの調整機能）で算出した焦点距離を用いて筐体と被写体との距離を検出したがこれに限定されず、被写体との距離を算出する種々の機能を用いることができる。例えば、赤外線センサ、超音波センサ等、対象物との距離を算出する種々の距離算出手段を用いることができる。
【００８３】
また、上記の実施形態では、表示部としてタッチパネルを有する電子機器に本発明を適用する例について説明したが、本発明は、表示手段として、タッチセンサが重畳されていない単なる表示パネルを有する電子機器に適用することもできる。
【００８４】
また、上記実施形態では、三次元画像を撮影する機能と三次元画像を表示させる機能とを両方持つ携帯電話端末として説明したが、これには限定されない。上記実施形態の三次元画像を撮影する機能を備える電子機器であれば、各種適用が可能である。
【符号の説明】
【００８５】
１  携帯電話端末
２  タッチパネル
２Ａ  タッチセンサ
２Ｂ  表示部
３  入力部
５  電源部
６  通信部
７  レシーバ
８  マイク
９  記憶部
９Ａ  メールプログラム
９Ｂ  ブラウザプログラム
９Ｃ  カメラプログラム
９Ｄ  位置検出プログラム
９Ｅ  ３Ｄ画像処理プログラム
９Ｆ  処理条件テーブル
９Ｇ  画像フォルダ
１０  主制御部
１１  ＲＡＭ
１２  筐体
１６  カメラ
２０、２２  ボタン
２４  入力デバイス
５２  撮影窓
５４  光学系
５８  受光部
５９  撮影角度調整機構
【図１】
2012175694.tif 000003
【図２】
2012175694.tif 000004
【図３】
2012175694.tif 000005
【図４】
2012175694.tif 000006
【図５】
2012175694.tif 000007
【図６】
2012175694.tif 000008
【図７】
2012175694.tif 000009
【図８】
2012175694.tif 000010
【図９】
2012175694.tif 000011
【図１０】
2012175694.tif 000012
【図１１】
2012175694.tif 000013
【図１２】
2012175694.tif 000014
【図１３】
2012175694.tif 000015