(57)【要約】  単一のカメラを使用して３Ｄ画像を作成するために使用される方法は、単一のカメラによって、第１の位置で、右側画像または左側画像のうちの一方となる第１の画像を取り込むステップと、第１の画像の特徴点を抽出するステップと、第１の位置とは異なる位置で、右側画像または左側画像のうちの他方となる第２の画像を発見するためにピクチャを撮影するステップと、ピクチャの特徴点を抽出するステップと、第１の画像およびピクチャの特徴点を比較するステップと、一方が第２の画像の目標位置を示し、他方がカメラの現在位置を示す２つの３Ｄカーソルを生成するステップと、２つの３Ｄカーソルをピクチャ内に表示するステップと、カメラを平行移動および回転させることによって現在位置を示すカーソルが目標位置を示すカーソルと完全に重なり合ったときに、第２の画像を取り込むステップと、第１の画像と第２の画像を結合して３Ｄ画像を作成するステップとを含む。
2016504828.tif 000002
【特許請求の範囲】
【請求項１】
単一のカメラを使用して３Ｄ画像を作成する方法であって、
単一のカメラによって、第１の位置で、右側画像または左側画像のうちの一方となる第１の画像を取り込むステップと、
前記第１の画像の特徴点を抽出するステップと、
前記第１の位置とは異なる位置で、前記右側画像または左側画像のうちの他方となる第２の画像を発見するためにピクチャを撮影するステップと、
前記ピクチャの特徴点を抽出するステップと、
前記第１の画像および前記ピクチャの特徴点を比較するステップと、
２つの３Ｄカーソルを生成するステップであり、前記３Ｄカーソルのうちの一方が前記第２の画像の目標位置を示し、前記３Ｄカーソルのうちの他方が前記カメラの現在位置を示すステップと、
前記２つの３Ｄカーソルを前記ピクチャ内に表示するステップと、
前記カメラを平行移動および回転させることによって前記現在位置を示す前記カーソルが前記目標位置を示す前記カーソルと完全に重なり合ったときに、前記第２の画像を取り込むステップと、
前記第１の画像と前記第２の画像を結合して、３Ｄ画像を作成するステップと
を含む、方法。
【請求項２】
前記比較するステップが、前記第１の画像および前記ピクチャの特徴点マップにおける物体のサイズおよび垂直ずれを解析することを含み、前記特徴点マップが、前記第１の画像および前記ピクチャのそれぞれにおける前記物体の外周にある特徴点を示す、請求項１に記載の方法。
【請求項３】
前記第１の画像および前記第２の画像の視差に対する所望の影響を得るための３つの奥行き情報アイコンを表示するステップをさらに含み、前記３つの奥行きアイコンが、それぞれ「前記スクリーンの前方」、「前記スクリーン上」、および「前記スクリーンの後方」を示し、
前記目標３Ｄカーソルの位置が、選択した奥行きアイコンの３Ｄ効果を得るように決定される、請求項２に記載の方法。
【請求項４】
前記２つの３Ｄカーソルのサイズが同じである場合には、前記第１の位置および前記位置の視距離が同じであり、前記カメラを前方または後方に移動させることによって前記２つの３Ｄカーソルの大きさが同じになる、請求項１から３の何れか一項に記載の方法。
【請求項５】
前記第１の画像と前記ピクチャの間の垂直ずれが、前記カメラを平行移動および回転させることによって打ち消される、請求項１から４の何れか一項に記載の方法。
【請求項６】
単一のカメラを使用して３Ｄ画像を作成するシステムであって、
単一のカメラによって、第１の位置で、右側画像または左側画像のうちの一方となる第１の画像を取り込む手段と、
前記第１の画像の特徴点を抽出する手段と、
前記第１の位置とは異なる位置で、前記右側画像または左側画像のうちの他方となる第２の画像を発見するためにピクチャを撮影する手段と、
前記ピクチャの特徴点を抽出する手段と、
前記第１の画像および前記ピクチャの特徴点を比較する手段と、
２つの３Ｄカーソルを生成する手段であり、前記３Ｄカーソルのうちの一方が前記第２の画像の目標位置を示し、前記３Ｄカーソルのうちの他方が前記カメラの現在位置を示す手段と、
前記２つの３Ｄカーソルを前記ピクチャ内に表示する手段と、
前記カメラを平行移動および回転させることによって前記現在位置を示す前記カーソルが前記目標位置を示す前記カーソルと完全に重なり合ったときに、前記第２の画像を取り込む手段と、
前記第１の画像と前記第２の画像を結合して、３Ｄ画像を作成する手段と
を含む、システム。
【請求項７】
前記比較する手段が、前記第１の画像および前記ピクチャの特徴点マップにおける物体のサイズおよび垂直ずれを解析する手段を含み、前記特徴点マップが、前記第１の画像および前記ピクチャのそれぞれにおける前記物体の外周にある特徴点を示す、請求項６に記載のシステム。
【請求項８】
前記第１の画像および前記第２の画像の視差に対する所望の影響を得るための３つの奥行き情報アイコンを表示する手段をさらに含み、前記３つの奥行きアイコンが、それぞれ「前記スクリーンの前方」、「前記スクリーン上」、および「前記スクリーンの後方」を示し、
前記目標３Ｄカーソルの位置が、選択した奥行きアイコンの３Ｄ効果を得るように決定される、請求項７に記載のシステム。
【請求項９】
前記２つの３Ｄカーソルのサイズが同じである場合には、前記第１の位置および前記位置の視距離が同じであり、前記カメラを前方または後方に移動させることによって前記２つの３Ｄカーソルの大きさが同じになる、請求項６から８の何れか一項に記載のシステム。
【請求項１０】
前記第１の画像と前記ピクチャの間の垂直ずれが、前記カメラを平行移動および回転させることによって打ち消される、請求項６から９の何れか一項に記載のシステム。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、単一のカメラを用いて３Ｄ画像を取り込む方法およびシステムに関する。さらに詳細には、本発明は、３Ｄカーソルを利用することによって単一のカメラを用いて３Ｄ画像を取り込む方法およびシステムに関する。
【背景技術】
【０００２】
３Ｄステレオの基本的な概念は、１９世紀に登場した。我々の２つの眼は、頭部で約６．５ｃｍ離間しており、我々が見ている光景は、それぞれの眼にわずかに異なる画角で映っていて、これにより異なる視野が得られている。我々の脳は、我々の両眼のこの２つの視野に基づいて、光景に奥行きの感覚を生じさせる。図１は、３Ｄ立体ディスプレイの基本概念を示す図である。この図では、Ｚは、知覚した物体の奥行き、Ｄは、スクリーンまでの距離であり、４つの物体が、スクリーンの前方（車）、スクリーン上（柱）、スクリーンの後方（木）、および無限距離の位置（箱）にあるものとして知覚されている。ほとんどの現在の３Ｄディスプレイは、３Ｄステレオの概念に基づいて構築されているが、大きな違いは、２つの視野、すなわち左眼と右眼の視野を分離する方法である。
【０００３】
この原理に基づいて、ステレオ写真を撮る方法は数多くある。現在、最も普及している方法は、２つの同じカメラを使用する方法と、ステレオカメラを使用する方法である。
【０００４】
図２は、２つのカメラを使用してステレオ写真を取り込む基本的な方法を示す図である。２つのカメラは、一定の距離だけ分離して配置される。これら２つのカメラにより、同時に２枚の写真を撮る。その後、現像後に、左のカメラで撮った写真を左眼で見、右のカメラで撮った写真を右眼で見る。すると、脳が、その写真が撮られた３Ｄ空間を現実のように描き出す。
【０００５】
ステレオカメラは、各レンズ毎に別個の画像センサまたはフィルムフレームを備えた２つ以上のレンズを有するカメラの一種である。これにより、このカメラは、人間の両眼視をシミュレートすることができるので、３次元画像を取り込むことができるようになる。これが、ステレオ写真と呼ばれるプロセスである。ステレオカメラを使用して、映画用のステレオ視野および３Ｄピクチャを形成することができる。ステレオカメラのレンズ間の距離（軸内距離）は、どの程度の３次元性が望ましいか、および目標がどれくらい遠くに位置しているかに応じて規定される。
【０００６】
どちらの方法も、２つのレンズが必要であり、ユーザは、プロフェッショナルな写真家であるのがよい。モバイル装置ではハードウェア面の制限があるので、１つのカメラを備えたモバイル装置を有する通常のユーザは、３Ｄ写真を取り込むのに苦労する。モバイル装置のユーザは、ステレオ３Ｄ写真を撮りたい場合には、同じ物体の写真を２枚撮る必要がある。最初に、その物体の写真を１枚撮る。次いで、カメラを少しだけ右または左に移動させて、２枚目の写真を撮る。本開示の残りの部分では、１枚目の写真が左眼用、２枚目の写真が右眼用であると仮定する。最後に、コンピューティングによってこれら２枚のピクチャを組み合わせて、ステレオ３Ｄ画像にする。ただし、ユーザは、ポストプロダクションに多くの時間と労力を費やすことになり、ときには３Ｄ写真の効果が不十分であることもある。ユーザは、２枚の写真を撮る際に主観的でありすぎるために、左画像と右画像が一致することはまれで、３Ｄ効果が得られないことになる。本開示では、モバイル装置用の単一のカメラを用いてステレオ３Ｄ画像を取り込む方法を提案する。このシステムは、カメラマンが、ポストプロダクションを簡略化するために、左画像と右画像を正確に撮り、より良好な３Ｄピクチャの効果を得る助けとなる。
【０００７】
３次元であるという錯覚が得られるのは、完全に、我々が特定の距離だけ離間した２つの眼を有しているという事実による。それぞれの眼に、わずかに異なる角度から撮影した同じ画像が示されると、その後、それらの画像を脳が結合したときに、結合画像が、３次元に見えることになる。この原理により、本発明は、単一のカメラを用いてステレオ３Ｄ画像を取り込む方法を提供する。カメラは、左画像および右画像を取り込む。カメラが左画像を取り込んだ後で、システムは、右画像の最良の位置についていくつかのプロンプトをユーザに与える。ユーザは、プロンプトに従って、ステレオ画像の作成のために結合するための右画像を正確に取り込むことができる。従って、本発明は、結合してステレオ３Ｄ画像にするための右画像の位置についてのいくつかのプロンプトをどのようにして与えるかという問題を解決することを目的とする。
【０００８】
関連技術として、米国特許２０１００３１６２８２号には、第１のピクチャおよび第２のピクチャと、第１のピクチャと第２のピクチャの間の位置／方向の変化に関する情報とに基づいて３Ｄ画像を作成する方法が開示されている。
【０００９】
本発明は、単一のカメラを使用して３Ｄ画像を取り込む方法を開示するものである。画像処理機能を、単一のカメラを備えたモバイル装置に追加して、左画像と右ピクチャの特徴点を突き合わせて立体画像を取り込む。
【００１０】
モバイル装置が左画像を取り込むと、システムは、左画像の特徴点を抽出する。次いで、モバイル装置を移動させて右ピクチャを撮影したら、システムは、右ピクチャの特徴点を抽出する。以下、右ピクチャは、カメラがディスプレイに表示しているピクチャを指し、これに対して、右画像は、カメラが撮った、結合してステレオ３Ｄ画像になる画像を指すことに留意されたい。さらに、「取り込む」は、写真を撮るときに用い、「撮影する」は、ピクチャを表示するときに用いる。
【００１１】
その後、システムは、双方向性最大相関および視差制約に基づいて特徴点一致方法を使用して、左画像の特徴点マップを右ピクチャの特徴点マップと比較して、物体のサイズを解析する。２つのマップにおける物体のサイズが同じである場合には、これは、両者の視距離が同じであることを示す。２つのマップにおける物体のサイズが異なる場合には、２つのマップにおける物体のサイズが同じになるまで、カメラを移動させる。さらに、システムは、これらの特徴点マップ間の垂直ずれを比較する。さらに、カメラを平行移動および回転させて、垂直ずれを打ち消す。最後に、ユーザは、右画像を取り込み、正確に結合してステレオ３Ｄ画像にすることができる。
【００１２】
本発明の１つの態様によれば、単一のカメラを使用して３Ｄ画像を作成する方法であって、単一のカメラによって、第１の位置で、右側画像または左側画像のうちの一方となる第１の画像を取り込むステップと、前記第１の画像の特徴点を抽出するステップと、前記第１の位置とは異なる位置で、前記右側画像または左側画像のうちの他方となる第２の画像を発見するためにピクチャを撮影するステップと、前記ピクチャの特徴点を抽出するステップと、前記第１の画像および前記ピクチャの特徴点を比較するステップと、２つの３Ｄカーソルを生成するステップであり、前記３Ｄカーソルのうちの一方が前記第２の画像の目標位置を示し、前記３Ｄカーソルのうちの他方が前記カメラの現在位置を示すステップと、前記２つの３Ｄカーソルを前記ピクチャ内に表示するステップと、前記カメラを平行移動および回転させることによって前記現在位置を示す前記カーソルが前記目標位置を示す前記カーソルと完全に重なり合ったときに、前記第２の画像を取り込むステップと、前記第１の画像と前記第２の画像を結合して、３Ｄ画像を作成するステップとを含む方法が提供される。
【００１３】
本発明の別の態様によれば、単一のカメラを使用して３Ｄ画像を作成するシステムであって、単一のカメラによって、第１の位置で、右側画像または左側画像のうちの一方となる第１の画像を取り込む手段と、前記第１の画像の特徴点を抽出する手段と、前記第１の位置とは異なる位置で、前記右側画像または左側画像のうちの他方となる第２の画像を発見するためにピクチャを撮影する手段と、前記ピクチャの特徴点を抽出する手段と、前記第１の画像および前記ピクチャの特徴点を比較する手段と、２つの３Ｄカーソルを生成する手段であり、前記３Ｄカーソルのうちの一方が前記第２の画像の目標位置を示し、前記３Ｄカーソルのうちの他方が前記カメラの現在位置を示す手段と、前記２つの３Ｄカーソルを前記ピクチャ内に表示する手段と、前記カメラを平行移動および回転させることによって前記現在位置を示す前記カーソルが前記目標位置を示す前記カーソルと完全に重なり合ったときに、前記第２の画像を取り込む手段と、前記第１の画像と前記第２の画像を結合して、３Ｄ画像を作成する手段とを含むシステムが提供される。
【００１４】
本発明の上記その他の態様、特徴および利点は、以下の説明を添付の図面と関連付けて読めば明らかになるであろう。
【図面の簡単な説明】
【００１５】
【図１】３Ｄ立体ディスプレイの概念を示す例示的な図である。
【図２】２つのカメラを使用してステレオ写真を取り込む基本的な方法を示す例示的な図である。
【図３Ａ】本発明の実施形態による、単一のカメラを使用して２つの画像を取り込むステップを示す例示的な流れ図である。
【図３Ｂ】本発明の実施形態による、単一のカメラを使用して２つの画像を取り込むステップを示す例示的な流れ図である。
【図３Ｃ】本発明の実施形態による、単一のカメラを使用して２つの画像を取り込むステップを示す例示的な流れ図である。
【図３Ｄ】本発明の実施形態による、単一のカメラを使用して２つの画像を取り込むステップを示す例示的な流れ図である。
【図３Ｅ】本発明の実施形態による、単一のカメラを使用して２つの画像を取り込むステップを示す例示的な流れ図である。
【図４Ａ】本発明の実施形態による、携帯電話の３Ｄ画像取込みシステムの主要なステップを示す例示的な流れ図である。
【図４Ｂ】本発明の実施形態による、携帯電話の３Ｄ画像取込みシステムの主要なステップを示す例示的な流れ図である。
【図５】本発明の実施形態によるシステムの例示的なブロック図である。
【発明を実施するための形態】
【００１６】
以下の説明では、本発明の実施形態の様々な態様について述べる。説明では、完全な理解が得られるように、具体的な構成および詳細について述べる。ただし、本発明は、本明細書に記載する具体的な詳細を用いることなく実施することもできることは、当業者には明らかであろう。
【００１７】
本発明は、ユーザが単一のカメラを使用するときのステレオ３Ｄ画像の結合のための第２の画像の取込みのプロンプトに焦点を当てる。本発明は、一般に、特徴点一致方法を使用して、２つの画像の間の位置ずれデータおよび視差データを得る３Ｄ画像取込みシステムに関する。
【００１８】
モバイル装置が左画像を取り込むと、システムは、ステレオ３Ｄ画像のための右画像の特徴点が推定されるように、左画像の特徴点を抽出する。さらに、システムは、右画像の最良の位置についてのいくつかのプロンプトを、ユーザに与える。ユーザは、この位置データに従って、結合してステレオ画像にするための右画像を正確に取り込むことができる。ユーザが右ピクチャを撮影すると、スクリーンには２つの３Ｄカーソルが示される。１つは、右画像の目標位置を示すものであり、もう１つは、カメラの現在位置を示すものである。２つの３Ｄカーソルが重なると、ユーザは、結合してステレオ３Ｄ画像にする右画像を正確に取り込むことができる。
【００１９】
カメラを備えた携帯電話を使用して２つの画像を取り込むステップを、図３Ａから図３Ｅを参照しながら以下に示す。
１．ユーザは、カメラを備えた携帯電話を使用して、第１の画像を取り込む（図３Ａ）。
２．スクリーンに、３つの奥行き情報アイコンが表示される。３つのアイコンは、それぞれ「スクリーンの前方」、「スクリーン上」および「スクリーンの後方」を示す。ユーザは、２つの画像の視差に対してどのような影響を及ぼしたいかに基づいて、３つのアイコンのうちの１つを選択する（図３Ｂ）。
３．ユーザは、携帯電話を右に移動させて、右画像の視野を探し出す（図３Ｃ）。
４．スクリーンに、２つの３Ｄカーソルが表示される。１つは、取り込む右画像の目標位置を示し、もう１つは、カメラの現在位置を示す。ユーザは、２つの３Ｄカーソルを平行移動および回転によって重ね合わせる（図３Ｄ）。
５．２つの３Ｄカーソルが重なり合ったら、右画像を取り込む（図３Ｅ）。
【００２０】
システムの説明の１つは、以下のようになる。これは、３Ｄカーソルを駆動するものである。
１．モバイル装置は、左画像を取り込む。
２．システムは、この左画像を第１の画像とし、第１の画像の特徴点を抽出する。
３．スクリーンに、３つの奥行き情報アイコンが表示される。３つのアイコンは、それぞれ「スクリーンの前方」、「スクリーン上」および「スクリーンの後方」を示す。ユーザは、２つの画像の視差に対してどのような影響を及ぼしたいかに基づいて、３つのアイコンのうちの１つを選択する。
４．携帯電話を右に移動させて、右画像の視野を探し出す。
５．システムは、ディスプレイに表示される右ピクチャの特徴点を抽出する。
６．既知の通り、ほとんどの現在の３Ｄディスプレイは、３Ｄステレオの概念に基づいて構築されており、大きな違いは、左眼と右眼のそれぞれ２つの視野を分離する方法である。従って、システムは、特徴点一致方法を用いて２つのピクチャの間の視差を解析する。
７．スクリーンに、２つのピクチャの間の視差を調節するための２つの３Ｄカーソルが表示される。
８．システムは、双方向性最大相関および視差制約に基づいて、特徴点一致方法を用いて、左画像の特徴点マップ、すなわち物体の外側境界を示す特徴点の集合を、右ピクチャの特徴点マップと比較し、これにより、システムは、両マップにおける物体のサイズを解析することができる。２つのマップ中の物体のサイズが同じである場合には、これは、両ピクチャの視距離が同じであることを示している。
９．スクリーンに、２つの３Ｄカーソルが表示される。２つの３Ｄカーソルのサイズが異なる場合には、ユーザは、両カーソルのサイズが同じになるまで、カメラを前方または後方に移動させる。これにより、左画像と右ピクチャの両方の視距離が同じになる。
１０．システムは、両特徴点マップの間の垂直ずれを比較する。
１１．平行移動および回転によって垂直ずれを打ち消すために、２つの３Ｄカーソルがスクリーンに表示される。
１２．２つの３Ｄカーソルが重なり合ったら、右画像を取り込む。システムは、右画像を第２の画像とする。次いで、システムは、第１の画像と第２の画像を正確に結合して、３Ｄステレオ画像にする。
【００２１】
携帯電話の３Ｄ画像取込みシステムの主要なステップを示す流れ図を、図４Ａおよび図４Ｂに示す。ステップ４０１で開始される。ステップ４０３で、ユーザは、単一のカメラによって左画像を取り込む。ステップ４０５で、３Ｄ画像取込みシステムは、この左画像の特徴点を抽出する。ステップ４０７で、３Ｄ画像取込みシステムは、ユーザに対して３Ｄ効果を提示する３つの奥行き情報アイコンをスクリーンに表示する。３つのアイコンは、それぞれ「スクリーンの前方」、「スクリーン上」および「スクリーンの後方」を示す。ステップ４０９で、ユーザは、所望の３Ｄ効果を得るために、３つのアイコンのうちの１つを選択する。ステップ４１１で、ユーザは、カメラを移動させて、右画像の視野を探し出す。ステップ４１３で、３Ｄ画像取込みシステムは、ディスプレイに表示されている右ピクチャの特徴点を抽出する。ステップ４１５で、３Ｄ画像取込みシステムは、左画像と右ピクチャの間の視差を、それらの特徴点マップを比較することによって解析する。ステップ４１７で、３Ｄ画像取込みシステムは、視差調整のための２つの３Ｄカーソルを、ディスプレイに表示する。これらのカーソルの１つは、右画像の目標位置を示し、もう１つは、カメラの現在位置を示す。ステップ４１９で奥行き効果が十分である場合には、プロセスは、ステップ４２１に進む。ステップ４１９で奥行き効果が不十分である場合には、プロセスは、ステップ４１１に戻る。ステップ４２１で、３Ｄ画像システムは、特徴点マップを使用して、左画像および右ピクチャの両方における物体サイズを解析する。ステップ４２３で、３Ｄ画像システムは、左画像および右ピクチャの両方の視距離に関する３Ｄカーソルを、スクリーンに表示する。ステップ４２５で２つの３Ｄカーソルのサイズが同じである場合には、プロセスは、ステップ４２７に進む。ステップ４２５で２つの３Ｄカーソルのサイズが同じでない場合には、プロセスは、ステップ４１１に戻る。ステップ４２７で、３Ｄ画像システムは、特徴点マップを使用して、左画像と右ピクチャの両方の間の垂直ずれを比較する。ステップ４２９で、３Ｄ画像システムは、ユーザがカメラの平行移動および回転によって垂直ずれを打ち消すことができるように、２つの３Ｄカーソルを表示する。ステップ４３１で２つの３Ｄカーソルが重なり合っている場合には、プロセスは、ステップ４３３に進む。ステップ４３１で２つの３Ｄカーソルが重なり合っていない場合には、プロセスは、ステップ４１１に戻る。ステップ４３３で、ユーザは、２つのカーソルが重なり合う位置で右画像を取り込む。ステップ４３５で、３Ｄ画像システムは、左画像と右画像を結合して、３Ｄ画像を作成する。その後、プロセスは、ステップ４３７で終了する。
【００２２】
図５は、本発明の実施形態によるシステム５１０を示す例示的なブロック図である。システム５１０は、携帯電話、コンピュータ・システム、タブレット、携帯ゲーム機、スマートフォンなどとすることができる。システム５１０は、ＣＰＵ（中央処理装置）５１１、カメラ５１２、記憶装置５１３、ディスプレイ５１４、およびユーザ入力モジュール５１５を備える。図５に示すように、ＲＡＭ（ランダム・アクセス・メモリ）などのメモリ５１６を、ＣＰＵ５１１に接続することができる。
【００２３】
カメラ５１２は、単一のレンズで左画像および右画像を取り込む要素である。ＣＰＵ５１１は、上記で説明したように、３Ｄ画像取込みシステムの各ステップを処理する。
【００２４】
ディスプレイ５１４は、テキスト、画像、ビデオおよびその他の任意のコンテンツを、システム５１０のユーザに対して視覚的に提示するように構成される。ディスプレイ５１４は、３Ｄコンテンツに対応していればどのようなタイプのものであってもよい。
【００２５】
記憶装置５１３は、ＣＰＵ５１１が上記で説明したようにプロセスを駆動および動作させて３Ｄ画像を作成するためのソフトウェア・プログラムおよびデータを格納するように構成される。
【００２６】
ユーザ入力モジュール５１５は、文字またはコマンドを入力するためのキーまたはボタンを含むことができ、また、キーまたはボタンを用いて入力された文字またはコマンドを認識する機能も備える。ユーザ入力モジュール５１５は、システムの用途によっては、システムから省略してもよい。
【００２７】
本発明は、携帯電話やタブレットなど、カメラを備えたモバイル装置に適用することができる。複数視点写真は、基本的には一連の隣接したステレオ写真であるので、本発明は、同様のハードウェアおよびソフトウェア構成で、ステレオ写真だけでなく複数視点写真を撮ることができる。
【００２８】
本発明の原理の上記その他の特徴および利点は、当業者なら、本明細書の教示に基づいて容易に確認することができる。本発明の原理の教示は、様々な形態のハードウェア、ソフトウェア、ファームウェア、特殊目的プロセッサまたはそれらの組合せで実施することができることを理解されたい。
【００２９】
本発明の原理の教示は、ハードウェアとソフトウェアの組合せとして実施されることが最も好ましい。さらに、ソフトウェアは、プログラム記憶装置に実装されたアプリケーション・プログラムとして実施することができる。アプリケーション・プログラムは、任意の適当なアーキテクチャを備える機械にアップロードし、この機械によって実行することができる。この機械は、１つまたは複数の中央処理装置（ＣＰＵ）、ランダム・アクセス・メモリ（ＲＡＭ）および入出力（Ｉ／Ｏ）インタフェースなどのハードウェアを有するコンピュータ・プラットフォームで実施されることが好ましい。コンピュータ・プラットフォームは、オペレーティング・システムおよびマイクロ命令コードも備えることができる。本明細書に記載する様々なプロセスおよび機能は、ＣＰＵによって実行することができる、マイクロ命令コードの一部またはアプリケーション・プログラムの一部あるいはそれらの任意の組合せの何れかとすることができる。さらに、追加のデータ記憶装置など、その他の様々な周辺装置をコンピュータ・プラットフォームに接続することもできる。
【００３０】
さらに、添付の図面に示すシステム構成要素および方法の一部はソフトウェアで実施することが好ましいので、システム構成要素間またはプロセス機能ブロック間の実際の接続は、本発明の原理をプログラミングする方法によって異なっていてもよいことも理解されたい。本明細書の教示があれば、当業者なら、本発明の原理の上記の実施態様または構成およびそれらと同様の実施態様または構成を思いつくことができるであろう。
【００３１】
本明細書では、添付の図面を参照して例示的な実施形態について述べたが、本発明の原理は、これらの具体的な実施形態に限定されるわけではなく、当業者なら、本発明の原理の範囲または趣旨を逸脱することなく様々な変更および修正をそれらの実施形態に加えることができることを理解されたい。そうした変更および修正は全て、添付の特許請求の範囲に記載する本発明の原理の範囲に含まれるものとする。
【図１】
2016504828.tif 000003
【図２】
2016504828.tif 000004
【図３Ａ】
2016504828.tif 000005
【図３Ｂ】
2016504828.tif 000006
【図３Ｃ】
2016504828.tif 000007
【図３Ｄ】
2016504828.tif 000008
【図３Ｅ】
2016504828.tif 000009
【図４Ａ】
2016504828.tif 000010
【図４Ｂ】
2016504828.tif 000011
【図５】
2016504828.tif 000012
【手続補正書】
【提出日】平成27年10月28日(2015.10.28)
【手続補正１】
【補正対象書類名】特許請求の範囲
【補正対象項目名】全文
【補正方法】変更
【補正の内容】
【特許請求の範囲】
【請求項１】
第２の画像を取り込んで３Ｄ画像を作成する方法であって、
カメラによって、第１の位置で、右側画像または左側画像のうちの一方となる第１の画像を取り込むステップと、
前記第１の画像の特徴点を抽出するステップと、
前記第１の位置とは異なる位置で、前記右側画像または左側画像のうちの他方となる第２の画像を見つけ出すためにユーザによって撮影されたピクチャの特徴点を抽出するステップと、
前記第１の画像および前記ピクチャの特徴点を比較することによって前記ピクチャ内に２つの３Ｄカーソルを生成して表示するステップであり、前記３Ｄカーソルのうちの一方が前記第２の画像の目標位置を示し、前記３Ｄカーソルのうちの他方が前記カメラの現在位置を示すステップと、
前記カメラを平行移動および回転させることによって前記現在位置を示す前記カーソルが前記目標位置を示す前記カーソルと完全に重なり合ったときに、前記第２の画像を取り込むステップと
を含む、方法。
【請求項２】
前記３Ｄカーソルが、前記第１の画像および前記ピクチャの特徴点マップにおける物体のサイズおよび垂直ずれを解析することによって生成され、前記特徴点マップが、前記第１の画像および前記ピクチャのそれぞれにおける前記物体の外周にある特徴点を示す、請求項１に記載の方法。
【請求項３】
前記第１の画像および前記第２の画像の視差に対する所望の影響を得るための３つの奥行き情報アイコンを表示するステップをさらに含み、前記３つの奥行きアイコンが、それぞれ「前記スクリーンの前方」、「前記スクリーン上」、および「前記スクリーンの後方」を示し、
前記目標３Ｄカーソルの位置が、選択した奥行きアイコンの３Ｄ効果を得るように決定される、請求項２に記載の方法。
【請求項４】
前記２つの３Ｄカーソルのサイズが同じである場合には、前記第１の位置および前記位置の視距離が同じであり、前記カメラを前方または後方に移動させることによって前記２つの３Ｄカーソルの大きさが同じになる、請求項１から３の何れか一項に記載の方法。
【請求項５】
前記第１の画像と前記ピクチャの間の垂直ずれが、前記カメラを平行移動および回転させることによって打ち消される、請求項１から４の何れか一項に記載の方法。
【請求項６】
第２の画像を取り込んで３Ｄ画像を作成する装置であって、
右側画像または左側画像のうちの一方として、第１の位置で第１の画像を取り込み、第２の位置で第２の画像を取り込む、ディスプレイを備えたカメラ、ならびに
前記第１の画像の特徴点、および前記第１の位置とは異なる位置で前記右側画像または左側画像のうちの他方となる前記第２の画像を見つけ出すためにユーザによって撮影されたピクチャの特徴点を抽出するステップと、
前記第１の画像および前記ピクチャの特徴点を比較することによって前記ピクチャ内に２つの３Ｄカーソルを生成して表示するステップであり、前記３Ｄカーソルのうちの一方が前記第２の画像の目標位置を示し、前記３Ｄカーソルのうちの他方が前記カメラの現在位置を示すステップと
を実施するように構成されたプロセッサを備え、
前記第２の画像が、前記カメラを平行移動および回転させることによって前記現在位置を示す前記カーソルが前記目標位置を示す前記カーソルと完全に重なり合ったときに取り込まれる、装置。
【請求項７】
前記３Ｄカーソルが、前記第１の画像および前記ピクチャの特徴点マップにおける物体のサイズおよび垂直ずれを解析することによって生成され、前記特徴点マップが、前記第１の画像および前記ピクチャのそれぞれにおける前記物体の外周にある特徴点を示す、請求項６に記載の装置。
【請求項８】
前記第１の画像および前記第２の画像の視差に対する所望の影響を得るための３つの奥行き情報アイコンが前記ディスプレイに表示され、前記３つの奥行きアイコンが、それぞれ「前記スクリーンの前方」、「前記スクリーン上」、および「前記スクリーンの後方」を示し、
前記目標３Ｄカーソルの位置が、選択した奥行きアイコンの３Ｄ効果を得るように決定される、請求項７に記載の装置。
【請求項９】
前記２つの３Ｄカーソルのサイズが同じである場合には、前記第１の位置および前記位置の視距離が同じであり、前記カメラを前方または後方に移動させることによって前記２つの３Ｄカーソルの大きさが同じになる、請求項６から８の何れか一項に記載の装置。
【請求項１０】
前記第１の画像と前記ピクチャの間の垂直ずれが、前記カメラを平行移動および回転させることによって打ち消される、請求項６から９の何れか一項に記載の装置。
【国際調査報告】
2016504828.tif 000013
2016504828.tif 000014
2016504828.tif 000015