(57)【要約】【課題】小さい表示画面しか設けられていない場合でも合成画像を作成する際に確認しやすくする。【解決手段】カメラ入力部（１−１）と、一時作業メモリ（１−２）と、画像処理部（１−３）と、データ格納メモリ（１−４）と、画像表示部（１−５）と、キー入力部（１−６）とを有している。データ格納メモリ（１−４）は、撮影された撮影済み画像に関する画像データを記憶する。画像表示部（１−５）は、撮影対象画像及びデータ格納メモリ１−４に記憶された画像データに基づく記憶画像のうち少なくとも一方を表示する。さらに、記録画像と撮影対象画像とを合成した合成画像を作成する処理を行うとともに、記録画像と撮影対象画像とを並べて表示させた仮想的な合成画像を、現在の撮影対象画像に重ね合わせて画像表示部（１−５）に表示させる合成補助機能を有する。【選択図】  図１
2004242155.tif 000002
【特許請求の範囲】
【請求項１】
撮影部と、
該撮影部により撮影された撮影済み画像に関する画像データを記憶する画像データ記憶部と、
撮影対象画像及び前記記憶部に記憶された前記画像データに基づく記憶画像のうち少なくとも一方を表示する表示部と、
前記記録画像と撮影対象画像とを合成した合成画像を作成する処理を行う画像合成処理部と、
前記記録画像と撮影対象画像とを並べて表示させた仮想的な合成画像を、現在の撮影対象画像に重ね合わせて前記表示部に表示させる合成補助機能を有する表示制御部と
を有する撮影装置。
【請求項２】
前記表示制御部は、さらに、前記仮想的な合成画像を拡大又は縮小して表示させる表示サイズ変更機能を有していることを特徴とする請求項１に記載の撮影装置。
【請求項３】
前記表示制御部は、さらに、前記仮想的な合成画像又は前記現在の撮影対象画像のうちの少なくとも一方を相対的に移動させる表示位置変更機能を有していることを特徴とする請求項１又は２に記載の撮影装置。
【請求項４】
さらに、前記仮想的な合成画像又は前記現在の撮影対象画像のうちの少なくとも一方をスクロールさせるスクロール手段を有することを特徴とする請求項１又は２に記載の撮影装置。
【請求項５】
さらに、前記表示部に、前記現在の撮影対象画像と並べて前記記録画像の一部を表示することを特徴とする請求項１から４までのいずれか１項に記載の撮影装置。
【請求項６】
撮影部と、
該撮影部により撮影された撮影済み画像に関するデータを記憶する記憶部と、
撮影対象画像及び前記記憶部に記憶された第２画像データに基づく記憶画像のうち少なくとも一方を表示する表示部と、
前記記録画像と撮影対象画像とを合成した合成画像を作成する処理を行う画像合成処理部と、
前記記録画像と撮影対象画像とを並べて表示させた仮想的な合成画像を表示する合成補助機能を有する表示制御部と
を有する撮影装置。
【請求項７】
請求項１から６までのいずれか１項に記載の撮影装置を備えた携帯端末。
【発明の詳細な説明】
【０００１】
【発明の属する技術分野】
本発明は、合成写真の撮影が可能な撮影装置に関し、特に、撮影済み画像と撮影対象画像との仮想的な合成画像を補助的に表示することができる合成補助機能を有する撮影装置に関する。
【０００２】
【従来の技術】
合成写真、例えばパノラマ写真を撮影することができる撮影装置においては、いかに簡単かつ確実に合成写真を作成するかが重要であり、特に、前に撮影した第１合成対象画像に対して、後に撮影する第２合成対象画像をいかに位置合わせして撮影するかが重要なポイントとなる。
【０００３】
従来の合成写真撮影機能、例えばパノラマ撮影機能を有する装置は、例えば２枚の撮影画像を横方向に合成してパノラマ画像を作成する際に、１枚目の第１合成対象画像を撮影した後に、これから撮影する２枚目の第２合成対象画像の撮影をアシストするために、例えば１枚目の画像の右側に２枚目の撮影画像をつなぐ場合には、第１合成対象画像を撮影装置の表示部に表示させた後に左方向にシフトし、第２合成対象画像の左側とつなげる第１合成対象画像の右側の一部を撮影操作画面上に残して撮影を容易にする方法（例えば特許文献）や、第１合成対象画像全体を画面上の一部に残しておき、別枠に撮影画像を表示することにより、パノラマにした際の画像を確認しながら２枚目の撮影を行う方法（例えば特許文献２）などがある。
【０００４】
【特許文献１】
特開平５−１４２６８２号公報
【特許文献２】
特開２０００−９０２３２号公報
【０００５】
【発明が解決しようとする課題】
１枚目の画像をシフトして一部表示させておく技術（特許文献１）では、１枚目に撮影した画像の一部のみを２枚目の撮影時に表示部に表示させるため、撮影画像によっては位置合わせをすることが困難な場合がある。例えば先の例のように１枚目の左側に２枚目をつなぎ合わせて表示させた場合に、１枚目の左側に２枚目とつなぎ合わせるのに役立つ特徴物などが含まれていない場合などが該当する。
【０００６】
また、これを解決するために全画面を表示した技術（特許文献２）では、広い表示部（表示画面）を必要とするため、パーソナルコンピュータ（ＰＣ）の画面などの大きな画面を有している装置であれば特に問題にならないが、携帯端末やデジタルカメラなどの小さい画面を有する装置の場合には、全画面ともう一つ独立した撮影画面を表示すると、画面がいずれかにより占有されるため一方が見にくくなり、操作も難しくなる。
【０００７】
また、位置的に分離し独立した２つの枠が例えば上と下に表示されていた場合、両方の画面に注意しながらの撮影するのは、同時に離れた２ヶ所を注力しにくいため、操作がしずらいという問題点もあった。
【０００８】
【課題を解決するための手段】
本発明の一観点によれば、撮影部と、該撮影部により撮影された撮影済み画像に関する画像データを記憶する画像データ記憶部と、撮影対象画像及び前記記憶部に記憶された前記画像データに基づく記憶画像のうち少なくとも一方を表示する表示部と、前記記録画像と撮影対象画像とを合成した合成画像を作成する処理を行う画像合成処理部と、前記記録画像と撮影対象画像とを並べて表示させた仮想的な合成画像を、現在の撮影対象画像に重ね合わせて前記表示部に表示させる合成補助機能を有する表示制御部とを有する撮影装置が提供される。
【０００９】
仮想的な合成画像中の撮影対象画像は、装置を移動させる動作に伴って移動し、位置合わせの目安として役立つ。上記撮影装置によれば、携帯端末のような小さい画面でも十分な見やすい画面表示ができるようになる。また、一度に離れた２ヶ所に注力するよりも、同じ視線上に２つの情報が表示されることで操作が非常にしやすくなる。
【００１０】
前記表示制御部は、さらに、前記仮想的な合成画像を拡大又は縮小して表示させる表示サイズ変更機能を有しているのが好ましい。拡大画面の位置が画像の種類により最適でない時にその拡大画面の位置をずらすことによって、より操作性が良くなる。
【００１１】
前記表示制御部は、さらに、前記仮想的な合成画像又は前記現在の撮影対象画像のうちの少なくとも一方を相対的に移動させる表示位置変更機能を有しているのが好ましい。全画面の表示位置が画像の種類により最適でない時にその拡大画面の位置をずらすことによって、より操作性が良くなる。
【００１２】
さらに、前記仮想的な合成画像又は前記現在の撮影対象画像のうちの少なくとも一方をスクロールするスクロール手段を有するのが好ましい。合成した画面を確認するときに縮小表示をしなければディスプレイ全体に表示しきれない場合、縮小せずに合成結果を確認できるようになる。
【００１３】
要するに、本発明による撮影装置によれば、記録画像の縮小表示と取り込み画像の拡大表示を重ねて表示することで、携帯端末のような小さい画面でも十分な見やすい画面表示ができるようになる。また、一度に離れた２ヶ所に注力するよりも、同じ視線上に２つの情報が表示されることで操作が非常にしやすくなる。
【００１４】
【発明の実施の形態】
以下に、本発明の一実施の形態による撮影装置について図面を参照しつつ説明を行う。
図１は、本実施の形態による撮影装置の概略構成を示す機能ブロック図である。図１に示すように、本実施の形態による撮影装置は、カメラ入力部（１−１）と、一時作業メモリ（１−２）と、画像処理部（１−３）と、データ格納メモリ（１−４）と、画像表示部（１−５）と、キー入力部（１−６）とを有している。
【００１５】
図１に示す撮影装置においては、画像を撮影するためのカメラ入力部（１−１）から画像が取り込まれ、一時作業用メモリ（１−２）に画像データが一時的に格納される。この一時作業用メモリ（１−２）は、バッファメモリとしての機能と画像処理用メモリとしての機能とを有している。画像処理部（１−３）は、入力された画像とデータ格納用メモリ（１−４）に格納されている既に撮影された画像データとを、画面表示部（１−５）にデータを転送したり、一時作業用メモリ（１−２）内に格納されている画像データをデータ格納メモリ（１−４）に転送したり、画像の合成処理、重ね合わせ処理、拡大縮小などの表示変更処理を行う。処理選択などを行うインターフェースとしては、キー処理部（１−６）が用いられる。
【００１６】
次に、本実施の形態による撮像装置を用いた画像合成技術について、図面を参照しつつ説明を行う。図２（Ａ）及び（Ｂ）は、本実施の形態による画像表示方法を説明するための図である。図３は、画像を２枚撮影しパノラマ合成する処理の流れを示すフローチャート図であり、図２（Ａ）の表示方法により画像を表示させた場合の図である。図４は、画像を２枚撮影しパノラマ合成する処理の流れを示すフローチャート図であり、図２（Ｂ）の表示方法により画像を表示させた場合の図である。本実施の形態においては、画像合成処理の例として、パノラマにする画像を２枚撮影し、横方向につなぎ合わせる場合について説明する。この際、１枚目に撮影する画像を向かって左側に表示させ、２枚目に撮影する画像は右側に表示させるものとする。図１も参照しながら説明する。
【００１７】
まず、１枚目の画像を撮影し、その画像データをカメラ入力部（１−１）から入力する（ステップ［３−１］）。次いで、その画像データを一時作業用メモリ（１−２）に一時的に格納する（ステップ［３−２］）。パノラマ合成に用いる１枚目の画像データとしてこれを用いるか否かを確認し（ステップ［３−３］）、良い場合には画像をデータ格納メモリ（１−４）内に保存する（ステップ［３−４］）。そうでない場合には、ステップ［３−１］に戻り、再度１枚目の撮影を行う。
【００１８】
１枚目の画像は、例えば、図２（Ａ）に示す表示画面中の符号Ａで示される範囲に収まり１枚目の画像の右側部分だけが残るように左シフトして画像表示部（１−５）に表示させる（ステップ［３−５］）。１枚目の画像の右側領域Ｂには、次に（２枚目に）撮影する画像であって、１枚目の画像と合成する対象である画像と位置を合わせるための指標となる。図２（Ａ）のＡ領域以外の部分（Ｂ領域内）、例えばＢ領域の図面における上下方向の中央左側付近のＣ領域に、１枚目に撮影した画像の全体を縮小させて表示する（ステップ［３−６］）。ここで、全体画像を「Ａ−Ｂ領域」と称する。
【００１９】
これにより、ユーザは、１枚目に撮影した画像の全体像を把握しやすくなる。１枚目の写真につなぎ合わせる対象として２枚目の画像を画像表示部（１−５）に表示させる（ステップ［３−７］）。この際、リアルタイムで図２（Ａ）のＢ領域とそれに隣接し領域として画定されるＤ領域に、カメラから現在入力されている画像の縮小画像を１枚目の画像と同程度に縮小して表示させ（これを「モニタ画像（Ｃ−Ｄ領域）」と称する。）、撮影時のアシストとする（ステップ［３−８］）。
【００２０】
この際、矢印ＡＲ１又は矢印ＡＲ２に示されるように、モニタ画像（Ｃ−Ｄ領域）を上下（又は左右）に移動させることができる機能を別途設けることにより、画像表示部（１−５）中のユーザが見やすい位置にモニタ画像（Ｃ−Ｄ領域）を移動させることができ、全体画像（Ａ−Ｂ領域）とモニタ画像（Ｃ−Ｄ領域）とを見比べながら、実際のパノラマ画像を撮影することができる。すなわち、ユーザが、画像表示部（１−５）のＢ領域とこれに隣接するＤ領域とによるモニタ画像を合成写真の目安として２枚目の画像を撮影し、一時作業メモリ（１−２）に格納する（ステップ［３−１０］）。
【００２１】
次いで、データ格納メモリ（１−４）に保存されている１枚目の画像との間でパノラマ合成を画像処理部（１−３）において行う（ステップ［３−１１］）。最後に、合成画像を確認した後、合成画像をデータ格納メモリに保存する［ステップ３−１２］。
【００２２】
次に、上記の実施の形態の変形例による技術であって、２枚の画像をパノラマにつなぎ合わせる際に全体表示部分の方を上下させる技術について、図２（Ｂ）と図４とを参照しつつ説明を行う。まず、１枚目の画像をカメラ入力部（１−１）から入力する（ステップ［４−１］）。次いで、１枚目の画像を一時作業用メモリ（１−２）に一時格納する（ステップ［４−２］）。撮影データがこれで良いか否かを確認し（ステップ［４−３］）、良い場合には、画像をデータ格納メモリ（１−４）に保存する（ステップ［４−４］）。そうでない場合は再度１枚目の撮影を行う（ステップ［４−１］）。
【００２３】
１枚目の画像を左シフトさせて、図２（Ｂ）のＡ領域に画像の右側だけが残るように表示をさせる（ステップ［４−５］）。Ａ領域の画像は、合成対象として２枚目に撮影する画像と１枚目の画像との位置を合わせるための指標として用いる。それと同時に、図２（Ｂ）のＣ領域に１枚目に撮影した画像を表示する（ステップ［４−６］）。これは１枚目に撮影した画像の全体を把握するためである。全体領域（Ａ−Ｂ）及びモニタ画像（Ｃ−Ｄ）に関しては、上記第１の実施の形態の場合と同様に用いる。
【００２４】
次に、つなぎ合わせる対象である２枚目の画像をカメラ入力し（ステップ［４−７］）。その際、リアルタイムで図２（Ｂ）のＢ領域とＤ領域とにカメラから入力されている画像を表示し、撮影のアシストとする（ステップ［４−８］）。
【００２５】
ここでキー入力を受け付け、全体画像（Ｃ−Ｄ）を矢印ＡＲ３のように上にずらす（ステップ［４−１０］）か、或いは、全体画像（Ａ−Ｂ）を下にずらす（ステップ［４−１１］）か、あるいは実際に撮影を行うか、の３つの動作のいずれかを行う。上下ずらし動作（ステップ［４−１０］、ステップ［４−１１］のいずれかの処理）の後には、カメラ入力に戻る（ステップ［４−７］）。
【００２６】
撮影の場合には、一時作業用メモリ（１−２）に２枚目画像データを格納し（ステップ［４−１２］）、これで良ければデータを取り込み（ステップ［４−１３］）、画像合成処理を行い（ステップ［４−１４］）、その後に、パノラマ合成画像をデータ格納メモリ内に保存する（ステップ［４−１５］）。取り込みが良好でない場合（ステップ［４−１３］）は、カメラ入力処理（ステップ［４−７］）に戻る。
【００２７】
以上に説明したように、本実施の形態による撮影装置によれば、記録画像の縮小表示と取り込み画像の拡大表示を重ねて表示することにより、例えば、携帯端末のような小さい画面でも両方を見やすい画面構図で表示することができる。また、一度に離れた２ヶ所に注力するよりも、同じ視線上に２つの情報が表示されることにより操作が非常にしやすくなる。また、拡大画面の位置が画像の種類により適正な位置に表示されていない場合にその拡大画面の位置をずらすことにより、操作性が良くなる。
【００２８】
尚、縮小表示又は拡大表示をスクロールさせるスクロール手段を設ければ、画面上の表示を簡単に移動させることができるため、ユーザに取って便利である。すなわち、全画面の表示位置が画像の種類により適切でない場合にも、その拡大画面の位置をずらすことにより、操作性が良くすることもできる。合成した画面を確認するときに縮小表示をしなければディスプレイ全体に表示しきれない場合、縮小せずに合成結果を確認できるようになる。
【００２９】
【発明の効果】
本発明の撮影装置によれば、記録画像の縮小表示と取り込み画像の拡大表示を重ねて表示することにより、携帯端末のような小さい表示画面しか設けられていない場合でも合成画像を作成する際に確認しやすい。また、離れた２ヶ所に注力するよりも、同じ視線上に２つの情報が表示されることにより操作が非常にやりやすくなる。また、画面上での画像位置をずらすことにより、操作性が良くなる。
【図面の簡単な説明】
【図１】本発明の一実施の形態によるパノラマ撮影装置の構成例を示す機能ブロック図である。
【図２】図２（Ａ）及び図２（Ｂ）は、図１に示すパノラマ撮影装置における画面構成例を示す図であり、図２（Ａ）はモニタ画面の位置をずらす例、図２（Ｂ）は全体画面の位置をずらす例を示す図である。
【図３】図２（Ａ）に示す例に関するパノラマ写真を合成する処理の流れを示すフローチャート図である。
【図４】図２（Ｂ）に示す例に関するパノラマ写真を合成する処理の流れを示すフローチャート図である。
【符号の説明】
（１−１）  カメラ入力部、（１−２）  作業用メモリ、（１−３）  画像処理部、（１−４）  データ格納メモリ、（１−５）  画像表示部、（１−６）  キー入力部。
【図１】
2004242155.tif 000003
【図２】
2004242155.tif 000004
【図３】
2004242155.tif 000005
【図４】
2004242155.tif 000006