(57)【要約】【課題】  撮影画像を、その内容に応じた加工を施して使用する際の利便性に優れた画像処理システム及び画像処理方法と、それに使用する電子カメラ及び画像処理装置を提供する。【解決手段】  デジタルカメラ等において、自己が撮影により記録した画像Ｇを札製モードでモニタに表示しているとき、ユーザーから正面撮影補正（台形歪み補正）が指示されたら、表示画像Ｇにおいて、補正に際して基準となる四角形の輪郭線ｆ１，ｆ２を認識する。認識した輪郭線ｆ１，ｆ２に重なる四角枠Ｆを、ユーザーの切替操作に応じて順に移動させ所望の輪郭線を選択させる。確定操作に応じ、選択された輪郭線ｆ１の４頂点Ａ〜Ｄの座標情報を、表示画像Ｇの画像ファイルのヘッダ部分に書込む。その後、画像処理装置において、画像Ｇに対し正面撮影補正を行うときには、画像ファイルから座標情報を読み出し、それにより示される４頂点を有する四角形を基準とする補正を実施する。【選択図】      図６
2006005971.tif 000002
【特許請求の範囲】
【請求項１】
被写体を撮像する撮像手段と、
この撮像手段により撮像された画像を記録する画像記録手段と、
この画像記録手段に記録されている画像に基づき、その画像に対する所定の加工に使用される加工情報を取得する取得手段と、
この取得手段により取得された加工情報を、取得元の画像に対応付けて記録する加工情報記録手段とを備えた電子カメラと、
この電子カメラにより撮像され記録された画像に対し、その画像に対応付けて前記電子カメラにより記録された加工情報に基づき所定の加工を行う画像処理手段を備えた画像処理装置と
を含むことを特徴とする画像処理システム。
【請求項２】
電子カメラにより撮像され記録された画像に基づき、その画像に対する所定の加工に使用される加工情報を取得する工程と、
取得した加工情報を、取得元の画像に対応付けて記録する工程と、
前記画像に対し、その画像に対応付けて記録しておいた前記加工情報に基づき所定の加工を行う工程と
を含むことを特徴とする画像処理方法。
【請求項３】
被写体を撮像する撮像手段と、
この撮像手段により撮像された画像を記録する画像記録手段と、
この画像記録手段に記録されている画像に基づき、その画像に対する所定の加工に使用される加工情報を取得する取得手段と、
この取得手段により取得された加工情報を、取得元の画像に対応付けて記録する加工情報記録手段と
を備えたことを特徴とする電子カメラ。
【請求項４】
前記加工情報記録手段は前記画像記録手段であるとともに、前記加工情報は取得元の画像に付加された状態で記録されることを特徴とする請求項１記載の電子カメラ。
【請求項５】
前記取得手段により取得される加工情報は、前記画像における所定の領域を示す座標情報を含むことを特徴とする請求項３又は４記載の電子カメラ装置。
【請求項６】
前記画像記録手段に記録されている画像を表示する表示手段と、
この表示手段に、前記取得手段により取得された加工情報の内容を示す確認表示を、当該加工情報の取得元の画像と共に表示させる制御手段と
を備えたことを特徴とする請求項３，４又は５記載の電子カメラ装置。
【請求項７】
前記制御手段は、前記取得手段により取得された加工情報が複数存在するとき、その複数の加工情報の内容をそれぞれ示す確認表示を、使用者による切替操作に応じて切り替えながら前記表示手段に表示させるとともに、使用者による確定操作に応じ、前記表示手段に表示させている確認表示に対応する加工情報を前記加工情報記録手段に記録させることを特徴とする請求項６記載の電子カメラ装置。
【請求項８】
撮像手段により撮像した画像を画像記録手段に記録する電子カメラが有するコンピュータに、
前記画像記録手段に記録されている画像に基づき、その画像に対する所定の加工に使用される加工情報を取得する処理と、
この取得手段により取得された加工情報を、取得元の画像に対応付けて加工情報記録手段に記録させる処理と
を実行させるためのプログラム。
【請求項９】
電子カメラにより撮像され記録された画像に対し、その画像に対応付けて前記電子カメラにより記録された加工情報に基づき所定の加工を行う画像処理手段を備えたことを特徴とする画像処理装置。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、撮影により記録された画像に所定の加工を行う画像処理システム及び画像処理方法と、それに使用する電子カメラ及び画像処理装置に関するものである。
【背景技術】
【０００２】
例えばカメラによって原稿等を撮影する場合、原稿等に対して正対した位置で撮影を行わないと、撮影により得られる画像内では、原稿等にいわゆる台形歪みが生じる。これに関し、下記特許文献１には、ＣＣＤ等の撮像素子を備えた電子カメラにおいて、撮影した原稿等の画像に存在する台形歪みの補正（正面撮影補正）を、電子カメラに画像処理回路を設け、電子カメラ自体に行わせる方法が記載されている。
【０００３】
ところで、前述した撮影画像に対する正面撮影補正を、一般的な電子カメラに行わせる場合、その画像処理能力には限界があり、正面撮影補正に要する画像処理には多大な時間を要する。そのため、電子カメラで撮影した画像に対する正面撮影補正は、別途用意したパソコン等の他の画像処理装置を用いて行われるのが一般的である。
【特許文献１】特開２００２−３５４３３１号公報（「００１５」、「００１６」段落参照）
【発明の開示】
【発明が解決しようとする課題】
【０００４】
しかしながら、前述した撮影画像に対する正面撮影補正を、電子カメラではなく、別途用意したパソコン等を用いて電気的に行う際には、撮影画像内に正面撮影補正の基準となる領域、つまり補正の方向や度合を決定するための補正基準（通常は四角形の領域）が必要があり、また、その補正基準は、撮影画像（被写体）の内容に応じて設定する必要がある。
【０００５】
そのため、正面撮影補正を行った後の撮影画像を必要とする場合、正面撮影補正に必要な作業の全てをパソコン等を用いなければ行うことができず、不便であるという問題があった。特に補正後の撮影画像を多数用意する場合には、それが顕著であった。
【０００６】
本発明は、かかる従来の課題に鑑みてなされたものであり、撮影画像を、その内容に応じた加工を施して使用する際の利便性に優れた画像処理システム及び画像処理方法と、それに使用する電子カメラ及び画像処理装置を提供することを目的とする。
【課題を解決するための手段】
【０００７】
前記課題を解決するため請求項１の発明にあっては、被写体を撮像する撮像手段と、この撮像手段により撮像された画像を記録する画像記録手段と、この画像記録手段に記録されている画像に基づき、その画像に対する所定の加工に使用される加工情報を取得する取得手段と、この取得手段により取得された加工情報を、取得元の画像に対応付けて記録する加工情報記録手段とを備えた電子カメラと、この電子カメラにより撮像され記録された画像に対し、その画像に対応付けて前記電子カメラにより記録された加工情報に基づき所定の加工を行う画像処理手段を備えた画像処理装置とを含むことを特徴とする画像処理システムとした。
【０００８】
かかる構成においては、電子カメラで撮影され記録された画像、すなわち撮影画像は、画像処理装置において、電子カメラによって事前に取得され、かつ撮影画像に対応付けられて記録されていた加工情報に基づき所定の加工を行われる。したがって、電子カメラを単独で使用している任意の時点で、しかも画像処理装置がない状況下であっても撮影画像の加工に必要な設定等を行うことができる。
【０００９】
また、請求項２の発明にあっては、電子カメラにより撮像され記録された画像に基づき、その画像に対する所定の加工に使用される加工情報を取得する工程と、取得した加工情報を、取得元の画像に対応付けて記録する工程と、前記画像に対し、その画像に対応付けて記録しておいた前記加工情報に基づき所定の加工を行う工程とを含む画像処理方法とした。
【００１０】
かかる方法においても、電子カメラを単独で使用している任意の時点で、しかも画像処理装置がない状況下であっても撮影画像の加工に必要な設定を行うことができる。
【００１１】
また、請求項３の発明にあっては、被写体を撮像する撮像手段と、この撮像手段により撮像された画像を記録する画像記録手段と、この画像記録手段に記録されている画像に基づき、その画像に対する所定の加工に使用される加工情報を取得する取得手段と、この取得手段により取得された加工情報を、取得元の画像に対応付けて記録する加工情報記録手段とを備えたことを特徴とする電子カメラとした。
【００１２】
かかる構成においては、それを用いることにより請求項１のシステムや請求項２の方法が実現可能となる。
【００１３】
また、請求項４の発明にあっては、前記加工情報記録手段は前記画像記録手段であるとともに、前記加工情報は取得元の画像に付加された状態で記録されるものとした。
【００１４】
かかる構成においては、画像と加工情報とが一体不可分に記録されるため、他の装置における双方の扱いが容易となる。
【００１５】
また、請求項５の発明にあっては、前記取得手段により取得される加工情報は、前記画像における所定の領域を示す座標情報を含むものとした。
【００１６】
また、請求項６の発明にあっては、前記画像記録手段に記録されている画像を表示する表示手段と、この表示手段に、前記取得手段により取得された加工情報の内容を示す確認表示を、当該加工情報の取得元の画像と共に表示させる制御手段とを備えたものとした。
【００１７】
かかる構成においては、使用者が、撮影画像に対する加工情報の内容を確認表示によって確認することができる。つまり実際の加工内容を知ることができる。同時に加工情報が取得できたか否か、つまり撮影画像の加工が可能か否かを知ることができる。
【００１８】
また、請求項７の発明にあっては、前記制御手段は、前記取得手段により取得された加工情報が複数存在するとき、その複数の加工情報の内容をそれぞれ示す確認表示を、使用者による切替操作に応じて切り替えながら前記表示手段に表示させるとともに、使用者による確定操作に応じ、前記表示手段に表示させている確認表示に対応する加工情報を前記加工情報記録手段に記録させるものとした。
【００１９】
かかる構成において、使用者は、撮影画像に対する加工情報が複数取得されたとき、実際に撮影画像の加工に使用する加工情報の選択、つまり加工内容の選択が可能となる。
【００２０】
また、請求項８の発明にあっては、撮像手段により撮像した画像を画像記録手段に記録する電子カメラが有するコンピュータに、前記画像記録手段に記録されている画像に基づき、その画像に対する所定の加工に使用される加工情報を取得する処理と、この取得手段により取得された加工情報を、取得元の画像に対応付けて加工情報記録手段に記録させる処理とを実行させるためのプログラムとした。
【００２１】
また、請求項９の発明にあっては、電子カメラにより撮像され記録された画像に対し、その画像に対応付けて前記電子カメラにより記録された加工情報に基づき所定の加工を行う画像処理手段を備えたことを特徴とする画像処理装置とした。
【００２２】
かかる構成においては、それを用いることにより請求項１のシステムや請求項２の方法が実現可能となる。
【発明の効果】
【００２３】
本発明の画像処理システムにおいては、電子カメラを単独で使用している任意の時点で、しかも画像処理装置がない状況下であっても撮影画像の加工に必要な設定を行うことができる。よって、撮影画像を、その内容に応じた加工を施して使用する際の利便性に優れた画像処理システムの提供が可能となる。
【００２４】
また、本発明の電子カメラや画像処理装置においては、それらを用いることにより、本発明の画像処理システムを実現することができる。特に、請求項４の電子カメラを用いることにより、画像と加工情報とが一体不可分に記録されるため、他の装置、つまり画像処理装置における双方の扱いが容易となる。また、請求項６の電子カメラを用いることにより、使用者が、それを単独で使用している間に、撮影画像に対する実際の加工内容を知ることができ、撮影画像の加工が可能か否かを知ることができるため、使い勝手を向上させることができる。さらに、請求項７の電子カメラを用いることにより、使用者が撮影画像に対する実際の加工内容を選択できるため、より一層、使い勝手を向上させることができる。
【発明を実施するための最良の形態】
【００２５】
以下、本発明の一実施の形態を図にしたがって説明する。図１は、本発明に係る画像処理システムを含む撮像投影システムの構成図である。
【００２６】
この撮像投影システムは、プロジェクタ１とノート型のパーソナルコンピュータ（以下、ＰＣ）２と書画カメラ３とによって構成されている。プロジェクタ１とＰＣ２とはＲＧＢケーブル１００を介して接続されており、ＰＣ２と書画カメラ３はＵＳＢケーブル２００を介して接続されている。なお、本実施の形態においてはＰＣ２が本発明の画像処理装置である。
【００２７】
プロジェクタ１は、投影レンズ等の光学系が収容された投影部１ａが本体正面に設けられた構造であって、ＰＣから送られたドキュメント等の画像に応じた投射光を投影部１ａからスクリーンＳ（又はホワイトボード等）に投射する。また、プロジェクタ１には赤外線リモートコントロールユニット５が付属しており、それを用いることにより離れた場所からのプロジェクタ１の操作が可能となっている。
【００２８】
書画カメラ３は、カメラ台３１と、それに立設された支柱３２とからなるスタンド３３と、支柱３２の上端部に上下左右に回動自在に設けられた図示しない装着部に着脱自在に取り付けられたデジタルカメラ４とから構成されている。デジタルカメラ４は、ＡＥ機能、ＡＦ機能等を有する一般的な仕様を有するとともに、撮像により取得した画像データを出力するＰＣカメラとして機能する所定の撮影モードを備えている。
【００２９】
そして、撮像投影システムにおいては、図示したようにカメラ台３１の上に新聞や、雑誌の記事、プレゼン用紙、書面原稿等の書面資料Ａ、あるいは各種の立体資料を載置し、それをデジタルカメラ４によって撮影するとともに、撮影した画像をＰＣ２を介してプロジェクタ１に送ることにより、書面資料Ａ等がスクリーンＳに投影できるようになっている。
【００３０】
一方、図２は、上記撮像投影システムにおける主としてプロジェクタ１とＰＣ２との電気的構成の概略を示すブロック図である。
【００３１】
（プロジェクタの構成）
プロジェクタ１は、ＣＰＵ１１、ＲＯＭ１２、ＲＡＭ１３、画像入力部１４、表示部１５、キー入力部１６、赤外信号受信部１７を備えている。画像入力部１４には、前記ＲＧＢケーブル１００が接続されたＲＢＧ信号の入力端子１８が接続されており、ＰＣ２から入力した入力画像信号（ＲＧＢ信号）に基づき、画像を投影するための表示信号を生成し表示部１５へ送る。表示部１５は、クリプトンランプ等の光源、及び光源の光を、入力表示信号に応じた投影光に変換するための液晶やマイクロミラーアレイ等の画像変換素子（本発明の画像変換手段）、その画像変換素子を、画像入力部１４から送られた表示信号に基づき駆動する駆動回路、前記投影部１ａに設けられている投影レンズ等の光学系を含み、ＰＣ２から送られた画像データに基づく表示画像をスクリーンＳに投影する。
【００３２】
ＣＰＵ１１は、ＲＯＭ１２に格納されているプログラムに従いＲＡＭ１３を作業用メモリとして動作し、プロジェクタ１全体を制御する。キー入力部１６は、ユーザーがプロジェクタ１の操作を行うために用意された複数の操作キーにより構成されており、赤外信号受信部１７は、前述した赤外リモコン５から送られた赤外線を受光し、それにコード化されている操作信号をデコードしてＣＰＵ１１へ送る。
【００３３】
（ＰＣの構成）
一方、ＰＣ２は、ＣＰＵ２１と、ＲＡＭ２２、記憶装置２３、入力装置２４、ビデオアダプタ２５、ＶＲＡＭ２６、表示装置２７を備えている。
【００３４】
ビデオアダプタ２５は、表示用のビデオ信号（ＲＧＢ信号）を生成し、ＬＣＤ及びその駆動回路等からなる前記表示装置２７に出力し、ＶＲＡＭ２６は、ビデオアダプタ２５が生成した表示用の画像データを随時記憶する。また、ビデオアダプタ２５には、前記ＲＧＢケーブル１００が接続されたＲＢＧ出力端子２８が設けられており、ビデオアダプタ２５は、ＣＰＵ２１の命令に応じて表示用の画像データをＲＧＢケーブル１００を介してプロジェクタ１へ出力する。
【００３５】
また、ＣＰＵ２１には図示しないＵＳＢインターフェース回路が接続されており、そこに設けられているＵＳＢ接続端子２９に前記ＵＳＢケーブル２００が接続されている。そして書画カメラ３により撮影された撮影画像のデータはＵＳＢケーブル２００を介してＰＣ２に入力する。
【００３６】
入力装置２４は、ＰＣ２本体に設けられた複数のキーや、本体に接続されたマウス等であり、記憶装置２３は記憶容量の比較的大きなハードディスク等である。前記記憶装置２３には、プレゼンテーション用のドキュメントの作成・編集を行うための所定のプレゼンテーション・プログラムや、後述する撮影画像に対する各種の画像処理を行うための画像処理プログラム、及びビデオアダプタ２５に、表示装置２７に上記ドキュメントや画像等を表させるための表示用の画像データや、プロジェクタ１に出力する画像データを生成させるための画像表示プログラム等が格納されている。
【００３７】
そして、ＰＣ２においては、ＣＰＵ２１が上記画像処理プログラムに基づき動作することにより本発明の画像処理手段として機能する。
【００３８】
（デジタルカメラの構成）
図３は、主として書画カメラ３を構成するデジタルカメラ４の電気的構成を示すブロック図である。デジタルカメラ４は、前記書面資料Ａ等を撮像する撮像素子であるＣＣＤ４１と、ＤＳＰ／ＣＰＵ４２を有している。ＣＣＤ４１は、図示しないフォーカスレンズ、及びズームレンズ等の光学系を介して結像された被写体の光学像を光電変換し、被写体の光学像に応じたアナログの撮像信号を出力する。
【００３９】
ＤＳＰ／ＣＰＵ４２は、ＪＰＥＧ方式による画像データの圧縮・伸張を含むデジタル信号処理を行うとともにデジタルカメラ４の各部を制御するワンチップマイコンである。ＤＳＰ／ＣＰＵ４２には、ＣＣＤ４１を駆動するＴＧ（Timing Generator）４３が接続され、ＴＧ４３には、ＣＣＤ４１から出力される撮像信号が入力するユニット回路４４が接続されている。ユニット回路４４は、相関二重サンプリングによりＣＣＤ４１の出力信号等のノイズを除去するＣＤＳ回路、ノイズが除去された撮像信号を増幅するゲイン調整用アンプ（ＡＧＣ）、増幅後の撮像信号をデジタル信号に変換するＡ／Ｄ変換器（ＡＤ）から構成されており、ＣＣＤ４１の出力信号はユニット回路４４にてデジタル信号に変換されＤＳＰ／ＣＰＵ４２に送られる。
【００４０】
また、ＤＳＰ／ＣＰＵ４２には、レンズ駆動部４５、ＵＳＢインターフェース４６、キー入力部４７、液晶モニタ４８が接続されるとともに、アドレス・データバス４９を介してＤＲＡＭ５０、内蔵フラッシュメモリ５１、カード・インターフェース５２が接続されている。また、ＵＳＢインターフェース４６には外部機器接続コネクタ５５が接続されており、カード・インターフェース５２には、カメラ本体に設けられている図示しないカードスロットに着脱自在に装着されたメモリ・カード５３が接続されている。
【００４１】
レンズ駆動部４５は、前記フォーカスレンズ及びズームレンズのそれぞれを光軸方向に駆動するためのステッピングモータ、及びそれらをＤＳＰ／ＣＰＵ４２から送られる制御信号に応じて駆動するモータドライバから構成される。キー入力部４７は、動作モードの切替キーや、ズームキー、メニューキー、シャッターキー等の各種のキーを含み、使用者によるキー操作に応じた操作信号をＤＳＰ／ＣＰＵ４２に出力する。
【００４２】
液晶モニタ４８はカラーＬＣＤとその駆動回路とを含み、撮影待機モードではＣＣＤ４１によって撮像された被写体画像をスルー画像として表示し、また、再生モードには、メモリ・カード５３から読み出されＤＳＰ／ＣＰＵ４２によって伸張された記録画像を表示する。また、操作補助用として、機能選択時の処理メニュー表示や設定用の図形若しくはアイコン等の表示を行う。
【００４３】
ＤＲＡＭ５０は、ＣＣＤ４１により撮像されデジタル化された被写体の画像データを一時記憶するバッファであるとともに、ＤＳＰ／ＣＰＵ４２のワーキングメモリとして使用される。そして、撮影待機モードにおいてシャッターキーが押された撮影時には、ＤＲＡＭ５０に一時記憶された画像データが、ＤＳＰ／ＣＰＵ４２により圧縮され、最終的には所定のフォーマット（本実施の形態ではＪＰＥＧに準拠したフォーマット）の画像ファイルとしてメモリ・カード５３に記録される。なお、メモリ・カード５３が、本発明の画像記録手段であると同時に加工情報記録手段である。
【００４４】
内蔵フラッシュメモリ５１には、ＤＳＰ／ＣＰＵ４２にデジタルカメラ４の各部を制御させるための制御プログラムと、デジタルカメラ４の制御に使用される各種データが記憶されており、ＤＳＰ／ＣＰＵ４２は、上記制御プログラムに従い動作することにより本発明の取得手段、制御手段として機能する。
【００４５】
一方、デジタルカメラ４が装着された前記スタンド３３には、前述した装着部（図示せず）にカメラ側コネクタ３４が設けられ、前記カメラ台３１に外部側コネクタ３５が設けられており、その外部側コネクタ３５に前述したＵＳＢケーブル２００が接続されている。そして、デジタルカメラ４は、前記外部機器接続コネクタ５５がスタンド３３のカメラ側コネクタ３４に接続されることにより、ＵＳＢケーブル２００を介してＰＣ２との間におけるデータ通信が可能となっており、前述した所定の撮影モードでは、ＣＣＤ４１により撮像されデジタル化された被写体の画像データを逐次ＰＣ２へ転送するよう構成されている。
【００４６】
（撮像投影システムの動作説明）
次に、以上の構成からなる撮像投影システムの本発明に係る動作を説明する。図４は、図１に示した状態において、デジタルカメラ４にＰＣカメラとして機能する所定の撮影モードが設定されているときの動作を示したフローチャートである。
【００４７】
書画カメラ３においてデジタルカメラ４は、前述した所定の撮影モードが設定されることにより任意の書面資料Ａ等を撮影し、撮影したドキュメントの画像データをＰＣ２へ出力する（ステップＳＡ１）。また、ＰＣ２では、前記画像処理プログラムによって、入力した画像データに対して歪み補正処理、回転処理、切り抜き処理等の各種の画像処理により撮影画像の補正を行った後、処理後の画像データを表示プログラムによってプロジェクタ１へ出力する（ステップＳＡ２〜ＳＡ５）。そして、プロジェクタ１は、ＰＣ２から入力した画像データに基づく画像をスクリーンＳに投射する（ステップＳＡ６）。なお、ＰＣ２による上記の画像処理は、必要に応じて画像の１部又は全部について実施する。
【００４８】
（デジタルカメラの動作説明）
一方、図５は、前記デジタルカメラ４に再生モードが設定されているときの正面撮影補正データの登録処理の手順を示すフローチャートである。なお、ここではメモリ・カード５３に、ユーザーが前記デジタルカメラ４を前記スタンド３３から取り外して使用し、例えばドキュメントやその他の資料等が投影されるとともに、そこにコメント等がマーカーで手書きされた状態ホワイトボードを、斜め方向から撮影したときの撮影画像Ｇ（図６参照）が記録されているものとする。
【００４９】
再生モードにおいてデジタルカメラ４は、ユーザーによる所定のキー操作に応じ、ユーザーが選択した撮影画像のデータをメモリ・カード５３から読み出し、それをＤＲＡＭ５０に展開して液晶モニタ４８に表示する（ステップＳＢ１）。そのとき、ユーザーによって、予め用意されているメニュー画面から「正面撮影補正」が選択されたら上記の登録処理に移行し（ステップＳＢ２でＹＥＳ）、まず表示中の撮影画像Ｇについて、直線認識を行うとともに、認識した直線の連続性を確認して、四画形に閉じた形状の輪郭線を走査する（ステップＳＢ３）。ここで輪郭線が存在しなければ（ステップＳＢ３でＮＯ）、そのまま登録処理を一旦終了する。なお、その際には「補正対象がありません。」等のメッセージを液晶モニタ４８に表示してもよい。
【００５０】
また、輪郭線が存在したときには（ステップＳＢ３でＹＥＳ）、例えば図６に示したように、表示中の撮影画像Ｇに重ねて、補正候補となる輪郭線を示す、本発明の確認表示である四角枠Ｆを表示する（ステップＳＢ６）。また、同時に「補正」ボタンＢ１と「キャンセル」ボタンＢ２も表示する。なお、図示した例は、撮影画像Ｇが主として背景ＧａとホワイトボードＧｂと投影画像Ｇｃとの各領域からなる一方、ステップＳＢ３によってホワイトボードＧｂの外周の輪郭線ｆ１と、投影画像Ｇｃの外周の輪郭線ｆ２とが走査されるとともに、ホワイトボードＧｂ側の輪郭線ｆ１が補正候補となっており、輪郭線ｆ１に四角枠Ｆが重ねて表示された状態を示したものである。なお、この例では四角枠Ｆを太い破線で示したが、実際には赤色等の線によって四角枠Ｆを表示する。
【００５１】
ここで、デジタルカメラ４はユーザーによる操作待ちの状態となり、その間に、ユーザーによって「キャンセル」ボタンＢ２が選択されたときには（ステップＳＢ６でＹＥＳ）、輪郭線が存在しなかった場合と同様にそのまま登録処理を終了する。また、いずれのボタンＢ１，Ｂ２も選択されず、ズームキーによる補正候補の切替操作があったときには（ステップＳＢ６，ＳＢ７がＮＯ、ステップＳＢ８でＹＥＳ）、補正候補を変更した後（ステップＳＢ９）、ステップ５へ戻り、変更後の補正候補に重ねて四角枠Ｆを表示する。すなわち図６の例では、投影画像Ｇｃの外周の輪郭線ｆ２に重なる四角枠Ｆを表示する。また図示しないが、走査された輪郭線が複数存在し、かつそれらが互いに並んでいるようにな場合においても、ズームキーが操作される毎に所定の順で四角枠Ｆを各々の輪郭線に移動させる。
【００５２】
そして、ユーザーによる「選択」ボタンＢ２の選択操作（確定操作）があったら（ステップＳＢ７でＹＥＳ）、その時点で四角枠Ｆにより示されている輪郭線における４頂点Ａ，Ｂ，Ｃ，Ｄの座標情報（ＸＹ方向の画素位置データ）を取得し（ステップＳＢ１０）、取得した座標情報を、撮影画像Ｇの画像データのヘッダ部分に記録して（ステップＳＢ１１）、登録処理を終了する。図７は、上記座標情報３００が記録された状態における撮影画像Ｇのデータ構造を示す模式図であり、座標情報３００は、ＪＰＥＧファイルにおいて画像情報（圧縮画像データ）以外のメタ情報が格納されるヘッダ領域ｍに確保されている、ユーザーが自由に使用可能なユーザー領域ｎに格納される。
【００５３】
（ＰＣの動作説明）
また、図８は、デジタルカメラ４が前記スタンド３３に装着され、ユーザーの操作により、デジタルカメラ４に記録されている撮影画像をプロジェクタ１に投影させる所定の投影制御モードがＰＣ２に設定されたとき、ＰＣ２が実施する正面撮影補正に関する処理手順を示すフローチャートである。なお、上記投影制御モードは、デジタルカメラ４に画像転送モードが設定されている状態で、デジタルカメラ４からメモリ・カード５３に記録されている撮影画像のサムネイル画像等を取得し、撮影画像の一覧を表示装置２７に表示することにより、投影すべき撮影画像をユーザーに選択させるモードである。
【００５４】
上記投影制御モードにおいて、ユーザーにより投影すべき撮影画像が選択されると、ＰＣ２は、選択された撮影画像の画像ファイルをデジタルカメラ４から取得し（ステップＳＣ１）、そのファイルヘッダにおける前述した座標情報３００の有無を確認する（ステップＳＣ２）。ここで、座標情報３００が格納されていなければ（ステップＳＣ３でＮＯ）、図４において説明した、デジタルカメラ４にＰＣカメラとして機能する所定の撮影モードが設定されているときの通常の画像処理を行うとともに、処理後の画像データをプロジェクタ１へ出力する（ステップＳＣ４）。
【００５５】
一方、デジタルカメラ４から取得した画像ファイルが、例えば図６に示した撮影画像Ｇの画像ファイルであって、座標情報３００が格納されていれば（ステップＳＣ３でＹＥＳ）、それを取得した後（ステップＳＣ５）、座標情報３００に基づき画像の歪みを補正する（ステップＳＣ６）。すなわち座標情報３００として輪郭線ｆ１の四隅Ａ〜Ｄのデータがヘッダに格納されていたときには、輪郭線ｆ１を領域を補正基準とし、それの領域を長方形とする補正を行う。引き続き、補正した画像から、変形（補正）後の輪郭線ｆ１で囲まれている領域を切り抜き（ステップＳＣ７）、切り抜いた画像を表示装置２７に表示するとともに、プロジェクタ１へ出力する（ステップＳＣ８）。
【００５６】
ここで、以上説明したＰＣ２及びデジタルカメラ４においては、それらを用いることにより以下の効果を得ることができる。すなわち、本実施の形態のデジタルカメラ４においては、プロジェクタ１によりスクリーンに投影するための画像の撮影に使用する場合、それをスタンド３３に装着せず単独で使用している状態で、撮影した画像に対し、実際の投影に際して歪みを補正する領域を予め設定することができる。つまり撮影を行った直後や都合の良い時に、しかもＰＣ２が手元にないときでも上記設定作業を行うことができる。したがって、例えば投影する画像を多数用意する必要がある場合には、便利である。また、実際に歪みを補正して使用する領域を予め決めておくこともできるため、都合がよい。
【００５７】
しかも、撮影した画像において、所望する領域の歪み補正が可能か否かを直ちに確認することができる。これは図５で説明した正面撮影補正データの登録処理において、歪み補正が可能でない領域は選択候補とならず、その領域の設定が不可能であるためである。したがって、撮影直後に上記確認を行うようにすれば、場合によっては撮影をやり直すことにより、必要とする画像を間違いなく得ることができる。
【００５８】
なお、本実施の形態では、ＰＣ２とデジタルカメラ４とによって本発明の画像処理システムが実現されたものについて説明したが、例えばプロジェクタ１と、それに接続されたデジタルカメラ４のみからなる撮像投影システムにおいても本発明は適用可能である。その場合には、前述したＰＣ２における正面撮影補正に関する処理をプロジェクタ１に行わせ、それを本発明の画像処理装置として機能させればよい。
【００５９】
また、本実施の形態では、本発明の電子カメラとして、スタンド３３に装着されることにより書画カメラ３として使用され、撮影画像をＰＣ２に転送する機能を有しているデジタルカメラ４を説明したが、自己が撮影した画像を例えばメモリ・カード５３を介してＰＣ２等に供給可能な構成であれば、ＰＣ２と間におけるデータ通信機能を備えていないデジタルカメラ（携帯電話機やＰＤＡ等の携帯情報端末に内蔵されているものを含む）に本発明を適用してもよい。
【００６０】
また、本実施の形態では、撮影画像に付加（登録）する加工情報が、歪み補正の対象となる領域を示す座標情報３００である場合について説明したが、撮影画像に付加（登録）する加工情報は、前述した所定領域の歪み補正と切り抜きの双方に使用されるものでなくとも、それらの一方にのみ使用される情報でも良く、さらにそれ以外の他の加工に際して使用される情報としてもよい。
【００６１】
さらに、座標情報３００等の加工情報は、必ずしも撮影画像のデータと一体不可分のデータである必要はなく、ＰＣ２等において撮影画像との対応関係が認識できる状態であれば、メモリ・カード５３等に撮影画像とは別に記録させるようにしても構わない。但し、座標情報３００等は、本実施の形態のように取得元の画像データ（ＪＰＥＧファイル）に付加して一体不可分とした方がＰＣ２等において扱いやすいため都合がよい。
【図面の簡単な説明】
【００６２】
【図１】本発明に係る撮像投影システムを示すシステム構成図である。
【図２】同システムにおける主としてプロジェクタとＰＣ２の電気的構成の概略を示すブロック図である。
【図３】デジタルカメラの電気的構成を示すブロック図である。
【図４】撮像投影システムの基本動作を示すフローチャートである。
【図５】デジタルカメラにおける再生モードでの正面撮影補正データの登録処理の手順を示すフローチャートである。
【図６】補正候補の選択時におけるデジタルカメラの表示画面を示す図である。
【図７】補正情報が登録された後の画像ファイルのデータ構造を示す模式図である。
【図８】ＰＣにおける正面撮影補正処理の手順を示すフローチャートである。
【符号の説明】
【００６３】
１  プロジェクタ
２  ＰＣ
３  書画カメラ
４  デジタルカメラ
２１  ＣＰＵ
２２  ＲＡＭ
２３  記憶装置
２７  表示装置
３３  スタンド
４１  ＣＣＤ
４２  ＤＳＰ／ＣＰＵ
４８  液晶モニタ
５０  ＤＲＡＭ
５１  内蔵フラッシュメモリ
５３  メモリ・カード
１００  ＲＧＢケーブル
２００  ＵＳＢケーブル
３００  座標情報
Ｆ  四角枠
Ｇ  撮影画像
Ｇａ  背景
Ｇｂ  ホワイトボード
Ｇｃ  投影画像
Ｓ  スクリーン
ｍ  ヘッダ領域
ｎ  ユーザー領域
ｆ１，ｆ２  輪郭線
【図１】
2006005971.tif 000003
【図２】
2006005971.tif 000004
【図３】
2006005971.tif 000005
【図４】
2006005971.tif 000006
【図５】
2006005971.tif 000007
【図６】
2006005971.tif 000008
【図７】
2006005971.tif 000009
【図８】
2006005971.tif 000010