(57)【要約】【課題】原稿画像と補助画像とを合成したプレゼンテーション画像について、原稿画像についての画質を保持しつつ、データ量を低減すること。【解決手段】スクリーン１４に投影されるべき原稿画像ＧＫを取得するステップと、原稿画像に対し補助のために付加される付加物をスクリーンを背景としかつ原稿画像を投影しない状態で撮影装置で撮影した補助画像ＧＨを得るステップと、原稿画像に対する領域判別を行って当該原稿画像を文字データＫＭと写真データＫＳとに分離するステップと、補助画像に対する領域判別を行って当該補助画像を文字データＨＭと写真データＨＳとに分離するステップと、原稿画像についての文字データＫＭおよび写真データＫＳ並びに補助画像についての文字データＨＭおよび写真データＨＳを合成するステップとを有する。【選択図】図３
2010220073.tif 000002
【特許請求の範囲】
【請求項１】
投影装置によりスクリーンに投影するためのプレゼンテーション画像を生成する方法であって、
前記スクリーンに投影されるべき原稿画像を取得するステップと、
前記原稿画像に対し補助のために付加される付加物を前記スクリーンを背景としかつ前記原稿画像を投影しない状態で撮影装置で撮影した補助画像を得るステップと、
前記原稿画像に対する領域判別を行って当該原稿画像を文字データと写真データとに分離するステップと、
前記補助画像に対する領域判別を行って当該補助画像を文字データと写真データとに分離するステップと、
前記原稿画像についての文字データおよび写真データ並びに前記補助画像についての文字データおよび写真データを合成するステップと、
を有することを特徴とするプレゼンテーション画像の生成方法。
【請求項２】
前記合成するステップにおいて、前記原稿画像についての文字データおよび写真データ並びに前記補助画像についての文字データおよび写真データからなる４つのレイヤーを含むＰＤＦファイルを生成する、
請求項１記載のプレゼンテーション画像の生成方法。
【請求項３】
前記原稿画像についてのカラーモノクロ判別を行うステップと、
前記補助画像についてのカラーモノクロ判別を行うステップと、
前記原稿画像または前記補助画像において、モノクロであると判別された場合にはその写真データに対してグレースケールの圧縮画像を得、またカラーであると判別された場合にはその写真データに対してカラーの圧縮画像を得るステップと、を有し、
前記合成するステップにおいて、得られた圧縮画像を用いて合成する、
請求項１または２記載のプレゼンテーション画像の生成方法。
【請求項４】
前記補助画像を得るステップには、
原稿画像を投影しない状態における前記スクリーンを前記撮影装置に撮影させて第１画像を得るステップと、
前記原稿画像に対し補助のために付加される付加物を前記スクリーンを背景としかつ前記原稿画像を投影しない状態で前記撮影装置に撮影させて第２画像を得るステップと、
前記第１画像と前記第２画像とに基づいて前記補助画像を生成するステップと、を含む、
請求項１ないし３のいずれかに記載のプレゼンテーション画像の生成方法。
【請求項５】
前記各ステップを、前記投影装置および前記撮影装置を制御する画像形成装置によって実行する、
請求項１ないし４のいずれかに記載のプレゼンテーション画像の生成方法。
【請求項６】
投影装置によりスクリーンに投影するためのプレゼンテーション画像を生成する装置であって、
前記スクリーンに投影されるべき原稿画像を取得する手段と、
前記原稿画像に対し補助のために付加される付加物を前記スクリーンを背景としかつ前記原稿画像を投影しない状態で撮影装置で撮影した補助画像を得る手段と、
前記原稿画像に対する領域判別を行って当該原稿画像を文字データと写真データとに分離する手段と、
前記補助画像に対する領域判別を行って当該補助画像を文字データと写真データとに分離する手段と、
前記原稿画像についての文字データおよび写真データ並びに前記補助画像についての文字データおよび写真データを合成する手段と、
を有することを特徴とするプレゼンテーション画像の生成装置。
【請求項７】
前記合成する手段は、前記原稿画像についての文字データおよび写真データ並びに前記補助画像についての文字データおよび写真データからなる４つのレイヤーを含むＰＤＦファイルを生成する、
請求項６記載のプレゼンテーション画像の生成装置。
【請求項８】
前記原稿画像についてのカラーモノクロ判別を行う手段と、
前記補助画像についてのカラーモノクロ判別を行う手段と、
前記原稿画像または前記補助画像において、モノクロであると判別された場合にはその写真データに対してグレースケールの圧縮画像を得、またカラーであると判別された場合にはその写真データに対してカラーの圧縮画像を得る手段と、を有し、
前記合成する手段は、得られた圧縮画像を用いて合成する、
請求項６または７記載のプレゼンテーション画像の生成装置。
【請求項９】
前記補助画像を得る手段には、
原稿画像を投影しない状態における前記スクリーンを撮影装置に撮影させて第１画像を得る手段と、
前記原稿画像に対し補助のために付加される付加物を前記スクリーンを背景としかつ前記原稿画像を投影しない状態で前記撮影装置に撮影させて第２画像を得る手段と、
前記第１画像と前記第２画像とに基づいて前記補助画像を生成する手段と、が含まれる、
請求項５ないし８のいずれかに記載のプレゼンテーション画像の生成装置。
【請求項１０】
請求項５ないし９のいずれかに記載のプレゼンテーション画像の生成装置を備えた、画像形成装置。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、投影装置によりスクリーンに投影するためのプレゼンテーション画像を生成する方法および装置、並びに画像形成装置に関する。
【背景技術】
【０００２】
一般に、ビジネスの現場などにおいては、プレゼンテーションを行うためにＯＨＰ(Over Head Projector )が用いられる。つまり、例えばパワーポイント（登録商標）などにより作成したプレゼンテーション用の投影画像を予めパソコンに保存して用意しておく。プレゼンテーションに際して、その投影画像をプロジェクタによってスクリーンに投影し、発表や解説を行う。
【０００３】
また、より効果的なプレゼンテーションを行うために、発表者がプレゼンテーションを行いながら投影画像の映し出されたスクリーン上に線や文字を書き込んだり、写真などの画像を張り付けて補足説明を行うことがある。
【０００４】
このようにしてプレゼンテーション中において補足説明のために付加された付加物についても、プレゼンテーション画像として電子化して保存しておき、後で活用したいという要望がある。また、そのような補助画像を原稿画像に関連付けて保存したいという要望がある。これに関して、従来よりいくつかの提案がある。
【０００５】
例えば、スクリーン上の画像を撮像し、撮像した画像に対し二値化、パターン抽出といった画像処理を行うことにより、プロジェクタからスクリーンに投影された投影画像に対し、人の指、差し棒、あるいはレーザポインタ等で指し示した箇所を特定することが提案されている（特許文献１）。
【０００６】
また、オリジナル原稿データを識別する識別情報の画像を被投影体に投影した状態で、識別情報の画像を含むアノテーションデータの画像を撮影し、識別情報付きのアノテーションデータの画像を取得する。そして、取得した識別情報付きのアノテーションデータの画像に含まれる識別情報の画像に基づいて、該当オリジナル原稿の画像とアノテーションデータの画像とを合成することが提案されている（特許文献２）。      
【０００７】
また、スクリーンに書き込まれた手書きの書き込み情報をスキャナ部でスキャンして書き込み画像を電子化し、プロジェクタ部が投影している投影画像と合成することが提案されている（特許文献３）。
【先行技術文献】
【特許文献】
【０００８】
【特許文献１】特開２０００−２００１４９
【特許文献２】特開２００６−１０８８１３
【特許文献３】特開２００１−１６３８４
【発明の概要】
【発明が解決しようとする課題】
【０００９】
上に述べたように、付加物が、スクリーンの表面に直接貼り付けられた写真などの用紙である場合は、それをカメラで撮影して付加物の画像を補助画像として取り込み、これを原稿画像と合成することにより、原稿画像に補助画像が付加されたプレゼンテーション画像を作成することが可能である。
【００１０】
しかし、通常、原稿画像および補助画像をそのままの状態で単に合成すると、データ量が膨大となってしまい、その保存や転送を行うには不便である。
【００１１】
また、合成して得られたプレゼンテーション画像に圧縮処理を施してデータ量が低減することが考えられるが、その場合には、原稿画像と補助画像とが一緒になった１つの画像として圧縮処理を施すこととなり、原稿画像のオリジナルデータと比較すると画質が劣化してしまうことがある。
【００１２】
このような問題に対して、上に述べた特許文献１〜３のいずれにも解決のための方策は示されていない。
【００１３】
本発明は、上述の問題に鑑みてなされたもので、原稿画像と補助画像とを合成したプレゼンテーション画像について、原稿画像についての画質を保持しつつ、データ量を低減することを目的とする。
【課題を解決するための手段】
【００１４】
本発明の実施形態に係る方法は、投影装置によりスクリーンに投影するためのプレゼンテーション画像を生成する方法であって、前記スクリーンに投影されるべき原稿画像を取得するステップと、前記原稿画像に対し補助のために付加される付加物を前記スクリーンを背景としかつ前記原稿画像を投影しない状態で撮影装置で撮影した補助画像を得るステップと、前記原稿画像に対する領域判別を行って当該原稿画像を文字データと写真データとに分離するステップと、前記補助画像に対する領域判別を行って当該補助画像を文字データと写真データとに分離するステップと、前記原稿画像についての文字データおよび写真データ並びに前記補助画像についての文字データおよび写真データを合成するステップと、を有する。
【００１５】
好ましくは、前記合成するステップにおいて、前記原稿画像についての文字データおよび写真データ並びに前記補助画像についての文字データおよび写真データからなる４つのレイヤーを含むＰＤＦファイルを生成する。ここでいうＰＤＦファイルには、コンパクトＰＤＦファイルが含まれる。
【００１６】
原稿画像と補助画像とに対し領域判別が行われ、それぞれの文字データと写真データとが個別に分離される。分離されたそれぞれの文字データおよび写真データを用いて合成画像が生成される。
【発明の効果】
【００１７】
本発明によると、原稿画像と補助画像とを合成したプレゼンテーション画像について、原稿画像についての画質を保持しつつ、データ量を低減することができる。
【図面の簡単な説明】
【００１８】
【図１】本発明の一実施形態の画像形成装置を適用したプロジェクタ連携システムの全体の概略の構成を示す図である。
【図２】画像形成装置の機能的な構成を示すブロック図である。
【図３】プレゼンテーション画像生成装置の構成の例を示すブロック図である。
【図４】ＰＤＦファイルのデータ構造の例を示す図である。
【図５】プレゼンテーション画像の生成方法の概略の流れを説明する図である。
【図６】プレゼンテーション画像の生成処理の流れを示すフローチャートである。
【図７】プレゼンテーション画像の生成処理の流れを示すフローチャートである。
【図８】カメラにおける処理の流れを示すフローチャートである。
【発明を実施するための形態】
【００１９】
以下において、本発明の一実施形態である画像形成装置１１を用い、画像形成装置１１によって制御されるプロジェクタ１２およびカメラ１３とともにプロジェクタ連携システム１を構成した例について説明する。
【００２０】
図１において、本実施形態のプロジェクタ連携システム１は、画像形成装置１１、プロジェクタ１２、カメラ１３、スクリーン１４、およびパーソナルコンピュータ（ＰＣ）１５などからなる。
【００２１】
図２をも参照して、画像形成装置１１は、本実施形態においてはいわゆるＭＦＰ( Muliti Function Peripheral) と呼称される複合機である。画像形成装置１１は、コピー機能、ネットワークプリンティング機能、ＦＡＸ機能、スキャナ機能、およびドキュメントサーバ機能などを有する。画像形成装置１１は、プロジェクタ（投影装置）１２およびカメラ（撮影装置）１３を制御し、プロジェクタ１２による投影画像ＧＴの投影、カメラ１３によるスクリーン１４の表面の撮影を行い、補助画像ＧＨを生成する。詳しくは後で説明する。
【００２２】
プロジェクタ１２は、画像形成装置１１から送られた投影データ（投影画像データ）ＤＴに基づいて、投影画像ＧＴをスクリーン１４に投影する。プロジェクタ１２は、ビデオケーブル３１によって画像形成装置１１と接続されており、上に述べた投影データＤＴを画像形成装置１１から受信する他、画像形成装置１１によって、投影画像ＧＴの投影のオンオフ、光投射のオンオフ、電源のオンオフなどが制御される。
【００２３】
なお、投影画像ＧＴには、原稿画像ＧＫ、合成画像ＧＰ、および補助画像ＧＨなどが含まれる。プロジェクタ１２に入力された投影データＤＴを投影することにより、投影画像ＧＴとなる。投影データＤＴは、例えばカラー画像のためのＲＧＢデータである。なお、本明細書において、視認可能な「画像」とそのデータの状態である「画像データ」とは、内容的には同じものであるので、それらを区別することなく記載することがある。
【００２４】
なお、「投影画像」または「投影データ」を、「プレゼンテーション画像」または「プレゼンテーション文書」と記載することがある。本実施形態においては、プレゼンテーション画像の一種である合成画像ＧＰの生成方法に特徴の１つがある。
【００２５】
カメラ１３は、スクリーン１１の表面の画像を撮影（撮像）するものである。本実施形態において、カメラ１３は静止画像を撮影し、撮影した画像（画像データ）Ｇを出力する。画像Ｇを撮影するタイミングに応じて、つまり撮影したときにスクリーン１１の状態に応じて、第１画像Ｇ１、第２画像Ｇ２が得られる。
【００２６】
カメラ１３として、例えばデジタルカメラが用いられるが、動画を撮像することのできる撮像装置であってもよい。カメラ１３は、制御ケーブル３２によって画像形成装置１１と接続されており、撮影のタイミング（シャッタ）およびフラッシュのオンオフなどが画像形成装置１１により制御され、撮影した画像Ｇを画像形成装置１１に送る。カメラ１３は、スクリーン１４の全体を正面から適切に撮影できる位置に設置され、固定される。
【００２７】
スクリーン１４には、プロジェクタ１２からの投影画像ＧＴが投影される。スクリーン１４として、反射型スクリーン、透過型スクリーン、プレゼンテーション用スクリーン、映写用スクリーンなど、種々の種類およびサイズのスクリーンを用いることができる。また、文字などを書き込むためのホワイトボード、または白い壁面をスクリーンとして用いることができる。
【００２８】
なお、スクリーン１４には、後で述べるように、線や文字を書き込んだり、写真や資料などの画像を張り付けるなどして、付加物ＦＢを付加することがあるので、それが可能であってできるだけ容易であることが望ましい。この点、ホワイトボードのような機能を備えていれば、サインペンなどによる手書き文字を直接の書き込むことが可能であり、また書き込みを容易に消すこともできる。しかし、スクリーン上に用紙を張り付け、その用紙上に文字を間接的に書き込むようにしてもよい。また、写真や資料を張り付けるには、例えば、押しピンで止めたり、粘着テープで貼ったり、マグネットで固定したりすればよい。また、スクリーンとしてホワイトボードまたは壁面を用いる場合には、カメラ１３による撮影の際などにハレーションができるだけ発生しないような表面状態のものが好ましい。また、ハレーションを抑えるために、室内の照明およびプロジェクタ１２の発光量を調節するようにしてもよい。
【００２９】
パーソナルコンピュータ１５は、所謂パソコンであり、ＣＰＵ(Central Processing Unit) 、メモリ、磁気ディスク、入出力インタフェースなどを有する。パーソナルコンピュータ１５には、プレゼンテーションに用いるための種々の投影データＤＴが記憶されている。そのような投影データＤＴは、適当なソフトウエア、例えばパワーポイント（登録商標）などを用いてパーソナルコンピュータ１５の内部で作成され、または外部から入力される。
【００３０】
パーソナルコンピュータ１５は、ビデオケーブル３３によって画像形成装置１１と接続されており、例えばＲＧＢデータを含む投影データＤＴを画像形成装置１１に送信する。パーソナルコンピュータ１５は、ＬＡＮ１７を介して画像形成装置１１と接続することも可能である。
【００３１】
ビデオケーブル３１, ３３または制御ケーブル３２として、ＵＳＢケーブル、またはネットワークケーブルなどを用いることとしてもよい。
【００３２】
なお、本実施形態のプロジェクタ連携システム１において、画像形成装置１１の内部に投影データＤＴを取り込むことが可能であればよいので、必ずしもパーソナルコンピュータ１５は必要ではない。例えば、投影データＤＴを記憶したＵＳＢメモリを画像形成装置１１に接続することによって投影データＤＴを取り込むようにしてもよい。また、画像形成装置１１のボックス機能（Ｂｏｘ機能）、スキャン機能など、画像形成装置１１のさまざまな機能を利用して、画像形成装置１１の内部に投影データＤＴを取り込むようにしてもよい。また、画像形成装置１１の内部において投影データＤＴを生成するようにしてもよい。
【００３３】
パーソナルコンピュータ１５の記憶部に記憶された投影データＤＴは、画像形成装置１１の制御によって画像形成装置１１に一旦取り込まれ、プレゼンテーション画像データとして蓄積される。画像形成装置１１に蓄積された投影データＤＴは、ユーザの指令に応じてプロジェクタ１２に送信され、投影画像ＧＴとしてスクリーン１４に投影される。画像形成装置１１の制御により、カメラ１３によってスクリーン１４の表面の画像Ｇが撮影される。カメラ１３により撮影された画像Ｇは、画像形成装置１１に送られ、画像形成装置１１内部で画像処理が行われてメモリに記憶され、必要に応じて外部に出力される。
【００３４】
図２において、画像形成装置１１は、動作制御部２１、メモリ２２、ＨＤＤ２３、投影データ作成部２４、画像演算部２５、ユーザＩＦ２６、投影データ出力部２７、カメラ制御部２８、投影データ入力部２９、ネットワークＩＦ３０、原稿読取部３４、および印刷部３５などからなる。
【００３５】
動作制御部２１は、投影データ作成部２４および画像演算部２５などを制御して必要な処理を行わせるとともに、原稿読取部３４および印刷部３５などを制御して画像形成装置１１の全体の動作を制御する。動作制御部２１は、また、プロジェクタモードにおいて、上に述べたようにプロジェクタ１２およびカメラ１３を制御する。
【００３６】
メモリ２２は、生成されまたは入力された投影データＤＴ、カメラ１３により撮影された画像（画像データ）Ｇ、その他の画像またはデータなどを一時的に記憶する。
【００３７】
ＨＤＤ（ハードディスク装置）２３は、投影データＤＴ、画像Ｇ、その他の画像、データ、またはプログラムなどを記憶する。
【００３８】
投影データ作成部２４は、投影データＤＴを作成する。特に、プロジェクタモードにおいて、投影データＤＴつまりプレゼンテーション画像の一種である補助画像ＧＨおよび合成画像ＧＰを作成する。また、領域判別、カラーモノクロ判別（ＡＣＳ(Auto Color Select) 判定）などを行う。つまり、カメラ１３によって撮影された第１画像Ｇ１および第２画像Ｇ２などに基づいて、補助画像ＧＨを作成し、また、補助画像ＧＨと原稿画像ＧＫとを合成した合成画像ＧＰを作成する。
【００３９】
画像演算部２５は、カメラ１３で撮影された第１画像Ｇ１と第２画像Ｇ２との差分を演算し、また第２画像Ｇ２または補助画像ＧＨなどに含まれる付加画像に対して濃度を強調する処理を行うなど、投影データＤＴの作成に必要な演算処理を行う。また、原稿読取部３４によって読み取られた画像や入力された画像に対して種々の画像処理を行う。
【００４０】
ユーザＩＦ（ユーザインタフェース）２６は、ユーザとの間のインタフェースを行う部分である。ユーザＩＦ２６は、例えば、種々の操作ボタンが表示されるタッチパネルである。ユーザは、ユーザＩＦ２６を介して、画像形成装置１１に種々の指令やデータを入力し、また画像形成装置１１からのメッセージを受け取る。
【００４１】
例えば、ユーザは、ユーザＩＦ２６を介して、プロジェクタモードの設定を行い、プロジェクタモードにおいて、カメラ１３に対して第１画像Ｇ１および第２画像Ｇ２の撮影の指令を行う。また、プロジェクタモードにおいて、カメラ１３による撮影を指示したときに、投影画像ＧＴが写り込まないようにするためプロジェクタ１２による投影画像ＧＴの投影を禁止する。また、カメラ１３による撮影のときの照明のために、必要に応じて、プロジェクタ１２から光量が調整された光投射を行い、またはフラッシュを発光させる。
【００４２】
なお、ユーザは、ユーザＩＦ２６を用いる代わりに、ＬＡＮ１７または他のネットワークなどを経由し、パーソナルコンピュータのブラウザを利用して画像形成装置１１を遠隔操作することもできる。例えば、パーソナルコンピュータ１５，１６または外部の他のパーソナルコンピュータを用い、ブラウザを利用して画像形成装置１１に指令を与え、カメラ１３を制御して第１画像Ｇ１および第２画像Ｇ２などを取り込むことも可能である。
【００４３】
投影データ出力部２７は、パーソナルコンピュータ１５から入力された投影データＤＴおよび画像形成装置１１において作成された投影データＤＴをプロジェクタ１２に出力するための制御を行う。
【００４４】
カメラ制御部２８は、プロジェクタモードにおいて、カメラ１３の制御を行う。
【００４５】
投影データ入力部２９は、パーソナルコンピュータ１５から投影データＤＴを入力するための制御を行う。
【００４６】
ネットワークＩＦ３０は、ＬＡＮ１７などを介して種々のデータの受信および送信を行う。なお、パーソナルコンピュータ１５がＬＡＮ１７に接続されている場合には、投影データＤＴを、投影データ入力部２９を介することなく、ネットワークＩＦ３０を介して入力することも可能である。
【００４７】
原稿読取部３４は、種々のサイズの原稿の画像をスキャンして読み取る。印刷部３５は、原稿読取部３４で読み取られた画像、またはパーソナルコンピュータ１５，１６などから送られてきた画像などを、電子写真プロセスによって用紙に印刷する。
【００４８】
次に、プロジェクタモードにおける処理、特に合成画像ＧＰの生成処理について説明する。
【００４９】
上に述べたように、画像形成装置１１は、プロジェクタモードが設定されたときに、補助画像ＧＨおよび合成画像ＧＰの作成のための処理を行うことができる。
【００５０】
すなわち、ユーザが、プロジェクタ１２を用いて投影画像ＧＴをスクリーン１４に投影してプレゼンテーションを行っている際に、投影画像ＧＴの映し出されたスクリーン上に線や文字の書き込みを行ったり、写真や資料などを張り付けて補足説明を行うことがある。このように、投影画像ＧＴに対して付加された付加物ＦＢについて、スクリーン１４を背景として電子化（画像データ化）を行い、これに基づいて補助画像ＧＨを生成し、これと原稿画像ＧＫとを合成して合成画像ＧＰを生成するのである。
【００５１】
補助画像ＧＨは、独立した画像として保存することが可能であり、また、元の投影画像ＧＴ（原稿画像ＧＫ）に付加した状態となるように合成し、合成された画像として保存することも可能である。補助画像ＧＨは、プロジェクタ１２によってスクリーン１４上に投影することにより、元の原稿画像ＧＫに対して補助的に用いることができる。したがって、補助画像ＧＨを一旦作成すれば、次回のプレゼンテーションにおいてはその補助画像ＧＨをプロジェクタ１２により投影することができるので、現物としての付加物ＦＢを準備していなくても、補助画像ＧＨによる付加画像ＧＦを用いてプレゼンテーションを行うことができる。
【００５２】
図３には、画像形成装置１１において実現されるプレゼンテーション画像生成装置ＰＳの機能的な構成が示されている。
【００５３】
図３において、生成装置ＰＳは、第１画像取得部４１、第２画像取得部４２、補助画像生成部４３、補助画像領域判別部４４、原稿画像領域判別部４５、カラーモノクロ判別部４６、カラーモノクロ判別部４７、合成部４８、および投影データ記憶部４９などを有する。
【００５４】
第１画像取得部４１は、カメラ１３で撮影した第１画像Ｇ１を取得する。第１画像Ｇ１は、投影画像ＧＴを投影しない状態におけるスクリーン１４の表面の画像をカメラ１３で撮影したものである。つまり、スクリーン１４のみを撮影した画像であり、スクリーン１４の表面の状態がそのまま画像となったものである。スクリーン１４の表面に汚れがあった場合には、その汚れが画像として表れる。
【００５５】
第１画像Ｇ１の撮影は、ユーザが画像形成装置１１に指令を与えることによって行われる。ユーザは、画像形成装置１１の動作モードをプロジェクタモードとした後で、第１画像Ｇ１の撮影の指令を与える。撮影に際して、プロジェクタ１２の投影画像ＧＴの投影は禁止される。スクリーン１４の照明ために、必要に応じて、プロジェクタ１２による光投射が行われ、またはカメラ１３のフラッシュが発光される。
【００５６】
第２画像取得部４２は、カメラ１３で撮影した第２画像Ｇ２を取得する。第２画像Ｇ２は、投影画像ＧＴに対して補足説明などのために補助的に付加られる付加物ＦＢを、スクリーン１４を背景としかつ投影画像ＧＴを投影しない状態でカメラ１３により撮影した画像である。つまり、第２画像Ｇ２は、付加物ＦＢのみをスクリーン１４を背景として撮影した画像である。
【００５７】
なお、「付加物」は、スクリーン１４に書き込まれた線や文字、スクリーン１４に張り付けられた写真や資料などのように、補足説明などのために投影画像ＧＴに対して付加られるものまたは情報である。「付加物」を、スクリーン１４を背景としてカメラ１３で撮影して得られた画像が、第２画像Ｇ２である。したがって、第２画像Ｇ２には、「付加物」の画像である「付加画像」が含まれることになる。
【００５８】
第２画像Ｇ２の撮影は、ユーザが画像形成装置１１に指令を与えることによって行われる。ユーザは、プレゼンテーションの途中において、投影画像ＧＴに対する付加物ＦＢをスクリーン１４に付加した後で、第２画像Ｇ２の撮影の指令を与える。そうすると、画像形成装置１１は、プロジェクタ１２による投影画像ＧＴの投影を禁止し、第１画像Ｇ１の撮影の場合と同じ照明のための制御を行って、カメラ１３による撮影を行う。
【００５９】
補助画像生成部４３は、第１画像Ｇ１および第２画像Ｇ２に基づいて、補助画像ＧＨを生成する。補助画像ＧＨには、上に述べたように付加画像ＧＦが含まれる。
【００６０】
合成画像ＧＰを生成するために、補助画像生成部４３において、例えば、第１画像Ｇ１と第２画像Ｇ２との差分の画像（差分画像）ＧＳを取得する。差分画像ＧＳは、例えば、第２画像Ｇ２から第１画像Ｇ１を減算することによって得られる。したがって、スクリーン１４の表面に汚れがあった場合に、第１画像Ｇ１と第２画像Ｇ２との両方にその汚れによる画像が表れるから、差分画像ＧＳにおいては、汚れによる画像はキャンセル（相殺）されて無くなり、または大幅に低減される。
【００６１】
また、第１画像Ｇ１および第２画像Ｇ２において、通常、スクリーン１４の表面の画像の濃度は、０でなく有為な値を持つ。つまり、真っ白ではない低濃度のグレイ画像が、背景画像の濃度（背景濃度）を示すものとして表れる。しかし、差分画像ＧＳにおいては、背景濃度もキャンセルされる。したがって、差分画像ＧＳにおいて、付加画像ＧＦ以外の部分は濃度値がほぼ０になる。一方、差分画像ＧＳにおいて、付加画像ＧＦの濃度値は、背景濃度に相当する濃度だけ低下することとなる。
【００６２】
なお、差分画像ＧＳにおいて、付加画像ＧＦ以外の画像は背景画像である。
【００６３】
また、付加画像ＧＦについて、その濃度を強調する処理（濃度強調処理）を行ってもよい。濃度強調処理は、第２画像Ｇ２に含まれる付加画像ＧＦに対して行ってもよく、または、補助画像ＧＨに含まれる付加画像ＧＦに対して行ってもよい。
【００６４】
濃度強調処理を行うに際し、まず、濃度強調を行うべき領域（付加画像領域）を検出する。付加画像領域は、付加画像ＧＦの占める領域である。付加画像領域の検出のために、付加画像ＧＦの領域と背景画像ＧＢの領域とが分離され、抽出される。背景画像ＧＢの領域を画定するために、例えば、第１画像Ｇ１と第２画像Ｇ２とを比較し、濃度に変化がない領域を背景領域とし、濃度に変化がある領域を付加画像領域とする。
【００６５】
濃度強調処理として、例えば、付加画像ＧＦの濃度を所定の割合だけ大きくする。または、付加画像ＧＦの濃度に所定の濃度を加算する。その際に、濃度強調処理を行う前の付加画像ＧＦの濃度に応じて、掛け率（乗算係数）または加算値（加算係数）を調整してもよい。濃度強調処理を行うことにより、付加画像ＧＦがより鮮明となる。
【００６６】
つまり、例えば、ユーザによるスクリーン１４の表面への書き込みが薄かったり線が細かったりした場合に、その付加画像ＧＦが薄く不鮮明になる可能性があるが、濃度強調処理を行うことによって濃度が高くなり、鮮明度が高くなる。
【００６７】
補助画像領域判別部４４は、補助画像ＧＨに対する領域判別を行い、補助画像ＧＨを文字データＨＭと写真データＨＳとに分離する。つまり、補助画像ＧＨの１頁の領域について、文字領域であるか写真領域であるかを判別し、文字領域に含まれるデータを文字データＨＭとして抽出し、写真領域に含まれるデータを写真データＨＳとして抽出する。
【００６８】
原稿画像領域判別部４５は、原稿画像ＧＫに対する領域判別を行い、原稿画像ＧＫを文字データＫＭと写真データＫＳとに分離する。つまり、原稿画像ＧＫの１頁の領域について、文字領域であるか写真領域であるかを判別し、文字領域に含まれるデータを文字データＫＭとして抽出し、写真領域に含まれるデータを写真データＫＳとして抽出する。
【００６９】
カラーモノクロ判別部４６は、補助画像ＧＨについて、カラーモノクロ判別（ＡＣＳ判定）を行う。つまり、補助画像ＧＨがカラーの画像であるかモノクロの画像であるかを判別し、その結果を示す判別データＨＨを出力する。
【００７０】
カラーモノクロ判別部４７は、原稿画像ＧＫについて、カラーモノクロ判別（ＡＣＳ判定）を行う。つまり、原稿画像ＧＫがカラーの画像であるかモノクロの画像であるかを判別し、その結果を示す判別データＨＫを出力する。
【００７１】
合成部４８は、原稿画像ＧＫについての文字データＫＭおよび写真データＫＳ、並びに補助画像ＧＨについての文字データＨＭおよび写真データＨＳを合成し、１つの合成画像ＧＰ（合成ファイルＦＧ）を生成する。その際に、文字データまたは写真データに対し、それぞれ適した圧縮処理が必要に応じて行われる。
【００７２】
例えば、合成部４８は、それら文字データＫＭ、写真データＫＳ、文字データＨＭ、および写真データＨＳからなる４つのレイヤーを含むＰＤＦファイルまたはコンパクトＰＤＦ（Ｃ−ＰＤＦ）ファイルを生成する。この場合に、文字データの圧縮処理として、例えば、２値化処理、Ｇ４圧縮などを行う。また、文字部分に対して、同じ色の文字を統合して文字の色を決定し、ＭＭＲ(Modified Modified-Read)などの可逆性の圧縮を行う。また、写真データの圧縮処理として、例えばＪＰＥＧ(Joint Photographic Experts Group)のような非可逆性の圧縮を行う。
【００７３】
なお、コンパクトＰＤＦ圧縮は、本出願人によって提案されたものであり、画像中の領域ごとに異なる解像度や異なる圧縮方法で処理を行った上で、１つのファイルに統合するものである。詳しくはＵＲＬ（http://konicaminolta.jp/about/research/core ＿technology/picture/compact＿pdf.html）を参照することができる。
【００７４】
また、合成部４８では、原稿画像ＧＫがモノクロであると判別された場合には、その写真データＫＳに対してグレースケールの圧縮画像を得、またカラーであると判別された場合にはその写真データＫＳに対してカラーの圧縮画像を得る。また、補助画像ＧＨがモノクロであると判別された場合には、その写真データＨＳに対してグレースケールの圧縮画像を得、またカラーであると判別された場合にはその写真データＨＳに対してカラーの圧縮画像を得る。
【００７５】
このように、本実施形態の合成部４８では、原稿画像ＧＫと補助画像ＧＨとを合成するに際し、それぞれについて領域判別を行い、それぞれの文字データと写真データとに分離し、それぞれのデータに適した圧縮処理を行うので、それぞれのデータの画質を保持しつつデータ量を低減することができる。例えば、原稿画像ＧＫの写真データＫＳについても、これを単独で圧縮処理するので、原稿画像ＧＫのオリジナルデータと比較して画質が劣化することがない。
【００７６】
なお、領域判別において、例えば文字と写真の複合判別による領域分離が行われる。また、領域判別の手法として公知の種々の手法を用いることができる。例えば、文字の場合に白画素と黒画素との濃度差が大きいという性質を利用して文字領域を判別し、また、写真の場合には中間調であるので隣接画素との濃度差の状態を検出して写真領域を判別するといった手法を用いることが可能である。
【００７７】
図４にコンパクトＰＤＦファイルの構造の例が示されている。なお、コンパクトＰＤＦファイルそれ自体については、特開２００７−１９３７５０を参照することができる。
【００７８】
図４に示されるように、コンパクトＰＤＦファイルは、ファイルヘッダ部Ｈ、ボディ部Ｂ、相互参照表Ｒ、トレーラＴの４つの層からなる階層化構造を有する。ファイルヘッダ部Ｈには、ＰＤＦ仕様のバージョン情報などが記録される。ボディ部Ｂには、文書の内容が記録される。相互参照表Ｒには、ボディ部Ｂ内のオブジェクトの位置やファイル内のページおよび他のオブジェクトの位置が記録される。トレーラＴには、ＰＤＦファイルのオブジェクト数やカタログ辞書のオブジェクト番号が記録される。
【００７９】
また、ボディ部Ｂには、日付等の文書情報、文書を構成するページ（子ページ）のデータブロック、子ページ辞書、親ページ辞書、およびカタログページ辞書が含まれる。カタログページ辞書には親ページ辞書の番号が、親ページ辞書にはページ数や子ページ辞書の番号が、子ページ辞書にはデータブロックの書式などが記録される。
【００８０】
また、データブロックには、補助画像ＧＨの写真データＨＳ、文字データＨＭ、原稿画像ＧＫの写真データＫＳ、文字データＫＭの４つのレイヤ、およびレイヤ情報が記録される。レイヤ情報には、各レイヤの位置や文字の色などの情報が記録される。
【００８１】
生成された合成画像ＧＰは、投影データ記憶部４９において保存され、ユーザの操作指示に応じてプロジェクタ１２に送られ、投影画像ＧＴとしてスクリーン１４に投影される。
【００８２】
投影データ記憶部４９は、プレゼンテーションのために、また合成画像ＧＰの作成のために、プロジェクタ１２に送ることが可能な投影データＤＴを記憶する。投影データＤＴとして、原稿画像ＧＫ、補助画像ＧＨ、合成画像ＧＰなどのデータが記憶される。原稿画像ＧＫには、原稿を原稿読取部３４で読み取って得た画像、パーソナルコンピュータ１５から送られてきた画像、画像形成装置１１の内部で生成した画像などが含まれる。
【００８３】
次に、投影補助画像ＧＨの生成処理を図５を用いて説明する。
【００８４】
図５に示すように、プレゼンテーションにおいて、原稿画像ＧＫ（図５の上段左）をスクリーン１４に投影した状態で、スクリーン１４上に付加物ＦＢが付加される（図５の最上段）。プロジェクタ１２による原稿画像ＧＫの投影を中断してカメラ１３で撮影し、必要な処理を行って補助画像ＧＨを得る（図５の上段右）。補助画像ＧＨには付加画像ＧＦが含まれる。
【００８５】
原稿画像ＧＫおよび補助画像ＧＨについて、それぞれ領域判別を行い、文字データＫＭ、写真データＫＳ、文字データＨＭ、写真データＨＳを抽出する（図５の下段上）。４つのデータについて、それぞれ必要な処理を行って、４つのレイヤＬＹ１〜４からなる合成画像ＧＰにまとめる（図５の最下段）。その際に、４つのレイヤＬＹ１〜４が、例えば、最背面から、原稿画像ＧＫの文字データＫＭ、写真データＫＳ、補助画像ＧＨの文字データＨＭ、写真データＨＳの順になるようにコンパクトＰＤＦファイルを作成する。
【００８６】
なお、原稿画像ＧＫまたは補助画像ＧＨがカラーの場合には、その写真データに対してフルカラーのＪＰＥＧ圧縮を行い、モノクロの場合には、その写真データに対してグレースケールのＪＰＥＧ圧縮を行う。
【００８７】
このように、本実施形態の画像形成装置１１では、合成部４８において、原稿画像ＧＫと補助画像ＧＨとについて、合成後に領域判別を行うのではなく、原稿画像ＧＫと補助画像ＧＨとを別々に領域判別し、分離された文字データと写真データとに対してそれぞれ適した処理を行うので、原稿画像ＧＫの画質を保持したまま、データ量の小さい合成画像ＧＰを生成することができる。
【００８８】
したがって、生成された合成画像ＧＰの保存または送信などを容易かつ高速に行うことが可能である。
【００８９】
本実施形態のプロジェクタ連携システム１によると、ユーザは、画像形成装置１１を操作することにより、スクリーン１４への原稿画像ＧＫの投影、補助画像ＧＨおよび合成画像ＧＰの生成、保存、データの配布、および印刷などの一連の作業を、容易に行うことができる。したがって、プレゼンテーションのための資料の作成を容易かつ迅速に行うことができる。
【００９０】
次に、画像形成装置１１における合成画像ＧＰの生成処理の例を、フローチャートに沿って説明する。
【００９１】
図６および図７において、画像形成装置１１において、プロジェクタモードが開始され（＃１１でイエス）、プレゼンテーション画像を作成する旨の指令を受けると（＃１２でイエス）、そのときに投影している投影画像ＧＴを原稿画像ＧＫとしてメモリに保存する（＃１３）。
【００９２】
プロジェクタ１２による投影をオフとし（＃１４）、カメラ１３に撮影の指令を送る（＃１５）。カメラ１３で撮影した画像Ｇを取り込み、これに基づいて補助画像ＧＨを生成する（＃１６）。プロジェクタ１２による投影を再開する（＃１７）。これにより、ユーザはプレゼンテーションを再開する。
【００９３】
画像形成装置１１において、原稿画像ＧＫおよび補助画像ＧＨについて、ＡＣＳ判定（色判定）を行い（＃１８）、原稿画像ＧＫおよび補助画像ＧＨに対して領域判別および領域分離を行う（＃１９）。
【００９４】
ＡＣＳ判定の結果に応じて（＃２０，２３）、原稿画像ＧＫと補助画像ＧＨとに対して別個に、写真データＨＳの圧縮処理を行う（＃２１，２２，２４，２５）。得られたデータに基づいて、コンクトＰＤＦファイルを生成する（＃２６）。
【００９５】
図７において、カメラ１３は、画像形成装置１１からの撮影の指令の有無を判断する（＃３１）。撮影の指令があった場合に（＃３２でイエス）、シャッタを制御して撮影を行い（＃３３）、撮影により得られた画像Ｇを画像形成装置１１に転送する（＃３４）。
【００９６】
このように作成された合成画像ＧＰを用いることにより、現物としての付加物ＦＢを用いることなく、付加物ＦＢを用いたのと同様のプレゼンテーションを行うことが可能となる。したがって、ユーザにとって、プレゼンテーションのための準備およびプレゼンテーション自体がやり易くなる。
【００９７】
上に述べた実施形態において、生成装置ＰＳは、画像形成装置１１におけるハードウエア、ソフトウエア、またはそれらの組み合わせによって実現することができる。そのようなソフトウエアつまりプログラム（コンピュータプログラム）は、適当な記録媒体に記録しておき、画像形成装置１１のメモリ２２またはＨＤＤ２３にインストールし、動作制御部２１および画像演算部２５などに備えられたＣＰＵなどで実行することができる。
【００９８】
その他、生成装置ＰＳの構成、処理内容、動作などは、上に述べた以外の種々の構成とすることができる。また、画像形成装置１１またはプロジェクタ連携システム１の全体または各部の構成、構造、回路、形状、寸法、個数、材質、処理内容、処理順序などは、本発明の趣旨に沿って適宜変更することができる。
【符号の説明】
【００９９】
１  プロジェクタ連携システム
１１  画像形成装置
１２  プロジェクタ
１３  カメラ
１４  スクリーン
２１  動作制御部
２５  画像演算部
４１  第１画像取得部
４２  第２画像取得部
４３  補助画像生成部
４４  補助画像領域判別部
４５  原稿画像領域判別部
４６  カラーモノクロ判別部
４７  カラーモノクロ判別部
４８  合成部
４９  投影データ記憶部
ＰＳ  生成装置
ＧＴ  投影画像（プレゼンテーション画像）
ＤＴ  投影データ（プレゼンテーション画像）
ＧＨ  補助画像
ＧＰ  合成画像（プレゼンテーション画像）
ＧＫ  原稿画像
ＫＭ  文字データ
ＫＳ  写真データ
ＨＭ  文字データ
ＨＳ  写真データ
【図１】
2010220073.tif 000003
【図２】
2010220073.tif 000004
【図３】
2010220073.tif 000005
【図４】
2010220073.tif 000006
【図５】
2010220073.tif 000007
【図６】
2010220073.tif 000008
【図７】
2010220073.tif 000009
【図８】
2010220073.tif 000010