(57)【要約】【課題】簡単な構成で、スクリーンへの書き込みに基づく情報を見やすく投映すること。【解決手段】投映制御装置３０は、スクリーンへ画像を投映するプロジェクタ１０を制御する第１制御部３５と、スクリーンを撮像するカメラ２０を制御する第２制御部３５と、カメラ２０で撮像された画像データに基づいて、スクリーン上に書かれた第１情報を目立たなくする第１画像を生成する画像生成部３６と、第１情報に基づく第２情報を第１画像に付加する画像合成部３４と、を備え、第１制御部３５は、第２情報が付加された第１画像をプロジェクタ１０から投映させる。【選択図】図３
2014167701.tif 000002
【特許請求の範囲】
【請求項１】
スクリーンへ画像を投映するプロジェクタを制御する第１制御部と、
前記スクリーンを撮像するカメラを制御する第２制御部と、
前記カメラで撮像された画像データに基づいて、前記スクリーン上に書かれた第１情報を目立たなくする第１画像を生成する画像生成部と、
前記第１情報に基づく第２情報を前記第１画像に付加する画像合成部と、を備え、
前記第１制御部は、前記第２情報が付加された前記第１画像を前記プロジェクタから投映させることを特徴とする投映制御装置。
【請求項２】
請求項１に記載の投映制御装置において、
前記画像合成部は、前記第１情報の全部、または前記第１情報のうち所定範囲内の情報の態様を変更して前記第２情報を生成し、前記第１画像に付加することを特徴とする投映制御装置。
【請求項３】
請求項１に記載の投映制御装置において、
前記画像合成部は、前記第１情報の全部、または前記第１情報のうち所定範囲内の情報にあらかじめ関連付けられている前記第２情報を、前記第１画像に付加することを特徴とする投映制御装置。
【請求項４】
請求項２または３に記載の投映制御装置において、
前記第１情報の書き込み終了を検出、または前記第１情報のうち前記所定範囲を示す書き込みを検出する検出部をさらに備え、
前記第１制御部は、前記検出部で前記検出されると、前記第２情報が付加された前記第１画像を前記プロジェクタから投映させることを特徴とする投映制御装置。
【請求項５】
請求項４に記載の投映制御装置において、
前記画像生成部は、前記カメラで撮像された画像データに基づいて、前記第１情報を目立たせる第２画像を生成し、
前記第１制御部は、前記検出部が前記第１情報の書き込み終了を検出する前、または前記検出部が前記第１情報のうち前記所定範囲を示す書き込みを検出する前に、前記第２画像を前記プロジェクタから投映させることを特徴とする投映制御装置。
【請求項６】
請求項５に記載の投映制御装置において、
前記画像生成部は、前記スクリーン上の前記第１情報の彩度を高めるように前記第２画像を生成することを特徴とする投映制御装置。
【請求項７】
請求項１〜６のいずれか一項に記載の投映制御装置において、
前記画像生成部は、前記スクリーン上の前記第１情報の彩度および明度と、前記第１情報以外の背景の彩度および明度とを近づけるように前記第１画像を生成することを特徴とする投映制御装置。
【請求項８】
請求項１〜７のいずれか一項に記載の投映制御装置において、
前記カメラで撮像された画像データ、前記第１画像のデータ、および前記第２画像のデータを記憶部材に記憶させる記憶制御部をさらに備えることを特徴とする投映制御装置。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、投映制御装置に関する。
【背景技術】
【０００２】
プロジェクタを用いてプレゼンテーションを行う際に、プレゼンテーターによってスクリーンに書かれた文字をコンピュータが認識し、認識した文字を投映させる技術が知られている（特許文献１参照）。
【先行技術文献】
【特許文献】
【０００３】
【特許文献１】特開２０１１−１０３０９２号公報
【発明の概要】
【発明が解決しようとする課題】
【０００４】
従来技術では、ドットパターンが形成された専用のスクリーンと、該スクリーン上でドットパターンを読み込む専用のペンとが必要で、コストを下げることが困難であった。
【課題を解決するための手段】
【０００５】
本発明による投映制御装置は、スクリーンへ画像を投映するプロジェクタを制御する第１制御部と、スクリーンを撮像するカメラを制御する第２制御部と、カメラで撮像された画像データに基づいて、スクリーン上に書かれた第１情報を目立たなくする第１画像を生成する画像生成部と、第１情報に基づく第２情報を第１画像に付加する画像合成部と、を備え、第１制御部は、第２情報が付加された第１画像をプロジェクタから投映させることを特徴とする。
【発明の効果】
【０００６】
本発明による投映制御装置によれば、簡単な構成で、スクリーンへの書き込みに基づく情報を見やすく投映できる。
【図面の簡単な説明】
【０００７】
【図１】第一の実施形態による投映制御装置の使用場面を説明する図である。
【図２】スクリーンの投映面を拡大した図である。
【図３】投映制御装置、デジタルカメラ、およびプロジェクタの要部構成を説明するブロック図である。
【図４】(a)はデジタルカメラから送信されたフレーム画像を例示する図、(b)は(a)のフレーム画像から書き込み部分が補色に色変換されたフレーム画像を例示する図、(c)は(b)のフレーム画像の背景部分がグレーに色変換されたフレーム画像を例示する図、(d)はスクリーンに投映された画像を例示する図である。
【図５】投映制御装置の制御部が実行する処理の流れを例示するフローチャートである。
【図６】変形例２の投映動作を行う制御部が実行する処理の流れを例示するフローチャートである。
【図７】第二の実施形態による要部構成を説明するブロック図である。
【図８】(a)はデジタルカメラから送信されたフレーム画像を例示する図、(b)は(a)のフレーム画像から書き込み部分が補色に色変換されたフレーム画像を例示する図、(c）は(b)のフレーム画像の背景部分がグレーに色変換されたフレーム画像を例示する図、(d)はスクリーンに投映された画像を例示する図である。
【発明を実施するための形態】
【０００８】
以下、図面を参照して本発明を実施するための形態について説明する。
（第一の実施形態）
＜使用場面の説明＞
図１は、本発明の第一の実施形態による投映制御装置の使用場面を説明する図である。図１において、プロジェクタ１０はスクリーン４０に向けて画像を投映する。プロジェクタ１０が投映するための映像信号は、投映制御装置３０から無線通信によってプロジェクタ１０へ供給される。プレゼンテーターである人物Ａは、プロジェクタ１０からスクリーン４０に投映される像を参照してプレゼンテーションを行う。
【０００９】
デジタルカメラ２０は、スクリーン４０の投映面を所定のフレームレート（例えば６０ｆｐｓ）で撮像し、撮像されたフレーム画像を逐次無線通信によって投映制御装置３０へ送信する。投映制御装置３０は、例えばパーソナルコンピューターによって構成される。投映制御装置３０は、所定のプログラムを実行することにより、デジタルカメラ２０による撮像動作を制御するとともに、プロジェクタ１０による投映動作を制御する。サーバー６０は、投映データ等を格納し、投映制御装置３０からの要求に応じて必要なデータを投映制御装置３０へ提供する。
【００１０】
図２は、スクリーン４０の投映面を拡大した図である。スクリーン４０には、プロジェクタ１０からグラフ等のプレゼンテーション資料が投映されている。人物Ａは、マーカーペン５０でスクリーン４０に文字を書きながら説明する。プレゼンテーション中の投映制御装置３０は、デジタルカメラ２０から送信されたフレーム画像に基づいて、人物Ａによってスクリーン４０にマーカーペン５０で書かれた文字を認識し、認識した文字を参加者に見やすい態様で、投映中のプレゼンテーション資料に重ねて、プロジェクタ１０からスクリーン４０に投映させる。
【００１１】
＜投映制御の説明＞
本実施形態は、上記投映制御装置３０が認識した文字を、参加者に見やすい態様でプロジェクタ１０からスクリーン４０に投映させる点に特徴を有するので、以下の説明はこの点を中心に行う。図３は、図１の投映制御装置３０、デジタルカメラ２０、およびプロジェクタ１０の要部構成を説明するブロック図である。
【００１２】
デジタルカメラ２０は、撮像光学系２１と、撮像素子２２と、画像処理部２３と、制御部２４とを含む。撮像光学系２１は、撮像素子２２の撮像面上に被写体像（本例の被写体はスクリーン４０）を結像させる。撮像素子２２は、被写体像を撮像して画像データを出力する。画像処理部２３は、画像データに所定の画像処理（例えば、輪郭強調やホワイトバランス調整など）を行う。制御部２４は、デジタルカメラ２０の各部に対する制御、および投映制御装置３０との間の通信を行う。
【００１３】
投映制御装置３０は、筆跡検出部３１と、文字認識部３２と、文字生成部３３と、合成部３４と、制御部３５と、色変換部３６と、記憶部３７とを含む。筆跡検出部３１は、デジタルカメラ２０から送信されたフレーム画像に基づいて、人物Ａによってスクリーン４０上にマーカーペン５０で書かれた筆跡を検出する。図４(a)は、デジタルカメラ２０から送信されたフレーム画像のうち、人物Ａによる書き込み部分を例示する図である。図４(a)によれば、デジタルカメラ２０で撮像された画面のスクリーン４０に「あいうえ」が書き込まれている。
【００１４】
ここで、スクリーン４０の投映面は白地とし、マーカーペン５０のインク色は彩度が低く、明度が高いパステルカラー（例えばピンク）とするが、図４(a)においては書き込み「あいうえ」をわかりやすくするため、黒色で表している。
【００１５】
第一の実施形態において、色変換部３６が色変換を開始するタイミング、および文字認識部３２が文字認識処理を開始するタイミングは、人物Ａが一連の書き込みを終えたタイミングとする。具体的には、制御部３５が最新のフレーム画像と前フレームの画像とを比較しながら、筆跡検出部３１によって検出された筆跡（白地におけるピンク色）に所定時間（例えば２秒）続けて変化が生じない場合を書き込み終了タイミングと判断する。
【００１６】
人物Ａによる一連の書き込みが終了したことが制御部３５によって判断されると、色変換部３６は、図４(a)のフレーム画像のうち、筆跡検出部３１によって検出された書き込み部分を書き込み色の補色（インク色がピンクの場合はグリーン）に色変換する。色変換後の明度は、書き込み色の明度が高いほど高くし、書き込み色の明度が低いほど低くする。図４(b)は、図４(a)のフレーム画像から書き込み部分が補色に色変換されたフレーム画像を例示する図である。図４(b)においては、色変換後の書き込み部分「あいうえ」を中間階調で表している。
【００１７】
色変換部３６はさらに、図４(b)のフレーム画像のうち、書き込み部分以外の背景部分を彩度が低い中間階調（グレー）に色変換する。色変換後の明度は、上記補色に色変換した部分の明度と略同じ明度にする。図４(c）は、図４(b)のフレーム画像の背景部分がグレーに色変換されたフレーム画像を例示する図である。
【００１８】
一方、文字認識部３２は、筆跡検出部３１で検出された書き込み部分に対して公知の文字認識処理を行う。文字生成部３３は、文字認識部３２によって認識された文字列「あいうえ」を、所定のフォント（例えばゴシック体）を用いて清書した文字画像を生成する。文字色は、例えば黒とする。合成部３４は、図４(c)のフレーム画像の上から、文字生成部３３で生成された文字列「あいうえ」の文字画像を重ね合成したフレーム画像を生成する。
【００１９】
制御部３５は、投映制御装置３０の各部に対する制御の他、投映制御装置３０とデジタルカメラ２０との間、および投映制御装置３０とプロジェクタ１０との間の通信を行う。記憶部３７は、上述した処理の過程における各フレーム画像や文字画像を記憶する。記憶部３７に記憶させておく理由は、人物Ａがマーカーペン５０で書き込んだ状態や、文字認識部３２で認識された文字列の内容を、後から検索可能にするためである。
【００２０】
制御部３５は、合成部３４で合成されたフレーム画像をプロジェクタ１０から投映させるため、映像信号をプロジェクタ１０へ送出する。
【００２１】
プロジェクタ１０は、投映光学系１１と、投映像生成部１２と、光源１３と、制御部１４とを含む。光源１３は、投映像生成部１２を照明する。投映像生成部１２は、例えば液晶パネルによって構成され、投映制御装置３０からの映像信号に基づいて照明光を変調する。投映光学系１１は、投映像生成部１２によって変調された光の像をスクリーン４０に向けて投映する。
【００２２】
図４(d)は、スクリーン４０に投映された画像を例示する図である。図４(d)によれば、人物Ａによって書き込まれた部分は、ピンク色の上から補色（グリーン）が重なって彩度が低下し、参加者にグレーとして視認される。また、上述したように書き込み部分以外の背景部分もグレーとして視認される。以上のことから、人物Ａによって書き込まれた部分は、背景部分のグレーに紛れて参加者から視認されにくくなる。
【００２３】
文字生成部３３によって生成された清書文字の部分は、上述したグレーを背景にゴシック体で黒く表されるので、参加者から視認されやすい。制御部１４は、プロジェクタ１０の各部に対する制御、および投映制御装置３０との間の通信を行う。
【００２４】
＜フローチャートの説明＞
図５は、以上説明した投映動作を行うために投映制御装置３０の制御部３５が実行する処理の流れを例示するフローチャートである。制御部３５は、人物Ａによってプレゼンテーションの開始が指示されると図５による処理を開始させる。図５のステップＳ１０１において、制御部３５は、デジタルカメラ２０から最新のフレーム画像のデータを入力してステップＳ１０２へ進む。
【００２５】
ステップＳ１０２において、制御部３５は、人物Ａが一連の書き込みを終えたか否かを判定する。制御部３５は、書き込み終了を判定するとステップＳ１０２を肯定判定してステップＳ１０３へ進み、書き込み終了を判定しない場合はステップＳ１０２を否定判定してステップＳ１０１へ戻る。ステップＳ１０１へ戻る場合は、上述した処理を繰り返す。
【００２６】
ステップＳ１０３において、制御部３５は、文字認識部３２に文字認識を行わせてステップＳ１０４へ進む。ステップＳ１０４において、制御部３５は文字生成部３３に指示を送り、文字認識部３２によって認識された文字列「あいうえ」を清書した文字画像を生成させてステップＳ１０５へ進む。
【００２７】
ステップＳ１０５において、制御部３５は色変換部３６へ指示を送り、上述した色変換を行わせてステップＳ１０６へ進む。なお、色変換処理は、ステップＳ１０３、Ｓ１０４と並行して行わせても構わない。
【００２８】
ステップＳ１０６において、制御部３５は合成部３４へ指示を送り、色変換後のフレーム画像に上記文字画像を合成させてステップＳ１０７へ進む。ステップＳ１０７において、制御部３５は、上記合成されたフレーム画像の投映に必要な映像信号をプロジェクタ１０へ送出してステップＳ１０８へ進む。
【００２９】
ステップＳ１０８において、制御部３５は、文字認識（Ｓ１０３）を行ったフレーム画像、認識された文字列の内容、および色変換（Ｓ１０５）後のフレーム画像のデータを、それぞれ記憶部３７に記憶させてステップＳ１０９へ進む。
【００３０】
ステップＳ１０９において、制御部３５は、終了操作が行われたか否かを判定する。制御部３５は、人物Ａによってプレゼンテーションの終了が指示されると、ステップＳ１０９を肯定判定して図５による処理を終了させる。制御部３５は、プレゼンテーションの終了が指示されない場合には、ステップＳ１０９を否定判定してステップＳ１０１へ戻る。
【００３１】
なお、本実施形態においては、マーカーペン５０の書き込みによってスクリーン４０が汚れた場合は、人物Ａがマーカーペン５０の書き込みを消すものとする。書き込みが消されると筆跡検出部３１によって筆跡が検出されなくなるので、制御部３５は、上述した色変換処理や文字生成処理等をキャンセルする。
【００３２】
以上説明した第一の実施形態によれば、次の作用効果が得られる。
（１）投映制御装置３０は、スクリーン４０を撮像するデジタルカメラ２０で撮像された画像データに基づいて、スクリーン４０上に書かれた書き込み「あいうえ」を目立たなくするフレーム画像（図４(c)）を生成する色変換部３６と、「あいうえ」に基づく文字画像をフレーム画像（図４(c)）に付加する合成部３４と、を備え、文字画像が付加されたフレーム画像をプロジェクタ１０から投映させるようにした。これにより、簡単な構成で、スクリーンへ４０の書き込みに基づく情報を、適切に投映できる。
【００３３】
（２）上記（１）の投映制御装置３０において、書き込み「あいうえ」の全部の態様を変更して清書した文字画像を文字生成部３３で生成し、合成部３４は、文字画像をフレーム画像（図４(c)）に付加するようにした。これにより、スクリーン４０上への書き込み「あいうえ」が読みにくい文字であっても、見やすい態様で投映できる。
【００３４】
（３）上記（１）、（２）の投映制御装置３０において、「あいうえ」の書き込み終了を検出する制御部３５を備え、制御部３５で上記検出がなされると、文字画像が付加されたフレーム画像をプロジェクタ１０から投映させるようにした。これにより、適切なタイミングで清書文字の投映を行える。
【００３５】
（４）上記投映制御装置３０において、色変換部３６は、スクリーン４０上の書き込み「あいうえ」の彩度および明度と、「あいうえ」以外の背景の彩度および明度とを近づけるようにフレーム画像を生成したので、書き込み「あいうえ」そのものについては、背景部分に紛らせて参加者から視認されにくくすることができる。
【００３６】
（５）上記投映制御装置３０において、デジタルカメラ２０で撮像された画像データ、上記フレーム画像のデータ、および文字画像が付加されたフレーム画像のデータを記憶部３７に記憶させる制御部３５を備えるので、スクリーン４０上に書き込まれた状態や、その文字の内容を、後から検索可能にし得る。
【００３７】
（変形例１）
第一の実施形態では、ステップＳ１０２（図４）において、人物Ａによる一連の書き込みの終了を制御部３５が判断したタイミングで、色変換部３６が色変換を開始し、文字認識部３２が文字認識処理を開始する例を説明した。この代わりに、人物Ａによって文字認識の対象を示す書き込み（対象を囲む、または対象に下線もしくは傍線を引く）が行われたことを筆跡検出部３１が検出したタイミングで、色変換部３６が色変換を開始し、文字認識部３２が文字認識処理を開始するように構成してもよい。
【００３８】
文字生成部３３が文字認識部３２によって認識された文字列「あいうえ」を清書した文字画像を生成する点、合成部３４が色変換後のフレーム画像に上記文字画像を合成する点、および合成後のフレーム画像をプロジェクタ１０から投映させる点は、上記第一実施形態の場合と同様である。
【００３９】
変形例１の筆跡検出部３１は、筆跡（白地におけるピンク色）において、例えば円もしくは楕円、または四辺形等からなる囲みを検出する。この場合の色変換部３６は、囲みを含む書き込み全てを色変換の対象とし、文字認識部３２は、囲みの内側の書き込みを文字認識の対象とする。または、変形例１の筆跡検出部３１は、筆跡（白地におけるピンク色）において下線や傍線を検出する。この場合の色変換部３６は、下線、傍線を含む書き込み全てを色変換の対象とし、文字認識部３２は、下線、傍線に対応する書き込みを文字認識の対象とする。
【００４０】
変形例１によれば、文字が連なっていることにより文字認識の対象範囲の切り分けが困難な場合や、人物Ａが誤って書き込んだ場合など、人物Ａが清書文字としての投映を望まない場合において、適切に文字認識を行わせることが可能になる。また、囲みや下線、傍線を色変換の対象に含めたので、マーカーペン５０による書き込みは全て、背景部分のグレーに紛らせて参加者から視認されにくくすることができる。
【００４１】
（変形例２）
上述した変形例１において、人物Ａが文字認識の対象を示す書き込み（対象を囲む、または対象に下線、傍線を引く）を行うまでは、書き込み箇所を強調する投映をプロジェクタ１０から行うように構成してもよい。
【００４２】
変形例２の色変換部３６は、人物Ａによってマーカーペン５０による書き込みが行われると、一旦はマーカーペン５０による書き込みを視認しやすくするための色変換（第１色変換と呼ぶ）を行い、人物Ａによって文字認識の対象を示す書き込みが行われると、マーカーペン５０による書き込みを視認しにくくするための色変換（第２色変換と呼ぶ）を行う。第２色変換は、上述した第一の実施形態や変形例１で行った色変換に相当する。
【００４３】
変形例２の制御部３５は、筆跡検出部３１で筆跡（白地におけるピンク色）が検出されると、色変換部３６に第１色変換を開始させる。この場合の色変換部３６は、図４(a)のフレーム画像のうち、筆跡検出部３１によって検出された書き込み部分を、例えばマゼンタに色変換する。制御部３５は、第１色変換後のフレーム画像をスクリーン４０に投映するように、プロジェクタ１０へ投映信号を送る。人物Ａによって書き込まれた部分は、ピンク色の上からマゼンタが重なって彩度が高まる。このため、人物Ａは、ピンク色の書き込みがマゼンタの投映光で強調されるため、スクリーン４０上で自己の書き込み内容を容易に視認し得る。
【００４４】
人物Ａが、文字認識の対象範囲を示す書き込み（対象を囲む、または対象に下線もしくは傍線を引く）を行うと、色変換部３６は、筆跡検出部３１によって囲みまたは下線、傍線が検出されたタイミングで、囲みまたは下線、傍線を含む書き込み部分を、書き込み色の補色（インク色がピンクの場合はグリーン）に第２色変換として色変換する。なお、書き込み部分以外の背景部分を中間階調（グレー）に色変換する処理も、第２色変換処理に含める。
【００４５】
変形例２の文字認識部３２は、筆跡検出部３１によって上記文字認識の対象を示す書き込みが検出されたタイミングで、文字認識処理を開始する。文字生成部３３が文字認識部３２によって認識された文字列「あいうえ」を清書した文字画像を生成する点、合成部３４が第２色変換後のフレーム画像に上記文字画像を合成する点、および合成後のフレーム画像をプロジェクタ１０から投映させる点は、上記第一実施形態や変形例１の場合と同様である。
【００４６】
図６は、上述した変形例２の投映動作を行うために投映制御装置３０の制御部３５が実行する処理の流れを例示するフローチャートである。制御部３５は、人物Ａによってプレゼンテーションの開始が指示されると図６による処理を開始させる。図６において、ステップＳ１０２Ｂ〜ステップＳ１０２Ｄまでの処理が図５（第一の実施形態）と異なる。このため、図５との相違点のみを説明し、図５と共通する点については説明を省略する。
【００４７】
図６のステップＳ１０２Ｂにおいて、制御部３５は、デジタルカメラ２０から入力したフレーム画像データに基づいて、筆跡検出部３１で筆跡検出（白地におけるピンク色）されたか否かを判定する。制御部３５は、筆跡検出された場合にステップＳ１０２Ｂを肯定判定してステップＳ１０２Ｃへ進み、筆跡検出されない場合にはステップＳ１０２Ｂを否定判定してステップＳ１０１へ戻る。
【００４８】
ステップＳ１０２Ｃにおいて、制御部３５は色変換部３６へ指示を送り、上記第１色変換処理を行わせてステップＳ１０２Ｄへ進む。ステップＳ１０２Ｄにおいて、制御部３５は、文字認識の対象を示す書き込みが検出されたか否かを判定する。制御部３５は、筆跡検出部３１によって上述した囲みまたは下線、傍線が検出された場合にステップ１０２Ｄを肯定判定してステップＳ１０３へ進み、囲みまたは下線、傍線が検出されない場合には、ステップ１０２Ｄを否定判定してステップＳ１０１へ戻る。
【００４９】
ステップＳ１０５の第２色変換は、図５における色変換（Ｓ１０５）と処理内容が共通である。
【００５０】
変形例２によれば、マーカーペン５０の色が薄すぎる場合において、マーカーペン５０による書き込みを強調するようにプロジェクタ１０を制御したので、文字認識対象にしたい範囲を囲んだり、下線や傍線を引いたりする作業が人物Ａにとってやりやすくなる。文字認識の対象範囲を示す書き込みが行われた後は、マーカーペン５０による書き込みを視認しにくくするようにプロジェクタ１０を制御したので、人物Ａによって書き込まれた部分が背景部分のグレーに紛れ、参加者から視認されにくくなる。
【００５１】
一般に、マーカーペン５０の色が濃いと、補色で濃い色を投映する必要が生じて投映画像が暗くなってしまう。これを避けるために薄い色のマーカーペン５０を用いる場合において、変形例２は特に有効である。
【００５２】
（第二の実施形態）
第二の実施形態では、文字認識部３２によって認識された文字列を清書した文字画像を生成する代わりに、文字認識部３２によって認識した文字列（例えば、図Ａ）に対応づけられたイメージデータを取得する点が異なるので、この相違点を中心に説明する。
【００５３】
＜投映制御の説明＞
図７は、第二の実施形態による投映制御装置３０Ｂ、デジタルカメラ２０、およびプロジェクタ１０の要部構成を説明するブロック図である。投映制御装置３０Ｂは、図３の投映制御装置３０と比べて、文字生成部３３の代わりにデータ取得部３８を有する点が異なる。以下、図８を参照して説明する。図８(a)は、デジタルカメラ２０から送信されたフレーム画像のうち、人物Ａによる書き込み部分を例示する図である。図８(a)によれば、デジタルカメラ２０で撮像された画面のスクリーン４０に「図Ａ」が書き込まれている。
【００５４】
スクリーン４０の投映面は、第一の実施形態と同様に白地とし、マーカーペン５０のインク色はパステルカラー（例えばピンク）とするが、図８(a)においては書き込み「図Ａ」をわかりやすくするため、黒色で表している。
【００５５】
第二の実施形態において、色変換部３６が色変換を開始するタイミング、および文字認識部３２が文字認識処理を開始するタイミングは、第一の実施形態と同様に人物Ａが一連の書き込みを終えたタイミングとする。
【００５６】
人物Ａによる一連の書き込みが終了したことが制御部３５によって判断されると、色変換部３６は、図８(a)のフレーム画像のうち、筆跡検出部３１によって検出された書き込み部分を書き込み色の補色（インク色がピンクの場合はグリーン）に色変換する。図８(b)は、図８(a)のフレーム画像から書き込み部分が補色に色変換されたフレーム画像を例示する図である。図８(b)においては、色変換後の書き込み部分「図Ａ」を中間階調で表している。
【００５７】
色変換部３６はさらに、図８(b)のフレーム画像のうち、書き込み部分以外の背景部分を中間階調（グレー）に色変換する。図８(c）は、図８(b)のフレーム画像の背景部分がグレーに色変換されたフレーム画像を例示する図である。
【００５８】
一方、文字認識部３２は、筆跡検出部３１で検出された書き込み部分に対して公知の文字認識処理を行う。データ取得部３８は、文字認識部３２によって認識した文字列（例えば、図Ａ）にあらかじめ対応づけられているイメージデータを、サーバー６０から取得する。データ取得部３８によるデータ取得処理は、図５におけるフローチャートのステップＳ１０４の処理に代えて行わせる。
【００５９】
合成部３４は、図８(c)のフレーム画像の上から、データ取得部３８で取得されたイメージデータによる画像８０を重ね合成したフレーム画像を生成する。合成後のフレーム画像をプロジェクタ１０から投映させる点は、上記第一実施形態や変形例１、２の場合と同様である。図８(d)は、スクリーン４０に投映された画像を例示する図である。図８(d)によれば、人物Ａによって書き込まれた部分は、ピンク色の上から補色（グリーン）が重なって彩度が低下し、参加者にグレーとして視認される。また、上述したように書き込み部分以外の背景部分もグレーとして視認される。以上のことから、人物Ａによって書き込まれた部分は、背景部分のグレーに紛れて参加者から視認されにくくなる。これに対して画像８０は、上述したグレーを背景に表されるので参加者から視認されやすい。
【００６０】
以上説明した第二の実施形態によれば、次の作用効果が得られる。
（１）投映制御装置３０Ｂは、スクリーン４０を撮像するデジタルカメラ２０で撮像された画像データに基づいて、スクリーン４０上に書かれた書き込み「図Ａ」を目立たなくするフレーム画像（図８(c)）を生成する色変換部３６と、「図Ａ」に基づく画像８０をフレーム画像（図８(c)）に付加する合成部３４と、を備え、画像８０が付加されたフレーム画像をプロジェクタ１０から投映させるようにした。これにより、簡単な構成で、スクリーンへ４０の書き込みに基づく情報を、適切に投映できる。
【００６１】
（２）上記投映制御装置３０Ｂにおいて、合成部３４は、書き込み「図Ａ」にあらかじめ関連付けられている画像８０を、フレーム画像（図８(c)）に付加する。これにより、文字だけでなく所定の画像を投映させることもできる。
【００６２】
（３）上記投映制御装置３０Ｂにおいて、「図Ａ」の書き込み終了を検出する制御部３５を備え、制御部３５で上記検出がなされると、画像８０が付加されたフレーム画像をプロジェクタ１０から投映させるようにした。これにより、適切なタイミングで画像８０の投映を行える。
【００６３】
以上の説明では、人物Ａがマーカーペン５０の書き込みを消すように説明した。この代わりに、時間の経過とともにインク色が消えるペンを用いてもよい。
【００６４】
以上の説明はあくまで一例であり、上記の実施形態の構成に何ら限定されるものではない。各実施形態および各変形例は、適宜組み合わせて構わない。
【符号の説明】
【００６５】
１０…プロジェクタ
２０…デジタルカメラ
３０、３０Ｂ…投映制御装置
３３…文字生成部
３４…合成部
３５…制御部
３６…色変換部
４０…スクリーン
５０…マーカーペン
６０…サーバー
８０…画像
Ａ…人物
【図１】
2014167701.tif 000003
【図２】
2014167701.tif 000004
【図３】
2014167701.tif 000005
【図４】
2014167701.tif 000006
【図５】
2014167701.tif 000007
【図６】
2014167701.tif 000008
【図７】
2014167701.tif 000009
【図８】
2014167701.tif 000010