(57)【要約】【課題】マルチプロジェクションシステムにインタラクティブシステムを適用する場合に、投影画像への書き込み画像の再現性を向上させること。【解決手段】複数の投影装置毎に投影画像上の描画装置の位置を検出するために用いる位置情報画像を生成し、前記描画装置を用いて、投影された前記画像に対して描画を行い、前記位置情報画像生成部により生成された前記位置情報画像を投影し、前記描画装置を用いて、投影された前記位置情報画像を読み取ることにより前記描画装置の位置を特定し、隣り合う投影装置により投影された画像が互いに重なり合う重なり部分に対して画像が描画された場合、予め設定された規則に従って、前記位置特定部により特定された前記描画装置の位置のうちいずれかを決定し、特定された前記位置、決定された前記位置に基づき、投影された前記画像に対して描画された画像を再現する。【選択図】図５
2017092568.tif 000002
【特許請求の範囲】
【請求項１】
複数の投影装置により画像の投影を行い、描画装置を用いて該画像に対して描画を行う画像再現システムであって、
複数の前記投影装置毎に投影画像上の前記描画装置の位置を検出するために用いる位置情報画像を生成する位置情報画像生成部と、
前記描画装置を用いて、投影された前記画像に対して描画を行う描画部と、
前記位置情報画像生成部により生成された前記位置情報画像を投影し、前記描画装置を用いて、投影された前記位置情報画像を読み取ることにより前記描画装置の位置を特定する位置特定部と、
隣り合う投影装置により投影された画像が互いに重なり合う重なり部分に対して画像が描画された場合、予め設定された規則に従って、前記位置特定部により特定された前記描画装置の位置のうちいずれかを決定する位置決定部と、
特定された前記位置、決定された前記位置に基づき、投影された前記画像に対して描画された画像を再現する描画画像再現部と、
を備えることを特徴とする画像再現システム。
【請求項２】
前記位置特定部により特定された前記描画装置の位置を近距離無線通信により前記位置決定部に通知する位置通知部を備えることを特徴とする請求項１に記載の画像再現システム。
【請求項３】
前記位置決定部は、隣り合う前記投影装置の位置関係に基づき、前記位置特定部により特定された前記描画装置の位置のうちいずれかを決定することを特徴とする請求項１又は２に記載の画像再現システム。
【請求項４】
複数の前記投影装置をそれぞれ識別するための識別画像を複数の前記投影装置毎に生成する識別画像生成部と、
前記位置関係を決定する位置関係決定部と、
を備え、
前記位置特定部は、投影された前記識別画像を複数の前記投影装置毎に読み取ることにより前記描画装置の位置を特定し、
前記位置関係決定部は、特定された前記描画装置の位置に基づき、前記位置関係を決定することを特徴とする請求項１乃至３いずれか１項に記載の画像再現システム。
【請求項５】
前記位置関係決定部は、複数の前記投影装置毎に備えられ、
前記位置関係決定部は、前記位置特定部により特定された前記描画装置の位置を互いに通信し合うことで前記位置関係を決定することを特徴とする請求項４に記載の画像再現システム。
【請求項６】
前記位置決定部は、前記描画装置を識別するための識別情報を記憶する識別情報記憶部を備えることを特徴とする請求項１乃至５いずれか１項に記載の画像再現システム。
【請求項７】
複数の投影装置により画像の投影を行い、描画装置を用いて該画像に対して描画を行う画像再現方法であって、
複数の前記投影装置毎に投影画像上の前記描画装置の位置を検出するために用いる位置情報画像を生成し、
前記描画装置を用いて、投影された前記画像に対して描画を行い、
前記位置情報画像生成部により生成された前記位置情報画像を投影し、前記描画装置を用いて、投影された前記位置情報画像を読み取ることにより前記描画装置の位置を特定し、
隣り合う投影装置により投影された画像が互いに重なり合う重なり部分に対して画像が描画された場合、予め設定された規則に従って、前記位置特定部により特定された前記描画装置の位置のうちいずれかを決定し、
特定された前記位置、決定された前記位置に基づき、投影された前記画像に対して描画された画像を再現することを特徴とする画像再現方法。
【請求項８】
複数の投影装置により画像の投影を行い、描画装置を用いて該画像に対して描画を行う画像再現プログラムであって、
複数の前記投影装置毎に投影画像上の前記描画装置の位置を検出するために用いる位置情報画像を生成するステップと、
前記描画装置を用いて、投影された前記画像に対して描画を行うステップと、
前記位置情報画像生成部により生成された前記位置情報画像を投影し、前記描画装置を用いて、投影された前記位置情報画像を読み取ることにより前記描画装置の位置を特定するステップと、
隣り合う投影装置により投影された画像が互いに重なり合う重なり部分に対して画像が描画された場合、予め設定された規則に従って、前記位置特定部により特定された前記描画装置の位置のうちいずれかを決定するステップと、
特定された前記位置、決定された前記位置に基づき、投影された前記画像に対して描画された画像を再現するステップと、
を実行させることを特徴とする画像再現プログラム。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、画像再現システム、画像再現方法、画像再現プログラムに関する。
【背景技術】
【０００２】
近年、プロジェクタを複数台並べて疑似的に一つの全体画像を投影するマルチプロジェクションシステムが知られている。また、プロジェクタによる投影画像にユーザが画像を書き込むと、その書き込み画像が元の画像上で再現されるといったように、インタラクティブな使用を可能とするインタラクティブシステムが知られている（例えば、特許文献１を参照）。
【発明の概要】
【発明が解決しようとする課題】
【０００３】
ところが、上述したマルチプロジェクションシステムにおいてインタラクティブシステムを適用する場合、隣り合うプロジェクタ間での重なり部分において投影位置にズレがあると、ユーザによる書き込み画像が、実際の書き込み画像とは異なって再現されてしまうといった問題がある。
【０００４】
本発明は、このような課題を解決するためになされたものであり、マルチプロジェクションシステムにインタラクティブシステムを適用する場合に、投影画像への書き込み画像の再現性を向上させることを目的とする。
【課題を解決するための手段】
【０００５】
上記課題を解決するために、本発明の一態様は、複数の投影装置により画像の投影を行い、描画装置を用いて該画像に対して描画を行う画像再現システムであって、複数の前記投影装置毎に投影画像上の前記描画装置の位置を検出するために用いる位置情報画像を生成する位置情報画像生成部と、前記描画装置を用いて、投影された前記画像に対して描画を行う描画部と、前記位置情報画像生成部により生成された前記位置情報画像を投影し、前記描画装置を用いて、投影された前記位置情報画像を読み取ることにより前記描画装置の位置を特定する位置特定部と、隣り合う投影装置により投影された画像が互いに重なり合う重なり部分に対して画像が描画された場合、予め設定された規則に従って、前記位置特定部により特定された前記描画装置の位置のうちいずれかを決定する位置決定部と、特定された前記位置、決定された前記位置に基づき、投影された前記画像に対して描画された画像を再現する描画画像再現部と、を備えることを特徴とする。
【発明の効果】
【０００６】
本発明によれば、マルチプロジェクションシステムにインタラクティブシステムを適用する場合に、投影画像への書き込み画像の再現性を向上させることができる。
【図面の簡単な説明】
【０００７】
【図１】本発明の実施形態に係るマルチプロジェクションシステムの運用形態を示す図である。
【図２】本発明の実施形態に係るプロジェクタのハードウェア構成を模式的に示すブロック図である。
【図３】本発明の実施形態に係るドングル、電子ペンのハードウェア構成を模式的に示すブロック図である。
【図４】本発明の実施形態に係るＰＣのハードウェア構成を模式的に示すブロック図である。
【図５】本発明の実施形態に係るプロジェクタ、ドングル、電子ペン、ＰＣの機能構成を模式的に示すブロック図である。
【図６】マルチプロジェクションシステムにインタラクティブを適用する場合に生じ得る課題について説明するための図である。
【図７】本発明の実施形態に係るマルチプロジェクションシステムにおいて、ＰＣにより再現される書き込み画像の表示例を示す図である。
【図８】本発明の実施形態に係るマルチプロジェクションシステムにおいて、ＰＣにより再現される書き込み画像の表示例を示す図である。
【図９】ユーザがインタラクティブシステムを利用する際の処理を説明するためのフローチャートである。
【図１０】本発明の実施形態に係るマルチプロジェクションシステムにおけるドングルと電子ペンとの登録処理の際にプロジェクタにより投影される画面の表示例を示す図である。
【図１１】本発明の実施形態に係るマルチプロジェクションシステムにおけるドングルと電子ペンとの登録処理の際にプロジェクタにより投影される画面の表示例を示す図である。
【図１２】本発明の実施形態に係るマルチプロジェクションシステムにおけるドングルと電子ペンとの登録処理を説明するためのシーケンス図である。
【図１３】本発明の実施形態に係るマルチプロジェクションシステムにおけるドングルと電子ペンとの登録処理を説明するためのシーケンス図である。
【図１４】本発明の実施形態に係るマルチプロジェクションシステムにおけるドングルと電子ペンとの登録処理を説明するためのシーケンス図である。
【図１５】本発明の実施形態に係るマルチプロジェクションシステムにおけるドングルと電子ペンとの登録処理を説明するためのシーケンス図である。
【図１６】本発明の実施形態に係るマルチプロジェクションシステムにおいて電子ペンが重なり部分においてドットパターンを読み取る際の処理を説明するためのフローチャートである。
【図１７】本発明の実施形態に係るマルチプロジェクションシステムにおいて電子ペンが重なり部分においてドットパターンを読み取る際の処理を説明するためのフローチャートである。
【発明を実施するための形態】
【０００８】
以下、図面を参照して、本発明の実施形態を詳細に説明する。本実施形態においては、画像表示システムの例として、投影装置であるプロジェクタを複数台並べて疑似的に一つの全体画像を投影するマルチプロジェクションシステムについて説明する。また、本実施形態に係るマルチプロジェクションシステムは、プロジェクタによる投影画像にユーザが画像を書き込むと、その書込画像が元画像上で再現されるといったように、インタラクティブな使用を可能とするインタラクティブシステム（画像再現システム）を適用することが可能なように構成されている。尚、本実施形態に係るインタラクティブシステムは、画像再現プログラムによってその処理が実行される。
【０００９】
まず、本実施形態に係るマルチプロジェクションシステムの運用形態について、図１を参照して説明する。図１は、本実施形態に係るマルチプロジェクションシステムの運用形態を示す図である。
【００１０】
図１に示すように、本実施形態に係るマルチプロジェクションシステムは、ドングル２ａ、２ｂ、２ｃがそれぞれ接続されたプロジェクタ１ａ、１ｂ、１ｃがそれぞれＰＣ（Ｐｅｒｓｏｎａｌ  Ｃｏｍｐｕｔｅｒ）４に接続されて構成されている。また、本実施形態に係るマルチプロジェクションシステムにおいては、ドングル２ａ、２ｂ、２ｃがそれぞれ電子ペン３、ＰＣ４に接続されている。
【００１１】
以下では、プロジェクタ１ａ、１ｂ、１ｃをそれぞれ区別する必要がない場合には、それらを総称してプロジェクタ１とし、ドングル２ａ、２ｂ、２ｃをそれぞれ区別する必要がない場合には、それらを総称してドングル２とする。
【００１２】
尚、プロジェクタ１とドングル２とは、例えば、ＵＳＢ（Ｕｎｉｖｅｒｓａｌ  Ｓｅｒｉａｌ  Ｂｕｓ）、Ｂｌｕｅｔｏｏｔｈ（登録商標）、Ｗｉ−Ｆｉ（Ｗｉｒｅｌｅｓｓ  Ｆｉｄｅｌｉｔｙ）（登録商標）、ＦｅｌｉＣａ（登録商標）、ＩｒＤＡ（Ｉｎｆｒａｒｅｄ  Ｄａｔａ  Ａｓｓｏｃｉａｔｉｏｎ）（登録商標）などのインタフェースにより接続されている。
【００１３】
また、ドングル２と電子ペン３とは、例えば、Ｂｌｕｅｔｏｏｔｈ（登録商標）、ＦｅｌｉＣａ（登録商標）、ＩｒＤＡ（登録商標）などの近距離無線通信により接続されている。
【００１４】
また、プロジェクタ１とＰＣ４とは、例えば、Ｅｔｈｅｒｎｅｔ（登録商標）やＵＳＢ（Ｕｎｉｖｅｒｓａｌ  Ｓｅｒｉａｌ  Ｂｕｓ）、Ｂｌｕｅｔｏｏｔｈ（登録商標）、Ｗｉ−Ｆｉ（Ｗｉｒｅｌｅｓｓ  Ｆｉｄｅｌｉｔｙ）（登録商標）、ＦｅｌｉＣａ（登録商標）、ＩｒＤＡ（登録商標）、ＰＣＩｅ（Ｐｅｒｉｐｈｅｒａｌ  Ｃｏｍｐｏｎｅｎｔ  Ｉｎｔｅｒｃｏｎｎｅｃｔ  Ｅｘｐｒｅｓｓ）、ＶＧＡ（Ｖｉｄｅｏ  Ｇｒａｐｈｉｃｓ  Ａｒｒａｙ）、ＤＶＩ（Ｄｉｇｉｔａｌ  Ｖｉｓｕａｌ  Ｉｎｔｅｒｆａｃｅ）などのインタフェースにより接続されている。
【００１５】
プロジェクタ１は、入力された映像信号（以下、「投影データ」とする）に応じて、光源から射出される光束を変調して光学像（以下、「投影画像」とする）を形成し、形成した投影画像を壁やスクリーンなどの投影面に拡大して投影表示する。また、本実施形態に係るマルチプロジェクションシステムにおいて、プロジェクタ１ａ、１ｂ、１ｃは、それら３台で疑似的に一つの全体画像を投影することができるように構成されている。
【００１６】
尚、本実施形態において、プロジェクタ１は、電子ペン３の投影画像上の位置を把握するためのドットパターンを画像と共に投影する。このドットパターンは、プロジェクタ１にそれぞれ接続されているドングル２により生成される。
【００１７】
電子ペン３は、図１に示すように、ユーザがプロジェクタ１による投影画像に対して画像を書き込むための専用デバイスである。即ち、本実施形態においては、電子ペン３が描画装置として機能する。また、電子ペン３は、プロジェクタ１により投影されているドットパターンを読み取り、読み取った情報をドングル２に送信する。
【００１８】
ドングル２は、上述したドットパターンを生成して、接続されているプロジェクタ１に入力する。また、ドングル２は、電子ペン３から送信されてきた読み取り情報をＰＣ４に送信する。これにより、ＰＣ４は、プロジェクタ１による投影画像に対してどのような画像が書き込まれたかを把握することができ、図１に示すように、その書き込み画像を元の画像上で再現することができるようになっている。
【００１９】
ＰＣ４は、ユーザが操作するための情報処理端末であり、プロジェクタ１に投影用の画像データを入力する。また、ＰＣ４は、電子ペン３から送信されてきた読み取り情報に基づき、プロジェクタ１による投影画像に対してどのような画像が書き込まれたかを把握することができ、図１に示すように、その書き込み画像を元の画像上で再現することができるようになっている。
【００２０】
尚、本実施形態に係るマルチプロジェクションシステムにおいては、ＰＣ４の代わりに、スマートフォンやタブレット端末などの情報処理装置がプロジェクタ１に接続されるように構成されていても良い。
【００２１】
次に、本実施形態に係るプロジェクタ１のハードウェア構成について、図２を参照して説明する。図２は、本実施形態に係るプロジェクタ１のハードウェア構成を模式的に示すブロック図である。
【００２２】
図２に示すように、本実施形態に係るプロジェクタ１は、ＣＰＵ（Ｃｅｎｔｒａｌ  Ｐｒｏｃｅｓｓｉｎｇ  Ｕｎｉｔ）１１、ＲＡＭ（Ｒａｎｄｏｍ  Ａｃｃｅｓｓ  Ｍｅｍｏｒｙ）１２、ＲＯＭ（Ｒｅａｄ  Ｏｎｌｙ  Ｍｅｍｏｒｙ）１３、ＨＤＤ（Ｈａｒｄ  Ｄｉｓｋ  Ｄｒｉｖｅ）１４、操作表示装置１５、通信Ｉ／Ｆ１６、画像投影装置１７がバス１８を介して接続されて構成されている。
【００２３】
ＣＰＵ１１は演算手段であり、プロジェクタ１全体の動作を制御する。ＲＡＭ１２は、情報の高速な読み書きが可能な揮発性の記憶媒体であり、ＣＰＵ１１が情報を処理する際の作業領域として用いられる。ＲＯＭ１３は、読み出し専用の不揮発性記憶媒体であり、ファームウェア等のプログラムが格納されている。
【００２４】
ＨＤＤ１４は、情報の読み書きが可能な不揮発性の記憶媒体であり、画像データ等の各種データや、ＯＳ（Ｏｐｅｒａｔｉｎｇ  Ｓｙｓｔｅｍ）、各種制御プログラム、アプリケーション・プログラム等の各種プログラムを格納する。
【００２５】
操作表示装置１５は、プロジェクタ１に情報を入力するためのユーザインタフェースであり、キーボードやマウス、ボタン、タッチパネルなどの入力装置によって実現される。また、操作表示装置１５は、ユーザがプロジェクタ１の状態を確認するための視覚的ユーザインタフェースであり、ＬＣＤ（Ｌｉｑｕｉｄ  Ｃｒｙｓｔａｌ  Ｄｉｓｐｌａｙ）などの表示装置によって実現される。
【００２６】
通信Ｉ／Ｆ１６は、プロジェクタ１が他の装置と通信するためのインタフェースである。
【００２７】
画像投影装置１７は、光源から射出される光束を変調して投影画像を形成し、形成した投影画像を壁やスクリーンなどの投影面上に拡大して投影表示する。
【００２８】
このようなハードウェア構成において、ＲＯＭ１３やＨＤＤ１４等の記憶媒体に格納されたプログラムがＲＡＭ１２に読み出され、ＣＰＵ１１がＲＡＭ１２にロードされたプログラムに従って演算を行うことにより、ソフトウェア制御部が構成される。このようにして構成されたソフトウェア制御部と、ハードウェアとの組み合わせによって、本実施形態に係るプロジェクタ１の機能を実現する機能ブロックが構成される。
【００２９】
次に、本実施形態に係るドングル２、電子ペン３のハードウェア構成について、図３を参照して説明する。図３は、本実施形態に係るドングル２、電子ペン３のハードウェア構成を模式的に示すブロック図である。
【００３０】
図３に示すように、本実施形態に係るドングル２、電子ペン３は、ＣＰＵ２１、ＲＡＭ２２、ＲＯＭ２３、ＮＶＲＡＭ（Ｎｏｎ  Ｖｏｌａｔｉｌｅ  Ｒａｎｄｏｍ  Ａｃｃｅｓｓ  Ｍｅｍｏｒｙ）２４、通信Ｉ／Ｆ２５がバス２６を介して接続されて構成されている。
【００３１】
ＮＶＲＡＭ２４は、情報の読み書きが可能な不揮発性の記憶媒体であり、ＯＳ、各種制御プログラム、アプリケーション・プログラム等の各種プログラムを格納する。尚、ＣＰＵ２１、ＲＡＭ２２、ＲＯＭ２３、通信Ｉ／Ｆ２５はそれぞれ、ＣＰＵ１１、ＲＡＭ１２、ＲＯＭ１３、通信Ｉ／Ｆ１６と同様であるため、詳細な説明については省略する。
【００３２】
次に、本実施形態に係るＰＣ４のハードウェア構成について、図４を参照して説明する。図４は、本実施形態に係るＰＣ４のハードウェア構成を模式的に示すブロック図である。
【００３３】
図４に示すように、本実施形態に係るＰＣ４は、ＣＰＵ４１、ＲＡＭ４２、ＲＯＭ４３、ＨＤＤ４４、操作表示装置４５、通信Ｉ／Ｆ４６、画像表示装置４７がバス４８を介して接続されて構成されている。
【００３４】
画像表示装置４７は、液晶ディスプレイなどの画像を表示するための装置である。尚、ＣＰＵ４１、ＲＡＭ４２、ＲＯＭ４３、ＨＤＤ４４、操作表示装置４５、通信Ｉ／Ｆ４６はそれぞれ、ＣＰＵ１１、ＲＡＭ１２、ＲＯＭ１３、ＨＤＤ１４、操作表示装置１５、通信Ｉ／Ｆ１６と同様であるため、詳細な説明については省略する。
【００３５】
次に、本実施形態に係るプロジェクタ１、ドングル２、電子ペン３、ＰＣ４の機能構成について、図５を参照して説明する。図５は、本実施形態に係るプロジェクタ１、ドングル２、電子ペン３、ＰＣ４の機能構成を模式的に示すブロック図である。
【００３６】
図５に示すように、本実施形態に係るプロジェクタ１は、プロジェクタ制御部１０１、投影部１０２、ユーザ操作部１０３、ＰＣ側通信部１０４、ドングル側通信部１０５を備える。
【００３７】
プロジェクタ制御部１０１は、プロジェクタ１全体を制御する。投影部１０２は、光源から射出される光束を変調して投影画像を形成し、形成した投影画像を壁やスクリーンなどの投影面上に拡大して投影表示する。ユーザ操作部１０３は、ユーザがプロジェクタ１を操作するためのボタンやスイッチなどの操作部である。ＰＣ側通信部１０４は、プロジェクタ１がＰＣ４と通信するためのインタフェースである。ドングル側通信部１０５は、プロジェクタ１がドングル２と通信するためのインタフェースである。
【００３８】
また、図５に示すように、本実施形態に係るドングル２は、ドングル制御部２０１、ドットパターン生成部２０２、ユーザ操作部２０３、ＰＣ側通信部２０４、プロジェクタ側通信部２０５、電子ペン側通信部２０６、ドングル側通信部２０７、位置関係記憶部２０８、電子ペン情報記憶部２０９を備える。
【００３９】
ドングル制御部２０１は、ドングル２全体を制御する。ドットパターン生成部２０２は、電子ペン３の投影画像上の位置を把握するためのドットパターンを生成する。即ち、本実施形態においては、ドットパターン生成部２０２が位置情報画像生成部、識別画像生成部として機能し、ドットパターンが位置情報画像、識別画像として生成される。ユーザ操作部２０３は、ユーザがドングル２を操作するためのボタンやスイッチなどの操作部である。ＰＣ側通信部２０４は、ドングル２がＰＣ４と通信するためのインタフェースである。プロジェクタ側通信部２０５は、ドングル２がプロジェクタ１と通信するためのインタフェースである。
【００４０】
電子ペン側通信部２０６は、ドングル２が電子ペン３と通信するためのインタフェースである。ドングル側通信部２０７は、ドングル２が他のドングル２と通信するためのインタフェースである。位置関係記憶部２０８は、各ドングル２の位置関係を記憶する。電子ペン情報記憶部２０９は、過去に一度でもドングル２との登録処理がされた電子ペン３をそれぞれ一意に識別するための固有識別情報である電子ペン情報を記憶する。
【００４１】
また、図５に示すように、本実施形態に係る電子ペン３は、電子ペン制御部３０１、ドットパターン読取部３０２、ユーザ操作部３０３、ドングル側通信部３０４、優先順位記憶部３０５、画像書込部３０６を備える。
【００４２】
電子ペン制御部３０１は、電子ペン３全体を制御する。ドットパターン読取部３０２は、プロジェクタ１により投影されているドットパターンを読み取る。即ち、本実施形態においては、ドットパターン読取部３０２が位置特定部として機能する。ユーザ操作部３０３は、ユーザが電子ペン３を操作するためのボタンやスイッチなどの操作部である。ドングル側通信部３０４は、電子ペン３がドングル２と通信するためのインタフェースである。優先順位記憶部３０５は、後述する優先順位を記憶する。画像書込部３０６は、プロジェクタ１による投影画像に対して画像を書き込む。即ち、本実施形態においては、画像書込部３０６が投影画像に対して画像を描画する描画部として機能する。
【００４３】
また、図５に示すように、本実施形態に係るＰＣ４は、ＰＣ制御部４０１、表示部４０２、ユーザ操作部４０３、プロジェクタ側通信部４０４、ドングル側通信部４０５、優先順位記憶部４０６を備える。
【００４４】
ＰＣ制御部４０１は、ＰＣ４全体を制御する。表示部４０２は、画像を表示する出力インタフェースである。即ち、本実施形態においては、表示部４０２が描画画像再現部として機能する。ユーザ操作部４０３は、ユーザがＰＣ４を操作するためのボタンやスイッチ、マウス、キーボードなどの操作部である。プロジェクタ側通信部４０４は、ＰＣ４がプロジェクタ１と通信するためのインタフェースである。ドングル側通信部４０５は、ＰＣ４がドングル２と通信するためのインタフェースである。優先順位記憶部４０６は、後述する優先順位を記憶する。
【００４５】
ここで、マルチプロジェクションシステムにインタラクティブシステムを適用する場合に生じ得る課題について図６（ａ）、（ｂ）を参照して説明する。図６（ａ）、（ｂ）は、マルチプロジェクションシステムにインタラクティブを適用する場合に生じ得る課題について説明するための図である。
【００４６】
マルチプロジェクションシステムにインタラクティブシステムを適用する場合、図６（ａ）に示すように、隣り合うプロジェクタによる投影画像の重なり部分において投影位置にズレがあると、ＰＣ４により再現される書き込み画像は、図６（ｂ）に示すように、実際の書き込み画像とは異なった画像としてＰＣ４に表示されることになる。これは、重なり部分において、各プロジェクタが投影するドットパターンにズレが生じるためである。
【００４７】
そこで、本実施形態に係るマルチプロジェクションシステムは、各ドングルに優先順位を設定しておき、隣り合うプロジェクタによる投影画像の重なり部分への書き込み画像については、最も優先順位の高いドングルが接続されているプロジェクタによる投影領域に書き込まれた画像のみを採用するように構成されている。
【００４８】
このときの様子を図７（ａ）、（ｂ）に示す。図７（ａ）、（ｂ）は、本実施形態に係るマルチプロジェクションシステムにおいて、ＰＣ４により再現される書き込み画像の表示例を示す図である。尚、図７（ａ）においては、図６（ａ）におけるドングル２ａが最も優先順位が高い場合について示しており、図７（ｂ）においては、図６（ａ）におけるドングル２ｂが最も優先順位が高い場合について示している。
【００４９】
本実施形態に係るマルチプロジェクションシステムは、このように構成されることで、インタラクティブシステムを適用する場合に、投影画像への書き込み画像の再現性を向上させることが可能となる。
【００５０】
尚、隣り合うプロジェクタによる投影画像の重なり部分への書き込み画像について、最も優先順位の高いドングルが接続されているプロジェクタによる投影領域に書き込まれた画像のみを採用するだけでは、ＰＣ４により再現される書き込み画像は、図７（ａ）、（ｂ）に示すように、その重なり部分でズレて表示されることがある。
【００５１】
そこで、本実施形態に係るマルチプロジェクションシステムは、さらに、隣り合うプロジェクタによる投影画像の重なり部分における投影位置のズレに応じて書き込み画像を補正するように構成されている。
【００５２】
このときの様子を図８（ａ）、（ｂ）に示す。図８（ａ）、（ｂ）は、本実施形態に係るマルチプロジェクションシステムにおいて、ＰＣ４により再現される書き込み画像の表示例を示す図である。尚、図８（ａ）においては、図６（ａ）におけるドングル２ａが最も優先順位が高い場合について示しており、図８（ｂ）においては、図６（ａ）におけるドングル２ｂが最も優先順位が高い場合について示している。
【００５３】
本実施形態に係るマルチプロジェクションシステムは、このように構成されることで、インタラクティブシステムを適用する場合に、投影画像への書き込み画像の再現性をさらに向上させることが可能となる。
【００５４】
次に、ユーザがインタラクティブシステムを利用する際の処理について、図９を参照して説明する。図９は、ユーザがインタラクティブシステムを利用する際の処理を説明するためのフローチャートである。
【００５５】
図９に示すように、ユーザは、インタラクティブシステムを利用する際にはまず、インタラクティブシステムの設定を行う（Ｓ９０１）。
【００５６】
そして、ユーザは、インタラクティブシステムをマルチプロジェクションで利用する場合（Ｓ９０２／ＹＥＳ）、マルチプロジェクションシステムの設定を行い（Ｓ９０３）、各ドングル２と電子ペン３との登録処理を行う（Ｓ９０４）。Ｓ９０４におけるドングル２と電子ペン３との登録処理の様子を図１０、図１１に示す。図１０、図１１は、本実施形態に係るマルチプロジェクションシステムにおけるドングル２と電子ペン３との登録処理の際にプロジェクタ１により投影される画面の表示例を示す図である。
【００５７】
ドングル２と電子ペン３との登録処理を行う前は、各ドングル２は、それぞれの位置関係を把握できていない。そのため、Ｓ９０４におけるドングル２と電子ペン３との登録処理の際、図１０に示すように、各ドングル２はそれぞれ、「登録したい電子ペンを左から順に触れて下さい。」といったように、ユーザに位置関係を決定させるための文言を自身が接続されているプロジェクタ１に投影させる。
【００５８】
尚、複数の電子ペン３を使用する場合、図１１に示すように、各ドングル２はそれぞれ、「他に登録したい電子ペンはありますか？ＹＥＳ／ＮＯ」といったように、ユーザに複数の電子ペン３の登録処理を行わせるための文言を自身が接続されているプロジェクタ１に投影させる。
【００５９】
一方、ユーザは、インタラクティブシステムをマルチプロジェクションで利用しない場合、即ち、一つのプロジェクタのみでインタラクティブシステムを利用する場合（Ｓ９０２／ＮＯ）、ドングル２と電子ペン３との登録処理を１対１で行う（Ｓ９０５）。
【００６０】
尚、一度登録処理を行った電子ペン３は、ドングル２側に記憶されるため、次からは登録処理を行うことなく使用することが可能となる。このとき、ドングル２は、一度登録処理を行った電子ペン３の固有識別情報を電子ペン情報記憶部２０９に記憶しておくことで、一度登録処理を行った電子ペン３を記憶している。即ち、本実施形態においては、電子ペン情報記憶部２０９が識別情報記憶部として機能する。
【００６１】
次に、本実施形態に係るマルチプロジェクションシステムにおけるドングル２と電子ペン３との登録処理について、図１２〜図１４を参照して説明する。図１２〜図１４は、本実施形態に係るマルチプロジェクションシステムにおけるドングル２と電子ペン３との登録処理を説明するためのシーケンス図である。
【００６２】
図１２に示すように、本実施形態に係るマルチプロジェクションシステムにおけるドングル２と電子ペン３との登録処理の際にはまず、ドングル２ａ、２ｂ、２ｃにおいて、ドットパターン生成部２０２は、それぞれ異なるドットパターンａ、ｂ、ｃを生成して、生成したドットパターンをプロジェクタ１ａ、１ｂ、１ｃに投影させる（Ｓ１２０１〜Ｓ１２０３）。
【００６３】
そして、ユーザ操作によりプロジェクタ１ａによる投影画像に電子ペン３がタッチさせられると（Ｓ１２０４）、電子ペン３において、ドットパターン読取部３０２は、そこに投影されているドットパターンを読み取って読取情報を生成し（Ｓ１２０５）、ドングル側通信部３０４を介してその読取情報をドングル２ａ、２ｂ、２ｃに送信する（Ｓ１２０６）。即ち、本実施形態においては、ドングル側通信部３０４が位置通知部として機能する。
【００６４】
そして、ドングル２ａにおいて、ドングル制御部２０１は、電子ペン３から送信されてきた読取情報が、自身が生成したドットパターンが読み取られることにより生成された読取情報であることを確認すると、自身の位置は最も左側であることを把握し、その位置関係を位置関係記憶部２０８に記憶させる（Ｓ１２０７）。即ち、ここでは、ドングル制御部２０１が位置関係決定部として機能する。
【００６５】
一方、ドングル２ｂ、２ｃにおいて、ドングル制御部２０１はそれぞれ、電子ペン３から送信されてきた読取情報が、自身が生成したドットパターンが読み取られることにより生成された読取情報ではないことを確認すると、その読取情報を破棄する（Ｓ１２０８、Ｓ１２０９）。
【００６６】
そして、ドングル２ａにおいて、ドングル制御部２０１は、Ｓ１２０７において把握した自身の位置をドングル２ｂ、２ｃに通知する（Ｓ１２１０）。これにより、ドングル２ｂ、２ｃにおいて、ドングル制御部２０１はそれぞれ、ドングル２ａの位置を把握し、その位置関係を位置関係記憶部２０８に記憶させる（Ｓ１２１１、Ｓ１２１２）。
【００６７】
次に、図１３に示すように、電子ペン３がユーザ操作によりプロジェクタ１ｂによる投影画像にタッチさせられると（Ｓ１３０１）、電子ペン３において、ドットパターン読取部３０２は、そこに投影されているドットパターンを読み取って読取情報を生成し（Ｓ１３０２）、その読取情報をドングル２ａ、２ｂ、２ｃに送信する（Ｓ１３０３）。
【００６８】
そして、ドングル２ｂにおいて、ドングル制御部２０１は、電子ペン３から送信されてきた読取情報が、自身が生成したドットパターンが読み取られることにより生成された読取情報であることを確認すると、自身の位置はドングル２ａの右隣であること、即ち、ドングル２ａ、２ｂの位置関係を把握し、その位置関係を位置関係記憶部２０８に記憶させる（Ｓ１３０４）。
【００６９】
一方、ドングル２ａ、２ｃにおいて、ドングル制御部２０１はそれぞれ、電子ペン３から送信されてきた読取情報が、自身が生成したドットパターンが読み取られることにより生成された読取情報ではないことを確認すると、その読取情報を破棄する（Ｓ１３０５、Ｓ１３０６）。
【００７０】
そして、ドングル２ｂにおいて、ドングル制御部２０１は、Ｓ１３０４において把握した位置関係をドングル２ａ、２ｃに通知する（Ｓ１３０７）。これにより、ドングル２ａ、２ｃはそれぞれ、ドングル２ａと２ｂとの位置関係を把握し、その位置関係を位置関係記憶部２０８に記憶させる（Ｓ１３０８、Ｓ１３０９）。
【００７１】
次に、図１４に示すように、電子ペン３がユーザ操作によりプロジェクタ１ｃによる投影画像にタッチさせられると（Ｓ１４０１）、電子ペン３において、ドットパターン読取部３０２は、そこに投影されているドットパターンを読み取って読取情報を生成し（Ｓ１４０２）、その読取情報をドングル２ａ、２ｂ、２ｃに送信する（Ｓ１４０３）。
【００７２】
そして、ドングル２ｃにおいて、ドングル制御部２０１は、電子ペン３から送信されてきた読取情報が、自身が生成したドットパターンが読み取られることにより生成された読取情報であることを確認すると、自身の位置はドングル２ｂの右隣であること、即ち、ドングル２ａ、２ｂ、２ｃの位置関係を把握し、その位置関係を位置関係記憶部２０８に記憶させる（Ｓ１４０４）。
【００７３】
一方、ドングル２ａ、２ｂにおいて、ドングル制御部２０１はそれぞれ、電子ペン３から送信されてきた読取情報が、自身が生成したドットパターンが読み取られることにより生成された読取情報ではないことを確認すると、その読取情報を破棄する（Ｓ１４０５、Ｓ１４０６）。
【００７４】
そして、ドングル２ｃにおいて、ドングル制御部２０１は、Ｓ１４０４において把握した位置関係をドングル２ａ、２ｂに通知する（Ｓ１４０７）。これにより、ドングル２ａ、２ｂにおいて、ドングル制御部２０１はそれぞれ、ドングル２ａ、２ｂ、２ｃの位置関係を把握し、その位置関係を位置関係記憶部２０８に記憶させる（Ｓ１４０８、Ｓ１４０９）。以上の処理によりドングル２と電子ペン３との登録処理が完了する。
【００７５】
尚、図１２〜図１４においては、ドングル２側でそれぞれの位置関係を把握するように登録処理を行う例について説明した。次に、電子ペン３側でドングル２の位置関係を把握するように登録処理を行う例について、図１５を参照して説明する。図１５は、本実施形態に係るマルチプロジェクションシステムにおけるドングル２と電子ペン３との登録処理を説明するためのシーケンス図である。
【００７６】
図１５に示すように、本実施形態に係るマルチプロジェクションシステムにおけるドングル２と電子ペン３との登録処理の際にはまず、ドングル２ａ、２ｂ、２ｃにおいて、ドットパターン生成部２０２は、それぞれ自身を一意に識別するための固有識別情報であるドングル情報が埋め込まれたドットパターンａ、ｂ、ｃを生成して、生成したドットパターンをプロジェクタ１ａ、１ｂ、１ｃに投影させる（Ｓ１５０１）。
【００７７】
そして、電子ペン３がユーザ操作によりプロジェクタ１ａによる投影画像にタッチさせられると（Ｓ１５０２）、電子ペン３において、ドットパターン読取部３０２は、そこに投影されているドットパターンを読み取る（Ｓ１５０３）。
【００７８】
そして、電子ペン３において、電子ペン制御部３０１は、読み取ったドットパターンからドングル情報を抽出し、そのドングル情報からドングル２ａにより生成されたドットパターンを読み取ったことを確認することで、ドングル２ａの位置は最も左側であることを把握する（Ｓ１５０４）。即ち、ここでは、電子ペン制御部３０１が位置関係決定部として機能する。
【００７９】
次に、電子ペン３がユーザ操作によりプロジェクタ１ｂによる投影画像にタッチさせられると（Ｓ１５０５）、電子ペン３において、ドットパターン読取部３０２は、そこに投影されているドットパターンを読み取る（Ｓ１５０６）。
【００８０】
そして、電子ペン３において、電子ペン制御部３０１は、読み取ったドットパターンからドングル情報を抽出し、そのドングル情報からドングル２ｂにより生成されたドットパターンを読み取ったことを確認することで、ドングル２ｂの位置はドングル２ａの右隣であること、即ち、ドングル２ａ、２ｂの位置関係を把握する（Ｓ１５０７）。
【００８１】
次に、電子ペン３がユーザ操作によりプロジェクタ１ｃによる投影画像にタッチさせられると（Ｓ１５０８）、電子ペン３において、ドットパターン読取部３０２は、そこに投影されているドットパターンを読み取る（Ｓ１５０９）。
【００８２】
そして、電子ペン３において、電子ペン制御部３０１は、読み取ったドットパターンからドングル情報を抽出し、そのドングル情報からドングル２ｂにより生成されたドットパターンを読み取ったことを確認することで、ドングル２ｃの位置はドングル２ｂの右隣であること、即ち、ドングル２ａ、２ｂ、２ｃの位置関係を把握する（Ｓ１５１０）。
【００８３】
そして、電子ペン３において、電子ペン制御部３０１は、このようにしてドングル２ａ、２ｂ、２ｃの位置関係を把握すると、所定の規則に従って優先順位を決定し、優先順位記憶部３０５に記憶させる（Ｓ１５１１）。ここで、所定の規則とは、例えば、左、又は、右から順番に優先順位が低くなるように決定したり、中央が最も優先順位が高くなるように決定したりするといった規則である。以上の処理によりドングル２と電子ペン３との登録処理が完了する。
【００８４】
尚、図１２〜図１４を参照して説明した登録処理の場合、電子ペン３側において各ドングル２の位置関係を記憶する必要が無いため、図１５を参照して説明した登録処理の場合に比べて、電子ペン３の構成を簡素化することができる。また、図１５を参照して説明した登録処理の場合、ドングル２側において各ドングル２の位置関係を記憶する必要が無いため、図１２〜図１４を参照して説明した登録処理の場合に比べて、ドングル２の構成を簡素化することができる。
【００８５】
次に、本実施形態に係るマルチプロジェクションシステムにおいて電子ペン３が重なり部分においてドットパターンを読み取る際の処理について、図１６を参照して説明する。図１６は、本実施形態に係るマルチプロジェクションシステムにおいて電子ペン３が重なり部分においてドットパターンを読み取る際の処理を説明するためのフローチャートである。尚、図１６においては、図１２〜図１４を参照して説明した登録処理が行われた場合について説明する。
【００８６】
図１６に示すように、本実施形態に係るマルチプロジェクションシステムにおいて電子ペン３が重なり部分においてドットパターンを読み取る際にはまず、ＰＣ４においてＰＣ制御部４０１は、所定の規則に従ってドングル２の位置に優先順位を決定し、有線ユンに記憶部４０６に記憶させる（Ｓ１６０１）。
【００８７】
そして、ドングル２ａ、２ｂにおいて、ドットパターン生成部２０２はそれぞれ、ドットパターンを生成して生成したドットパターンをプロジェクタ１ａ、１ｂに投影させる（Ｓ１６０２、Ｓ１６０３）。
【００８８】
そして、電子ペン３がユーザ操作によりプロジェクタ１ａ、１ｂによる投影画像の重なり部分にタッチさせられると（Ｓ１６０４）、電子ペン３において、ドットパターン読取部３０２は、そこに投影されているドットパターンを読み取って読取情報を生成し（Ｓ１６０５）、その読取情報をドングル２ａ、２ｂに送信する（Ｓ１６０６）。
【００８９】
尚、このとき、電子ペン３は、読取情報を全ドングル２に対して送信するが、読取情報が送信されてきた各ドングル２は、既にどの位置に自分が生成したドットパターンが投影されているかを知っているため、送信されてきた読取情報から自分が生成したドットパターンが読み取られたのか、それとも他のドングルが生成したドットパターンが読み取られたのかを判断することができる。
【００９０】
そして、ドングル２ａ、２ｂにおいて、ドングル制御部２０１はそれぞれ、自身の位置情報と電子ペン３から送信されてきた読取情報とをＰＣ４に送信する（Ｓ１６０７、Ｓ１６０８）。このとき、ドングル２ａ、２ｂにおいて、ドングル制御部２０１はそれぞれ、電子ペン３から送信されてきた読取情報に基づき、どの位置に画像が書き込まれたかを検知し、その検知情報を読取情報としてＰＣ４に送信する。
【００９１】
そして、ＰＣ４において、ＰＣ制御部４０１は、ドングル２ａ、２ｂから送信されてきた位置情報に基づき、優先順位が高い方の位置にあるドングル２から送信されてきた読取情報のみを採用し、もう一方のドングルから送信されてきた読取情報を破棄する（Ｓ１６０９）。即ち、ここでは、ＰＣ制御部４０１が位置決定部として機能する。
【００９２】
尚、図１６においては、図１２〜図１４を参照して説明した登録処理が行われた場合について説明した。次に、図１５を参照して説明した登録処理が行われた場合について、図１７を参照して説明する。図１７は、本実施形態に係るマルチプロジェクションシステムにおいて電子ペン３が重なり部分においてドットパターンを読み取る際の処理を説明するためのフローチャートである。尚、図１７においては、ドングル２ａ＞２ｂの順に優先順位が高いものとして説明する。
【００９３】
図１７に示すように、本実施形態に係るマルチプロジェクションシステムにおいて電子ペン３が重なり部分においてドットパターンを読み取る際にはまず、ドングル２ａ、２ｂにおいて、ドットパターン生成部２０２はそれぞれ、ドットパターンを生成して生成したドットパターンをプロジェクタ１ａ、１ｂに投影させる（Ｓ１７０１、Ｓ１７０２）。
【００９４】
そして、電子ペン３がユーザ操作によりプロジェクタ１ａ、１ｂによる投影画像の重なり部分にタッチさせられると（Ｓ１７０３）、電子ペン３において、電子ペン制御部３０１は、そこに投影されているドットパターンを読み取って読取情報を生成する（Ｓ１７０４）。尚、このとき、電子ペン３は、既にどのドングルが生成したドットパターンがどこに投影されているかを知っているため、読み取ったドットパターンを生成したドングルにのみ読取情報を送信することができる。
【００９５】
そして、電子ペン３において、電子ペン制御部３０１は、Ｓ１５１１において決定した優先順位に基づき、ドングル２ａの方がドングル２ｂよりも優先順位が高いと判断して、Ｓ１７０４において生成した読取情報をドングル２ａにのみ送信する（Ｓ１７０５）。即ち、ここでは、電子ペン制御部３０１が位置決定部として機能する。
【００９６】
そして、ドングル２ａにおいて、ドングル制御部２０１は、電子ペン３から送信されてきた読取情報をＰＣ４に送信する（Ｓ１７０６）。
【００９７】
以上、説明したように、本実施形態に係るマルチプロジェクションシステムは、各ドングルに優先順位を設定しておき、隣り合うプロジェクタによる投影画像の重なり部分への書き込み画像については、最も優先順位の高いドングルが接続されているプロジェクタによる投影領域に書き込まれた画像のみを採用するように構成されている。
【００９８】
本実施形態に係るマルチプロジェクションシステムは、このように構成されることで、インタラクティブシステムを適用する場合に、投影画像への書き込み画像の再現性を向上させることが可能となる。
【００９９】
尚、本実施形態においては、ドングル２がプロジェクタ１に接続されている例について説明したが、ドングル２の機能をプロジェクタ１が備えるように構成されていても良い。また、本実施形態においては、ドングル２側でドットパターンを生成する例について説明したが、ＰＣ４側でプロジェクタ毎にそれぞれドットパターンを生成するように構成されていても良い。
【符号の説明】
【０１００】
１  プロジェクタ
１ａ  プロジェクタ
１ｂ  プロジェクタ
１ｃ  プロジェクタ
２ａ  ドングル
２ｂ  ドングル
２ｃ  ドングル
３  電子ペン
４  ＰＣ
１１  ＣＰＵ
１２  ＲＡＭ
１３  ＲＯＭ
１４  ＨＤＤ
１５  操作表示装置
１６  通信Ｉ／Ｆ
１７  画像投影装置
１８  バス
２１  ＣＰＵ
２２  ＲＡＭ
２３  ＲＯＭ
２４  ＮＶＲＡＭ
２５  通信Ｉ／Ｆ
２６  バス
４１  ＣＰＵ
４２  ＲＡＭ
４３  ＲＯＭ
４４  ＨＤＤ
４５  操作表示装置
４６  通信Ｉ／Ｆ
４７  画像表示装置
４８  バス
１０１  プロジェクタ制御部１０１
１０２  投影部
１０３  ユーザ操作部
１０４  ＰＣ側通信部
１０５  ドングル側通信部
２０１  ドングル制御部
２０２  ドットパターン生成部
２０３  ユーザ操作部
２０４  ＰＣ側通信部
２０５  プロジェクタ側通信部
２０６  電子ペン側通信部
２０７  ドングル側通信部
２０８  位置関係記憶部
２０９  電子ペン情報記憶部
３０１  電子ペン制御部
３０２  ドットパターン読取部
３０３  ユーザ操作部
３０４  ドングル側通信部
３０５  優先順位記憶部
４０１  ＰＣ制御部
４０２  表示部
４０３  ユーザ操作部
４０４  プロジェクタ側通信部
４０５  ドングル側通信部
４０６  優先順位記憶部
【先行技術文献】
【特許文献】
【０１０１】
【特許文献１】特開２０１４−１９９５２５号公報
【図１】
2017092568.tif 000003
【図２】
2017092568.tif 000004
【図３】
2017092568.tif 000005
【図４】
2017092568.tif 000006
【図５】
2017092568.tif 000007
【図６】
2017092568.tif 000008
【図７】
2017092568.tif 000009
【図８】
2017092568.tif 000010
【図９】
2017092568.tif 000011
【図１０】
2017092568.tif 000012
【図１１】
2017092568.tif 000013
【図１２】
2017092568.tif 000014
【図１３】
2017092568.tif 000015
【図１４】
2017092568.tif 000016
【図１５】
2017092568.tif 000017
【図１６】
2017092568.tif 000018
【図１７】
2017092568.tif 000019