(57)【要約】【課題】複数のスクリーンの各々に投影する映像の画質をスクリーン毎に設定された画質に保つことができる投影システムを提供する。【解決手段】投影システムは、複数の携帯型スクリーン４の各々に映像を投影する投影部２１と、投影部２１に対する各携帯型スクリーン４の配置状態を検知する物体検知部２２と、各携帯型スクリーン４に投影する映像の画質が携帯型スクリーン４毎に設定された画質へ近づくように、物体検知部２２の検知結果に応じて投影部２１を制御する制御装置５とを有する。【選択図】図２
2019152815.tif 000002
【特許請求の範囲】
【請求項１】
複数のスクリーンの各々に映像を投影する投影部と、
前記投影部に対する各前記スクリーンの配置状態を検知する検知部と、
各前記スクリーンに投影する映像の画質が前記スクリーン毎に設定された画質へ近づくように、前記検知部の検知結果に応じて前記投影部を制御する制御部と
を有する投影システム。
【請求項２】
前記検知部は、前記複数のスクリーンが配置された検知対象領域における物体の各部分の位置を検知し、
前記制御部は、
前記検知部の検知結果に基づいて、前記検知対象領域における前記スクリーンの位置及び姿勢の少なくとも一方に関する配置状態情報を、前記複数のスクリーンの各々について取得し、
一の前記スクリーンについて取得した前記配置状態情報に応じて、当該一のスクリーンに投影する映像の画質が当該一のスクリーンについて設定された画質に近づくように前記投影部を制御する投影制御を、前記複数のスクリーンの各々について行う、
請求項１に記載の投影システム。
【請求項３】
前記制御部は、前記検知部の検知結果に基づく各前記スクリーンの前記配置状態情報の取得を反復するとともに、前記配置状態情報に応じた各前記スクリーンの前記投影制御を反復する、
請求項２に記載の投影システム。
【請求項４】
前記スクリーン毎に設定された画質は、明るさ、コントラスト、色の濃さ、色合い、シャープネス、幾何歪み、シェーディング及び色むらの少なくとも１つを含む
請求項２又は請求項３に記載の投影システム。
【請求項５】
前記制御部は、
前記複数のスクリーンの少なくとも一部について、明るさ、コントラスト、色の濃さ、色合い及びシャープネスの少なくとも１つを設定する画質設定指示を入力可能であり、
一の前記スクリーンについて前記画質設定指示を入力した場合、当該一のスクリーンの前記投影制御において、当該一のスクリーンに投影する映像の画質における明るさ、コントラスト、色の濃さ、色合い及びシャープネスの少なくとも１つが前記画質設定指示により設定された画質へ近づくように、前記配置状態情報に応じて前記投影部を制御する、
請求項４に記載の投影システム。
【請求項６】
前記制御部は、
前記検知部の検知結果に基づく各前記スクリーンの前記配置状態情報の取得を反復するとともに、前記配置状態情報に応じた各前記スクリーンの前記投影制御を反復し、
一の前記スクリーンに投影する映像の画質を設定する画質設定指示を入力した場合、当該画質設定指示に応じて当該一のスクリーンに投影する映像の画質が変化するように前記投影部における画質の設定を変更するとともに、前記変更後の画質の設定に関する第１設定情報と、当該一のスクリーンについて取得した最新の前記配置状態情報である第２設定情報とを記憶し、
当該一のスクリーンの前記投影制御において、当該一のスクリーンについて取得した最新の前記配置状態情報と、前記画質設定指示の入力時に記憶した前記第１設定情報及び前記第２設定情報とに応じて、当該一のスクリーンに投影する映像の画質が前記画質設定指示の入力時における画質へ近づくように前記投影部を制御する、
請求項２〜請求項５の何れか一項に記載の投影システム。
【請求項７】
前記制御部は、前記検知部の検知結果に基づいて、ユーザのジェスチャーによる前記画質設定指示を入力する、
請求項５又は請求項６に記載の投影システム。
【請求項８】
前記制御部は、前記複数のスクリーンの各々について、前記スクリーン毎に設定された画質に関する情報と前記スクリーン毎に割り当てられた識別情報とを関連付けて記憶する、
請求項２〜請求項７の何れか一項に記載の投影システム。
【請求項９】
前記制御部は、前記検知部の検知結果に基づいて、各前記スクリーンの前記識別情報を取得する、
請求項８に記載の投影システム。
【請求項１０】
前記複数のスクリーンが配置される領域における環境光の強度を検出する環境光検出部を有し、
前記制御部は、一の前記スクリーンの前記投影制御において、当該一のスクリーンについて取得した前記配置状態情報と前記環境光検出部の検出結果とに応じて、当該一のスクリーンに投影する映像の画質が当該一のスクリーンについて設定された画質に近づくように前記投影部を制御する、
請求項２〜請求項９の何れか一項に記載の投影システム。
【請求項１１】
前記制御部は、
前記環境光検出部が検出した前記環境光の強度の時間的な変化を平滑化するフィルタ処理を行い、
前記投影制御においては、前記フィルタ処理が施された前記環境光検出部の検出結果に応じて前記投影部を制御する、
請求項１０に記載の投影システム。
【請求項１２】
前記複数のスクリーンが配置される領域を照らす環境照明部を有し、
前記制御部は、前記複数のスクリーンの少なくとも一部について前記画質として設定された映像の明るさに応じて前記環境照明部の照度を制御する、
請求項２〜請求項９の何れか一項に記載の投影システム。
【請求項１３】
複数のスクリーンの各々に映像を投影する投影部と、
前記投影部に対する各前記スクリーンの配置状態を検知する検知部と
を有する投影システムの制御方法であって、
各前記スクリーンに投影する映像の画質が前記スクリーン毎に設定された画質へ近づくように、前記検知部の検知結果に応じて前記投影部を制御すること
を有する投影システムの制御方法。
【請求項１４】
前記複数のスクリーンが配置された検知対象領域における物体の各部分の位置を検知する前記検知部の検知結果に基づいて、前記検知対象領域における前記スクリーンの位置及び姿勢の少なくとも一方に関する配置状態情報を、前記複数のスクリーンの各々について取得することと、
一の前記スクリーンについて取得した前記配置状態情報に応じて、当該一のスクリーンに投影する映像の画質が当該一のスクリーンについて設定された画質に近づくように前記投影部を制御する投影制御を、前記複数のスクリーンの各々について行うこととを有する、
請求項１３に記載の投影システムの制御方法。
【請求項１５】
前記検知部の検知結果に基づく各前記スクリーンの前記配置状態情報の取得を反復することと、
前記配置状態情報に応じた各前記スクリーンの前記投影制御を反復することと、
一の前記スクリーンに投影する映像の画質を設定する画質設定指示を入力した場合、当該画質設定指示に応じて当該一のスクリーンに投影する映像の画質が変化するように前記投影部における画質の設定を変更するとともに、前記変更後の画質の設定に関する第１設定情報と、当該一のスクリーンについて取得した最新の前記配置状態情報である第２設定情報とを記憶することと、
当該一のスクリーンの前記投影制御において、当該一のスクリーンについて取得した最新の前記配置状態情報と、前記画質設定指示の入力時に記憶した前記第１設定情報及び前記第２設定情報とに応じて、当該一のスクリーンに投影する映像の画質が前記画質設定指示の入力時における画質へ近づくように前記投影部を制御することとを有する、
請求項１４に記載の投影システムの制御方法。
【請求項１６】
請求項１３〜請求項１５の何れか一項に記載の投影システムの制御方法をコンピュータに実行させるためのプログラム。
【発明の詳細な説明】
【技術分野】
【０００１】
本開示は、スクリーンに映像を投影する投影システムとその制御方法及びプログラムに関する。
【背景技術】
【０００２】
プロジェクタは、スクリーンを用いた簡易な設備で比較的大きな映像を表示できることから、プレゼンテーションや映画鑑賞などの様々な用途で広く活用されている。
【０００３】
またプロジェクタは、壁などに固定されたスクリーンに限らず、様々な対象物の上に映像を投影可能である。例えば、下記の特許文献には、カメラで撮像した画像に基づいて表示対象物とその位置を特定する機能、及び、投影可能エリア内における投影方向を任意に調整する機能を備えたプロジェクタ装置が記載されている。このプロジェクタ装置は、投影可能エリア内に電子ペーパーが置かれると、この電子ペーパーを表示対象物として特定するとともに、投影可能エリア内での電子ペーパーの位置を特定する。プロジェクタ装置は、表示可能エリアに置かれた電子ペーパーを特定すると、この電子ペーパーに対応付けられている所定の映像を、電子ペーパーの表面やその近傍に向けて投影する。
【先行技術文献】
【特許文献】
【０００４】
【特許文献１】特開２０１６−１１０５４５号公報
【発明の概要】
【発明が解決しようとする課題】
【０００５】
ところで、プロジェクタからスクリーンに投影する映像の画質（明るさ等）は、プロジェクタからスクリーンまでの距離や、プロジェクタの投射光がスクリーンに入射する角度などに応じて変化する。すなわち、プロジェクタに対するスクリーンの位置や姿勢に応じて、スクリーン上の映像の画質が変化する。従って、スクリーンの位置や姿勢に合わせてスクリーン上の適正な範囲に映像を投影するような制御を行う場合、画質についての配慮がなされていないと、スクリーンの位置や姿勢の変化に伴って画質が変化してしまい、ユーザに違和感を与える。映像の画質の評価はユーザの好みに依存することから、このような映像の投影制御を複数のスクリーンについて行う場合、スクリーン毎にユーザの好みに合わせた画質を設定できることが望ましい。
【０００６】
そこで、本開示は、複数のスクリーンの各々に投影する映像の画質をスクリーン毎に設定された画質に保つことができる投影システムとその制御方法及びプログラムを提供することを目的とする。
【課題を解決するための手段】
【０００７】
本開示の第１の側面に係る投影システムは、複数のスクリーンの各々に映像を投影する投影部と、投影部に対する各スクリーンの配置状態を検知する検知部と、各スクリーンに投影する映像の画質がスクリーン毎に設定された画質へ近づくように、検知部の検知結果に応じて投影部を制御する制御部とを有する。
【０００８】
第１の側面に係る投影システムによれば、投影部に対する各スクリーンの配置状態が検知され、その検知結果に応じて、各スクリーンに投影する映像の画質がスクリーン毎に設定された画質へ近づくように投影部が制御される。従って、各スクリーンに投影する映像の画質が、スクリーン毎に設定された画質に保たれ易くなる。
【０００９】
好適に、検知部は、複数のスクリーンが配置された検知対象領域における物体の各部分の位置を検知してよい。制御部は、検知部の検知結果に基づいて、検知対象領域におけるスクリーンの位置及び姿勢の少なくとも一方に関する配置状態情報を、複数のスクリーンの各々について取得してよい。また、制御部は、一のスクリーンについて取得した配置状態情報に応じて、当該一のスクリーンに投影する映像の画質が当該一のスクリーンについて設定された画質に近づくように投影部を制御する投影制御を、複数のスクリーンの各々について行ってよい。
【００１０】
この構成によれば、複数のスクリーンの各々について、配置状態情報の取得と投影制御とが行われる。配置状態情報は、複数のスクリーンが配置された検知対象領域におけるスクリーンの位置及び姿勢の少なくとも一方に関する情報であり、検知対象領域における物体の各部分の位置を検知した結果に基づいて取得される。一のスクリーンについて行われる投影制御では、当該一のスクリーンについて取得された配置状態情報に応じて、当該一のスクリーンに投影する映像の画質が当該一のスクリーンについて設定された画質に近づくように投影部が制御される。これにより、当該一のスクリーンに投影する映像の画質が、当該一のスクリーンについて設定された画質に保たれ易くなる。
【００１１】
好適に、制御部は、検知部の検知結果に基づく各スクリーンの配置状態情報の取得を反復するとともに、配置状態情報に応じた各スクリーンの投影制御を反復してよい。
【００１２】
この構成によれば、各スクリーンの位置や姿勢が変化した場合、その変化の後で各スクリーンの配置状態情報が取得され、取得された配置状態情報に応じて各スクリーンの投影制御が行われる。従って、各スクリーンの位置や姿勢が変化しても、各スクリーンに投影する映像の画質が、スクリーン毎に設定された画質に保たれ易くなる。
【００１３】
好適に、スクリーン毎に設定された画質は、明るさ、コントラスト、色の濃さ、色合い、シャープネス、幾何歪み、シェーディング及び色むらの少なくとも１つを含んでよい。
【００１４】
好適に、制御部は、複数のスクリーンの少なくとも一部について、明るさ、コントラスト、色の濃さ、色合い及びシャープネスの少なくとも１つを設定する画質設定指示を入力可能であってよい。また、制御部は、一のスクリーンについて画質設定指示を入力した場合、当該一のスクリーンの投影制御において、当該一のスクリーンに投影する映像の画質における明るさ、コントラスト、色の濃さ、色合い及びシャープネスの少なくとも１つが画質設定指示により設定された画質へ近づくように、配置状態情報に応じて投影部を制御してよい。
【００１５】
この構成によれば、複数のスクリーンの少なくとも一部について、画質設定指示により、明るさ、コントラスト、色の濃さ、色合い及びシャープネスの少なくとも１つを設定することが可能となる。一のスクリーンについて画質設定指示により画質が設定された場合、当該一のスクリーンに投影する映像の画質における明るさ、コントラスト、色の濃さ、色合い及びシャープネスの少なくとも１つが、画質設定指示により設定された画質へ近づくように、配置状態情報に応じて投影部が制御される。これにより、当該一のスクリーンに投影する映像において、明るさ、コントラスト、色の濃さ、色合い及びシャープネスの少なくとも１つが画質設定指示により設定された画質に保たれ易くなる。
【００１６】
好適に、制御部は、検知部の検知結果に基づく各スクリーンの配置状態情報の取得を反復するとともに、配置状態情報に応じた各スクリーンの投影制御を反復してよい。また、制御部は、一のスクリーンに投影する映像の画質を設定する画質設定指示を入力した場合、当該画質設定指示に応じて当該一のスクリーンに投影する映像の画質が変化するように投影部における画質の設定を変更するとともに、変更後の画質の設定に関する第１設定情報と、当該一のスクリーンについて取得した最新の配置状態情報である第２設定情報とを記憶してよい。そして、制御部は、当該一のスクリーンの投影制御において、当該一のスクリーンについて取得した最新の配置状態情報と、画質設定指示の入力時に記憶した第１設定情報及び第２設定情報とに応じて、当該一のスクリーンに投影する映像の画質が画質設定指示の入力時における画質へ近づくように投影部を制御してよい。
【００１７】
この構成によれば、一のスクリーンに投影する映像の画質を設定する画質設定指示が入力された場合、入力された画質設定指示に応じて当該一のスクリーンに投影する映像の画質が変化するように、投影部における画質の設定が変更される。また、この場合、変更後の画質の設定に関する第１設定情報が記憶されるとともに、当該一のスクリーンについて反復的に取得される配置状態情報のうち、最新の配置状態情報が第２設定情報として記憶される。そして、反復的に実行される当該一のスクリーンの投影制御では、当該一のスクリーンについて取得された最新の配置状態情報と、画質設定指示の入力時に記憶された第１設定情報及び第２設定情報とに応じて、当該一のスクリーンに投影する映像の画質が画質設定指示の入力時における画質へ近づくように投影部が制御される。従って、画質設定指示の入力時に、この画質設定指示によって設定した画質の映像がスクリーンに投影されるため、画質設定指示によって設定した画質を確認することが可能になる。また、投影制御では、画質設定指示の入力時の配置状態情報である第２設定情報と最新の配置状態情報とに基づいて、画質設定指示の入力時と比べた配置状態の違いが分かるため、この配置状態の違いから、画質設定指示の入力時の画質に近似した画質を得るために必要な画質の設定の補正が推定される。
【００１８】
好適に、制御部は、検知部の検知結果に基づいて、ユーザのジェスチャーによる画質設定指示を入力してよい。
【００１９】
この構成によれば、検知部の検知結果が画質設定指示の入力に使用されるため、ジェスチャー入力専用のセンサ等を用いる場合に比べて構成が簡易になる。
【００２０】
好適に、制御部は、複数のスクリーンの各々について、スクリーン毎に設定された画質に関する情報とスクリーン毎に割り当てられた識別情報とを関連付けて記憶してよい。
【００２１】
この構成によれば、スクリーン毎に設定された画質に関する情報を識別情報に基づいて管理することが可能になる。
【００２２】
好適に、制御部は、検知部の検知結果に基づいて、各スクリーンの識別情報を取得してよい。
【００２３】
この構成によれば、検知部の検知結果が各スクリーンの識別情報の取得に使用されるため、識別情報を取得するための専用のセンサ等を用いる場合に比べて構成が簡易になる。
【００２４】
好適に、第１の側面に係る投影システムは、複数のスクリーンが配置される領域における環境光の強度を検出する環境光検出部を有してよい。制御部は、一のスクリーンの投影制御において、当該一のスクリーンについて取得した配置状態情報と環境光検出部の検出結果とに応じて、当該一のスクリーンに投影する映像の画質が当該一のスクリーンについて設定された画質に近づくように投影部を制御してよい。
【００２５】
この構成によれば、複数のスクリーンが配置される領域における環境光の強度の検出結果に応じて、各スクリーンについての投影制御が行われる。そのため、環境光の強度が変化する場合でも、各スクリーンに投影する映像の画質がスクリーン毎に設定された画質に保たれ易くなる。
【００２６】
好適に、制御部は、環境光検出部が検出した環境光の強度の時間的な変化を平滑化するフィルタ処理を行ってよく、投影制御においては、フィルタ処理が施された環境光検出部の検出結果に応じて投影部を制御してよい。
【００２７】
この構成によれば、環境光の強度の急激な変化に応じて投影制御が行われることによる映像の画質の急激な変化が抑制され易くなる。
【００２８】
好適に、第１の側面に係る投影システムは、複数のスクリーンが配置される領域を照らす環境照明部を有してよい。制御部は、複数のスクリーンの少なくとも一部について画質として設定された映像の明るさに応じて、環境照明部の照度を制御してよい。
【００２９】
この構成によれば、複数のスクリーンの少なくとも一部について画質として設定された映像の明るさに応じて、環境照明部の照度が制御されるため、映像の明るさに応じた適切な環境光の強度が得られ易くなる。
【００３０】
本開示の第２の側面は、複数のスクリーンの各々に映像を投影する投影部と、投影部に対する各スクリーンの配置状態を検知する検知部とを有する投影システムの制御方法に関する。この投影システムの制御方法は、各スクリーンに投影する映像の画質がスクリーン毎に設定された画質へ近づくように、検知部の検知結果に応じて投影部を制御することを有する。
【００３１】
好適に、第２の側面に係る投影システムの制御方法は、複数のスクリーンが配置された検知対象領域における物体の各部分の位置を検知する検知部の検知結果に基づいて、検知対象領域におけるスクリーンの位置及び姿勢の少なくとも一方に関する配置状態情報を、複数のスクリーンの各々について取得することと、一のスクリーンについて取得した配置状態情報に応じて、当該一のスクリーンに投影する映像の画質が当該一のスクリーンについて設定された画質に近づくように投影部を制御する投影制御を、複数のスクリーンの各々について行うこととを有する。
【００３２】
好適に、第２の側面に係る投影システムの制御方法は、検知部の検知結果に基づく各スクリーンの配置状態情報の取得を反復することと、配置状態情報に応じた各スクリーンの投影制御を反復することと、一のスクリーンに投影する映像の画質を設定する画質設定指示を入力した場合、当該画質設定指示に応じて当該一のスクリーンに投影する映像の画質が変化するように投影部における画質の設定を変更するとともに、変更後の画質の設定に関する第１設定情報と、当該一のスクリーンについて取得した最新の配置状態情報である第２設定情報とを記憶することと、当該一のスクリーンの投影制御において、当該一のスクリーンについて取得した最新の配置状態情報と、画質設定指示の入力時に記憶した第１設定情報及び第２設定情報とに応じて、当該一のスクリーンに投影する映像の画質が画質設定指示の入力時における画質へ近づくように投影部を制御することとを有する。
【００３３】
本開示の第３の側面は、第２の側面に係る投影システムの制御方法をコンピュータに実行させるためのプログラムに関する。
【発明の効果】
【００３４】
本開示によれば、複数のスクリーンの各々に投影する映像の画質をスクリーン毎に設定された画質に保つことができる投影システムとその制御方法及びプログラムを提供できる。
【図面の簡単な説明】
【００３５】
【図１】図１Ａは、本実施形態に係る投影システムの一例を示す図であり、卓上型スクリーンを用いた投影システムを示す。図１Ｂは、卓上型スクリーンの一例を示す図である。
【図２】図２Ａは、本実施形態に係る投影システムの一例を示す図であり、携帯型スクリーンを用いた投影システムを示す。図２Ｂ〜図２Ｃは、携帯型スクリーンの一例を示す図である。
【図３】図３は、本実施形態に係る投影システムの構成の一例を示す図である。
【図４】図４は、多機能プロジェクタの構成の一例を示す図である。
【図５】図５は、卓上型スクリーンの構成の一例を示す図である。
【図６】図６は、携帯型スクリーンの構成の一例を示す図である。
【図７】図７は、制御装置の構成の一例を示す図である。
【図８】図８は、スクリーンにおける映像の投影状態が一定に保たれることを説明するための図である。
【図９】図９Ａ〜図９Ｄは、複数のスクリーンに映像を投影する方法を説明するための図である。
【図１０】図１０Ａ〜図１０Ｂは、スクリーンに表示される映像の例を示す図であり、ページの切り替えに用いられる仮想的なタブの例を示す。
【図１１】図１１Ａは、手書き操作に応じて映像を更新する例を示す図である。図１１Ｂは、手書き操作の有無の判定に接触センサの検出結果を利用する例を示す図である。
【図１２】図１２Ａ〜図１２Ｃは、携帯型スクリーンの一例を示す図である。
【図１３】図１３Ａ〜図１３Ｄは、携帯型スクリーンの他の例を示す図である。
【図１４】図１４は、基準の配置状態の一例を示す図である。
【図１５】図１５は、画質設定指示を入力する動作の一例を説明するためのフローチャートである。
【図１６】図１６は、スクリーン毎に画質を調整する動作の一例を説明するためのフローチャートである。
【図１７】図１７は、投影制御の一例を説明するためのフローチャートである。
【図１８】図１８は、画質設定指示の入力時における配置状態の一例を示す図である。
【図１９】図１９は、画質設定指示を入力する動作の他の例を説明するためのフローチャートである。
【図２０】図２０は、投影制御の他の例を説明するためのフローチャートである。
【図２１】図２１は、環境光を測定する動作の一例を説明するためのフローチャートである。
【図２２】図２２は、投影制御の他の例を説明するためのフローチャートであり、環境光の強度に応じて画質を調整する例を示す。
【図２３】図２３は、投影制御の他の例を説明するためのフローチャートであり、環境光の強度に応じて画質を調整する例を示す。
【図２４】図２４は、環境照明部を備えた投影システムの構成の一例を示す図である。
【図２５】図２５は、環境照明を調整する動作の一例を説明するためのフローチャートである。
【発明を実施するための形態】
【００３６】
以下、本実施形態に係る投影システムについて図面を参照して説明する。本実施形態に係る投影システムは、単に映像を投影するだけでなく、使用者のジェスチャーやスクリーンの移動などをセンサにより検知して、映像の投影を双方向的に制御する機能を持つ。この投影システムは、例えば会議や研修、授業などにおいて資料等の映像をスクリーンに投影する機能のほか、使用者ごとに閲覧可能な資料等を制限する機能、議事録を自動的に生成する機能などを備える。
【００３７】
図１Ａは、本実施形態に係る投影システムの一例を示す図であり、卓上型スクリーン３を用いた投影システムを示す。また図２Ａは、本実施形態に係る投影システムの他の一例を示す図であり、携帯型スクリーン４を用いた投影システムを示す。これらの例に示す投影システムは、会議室の天井などに設置された多機能プロジェクタ２と、映像が投影される卓上型スクリーン３若しくは携帯型スクリーン４とを有する。図の例では、多機能プロジェクタ２の下方に机１２が配置され、机１２の上に置かれた卓上型スクリーン３や携帯型スクリーン４に向けて多機能プロジェクタ２から映像が投影される。使用者は、机１２の周囲に配置された座席１１に着座して、これらのスクリーン（３，４）に投影される映像を見ながら会議等を行う。
【００３８】
なお、図１Ａ及び図２Ａの例では、卓上型スクリーン３のみ又は携帯型スクリーン４のみが使用されているが、これらのスクリーン（３，４）は机１２の上で両方同時に使用されてもよい。この場合、多機能プロジェクタ２は、各スクリーン（３，４）への映像の投影を並行して行う。
【００３９】
図１Ｂは、卓上型スクリーン３の一例を示す図である。図１Ｂに示す卓上型スクリーン３は、ほぼ矩形の平らな投影面３１１を持った平板状の部材である。投影面３１１には、例えば汎用のプロジェクタ用スクリーンや、反射効率が高いディンプル反射板による高効率スクリーンなどが用いられる。
【００４０】
卓上型スクリーン３の投影面３１１の対角の隅には、星形のマーク３０１及び３０２が設けられている。マーク３０１及び３０２は、後述する物体検知部２２によって検知され、卓上型スクリーン３の位置及び姿勢の判定に使用される。マーク３０１及び３０２は、例えば、特定の波長の光（不可視の赤外線や紫外線など）を受けて蛍光を発生する不可視インクで印刷されたマークでもよいし、一般的な可視のインクで印刷されたマークでもよい。また、マーク３０１及び３０２は、投影光を反射する反射板や、発光素子（発光ダイオード等）でもよい。なお、マーク３０１および３０２は、感熱性インクや電子ペーパー等を用いて書き換え可能に構成されても良い。
【００４１】
卓上型スクリーン３は、四辺の縁の近くに複数のマイク３１とスピーカ３２を備える。複数のマイク３１は、発話者の位置を特定する処理のために異なる場所で発話者の音声を集音する。また、一部のマイク３１は、ノイズ除去処理のために音声以外の環境音を集音する。スピーカ３２は、投影面３１１における使用者の所定のジェスチャーに対応した操作音（クリック音など）や、任意のオーディオデータによる音を発生する。なお、マイク３１やスピーカ３２は、卓上スクリーン３の外縁の端面（卓上スクリーン３の厚みの範囲内）に収容されていても良い。これにより、投影面３１１に対して多機能プロジェクタ２から映像が投影された際に、マイク３１やスピーカ３２に映像が重なることを防止できる。
【００４２】
図２Ｂ〜図２Ｃは、携帯型スクリーン４の一例を示す図である。この図の例において、携帯型スクリーン４はノートのように開閉（変形）可能である。図２Ｂは、閉じた状態における携帯型スクリーン４の表紙４５０を示す。図２Ｂの例において、携帯型スクリーン４の表紙４５０には、使用者の識別情報を含んだ２次元コード４５１と、使用者の顔の写真４５２とが印刷若しくは貼り付けられている。なお、使用者の識別情報を含んだ２次元コード４５１や、使用者の顔の写真４５２は、感熱性インクや電子ペーパー等を用いて書き換え可能に構成されても良い。
【００４３】
図２Ｃは、開いた状態における携帯型スクリーン４の投影面４１１−1，４１１−２を示す。図２Ｃの例において、携帯型スクリーン４は、折り畳み可能な２つの投影面４１１−1及び４１１−２を含む。投影面４１１−1及び４１１−２（以下、区別せずに「投影面４１１」と記す場合がある。）には、例えば汎用のプロジェクタ用スクリーンやディンプル反射板による高効率スクリーンなどが用いられる。
【００４４】
携帯型スクリーン４の２つの投影面４１１には、それぞれ３つのマーク４０１〜４０３が設けられている。マーク４０１〜４０３は、後述する物体検知部２２によって検知され、各投影面４１１の位置及び姿勢の判定や、携帯型スクリーン４の変形状態（開閉状態）の判定に使用される。マーク４０１〜４０３は、インク（不可視インクなど）で印刷されたマークでもよいし、反射板や発光素子でもよい。なお、マーク４０１〜４０３は、感熱性インクや電子ペーパー等を用いて書き換え可能に構成されても良い。
【００４５】
また２つの投影面４１１の端部には、複数のマイク４３とスピーカ４４が設けられている。複数のマイク４３は、発話者の音声やノイズ除去用の環境音を集音する。スピーカ４４は、２つの投影面４１１における使用者の所定のジェスチャーに対応した操作音や、任意のオーディオデータによる音を発生する。マイク４３やスピーカ４４は、投影面４１１−１，４１１−２の外縁の端面における厚みの範囲内に収容されていても良い。これにより、投影面４１１−１，４１１−２に対して多機能プロジェクタ２から映像が投影された際に、マイク４３やスピーカ４４に映像が重なることを防止できる。
【００４６】
図３は、本実施形態に係る投影システムの構成の一例を示す図である。本実施形態に係る投影システムは、全体的な動作を統括的に制御する制御装置５を有する。多機能プロジェクタ２、卓上型スクリーン３及び携帯型スクリーン４は、例えば図３に示すように、Ｂｌｕｅｔｏｏｔｈ（登録商標）や無線ＬＡＮなどの無線通信方式によって制御装置５とそれぞれ通信する。なお、制御装置５との通信は無線通信に限らず、有線の通信でもよい。また、制御装置５を構成する１以上のブロックの少なくとも一部が、他の１以上の装置（例えば多機能プロジェクタ２）に組み込まれていてもよい。
【００４７】
更に制御装置５は、ＬＡＮやその他のネットワークに接続されたサーバ６と通信を行う。制御装置５は、多機能プロジェクタ２が投影する映像のデータや、スクリーン（３，４）のスピーカ（３２，４４）が出力する音のデータ、使用者の識別情報を認証するための情報などをサーバ６から取得する。
【００４８】
図４は、多機能プロジェクタ２の構成の一例を示す図である。図４に示す多機能プロジェクタ２は、投影部２１と、物体検知部２２と、撮像部２３と、通信部２４と、制御部２５とを有する。
【００４９】
投影部２１は、映像を投影する装置である。例えば、投影部２１は、ＬＣＤパネルに光源からの光を通して、ピクセルごとに光を透過させるか遮断するかの制御を行ない、映像を表示させる液晶プロジェクタや、レーザー光源からのレーザー光をＭＥＭＳミラーで反射させ所定領域で走査させることで映像を表示させるレーザープロジェクタ等を含む。
【００５０】
本実施形態において、投影部２１は、制御部２５の制御に応じて投影方向を可変する機能や、投影先における光学像の歪みを補正する機能を備える。例えば投影部２１は、光学系をアクチュエータなどで駆動し、光軸の方向や光学像の形状を調節する。
【００５１】
物体検知部２２は、検知対象領域における物体の各部分の位置を検知する。検知対象領域は、例えば投影部２１の投影範囲を含む３次元の空間であり、物体検知部２２はこの３次元の空間に存在する物体の各部分の位置、すなわち、奥行きを持った３次元の形状を検知する。例えば物体検知部２２は、所定の位置から所定のパターンを持つ赤外光線を検知対象の空間に照射し、空間に存在する物体（携帯型スクリーン４や他の検知対象物１４）で反射された赤外光線の画像を別の位置のカメラで撮像する。物体検知部２２は、撮像した画像における赤外光線のパターンの歪みに基づいて、物体の３次元の形状に関する情報を取得する。あるいは、物体検知部２２は、レーザーから照射した赤外光線が物体で反射されて光学センサで受光されるまでの時間を検知する方式や、異なる位置で撮像された画像のずれを検知する方式など、既に知られている種々の方式によって物体の３次元の情報を取得してもよい。
【００５２】
なお、検知対象領域が２次元の平面（例えば机１２の上の平面）であり、物体（例えば携帯型スクリーン４）の奥行の情報を無視しても物体の位置と姿勢（平面上での回転方向）を検知できる場合、物体検知部２２は２次元画像を撮像するカメラなどでもよい。
【００５３】
撮像部２３は、投影部２１が映像を投影可能な投影範囲と、その周囲を撮像する。撮像部２３が撮像した画像は、投影部２１の投影範囲に接近する使用者１３の検知や、投影範囲の周囲における使用者１３の位置の判定、使用者１３の顔の表情やしぐさなどに関する情報の取得などに用いられる。
【００５４】
通信部２４は、Ｂｌｕｅｔｏｏｔｈ（登録商標）や無線ＬＡＮなどの無線通信方式によって制御装置５と通信を行う装置であり、所定のベースバンド処理を行う回路や送受信回路を含む。
【００５５】
制御部２５は、多機能プロジェクタ２の各構成要素を制御する装置であり、例えばメモリに記憶されるプログラムの命令コードに従って処理を実行するコンピュータを含む。制御部２５は、制御装置５から送られてくるコマンドに応じて、投影部２１における投影方向の制御や光学像の形状の補正を行うとともに、制御装置５から受信した映像データを投影部２１に入力して、映像データに応じた映像を投影する処理を行う。また制御部２５は、物体検知部２２における物体の検知結果や撮像部２３における撮像画像を取得し、制御装置５へ送信する処理を行う。
【００５６】
なお、図４の例では多機能プロジェクタ２の中に物体検知部２２と撮像部２３が含まれているが、これらの装置はそれぞれ独立に設けられていてもよい。
【００５７】
図５は、卓上型スクリーン３の構成の一例を示す図である。図５に示す卓上型スクリーン３は、複数のマイク３１と、複数のスピーカ３２と、入力部３３と、通信部３４と、制御部３５とを有する。また卓上型スクリーン３は、内部の電子回路に電源を供給するためのバッテリ（不図示）を搭載する。
【００５８】
複数のマイク３１（図１Ｂの例では６個）は、発話者の音声やノイズ除去用の環境音をそれぞれ集音する。
【００５９】
複数のスピーカ３２（図１Ｂの例では２個）は、使用者の所定のジェスチャーに応じた操作音や、任意のオーディオデータによる音をそれぞれ発生する。
【００６０】
入力部３３は、使用者の指示を入力するための装置であり、図１Ｂの例では、投影面３１１の側縁部に設けられた回転式のダイヤルを含む。入力部３３は、このダイヤルの回転に応じた信号を制御部３５に入力する。入力部３３から入力された信号は、使用者の指示を表す情報として通信部３４から制御装置５に送信され、映像中の文書のページを送る処理などに使用される。
【００６１】
通信部３４は、Ｂｌｕｅｔｏｏｔｈ（登録商標）や無線ＬＡＮなどの無線通信方式によって制御装置５と通信を行う装置であり、所定のベースバンド処理を行う回路や送受信回路を含む。
【００６２】
制御部３５は、卓上型スクリーン３の各構成要素を制御する装置であり、例えばメモリに記憶されるプログラムの命令コードに従って処理を実行するコンピュータを含む。制御部３５は、複数のマイク３１で集音された音のデータを制御装置５へ送信する処理や、制御装置５から受信したオーディオデータに基づいてスピーカ３２から音を出力する処理、入力部３３で得られた使用者の指示に関する情報を制御装置５へ送信する処理などを行う。
【００６３】
図６は、携帯型スクリーン４の構成の一例を示す図である。図６に示す携帯型スクリーン４は、接触センサ４１と、振動発生器４２と、複数のマイク４３と、スピーカ４４と、入力部４５及び４６と、通信部４７と、制御部４８とを有する。また携帯型スクリーン４は、内部の電子回路に電源を供給するためのバッテリ（不図示）を搭載する。
【００６４】
接触センサ４１は、投影面４１１における指などの物体の接触を検知するセンサであり、例えば物体の接触に伴う圧力の変化を検知する圧電素子を含む。あるいは接触センサ４１は、物体の接触に伴う種々の物理量（静電容量、抵抗、温度など）の変化を検知するセンサを含んでもよい。
【００６５】
振動発生器４２は、投影面４１１に接触する指などへ振動を伝える装置であり、例えば圧電振動子やモーターなど、振動を発生可能な種々のアクチュエータを含む。
【００６６】
なお、接触センサ４１や振動発生器４２と同様なセンサやアクチュエータは、上述した卓上型スクリーン３にも搭載可能である。
【００６７】
複数のマイク４３（図２Ｂの例では２個）は、それぞれ発話者の音声やノイズ除去用の環境音を集音する。
【００６８】
スピーカ４４は、使用者の所定のジェスチャーに応じた操作音や、任意のオーディオデータによる音を発生する。
【００６９】
入力部４５及び４６は、使用者の指示を入力するための装置である。図２Ｂの例において、入力部４５及び４６はそれぞれ回転式のダイヤルを含む。入力部４５のダイヤルは２つの投影面４１１の折り畳み位置に近い側縁部に設けられており、入力部４６のダイヤルは折り畳み位置から離れた投影面４１１の側縁部の中央付近に設けられている。入力部４５及び４６は、ダイヤルの回転に応じた信号をそれぞれ制御部４８に入力する。入力部４５及び４６から入力された信号は、使用者の指示を表す情報として通信部４７から制御装置５に送信され、映像中の文書のページを送る処理などに使用される。
【００７０】
通信部４７は、Ｂｌｕｅｔｏｏｔｈ（登録商標）や無線ＬＡＮなどの無線通信方式によって制御装置５と通信を行う装置であり、所定のベースバンド処理を行う回路や送受信回路を含む。
【００７１】
制御部４８は、携帯型スクリーン４の各構成要素を制御する装置であり、例えばメモリに記憶されるプログラムの命令コードに従って処理を実行するコンピュータを含む。制御部４８は、投影面４１１への接触を検知する接触センサ４１の検知結果を制御装置５へ送信する処理や、制御装置５から送られてきたコマンドに応じて振動発生器４２を振動させ、投影面４１１に触れた指等に振動を触知させる処理を行う。また、制御部４８は、複数のマイク４３で集音された音のデータを制御装置５へ送信する処理や、制御装置５から受信したオーディオデータに基づいてスピーカ４４から音を出力する処理、入力部４５及び４６で得られた使用者の指示に関する情報を制御装置５へ送信する処理なども行う。
【００７２】
図７は、制御装置５の構成の一例を示す図である。図７に示す制御装置５は、表示部５１と、入力部５２と、通信部５３及び５４と、制御部５５とを有する。
【００７３】
表示部５１は、画像を表示する装置であり、例えば液晶ディスプレイや有機ＥＬディスプレイなどを含む。
【００７４】
入力部５２は、投影システムの管理者が指示を入力するための装置であり、例えばキーボードやマウス、タッチパッドなどを含む。
【００７５】
通信部５３は、投影システムにおける各構成要素（多機能プロジェクタ２、卓上型スクリーン３、携帯型スクリーン４）と無線通信を行う装置であり、例えばＢｌｕｅｔｏｏｔｈ（登録商標）や無線ＬＡＮなどの所定の無線通信方式により通信を行う。通信部５３は、所定の無線通信方式に適合したベースバンド処理回路や送受信回路を含む。
【００７６】
通信部５４は、ＬＡＮやその他のネットワークに接続されたサーバ６と通信を行う装置であり、例えばイーサネット（登録商標）などの所定の通信方式に適合したベースバンド処理回路や送受信回路を含む。
【００７７】
制御部５５は、制御装置５による投影システムの全体的な制御を司る装置であり、図７の例では、処理部５６と記憶部５７を含む。処理部５６は、記憶部５７に格納されたプログラムの命令コードに従って処理を実行するコンピュータを含む。記憶部５７は、例えばＲＡＭやフラッシュＲＯＭ、ハードディスク、光ディスクなどの記憶装置を含む。処理部５６における全ての処理は、コンピュータにおいてプログラムに従って実行させてもよいし、少なくとも一部を専用のハードウェア（ロジック回路）で実行させてもよい。処理部５６のコンピュータが実行するプログラムは、記憶部５７に全て記憶されていてもよいし、少なくとも一部をサーバ６や他の外部の装置から適宜ダウンロードしてもよい。
【００７８】
次に、上述した構成を有する投影システムの動作を説明する。
【００７９】
＜開始時の動作＞
制御装置５は、投影部２１の投影範囲の周囲を撮像した撮像部２３の画像に基づいて、投影範囲への使用者の接近を監視する。例えば制御装置５は、サーバ６に予め登録されたミーティングに関する情報（ミーティング情報）を参照し、ミーティング情報に含まれるミーティングの開始時刻の情報に基づいて、開始時刻の所定時間前から使用者の接近を監視する。制御装置５は、投影範囲へ使用者が接近したことを判定すると（例えば会議室の入り口付近の画像で人物の動きを捉えると）、投影部２１を起動させる。
【００８０】
制御装置５は、投影部２１の投影範囲へ使用者が接近したことを判定した場合、使用者が投影範囲を容易に認識できるようにするため、投影範囲を光学像や照明光で指示するように投影部２１を制御する。この場合、制御装置５は、上述したミーティング情報に登録されている席次の情報を参照して、各使用者を決められた座席１１に誘導してもよい。例えば、制御装置５は、各座席１１に着席する使用者の情報をミーティング情報から取得し、この取得した情報に基づいて、着席する使用者の氏名等を各座席１１の近くに表示させてもよい。
【００８１】
＜携帯型スクリーン４を所有する使用者の認証＞
制御装置５は、物体検知部２２の検知結果に基づいて、投影部２１の投影範囲に位置する物体から携帯型スクリーン４を特定する。投影部２１の投影範囲内で新たな携帯型スクリーン４が特定され、その表紙４５０が物体検知部２２の検知可能な方向（図２Ａの例では上側）に向けられている場合、制御装置５は、物体検知部２２により得られた表紙４５０の画像から２次元コード４５１を特定し、２次元コード４５１に含まれる使用者の識別情報を抽出する。制御装置５は、２次元コード４５１から抽出した識別情報とサーバ６に予め登録された情報とを照合することにより、この携帯型スクリーン４が正規の使用者のものであることを認証する。
【００８２】
なお、携帯型スクリーン４の使用者を認証する場合、制御装置５は、２次元コード４５１などから得られる識別情報に加えて、この識別情報に関連付けられたパスワードや署名などの認証情報の入力を使用者に要求してもよい。例えば制御装置５は、パスワードや署名などの認証情報の入力を促す映像を投影部２１から携帯型スクリーン４に投影し、所定のジェスチャー（数字キーによるパスワードの入力操作、署名の記入操作など）を使用者に実施させる。制御装置５は、物体検知部２２により所定のジェスチャーを検知し、所定のジェスチャーが表す認証情報を取得する。制御装置５は、使用者の所定のジェスチャーにより入力された認証情報と、予め識別情報に関連付けてサーバ６等に記憶された認証情報とを照合することにより、使用者が入力した認証情報が正規のものであるか否かを判定する。認証情報が正規のものであると判定した場合、制御装置５は、投影部２１の投影範囲に置かれた携帯型スクリーン４が正規の使用者のものであることを認証する。
【００８３】
携帯型スクリーン４が正規の使用者のものであることを認証すると、制御装置５は、この携帯型スクリーン４との間で無線通信を確立する。制御装置５は、マイク４３で集音された音のデータを携帯型スクリーン４から受信する処理や、スピーカ４４で音を出力させるためのオーディオデータを携帯型スクリーン４へ送信する処理を開始する。
【００８４】
また制御装置５は、携帯型スクリーン４へ投影する映像の内容を、その携帯型スクリーン４の所有者として認証した使用者の識別情報に応じて制限する。例えば、制御装置５は、閲覧権限が設定された機密文書等を携帯型スクリーン４へ投影するように使用者がジェスチャー等で指示した場合、携帯型スクリーン４の所有者として認証した使用者の識別情報に基づいて、閲覧の可否を判定する。制御装置５は、例えば使用者の識別情報に基づいて、その使用者の閲覧権限に関する情報をサーバ６から取得し、使用者が機密文書等の閲覧権限を持つか否か判定する。使用者が閲覧権限を持たないと判定した場合、制御装置５は、その使用者が所有する携帯型スクリーン４への機密文書等の投影を制限する。
【００８５】
＜スクリーンに映像を投影する動作＞
認証された携帯型スクリーン４が投影範囲に置かれると、制御装置５は、物体検知部２２で検知される物体の中から、携帯型スクリーン４の各投影面４１１に設けられたマーク４０１〜４０３を特定する。制御装置５は、携帯型スクリーン４のマーク４０１〜４０３を特定すると、特定したマーク４０１〜４０３が存在する３次元の空間での位置に基づいて、携帯型スクリーン４の投影面４１１の位置及び姿勢を判定する。
【００８６】
仮に、検知対象物が存在する空間の基準となる３次元の直交座標系を「基準座標系」とし、検知対象物（投影面４１１など）に対して固定される３次元の直交座標系を「対象物座標系」とする。この場合、制御装置５は、基準座標系からみた対象物座標系の原点の位置を、検知対象物の位置として判定してもよい。また、制御装置５は、基準座標系の各座標軸を基準とした対象物座標系の各座標軸の回転角を、検知対象物の姿勢として判定してもよい。
【００８７】
制御装置５は、物体検知部２２の検知結果に基づいて投影面４１１の位置及び姿勢を判定すると、この判定結果に応じて、投影面４１１における映像の投影状態が一定に保たれるように投影部２１を制御する。例えば制御装置５は、映像の投影状態として、投影面４１１において映像が投影される範囲や、投影面４１１に対する映像の向きを一定に保つ。
【００８８】
図８は、携帯型スクリーン４における映像の投影状態が一定に保たれることを説明するための図である。図８では、携帯型スクリーン４が１つの投影面４１１に簡略化されている。投影面４１１の形状は、平面視において矩形であり、矩形の３つの角にマーク４０１，４０２，４０３がこの順番で左回りに配置されている。投影面４１１において映像が投影される範囲は、投影面４１１の形状と概ね相似な矩形の範囲である。投影面４１１に対する映像の向きは、マーク４０１及び４０２が設けられた側縁部を下側、マーク４０２及び４０３が設けられた側縁部を右側とする向きである。図８では、投影面４１１（携帯型スクリーン４）の３つの状態が示されており、それぞれの状態で投影面４１１の位置や姿勢は異なっている。しかしながら、投影面４１１において映像が投影される矩形の範囲と、投影面４１１に対する映像の向きは、３つの状態において全て同じである。この図８に示すように、制御装置５は、携帯型スクリーン４の位置や姿勢が様々に変化する場合でも、映像の投影状態（映像の範囲、映像の向き等）が一定に保たれるように投影部２１を制御する。
【００８９】
なお制御装置５は、卓上型スクリーン３についても、上述した携帯型スクリーン４の場合と同様の制御を行う。すなわち、制御装置５は、物体検知部２２が検知したマーク３０１及び３０２の位置に基づいて投影面３１１の位置及び姿勢を判定し、その判定結果に基づいて、投影面３１１における映像の投影状態が所定の状態となるように投影部２１を制御する。
【００９０】
また制御装置５は、変形可能な携帯型スクリーン４については、物体検知部２２の検知結果に基づいて、変形の状態を判定する。例えば制御装置５は、携帯型スクリーン４において各投影面４１１のマーク４０１〜４０３が特定された場合、携帯型スクリーン４が図２Ｃに示す開いた状態になっていることを判定する。
【００９１】
＜複数のスクリーンが存在する場合の動作＞
制御装置５は、投影部２１の投影範囲に複数のスクリーン（卓上型スクリーン３、携帯型スクリーン４）が存在する場合、各々のスクリーンに対する映像の投影を並行に行う。
【００９２】
図９Ａ〜図９Ｄは、複数のスクリーンに映像を投影する方法を説明するための図であり、ここでは例として、４つの携帯型スクリーン４−１〜４−４に並行して映像を投影する場合を説明する。
図９Ａの例では、４つの携帯型スクリーン４−１〜４−４を含む１つの範囲が、１つの映像を投影する範囲となっている。この１つの映像には、４つのスクリーン（４−１〜４−４）に対応した４つの描画部分が含まれている。４つの描画部分は、それぞれ対応するスクリーン（４−１〜４−４）が置かれた場所と重なるように、１つの映像の中に配置されている。４つの描画部分以外の部分（目の細かい斜線の部分）は、例えば輝度の低い影の部分であり、４つの描画部分はこの影の部分によって互いに分離されている。このように、制御部５は、投影部２１の投影範囲内に複数のスクリーンが存在する場合、複数のスクリーンと重なる場所にそれぞれ描画部分が配置された映像を生成し、複数のスクリーンが存在する範囲に向けてこの映像を投影する。
【００９３】
図９Ｂの例では、４つの携帯型スクリーン４−１〜４−４の各々へ順次に映像が投影される。図９Ｂにおいて目の粗い斜線が施された部分は、映像が投影されていない状態のスクリーン表面を示す。４つの携帯型スクリーン４−１〜４−４の各々は、一時的に映像が投影されない状態となるが、順次の映像の投影が短い周期で繰り返されることにより、使用者には連続的に映像が表示されているように見える。このように、制御部５は、投影部２１の投影範囲内に存在する複数のスクリーンの各々へ順次に映像を投影する処理を反復してもよい。
【００９４】
図９Ｃの例では、多機能プロジェクタ２に４つの投影部２１−１〜２１−４が搭載されており、４つの携帯型スクリーン４−１〜４−４に向けて４つの投影部２１−１〜２１−４から個別に映像が投影される。このように、制御装置５は、複数の投影部２１の各々に映像の投影先として１つのスクリーンを割り当ててもよい。これにより、複数のスクリーンが存在する場合には、その各々に向けて個別に映像が投影される。
【００９５】
図９Ｄの例では、多機能プロジェクタ２に２つの投影部２１−１及び２１−２が搭載されており、投影部２１−１から２つの携帯型スクリーン４−１及び４−２に向けて１つの映像が投影され、投影部２１−２から２つの携帯型スクリーン４−３及び４−４に向けて別の１つの映像が投影される。このように、制御部５は、複数の投影部２１の各々に映像の投影先として１つ又は複数のスクリーンを割り当ててもよい。そして、制御装置５は、１つの投影部２１に複数のスクリーンを割り当てた場合には、当該複数のスクリーンと重なる場所にそれぞれ描画部分が配置された映像を生成し、当該複数のスクリーンが存在する範囲に向けて当該１つの投影部２１から当該生成した映像を投影してもよい。
【００９６】
なお、制御装置５は、複数の投影部２１における１つの投影部２１に複数のスクリーンを割り当てた場合、図９Ｂに示す例のように、当該１つの投影部２１から当該複数のスクリーンの各々に向けて順次に映像を投影する処理を反復してもよい。
【００９７】
＜スクリーン以外への映像の投影＞
制御装置５は、ジェスチャーなどによって使用者から与えられる指示に応じて、投影範囲内のスクリーン（卓上型スクリーン３、携帯型スクリーン４）以外の場所にも映像を投影するように投影部２１を制御する。これにより、例えばスクリーン以外の場所に置かれた物品に関する詳細情報を、その物品の近くに投影することが可能である。
【００９８】
なお、制御装置５は、スクリーン以外の場所に映像を投影する場合、障害物によって遮られない場所を映像の投影先として自動的に選択してもよい。例えば、制御装置５は、物体検知部２２の検知結果に基づいて、障害物により映像の投影を遮られる範囲を特定し、映像の投影先の候補として選択した場所が当該特定した範囲と重なる場合は、当該特定した範囲の外側へ映像の投影先を移動させる。
【００９９】
また、投影部２１は、映像の投影だけでなく、照明光の照射にも使用可能である。制御装置５は、ジェスチャーなどによって使用者から与えられる指示に応じて、投影範囲内の特定の場所（若しくは投影範囲の全体）に照明光を照射してもよい。
【０１００】
＜使用者の操作の認識＞
制御装置５は、物体検知部２２において検知される物体の中から、使用者の手や指、使用者が持つペンなどの物体（以下、「操作体」と記す場合がある。）を特定し、特定した操作体の運動が所定のジェスチャーであるか否かを判定する。制御装置５は、操作体（指など）の運動が所定のジェスチャーであると判定した場合、そのジェスチャーに対応した処理を行う。例えば、制御装置５は、使用者の指やペンなどによるジェスチャーに応じて、映像の拡大や縮小、回転、移動を行ったり、映像の色合いの変更、映像に含まれる線の太さの変更などを行う。
【０１０１】
また制御装置５は、上述したジェスチャーによる操作を案内して、使用者が目的の操作を容易に行えるようにするためのユーザインターフェース映像を生成する。図１０Ａ〜図１０Ｂは、そのようなユーザインターフェース映像の例を示す図であり、ページの切り替えに用いられる仮想的なタブの例を示す。この図の例において、制御装置５は、文書の端部に複数の仮想タブ１１０−１〜１１０−７（以下、区別せずに「仮想タブ１１０」と記す場合がある。）が配置された映像を生成する。使用者がこれらの仮想タブ１１０の１つを指示するジェスチャー（例えば指で仮想タブ１１０に触れるジェスチャー）を行うと、制御装置５は、映像に含まれる文書のページを、ジェスチャーにより指示された仮想タブ１１０に対応するページへ切り替える（図１０Ｂ）。仮想タブ１１０に対応しないページへ移動する操作には、例えば卓上型スクリーン３の入力部３３のダイヤル（図１Ｂ）や、携帯型スクリーン４の入力部４５，４６のダイヤル（図２Ｃ）が用いられる。制御装置５は、これらの入力部の操作に応じて、映像に含まれる文書のページを前後へ順番に切り替える。
【０１０２】
更に制御装置５は、物体検知部２２において検知される操作体の運動に基づいて、手書き操作により筆記された線の軌跡を特定する。制御装置５は、手書き操作による線の軌跡を特定した場合、例えば図１１Ａに示すように、特定した線の軌跡が現在の映像と重なって表示されるように、投影する映像を更新する。また制御装置５は、手書き操作の有無を判定するにあたり、例えば図１１Ｂに示すように、接触センサ４１の検出結果を利用してもよい。これにより、投影面４１１へ操作体（指、ペンなど）が接触した状態での操作体の動きを正確に捕捉できるため、手書き操作による線の軌跡の特定を正確に行うことができる。
【０１０３】
制御装置５は、手書き操作による線の軌跡を特定した場合、特定した線の軌跡から文字や図形を認識してもよい。例えば、制御装置５は、線の軌跡から認識した文字や図形を現在の映像に重ねて表示してもよいし、この認識した文字や図形を現在の映像に対応する文書等のデータファイルに追加してもよい。
【０１０４】
＜３次元イメージの取得＞
制御装置５は、ジェスチャーなどによって使用者から与えられる指示に応じて、物体検知部２２の検知対象領域に位置する物体の３次元イメージを取得する。例えば、制御装置５は、スクリーン（卓上型スクリーン３、携帯型スクリーン４）の上に物体が置かれたことを物体検知部２２の検知結果に基づいて判定した場合、その物体の３次元イメージを取得する。この場合、制御装置５は、物体が置かれたスクリーンにおいて投影中の映像に関わるデータファイルに、この３次元イメージのデータを追加してもよい。また、制御装置５は、物体の３次元イメージを取得した場合、取得した３次元イメージを新たな映像としてスクリーンや別の場所に投影してもよい。
【０１０５】
＜議事録データの作成＞
制御装置５は、卓上型スクリーン３のマイク３１や携帯型スクリーン４のマイク４３で集音された音のデータを記録（録音）する。卓上型スクリーン３の複数のマイク３１で音を集音する場合、例えば制御装置５は、複数のマイク３１で集音された音にそれぞれ遅延を与えて合成した合成音を生成し、合成音に含まれる発話の音声の感度が最も高くなるように（発話者の方向へ指向性を持つように）、複数のマイク３１で集音された音にそれぞれ与える遅延の設定を調節する。これにより、発話者の音声が明瞭化される。
【０１０６】
また、制御装置５は、合成音に含まれる発話の音声の感度が最も高くなるように調節した遅延の設定から、発話者の方向を推定する。制御装置５は、発話者の方向を推定すると、この推定した方向と異なる方向から到来する音（環境音）をノイズとして除去する。例えば制御装置５は、複数のマイク３１の一部で集音された音の成分を用いて、上述した合成音に含まれたノイズを除去する処理を行う。これにより、発話者の音声がより明瞭化される。
【０１０７】
更に、制御装置５は、発話者の方向を推定する場合、撮像部２３において撮像された画像を用いてもよい。例えば、制御装置５は、撮像部２３において撮像された画像に基づいて、投影部２１の投影範囲の周囲における人物の位置を特定する。制御装置５は、画像から特定した人物の位置に基づいて、発話者が存在し得る方向の範囲を特定し、この特定した範囲の中で、合成音に含まれる音声の感度が最も高くなる遅延の設定を探索する。これにより、発話者の方向が正確に推定され易くなる。
【０１０８】
制御装置５は、音のデータから発話者の方向を推定した場合、その推定した方向に基づいて、発話者を特定する。例えば、制御装置５は、ミーティング情報に含まれる各使用者の席次の情報と、音のデータから推定した発話者の方向とに基づいて、発話者がどの使用者であるかを特定する。
【０１０９】
なお、複数の携帯型スクリーン４の各々に搭載されたマイク４３から音声を集音する場合、例えば制御装置５は、同一の発話について複数の携帯型スクリーン４で集音された音声を比較する。制御装置５は、この比較の結果に基づいて、同一の発話について最も大きな音声が集音された携帯型スクリーン４の使用者を、その発話の発話者として特定する。
【０１１０】
制御装置５は、録音された音声のデータにおいて発話が記録された時間と、その発話の発話者として特定された使用者の情報（例えば使用者の識別情報）とを関連付けて記録する。また制御装置５は、上述した処理によって明瞭化された音声のデータに基づいて音声認識処理を行い、発話の内容をテキストに変換する。制御装置５は、音声認識処理による音声からテキストへの変換を、例えばリアルタイムで実行する。
【０１１１】
制御装置５は、音声認識処理によってテキストに変換された発話内容のデータと、その発話者として特定された使用者の情報とが、発話の時間に従って時系列化された議事録データを生成する。なお、制御装置５は、発話内容だけでなく、スクリーンに投影された映像の内容に関する情報を時系列化して議事録データに含めてもよい。また、制御装置５は、撮像部２３において撮像された各参加者の表情の画像に基づいて、会話の状況に関する指標（盛り上がりの度合い、和みの度合い、反発の度合い、活発性の度合いなど）を算出し、算出した指標を時系列化して議事録データに含めてもよい。
【０１１２】
＜終了時の動作＞
制御装置５は、ジェスチャーなどによって使用者から与えられる指示に応じて、使用者のミーティングへの参加を終了させる。
【０１１３】
図１２Ａ〜図１２Ｃは、携帯型スクリーン４の一例を示す図であり、図１２Ａは表紙側、図１２Ｂは内側、図１２Ｃは裏表紙側を示す。図１２Ｃに示すように、携帯型スクリーン４の裏表紙４６０には、ミーティングからの離脱の意図を表す２次元コード４６１が印刷若しくは貼り付けられている。２次元コード４６１には、例えば、特定の識別情報の使用者がミーティングから離脱することを示す情報が含まれる。制御装置５は、物体検知部２２において携帯型スクリーン４の裏表紙側の２次元コード４６１が検知されると、この２次元コード４６１に含まれる識別情報に対応した携帯型スクリーン４を、映像の投影対象から除外する。また、制御装置５は、２次元コード４６１に含まれる識別情報と、この２次元コード４６１が検知された時刻とを関連づけて、上述した議事録データに記録してもよい。これにより、特定の使用者がミーティングから離脱した時刻が議事録に記録される。
【０１１４】
＜携帯型スクリーン４の他の例＞
図１３Ａ〜図１３Ｄは、携帯型スクリーン４の他の例を示す図であり、図１２Ａ〜図１２Ｃに示す開閉可能な携帯型スクリーン４に板状の中間部材４１０を追加したものである。ただし、２つのマイク４３とスピーカ４４は、裏表紙４６０の側縁部にそれぞれ配置されている。
【０１１５】
中間部材４１０は、一方の面に投影面４１１−３を持ち、他方の面に投影面４１１−４を持つ。図１３Ｂ及び図１３Ｃの例において、投影面４１１−１，４１１−２，４１１−３及び４１１−４はそれぞれ矩形の形状を持ち、互いに略合同である。中間部材４１０の１つの側縁部が、投影面４１１−１及び４１１−２の境界部分に接続されている。携帯型スクリーン４を閉じた場合、中間部材４１０は、投影面４１１−１及び４１１−２の間に挟まれた状態となる。携帯型スクリーン４を開いた場合、中間部材４１０は、ノートのページのようにめくることができる。図１３Ｂは投影面４１１−３を表側に向けて開いた状態を示し、図１３Ｂは投影面４１１−４を表側に向けて開いた状態を示す。
【０１１６】
図１３Ａ〜図１３Ｄに示す携帯型スクリーン４では、図１３Ｂの展開状態と図１３Ｃの展開状態とで投影面全体のサイズと形状がほぼ同じとなる。そのため、投影面４１１−１及び４１１−２と同一のマーク（４０１〜４０３）が投影面４１１−３及び４１１−４の両方に設けられていると、図１３Ｂの展開状態と図１３Ｃの展開状態との区別がつかなくなる。そこで、複数の投影面を持つ携帯型スクリーン４の場合、各展開状態において投影面全体に設けられた１以上のマークの外見が、他の展開状態と異なるように、個々の投影面におけるマークの数や配置、形状、サイズなどが設定される。図１３Ｂ及び図１３Ｃの例では、図１３Ｂの展開状態と図１３Ｃの展開状態との区別がつくように、投影面４１１−３と投影面４１１−４とでマークの一部が異なっている。すなわち、投影面４１１−３は、投影面４１１−１及び４１１−２と同じ３つのマーク（４０１，４０２，４０３）を持つ一方、投影面４１１−４は、投影面４１１−１及び４１１−２と同じ２つのマーク（４０２，４０３）に十字型のマーク４０１Ａを加えた３つのマーク（４０１Ａ、４０２，４０３）を持つ。制御装置５は、物体検知部２２において検知されるマーク４０１とマーク４０１Ａとの形状の違いから、図１３Ｂの展開状態と図１３Ｃの展開状態とを判別する。
【０１１７】
＜複数のスクリーンに投影する映像の画質を調整する動作＞
次に、上述した投影システムにおいて複数のスクリーンに投影する映像の画質を調整する動作について説明する。ここでは、一例として、複数の携帯型スクリーン４が画質の調整対象となる場合を説明する。なお、画質の調整対象は携帯型スクリーン４に限定される訳ではなく、例えば卓上型スクリーン３が画質の調整対象となってもよい。
【０１１８】
制御装置５は、各携帯型スクリーン４に投影する映像の画質が携帯型スクリーン４毎に設定された画質へ近づくように、物体検知部２２が検知した各携帯型スクリーン４の配置状態（例えば、携帯型スクリーン４の位置や姿勢など）に応じて投影部２１を制御する。これにより、各携帯型スクリーン４に投影する映像の画質が、携帯型スクリーン４毎に設定された画質に保たれ易くなる。
【０１１９】
具体的には、制御装置５は、物体検知部２２の検知結果に基づいて、検知対象領域における携帯型スクリーン４の位置及び姿勢の少なくとも一方に関する情報（以下、「配置状態情報」と呼ぶ場合がある。）を、複数の携帯型スクリーン４の各々について取得する。制御装置５は、この配置状態情報に応じた投影制御を、複数の携帯型スクリーン４の各々について行う。制御装置５は、一の携帯型スクリーン４の投影制御において、当該一の携帯型スクリーン４について取得した配置状態情報に応じて、当該一の携帯型スクリーン４に投影する映像の画質が当該一の携帯型スクリーン４について設定された画質に近づくように投影部２１を制御する。これにより、当該一の携帯型スクリーン４に投影する映像の画質が、当該一の携帯型スクリーン４について設定された画質に保たれ易くなる。
【０１２０】
なお、携帯型スクリーン４の姿勢（例えば、机１２の上の平面における携帯型スクリーン４の回転状態など）が一定である場合や、携帯型スクリーン４の姿勢の変化が画質に影響を与えない場合には、物体検知部２２の検知結果に基づいて判定される携帯型スクリーン４の姿勢に関する情報を配置状態情報に含めなくてもよい。また、携帯型スクリーン４の位置が一定である場合や、携帯型スクリーン４の位置の変化が画質に影響を与えない場合には、物体検知部２２の検知結果に基づいて判定される携帯型スクリーン４の位置に関する情報を配置状態情報に含めなくてもよい。
【０１２１】
制御装置５は、物体検知部２２の検知結果に基づく各携帯型スクリーン４の配置状態情報の取得を反復するとともに、配置状態情報に応じた各携帯型スクリーン４の投影制御を反復する。例えば、制御装置５は、配置状態情報の取得と投影制御とをそれぞれ一定の周期で反復する。これにより、各携帯型スクリーン４の位置や姿勢が変化した場合、その変化の後で各携帯型スクリーン４の配置状態情報が取得され、取得された配置状態情報に応じて各携帯型スクリーン４の投影制御が行われる。従って、各携帯型スクリーン４の位置や姿勢が変化する場合でも、各携帯型スクリーン４に投影する映像の画質が、携帯型スクリーン４毎に設定された画質に保たれ易くなる。
【０１２２】
制御装置５が配置状態情報に応じて調整する画質は、例えば、明るさ、コントラスト、色の濃さ、色合い、シャープネス、幾何歪み、シェーディング、色むらなどを含む。制御装置５は、携帯型スクリーン４毎に、これらの画質が予め設定された画質へ近づくように、配置状態情報に応じて投影部２１を制御する。
【０１２３】
例えば制御装置５は、携帯型スクリーン４が基準の配置状態（例えば、基準の位置や基準の姿勢）にある場合における画質の設定（例えば、明るさの度合いを示す数値など）に関する情報を携帯型スクリーン４毎に記憶する。ここで、携帯型スクリーン４が基準の配置状態にある場合の画質を「基準画質」と呼び、基準画質の設定に関する情報を「基準設定情報」と呼ぶ。制御装置５は、一の携帯型スクリーン４の投影制御において、当該一の携帯型スクリーン４について取得した配置状態情報と、当該一の携帯型スクリーン４について記憶する基準設定情報とに基づいて、配置状態情報が示す配置状態における画質が、基準設定情報により設定された基準画質へ近づくように、投影部２１を制御する。
【０１２４】
具体的には、制御装置５は、一の携帯型スクリーン４の投影制御において、当該一の携帯型スクリーン４について取得した配置状態情報が示す配置状態と基準の配置状態との違い（例えば、基準の位置と現在の位置との違い、基準の姿勢と現在の姿勢との違い）に基づいて、この配置状態情報が示す配置状態における画質が、基準設定情報により設定された基準画質へ近づくように、基準設定情報による基本画質の設定に対して補正を加えた画質設定を取得する。そして制御装置５は、この補正によって取得した画質設定に基づく映像を当該一の携帯型スクリーン４へ投影するように、投影部２１を制御する。なお、制御装置５は、上述した補正によって画質設定を取得する一方で、基準設定情報は変更せずに維持する。すなわち、制御装置５は、一の携帯型スクリーン４の投影制御を反復する場合、同一の画質設定（基準設定情報による基本画質の設定）に対して配置状態情報に応じた補正を加えたものを、当該一の携帯型スクリーン４に映像を投影する際の画質設定として使用する。
【０１２５】
図１４は、基準の配置状態の一例を示す図である。図１４において、「１３Ａ」〜「１３Ｆ」はそれぞれ使用者を示し、「４Ａ」〜「４Ｆ」はそれぞれ携帯型スクリーンを示す。符号の末尾に付された英文字は、使用者とその使用者が使用する携帯型スクリーンとの対応関係を表す（例えば、使用者１３Ａは携帯型スクリーン４Ａを使用する）。また図１４において、「８０」は物体検知部２２の検知対象領域を示し、「７」は基準の配置状態を示す。
【０１２６】
図１４に示す基準の配置状態７は、平面視が楕円形状の机１２のほぼ中心に携帯型スクリーン４の中央部を位置させ、携帯型スクリーン４の各辺を楕円形状の軸とほぼ平行な方向に向けた配置状態である。図１４の例において携帯型スクリーン４Ｂに着目すると、携帯型スクリーン４Ｂの中央部は、基準の配置状態７に比べて、机１２の楕円形状の中心から短軸方向にずれている。ここで、平面視における投影部２１の位置が机１２の中心付近にあるものとすると、図１４に示す携帯型スクリーン４Ｂの位置は基準の配置状態７に比べて投影部２１から遠くなる。そのため、基準設定情報による基本画質の設定をそのまま使用して携帯型スクリーン４Ｂに映像を投影すると、基準設定情報により設定された基準画質に対して画質の違いが生じる（例えば、基準設定情報により設定された基準画質に比べて明るさが減少する）。そこで制御装置５は、携帯型スクリーン４Ｂの配置状態情報が示す配置状態における画質が基準設定情報により設定された基準画質へ近づくように、基準設定情報による基本画質の設定に対して補正を加えた設定を取得する（例えば、基準設定情報による基準画質に比べて明るさが増した補正設定値を取得する）。そして制御装置５は、この補正により取得した画質の設定に基づく映像を携帯型スクリーン４Ｂへ投影するように、投影部２１を制御する。これにより、携帯型スクリーン４Ｂの映像の画質は、基準設定情報により設定された基準画質に近くなる。
【０１２７】
また制御装置５は、複数の携帯型スクリーン４の少なくとも一部について、明るさ、コントラスト、色の濃さ、色合い、シャープネスなどの画質の設定に関わるユーザの指示（以下、「画質設定指示」と呼ぶ。）を入力することができる。画質設定指示は、例えば、上述した「基準設定情報」を更新・追加するユーザの指示に相当する。制御装置５は、一の携帯型スクリーン４について画質設定指示を入力した場合、当該一の携帯型スクリーン４の投影制御において、当該一の携帯型スクリーン４に投影する映像の画質における明るさ、コントラスト、色の濃さ、色合い、シャープネスなどの画質が画質設定指示により設定された画質へ近づくように、配置状態情報に応じて投影部２１を制御する。これにより、当該一の携帯型スクリーン４に投影する映像において、明るさ、コントラスト、色の濃さ、色合い、シャープネスなどの画質が、画質設定指示により設定された画質に保たれ易くなる。
【０１２８】
制御装置５は、例えば、物体検知部２２の検知結果に基づいて、ユーザのジェスチャーによる画質設定指示を入力する。これにより、物体検知部２２の検知結果が画質設定指示の入力に使用されるため、ジェスチャー入力専用のセンサ等を用いる場合に比べて構成が簡易になる。
【０１２９】
なお、制御装置５は、調整する全ての画質を画質設定指示によって設定できるようにしてもよいし、調整する全ての画質の一部のみを画質設定指示によって設定できるようにしてもよい。例えば、幾何歪み、シェーディング、色むらなどの画質は、映像への影響が最小であることが一般的に要求されており、通常はユーザの好みに依存しない。そのため、このような画質は画質設定指示によって設定可能な画質に含めなくてもよい。
【０１３０】
また、制御装置５は、全ての携帯型スクリーン４について画質設定指示の入力を許可してもよいし、特定の携帯型スクリーン４に限って画質設定指示の入力を許可してもよい。例えば、制御装置５は、携帯型スクリーン４毎に割り当てられた識別情報（使用者の識別情報）に応じて、画質設定指示の入力を許可する携帯型スクリーン４と、画質設定指示の入力を許可しない携帯型スクリーン４とを区別してもよい。
【０１３１】
制御装置５は、複数の携帯型スクリーン４の各々について、携帯型スクリーン４毎に設定された画質に関する情報（例えば基本設定情報）と、携帯型スクリーン４毎に割り当てられた識別情報（使用者の識別情報）とを関連付けて記憶する。これにより、携帯型スクリーン４毎に設定された画質に関する情報（明るさの設定値など）を識別情報に基づいて管理することが可能になる。
【０１３２】
制御装置５は、＜携帯型スクリーン４を所有する使用者の認証＞において説明したように、各携帯型スクリーン４の識別情報を物体検知部２２の検知結果に基づいて取得する。これにより、物体検知部２２の検知結果が各携帯型スクリーン４の識別情報の取得に使用されるため、識別情報を取得するための専用のセンサ等を用いる場合に比べて構成が簡易になる。
【０１３３】
次に、図１５〜図１７を参照して、複数のスクリーンに投影する映像の画質を調整する動作の具体例を説明する。
【０１３４】
図１５は、画質設定指示を入力する動作の一例を説明するためのフローチャートである。制御装置５は、図１５に示す動作を反復的に実行する。
【０１３５】
制御装置５は、物体検知部２２の検知結果に基づいて、ユーザのジェスチャーによる指示を監視し、入力する（ＳＴ１００）。ジェスチャーによる指示を入力した場合、制御装置５は、その指示が一の携帯型スクリーン４の画質設定指示であるか否か判定する（ＳＴ１０５）。一の携帯型スクリーン４の画質設定指示を入力した場合（ＳＴ１０５のＹｅｓ）、制御装置５は、入力した画質設定指示に応じて、当該一の携帯型スクリーン４について記憶している画質の設定に関する情報（例えば基本設定情報）を変更する（ＳＴ１１０）。制御装置５は、当該一の携帯型スクリーン４の識別情報と、画質設定指示において指示された画質の設定に関する情報とを関連付けて記憶する。また制御装置５は、画質設定指示に応じて画質の設定を変更した場合、変更した画質の設定に基づく映像を当該一の携帯型スクリーン４に投影する（ＳＴ１１５）。これにより、設定変更後の画質をユーザ自身で確認することができる。
【０１３６】
図１６は、携帯型スクリーン４毎に画質を調整する動作の一例を説明するためのフローチャートである。制御装置５は、図１６に示す動作を反復的に実行する。
【０１３７】
検知対象領域における物体の各部分の位置を物体検知部２２が検知すると（ＳＴ２００）、制御装置５は、その検知結果に基づいて、検知対象領域に存在する各携帯型スクリーン４を特定し、その識別情報を取得するとともに、各携帯型スクリーン４の配置状態情報を取得する（ＳＴ２０５）。制御装置５は、取得した各携帯型スクリーン４の配置状態情報に応じて、各携帯型スクリーン４に投影する映像の画質が携帯型スクリーン４毎に設定された画質へ近づくように、物体検知部２２の検知結果に応じて投影部２１を制御する（ＳＴ２１０）。
【０１３８】
図１７は、投影制御（ＳＴ２１０、図１６）の一例を説明するための図である。
制御装置５は、物体検知部２２の検知結果に基づいて特定した複数の携帯型スクリーン４の中から一の携帯型スクリーン４を選択し（ＳＴ３００）、選択した携帯型スクリーン４の画質の設定を最新の配置状態情報に応じて補正する（ＳＴ３０５）。例えば制御装置５は、当該一の携帯型スクリーン４について取得した最新の配置状態情報が示す配置状態と基準の配置状態７（図１４）との違いに基づいて、この配置状態情報が示す配置状態における画質が、基準設定情報により設定された基準画質へ近づくように、基準設定情報による基本画質の設定に対して補正を加えた画質設定を取得する。
【０１３９】
制御装置５は、物体検知部２２の検知結果に基づいて特定した複数の携帯型スクリーン４の中にまだ選択していない携帯型スクリーン４があるか判定する（ＳＴ３１５）。まだ選択していない携帯型スクリーン４がある場合（ＳＴ３１５のＹｅｓ）、制御装置５は、その携帯型スクリーン４を選択し（ＳＴ３２０）、ステップＳＴ３０５以降の処理を繰り返す。
【０１４０】
物体検知部２２の検知結果に基づいて特定した全ての携帯型スクリーン４についてステップＳＴ３０５の補正により画質設定を取得した場合（ＳＴ３１５のＮｏ）、制御装置５は、各携帯型スクリーン４について取得した画質設定に基づく映像を各携帯型スクリーン４に投影する（ＳＴ３２５）。これにより、各携帯型スクリーン４に投影される映像の画質は、携帯型スクリーン４毎に設定された画質に近い画質となる。
【０１４１】
（投影制御の他の例）
次に、制御装置５による投影制御の他の例について説明する。
上述した投影制御の例では、一の携帯型スクリーン４について取得した配置状態情報に応じて、当該一の携帯型スクリーン４に投影する映像の画質が当該一の携帯型スクリーン４について予め設定された画質（例えば基準設定情報により設定された基準画質）に近づくように、投影部２１が制御される。一方、次に説明する投影制御の他の例では、一の携帯型スクリーン４に投影する映像の画質が当該一の携帯型スクリーン４について画質設定指示が入力された時の画質へ近づくように、投影部２１が制御される。
【０１４２】
具体的に説明すると、制御装置５は、一の携帯型スクリーン４に投影する映像の画質を設定する画質設定指示を入力した場合、この画質設定指示に応じて当該一の携帯型スクリーン４に投影する映像の画質が変化するように、投影部２１における画質の設定を変更する。これにより、画質設定指示によって設定された画質の映像が携帯型スクリーン４に投影されるため、設定変更後の画質をユーザ自身で確認することができる。また、制御装置５は、この画質設定指示の入力時において、変更後の画質の設定に関する第１設定情報と、当該一の携帯型スクリーン４について取得した最新の配置状態情報である第２設定情報とを記憶する。そして、制御装置５は、当該一の携帯型スクリーン４の投影制御において、当該一の携帯型スクリーン４について取得した最新の配置状態情報と、画質設定指示の入力時に記憶した第１設定情報及び第２設定情報とに応じて、当該一の携帯型スクリーン４に投影する映像の画質が画質設定指示の入力時における画質へ近づくように投影部２１を制御する。
【０１４３】
この投影制御では、画質設定指示の入力時の配置状態情報である第２設定情報と最新の配置状態情報とに基づいて、画質設定指示の入力時と比べた配置状態の違い（位置の違い、姿勢の違い）が分かる。そのため、この配置状態の違いから、画質設定指示の入力時の画質に近似した画質を得るために必要な画質の設定の補正が推定される。そして、この推定された補正を、第１設定情報が示す画質の設定（画質設定指示により変更された画質の設定）に適用することにより、画質設定指示の入力時における画質に近づくように補正された画質の設定が取得される。従って、取得された画質の設定に基づく映像を投影部２１において投影することにより、画質設定指示の入力時における画質に近似した画質が得られる。
【０１４４】
図１８は、画質設定指示の入力時における配置状態の一例を示す図であり、図１８と図１４における同一符号は同一の構成要素を示す。図１８において、「８」は画質設定指示の入力時における携帯型スクリーン４Ａの配置状態を示す。図１８の例では、画質設定指示の入力後に携帯型スクリーン４Ａが移動し、配置状態が変化している。そのため、画質設定指示の入力時に変更された画質の設定をそのまま使用して携帯型スクリーン４Ａに映像を投影すると、画質設定指示の入力時と比較して異なった画質となる。そこで、制御装置５は、携帯型スクリーン４Ａの投影制御において、携帯型スクリーン４Ａについて取得した最新の配置状態情報と、画質設定指示の入力時に記憶した第１設定情報及び第２設定情報とに応じて、携帯型スクリーン４Ａに投影する映像の画質が画質設定指示の入力時における画質へ近づくように投影部２１を制御する。例えば、制御装置５は、画質設定指示の入力時の配置状態情報である第２設定情報と最新の配置状態情報とに基づいて、画質設定指示の入力時と比べた配置状態の違い（位置の違い、姿勢の違い）に関わる変化量を算出する。制御装置５は、算出した変化量に基づいて、画質設定指示の入力時の画質に近似した画質を得るために必要な画質の設定の補正に関わる補正量を算出し、算出した補正量に基づいて、第１設定情報が示す画質の設定を補正する。そして、制御装置５は、補正した画質の設定に基づいて携帯型スクリーン４Ａに映像を投影するように投影部２１を制御する。これにより、携帯型スクリーン４Ａの映像の画質は、画質設定指示の入力時にユーザが確認した画質（画質設定指示の入力時の配置状態８における画質）に近くなる。
【０１４５】
図１９は、画質設定指示を入力する動作の他の例を説明するためのフローチャートであり、図１５に示すフローチャートにステップＳＴ１２０及びＳＴ１２５を追加したものである。制御装置５は、図１９に示す動作を反復的に実行する。
【０１４６】
制御装置５は、一の携帯型スクリーン４の画質設定指示を入力した場合（ＳＴ１０５のＹｅｓ）、入力した画質設定指示に応じて、当該一の携帯型スクリーン４について記憶している画質の設定に関する情報を変更し（ＳＴ１１０）、変更した画質の設定に基づく映像を当該一の携帯型スクリーン４に投影する（ＳＴ１１５）。これにより、設定変更後の画質をユーザ自身で確認することができる。また、この場合、制御装置５は、画質設定指示に応じて変更した画質の設定に関する第１設定情報を記憶するとともに（ＳＴ１２０）、当該一の携帯型スクリーン４について取得した最新の配置状態情報を第２設定情報として記憶する（ＳＴ１２５）。
【０１４７】
図２０は、投影制御の他の例を説明するためのフローチャートであり、図１７に示すフローチャートにおけるステップＳＴ３０５及びＳＴ３２５をそれぞれステップＳＴ３１０及びＳＴ３３０に置き換えたものである。制御装置５は、図２０に示す動作を反復的に実行する。
【０１４８】
制御装置５は、物体検知部２２の検知結果に基づいて特定した複数の携帯型スクリーン４の中から一の携帯型スクリーン４を選択し（ＳＴ３００）、選択した携帯型スクリーン４の画質設定を、最新の配置状態情報と、画質設定指示の入力時に記憶した第１設定情報及び第２設定情報とに基づいて取得する（ＳＴ３１０）。例えば制御装置５は、画質設定指示の入力時の配置状態情報である第２設定情報（ＳＴ１２５、図１９）と最新の配置状態情報とに基づいて、画質設定指示の入力時と比べた配置状態の違い（位置の違い、姿勢の違い）に関わる変化量を算出する。制御装置５は、算出した変化量に基づいて、画質設定指示の入力時の画質に近似した画質を得るために必要な画質の設定の補正に関わる補正量を算出する。そして制御装置５は、算出した補正量に基づいて、第１設定情報（ＳＴ１２０、図１９）が示す画質の設定を補正し、これを携帯型スクリーン４の補正した画質設定として取得する。
【０１４９】
物体検知部２２の検知結果に基づいて特定した全ての携帯型スクリーン４についてステップＳＴ３１０により画質設定を取得した場合（ＳＴ３１５のＮｏ）、制御装置５は、各携帯型スクリーン４について取得した画質設定に基づく映像を各携帯型スクリーン４に投影する（ＳＴ３３０）。これにより、各携帯型スクリーン４に投影される映像の画質は、画質設定指示の入力時にユーザが確認した画質に近い画質となる。
【０１５０】
（環境光の強度に応じた画質の調整）
次に、各携帯型スクリーン４の画質を調整する動作の他の例として、環境光の強度に応じて画質を調整する例を説明する。
【０１５１】
この例において、投影システムは、複数の携帯型スクリーン４が配置される領域における環境光の強度を検出する環境光検出部を備える。この環境光検出部には、撮像部２３を用いることができる。例えば、撮像部２３において撮像された画像における各画素の値の平均値に基づいて、環境光の強度を算出することができる。
【０１５２】
制御装置５は、一の携帯型スクリーン４の投影制御において、当該一の携帯型スクリーン４について取得した配置状態情報と環境光の検出結果とに応じて、当該一の携帯型スクリーン４に投影する映像の画質が当該一のスクリーンについて設定された画質に近づくように投影部２１を制御する。例えば、制御装置５は、環境光の強度が増大する場合は映像の明るさも増大させ、環境光の強度が減少する場合は映像の明るさも減少させる。これにより、環境光の強度が変化する場合でも、各携帯型スクリーン４に投影する映像の画質が携帯型スクリーン４毎に設定された画質に保たれ易くなる。
【０１５３】
また制御装置５は、環境光検出部（撮像部２３）が検出した環境光の強度の時間的な変化を平滑化するフィルタ処理を行い、投影制御においては、フィルタ処理が施された環境光の強度の検出結果に応じて撮像部２３を制御する。これにより、環境光の強度が急激に変化する場合（例えば揺れるカーテンの隙間から一時的に日差しが差し込む場合）でも、環境光の強度の検出結果に含まれる急激な変化の成分がフィルタ処理によって減衰するため、環境光の急激な変化に応じた投影制御が行われることによる映像の画質の急激な変化を抑制できる。
【０１５４】
図２１は、環境光を測定する動作の一例を説明するためのフローチャートである。制御装置５は、図２１に示す動作を反復的に実行する。
【０１５５】
制御装置５は、撮像部２３において撮像された画像を取得し、取得した画像に基づいて、環境光の強度を測定する（ＳＴ４００）。例えば制御装置５は、撮像部２３において撮像された画像における各画素の値の平均値に応じた環境光の強度の測定値を算出する。そして、制御装置５は、算出した環境光の強度の測定値を時間的に平滑化するフィルタ処理を行う（ＳＴ４０５）。
【０１５６】
なお制御装置５は、環境光の強度の測定に用いられる画像を環境光検出部において検出する場合（例えば、環境光の強度の検出するために撮像部２３において画像を撮像する場合）、投影部２１から投射される画像の明るさを一時的に減少させてもよい（例えば映像における画素の明るさを全て最低値に設定するなど）。これにより、環境光の強度の測定結果が投影部２１の投射光の影響を受け難くなる。
【０１５７】
図２２及び図２３は、投影制御の他の例を説明するためのフローチャートであり、環境光の強度に応じて画質を調整する例をそれぞれ示す。
【０１５８】
図２２は、図１７のフローチャートにおけるステップＳＴ３０５をステップＳＴ３０５Ａに変更したものである。図２３は、図２０のフローチャートにおけるステップＳＴ３１０をステップＳＴ３１０Ａに変更したものである。このステップＳＴ３０５ＡやステップＳＴ３１０Ａにおいて、制御装置５は、既に説明したステップＳＴ３０５やステップＳＴ３１０において得られる画質設定に対して、更に環境光の強度の測定値に応じた補正を加える。例えば、制御装置５は、環境光の強度が増大する場合は映像の明るさを増大させ、環境光の強度が小さくなる場合は映像の明るさも減少させるように映像の明るさを補正する。
【０１５９】
（環境光の強度に応じた環境照明の調整）
次に、各携帯型スクリーン４の画質を調整する動作に関連した動作の一例として、環境光の強度に応じて環境照明を調整する例を説明する。
【０１６０】
この例における投影システムは、複数の携帯型スクリーン４が配置された領域を照らす環境照明部１０を備える。図２４は、環境照明部１０を備えた投影システムの構成の一例を示す図である。図２４の例において、環境照明部１０は制御装置５と無線により通信を行っているが、この通信は有線でもよい。環境照明部１０は、例えばＬＥＤや蛍光灯などの光源を備えており、制御装置５の制御に従って環境照明の強度を変化させる。
【０１６１】
制御装置５は、複数の携帯型スクリーン４の少なくとも一部について画質として設定された映像の明るさと、環境光検出部の検出結果とに応じて、環境照明部１０の照度を制御する。例えば制御装置５は、複数の携帯型スクリーン４に設定された映像の明るさの平均値を算出し、この算出した平均値に応じて環境照明部１０の照度を制御する。具体的には、複数の携帯型スクリーン４に設定された映像の明るさの平均値が小さいほど（平均的な映像の明るさが小さいほど）、環境照明部１０の照度を小さくて映像を視認し易くする。
【０１６２】
図２５は、環境照明を調整する動作の一例を説明するためのフローチャートである。制御装置５は、図２５に示す動作を反復的に実行する。
【０１６３】
制御装置５は、複数の携帯型スクリーン４に投影する映像の明るさの設定値をそれぞれ取得し（ＳＴ５００）、取得した明るさの設定値に基づいて、複数の携帯型スクリーン４における映像の明るさの平均値（各携帯型スクリーン４の明るさの設定値を平均した値）を算出する（ＳＴ５０５）。そして、制御装置５は、ステップＳＴ５０５において算出した映像の明るさの平均値に応じて、環境照明部１０の照度を制御する（ＳＴ５１０）。例えば制御装置５は、ステップＳＴ５０５で算出した映像の明るさの平均値が小さいほど（平均的な映像の明るさが小さいほど）、環境照明部１０の照度を小さくする。
【０１６４】
このように、複数の携帯型スクリーン４の少なくとも一部について画質として設定された映像の明るさに応じて環境照明部１０の照度が制御されることにより、各携帯型スクリーン４における映像の明るさに応じて環境光の強度を適切に調整できる。
【０１６５】
なお、本実施形態は上述した例にのみ限定されるものではなく、当業者にとって自明な種々のバリエーションも本実施形態に含まれる。
【０１６６】
例えば、上述した実施形態では複数の携帯型スクリーン４においてそれぞれ画質の調整を行う例を挙げたが、画質調整の対象となるスクリーンの数は複数でも単数でもよい。
【符号の説明】
【０１６７】
２…多機能プロジェクタ、２１…投影部、２２…物体検知部、２３…撮像部、２４…通信部、２５…制御部、３…卓上型スクリーン、３１，４３…マイク、３２，４４…スピーカ、３３…入力部、３４…通信部、３５…制御部、３０１，３０２，４０１〜４０３…マーク、３１１，４１１…投影面、４…携帯型スクリーン、４１…接触センサ、４２…振動発生器、４５…入力部、４６…入力部、４７…通信部、４８…制御部、４０９，４５１，４６１…２次元コード、４５０…表紙、４５２…写真、４６０…裏表紙、５…制御装置、５１…表示部、５２…入力部、５３…通信部、５４…通信部、５５…制御部、５６…処理部、５７…記憶部、６…サーバ、７…基準の配置状態、８…画質設定指示の入力時の配置状態、１０…環境照明部
【図１】
2019152815.tif 000003
【図２】
2019152815.tif 000004
【図３】
2019152815.tif 000005
【図４】
2019152815.tif 000006
【図５】
2019152815.tif 000007
【図６】
2019152815.tif 000008
【図７】
2019152815.tif 000009
【図８】
2019152815.tif 000010
【図９】
2019152815.tif 000011
【図１０】
2019152815.tif 000012
【図１１】
2019152815.tif 000013
【図１２】
2019152815.tif 000014
【図１３】
2019152815.tif 000015
【図１４】
2019152815.tif 000016
【図１５】
2019152815.tif 000017
【図１６】
2019152815.tif 000018
【図１７】
2019152815.tif 000019
【図１８】
2019152815.tif 000020
【図１９】
2019152815.tif 000021
【図２０】
2019152815.tif 000022
【図２１】
2019152815.tif 000023
【図２２】
2019152815.tif 000024
【図２３】
2019152815.tif 000025
【図２４】
2019152815.tif 000026
【図２５】
2019152815.tif 000027