(57)【要約】【課題】スクリーンの前の状況を考慮しつつ、コンテンツのシーンに応じた投影を実現することができる投影画像制御装置を提供する。【解決手段】画像出力端末から出力される出力画像が投影されるスクリーンにおける遮蔽の状態を検知する検知センサにより検知された情報を取得する取得部と、前記取得部により取得された情報に基づいて、前記スクリーンを遮蔽する遮蔽物があるか否かを判定し、前記遮蔽物があると判定した場合、前記スクリーンの領域のうち前記遮蔽物により遮蔽されている領域を判定する判定部と、前記判定部により判定された内容に基づいて、代替画像を生成する生成部と、前記出力画像のうち前記遮蔽物により遮蔽されている領域に含まれる部分に前記代替画像を合成する合成部とを備える。【選択図】図２
2019120884.tif 000002
【特許請求の範囲】
【請求項１】
画像出力端末から出力される出力画像が投影されるスクリーンにおける遮蔽の状態を検知する検知センサにより検知された情報を取得する取得部と、
前記取得部により取得された情報に基づいて、前記スクリーンを遮蔽する遮蔽物があるか否かを判定し、前記遮蔽物があると判定した場合、前記スクリーンの領域のうち前記遮蔽物により遮蔽されている領域を判定する判定部と、
前記判定部により判定された内容に基づいて、代替画像を生成する生成部と、
前記出力画像のうち前記遮蔽物により遮蔽されている領域に含まれる部分に前記代替画像を合成する合成部と
を備えることを特徴とする投影画像制御装置。
【請求項２】
前記生成部は、前記遮蔽物をマスクする前記代替画像を生成する場合、前記代替画像の輝度と前記出力画像の輝度との差を小さくした前記代替画像を生成する
ことを特徴とする請求項１に記載の投影画像制御装置。
【請求項３】
前記生成部は、前記遮蔽物をハイライトさせる前記代替画像を生成する場合、前記代替画像の輝度を前記出力画像の輝度よりも高くした前記代替画像を生成する
ことを特徴とする請求項１又は請求項２に記載の投影画像制御装置。
【請求項４】
前記画像出力端末からの出力信号に基づいて前記代替画像に関する情報を記憶する記憶部を更に備え、
前記生成部は、前記記憶部に記憶された前記代替画像の形状を示す情報に基づいて、生成する前記代替画像の形状を決定する
ことを特徴とする請求項１から請求項３のいずれか一項に記載の投影画像制御装置。
【請求項５】
前記生成部は、前記記憶部に記憶された、シーン毎の前記代替画像に関する情報を示すシナリオに基づいて前記代替画像を生成する
ことを特徴とする請求項４に記載の投影画像制御装置。
【請求項６】
（代替画像のリモコン制御）
ユーザによる指示に基づいて所定の制御信号を送信するリモート制御部を更に備え、
前記生成部は、前記制御信号に基づいて、前記代替画像を生成する
ことを特徴とする請求項１から請求項５のいずれか一項に記載の投影画像制御装置。
【請求項７】
前記検知センサと、
請求項１から請求項６のいずれか一項に記載の投影画像制御装置と、
前記投影画像制御装置により合成された画像をスクリーンに投影する投影装置と
を備えることを特徴とする投影画像制御システム。
【請求項８】
取得部が、画像出力端末から出力される出力画像が投影されるスクリーンにおける遮蔽の状態を検知する検知センサにより検知された情報を取得する工程と、
判定部が、前記取得部により取得された情報に基づいて、前記スクリーンを遮蔽する遮蔽物があるか否かを判定し、前記遮蔽物があると判定した場合、スクリーンの領域のうち前記遮蔽物により遮蔽されている領域を判定する工程と、
生成部が、前記判定部により判定された内容に基づいて、代替画像を生成する工程と、
合成部が、前記出力画像のうち前記遮蔽物により遮蔽されている領域に含まれる部分に前記代替画像を合成する工程とを有することを特徴とする投影画像制御方法。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、投影画像制御装置、投影画像制御システム、及び投影画像制御方法に関する。
【背景技術】
【０００２】
従来、スクリーン前に立つ話者に応じてスクリーンに投影させる画像の輝度を調整する技術がある（例えば、特許文献１〜３）。特許文献１〜３においては、プロジェクタからの光が話者を眩しく感じさせないように、スクリーンに投影している画像のうち話者に投影される領域の画像の輝度を暗くする技術が開示されている。
【先行技術文献】
【特許文献】
【０００３】
【特許文献１】特開２００９−３１３３４号公報
【特許文献２】特許第３６３００１５号公報
【特許文献３】特開２００３−８４７４６号公報
【発明の概要】
【発明が解決しようとする課題】
【０００４】
しかしながら、特許文献１〜３においては、話者に眩しく感じさせないような投影をするものである。このため、例えば、話者はあるシーンにおいてはスクリーンに投影している画像を強調させて話者自身を極力目立たないようにしたいが、一方で別のシーンにおいてはスクリーンに投影している画像より、スクリーンの前に立っている話者自身を強調させる演出をしたい場合もあり得る。そのため、単に、防眩処理をするだけでは、シーンに応じた投影をすることができない場合がある。
【０００５】
本発明は、このような状況に鑑みてなされたもので、スクリーンの前の状況を考慮しつつ、コンテンツのシーンに応じた投影を実現することができる投影画像制御装置、投影画像制御システム、及び投影画像制御方法を提供することである。
【課題を解決するための手段】
【０００６】
上述した課題を解決するために、本発明の一態様は、画像出力端末から出力される出力画像が投影されるスクリーンにおける遮蔽の状態を検知する検知センサにより検知された情報を取得する取得部と、前記取得部により取得された情報に基づいて、前記スクリーンを遮蔽する遮蔽物があるか否かを判定し、前記遮蔽物があると判定した場合、前記スクリーンの領域のうち前記遮蔽物により遮蔽されている領域を判定する判定部と、前記判定部により判定された内容に基づいて、代替画像を生成する生成部と、前記出力画像のうち前記遮蔽物により遮蔽されている領域に含まれる部分に前記代替画像を合成する合成部とを備えることを特徴とする投影画像制御装置である。
【０００７】
また、本発明の一態様は、前記検知センサと、上述した投影画像制御装置と、前記投影画像制御装置により合成された画像をスクリーンに投影する投影装置とを備えることを特徴とする投影画像制御システムである。
【０００８】
また、本発明の一態様は、取得部が画像出力端末から出力される出力画像が投影されるスクリーンにおける遮蔽の状態を検知する検知センサにより検知された情報を取得する工程と、判定部が前記取得部により取得された情報に基づいて前記スクリーンを遮蔽する遮蔽物があるか否かを判定し、前記遮蔽物があると判定した場合、前記スクリーンの領域のうち前記遮蔽物により遮蔽されている領域を判定する工程と、生成部が、前記判定部により判定された内容に基づいて、代替画像を生成する工程と、合成部が、前記出力画像のうち前記遮蔽物により遮蔽されている領域に含まれる部分に前記代替画像を合成する工程とを有することを特徴とする投影画像制御方法である。
【発明の効果】
【０００９】
本発明によれば、スクリーンの前の状況（例えば、遮蔽物）を考慮しつつ、コンテンツのシーンに応じた投影を実現することができる。
【図面の簡単な説明】
【００１０】
【図１】実施形態の投影画像制御システム１０が適用される適用例を示す図である。
【図２】実施形態の投影画像制御装置２０の構成例を示すブロック図である。
【図３】実施形態のシナリオ情報記憶部２３０に記憶される情報の例を示す図である。
【図４】実施形態のリモート制御装置２４の構成例を示すブロック図である。
【図５】実施形態の投影画像制御システム１０により表示される画像の一例を示す図である。
【図６】実施形態の投影画像制御システム１０により表示される画像の他の例を示す図である。
【図７】実施形態の投影画像制御装置２０の動作例を示すフローチャートである。
【発明を実施するための形態】
【００１１】
以下、実施形態の投影画像制御装置、投影システム、及び投影画像制御方法を、図面を参照して説明する。
【００１２】
（実施形態）
まず、実施形態について説明する。
図１は、実施形態における投影画像制御システム１０が適用される適用例を示す図である。図１に示すように、投影画像制御システム１０は、例えば、舞台やプレゼンテーションルーム等に設置されたスクリーン５０に画像を投影する投影システム１に適用される。なお、「画像」には、静止画像と動画像（映像）との両方が含まれる。
【００１３】
投影システム１は、例えば、画像出力端末２と、投影画像制御システム１０と、スクリーン５０とを備える。図１の例では、投影画像制御システム１０の投影装置３０からスクリーン５０に画像が投影される。また、投影装置３０とスクリーン５０との間には話者Ｐ−１および演壇Ｐ−２が存在し、投影装置３０からスクリーン５０に投影される光を遮っている。ここで、話者Ｐ−１および演壇Ｐ−２は、「遮蔽物」の一例である。
【００１４】
画像出力端末２は、例えば、ＰＣ（パーソナルコンピュータ）などの情報処理端末である。画像出力端末２には、例えばスクリーン５０に投影させる画像が記憶される。画像出力端末２は、スクリーン５０に投影させる画像に関する情報を投影画像制御システム１０に出力する。画像に関する情報には、例えば、画像における画素毎の色や輝度を示す情報が含まれる。
【００１５】
投影画像制御システム１０は、投影画像制御装置２０と、リモート制御装置２４と、投影装置３０と、検知センサ４０（検知センサ４０−１〜４０−Ｎ、Ｎは任意の自然数）とを備える。
投影画像制御装置２０は、画像出力端末２から出力される画像情報と、検知センサ４０からの検知結果とを入力する。投影画像制御装置２０は、投影装置３０によりスクリーン５０に投影させる画像の画像情報を投影装置３０に出力する。
リモート制御装置２４は、例えば、投影画像制御装置２０のユーザにより操作されるリモコンである。リモート制御装置２４は、ユーザの入力操作に基づいて生成された制御信号を投影画像制御装置２０に出力する。
投影装置３０は、例えばプロジェクタに代表される投影型の表示装置である。投影装置３０は、投影画像制御装置２０から出力される画像情報を入力する。投影装置３０は、入力した画像情報に応じた画像をスクリーン５０に投影する。
【００１６】
検知センサ４０は、スクリーン５０における遮蔽の状態を検知する。検知センサ４０は、検知した検知結果を投影画像制御装置２０に出力する。検知センサ４０により検知される遮蔽の状態とは、スクリーン５０が遮蔽されている場合に、その遮蔽の状態を示すものであり、例えば、スクリーン５０と遮蔽物とが一緒に撮像された撮像画像である。
検知センサ４０は、例えば、複数の撮像装置を含むステレオカメラである。この場合、検知センサ４０は、複数の異なる位置からスクリーン５０の方向を同時に撮像することで、三角測量の原理に基づいて撮像位置から被写体までの距離を取得する。図１の例では、被写体にはスクリーン５０、話者Ｐ−１および演壇Ｐ−２が含まれる。
【００１７】
図２は、実施形態の投影画像制御装置２０の構成例を示すブロック図である。
投影画像制御装置２０は、例えば、入出力部２１と、制御部２２と、記憶部２３とを備える。
入出力部２１は、装置（画像出力端末２、リモート制御装置２４、投影装置３０、および検知センサ４０）に接続され、装置との間で情報の入出力を行う。入出力部２１は、例えば、センサ情報入力部２１０と、画像情報入力部２１１と、リモート制御情報入力部２１２と、画像情報出力部２１３と、を備える。ここで、センサ情報入力部２１０は、「取得部」の一例である。
センサ情報入力部２１０には、検知センサ４０により検出された情報が入力される。つまり、センサ情報入力部２１０は、検知センサ４０により検知された情報を取得する。
画像情報入力部２１１には、画像出力端末２により出力された画像情報が入力される。リモート制御情報入力部２１２には、リモート制御装置２４により出力された制御情報が入力される。画像情報出力部２１３は、投影装置３０に接続され、投影装置３０に画像情報を出力する。
【００１８】
記憶部２３は、例えば、シナリオ情報記憶部２３０を備え、画像出力端末２からの出力信号に基づいて、あるいは制御部２２の指示に従い、シナリオ情報記憶部２３０にシナリオ情報を記憶する。ここでいう「シナリオ」とは、プレゼンテーションの場面（シーン）毎に、スクリーン５０に投影させる画像や、その画像に対して代替画像Ｄを合成するかなどを、予め定めた筋書きである。シナリオ情報には、シーン毎に、代替画像Ｄを生成するか否かを示す情報や、どのような代替画像Ｄを生成するかを示す情報が含まれる。シナリオ情報は、「代替画像に関する情報」の一例である。
【００１９】
図３は、シナリオ情報記憶部２３０が記憶する情報の例を示す図である。
シナリオ情報記憶部２３０は、例えば、シーン番号、対応画像番号、処理種別１、および処理種別２のそれぞれの項目を有する。シーン番号には、プレゼンテーションの場面（シーン）を識別する番号が記憶される。対応画像番号にはシーン番号に対応する出力画像を識別する番号が記憶される。出力画像を識別する番号は、例えば、スライド等の静止画像に付した番号であってもよいし、動画像における時間の長さを持つコンテンツに付した番号であってもよい。処理種別１には、遮蔽物がある場合に投影画像制御装置２０が行う処理の第１の種別が記憶される。図３の例では、処理種別１として「処理なし」、「マスク処理」、「ハイライト処理」が記憶されている。処理種別２には、遮蔽物がある場合に投影画像制御装置２０が行う処理の第２の種別が記憶される。図３の例では、処理種別２として「全体」、「部分」が記憶されている。なお、処理種別１に「処理なし」が記憶される場合、処理種別１には情報は記憶されない。処理種別１、および２に記憶される「マスク処理」、「ハイライト処理」、「全体」、および「部分」が意味する具体的な内容については後で説明する。
【００２０】
図２に戻り、制御部２２は、例えば、ＣＰＵなどを含むプロセッサであり、投影画像制御装置２０を統括的に制御する。制御部２２は、例えば、遮蔽領域判定部２２０と、代替画像生成部２２１と、画像合成部２２２とを備える。ここで、遮蔽領域判定部２２０は、「判定部」の一例である。代替画像生成部２２１は、「生成部」の一例である。画像合成部２２２は、「合成部」の一例である。
制御部２２は、画像出力端末２から画像情報入力部２１１を介して取得した画像に関する情報に含まれる代替画像に関する情報を、シナリオ情報記憶部２３０に記憶させる。
【００２１】
遮蔽領域判定部２２０は、センサ情報入力部２１０により取得された情報に基づいて、投影装置３０とスクリーン５０との間にスクリーン５０を遮蔽する遮蔽物があるか否かを判定し、遮蔽物がある場合、スクリーン５０の領域のうち遮蔽物により遮蔽されている領域（以下、遮蔽領域という）を判定する。
【００２２】
なお、遮蔽領域判定部２２０により判定される遮蔽物は、スクリーン５０を遮蔽する物体の全てであってもよいし、一部であってもよい。図１の例で、遮蔽領域判定部２２０は、例えば、話者Ｐ−１のみを遮蔽物と判定してもよいし、話者Ｐ−１と演壇Ｐ−２の両方を遮蔽物と判定してもよい。また、遮蔽領域判定部２２０は、話者Ｐ−１の聞き手がスクリーン５０の前に近づいた場合には、その聞き手によりスクリーン５０が遮られる部分について遮蔽物と判定してもよい。
【００２３】
遮蔽領域判定部２２０は、例えば、検知センサ４０のステレオカメラにより取得された撮像位置から被写体までの距離の情報に基づいて、撮像位置からスクリーン５０までの距離よりも撮像位置からの距離が短い地点の点群により形成される被写体に対応する物体を遮蔽物と判定する。また、遮蔽領域判定部２２０は、撮像位置からスクリーン５０までの距離よりも撮像位置からの距離が短い地点の点群に基づいて定まる輪郭の形状を抽出することにより遮蔽物の形状を取得する。
【００２４】
遮蔽領域判定部２２０は、例えば、取得した遮蔽物の形状において基準となる位置（例えば、遮蔽物の重心の位置）と、スクリーン５０の全体の形状において基準となる位置（例えば、スクリーン５０の重心の位置）との相対的な位置関係を算出する。これにより、遮蔽領域判定部２２０は、スクリーン５０の領域のうちの遮蔽領域を判定する。
【００２５】
代替画像生成部２２１は、遮蔽領域判定部２２０により判定された内容に基づいて、代替画像Ｄ（図５参照）を生成する。ここで、遮蔽領域判定部２２０により判定された内容には、遮蔽物があるか否かの判定、および遮蔽物がある場合のスクリーン５０の領域における遮蔽物により遮蔽される領域否かの判定が含まれる。また、代替画像Ｄとは、スクリーン５０が遮蔽物により遮蔽された場合に、出力画像のうちの遮蔽領域に相当する部分に元々描画されていた画像に対して置き換えられる画像である。
【００２６】
本実施形態においては、出力画像のうちの遮蔽領域に相当する部分を代替画像Ｄに置き換えることにより、例えば、話者Ｐ−１により行われるプレゼンテーションの場面などのコンテンツのシーンに応じて、遮蔽物を目立たたないようにしたり、遮蔽物を目立たせるようにしたりする。
以下の説明において、出力画像における遮蔽領域に相当する部分を代替画像Ｄに代替することで、遮蔽物を目立たせないようにすることを「代替画像Ｄにより遮蔽物をマスクする」などと称し、逆に遮蔽物を目立たせるようにすることを「代替画像Ｄにより遮蔽物をハイライトする」などと称する。また、以下では、代替画像Ｄが単色（例えば、灰色、白色等）である場合を例に説明するが、これに限定されることはなく、例えば、代替画像Ｄがグラデーションのように色が連続的に変化する配色であってもよい。
【００２７】
代替画像生成部２２１は、遮蔽物をマスクする代替画像Ｄを生成する場合、代替画像Ｄの輝度と出力画像の輝度との差を小さくする。
また、代替画像生成部２２１は、遮蔽物をハイライトする代替画像Ｄを生成する場合、代替画像Ｄの輝度を出力画像の輝度よりも高くする。
【００２８】
代替画像生成部２２１は、遮蔽領域判定部２２０により遮蔽物があると判定された場合、シナリオ情報記憶部２３０を参照することで、遮蔽物をマスクする代替画像Ｄを生成するか否かを決定する。
代替画像生成部２２１は、例えば、シナリオ情報記憶部２３０を参照し、投影装置３０に対して現在出力させている画像に対応するシーン番号における処理種別１に記憶されている情報を取得する。代替画像生成部２２１は、処理種別１に「マスク処理」が記憶されている場合、遮蔽物をマスクする代替画像Ｄを生成すると決定する。この場合、代替画像生成部２２１は、遮蔽物を目立たせないようにする代替画像Ｄを生成する。以下、代替画像生成部２２１が遮蔽物を目立たせないようにする代替画像Ｄを生成する方法について説明する。
【００２９】
まず、代替画像生成部２２１は、代替画像Ｄの輝度を決定する。代替画像生成部２２１は、代替画像Ｄの輝度と、遮蔽される部分の画像の輝度との差を所定の範囲内とすることにより、遮蔽物を目立たせない代替画像Ｄを生成する。
例えば、代替画像生成部２２１は、センサ情報入力部２１０に入力された、スクリーン５０に投影された画像を撮像した画像の情報を取得する。また、代替画像生成部２２１は、取得した画像の情報に基づいて、スクリーン５０に投影された画像のうち遮蔽領域に相当する部分の周辺にある画像の輝度を平均した平均輝度を算出する。あるいは、シナリオ情報記憶部２３０にあらかじめ代替画像Ｄの輝度を記憶しておいて、その輝度を用いても良い。そして、代替画像生成部２２１は、例えば、算出した平均輝度を代替画像Ｄの輝度とする。ここで、遮蔽領域に相当する部分の周辺とは、例えば、遮蔽領域と遮蔽領域でない領域の境界を示す境界線と、当該境界線から遮蔽領域の外側に所定の距離離間した線との間の領域をいう。
【００３０】
次に、代替画像生成部２２１は、代替画像Ｄの色を決定する。代替画像生成部２２１は、例えば、代替画像Ｄの色を暗い色（例えば、灰色）とする。代替画像生成部２２１は、代替画像Ｄの色を暗い色とすることにより、遮蔽物を目立たせない代替画像Ｄを生成する。
【００３１】
次に、代替画像生成部２２１は、代替画像Ｄの形状を決定する。代替画像生成部２２１は、シナリオ情報記憶部２３０を参照することで、遮蔽物の全体をマスクする代替画像Ｄを生成するか、遮蔽物の一部をマスクする代替画像Ｄを生成するかを決定する。
代替画像生成部２２１は、シナリオ情報記憶部２３０を参照し、投影装置３０に対して現在出力させている画像に対応するシーン番号における処理種別２に記憶されている情報を取得する。代替画像生成部２２１は、処理種別２に「全体」が記憶されている場合、遮蔽物の全体をマスクする代替画像Ｄを生成すると決定する。また、代替画像生成部２２１は、処理種別２に「部分」が記憶されている場合、遮蔽物の一部分をマスクする代替画像Ｄを生成すると決定する。
代替画像生成部２２１は、遮蔽物の全体をマスクする代替画像Ｄを生成する場合、代替画像Ｄの形状を遮蔽物の形状とする。
代替画像生成部２２１は、遮蔽物の一部分をマスクする代替画像Ｄを生成する場合、例えば、画像認識等により遮蔽物に話者Ｐ−１等の人物（特に人物の頭部等）が含まれていると認識される場合には、遮蔽物のうち、人物の頭部に相当する部分をマスクする丸形や方形など所定の形状の代替画像Ｄを生成する。
【００３２】
また、代替画像生成部２２１は、遮蔽領域判定部２２０により遮蔽物があると判定された場合、シナリオ情報記憶部２３０を参照することで、遮蔽物をハイライトする代替画像Ｄを生成するか否かを決定する。
代替画像生成部２２１は、例えば、シナリオ情報記憶部２３０を参照し、投影装置３０に対して現在出力させている画像に対応するシーン番号における処理種別１に記憶されている情報を取得する。代替画像生成部２２１は、処理種別１に「ハイライト処理」が記憶されている場合、遮蔽物をハイライトさせる代替画像Ｄを生成すると決定する。この場合、代替画像生成部２２１は、遮蔽物を目立たせるようにする代替画像Ｄを生成する。以下、代替画像生成部２２１が遮蔽物を目立たせるようにする代替画像Ｄを生成する方法について説明する。
【００３３】
まず、代替画像生成部２２１は、代替画像Ｄの輝度を決定する。代替画像生成部２２１は、代替画像Ｄの輝度と、遮蔽される部分の画像の輝度との差を所定の範囲内とすることにより、遮蔽物を目立たせない代替画像Ｄを生成する。
例えば、代替画像生成部２２１は、センサ情報入力部２１０に入力された、スクリーン５０に投影された画像を撮像した画像の情報を取得する。また、代替画像生成部２２１は、取得した画像の情報に基づいて、スクリーン５０に投影された画像のうち遮蔽領域に相当する部分の周辺にある画像の輝度を平均した平均輝度を算出する。そして、代替画像生成部２２１は、例えば、算出した平均輝度より所定の値以上高い値を代替画像Ｄの輝度とする。
【００３４】
次に、代替画像生成部２２１は、代替画像Ｄの色を決定する。代替画像生成部２２１は、例えば、代替画像Ｄの色を明るい色（例えば、白色）とする。代替画像生成部２２１は、代替画像Ｄの色を明るい色とすることにより、遮蔽物を目立たせる代替画像Ｄを生成する。
【００３５】
次に、代替画像生成部２２１は、代替画像Ｄの形状を決定する。代替画像生成部２２１は、シナリオ情報記憶部２３０を参照することで、遮蔽物の全体をハイライトさせる代替画像Ｄを生成するか、遮蔽物の一部をハイライトさせる代替画像Ｄを生成するかを決定する。
代替画像生成部２２１は、シナリオ情報記憶部２３０を参照し、投影装置３０に対して現在出力させている画像に対応するシーン番号における処理種別２に記憶されている情報を取得する。代替画像生成部２２１は、処理種別２に「全体」が記憶されている場合、遮蔽物の全体をハイライトさせる代替画像Ｄを生成する。また、代替画像生成部２２１は、処理種別２に「部分」が記憶されている場合、遮蔽物の一部分をハイライトさせる代替画像Ｄを生成する。
代替画像生成部２２１は、遮蔽物の全体をハイライトさせる代替画像Ｄを生成する場合、代替画像Ｄの形状を遮蔽物の形状とする。
代替画像生成部２２１は、遮蔽物の一部分をハイライトさせる代替画像Ｄを生成する場合、例えば、画像認識等により遮蔽物に話者Ｐ−１等の人物が含まれていると認識される場合には、遮蔽物のうち、人物に相当する部分をマスクする丸形や方形など所定の形状の代替画像Ｄを生成する。
【００３６】
なお、代替画像生成部２２１は、遮蔽物がある場合であって、処理種別１に「処理なし」が記憶されている場合には、以下に述べるリモート制御装置２４からの制御信号を取得した場合を除いて、代替画像Ｄを生成しない。
【００３７】
代替画像生成部２２１は、リモート制御情報入力部２１２を介してリモート制御装置２４からの制御信号を取得した場合、当該制御信号に基づいて代替画像Ｄを生成する。リモート制御装置２４からの制御信号には、例えば、「全体マスク」、「部分マスク」、「全体ハイライト」、および「部分ハイライト」のそれぞれを示す制御信号が含まれる。
【００３８】
代替画像生成部２２１は、リモート制御装置２４から「全体マスク」を示す制御信号を取得した場合、遮蔽物の全体をマスクする代替画像Ｄを生成する。この場合に代替画像生成部２２１が生成する代替画像Ｄは、シナリオ情報記憶部２３０の処理種別１に「マスク処理」、処理種別２に「全体」が記憶されている場合に生成する画像と同様である。
また、代替画像生成部２２１は、リモート制御装置２４から「部分マスク」を示す制御信号を取得した場合、遮蔽物の一部（例えば、話者Ｐ−１の顔の部分）の領域をマスクする代替画像Ｄを生成する。この場合に代替画像生成部２２１が生成する代替画像Ｄは、シナリオ情報記憶部２３０の処理種別１に「マスク処理」、処理種別２に「部分」が記憶されている場合に生成する画像と同様である。
【００３９】
代替画像生成部２２１は、リモート制御装置２４から「全体ハイライト」を示す制御信号を取得した場合、遮蔽物の全体をハイライトする代替画像Ｄを生成する。この場合に代替画像生成部２２１が生成する代替画像Ｄは、シナリオ情報記憶部２３０の処理種別１に「ハイライト処理」、処理種別２に「全体」が記憶されている場合に生成する画像と同様である。
代替画像生成部２２１は、リモート制御装置２４から「部分ハイライト」を示す制御信号を取得した場合、遮蔽物の一部（例えば、話者Ｐ−１の上半身）の領域をハイライトさせる代替画像Ｄを生成する。この場合に代替画像生成部２２１が生成する代替画像Ｄは、シナリオ情報記憶部２３０の処理種別１に「ハイライト処理」、処理種別２に「部分」が記憶されている場合に生成する画像と同様である。
【００４０】
画像合成部２２２は、出力画像のうち遮蔽物により遮蔽されている領域に含まれる部分に代替画像Ｄを合成する。画像合成部２２２は、画像情報入力部２１１から出力画像の画像情報を取得し、代替画像生成部２２１から代替画像Ｄの画像情報を取得する。そして、画像合成部２２２は、代替画像Ｄの形状が遮蔽物の形状である場合、出力画像のうち遮蔽物により遮蔽されている領域に代替画像Ｄを合成する。また、画像合成部２２２は、代替画像Ｄの形状が遮蔽物の形状とは異なる所定の形状である場合、例えば、代替画像生成部２２１からの指示に基づいて、出力画像のうち遮蔽物により遮蔽されている領域の所定の部分に代替画像Ｄを合成する。
なお、図２では、制御部２２に画像合成部２２２が備えられた場合を例示しているが、これに限定されることはない。本実施形態では、複数の投影画像制御装置２０を備えていてもよく、ある投影画像制御装置２０が画像を合成する専用装置として用いられ、当該投影画像制御装置２０における制御部２２に画像合成部２２２を備える構成であってもよい。この場合、画像合成部２２２を備える投影画像制御装置２０とは異なる他の投影画像制御装置２０は、画像合成部２２２を備えず、画像合成部２２２によって実現される機能（画像を合成する機能）を有しなくともよい。
【００４１】
図４は、リモート制御装置２４の構成例を示すブロック図である。
リモート制御装置２４は、例えば、入出力部２５と制御部２６とを備える。入出力部２５は、操作入力部２５０と制御信号出力部２５１とを備える。
操作入力部２５０は、例えばリモート制御装置２４の操作ボタン（不図示）と接続する。操作ボタンには、例えば、「全体マスク」、「部分マスク」、「全体ハイライト」、および「部分ハイライト」をそれぞれ示すボタンがある。例えば、ユーザから「部分マスク」の操作ボタンが押下された場合、操作入力部２５０には、その「部分マスク」の操作ボタンが押下された旨を示す信号（操作信号）が入力される。
制御信号出力部２５１は、制御部２６からの指示に基づいて、「全体マスク」、「部分マスク」、「全体ハイライト」、および「部分ハイライト」のうちいずれかを示す制御信号を、投影画像制御装置２０に出力する。
【００４２】
制御部２６は、操作入力部２５０を介してユーザからの信号を取得し、取得した信号に応じて、「全体マスク」、「部分マスク」、「全体ハイライト」、および「部分ハイライト」のうちいずれかを示す制御信号を生成する。
例えば、制御部２６は、操作入力部２５０から「全体マスク」の操作ボタンが押下された旨を示す信号を取得した場合、「全体マスク」を示す制御信号を生成する。制御部２６は、操作入力部２５０から「部分マスク」の操作ボタンが押下された旨を示す信号を取得した場合、「部分マスク」を示す制御信号を生成する。
また、操作入力部２５０から「全体ハイライト」の操作ボタンが押下された旨を示す信号を取得した場合、「全体ハイライト」を示す制御信号を生成する。制御部２６は、操作入力部２５０から「部分ハイライト」の操作ボタンが押下された旨を示す信号を取得した場合、「部分ハイライト」を示す制御信号を生成する。
制御部２６は、生成した制御信号を、制御信号出力部２５１により投影画像制御装置２０に対して出力させる。
【００４３】
図５は、実施形態の投影画像制御システム１０によりスクリーン５０に表示される画像の一例を示す図である。図５（ａ）は、代替画像生成部２２１により遮蔽物の全体をマスクする代替画像Ｄが生成された場合に、投影画像制御システム１０によりスクリーン５０に表示される画像の一例を示す。図５（ｂ）は、代替画像生成部２２１により遮蔽物の全体をマスクする代替画像Ｄが生成された場合に、投影画像制御システム１０によりスクリーン５０に表示される画像の他の例を示す。図５（ｃ）は、代替画像生成部２２１により遮蔽物の全体をハイライトさせる代替画像Ｄが生成された場合に、投影画像制御システム１０によりスクリーン５０に表示される画像の一例を示す。図５（ｄ）は、代替画像生成部２２１により遮蔽物の全体をハイライトさせる代替画像Ｄが生成された場合に、投影画像制御システム１０によりスクリーン５０に表示される画像の他の例を示す。
【００４４】
すでに説明したように、代替画像生成部２２１は、スクリーン５０に投影される画像の輝度に応じて、遮蔽物の全体をマスクする代替画像Ｄを生成する。
図５（ａ）では、図５（ｂ）の場合と比較して、スクリーン５０に投影される画像の輝度が低い場合の例を示す。また、図５（ｂ）では、図５（ａ）の場合と比較して、スクリーン５０に投影される画像の輝度が高い場合の例を示す。図５（ａ）、（ｂ）に示すように、代替画像生成部２２１によりスクリーン５０に投影される画像の輝度との差が小さい輝度を持つ代替画像Ｄが生成されることにより、遮蔽物をより目立たなくすることができる。
図５（ｃ）では、図５（ｄ）の場合と比較して、スクリーン５０に投影される画像の輝度が低い場合の例を示す。代替画像生成部２２１がスクリーン５０に投影される画像の輝度に応じて、当該画像の輝度よりも高い輝度を持つ代替画像Ｄを生成することにより、図５（ｃ）の場合においては５（ｄ）の場合と比較して暗い輝度を持つ代替画像Ｄが生成され、図５（ｄ）の場合においては５（ｃ）の場合と比較して明るい輝度を持つ代替画像Ｄが生成される。このように、代替画像生成部２２１によりスクリーン５０に投影される画像の輝度に応じた輝度を持つ代替画像Ｄが生成されることにより、遮蔽物を適度に目立たせることができる。
【００４５】
図６は、実施形態の投影画像制御システム１０によりスクリーン５０に表示される画像の他の例を示す図である。図６（ａ）は、代替画像生成部２２１により遮蔽物の一部分をマスクする代替画像Ｄが生成された場合に、投影画像制御システム１０によりスクリーン５０に表示される画像の一例を示す。図６（ｂ）は、代替画像生成部２２１により遮蔽物の一部分をマスクする代替画像Ｄが生成された場合に、投影画像制御システム１０によりスクリーン５０に表示される画像の他の例を示す。
すでに説明したように、代替画像生成部２２１は、シナリオ情報記憶部２３０の「処理種別２」に「部分」を示す情報が記憶されていた場合、遮蔽物の一部分をマスクする（または、ハイライトさせる）、代替画像Ｄを生成する。
図６（ａ）では、代替画像生成部２２１により、遮蔽物の一部（図６（ａ）の例では、話者Ｐ−１の頭部）をマスクする代替画像Ｄが生成された例を示す。代替画像Ｄにより、話者Ｐ−１の頭部がマスクされることで、話者Ｐ−１に対し眩しさを低減させることができる。また、代替画像Ｄによりマスクされなかった部分には画像が投影させることができるため、代替画像Ｄによりマスクされる領域を減らして画像に含まれる情報の低減を抑制することができる。
図６（ｂ）では、代替画像生成部２２１により遮蔽物の一部（図６（ｂ）の例では、話者Ｐ−１の上半身）をハイライトさせる代替画像Ｄが生成された例を示す。代替画像生成部２２１により、遮蔽物全体ではなく話者Ｐ−１の上半身が強調されることで、話者Ｐ−１をより目立たせ、聞き手を話者Ｐ−１により注目させることができる。
【００４６】
図７は、実施形態の投影画像制御装置２０の動作例を示すフローチャートである。
まず、投影画像制御装置２０の遮蔽領域判定部２２０が、センサ情報入力部２１０を介して、検知センサ４０により検知されたスクリーン５０、およびスクリーン５０の前に存在する遮蔽物等の状況が撮像された画像の画像情報を取得する（ステップＳ１）。
次に、遮蔽領域判定部２２０は、ステップＳ１で取得した画像情報に基づいて、スクリーン５０が遮蔽物により遮蔽されているか否かを判定する（ステップＳ２）。スクリーン５０が遮蔽物により遮蔽されていると判定された場合、遮蔽領域判定部２２０は、スクリーン５０の領域における遮蔽物により遮蔽されている領域を判定する（ステップＳ３）。
次に、投影画像制御装置２０の代替画像生成部２２１は、代替画像Ｄを生成する（ステップＳ４）。代替画像生成部２２１は、シナリオ情報記憶部２３０の処理種別１に記憶された情報に基づいて、代替画像Ｄの輝度、および色を決定する。また、代替画像生成部２２１は、シナリオ情報記憶部２３０の処理種別２に記憶された情報に基づいて、代替画像Ｄの形状を決定する。そして、代替画像生成部２２１は、決定した内容に応じて代替画像Ｄを生成する。
次に、投影画像制御装置２０の画像合成部２２２が、画像情報入力部２１１を介して、画像出力端末２により出力された出力画像に、代替画像生成部２２１により生成された代替画像Ｄを合成する（ステップＳ５）。
なお、ステップＳ２において、スクリーン５０が遮蔽物により遮蔽されていないと判定された場合、遮蔽領域判定部２２０はステップＳ１に示す処理に戻る。
【００４７】
以上、説明したように、実施形態の投影画像制御装置２０は、画像出力端末２から出力される出力画像が投影されるスクリーン５０における遮蔽の状態を検知する検知センサ４０により検知された情報を取得するセンサ情報入力部２１０と、センサ情報入力部２１０により取得された情報に基づいて、スクリーン５０を遮蔽する遮蔽物があるか否かを判定し、遮蔽物があると判定した場合、スクリーン５０における遮蔽物により遮蔽されている領域が何処であるかを判定する遮蔽領域判定部２２０と、遮蔽領域判定部２２０により判定された内容に基づいて代替画像Ｄを生成する代替画像生成部２２１と、出力画像のうち遮蔽物により遮蔽されている領域に含まれる部分に相当する画像に代替画像Ｄを合成する画像合成部２２２と、を備える。
これにより、実施形態の投影画像制御装置２０は、スクリーンの前の遮蔽物を考慮しつつ、コンテンツのシーンに応じた投影を実現することができる。センサ情報入力部２１０に、スクリーン５０に投影された画像が撮像された撮像画像の情報等を入力させることができ、この情報に基づいて、遮蔽領域判定部２２０は遮蔽物があるか否かを判定し、遮蔽物があると判定した場合、スクリーン５０における遮蔽物により遮蔽されている領域が何処であるかを判定しても良い。このため、代替画像生成部２２１は遮蔽物をマスクする代替画像Ｄを生成することができ、画像合成部２２２は出力画像に代替画像Ｄを合成することができるためである。遮蔽物には代替画像Ｄが投影されるため、例えば、コンテンツのシーンに応じて、代替画像Ｄを暗い色とすることで遮蔽物を目立たせないようにすることができ、代替画像Ｄを明るい色とすることで遮蔽物を強調させることができるためである。また、代替画像Ｄを暗い色とすれば、スクリーン５０の前にいる話者Ｐ−１に対し眩しさを低減させることができる。
【００４８】
また、実施形態の投影画像制御装置２０において、代替画像生成部２２１は、遮蔽物をマスクする代替画像Ｄを生成する場合、代替画像Ｄの輝度と出力画像の輝度との差を小さくする。
これにより、実施形態の投影画像制御装置２０は、上述した効果を奏する他、シーンに応じて遮蔽物をより目立たせないようにすることができる。代替画像生成部２２１が遮蔽物をマスクする代替画像Ｄを生成する場合に、代替画像Ｄの輝度と出力画像の輝度との差を少なくすることができるためである。輝度を揃えることで遮蔽物を目立たせないようにすることができる。これにより、スクリーン５０に投影される画像を没入感のあるものとすることができ、聞き手は画像に集中することができる。
【００４９】
また、実施形態の投影画像制御装置２０において、遮蔽物をハイライトさせる代替画像Ｄを生成する場合、代替画像Ｄの輝度を出力画像の輝度よりも高くする。
これにより、実施形態の投影画像制御装置２０は、上述した効果を奏する他、シーンに応じて遮蔽物をより強調させることができる。代替画像生成部２２１が遮蔽物をハイライトさせる代替画像Ｄを生成する場合、代替画像Ｄの輝度を出力画像の輝度より高くすることができるためである。輝度に有意な差をつけることで、遮蔽物を強調することができ、聞き手は話者Ｐ−１に注目することができる。
【００５０】
また、実施形態の投影画像制御装置２０は、画像出力端末２からの出力信号に基づいてシナリオ情報を記憶するシナリオ情報記憶部２３０を更に備え、代替画像生成部２２１は、シナリオ情報記憶部２３０に記憶された「処理種別２」に基づいて、代替画像Ｄの形状を決定する。これにより、実施形態の投影画像制御装置２０は、上述した効果を奏する他、出力画像に含まれる情報の低減を抑制することができる。代替画像生成部２２１は、「処理種別２」に「部分」を示す情報が記憶されていれば、代替画像Ｄの形状を、遮蔽物の全体の形状とせずに遮蔽物の一部分をマスクする形状とすることができるためである。代替画像Ｄにより遮蔽物の一部分のみがマスクされ、残りの部分がマスクされることなく画像を表示されることにより、出力画像に含まれる情報の低減を抑制することができる。
【００５１】
また、実施形態の投影画像制御装置２０において、代替画像生成部２２１は、シナリオ情報記憶部２３０に記憶された、シーン毎の前記代替画像に関する情報を示すシナリオに基づいて代替画像Ｄを生成する。これにより、実施形態の投影画像制御装置２０は、上述した効果を奏する他、予め組み立てられたシナリオに沿った演出を行うことができる。代替画像生成部２２１は、シナリオ情報記憶部２３０に記憶されたシナリオに基づいて代替画像Ｄを生成することができるためである。
【００５２】
また、実施形態の投影画像制御装置２０は、ユーザによる指示に基づいて所定の制御信号を送信するリモート制御装置２４を更に備え、代替画像生成部２２１は、制御信号に基づいて、代替画像Ｄを生成する。これにより、実施形態の投影画像制御装置２０は、上述した効果を奏する他、ユーザの操作により演出を行うことができる。リモート制御装置２４が、スクリーン５０の前に立つユーザ等により操作されることで遮蔽物をマスクしたりハイライトしたりすることができ、予めシーンに応じた投影が予定されていなかった場合でも、話者Ｐ−１によりシーンに応じて演出を行うことができるためである。
【００５３】
また、実施形態の投影画像制御システム１０は、検知センサ４０と、投影画像制御装置２０と、投影画像制御装置２０により合成された画像をスクリーン５０に投影する投影装置３０とを備える。これにより、実施形態の投影画像制御システム１０は、スクリーンの前の遮蔽物を考慮しつつ、コンテンツのシーンに応じた投影を実現することができる。検知センサ４０はスクリーン５０に投影される画像の遮蔽の状態を検知することができ、投影画像制御装置２０は、検知された遮蔽の状態に基づいて代替画像Ｄを生成して出力画像と合成することができ、投影装置３０は合成された画像をスクリーン５０に投影することができる。このため、コンテンツのシーンに応じて、スクリーン５０に投影される画像に含まれる代替画像Ｄが遮蔽物をマスクしたり、遮蔽物をハイライトしたりすることができる。
【００５４】
（実施形態の変形例１）
次に、実施形態の変形例１について説明する。本変形例において、複数の投影装置３０により投影された画像がスクリーン５０に表示される点において、実施形態と相違する。
本変形例において、複数の投影装置３０のそれぞれは、例えば、同一の画像における略同じ領域をスクリーン５０に対して投影する。この場合、スクリーン５０に投影される画像を、投影装置３０の台数に応じて、明るく表示させることができる。複数の投影装置３０のそれぞれは、自身の装置が設置された場所に応じて、投影する画像を変形しても良い。
例えば、スクリーン５０に対して、左右に二台の投影装置３０が設置された場合、左側に設置された投影装置３０からスクリーン５０の左端部までの距離は、左側に設置された投影装置３０からスクリーン５０の右端部までの距離よりも短くなる。また、右側に設置された投影装置３０からスクリーン５０の右端部までの距離は、右側に設置された投影装置３０からスクリーン５０の左端部までの距離よりも短くなる。投影装置３０は、これを考慮して画像を投影する。二台の投影装置３０からの投影させた画像をスクリーン５０の表示面において一致させることで、位置の合った画像をスクリーン５０に表示させる。
本変形例の投影画像制御装置２０は、例えば、投影画像制御装置２０から遮蔽物までの距離に応じた代替画像Ｄを生成する。また、投影画像制御装置２０は、出力画像に代替画像Ｄを合成させた画像を、複数の投影装置３０それぞれに出力する。この場合、投影画像制御装置２０は、複数の投影装置３０それぞれが設置された位置に応じて、出力画像に代替画像Ｄを合成させた画像を変形させるようにしてもよい。
【００５５】
例えば、投影画像制御装置２０は、スクリーン５０の左側に設置された投影装置３０に対して、出力画像に代替画像Ｄを合成させた画像の左側がスクリーン５０に到達するまでの距離と画像の右側がスクリーン５０に到達するまでの距離との差分を考慮した画像を出力する。また、投影画像制御装置２０は、スクリーン５０の右側に設置された投影装置３０に対して、出力画像に代替画像Ｄを合成させた画像の右側がスクリーン５０に到達するまでの距離と画像の左側がスクリーン５０に到達するまでの距離との差分を考慮した画像を出力する。
これにより、本変形例の投影画像制御装置２０では、遮蔽物をマスクする場合に、代替画像Ｄがずれることを抑制し、位置の合った代替画像Ｄを表示させることができる。
【００５６】
（実施形態の変形例２）
次に、実施形態の変形例２について説明する。本変形例において、複数の投影装置３０により投影された画像がスクリーン５０に表示される点において、実施形態と相違する。
本変形例において、複数の投影装置３０のそれぞれは、例えば、同一の画像における異なる領域をスクリーン５０に対して投影する。この場合、複数の投影装置３０のそれぞれは、出力画像の一部の領域を、自身の装置が受け持つ領域に応じて投影する。
例えば、横に長い形状のスクリーン５０に対して、三台の投影装置３０のそれぞれが、右側部、中央部、左側部のそれぞれに表示させる画像を投影する場合、各々の投影装置３０により投影された画像が互いに重なり合うように投影する。この場合、三台の投影装置３０のそれぞれは、画像が互いに重なり合う部分の輝度を調整する。重なり合う部分を重なり合わない部分と同じ輝度にしてしまうと、重なり合う部分の輝度が、重なり合わない部分の輝度と比較して明るくなってしまうためである。このため、それぞれの投影装置３０は、画像が重なり合う部分の輝度を、重なり合う部分の輝度よりも低くさせた画像を投影する。画像が重なり合う部分の輝度を調整することで、輝度が均一な画像をスクリーン５０に表示させる。
本変形例の投影画像制御装置２０は、例えば、投影画像制御装置２０から遮蔽物までの距離に応じた代替画像Ｄを生成する。また、投影画像制御装置２０は、出力画像に代替画像Ｄを合成させた画像を、複数の投影装置３０それぞれに出力する。この場合、投影画像制御装置２０は、複数の投影装置３０それぞれが担当する画像の領域に応じて、出力画像に代替画像Ｄを合成させた画像における輝度を部分的に変化させる。
【００５７】
例えば、投影画像制御装置２０は、スクリーン５０を三分割した右側の部分に画像を投影する投影装置３０に対して、出力画像に代替画像Ｄを合成させた画像を三分割した右側の領域の画像において、画像の左側の端部の輝度を低くした画像を出力する。また、投影画像制御装置２０は、スクリーン５０を三分割した中央の部分に画像を投影する投影装置３０に対して、出力画像に代替画像Ｄを合成させた画像を三分割した中央の領域の画像において、画像の左側と右側との両方の端部の輝度を低くした画像を出力する。また、投影画像制御装置２０は、スクリーン５０を三分割した左側の部分に画像を投影する投影装置３０に対して、出力画像に代替画像Ｄを合成させた画像を三分割した左側の領域の画像において、画像の右側の端部の輝度を低くした画像を出力する。
これにより、本変形例の投影画像制御装置２０では、遮蔽物をマスクする場合に、画像が重なり合う部分において代替画像Ｄの輝度が変化してしまうことを抑制し、輝度が均一な代替画像Ｄを表示させることができる。
【００５８】
実施形態の投影画像制御システム１０において、検知センサ４０がステレオカメラである場合を例示したが、検知センサ４０は、撮像装置であってもよいし、距離センサであってもよいし、温度センサであってもよい。
検知センサ４０が撮像装置である場合、検知センサ４０は、投影装置３０の側からスクリーン５０を撮像する。そして遮蔽領域判定部２２０は、例えば、画像認識により、検知センサ４０により撮像された撮像画像に含まれる人の顔を認識し、人の顔が認識された場合、当該顔の部分を遮蔽物と判定する。この場合、スクリーン５０に投影された画像が人の顔が描画されている画像であった場合に、スクリーン５０に投影された画像の一部を遮蔽物と判定してしまうことが考えられる。このため、遮蔽領域判定部２２０は、例えば、記憶部２３に話者Ｐ−１の顔を記憶させることにより、話者Ｐ−１の顔を特定した認識を行うことができるようにし、遮蔽物（話者Ｐ−１の顔の部分）を判定するようにしてもよい。
【００５９】
検知センサ４０が距離センサである場合、検知センサ４０は、例えば、照射装置と受光装置とを組み合わせることにより距離を計測する。例えば、検知センサ４０の照射装置と受光装置とは、例えば、投影画像制御装置２０に設置され、スクリーン５０の方向に赤外線等を照射する。照射された赤外線の反射光が受光装置に受光される。スクリーン５０や話者Ｐ−１等に再帰性反射材を付着させ、それにより受光装置に受光される光量を増やしても良い。検知センサ４０は、照射装置から照射された照射光が受光装置に受光されるまでの時間に応じてスクリーン５０や話者Ｐ−１までの距離を計測する。この場合、遮蔽領域判定部２２０は、例えば、検知センサ４０により取得された距離センサが配置された所定の位置からスクリーン５０までの間の距離よりも所定の位置からの距離が短い地点を繋ぎ合わせることにより形成される物体を遮蔽物と判定する。また、遮蔽領域判定部２２０は、所定の位置からスクリーン５０までの間の距離よりも所定の位置からの距離が短い地点の点群に基づいて定まる輪郭の形状を抽出することにより遮蔽物の形状を取得する。
【００６０】
検知センサ４０が温度センサである場合、検知センサ４０は、例えば、赤外線サーモグラフィカメラである。検知センサ４０は、被写体から放射される赤外線の強度を検知し、検知した赤外線の強度に基づいて被写体の温度を測定する。この場合、遮蔽領域判定部２２０は、例えば、検知センサ４０温度分布に基づいて、所定の範囲内の温度を示す領域をスクリーン５０の領域とし、所定の範囲外の温度を示す領域に対応する物体を遮蔽物と判定する。また、遮蔽領域判定部２２０は、定の範囲外の温度を示す領域に基づいて定まる輪郭の形状を抽出することにより遮蔽物の形状を取得する。
なお、検知センサ４０は、上述したステレオカメラ、撮像装置、距離センサ、および温度センサ、のいずれか一つであってもよいし、いずれか複数の組合せであってもよい。
【００６１】
また、実施形態の投影画像制御システム１０において、投影装置３０に、投影画像制御装置２０や検知センサ４０が内蔵されていてもよいし、内蔵されていなくともよい。投影装置３０と検知センサ４０（例えば、二台の撮像装置）と別体である場合、二台の撮像装置を投影装置３０の左右に距離的に離間して設置することができる。二台の撮像装置が離間していることにより三角測量の原理に基づき、視差を利用して撮像位置から被写体の表面までの距離を計測することができるステレオカメラとして動作させることができる。また、投影装置３０と検知センサ４０とが別体である場合、検知センサ４０を追加したり削除したりすることが容易となる。また、検知センサ４０が、投影装置３０の振動や、投影装置３０から投影される光の影響を受けることを低減させる。例えば、検知センサ４０が、光源の近くで強い光が照射されることにより埃等を撮像してしまうことで遮蔽物の存在を誤って判定してしまうことを抑制することができる。また、投影装置３０と検知センサ４０とが別体である場合、投影装置３０が、静音ボックスや機械室など、スクリーン５０が設置された空間とは別の隔離された空間に設置された場合であっても、検知センサ４０をスクリーン５０が設置された空間に設置することができる。これにより、空間を隔てる壁やガラス越しにスクリーン５０を撮像する必要がなく、ガラス等による反射の影響を受けることなく、スクリーン５０の遮蔽の状態を検知することができる。
【００６２】
以上、本発明のいくつかの実施形態を説明したが、これらの実施形態は、例として提示したものであり、発明の範囲を限定することは意図していない。これら実施形態は、その他の様々な形態で実施されることが可能であり、発明の要旨を逸脱しない範囲で、種々の省略、置き換え、変更を行うことができる。これら実施形態やその変形は、発明の範囲や要旨に含まれると同様に、特許請求の範囲に記載された発明とその均等の範囲に含まれるものである。
【符号の説明】
【００６３】
１…投影システム、２…画像出力端末、１０…投影画像制御システム、２０…投影画像制御装置、２１０…センサ情報入力部、２１２…リモート制御情報入力部、２２０…遮蔽領域判定部、２２１…代替画像生成部、２２２…画像合成部、２３０…シナリオ情報記憶部、２４…リモート制御装置、３０…投影装置、４０…検知センサ、５０…スクリーン。
【図１】
2019120884.tif 000003
【図２】
2019120884.tif 000004
【図３】
2019120884.tif 000005
【図４】
2019120884.tif 000006
【図５】
2019120884.tif 000007
【図６】
2019120884.tif 000008
【図７】
2019120884.tif 000009