(57)【要約】  本技術の一形態に係る情報処理装置は、投射制御部と、モード制御部とを具備する。前記投射制御部は、第１の情報、及び前記第１の情報とは異なる種類の情報として分類される第２の情報の投射を制御する。前記モード制御部は、投射対象物に前記第１の情報及び前記第２の情報が投射される第１の投射モードと、前記投射対象物に前記第１の情報が投射され、前記投射対象物の外側の領域に前記第２の情報が投射される第２の投射モードとを切替可能である。
2019198381.tif 000002
【特許請求の範囲】
【請求項１】
第１の情報、及び前記第１の情報とは異なる種類の情報として分類される第２の情報の投射を制御する投射制御部と、
投射対象物に前記第１の情報及び前記第２の情報が投射される第１の投射モードと、前記投射対象物に前記第１の情報が投射され、前記投射対象物の外側の領域に前記第２の情報が投射される第２の投射モードとを切替可能なモード制御部と
を具備する情報処理装置。
【請求項２】
請求項１に記載の情報処理装置であって、
前記投射制御部は、前記第２の投射モードが選択された場合に、前記投射対象物に前記第１の情報を前記投射対象物に対応した最大のサイズで投射させる
情報処理装置。
【請求項３】
請求項２に記載の情報処理装置であって、
前記投射制御部は、前記第２の投射モードが選択された場合に、前記投射対象物から所定距離以内の位置に前記第２の情報を投射させる
情報処理装置。
【請求項４】
請求項３に記載の情報処理装置であって、さらに、
前記投射対象物の位置を含む対象物情報を取得する取得部を具備し、
前記投射制御部は、前記取得された対象物情報に基づいて、前記第１の情報及び前記第２の情報の投射を制御する
情報処理装置。
【請求項５】
請求項４に記載の情報処理装置であって、
前記対象物情報は、前記投射対象物の形状及びサイズを含む
情報処理装
【請求項６】
請求項４に記載の情報処理装置であって、
前記取得部は、検出装置により検出された前記投射対象物に関する検出情報に基づいて、前記対象物情報を取得する
情報処理装置。
【請求項７】
請求項４に記載の情報処理装置であって、
前記取得部は、ユーザにより設定された前記投射対象物に関する設定情報に基づいて、前記対象物情報を取得する
情報処理装置。
【請求項８】
請求項４に記載の情報処理装置であって、
前記取得部は、前記投射対象物の投射領域を含む投射可能領域に関する領域情報を取得し、
前記投射制御部は、前記対象物情報及び前記領域情報に基づいて、前記第１の情報及び前記第２の情報の投射を制御する
情報処理装置。
【請求項９】
請求項８に記載の情報処理装置であって、
前記投射対象物は、投射対象面に配置されたスクリーンであり、
前記スクリーンは、投射画像を前記投射対象面に投射した場合よりも、投射画像を前記スクリーンに投射した場合の方が、投射画像をより高い画質で表示することが可能な材質により構成されており、
前記投射制御部は、前記第２の投射モードが選択された場合に、前記対象物情報及び前記領域情報に基づいて、前記第1の情報を前記スクリーンに対応した最大のサイズで前記スクリーンに投射する制御及び前記第２の情報を前記投射可能領域内であって前記スクリーンの外側の領域に投射する制御を行う
情報処理装置。
【請求項１０】
請求項１に記載の情報処理装置であって、
前記第１の情報は、コンテンツ情報を含み、
前記第２の情報は、前記コンテンツ情報に関連する付加情報、メニュー情報、通知情報、及び広告情報の少なくとも１つを含む
情報処理装置。
【請求項１１】
請求項１に記載の情報処理装置であって、
前記投射制御部は、前記第２の投射モードが選択された場合に、投射される前記第２の情報の位置、形状、及びサイズの少なくとも１つを制御可能である
情報処理装置。
【請求項１２】
請求項４に記載の情報処理装置であって、
前記対象物情報は、前記第１の情報及び前記第２の情報を投射する画像投射装置に対する前記投射対象物の相対的な位置の変化を示す位置変化の情報を含み、
前記表示制御部は、前記位置変化の情報に基づいて、前記第１の情報及び前記第２の情報の投射を制御する
情報処理装置。
【請求項１３】
請求項１２に記載の情報処理装置であって、
前記表示制御部は、前記第２の投射モードが選択された場合に、前記位置変化の情報に基づいて、前記投射対象物への前記第１の情報の投射、及び前記外側の領域への前記第２の情報の投射がそれぞれ維持されるように、前記第１の情報及び前記第２の情報の投射を制御する
情報処理装置。
【請求項１４】
請求項１に記載の情報処理装置であって、さらに、
前記投射対象物の有無を検出する検出部を具備し、
前記モード制御部は、前記投射対象物が検出された場合に、前記第２の投射モードを選択する
情報処理装置。
【請求項１５】
請求項１に記載の情報処理装置であって、
前記投射制御部は、前記第２の投射モードが選択された場合に、前記投射対象物の前記第１の情報が投射されない領域であるブランク領域に、前記第２の情報を投射可能であるか否かを判定し、前記ブランク領域に前記第２の情報を投射可能な場合は前記ブランク領域に前記第２の情報を投射させる
情報処理装置。
【請求項１６】
請求項１に記載の情報処理装置であって、
前記投射制御部は、前記第２の投射モードが選択された場合に、前記投射対象物の外側の領域に前記第２の情報を投射可能であるか否かを判定し、前記外側の領域に前記第２の情報を投射可能ではない場合には、前記投射対象物に前記第２の情報を投射させる
情報処理装置。
【請求項１７】
請求項１に記載の情報処理装置であって、
前記投射制御部は、前記第２の投射モードが選択された場合に、投射される前記第１の情報の位置、形状、及びサイズの少なくとも１つの変化に応じて、前記第２の情報の投射を制御する
情報処理装置。
【請求項１８】
請求項１に記載の情報処理装置であって、
前記投射制御部は、画像投射装置による前記第１の情報及び前記第２の情報の投射を制御する
情報処理装置。
【請求項１９】
第１の情報、及び前記第１の情報とは異なる種類の情報として分類される第２の情報の投射を制御し、
投射対象物に前記第１の情報及び前記第２の情報が投射される第１の投射モードと、前記投射対象物に前記第１の情報が投射され、前記投射対象物の外側の領域に前記第２の情報が投射される第２の投射モードとを切替える
ことをコンピュータシステムが実行する情報処理方法。
【請求項２０】
第１の情報、及び前記第１の情報とは異なる種類の情報として分類される第２の情報の投射を制御するステップと、
投射対象物に前記第１の情報及び前記第２の情報が投射される第１の投射モードと、前記投射対象物に前記第１の情報が投射され、前記投射対象物の外側の領域に前記第２の情報が投射される第２の投射モードとを切替えるステップと
をコンピュータシステムに実行させるプログラム。
【発明の詳細な説明】
【技術分野】
【０００１】
本技術は、画像の投射制御に適用可能な情報処理装置、情報処理方法、及びプログラムに関する。
【背景技術】
【０００２】
従来、スクリーン上に投射画像を表示する投射型の画像表示装置として、プロジェクタが広く知られている。特許文献１に記載のように、最近では、投射空間が小さくても大画面を表示できる超広角のフロント投射型プロジェクタの需要が高まってきている。このプロジェクタを用いれば、スクリーンに対して斜めかつ広角に打ち込むことで、限定された空間において大画面を投射することが可能となる（特許文献１の明細書段落［００１４］［００１５］図１〜図５等）。
【先行技術文献】
【特許文献】
【０００３】
【特許文献１】特許第５３６５１５５号公報
【発明の概要】
【発明が解決しようとする課題】
【０００４】
今後とも、投射型の画像表示装置は広く普及していくと考えられ、高品質な画像表示を実現することが可能な技術が求められている。【０００５】
以上のような事情に鑑み、本技術の目的は、高品質な画像表示を実現することが可能な情報処理装置、情報処理方法、及びプログラムを提供することにある。
【課題を解決するための手段】
【０００６】
上記目的を達成するため、本技術の一形態に係る情報処理装置は、投射制御部と、モード制御部とを具備する。
前記投射制御部は、第１の情報、及び前記第１の情報とは異なる種類の情報として分類される第２の情報の投射を制御する。
前記モード制御部は、投射対象物に前記第１の情報及び前記第２の情報が投射される第１の投射モードと、前記投射対象物に前記第１の情報が投射され、前記投射対象物の外側の領域に前記第２の情報が投射される第２の投射モードとを切替可能である。【０００７】
この情報処理装置では、投射対象物に互いに異なる情報として分類される第１の情報及び第２の情報を投射する第１の投射モードと、第１の情報は投射対象物に投射し、第２の情報は投射対象物の外側の領域に投射する第２の投射モードとを切替えることが可能となる。これにより高品質の画像表示を実現することが可能となる。【０００８】
前記投射制御部は、前記第２の投射モードが選択された場合に、前記投射対象物に前記第１の情報を前記投射対象物に対応した最大のサイズで投射させてもよい。【０００９】
前記投射制御部は、前記第２の投射モードが選択された場合に、前記投射対象物から所定距離以内の位置に前記第２の情報を投射させてもよい。【００１０】
前記情報処理装置は、さらに、前記投射対象物の位置を含む対象物情報を取得する取得部を具備してもよい。この場合、前記投射制御部は、前記取得された対象物情報に基づいて、前記第１の情報及び前記第２の情報の投射を制御してもよい。【００１１】
前記対象物情報は、前記投射対象物の形状及びサイズを含んでもよい。【００１２】
前記取得部は、検出装置により検出された前記投射対象物に関する検出情報に基づいて、前記対象物情報を取得してもよい。【００１３】
前記取得部は、ユーザにより設定された前記投射対象物に関する設定情報に基づいて、前記対象物情報を取得してもよい。【００１４】
前記取得部は、前記投射対象物の投射領域を含む投射可能領域に関する領域情報を取得してもよい。この場合、前記投射制御部は、前記対象物情報及び前記領域情報に基づいて、前記第１の情報及び前記第２の情報の投射を制御してもよい。【００１５】
前記投射対象物は、投射対象面に配置されたスクリーンであってもよい。この場合、前記スクリーンは、投射画像を前記投射対象面に投射した場合よりも、投射画像を前記スクリーンに投射した場合の方が、投射画像をより高い画質で表示することが可能な材質により構成されていてもよい。また前記投射制御部は、前記第２の投射モードが選択された場合に、前記対象物情報及び前記領域情報に基づいて、前記第1の情報を前記スクリーンに対応した最大のサイズで前記スクリーンに投射する制御及び前記第２の情報を前記投射可能領域内であって前記スクリーンの外側の領域に投射する制御を行ってもよい。【００１６】
前記第１の情報は、コンテンツ情報を含んでもよい。この場合、前記第２の情報は、前記コンテンツ情報に関連する付加情報、メニュー情報、通知情報、及び広告情報の少なくとも１つを含んでもよい。【００１７】
前記投射制御部は、前記第２の投射モードが選択された場合に、投射される前記第２の情報の位置、形状、及びサイズの少なくとも１つを制御可能であってもよい。【００１８】
前記対象物情報は、前記第１の情報及び前記第２の情報を投射する画像投射装置に対する前記投射対象物の相対的な位置の変化を示す位置変化の情報を含んでもよい。この場合、前記表示制御部は、前記位置変化の情報に基づいて、前記第１の情報及び前記第２の情報の投射を制御してもよい。【００１９】
前記表示制御部は、前記第２の投射モードが選択された場合に、前記位置変化の情報に基づいて、前記投射対象物への前記第１の情報の投射、及び前記外側の領域への前記第２の情報の投射がそれぞれ維持されるように、前記第１の情報及び前記第２の情報の投射を制御してもよい。【００２０】
前記情報処理装置は、さらに、前記投射対象物の有無を検出する検出部を具備してもよい。この場合、前記モード制御部は、前記投射対象物が検出された場合に、前記第２の投射モードを選択してもよい。【００２１】
前記投射制御部は、前記第２の投射モードが選択された場合に、前記投射対象物の前記第１の情報が投射されない領域であるブランク領域に、前記第２の情報を投射可能であるか否かを判定し、前記ブランク領域に前記第２の情報を投射可能な場合は前記ブランク領域に前記第２の情報を投射させてもよい。【００２２】
前記投射制御部は、前記第２の投射モードが選択された場合に、前記投射対象物の外側の領域に前記第２の情報を投射可能であるか否かを判定し、前記外側の領域に前記第２の情報を投射可能ではない場合には、前記投射対象物に前記第２の情報を投射させてもよい。【００２３】
前記投射制御部は、前記第２の投射モードが選択された場合に、投射される前記第１の情報の位置、形状、及びサイズの少なくとも１つの変化に応じて、前記第２の情報の投射を制御してもよい。【００２４】
前記投射制御部は、画像投射装置による前記第１の情報及び前記第２の情報の投射を制御してもよい。【００２５】
本技術の一形態に係る情報処理方法は、コンピュータシステムにより実行される情報処理方法であって、第１の情報、及び前記第１の情報とは異なる種類の情報として分類される第２の情報の投射を制御することを含む。
投射対象物に前記第１の情報及び前記第２の情報が投射される第１の投射モードと、前記投射対象物に前記第１の情報が投射され、前記投射対象物の外側の領域に前記第２の情報が投射される第２の投射モードとが切替えられる。【００２６】
本技術の一形態に係るプログラムは、コンピュータシステムに以下のステップを実行さ
せる。
第１の情報、及び前記第１の情報とは異なる種類の情報として分類される第２の情報の投射を制御するステップ。
投射対象物に前記第１の情報及び前記第２の情報が投射される第１の投射モードと、前記投射対象物に前記第１の情報が投射され、前記投射対象物の外側の領域に前記第２の情報が投射される第２の投射モードとを切替るステップ。
【発明の効果】
【００２７】
以上のように、本技術によれば、高品質な画像表示を実現することが可能となる。なお、ここに記載された効果は必ずしも限定されるものではなく、本開示中に記載されたいずれかの効果であってもよい。
【図面の簡単な説明】
【００２８】
【図１】第１の実施形態に係る画像表示システムの構成例を示す概略図である。
【図２】第１の実施形態に係る画像表示システムの構成例を示す概略図である。
【図３】システム制御装置の機能的な構成例を示すブロック図である。
【図４】画像表示システムによる画像表示の一例を示すフローチャートである。
【図５】各投射モードにて画像が投射される場合の処理例を示すフローチャートである。
【図６】スクリーンに関するパラメータの設定例を説明するための模式図である。
【図７】各投射モードにおけるレイアウト例を示す模式図である。
【図８】フルスクリーン表示モードが選択された場合のレイアウト例を示す図である。
【図９】フルスクリーン表示モードが選択された場合のレイアウト例を示す図である。
【図１０】スクリーンが移動した場合の主情報及び副情報の投射制御の一例を説明するための模式図である。
【図１１】スクリーンの位置変化に応じた主情報及び副情報の投射制御の他の例を説明するための模式図である。
【図１２】第２の実施形態に係る、フルスクリーン表示モードが選択された場合の主情報及び副情報の投射制御の一例を示すフローチャートである。
【図１３】図１２に示す投射制御例を説明するための模式図である。
【図１４】第３の実施形態に係る、フルスクリーン表示モードが選択された場合の主情報及び副情報の投射制御の一例を示すフローチャートである。
【図１５】図１４に示す投射制御例を説明するための模式図である。
【図１６】スクリーンの位置、形状、及びサイズの検出例を説明するための図である。
【図１７】スクリーンの他の構成例を示す模式図である。
【発明を実施するための形態】
【００２９】
以下、本技術に係る実施形態を、図面を参照しながら説明する。
【００３０】
＜第１の実施形態＞
［画像表示システム］
図１及び図２は、本技術の第１の実施形態に係る画像表示システムの構成例を示す概略図である。画像表示システム１００は、プロジェクタ１０（１０ａ及び１０ｂ）と、カメラ２０と、システム制御装置３０とを有する。
【００３１】
プロジェクタ１０は、画像を生成して投射することが可能である。プロジェクタ１０は、投射対象面１に向けて画像を投射可能にセットされる。図１では、プロジェクタ１０ａとして、短焦点プロジェクタが用いられている。図２では、プロジェクタ１０ｂとして、長焦点プロジェクタが用いられている。本技術は、プロジェクタ１０の種類によらず、任意の構成を有する投射型の画像表示装置に適用可能である。以下、プロジェクタ１０により投射される画像を、投射画像と記載する場合がある。
【００３２】
図１及び図２に示すように、本実施形態では、投射対象面１にスクリーン２が配置される。投射対象面１はスクリーン２を設置する基準となる面であり、例えば室内の所定の壁面である。スクリーン２は、正面から見た形状が長方形状であり、厚みが２０ｍｍ程度の略板形状からなる。プロジェクタ１０から投射される画像が、投射対象面１に投射される場合よりもスクリーン２に投射された場合に高画質（例えば投射画像の輝度やコントラストがより高い画質）で表示されるように、スクリーン２の素材が適宜選択される。あるいは高画質な画像が表示されるように、スクリーン２の表面が加工されている。
【００３３】
スクリーン２の形状（例えばアスペクト比等）やサイズ等は限定されず、任意のスクリーン２が用いられてよい。本実施形態において、スクリーン２は、投射対象物に相当する。またスクリーン２の画像が投射される領域が、スクリーン２の投射領域に相当する。
【００３４】
図１及び図２に示すように、本実施形態では、プロジェクタ１０の投射可能領域１１が、スクリーン２よりも大きいサイズとなるように設定される。投射可能領域１１のアスペクト比は、スクリーン２のアスペクト比と等しくなるように設定されてもよいし、スクリーン２のアスペクト比とは異なるように設定されてよい。本実施形態において、プロジェクタ１０は、画像投射装置に相当する。
【００３５】
カメラ２０は、投射対象面１に向けて、撮影範囲２１がプロジェクタ１０の投射可能領域１１より大きいサイズとなるようにセットされる。カメラ２０は、静止画像及び動画像の両方を撮影することが可能である。カメラ２０としては、例えばＣＭＯＳ（Complementary etal-Oxide Semiconductor）センサやＣＣＤ（Charge Coupled Device）センサ等のイメージセンサを備えるデジタルカメラが用いられる。その他、任意のカメラが用いられてよい。
【００３６】
本実施形態において、カメラ２０は、投射対象物に関する検出情報を検出可能な検出装置として機能する。カメラ２０により撮影される撮影画像は、対象物に関する検出情報に相当する。
【００３７】
システム制御装置３０は、画像表示システム１００を統括的に制御する。図１及び図２に示すようにシステム制御装置３０は、プロジェクタ１０及びカメラ２０と、通信可能に接続される。各デバイスとの接続形態は限定されず、例えばＷｉＦｉ等の無線ＬＡＮ通信や、Bluetooth（登録商標）等の近距離無線通信が用いられる。
【００３８】
図1及び図２に示すように、システム制御装置３０は、外部の画像供給装置９０から画像情報を受信する。またシステム制御装置３０は、ＣＤ（登録商標）、ＤＶＤ（登録商標）、Ｂｌｕ−ｒａｙＤｉｓｃ（登録商標）等の記憶媒体から画像情報を読み取る。システム制御装置３０は、投射対象面１に投射する画像のレイアウトを設定し、画像情報とともにプロジェクタ１０に出力する。プロジェクタ１０は、システム制御装置３０の指示に基づいて、投射対象面１に画像を投射する。
【００３９】
画像供給装置９０は、例えばネットワーク上に設置されたサーバ等である。システム制御装置３０は、ネットワークを介して画像情報を受信する。ネットワークとしては、例えばインターネットや広域通信回線網等により構築される。その他、任意のＷＡＮ（Wide Area Network）やＬＡＮ（Local Area Network）等が用いられてよく、ネットワークを構築するためのプロトコルは限定されない。
【００４０】
システム制御装置３０と、プロジェクタ１０及びカメラ２０との接続に、ネットワークが利用されてもよい。本実施形態において、システム制御装置３０は、本技術に係る情報処理装置の一実施形態として機能する。
【００４１】
図３は、システム制御装置３０の機能的な構成例を示すブロック図である。
【００４２】
システム制御装置３０は、例えばＣＰＵ、ＲＯＭ、ＲＡＭ、及びＨＤＤ等のコンピュータの構成に必要なハードウェアを有する。ＣＰＵがＲＯＭ等に予め記録されている本技術に係るプログラムをＲＡＭにロードして実行することにより、図３に示す各ブロックが構成され、本技術に係る情報処理方法が実行される。
【００４３】
例えばＰＣ（Personal Computer）等の任意のコンピュータにより、システム制御装置３０を実現することが可能である。もちろんＦＰＧＡ、ＡＳＩＣ等のハードウェアが用いられてもよい。また図３に示す各ブロックを実現するために、ＩＣ（集積回路）等の専用のハードウェアが用いられてもよい。
【００４４】
プログラムは、例えば種々の記録媒体を介してシステム制御装置３０にインストールされる。あるいは、インターネット等を介してプログラムのインストールが実行されてもよい。
【００４５】
図３に示すようにシステム制御装置３０は、画像解析部３１、入力受付部３２、画像情報取得部３３、モード制御部３４、プロジェクタ制御部３５、及びシステム最適化処理部３６を有する。
【００４６】
画像解析部３１は、カメラ２０により撮影された撮影画像を解析する。本実施形態では、画像解析部３１により、スクリーン２の位置、形状、及びサイズを検出することが可能である。スクリーン２の位置は、例えば所定の基準点を原点とするＸＹＺ座標値により算出される。例えばプロジェクタ１０の位置を基準点とし、スクリーン２の四隅の頂点のＸＹＺ座標値が、スクリーン２の位置として算出される。もちろんこの方法に限定される訳ではない。
【００４７】
スクリーン２の形状及びサイズは、例えば任意のエッジ検出技術等を用いて検出することが可能である。例えばスクリーン２の縁部の各点について、ＸＹＺ座標値が算出されてもよい。その他、スクリーン２の位置、形状、及びサイズを検出するために、任意の画像解析技術が用いられてよい。
【００４８】
また画像解析部３１は、投射対象面１にスクリーン２が設置されているか否かを検出することも可能である。すなわちスクリーン２の有無を検出することが可能である。例えばスクリーン２が設定されていない状態の画像を撮影しておき、その画像を用いてマッチング等を実行することで、スクリーン２の有無を検出することが可能である。もちろんこの方法に限定される訳ではない。
【００４９】
スクリーン２の位置、形状、及びサイズの検出、スクリーン２の有無の検出に、例えばＤＮＮ（Deep NeuralNetwork：深層ニューラルネットワーク）等を用いた任意の機械学習アルゴリズムが用いられてもよい。例えばディープラーニング（深層学習）を行うＡＩ（人工知能）等を用いることで、スクリーン２の位置、形状、及びサイズ、スクリーン２の有無の検出精度を向上させることが可能となる。
【００５０】
なおシステム最適化処理部３６等により実行される処理等の、本開示で説明する他の処理に、機械学習等が用いられてもよい。これにより画像表示に関する種々の処理の精度を向上させることが可能である。
【００５１】
入力受付部３２は、システム制御装置３０に対するユーザの様々な入力を受付ける。本実施形態では、システム制御装置３０には、キーボード、マウス、タッチパネル等の操作部が設けられている。入力受付部３２は、操作部に対する操作に基づいて、ユーザの入力を受付ける。
【００５２】
また入力受付部３２は、プロジェクタ１０やカメラ２０に対する操作に基づいて、ユーザの入力を受付けることが可能である。具体的には、プロジェクタ１０やカメラ２０に対する操作に応じた操作信号が、システム制御装置３０に送信される。入力受付部３２は、プロジェクタ１０やカメラ２０から送信される操作信号に基づいて、ユーザの入力を受付ける。
【００５３】
本実施形態では、ユーザにより、投射対象面１に設置されるスクリーン２に関する種々のパラメータを設定して入力することが可能である。例えばユーザにより、スクリーン２の位置、形状、及びサイズが設定されて入力される。当該ユーザの設定により、スクリーン２に関する設定情報が生成され、入力受付部３２により受付けられる。
【００５４】
画像情報取得部３３は、プロジェクタ１０により投射される画像情報を取得する。上記したように、例えば画像情報取得部３３は、外部の画像供給装置９０から送信された画像情報を受信する。また画像情報取得部３３は、システム制御装置３０のドライブ装置（図示は省略）にセットされた記録媒体から、画像情報を読み出す。
【００５５】
本実施形態では、プロジェクタ１０により投射される画像が、主情報の画像と、主情報とは異なる情報として分類される副情報の画像とに分類される。主情報は、例えばユーザの主な視聴対象となる情報（メインコンテンツ）である。副情報は、例えばユーザにより適宜参照される情報（サブコンテンツ）である。
【００５６】
主情報及び副情報を互いに分類することは、主情報の画像及び副情報の画像を互いに分類することと同じ意味となる。例えば画像情報取得部３３により取得される画像情報に含まれる、あるいは付加されるメタ情報等に基づいて、主情報及び副情報を互いに分類することが可能である。もちろんこの方法に限定されず、他の任意の方法が用いられてよい。
【００５７】
本開示では、主情報の画像の投射は、主情報の投射に相当する。副情報の画像の投射は、副情報の投射に相当する。またスクリーン２等に投射される主情報の画像の位置、形状、サイズ等は、スクリーン２等に投射される主情報の位置、形状、サイズ等に相当する。同様に、投射される副情報の画像の位置、形状、サイズ等は、投射される副情報の位置、形状、サイズ等に相当する。
【００５８】
主情報には、映像コンテンツ等の種々のコンテンツ情報が含まれる。例えば、ミュージックライブ、スポーツ、映画、ニュース等の様々な映像コンテンツが主情報として投射される。また写真コンテンツや、ＳＮＳ（Social Networking Service）のコンテンツ（タイムライン）等が、主情報として投射される。
【００５９】
副情報には、映像コンテンツに関する付加情報が含まれる。例えば字幕、出演者に関する情報、作品に関する情報等が、副情報として投射される。
【００６０】
また副情報には、メニュー情報が含まれる。メニュー情報は、例えばユーザによる操作入力が行われる場合に表示される情報であり、選択肢等を含む選択画像やパラメータ等を設定するための設定画像等が、副情報として投射される。例えばチャンネル、ボリューム、輝度、色度等を調整するためのＧＵＩ等が、副情報（副情報の画像）として投射される。なおチャンネル名は、映像コンテンツに関する付加情報ということも可能である。
【００６１】
また副情報には、ユーザへの様々な通知情報が含まれる。例えばユーザに対してメール等の受信や電話の着信等を通知するためのアイコン等が副情報として投射される。またＳＮＳに関する通知情報等が、副情報として投射される。また副情報には、種々の広告情報が含まれる。
【００６２】
主情報及び副情報を分類する方法は限定されない。すなわちどの情報を主情報として、どの情報を副情報とするかは、任意に設定されてよい。本実施形態において、主情報は第１の情報に相当する。副情報は、第１の情報とは異なる情報として分類される第２の情報に相当する。
【００６３】
なお主情報及び副情報は、本技術に係る第１の情報及び第２の情報の一実施形態である。これに限定されず、互いに異なる種類として分類される任意の情報同士を、本技術に係る第１の情報及び第２の情報の一実施形態として、本技術を適用することが可能である。
【００６４】
モード制御部３４は、プロジェクタ１０の画像の投射モードとして、通常表示モードと、フルスクリーン表示モードとを切替可能である。通常表示モードは、スクリーン２に主情報及び副情報が投射される投射モードである。フルスクリーン表示モードとは、スクリーン２に主情報が投射され、スクリーン２の外側の領域に副情報が投射される投射モードである。
【００６５】
すなわち本開示において、通常表示とは、スクリーン２に主情報及び副情報を投射して表示することを意味する。フルスクリーン表示とは、スクリーン２に主情報を投射して表示し、スクリーン２の外側の領域に副情報を投射して表示することを意味する。
【００６６】
本実施形態において、通常表示モードは、投射対象物に第１の情報及び第２の情報が投射される第１の投射モードに相当する。フルスクリーン表示モードは、投射対象物に第１の情報が投射され、投射対象物の外側の領域に第２の情報が投射される第２の投射モードに相当する。
【００６７】
プロジェクタ制御部３５は、プロジェクタ１０による画像の投射を制御する。プロジェクタ制御部３５により、プロジェクタ１０の投射可能領域の位置やサイズや、画像の投射位置等が適宜制御される。
【００６８】
システム最適化処理部３６は、画像表示システム１００が最適な動作を実行するための統括的な制御を実行する。例えばシステム最適化処理部３６は、プロジェクタ１０により投射される画像のレイアウトを設定し、レンダリングを実行する。そして投射対象面１にレイアウトされた画像が適正に投射されて表示されるように、プロジェクタ制御部３５に、画像投射に関する種々の指示を出力する。その他、システム最適化処理部３６により、図３に示す各ブロックの動作が制御される。
【００６９】
本実施形態において、プロジェクタ制御部３５及びシステム最適化処理部３６により、第１の情報、及び第１の情報とは異なる種類の情報として分類される第２の情報の投射を制御する投射制御部が実現される。またプロジェクタ制御部３５は、投射可能領域１１に関する領域情報を取得する取得部としても機能する。
【００７０】
またモード制御部３４により、投射対象物に第１の情報及び第２の情報が投射される第１の投射モードと、投射対象物に第１の情報が投射され、投射対象物の外側の領域に第２の情報が投射される第２の投射モードとを切替可能なモード制御部が実現される。
【００７１】
また画像解析部３１及び入力受付部３２により、投射対象物の位置を含む対象物情報を取得する取得部が実現される。また画像解析部３１は、投射対象物の有無を検出する検出部としても機能する。また各ブロックが適宜協働することで、投射制御部、モード制御部、取得部、及び検出部としての種々の処理を実行することも可能である。
【００７２】
［画像表示システムによる画像表示］
図４は、画像表示システム１００による画像表示の一例を示すフローチャートである。投射対象面１に画像を投射して表示させるために、まずシステム最適化処理部３６により、投射モードが判定される。本実施形態では、モード制御部３４によりフルスクリーン表示モードが選択されているか否か判定される（ステップ１０１）。
【００７３】
モード制御部３４による投射モードの選択は、例えばユーザによる入力に基づいて実行される。例えばユーザは、フルスクリーン表示モード及び通常表示モードのいずれかを選択する旨の入力を行う。モード制御部３４は、ユーザによる入力に基づいて、フルスクリーン表示モード及び通常表示モードのいずれかを選択する。
【００７４】
あるいは、モード制御部３４により、自動的に投射モードの選択が実行されてもよい。例えば画像解析部３１により、投射対象面１に今まで存在していなかったスクリーン２が新たに検出されたとする。新たにスクリーン２が検出された場合に、モード制御部３４により、自動的にフルスクリーン表示モードが選択される。これによりスクリーン２の設置に応じて自動的にフルスクリーン表示が可能となり、快適な視聴体験を提供することが可能となる。この結果、高品質な画像表示が実現される。
【００７５】
フルスクリーン表示モードが選択されている場合（ステップ１０１のＹＥＳ）、フルスクリーン表示モードにて、画像の投射が実行される（ステップ１０２）。フルスクリーン表示モードが選択されていない場合、すなわち通常表示モードが選択されている場合（ステップ１０１のＮＯ）、通常表示モードにて、画像の投射が実行される（ステップ１０３）。
【００７６】
図５は、各投射モードにて画像が投射される場合の処理の一例を示すフローチャートである。図５に示す処理は、フルスクリーン表示モード及び通常表示モードのいずれが選択された場合にも実行される。
【００７７】
まずスクリーン情報が取得される（ステップ２０１）。スクリーン情報は、スクリーン２に関する情報であり、スクリーン２の位置、形状、及びサイズを含む。本実施形態において、スクリーン情報は、投射対象物に関する対象物情報に相当する。なお、少なくともスクリーン２の位置を含む情報をスクリーン情報として、本技術を適用することが可能である。
【００７８】
本実施形態では、画像解析部３１により、カメラ２０により撮影された撮影画像（検出情報）に基づいて、スクリーン情報を算出することが可能である。また本実施形態では、入力受付部３２により、ユーザにより設定されたスクリーン２に関する設定情報に基づいて、スクリーン情報を算出することも可能である。算出されたスクリーン情報は、システム最適化処理部３６に出力される。
【００７９】
なお、画像解析部３１によるスクリーン情報の算出、及び入力受付部３２によるスクリーン情報の算出のいずれか一方のみが実行可能な場合もあり得る。
【００８０】
図６は、ユーザによるスクリーンに関するパラメータの設定例を説明するための模式図である。例えば画像表示システム１００を初めて使用する場合や、スクリーン２が初めて設定された場合等、未だスクリーン情報が取得されていない場合等に、スクリーンに関する設定を実行するか否かを選択するためのＧＵＩが、投射対象面１に表示される。
【００８１】
ユーザによりスクリーンに関する設定を実行する旨が入力されると、スクリーン２の形状を選択する選択肢が表示される。例えばユーザにより矩形状である旨が選択されると、図６に例示するように、投射対象面１に矩形状の設定用ガイド４が表示される。ユーザは表示された矩形状の設定用ガイド４がスクリーン２の縁部に重なるように、設定用ガイド４を変形させる。
【００８２】
例えば設定用ガイド４の上下左右の辺部に表示された矢印マーク４ａ〜４ｄを選択すると、選択された矢印マーク４ａ〜４ｄの色が変化する。その後、マウスや十字キー等を操作することで、選択された矢印マーク４ａ〜４ｄが表示されている辺部が移動させる。上下左右の辺部をそれぞれ移動させることで、設定用ガイド４をスクリーン２の縁部に重ねることが可能となる。
【００８３】
設定用ガイド４がスクリーン２の縁部に重ねられた後に「Ｅｎｔｅｒ」ボタン等が選択される。設定用ガイド４の位置、形状、サイズが設定情報として算出され、設定情報に基づいてスクリーン情報が算出される。例えば、設定用ガイド４の位置、形状、サイズが、そのままスクリーン情報として用いられてもよい。なお設定用ガイド４の位置、形状、サイズは、例えばプロジェクタ１０の位置を基準として適宜算出可能なように設定されている。
【００８４】
ユーザによるスクリーン２に関するパラメータの設定方法は限定されず、任意の方法が採用されてよい。パラメータ設定用の任意のＧＵＩが表示され、任意の操作等により、パラメータの設定が実行されてよい。またパラメータの設定のために音声ガイダンスの出力や、ユーザの音声入力等が利用されてもよい。
【００８５】
プロジェクタ１０の投射可能領域１１に関する領域情報が取得される（ステップ２０２）。本実施形態では、プロジェクタ制御部３５により、現在の投射可能領域１１を示す座標情報が、領域情報として算出される。領域情報として、例えば投射可能領域１１の四隅の頂点のＸＹＺ座標値が算出される。あるいは、投射可能領域１１の縁部の各点の座標値が算出されてもよい。その他、投射可能領域１１を特定可能な任意の情報が、領域情報として算出されてもよい。
【００８６】
なおステップ２０１及び２０２にて取得されたスクリーン情報及び領域情報が、システム制御装置３０のＲＯＭやＨＤＤ等からなる記憶部に、履歴情報として記憶されてもよい。そして、現在のスクリーン情報及び領域情報の算出する際に、適宜過去の履歴情報が参照されてもよい。これによりスクリーン情報及び領域情報の変化に基づいて、画像表示を実行することが可能である。
【００８７】
システム最適化処理部３６により、プロジェクタ１０により投射される画像のレイアウトが設定され、レンダリングが実行される（ステップ２０３）。本実施形態では、ステップ２０１及び２０２にて取得されたスクリーン情報及び領域情報に基づいて、フルスクリーン表示モード及び通常表示モードの各々に応じた、主情報及び副情報のレイアウトが設定される。
【００８８】
図７は、各投射モードにおけるレイアウト例を示す模式図である。図７Ａは、通常表示モードが選択された場合のレイアウト例である。図７Ｂは、フルスクリーン表示モードが選択された場合のレイアウト例である。
【００８９】
通常表示モードは、スクリーン２に主情報及び副情報が投射され、スクリーン２にともに表示されるモードである。図７Ａに示す例では、映像コンテンツ５１、カレンダー５２ａ及び５２ｂ、及び写真コンテンツ５３ａ及び５３ｂの複数の主情報が、スクリーン２内に表示されるようにレイアウトが設定される。また映像コンテンツ５１の字幕（「大切な話なの」）、チャンネル番号（「１０３」）、及びチャンネル名（「Ｍｏｖｉｅ」）の複数の副情報が、スクリーン２内に表示されるようにレイアウトが設定される。
【００９０】
なお複数の副情報のうち、字幕は、主情報である映像コンテンツ５１に重畳するようにレイアウトされる。一方、チャンネル番号、及びチャンネル名は、スクリーン２内の、映像コンテンツ５１の外側の領域に表示されるようにレイアウトされる。図７Ａに示すように、通常表示モードでは、複数のコンテンツを同時に楽しむことが可能である。
【００９１】
フルスクリーン表示モードでは、スクリーン２に主情報が投射され、スクリーン２の外側の領域４０に副情報が投射される投射モードである。スクリーン２の外側の領域４０は、投射可能領域１１内において、スクリーン２の外側に位置する領域となる。
【００９２】
図７Ｂに示す例では、主情報である映像コンテンツ５１がスクリーン２内に表示されるように、レイアウトが設定される。なお映像コンテンツ５１がスクリーン２に対応した最大のサイズで表示されるように、レイアウトが設定される。
【００９３】
なお、主情報を最大のサイズで表示するとは、図７Ｂに示すようにスクリーン２の全面を使って主情報を表示することを含む。これに限定されず、主情報を最大のサイズで表示するとは、図８に示すように、所定のアスペクト比を有する主情報を、アスペクト比を維持した状態で最大のサイズで表示することを含む。従って図８に示すように、主情報を最大のサイズで表示した場合でも、スクリーン２に主情報が表示されない領域であるブランク領域４１が発生する場合もあり得る。
【００９４】
図７Ｂ及び図８に示す例では、映像コンテンツ５１の字幕（「大切な話なの」）、チャンネル番号（「１０３」）、及びチャンネル名（「Ｍｏｖｉｅ」）の複数の副情報が、スクリーン２の外側の領域４０に表示されるように、レイアウトが設定される。
【００９５】
複数の副情報のうち、字幕は、スクリーン２の下側の領域に表示されるようにレイアウトされる。一方、チャンネル番号、及びチャンネル名は、スクリーン２の上側の領域に表示されるように、レイアウトされる。また複数の副情報は、スクリーン２から所定距離以内の位置に表示されるように、レイアウトが設定される。
【００９６】
所定距離は、例えばスクリーン２の中心、またはスクリーン２の外辺を基準とした固定値により設定される。あるいはシステム最適化処理部３６により、スクリーン２のサイズに応じて所定距離が適宜設定されてもよい。その他、所定距離を設定する方法は限定されない。典型的には、スクリーン２の近傍に副情報が表示されるように、所定距離が設定される。これにより、フルスクリーン表示モードではユーザが高画質で視認を行いたい映像コンテンツが投射対象面１より高画質で投射可能なスクリーン２の投射領域に大きく表示されかつ、大画面表示から所定距離内に副情報が表示される。すなわち高画質な大画面表示の所定距離以内の直感的に視認しやすい位置に副情報が表示され、ユーザにとって快適な映像体験を提供することができる。
【００９７】
例えばスクリーン２に表示される主情報のサイズ、及び解像度に応じて、投射可能領域１１のサイズが規定される。サイズが規定された投射可能領域１１において、スクリーン２の外側の領域４０に副情報が表示されるように、副情報の位置、形状、サイズ、及び解像度等が適宜制御される。副情報の位置、形状、及びサイズの少なくとも１つが制御可能な構成を採用して、本技術を実施することも可能である。その他、副情報のレイアウト方法は限定されず、任意の方法が採用されてよい。
【００９８】
図９は、フルスクリーン表示モードが選択された場合のレイアウトの他の例を示す模式図である。図９Ａ〜Ｄに示す例では、スクリーン２の全面を使って映像コンテンツ５１が最大のサイズで表示されように、レイアウトが設定される。
【００９９】
図９Ａに示す例では、ボリュームを調整するためのＧＵＩであるボリュームバーが、スクリーン２の下側の近傍（スクリーン２から所定距離以内の位置）に表示されるように、レイアウトが設定される。図９Ｂに示す例では、映像コンテンツ５１の字幕（「聴いてください」）が、スクリーン２の左側の近傍に表示されるように、レイアウトが設定される。
【０１００】
図９Ｃに示す例では、映像コンテンツ５１の字幕（「聴いてください」）が、スクリーン２の右側の近傍に表示されるように、レイアウトが設定される。またボリュームを調整するためのボリュームバーが、スクリーン２の左側の近傍に表示されるように、レイアウトが設定される。
【０１０１】
図９Ｄに示す例では、映像コンテンツ５１のチャンネル番号（「１０５」）、及びチャンネル名（「Ａｉｒｐｌａｎｅ」）が、スクリーン２の上側の近傍に表示されるように、レイアウトが設定される。またボリュームを調整するためのボリュームバーが、スクリーン２の左側の近傍に表示されるように、レイアウトが設定される。
【０１０２】
図９Ａ〜Ｄに例示するように、副情報の位置は、投射可能領域１１内であって、スクリーン２の外側の領域４０おいて、任意に設定されてよい。
【０１０３】
システム最適化処理部３６は、画像情報取得部３３により取得された画像情報に基づいて、設定したレイアウトの画像の画像信号（画像情報）を生成する。画像信号の生成方法は限定されず、任意の画像処理技術が用いられてよい。
【０１０４】
プロジェクタ制御部３５により、設定されたレイアウトで主情報及び副情報が表示されるように、プロジェクタ１０が制御される（ステップ２０４）。プロジェクタ制御部３５は、システム最適化処理部３６により生成された画像信号をプロジェクタ１０に出力する。そしてプロジェクタ１０により、スクリーン２に主情報を投射させ、スクリーン２の外側の領域４０に副情報を投射させる。これにより図７Ｂや図９に例示したレイアウトで、主情報及び副情報が表示される。
【０１０５】
すなわち本実施形態では、ステップ２０１及び２０２にて取得されたスクリーン情報及び領域情報に基づいて、主情報及び副情報の投射が制御される。またフルスクリーン表示モードが選択された場合に、スクリーン２に主情報が最大のサイズで投射される。またフルスクリーン表示モードが選択された場合に、スクリーン２の近傍に、副情報が投射される。また、フルスクリーン表示モードが選択された場合に、投射される副情報の位置、形状、及びサイズの少なくとも１つが制御される。
【０１０６】
図１０は、スクリーン２が移動した場合の主情報及び副情報の投射制御の一例を説明するための模式図である。例えばユーザの指示等により、投射対象面１内においてスクリーン２が移動される場合もあり得る。本実施形態では、画像解析部３１により、スクリーン情報として、プロジェクタ１０に対するスクリーン２の相対的な位置の変化を示す位置変化の情報を検出することが可能である。
【０１０７】
システム最適化処理部３６は、検出されたスクリーン２の位置変化の情報に基づいて、主情報及び副情報の投射を制御する。例えばフルスクリーン表示モードが選択されている場合には、位置変化の情報に基づいて、スクリーン２への主情報の投射、及びスクリーン２の外側の領域４０への副情報の投射がそれぞれ維持されるように、主情報及び副情報の投射が制御される。
【０１０８】
具体的には、システム最適化処理部３６により、スクリーン２の位置変化の情報に応じて、主情報及び副情報のレイアウトが適宜設定される。そしてプロジェクタ制御部３５によりプロジェクタ１０を制御することで、スクリーン２の位置変化に応じて設定されたレイアウトにて、主情報及び副情報が投射されて表示される。
【０１０９】
すなわち図５に例示したフローが所定の周期で繰り返して実行される。これによりスクリーン２の位置の変化に応じた主情報及び副情報の投射を適正に実行することが可能である。例えばスクリーン２の移動に応じて、リアルタイムに副情報がスクリーン２を避けるように、位置、形状、及びサイズを動的に変化しながら表示されるような投射制御を実行することが可能である。なお所定の周期の具体的な長さは限定されず、任意に設定されてよい。例えば映像コンテンツ５１のフレームレート等に基づいて、周期が設定されてもよい。
【０１１０】
図１０Ａに示す例では、映像コンテンツ５１が全面に表示されているスクリーン２の左側に位置する外側の領域４０に、映像コンテンツ５１の字幕（「ただ今太平洋上空を通過中でございます」）が表示される。この状態からスクリーン２が左側に向かって移動したとする。
【０１１１】
図１０Ｂに示すように、スクリーン２の左側への移動に応じて、字幕のサイズ（第２の情報のサイズ）が小さくなるように変更される。字幕のサイズは、スクリーン２の左側に位置する外側の領域４０のサイズ等に応じて適宜設定される。
【０１１２】
さらに、スクリーン２が左側へ移動したとする。図１０Ｃに示すように、字幕の表示位置（第２の情報の位置）が、スクリーン２の右側に位置する外側の領域４０に変更される。字幕のサイズは、スクリーン２の右側に位置する外側の領域４０に字幕が適正に表示可能なように設定される。
【０１１３】
さらに、スクリーン２が左側へ移動したとする。図１０Ｄに示すように、スクリーン２の右側に位置する外側の領域４０に表示されている字幕のサイズが大きくなるように変更される。図１０Ａ〜Ｄに示すように、主情報及び副情報の投射を制御することで、スクリーン２の位置変化に応じた適正な画像の表示が実現される。これにより快適な視聴体験を提供することが可能となり、高品質な画像表示が実現される。
【０１１４】
図１１は、スクリーン２の位置変化に応じた主情報及び副情報の投射制御の他の例を説明するための模式図である。図１１Ａ〜Ｃに示す例では、映像コンテンツ５１が全面に表示されているスクリーン２が右側へ移動している。
【０１１５】
スクリーン２の右側への移動に応じて、ボリュームを調整するためのボリュームバーが、スクリーン２の下側に位置する外側の領域４０にて右側に移動するように表示される。すなわち図１１Ａ〜Ｃに示す例では、スクリーン２の位置変化に追従して、スクリーン２との位置関係が維持されるように、副情報の位置が移動される。これにより、スクリーン２の近傍で副情報を表示し続けることが可能となり、快適な視聴体験を提供することが可能となる。
【０１１６】
なお通常投射モードが選択されている場合にも、スクリーン２の位置変化の情報に基づいて、スクリーン２への主情報及び副情報の投射がそれぞれ維持されるように、主情報及び副情報の投射を適正に制御することが可能である。
【０１１７】
スクリーン２が移動する場合にのみならず、プロジェクタ１０が移動する場合、及びスクリーン２とプロジェクタとがともに移動する場合にも、各投射モードにおいて、主情報及び副情報の投射を適正に制御することが可能である。
【０１１８】
例えば画像解析部３１により、プロジェクタ１０の位置情報が取得可能である場合には、プロジェクタ１０の移動に応じた、プロジェクタ１０に対するスクリーン２の相対的な位置変化の情報を検出することが可能である。あるいは、プロジェクタ１０自身により、プロジェクタ１０の位置情報が検出可能であってもよい。この場合でも、プロジェクタ１０の移動に応じた、プロジェクタ１０に対するスクリーン２の相対的な位置変化の情報を検出することが可能である。
【０１１９】
検出された位置変化の情報に基づいて、例えば図１０や図１１に例示したような、フルスクリーン表示モードが適正に維持されるような投射制御を実行することが可能である。同様に、通常表示モードが維持されるような投射制御を実行することが可能である。
【０１２０】
以上、本実施形態に係る画像表示システム１００では、スクリーン２に互いに異なる情報として分類される主情報及び副情報を投射する通常表示モードと、主情報はスクリーン２に投射し、副情報はスクリーン２の外側の領域４０に投射するフルスクリーン表示モードとを切替えることが可能となる。これにより高品質の画像表示を実現することが可能となる。
【０１２１】
例えば、視聴コンテンツを投射する際に、字幕や音量表示などの情報を視聴コンテンツに重畳させて表示することで、視聴コンテンツの視認性が下がってしまうという問題があった。また専用のスクリーンを投射対象面に配置した場合に、視聴コンテンツと字幕等の情報の位置関係が固定されている場合には、字幕等の情報がスクリーンと外部の領域との境界を跨いで表示されたりすることも多く、視認性の低下の原因となっていた。
【０１２２】
本実施形態に係る画像表示システム１００では、スクリーン２の位置、サイズ、形状を把握することが可能であり、主情報をスクリーン２に表示し、副情報をスクリーン２の外側の領域４０に表示する、フルスクリーン表示を適正に実行することが可能である。
【０１２３】
これにより、字幕等の高画質を強く要求されない副情報よりも、高画質を要求されるコンテンツ情報等の主情報を、優先的に専用のスクリーン２に投射するとが可能となる。この結果、非常に高い画質にて主情報を最大限の大きさで視聴することが可能となる。またコンテンツへの没入感を向上させることも可能となり、快適な視聴体験を提供することが可能となる。
【０１２４】
また字幕等の副情報により主情報の表示が邪魔されることがない、また副情報がスクリーン２と外側の領域４０との境界に表示されてしまうことがないので、主情報及び副情報の両方にとって非常に高い視認性が発揮される。
【０１２５】
＜第２の実施形態＞
本技術の第２の実施形態に係る画像表示システムについて説明する。これ以降の説明では、上記の実施形態で説明した画像表示システム１００における構成及び作用と同様な部分については、その説明を省略又は簡略化する。
【０１２６】
図１２は、フルスクリーン表示モードが選択された場合の主情報及び副情報の投射制御の一例を示すフローチャートである。図１３は、図１２に示す投射制御例を説明するための模式図である。
【０１２７】
図１２に示すステップ３０１〜３０３は、第１の実施形態で説明した図５に示すステップ２０１〜２０３と略同様である。
【０１２８】
本実施形態では、ステップ３０３でレイアウトが設定された後に、スクリーン２０２の主情報が表示されない領域であるブランク領域２４１に、副情報を投射可能であるか否か判定される（ステップ３０４）。ブランク領域２４１に副情報を表示可能ではない場合は（ステップ３０４のＮＯ）、ステップ３０３にて設定されたレイアウトに基づいて、プロジェクタが制御される（ステップ３０５）。
【０１２９】
ブランク領域２４１に副情報を表示可能な場合は（ステップ３０４のＹＥＳ）、レイアウトが変更される（ステップ３０６）。具体的には、ブランク領域２４１に副情報が表示可能なように、レイアウトが変更される。そして変更されたレイアウトに基づいて、プロジェクタが制御される（ステップ３０６）。これによりスクリーン２０２のブランク領域２４１に副情報が投射される。
【０１３０】
例えば図１３に例示するように、アスペクト比を維持した状態で最大のサイズとなるように、スクリーン２０２に映像コンテンツ２５１が表示される。スクリーン２０２の映像コンテンツ２５１の左右には、映像コンテンツ２５１が投射されない領域であるブランク領域２４１が発生している。
【０１３１】
図１３に示す例では、左側のブランク領域２４１にチャンネル番号（「１０３」）、及びチャンネル名（「Ｍｏｖｉｅ」）が表示されるように、レイアウトが変更される。また右側のブランク領域２４１に、映像コンテンツ２５１の字幕（「大切な話なの」）が表示されるように、レイアウトが変更される。このように、フルスクリーン表示モードが選択された場合に、スクリーン２０２に十分なブランク領域２４１が存在する場合には、ブランク領域２４１に副情報が投射されてもよい。これにより高画質で副情報を表示させることが可能となり、高品質な画像表示を実現することが可能となる。
【０１３２】
なお、スクリーン２０２の外側の領域２４０に副情報を表示させるか、スクリーン２０２のブランク領域２４１に副情報を表示させるかを選択であってもよい。例えばユーザの入力等に応じて、副情報の表示位置が適宜設定される。
【０１３３】
＜第３の実施形態＞
図１４は、本技術の第３の実施形態に係る、フルスクリーン表示モードが選択された場合の主情報及び副情報の投射制御の一例を示すフローチャートである。図１５は、図１４に示す投射制御例を説明するための模式図である。
【０１３４】
図１４に示すステップ４０１及び４０２は、第１の実施形態で説明した図５に示すステップ２０１及び２０２と略同様である。
【０１３５】
本実施形態では、投射画像のレイアウトを設定する際に、スクリーン３０２の外側の領域３４０に副情報を投射可能であるか否かが判定される。すなわちフルスクリーン表示が可能であるかが判定される（ステップ４０３）。この判定は、例えば投射可能領域３１１内におけるスクリーン３０２の外側の領域３４０のサイズ等に基づいて実行される。
【０１３６】
外側の領域３４０がない場合、あるいは十分なサイズを確保できない場合等には、スクリーン３０２の外側の領域３４０に副情報を投射可能ではないと判定される。また、複数の副情報が投射される場合において、全ての副情報を外側の領域３４０に表示すると非常に見にくくなる場合等も、外側の領域３４０に副情報を投射可能ではないと判定される。その他、判定の基準は、任意に設定されてよい。
【０１３７】
スクリーン３０２に副情報を投射可能な場合は（ステップ４０３のＹＥＳ）、フルスクリーン表示を実現するためのレイアウトが設定される（ステップ４０４）。設定されたフルスクリーン表示のレイアウトに基づいて、プロジェクタが制御される（ステップ４０６）。
【０１３８】
スクリーン３０２に副情報を投射可能ではない場合には（ステップ４０３のＮＯ）、副情報の投射位置がスクリーン３０２内に設定される（ステップ４０７）。すなわち副情報がスクリーン３０２内に表示されるように、レイアウトが設定される。
【０１３９】
なお、副情報の全てがスクリーン３０２内に表示されるレイアウトが設定される場合に限定されない。例えば複数の副情報が投射される場合において、一部の副情報はスクリーン３０２の外側の領域３４０に表示され、他の一部の副情報はスクリーン３０２内に表示される。このようなレイアウトが設定されてもよい。
【０１４０】
レイアウトが設定されると、設定されたレイアウトに基づいて、プロジェクタが制御される（ステップ４０６）。
【０１４１】
図１５に示す例では、ステップ４０７にて、スクリーン３０２の上側の近傍にチャンネル番号（「１０３」）、及びチャンネル名（「Ｍｏｖｉｅ」）が表示されるように、レイアウトが設定される。一方、映像コンテンツ３５１の字幕（「大切な話なの」）については、スクリーン３０２内に映像コンテンツ３５１と重畳して表示されるように、レイアウトが設定される。
【０１４２】
このようにフルスクリーン表示モードが選択された場合に、フルスクリーン表示が可能であるか否かが判定されてもよい。そして、フルスクリーン表示モードが実現できない場合には、副情報の投射位置が適宜設定される。これにより高品質な画像表示を実現することが可能となる。
【０１４３】
＜その他の実施形態＞
本技術は、以上説明した実施形態に限定されず、他の種々の実施形態を実現することができる。
【０１４４】
図１６は、スクリーンの位置、形状、及びサイズの検出の具体例を説明するための模式図である。上記では、カメラによりスクリーンが撮影され、その撮影画像に基づいて画像解析技術等を用いることで、スクリーン情報を算出する旨を説明した。ここでは、スクリーンの位置等を検出するための具体例を説明する。
【０１４５】
なお、スクリーンの位置等を検出する検出部として、カメラに代えて、あるいはカメラに加えて、赤外線センサや測距センサ等の他のセンサが用いられてもよい。また検出部により検出されるスクリーンに関する検出情報も、撮影画像に限定されず、種々のセンサの検出結果が用いられてよい。
【０１４６】
例えば赤外線センサ等を用いて、投射対象面に対する凹凸面をセンシングすることで、スクリーンの位置や形状等を検出することが可能である。例えば凹凸面の位置、形状、及びサイズが、スクリーンの位置、形状、サイズとして検出される。
【０１４７】
図１６Ａに示すように、投射対象面４０１とスクリーン４０２の色の違いをセンシングすることで、スクリーン４０２の位置、形状、及びサイズを検出することも可能である。また図１６Ｂに示すように、スクリーン４０２の周囲のフレーム４０２ａをセンシングすることで、スクリーン４０２の位置、形状、及びサイズを検出することも可能である。
【０１４８】
またプロジェクタから投射対象面４０１に対して光を投射する。その際にできるスクリーン４０２の影４０２ｂをセンシングすることで、スクリーン４０２の位置、形状、及びサイズを検出することも可能である。当然のことながら、上記で説明した複数のセンシングを組み合わせることも可能である。
【０１４９】
図１７は、スクリーンの他の構成例を示す模式図である。投射対象面に配置されるスクリーンの数や形状は限定されない。例えば図１７Ａに示す例では、長方形状のスクリーン５０２ａと、円形状のスクリーン５０２ｂとが配置される。
【０１５０】
スクリーン５０２ａには、主情報として映像コンテンツ５５１ａが表示され、スクリーン５０２ａの外側の領域５４０ａには、副情報として、映像コンテンツ５５１ａの字幕（「ただ今太平洋上空を通過中でございます」）が表示される。
【０１５１】
またスクリーン５０２ｂには、主情報として時計の画像５５１ｂが表示される。スクリーン５０２ｂの外側の領域５４０ｂには、副情報として、月日が表示される。なおスクリーン５０２ｂの外側の領域５４０ｂは、スクリーン５０２ａの外側の領域５４０ａともいえる。
【０１５２】
図１７Ａに示すように、スクリーン５０２ｂの形状に合わせた画像（時計の画像）を表示させることで、実際の時計が配置されているような仮想的な環境を提供することが可能となる。スクリーンの形状や表示される情報を適宜設定することで、部屋内に所望のインテリアを配置しているかのような仮想的な環境を提供することも可能である。
【０１５３】
図１７Ｂに示す例では、楕円形状のスクリーン５０２ｃと、三角形状のスクリーン５０２ｄとが配置される。スクリーン５０２ｃには、主情報として写真コンテンツ５５１ｃが表示され、スクリーン５０２ｃの外側の領域５４０ｃには、副情報として、写真コンテンツ５５１ｃの説明文（「ライブ前の楽屋にて」）が表示される。
【０１５４】
またスクリーン５０２ｄには、主情報として写真コンテンツ５５１ｄが表示され、スクリーン５０２ｄの外側の領域５４０ｄ（外側の領域５４０ｃともいえる）には、副情報として、写真コンテンツ５５１ｄの説明文（「シロ（２０１８年春）」）が表示される。
【０１５５】
ロール式のスクリーンが用いられてもよい。例えば引き出されたスクリーンのサイズ等が適宜検出される。そして引き出されたスクリーンに対して、通常表示モード及びフルスクリーン表示モードが適宜切り替えて実行することが可能である。
【０１５６】
投射対象物として、スクリーン以外の物が用いられてもよい。例えば絵画や家具等の物体の所定の領域や、表面等が、投射対象物として用いられてもよい。
【０１５７】
フルスクリーン表示モードが選択された場合に、スクリーンに主情報が最大のサイズで表示されない場合もあり得る。例えばユーザの指示、スクリーンの形状、コンテンツの種別や内容等に応じて、最大のサイズとは異なるサイズで、主情報が表示されてもよい。この場合、例えばスクリーンにブランク領域がある場合には、ブランク領域に副情報が表示されてもよい。
【０１５８】
フルスクリーン表示モードが選択された場合に、スクリーンに投射される主情報の位置、形状、及びサイズの少なくとも１つが変化に応じて、副情報の投射が制御されてもよい。例えば図７Ｂに例示するように、スクリーン２の全面に映像コンテンツ５１が表示されている状態から、図８に例示すように映像コンテンツ５１のアスペクト比が変化したとする。この場合、スクリーン２の外側の領域４０に表示されている副情報の位置、形状、サイズが適宜変更されてもよい。あるいは、スクリーン２のブランク領域４１に副情報が表示されてもよい。
【０１５９】
上記で説明したシステム制御装置とプロジェクタとが一体的に構成されてもよい。すなわち第１の情報及び第２の情報を投射するプロジェクタにシステム制御装置の機能が搭載されてもよい。この場合、プロジェクタが、本技術に係る情報処理装置の一実施形態として機能する。
【０１６０】
本技術に係る情報処理方法、及びプログラムは、単体のコンピュータにより構成されたコンピュータシステムのみならず、複数のコンピュータが連動して動作するコンピュータシステムにおいても実行可能である。なお本開示において、システムとは、複数の構成要素（装置、モジュール（部品）等）の集合を意味し、すべての構成要素が同一筐体中にあるか否かは問わない。したがって、別個の筐体に収納され、ネットワークを介して接続されている複数の装置、及び、１つの筐体の中に複数のモジュールが収納されている１つの装置は、いずれもシステムである。
【０１６１】
コンピュータシステムによる本技術に係る情報処理方法、及びプログラムの実行は、例えば第１の情報及び第２の情報の投射の制御、第１の情報及び第２の投射モードの切替、対象物情報の取得、対象物の有無の検出等が、単体のコンピュータにより実行される場合、及び各処理が異なるコンピュータにより実行される場合の両方を含む。また所定のコンピュータによる各処理の実行は、当該処理の一部または全部を他のコンピュータに実行させその結果を取得することを含む。
【０１６２】
すなわち本技術に係る情報処理方法、及びプログラムは、１つの機能をネットワークを介して複数の装置で分担、共同して処理するクラウドコンピューティングの構成にも適用することが可能である。
【０１６３】
各図面を参照して説明した画像表示システム、システム制御装置、第１の情報及び第２の情報のレイアウト、各投射モードにおける投射制御のフロー等はあくまで一実施形態であり、本技術の趣旨を逸脱しない範囲で、任意に変形可能である。すなわち本技術を実施するための他の任意の構成やアルゴリズム等が採用されてよい。
【０１６４】
本開示において、「略板形状」や「略同様」等の「略」を用いた表現は、「完全な板形状」や「完全に同様」等を基準とした所定の範囲（例えば±１０％の範囲）を意味する概念である。これらを単に「板形状」や「同様」等の「略」を付けずに表現することも可能である。
【０１６５】
以上説明した本技術に係る特徴部分のうち、少なくとも２つの特徴部分を組み合わせることも可能である。すなわち各実施形態で説明した種々の特徴部分は、各実施形態の区別なく、任意に組み合わされてもよい。また上記で記載した種々の効果は、あくまで例示であって限定されるものではなく、また他の効果が発揮されてもよい。
【０１６６】
なお、本技術は以下のような構成も採ることができる。
（１）第１の情報、及び前記第１の情報とは異なる種類の情報として分類される第２の情報の投射を制御する投射制御部と、
投射対象物に前記第１の情報及び前記第２の情報が投射される第１の投射モードと、前記投射対象物に前記第１の情報が投射され、前記投射対象物の外側の領域に前記第２の情報が投射される第２の投射モードとを切替可能なモード制御部と
を具備する情報処理装置。
（２）（１）に記載の情報処理装置であって、
前記投射制御部は、前記第２の投射モードが選択された場合に、前記投射対象物に前記第１の情報を前記投射対象物に対応した最大のサイズで投射させる
情報処理装置。
（３）（２）に記載の情報処理装置であって、
前記投射制御部は、前記第２の投射モードが選択された場合に、前記投射対象物から所定距離以内の位置に前記第２の情報を投射させる
情報処理装置。
（４）（３）に記載の情報処理装置であって、さらに、
前記投射対象物の位置を含む対象物情報を取得する取得部を具備し、
前記投射制御部は、前記取得された対象物情報に基づいて、前記第１の情報及び前記第２の情報の投射を制御する
情報処理装置。
（５）（４）に記載の情報処理装置であって、
前記対象物情報は、前記投射対象物の形状及びサイズを含む
情報処理装置。
（６）（４）又は（５）に記載の情報処理装置であって、
前記取得部は、検出装置により検出された前記投射対象物に関する検出情報に基づいて、前記対象物情報を取得する
情報処理装置。
（７）（４）から（６）のうちいずれか１つに記載の情報処理装置であって、
前記取得部は、ユーザにより設定された前記投射対象物に関する設定情報に基づいて、前記対象物情報を取得する
情報処理装置。
（８）（４）から（７）のうちいずれか１つに記載の情報処理装置であって、
前記取得部は、前記投射対象物の投射領域を含む投射可能領域に関する領域情報を取得し、
前記投射制御部は、前記対象物情報及び前記領域情報に基づいて、前記第１の情報及び前記第２の情報の投射を制御する
情報処理装置。
（９）（８）に記載の情報処理装置であって、
前記投射対象物は、投射対象面に配置されたスクリーンであり、
前記スクリーンは、投射画像を前記投射対象面に投射した場合よりも、投射画像を前記スクリーンに投射した場合の方が、投射画像をより高い画質で表示することが可能な材質により構成されており、
前記投射制御部は、前記第２の投射モードが選択された場合に、前記対象物情報及び前記領域情報に基づいて、前記第1の情報を前記スクリーンに対応した最大のサイズで前記スクリーンに投射する制御及び前記第２の情報を前記投射可能領域内であって前記スクリーンの外側の領域に投射する制御を行う
情報処理装置。
（１０）（１）から（９）のうちいずれか１つに記載の情報処理装置であって、
前記第１の情報は、コンテンツ情報を含み、
前記第２の情報は、前記コンテンツ情報に関連する付加情報、メニュー情報、通知情報、及び広告情報の少なくとも１つを含む
情報処理装置。
（１１）（１）から（１０）のうちいずれか１つに記載の情報処理装置であって、
前記投射制御部は、前記第２の投射モードが選択された場合に、投射される前記第２の情報の位置、形状、及びサイズの少なくとも１つを制御可能である
情報処理装置。
（１２）（４）から（１１）のうちいずれか１つに記載の情報処理装置であって、
前記対象物情報は、前記第１の情報及び前記第２の情報を投射する画像投射装置に対する前記投射対象物の相対的な位置の変化を示す位置変化の情報を含み、
前記表示制御部は、前記位置変化の情報に基づいて、前記第１の情報及び前記第２の情報の投射を制御する
情報処理装置。
（１３）（１２）に記載の情報処理装置であって、
前記表示制御部は、前記第２の投射モードが選択された場合に、前記位置変化の情報に基づいて、前記投射対象物への前記第１の情報の投射、及び前記外側の領域への前記第２の情報の投射がそれぞれ維持されるように、前記第１の情報及び前記第２の情報の投射を制御する
情報処理装置。
（１４）（１）から（１３）のうちいずれか１つに記載の情報処理装置であって、さらに、
前記投射対象物の有無を検出する検出部を具備し、
前記モード制御部は、前記投射対象物が検出された場合に、前記第２の投射モードを選択する
情報処理装置。
（１５）（１）から（１４）のうちいずれか１つに記載の情報処理装置であって、
前記投射制御部は、前記第２の投射モードが選択された場合に、前記投射対象物の前記第１の情報が投射されない領域であるブランク領域に、前記第２の情報を投射可能であるか否かを判定し、前記ブランク領域に前記第２の情報を投射可能な場合は前記ブランク領域に前記第２の情報を投射させる
情報処理装置。
（１６）（１）から（１５）のうちいずれか１つに記載の情報処理装置であって、
前記投射制御部は、前記第２の投射モードが選択された場合に、前記投射対象物の外側の領域に前記第２の情報を投射可能であるか否かを判定し、前記外側の領域に前記第２の情報を投射可能ではない場合には、前記投射対象物に前記第２の情報を投射させる
情報処理装置。
（１７）（１）から（１６）のうちいずれか１つに記載の情報処理装置であって、
前記投射制御部は、前記第２の投射モードが選択された場合に、投射される前記第１の情報の位置、形状、及びサイズの少なくとも１つの変化に応じて、前記第２の情報の投射を制御する
情報処理装置。
（１８）（１）から（１７）のうちいずれか１つに記載の情報処理装置であって、
前記投射制御部は、画像投射装置による前記第１の情報及び前記第２の情報の投射を制御する
情報処理装置。
（１９）第１の情報、及び前記第１の情報とは異なる種類の情報として分類される第２の情報の投射を制御し、
投射対象物に前記第１の情報及び前記第２の情報が投射される第１の投射モードと、前記投射対象物に前記第１の情報が投射され、前記投射対象物の外側の領域に前記第２の情報が投射される第２の投射モードとを切替える
ことをコンピュータシステムが実行する情報処理方法。
（２０）第１の情報、及び前記第１の情報とは異なる種類の情報として分類される第２の情報の投射を制御するステップと、
投射対象物に前記第１の情報及び前記第２の情報が投射される第１の投射モードと、前記投射対象物に前記第１の情報が投射され、前記投射対象物の外側の領域に前記第２の情報が投射される第２の投射モードとを切替えるステップと
をコンピュータシステムに実行させるプログラム。
【符号の説明】
【０１６７】
１、４０１…投射対象面
２、２０２、３０２、４０２、５０２ａ〜ｄ…スクリーン
１０（１０ａ、１０ｂ）…プロジェクタ
１１、３１１…投射可能領域
２０…カメラ
３０…システム制御装置
３１…画像解析部
３２…入力受付部
３３…画像情報取得部
３４…モード制御部
３５…プロジェクタ制御部
３６…システム最適化処理部
４０、２４０、３４０、５４０ａ〜ｄ…外側の領域
４１、２４１…ブランク領域
５１、２５１、３５１、５５１ａ…映像コンテンツ
５２ａ、５２ｂ…カレンダー
５３ａ、５３、５５１ｃ、５５１ｄ…写真コンテンツ
１００…画像表示システム
５５１ｂ…時計の画像
【図１】
2019198381.tif 000003
【図２】
2019198381.tif 000004
【図３】
2019198381.tif 000005
【図４】
2019198381.tif 000006
【図５】
2019198381.tif 000007
【図６】
2019198381.tif 000008
【図７】
2019198381.tif 000009
【図８】
2019198381.tif 000010
【図９】
2019198381.tif 000011
【図１０】
2019198381.tif 000012
【図１１】
2019198381.tif 000013
【図１２】
2019198381.tif 000014
【図１３】
2019198381.tif 000015
【図１４】
2019198381.tif 000016
【図１５】
2019198381.tif 000017
【図１６】
2019198381.tif 000018
【図１７】
2019198381.tif 000019
【国際調査報告】
2019198381.tif 000020
2019198381.tif 000021
2019198381.tif 000022
2019198381.tif 000023