(57)【要約】【課題】  本発明は、映像を投影しながらコメントを書き込む場合に、コメント等を書き込む領域が狭い場合には、コメント等を書込みづらい。【解決手段】  上記の課題を解決するため、本発明の投影型表示装置は、映像領域と非映像領域とを含む投影画像を投影面に投影する投影手段と、前記投影面に描画を行う場合に、前記投影映像内の映像領域と非映像領域とのレイアウトを変更する制御手段とを有することを特徴とする。【選択図】  図５
2018054912.tif 000002
【特許請求の範囲】
【請求項１】
映像領域と非映像領域とを含む投影画像を投影面に投影する投影手段と、
前記投影面に描画を行う場合に、前記投影映像における映像領域と非映像領域とのレイアウトを変更する制御手段とを有することを特徴とする投影型表示装置。
【請求項２】
前記制御手段は、レイアウト変更に加えてレンズシフトを行うことを特徴とする請求項１に記載の投影型表示装置。
【請求項３】
前記制御手段は、映像領域の縮小および非映像領域の拡大を行うことを特徴とする請求項１または２に記載の投影型表示装置。
【請求項４】
前記制御手段は、投影映像の外周部分に画像強調処理を行うことを特徴とする請求項１〜３のいずれか１項に記載の投影型表示装置。
【請求項５】
さらに、ユーザにより投影面へ描画が行われる場合であると判定する判定手段を有し、
前記制御手段は前記判定手段が、ユーザにより投影面へ描画が行われると判定したことに応じてレイアウトを変更することを特徴とする請求項１〜４のいずれか１項に記載の投影型表示装置。
【請求項６】
前記判定手段は、投影型表示装置を所定のモードに設定したことにより、ユーザにより投影面へ描画が行われると判定することを特徴とする請求項５に記載の投影型表示装置。
【請求項７】
前記判定手段は、描画を行うためのツールの操作がなされたことに基づき、ユーザにより投影面へ描画が行われると判定することを特徴とする請求項５に記載の投影型表示装置。
【請求項８】
さらに撮像手段を有し、
前記判定手段は、前記撮像手段が取得した映像の解析に基づき、ユーザにより投影面へ描画が行われると判定することを特徴とする請求項５に記載の投影型表示装置。
【請求項９】
投影手段を有する投影型表示装置の制御方法であって、
前記投影手段が映像領域と非映像領域とを含む投影画像を投影面に投影する投影工程と、
前記投影面に描画を行う場合に、前記投影映像における映像領域と非映像領域とのレイアウトを変更する制御工程とを有することを特徴とする投影型表示装置の制御方法。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、投影型表示装置及びその制御方法に関する。
【背景技術】
【０００２】
近年、会議等において、部屋を暗くした状態で、ホワイトボード等に、投射型表示装置としてのプロジェクタから説明用の資料の画像を投影し、ホワイトボード上の投影映像の脇にペン等でコメント等を書き込みながら会議等を進行することがよくある。
【０００３】
このような場合に、コメント等を書き込みやすくするしたり、書き込んだコメント等の視認性を向上させたりできると好ましい。例えば特許文献１では、書き込んだコメント等と投影映像内のオブジェクトが重ならないように、当該投影映像内のオプジェクトの表示位置を変更することにより、コメント等の視認性を向上させている。
【先行技術文献】
【特許文献】
【０００４】
【特許文献１】特開２０１３−１４８８６８号公報
【発明の概要】
【発明が解決しようとする課題】
【０００５】
しかしながら、特許文献１に開示された従来技術を用いてコメント等を書き込む場合、コメント等を書き込む領域が狭い場合には、コメント等を書込み難いという課題があった。また、オブジェクトが多く有り、投影映像内でオブジェクトの位置を変更する十分なスペースが無いと、やはりコメント等を書き込む領域を作ることが出来ない。
【０００６】
そこで、本発明の目的は、映像を投影しながらコメントを書き込む場合に、非映像領域と映像領域のレイアウトを変更することにより、投影面にコメント等を書き込みやすくした投影型表示装置を提供することである。
【課題を解決するための手段】
【０００７】
このような目的を達成するために、本発明の投影型表示装置は、映像領域と非映像領域とを含む投影画像を投影面に投影する投影手段と、前記投影面に描画を行う場合に、前記投影映像内の映像領域と非映像領域とのレイアウトを変更する制御手段とを有することを特徴とすることを特徴とする。
【発明の効果】
【０００８】
本発明によれば、映像を投影中にコメント等を投影面に描画する場合に、非映像領域と映像領域のレイアウトを変更することにより、コメント等を描画しやすくした投影型表示装置を提供することができる。
【図面の簡単な説明】
【０００９】
【図１】本発明における実施例を模式的に示す図である。
【図２】本発明における実施例の液晶プロジェクタ１００の全体構成を示す図である。
【図３】本発明における実施例の液晶プロジェクタ１００の基本動作の制御を説明するためのフロー図である。
【図４】実施例１の特徴的な構成を説明するためのフロー図である。
【図５】実施例１における各ユースケースを示す図である。
【図６】実施例２の特徴的な構成を説明するためのフロー図である。
【図７】実施例２における各ユースケースを示す図である。
【図８】実施例３の特徴的な構成を説明するためのフロー図である。
【図９】実施例３における各ユースケースを示す図である。
【発明を実施するための形態】
【００１０】
以下、図面を参照して本発明の実施例を詳細に説明するが、この発明は以下の実施の形態に限定さるものではない。
【実施例１】
【００１１】
本実施例では、投射型表示装置として、液晶プロジェクタについて説明する。液晶プロジェクタには、単板式、３板式などが一般に知られているが、どちらの方式であっても良い。
【００１２】
本実施例の液晶プロジェクタは、表示すべき画像に応じて、液晶素子の光の透過率を制御して、液晶素子を透過した光源からの光をホワイトボード等の投影面に投影することで、画像をユーザに提示する。なお、投影対象はホワイトボードに限定されることはなく、投影可能なものであれば、何でもよい。
【００１３】
以下、このような液晶プロジェクタについて説明する。
【００１４】
＜全体構成＞
図１は、本実施例を模式的に示す図である。
【００１５】
外部装置２００は映像信号源（ソース）であり、液晶プロジェクタ１００に映像ケーブル等を介して映像信号を送信する。この外部装置２００はＰＣでもよいし、デジタルカメラやスマートフォン等の可搬型のデバイスでも良いし、ネットワーク上のサーバであっても良い。またケーブル接続に限るものではなく、例えば、インターネットやイントラネット等のネットワークを介してプロジェクタ１００に映像信号を送信しても良い。
【００１６】
液晶プロジェクタ１００は外部装置２００から送信された映像信号を受信して、受信した映像信号をホワイトボード３００に投影表示する。
【００１７】
映像信号のアスペクト比と、液晶プロジェクタが投影可能なアスペクト比が異なる場合には、映像信号に対する映像領域の上下又は左右に、非映像領域が形成されることが有る。図１の様な状態の場合、非映像領域４００と非映像領域４０２および映像領域４０１を合わせた領域が投影映像である。
【００１８】
なお、投影映像内の非映像領域と映像領域のレイアウトに関して、左右に非映像領域があり、中央に映像領域があるレイアウトに限定されることはなく、どのようなレイアウトであってもよい。
【００１９】
図２は、本実施例の液晶プロジェクタ１００の全体構成を示す図である。図２を用いて、本実施例の液晶プロジェクタ１００の全体構成を説明する。
【００２０】
本実施例の液晶プロジェクタ１００は、ＣＰＵ１１０、ＲＯＭ１１１、ＲＡＭ１１２、操作部１１３、画像入力部１３０、画像処理部１４０を有する。また、液晶プロジェクタ１００は、さらに、液晶制御部１５０、液晶素子１５１Ｒ、１５１Ｇ、１５１Ｂ、光源制御部１６０、光源１６１、色分離部１６２、色合成部１６３、光学系制御部１７０、投影光学系１７１を有する。また、液晶プロジェクタ１００は、さらに、記録再生部１９１、記録媒体１９２、通信部１９３、撮像部１９４、表示制御部１９５、表示部１９６、光センサ部１９７を有していてもよい。
【００２１】
ＣＰＵ１１０は、液晶プロジェクタ１００の各動作ブロックを制御するためのものである。ＲＯＭ１１１は、ＣＵＰ１１０の処理手順を記述した制御プログラムを記憶するためのものであり、ＲＡＭ１１２は、ワークメモリとして一時的に制御プログラムやデータを格納するものである。また、ＣＰＵ１１０は、記録再生部１９１により記録媒体１９２から再生された静止画データや動画データを一時的に記憶し、ＲＯＭ１１１に記憶されたプログラムを用いて、それぞれの画像や映像を再生したりすることもできる。また、ＣＰＵ１１０は、通信部１９３より受信した静止画データや動画データを一時的に記憶し、ＲＯＭ１１１に記憶されたプログラムを用いて、それぞれの画像や映像を再生したりすることもできる。また、撮像部１９４により得られた画像や映像を一時的にＲＡＭ１１２に記憶し、ＲＯＭ１１１に記憶されたプログラムを用いて、静止画データや動画データに変換して記録媒体１９２に記録させることもできる。
【００２２】
また、操作部１１３は、ユーザの指示を受け付け、ＣＰＵ１１０に指示信号を送信するものであり、例えば、スイッチやダイヤル、表示部１９６上に設けられたタッチパネルなどからなる。また、操作部１１３は、例えば、リモコンからの信号を受信する信号受信部（赤外線受信部など）で、受信した信号に基づいて所定の指示信号をＣＰＵ１１０に送信するものであってもよい。また、ＣＰＵ１１０は、操作部１１３や、通信部１９３から入力された制御信号を受信して、液晶プロジェクタ１００の各動作ブロックを制御する。
【００２３】
画像入力部１３０は、外部装置から映像信号を受信するものであり、例えば、コンポジット端子、Ｓ映像端子、Ｄ端子、コンポーネント端子、アナログＲＧＢ端子、ＤＶＩ−Ｉ端子、ＤＶＩ−Ｄ端子、ＨＤＭＩ（登録商標）端子等を含む。また、アナログ映像信号を受信した場合には、受信したアナログ映像信号をデジタル映像信号に変換する。そして、受信した映像信号を、画像処理部１４０に送信する。ここで、外部装置は、映像信号を出力できるものであれば、パーソナルコンピュータ、カメラ、携帯電話、スマートフォン、ハードディスクレコーダ、ゲーム機など、どのようなものであってもよい。
【００２４】
画像処理部１４０は、画像入力部１３０から受信した映像信号にフレーム数、画素数、画像形状などの変更処理を施して、液晶制御部１５０に送信するものであり、例えば画像処理用のマイクロプロセッサからなる。また、画像処理部１４０は、専用のマイクロプロセッサである必要はなく、例えば、ＲＯＭ１１１に記憶されたプログラムによって、ＣＰＵ１１０が画像処理部１４０と同様の処理を実行しても良い。画像処理部１４０は、フレーム間引き処理、フレーム補間処理、解像度変換処理、歪み補正処理（キーストン補正処理）、画像強調処理といった機能を実行することが可能である。また、画像処理部１４０は、画像入力部１３０から受信した映像信号以外にも、ＣＰＵ１１０によって再生された画像や映像に対して前述の変更処理を施すこともできる。
【００２５】
液晶制御部１５０は、画像処理部１４０で処理の施された映像信号に基づいて、液晶素子１５１Ｒ、１５１Ｇ、１５１Ｂの画素の液晶に印可する電圧を制御して、液晶素子１５１Ｒ、１５１Ｇ、１５１Ｂの透過率を調整するものである。液晶制御部１５０は、制御用のマイクロプロセッサからなる。また、液晶制御部１５０は、専用のマイクロプロセッサである必要はなく、例えば、ＲＯＭ１１１に記憶されたプログラムによって、ＣＰＵ１１０が液晶制御部１５０と同様の処理を実行しても良い。たとえば、画像処理部１４０に映像信号が入力されている場合、液晶制御部１５０は、画像処理部１４０から１フレームの画像を受信する度に、画像に対応する透過率となるように、液晶素子１５１Ｒ、１５１Ｇ、１５１Ｂを制御する。液晶素子１５１Ｒは、赤色に対応する液晶素子であって、光源１６１から出力された光のうち、色分離部１６２で赤色（Ｒ）、緑色（Ｇ）、青色（Ｂ）に分離された光のうち、赤色の光の透過率を調整するためのものである。液晶素子１５１Ｇは、緑色に対応する液晶素子であって、光源１６１から出力された光のうち、色分離部１６２で赤色（Ｒ）、緑色（Ｇ）、青色（Ｂ）に分離された光のうち、緑色の光の透過率を調整するためのものである。液晶素子１５１Ｂは、青色に対応する液晶素子であって、光源１６１から出力された光のうち、色分離部１６２で赤色（Ｒ）、緑色（Ｇ）、青色（Ｂ）に分離された光のうち、青色の光の透過率を調整するためのものである。
【００２６】
この液晶制御部１５０による液晶素子１５１Ｒ、１５１Ｇ、１５１Ｂの具体的な制御動作や液晶素子１５１Ｒ、１５１Ｇ、１５１Ｂの構成については、後述する。
【００２７】
光源制御部１６０は、光源１６１のオン／オフの制御や光量の制御をするものであり、制御用のマイクロプロセッサからなる。また、光源制御部１６０は、専用のマイクロプロセッサである必要はなく、例えば、ＲＯＭ１１１に記憶されたプログラムによって、ＣＰＵ１１０が光源制御部１６０と同様の処理を実行しても良い。また、光源１６１は、ホワイトボードに画像を投影するための光を出力するものであり、例えば、ハロゲンランプ、キセノンランプ、高圧水銀ランプなどであっても良い。また、色分離部１６２は、光源１６１から出力された光を、赤色（Ｒ）、緑色（Ｇ）、青色（Ｂ）に分離するものであり、例えば、ダイクロイックミラーやプリズムなどからなる。なお、光源１６１として、各色に対応するＬＥＤ等を使用する場合には、色分離部１６２は不要である。また、色合成部１６３は、液晶素子１５１Ｒ、１５１Ｇ、１５１Ｂを透過した赤色（Ｒ）、緑色（Ｇ）、青色（Ｂ）の光を合成するものであり、例えば、ダイクロイックミラーやプリズムなどからなる。そして、色合成部１６３により赤色（Ｒ）、緑色（Ｇ）、青色（Ｂ）の成分を合成した光は、投影光学系１７１に送られる。このとき、液晶素子１５１Ｒ、１５１Ｇ、１５１Ｂは、画像処理部１４０から入力された画像に対応する光の透過率となるように、液晶制御部１５０により制御されている。そのため、色合成部１６３により合成された光は、投影光学系１７１によりホワイトボードに投影されると、画像処理部１４０により入力された画像に対応する画像がホワイトボード上に表示されることになる。
【００２８】
光学系制御部１７０は、投影光学系１７１を制御するものであり、制御用のマイクロプロセッサからなる。また、光学系制御部１７０は、専用のマイクロプロセッサである必要はなく、例えば、ＲＯＭ１１１に記憶されたプログラムによって、ＣＰＵ１１０が光学系制御部１７０と同様の処理を実行しても良い。また、投影光学系１７１は、色合成部１６３から出力された合成光をホワイトボードに投影するためのものである。投影光学系１７１は、複数のレンズ、レンズ駆動用のアクチュエータからなり、レンズをアクチュエータにより駆動することで、投影画像の拡大、縮小、焦点調整、レンズシフトなどを行うことができる。
【００２９】
記録再生部１９１は、記録媒体１９２から静止画データや動画データを再生したり、また、撮像部１９４により得られた画像や映像の静止画データや動画データをＣＰＵ１１０から受信して記録媒体１９２に記録したりするものである。また、通信部１９３より受信した静止画データや動画データを記録媒体１９２に記録しても良い。記録再生部１９１は、例えば、記録媒体１９２と電気的に接続するインタフェースや記録媒体１９２と通信するためのマイクロプロセッサからなる。また、記録再生部１９１には、専用のマイクロプロセッサを含む必要はなく、例えば、ＲＯＭ１１１に記憶されたプログラムによって、ＣＰＵ１１０が記録再生部１９１と同様の処理を実行しても良い。また、記録媒体１９２は、静止画データや動画データ、その他、本実施例の液晶プロジェクタに必要な制御データなどを記録することができるものである。記録媒体１９２は、磁気ディスク、光学式ディスク、半導体メモリなどのあらゆる方式の記録媒体であってよく、着脱可能な記録媒体であっても、内蔵型の記録媒体であってもよい。
【００３０】
通信部１９３は、外部機器からの制御信号や静止画データ、動画データなどを受信するためのものであり、例えば、無線ＬＡＮ、有線ＬＡＮ、ＵＳＢ、Ｂｌｕｅｔｏｏｔｈ（登録商標）などであってよく、通信方式を特に限定するものではない。また、画像入力部１３０の端子が、例えばＨＤＭＩ（登録商標）端子であれば、その端子を介してＣＥＣ通信を行うものであっても良い。ここで、外部装置は、液晶プロジェクタ１００と通信を行うことができるものであれば、パーソナルコンピュータ、カメラ、携帯電話、スマートフォン、ハードディスクレコーダ、ゲーム機、リモコンなど、どのようなものであってもよい。
【００３１】
撮像部１９４は、本実施例の液晶プロジェクタ１００の周辺を撮像して画像信号を取得するものであり、投影光学系１７１を介して投影された画像を撮影（ホワイトボード方向を撮影）することができる。撮像部１９４は、得られた画像や映像をＣＰＵ１１０に送信し、ＣＰＵ１１０は、その画像や映像を一時的にＲＡＭ１１２に記憶し、ＲＯＭ１１１に記憶されたプログラムに基づいて、静止画データや動画データに変換する。撮像部１９４は、被写体の光学像を取得するレンズ、レンズを駆動するアクチュエータ、アクチュエータを制御するマイクロプロセッサ、レンズを介して取得した光学像を画像信号に変換する撮像素子、撮像素子により得られた画像信号をデジタル信号に変換するＡＤ変換部などからなる。また、撮像部１９４は、ホワイトボード方向を撮影するものに限られず、例えば、ホワイトボードと逆方向の視聴者側を撮影してもよい。
【００３２】
表示制御部１９５は、液晶プロジェクタ１００に備えられた表示部１９６に液晶プロジェクタ１００を操作するための操作画面やスイッチアイコン等の画像を表示させるための制御をするものであり、表示制御を行うマイクロプロセッサなどからなる。また、表示制御部１９５専用のマイクロプロセッサである必要はなく、例えば、ＲＯＭ１１１に記憶されたプログラムによって、ＣＰＵ１１０が表示制御部１９５と同様の処理を実行しても良い。また、表示部１９６は、液晶プロジェクタ１００を操作するための操作画面やスイッチアイコンを表示するものである。表示部１９６は、画像を表示できればどのようなものであってもよい。例えば、液晶ディスプレイ、ＣＲＴディスプレイ、有機ＥＬディスプレイ、ＬＥＤディスプレイであってよい。また、特定のボタンをユーザに認識可能に掲示するために、各ボタンに対応するＬＥＤ等を発光させるものであってもよい。
【００３３】
光センサ部１９７は、投影画像の投影反射光、照明光、および、その他の外光を受信して、液晶プロジェクタ１００の設置環境における環境光の情報をセンサ値として出力する。
【００３４】
なお、本実施例の画像処理部１４０、液晶制御部１５０、光源制御部１６０、光学系制御部１７０、記録再生部１９１、表示制御部１９５は、これらの各ブロックと同様の処理を行うことのできる単数または複数のマイクロプロセッサあってもよい。または、例えば、ＲＯＭ１１１に記憶されたプログラムによって、ＣＰＵ１１０が各ブロックと同様の処理を実行してもよい。
【００３５】
＜基本動作＞
次に、図２、図３を用いて、本実施例の液晶プロジェクタ１００の基本動作を説明する。
【００３６】
図３は、本実施例の液晶プロジェクタ１００の基本動作の制御を説明するためのフロー図である。図３の動作は、基本的にＣＰＵ１１０が、ＲＯＭ１１１に記憶されたプログラムに基づいて、各機能ブロックを制御することにより実行されるものである。図３のフロー図は、操作部１１３や不図示のリモコンによりユーザが液晶プロジェクタ１００の電源のオンを指示した時点をスタートとしている。
【００３７】
操作部１１３や不図示のリモコンによりユーザが液晶プロジェクタ１００の電源のオンを指示すると、ＣＰＵ１１０は、不図示の電源部から液晶プロジェクタ１００の各部に電源を供給する。
【００３８】
次に、ＣＰＵ１１０は、ユーザによる操作部１１３や不図示のリモコンの操作により選択された表示モードを判定する（Ｓ２１０）。本実施例の液晶プロジェクタ１００の表示モードの一つは、画像入力部１３０より入力された映像を表示する「入力画像表示モード」である。また、本実施例の液晶プロジェクタ１００の表示モードの一つは、記録再生部１９１により記録媒体１９２から読み出された静止画データや動画データの画像や映像を表示する「ファイル再生表示モード」である。また、本実施例の液晶プロジェクタ１００の表示モードの一つは、通信部１９３から受信した静止画データや動画データの画像や映像を表示する「ファイル受信表示モード」である。なお、本実施例では、ユーザにより表示モードが選択される場合について説明するが、電源を投入した時点での表示モードは、前回終了時の表示モードになっていてもよく、また、前述のいずれかの表示モードをデフォルトの表示モードとしてもよい。その場合には、Ｓ２１０の処理は省略可能である。
【００３９】
ここでは、Ｓ２１０で、「入力画像表示モード」が選択されたものとして説明する。
【００４０】
「入力画像表示モード」が選択されると、ＣＰＵ１１０は、画像入力部１３０から映像が入力されているか否かを判定する（Ｓ２２０）。入力されていない場合（Ｓ２２０でＮｏ）には、入力が検出されるまで待機し、入力されている場合（Ｓ２２０でＹｅｓ）には、投影処理（Ｓ２３０）を実行する。
【００４１】
ＣＰＵ１１０は、投影処理として、画像入力部１３０より入力された映像を画像処理部１４０に送信し、画像処理部１４０に、映像の画素数、フレームレート、形状の変形を実行させ、処理の施された１画面分の画像を液晶制御部１５０に送信する。なお、画像処理部１４０に実行させる処理として、映像の画素数、フレームレート、形状の変形に加えて、映像の外周部分（境界部分）の画像強調処理を行ってもよい。そして、ＣＰＵ１１０は、液晶制御部１５０に、受信した１画面分の画像の赤色（Ｒ）、緑色（Ｇ）、青色（Ｂ）の各色成分の階調レベルに応じた透過率となるように、液晶素子１５１Ｒ、１５１Ｇ、１５１Ｂの透過率を制御させる。そして、ＣＰＵ１１０は、光源制御部１６０に光源１６１からの光の出力を制御させる。色分離部１６２は、光源１６１から出力された光を、赤色（Ｒ）、緑色（Ｇ）、青色（Ｂ）に分離し、それぞれの光を、液晶素子１５１Ｒ、１５１Ｇ、１５１Ｂに供給する。液晶素子１５１Ｒ、１５１Ｇ、１５１Ｂに供給された、各色の光は、各液晶素子の画素毎に透過する光量が制限される。そして、液晶素子１５１Ｒ、１５１Ｇ、１５１Ｂを透過した赤色（Ｒ）、緑色（Ｇ）、青色（Ｂ）それぞれの光は、色合成部１６３に供給され再び合成される。そして、色合成部１６３で合成された光は、投影光学系１７１を介して、ホワイトボードに投影される。
【００４２】
この投影処理は、画像を投影している間、１フレームの画像毎に順次、実行されている。
【００４３】
なお、このとき、ユーザにより投影光学系１７１の操作をする指示が操作部１１３から入力されると、ＣＰＵ１１０は、光学系制御部１７０に、投影画像の焦点を変更したり、光学系の拡大率を変更したりするように投影光学系１７１のアクチュエータを制御させる。
【００４４】
この表示処理実行中に、ＣＰＵ１１０は、ユーザにより表示モードを切り替える指示が操作部１１３から入力されたか否かを判定する（Ｓ２４０）。ここで、ユーザにより表示モードを切り替える指示が操作部１１３から入力されると（Ｓ２４０でＹｅｓ）、ＣＰＵ１１０は、再びＳ２１０に戻り、表示モードの判定を行う。このとき、ＣＰＵ１１０は、画像処理部１４０に、表示モードを選択させるためのメニュー画面をＯＳＤ画像として送信し、投影中の画像に対して、このＯＳＤ画面を重畳させるように画像処理部１４０を制御する。ユーザは、この投影されたＯＳＤ画面を見ながら、表示モードを選択するのである。
【００４５】
一方、表示処理実行中に、ユーザにより表示モードを切り替える指示が操作部１１３から入力されない場合は（Ｓ２４０でＮｏ）、ＣＰＵ１１０は、ユーザにより投影終了の指示が操作部１１３から入力されたか否かを判定する（Ｓ２５０）。ここで、ユーザにより投影終了の指示が操作部１１３から入力された場合には（Ｓ２５０でＹｅｓ）、ＣＰＵ１１０は、液晶プロジェクタ１００の各ブロックに対する電源供給を停止させ、画像投影を終了させる。一方、ユーザにより投影終了の指示が操作部１１３から入力されない場合には（Ｓ２５０でＮｏ）、ＣＰＵ１１０は、Ｓ２２０へ戻り、以降、ユーザにより投影終了の指示が操作部１１３から入力されるまでの間Ｓ２２０からＳ２５０までの処理を繰り返す。
【００４６】
以上のように、本実施例の液晶プロジェクタ１００は、ホワイトボードに対して画像を投影する。
【００４７】
なお、「ファイル再生表示モード」では、ＣＰＵ１１０は、記録再生部１９１に、記録媒体１９２から静止画データや動画データのファイルリストや各ファイルのサムネイルデータを読み出させ、ＲＡＭ１１２に一時的に記憶する。そして、ＣＰＵ１１０は、ＲＯＭ１１１に記憶されたプログラムに基づいて、ＲＡＭ１１２に一時記憶されたファイルリストに基づく文字画像や各ファイルのサムネイルデータに基づく画像を生成し、画像処理部１４０に送信する。そして、ＣＰＵ１１０は、通常の投影処理（Ｓ２３０）と同様に、画像処理部１４０、液晶制御部１５０、光源制御部１６０、光学系制御部１７０を制御する。
【００４８】
次に、投影画面上において、記録媒体１９２に記録された静止画データや動画データにそれぞれ対応する文字や画像を選択する指示が操作部１１３を通して入力される。そうすると、ＣＰＵ１１０は、選択された静止画データや動画データを記録媒体１９２から読み出すように記録再生部１９１を制御する。そして、ＣＰＵ１１０は、読み出された静止画データや動画データをＲＡＭ１１２に一時的に記憶し、ＲＯＭ１１１に記憶されたプログラムに基づいて、静止画データや動画データの画像や映像を再生する。
【００４９】
そして、ＣＰＵ１１０は、例えば再生した動画データの映像を順次、画像処理部１４０に送信し、通常の投影処理（Ｓ２３０）と同様に、画像処理部１４０、液晶制御部１５０、光源制御部１６０、光学系制御部１７０を制御する。また、静止画データを再生した場合には、再生した画像を画像処理部１４０に送信し、通常の投影処理（Ｓ２３０）と同様に、画像処理部１４０、液晶制御部１５０、光源制御部１６０、光学系制御部１７０を制御する。
【００５０】
また、「ファイル受信表示モード」では、ＣＰＵ１１０は、通信部１９３から受信した静止画データや動画データをＲＡＭ１１２に一時的に記憶し、ＲＯＭ１１１に記憶されたプログラムに基づいて、静止画データや動画データの画像や映像を再生する。そして、ＣＰＵ１１０は、例えば再生した動画データの映像を順次、画像処理部１４０に送信し、通常の投影処理（Ｓ２３０）と同様に、画像処理部１４０、液晶制御部１５０、光源制御部１６０、光学系制御部１７０を制御する。また、静止画データを再生した場合には、再生した画像を画像処理部１４０に送信し、通常の投影処理（Ｓ２３０）と同様に、画像処理部１４０、液晶制御部１５０、光源制御部１６０、光学系制御部１７０を制御する。
【００５１】
次に本実施例の特徴的な構成について詳しく説明する。
【００５２】
図４に本実施例のフロー図を記載する。図４のフロー図は、図３のフロー図におけるＳ２３０（投影処理）が行われる時点をスタートとしている。図５に本実施例における各ユースケースを示す。図５に記載の５００、５０２、５０３、５０５、５０６、５０８、６０１、６０２、６０４、６０６は非映像領域である。また図５に記載の５０１、５０４、５０７、６００、６０３、６０５は映像領域である。本実施例の特徴的な構成について図１、図４および図５をもとに説明する。
【００５３】
まずＳ３０１について説明する。ＣＰＵ１１０は撮像部１９４を介して投影面であるホワイトボード３００に投影されている投影映像を撮影する。投影映像には、入力された映像信号に対応する映像領域と非映像領域とからなる。なお、撮影に関して、コメント等の撮影精度を向上させるために、絞りやシャッタースピードを調整することにより露出量を変化させながら撮影を行ってもよい。
【００５４】
次に、Ｓ３０２について説明する。ＣＰＵ１１０は画像処理部１４０に対して、撮影画像における非映像領域内にコメント等が存在するかどうかを検出するように指示要求を送信する。画像処理部１４０はＣＰＵ１１０から指示要求を受信するとコメント等の検出を行い、結果をＣＰＵ１１０に送信する。コメント等が検出された場合、ＣＰＵ１１０は、投影面へコメント等の描画が行われる場合であると判定することが出来、Ｓ３０３に進む。コメント等が検出されなかった場合は、Ｓ３０１に戻る。コメント等の検出手段は、投影画像と撮影画像の差分から検出する。なお、コメント等の検出手段は、差分から抽出する手段に限定されることはなく、コメント等が検出できる手段であれば何でもよい。また、コメント等は、投影が行われた後に書き込まれたものとする。なお、コメント等（請求項では描画像と表記）は投影画像と撮影画像の差分として検出できるものであれば何でもよい。たとえば、文字や図形、図や表であってもよい。図５に記載のＣａｓｅ１では、非映像領域５０２内においてコメント等が検出されるのでＳ３０３に進む。図５に記載のＣａｓｅ２では、非映像領域５０３内においてコメント等が検出されるのでＳ３０３に進む。図５に記載のＣａｓｅ３では、非映像領域５０６内および非映像領域５０８内においてコメント等が検出されないのでＳ３０１に戻る。
【００５５】
次に、Ｓ３０３について説明する。ＣＰＵ１１０は画像処理部１４０に対して、映像領域と非映像領域のレイアウトを変更するように指示要求を送信する。具体的には、コメント等が検出された非映像領域を増やすように映像領域と非映像領域のレイアウトを変更する。図５に記載のＣａｓｅ１では、コメント等が検出された非映像領域は非映像領域５０２であるため、非映像領域５０２を増やすように非映像領域５０２の右側に非映像領域５００をレイアウトしている。結果、非映像領域５０２よりも領域の大きい、非映像領域６０１が作成される。図５に記載のＣａｓｅ２では、コメント等が検出された非映像領域は非映像領域５０３であるため、非映像領域５０３を増やすように非映像領域５０３の右側に非映像領域５０５をレイアウトしている。結果、非映像領域５０３よりも領域の大きい、非映像領域６０２が作成される。なお、レンズシフトを行いながら、レイアウト変更を行っても良い。例えば、レンズシフトを用いて、映像領域の絶対位置を固定したままレイアウト変更を行っても良い。また、ホワイトボード３００を含む領域を撮影し、ホワイトボード３００の領域を検出し、ホワイトボード３００の領域を超えない範囲でレンズシフトを行っても良い。
【００５６】
以上説明したように、本実施例の投影型表示装置は、非映像領域内にコメント等を検出した場合に非映像領域と映像領域のレイアウトを変更するという動作をしている。このような動作により、本実施例の投影型表示装置は、非映像領域内のコメント等に応じた適切な映像領域と非映像領域のレイアウトを実現できるという効果を得ることができる。
【実施例２】
【００５７】
次に本発明の第２の実施例について説明する。なお、基本的な構成は第１の実施例と同様であり、以下の説明では、主として第１の実施例と異なる点について説明する。
【００５８】
図６に本実施例のフロー図を記載する。図６のフロー図は、図３のフロー図におけるＳ２３０（投影処理）が行われる時点をスタートとしている。図７に本実施例における各ユースケースを示す。図７に記載の５０９、５１１、５１２、５１４、６０８、６０９、７０１、７０２、７０４は非映像領域である。また図７に記載の５１０、５１３、６０７、６１０、７００、７０３は映像領域である。本実施例の特徴的な構成について図１、図６および図７をもとに説明する。なお、Ｓ４０１は図４のＳ３０１と、Ｓ４０２は図４のＳ３０２と、Ｓ４０３は図４のＳ３０３と同様であるため、説明は省略する。
【００５９】
Ｓ４０４について説明する。ＣＰＵ１１０は画像処理部１４０に対して、レイアウト再変更が必要かどうかを検出するように指示要求を送信する。画像処理部１４０はＣＰＵ１１０から指示要求を受信するとレイアウト再変更が必要かどうかの検出を行い、結果をＣＰＵ１１０に送信する。レイアウト再変更が必要な場合は、Ｓ４０５に進む。レイアウト再変更が必要でない場合は、Ｓ４０５に進まず、レイアウト再変更は行われない。レイアウト再変更が必要かどうかの検出は、レイアウト変更後の非映像領域におけるコメント等の非映像領域に占める割合で判断する。割合が少ないあるいは多い場合にレイアウト再変更を行う。なお、割合が一定時間変化しないときにレイアウト再変更を行ってもよい。レイアウト再変更を行う割合の境界値や一定時間の値は、あらかじめＲＯＭ１１１に記憶しておいてもよいし、ユーザが操作部１１３を介して設定してもよい。なお、レイアウト再変更が必要かどうかを検出するのは、画像処理部１４０に限定されず、レイアウト再変更が必要かどうかを検出できるものであれば何でもよい。例えば、ＣＰＵ１１０がユーザからのレイアウト再変更の指示を、操作部１１３を介して検出してもよい。
【００６０】
次にＳ４０５について説明する。ＣＰＵ１１０は画像処理部１４０に対して、映像領域と非映像領域のレイアウトを再変更するように指示要求を送信する。画像処理部１４０はＣＰＵ１１０から指示要求を受信すると、映像領域と非映像領域のレイアウトを再変更する。
【００６１】
次に図７を用いて、各Ｃａｓｅについて説明する。図７に記載のＣａｓｅ１では、まず非映像領域５１１の右側に非映像領域５０９をレイアウトしている。結果、非映像領域５１１よりも領域の大きい、非映像領域６０８が作成される。次に、非映像領域６０８内におけるコメント等の占める割合が多いので、映像領域６０７を縮小することによりレイアウト再変更を行う。結果として、非映像領域６０８よりも領域の大きい非映像領域７０１が作成される。図７に記載のＣａｓｅ２では、まず非映像領域５１２の右側に非映像領域５１４をレイアウトしている。結果、非映像領域５１２よりも領域の大きい、非映像領域６０９が作成される。次に、非映像領域６０９内におけるコメント等の占める割合が少ないので、非映像領域６０９の一部を映像領域６１０の右側にレイアウトすることにより、非映像領域７０２と非映像領域７０４が作成され、レイアウト前の最初の状態に戻すことができる。なお、レンズシフトを行いながら、レイアウト変更を行っても良い。例えば、レンズシフトを用いて、映像領域の絶対位置を固定したままレイアウト変更を行っても良い。また、ホワイトボード３００を含む領域を撮影し、ホワイトボード３００の領域を検出し、ホワイトボード３００の領域を超えない範囲でレンズシフトを行っても良い。
【００６２】
以上説明したように、本実施例の投影型表示装置は、非映像領域内にコメント等を検出した場合に非映像領域と映像領域のレイアウトを変更し、再度、レイアウトを変更するという動作をしている。このような動作により、本実施例の投影型表示装置は、非映像領域内のコメント等に応じた適切な映像領域と非映像領域のレイアウトを実現できるという効果を得ることができる。
【実施例３】
【００６３】
次に本発明の第３の実施例について説明する。なお、基本的な構成は第１の実施例と同様であり、以下の説明では、主として第１の実施例と異なる点について説明する。
【００６４】
図８に本実施例のフロー図を記載する。図８のフロー図は、図３のフロー図におけるＳ２３０（投影処理）が行われる時点をスタートとしている。図９に本実施例における各ユースケースを示す。図９に記載の５１５、５１７、６１１、６１３は非映像領域である。また図９に記載の５１６、６１２は映像領域である。本実施例の特徴的な構成について図１、図８および図９をもとに説明する。なお、Ｓ８０１は図４のＳ３０１と、Ｓ８０２は図４のＳ３０２と、Ｓ８０４は図４のＳ３０３と同様であるため、説明は省略する。
【００６５】
Ｓ８０３について説明する。ＣＰＵ１１０は画像処理部１４０に対して、非映像領域内に検出されたコメント等が映像領域にもまたがっていないかどうかを検出するように指示要求を送信する。画像処理部１４０はＣＰＵ１１０から指示要求を受信すると非映像領域内に検出されたコメント等が映像領域にもまたがっていないかどうかの検出を行い、結果をＣＰＵ１１０に送信する。またがっていない場合は、Ｓ８０４に進む。またがっている場合は、Ｓ８０１に戻る。なお、またがっていないかどうかの検出手段は、投影画像と撮像画像の差分から検出する。具体的には、映像領域内で検出されたコメント等と非映像領域内で検出されたコメント等の距離がある閾値を超える（閾値は事前に設定しておいてもよいしユーザが設定してもよい）場合に、またがっていないと判断する。また、映像領域内で検出されたコメント等と非映像領域内で検出されたコメント等の撮影時間がある閾値を超える（閾値は事前に設定しておいてもよいしユーザが設定してもよい）場合に、またがっていないと判断する。なお、コメント等の検出手段は、差分から抽出する手段に限定されることはなく、コメント等が検出できる手段であれば何でもよい。
【００６６】
以上説明したように、本実施例の投影型表示装置は、非映像領域内にコメント等を検出し、検出したコメント等が映像領域内にまたがらない場合に非映像領域と映像領域のレイアウトを変更するという動作をしている。このような動作により、本実施例の投影型表示装置は、非映像領域内のコメント等に応じた適切な映像領域と非映像領域のレイアウトを実現できるという効果を得ることができる。
【００６７】
以上、本発明の好ましい実施形態について説明したが、本発明はこれらの実施形態に限定されず、その要旨の範囲内で種々の変形及び変更が可能である。
【００６８】
例えば、上記の実施例では、撮影により得られた映像を解析し、非映像領域内にコメント等が書かれたことを検出していたが、これに限るものではない。
【００６９】
例えば、実際に描画が行われる前に、ユーザにより投影面へ描画が行われる場合である、または描画される可能性が高い場合であるとＣＰＵ１１０が判定することに応じて、レイアウトの変更を行う様にしても良い。
【００７０】
さらに具体的には、投影型表示装置を描画モードの様な所定のモードに設定したことにより、ＣＰＵ１１０が、ユーザにより投影面へ描画が行われると判定することに応じて、レイアウトの変更を行う様にしても良い。
【００７１】
または、投影面に描画するためのペン等の描画用のツールに、人に持たれたことや、キャップを外されたことや、描画を行っていることを検知する仕組みを持たせ、その仕組みにより検知がなされたことに基づき、ユーザにより投影面へ描画が行われると判定するようにしても良い。
【００７２】
また、上記の撮像手段が取得した映像の解析に基づき、ユーザにより投影面へ描画が行われる前に、描画動作に入っているであろうと判定し、レイアウトの変更を行う様にしても良い。
【符号の説明】
【００７３】
１００  液晶プロジェクタ
１１０  ＣＰＵ
１１１  ＲＯＭ
１１２  ＲＡＭ
１１３  操作部
１３０  画像入力部
１４０  画像処理部
１５０  液晶制御部
１５１Ｒ、１５１Ｇ、１５１Ｂ  液晶素子
１６０  光源制御部
１６１  光源
１６２  色分離部
１６３  色合成部
１７０  光学系制御部
１７１  投影光学系
１９１  記録再生部
１９２  記録媒体
１９３  通信部
１９４  撮像部
１９５  表示制御部
１９６  表示部
１９７  光センサ部
２００  外部装置
３００  ホワイトボード
４００、４０２  非映像領域
４０１  映像領域
【図１】
2018054912.tif 000003
【図２】
2018054912.tif 000004
【図３】
2018054912.tif 000005
【図４】
2018054912.tif 000006
【図５】
2018054912.tif 000007
【図６】
2018054912.tif 000008
【図７】
2018054912.tif 000009
【図８】
2018054912.tif 000010
【図９】
2018054912.tif 000011