(57)【要約】      （修正有）【課題】複数のスクリーンの一つを、ポインタで指し示して、プレゼンテーションを行う場合に、聴講者が見ているスクリーンがプレゼンタが指し示すものと異なる場合でも、より一体感を持った視聴を可能にする電子機器を提供する。【解決手段】電子機器は、第１のスクリーンおよび第２のスクリーンに第１の映像の出力を指示する映像出力指示部を備える。また、前記第１のスクリーンに出力されている前記第１の映像にポインタ表示が当てられている場合に、撮像部に、前記ポインタ表示が当てられている第１の映像の撮像を指示する撮像指示部を備える。また、前記撮像部から出力された撮像映像から前記ポインタ表示の軌跡を示すポインタ表示の軌跡情報を取得し、記録するポインタ表示の軌跡情報記録部を備える。また、前記記録されたポインタ表示の軌跡情報を、前記第２のスクリーンの前記第１の映像に重畳して出力する出力部を備える。【選択図】図１
2014126611.tif 000002
【特許請求の範囲】
【請求項１】
第１のスクリーンおよび第２のスクリーンに第１の映像の出力を指示する映像出力指示部と、
前記第１のスクリーンに出力されている前記第１の映像にポインタ表示が当てられている場合に、撮像部に、前記ポインタ表示が当てられている第１の映像の撮像を指示する撮像指示部と、
前記撮像部から出力された撮像映像から前記ポインタ表示の軌跡を示すポインタ表示の軌跡情報を取得し、記録するポインタ表示の軌跡情報記録部と、
前記記録されたポインタ表示の軌跡情報を、前記第２のスクリーンの前記第１の映像に重畳して出力する出力部と、を備える電子機器。
【請求項２】
前記第２のスクリーンに前記ポインタ表示の軌跡の表示が指示された場合に、前記ポインタ表示の軌跡情報を出力する請求項１に記載の電子機器。
【請求項３】
前記撮像映像から前記ポインタ表示を示すポインタ表示情報を取得し、前記第２のスクリーンの前記第１の映像に重畳して出力する請求項１または請求項２のいずれか１つに記載の電子機器。
【請求項４】
前記第２のスクリーンに前記ポインタ表示の表示が指示された場合に、前記ポインタ表示情報を出力する請求項３に記載の電子機器。
【請求項５】
前記ポインタ表示の軌跡情報の取得は、予め設定された動作に応じて行なわれる請求項１乃至請求項４のいずれか１つに記載の電子機器。
【請求項６】
前記予め設定された動作は、スイッチ切替え、所定のジェスチャ、固定動作のいずれか１つを含む請求項５に記載の電子機器。
【請求項７】
前記ポインタ表示情報または、前記ポインタ表示の軌跡情報は、前記第１の映像における位置情報として取得される請求項１乃至請求項６のいずれか１つに記載の電子機器。
【請求項８】
第１のスクリーンおよび第２のスクリーンに第１の映像の出力を指示するステップと、
前記第１のスクリーンに出力されている前記第１の映像にポインタ表示が当てられている場合に、撮像部に、前記ポインタ表示が当てられている第１の映像の撮像を指示するステップと、
前記撮像部から出力された撮像映像から前記ポインタ表示の軌跡を示すポインタ表示の軌跡情報を取得し、記録するステップと、
前記記録されたポインタ表示の軌跡情報を、前記第２のスクリーンの前記第１の映像に重畳して出力するステップと、を備え、電子機器を制御する電子機器の制御方法。
【請求項９】
第１のスクリーンおよび第２のスクリーンに第１の映像の出力を指示するステップと、
前記第１のスクリーンに出力されている前記第１の映像にポインタ表示が当てられている場合に、撮像部に、前記ポインタ表示が当てられている第１の映像の撮像を指示するステップと、
前記撮像部から出力された撮像映像から前記ポインタ表示の軌跡を示すポインタ表示の軌跡情報を取得し、記録するステップと、
前記記録されたポインタ表示の軌跡情報を、前記第２のスクリーンの前記第１の映像に重畳して出力するステップと、を備え、電子機器を制御する電子機器の制御プログラム。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明の実施形態は、電子機器、電子機器の制御方法、電子機器の制御プログラムに関する。
【背景技術】
【０００２】
現在、例えば、大規模会場等で、複数のスクリーン（例えば、スクリーン１、スクリーン２、スクリーン３等）に、同時に、同じ映像を表示しながら、プレゼンテーションが行なわれることがある。
【０００３】
このとき、プレゼンタは、例えば、複数のスクリーンの内の一つのスクリーンを、レーザポインタ等のポインタで指し示しながら、プレゼンテーションを行う。
【０００４】
しかし、例えば、プレゼンタがポインタを指し示すスクリーンと聴講者が見ているスクリーンが異なる場合（例えば、プレゼンタが指し示すスクリーンはスクリーン１であるのに、聴講者が見ているスクリーンはスクリーン２である場合等）は、聴講者は、プレゼンタが指し示したポイントを見逃してしまう恐れがある。
【０００５】
このため、プレゼンタが、複数のスクリーンの内の一つのスクリーンを、ポインタで指し示しながら、プレゼンテーションを行う場合において、聴講者が見ているスクリーンとプレゼンタが指し示すスクリーンが異なっている場合でも、プレゼンタとのより一体感を持った視聴を可能にすることが課題になっていた。
【先行技術文献】
【特許文献】
【０００６】
【特許文献１】特開２００９−１５７４０７号公報
【発明の概要】
【発明が解決しようとする課題】
【０００７】
プレゼンタが、複数のスクリーンの内の一つのスクリーンを、ポインタで指し示しながら、プレゼンテーションを行う場合において、聴講者が見ているスクリーンとプレゼンタが指し示すスクリーンが異なっている場合でも、プレゼンタとのより一体感を持った視聴を可能にすることが課題になっていた。
【課題を解決するための手段】
【０００８】
実施形態の電子機器は、第１のスクリーンおよび第２のスクリーンに第１の映像の出力を指示する映像出力指示部を備える。
【０００９】
また、前記第１のスクリーンに出力されている前記第１の映像にポインタ表示が当てられている場合に、撮像部に、前記ポインタ表示が当てられている第１の映像の撮像を指示する撮像指示部を備える。
【００１０】
また、前記撮像部から出力された撮像映像から前記ポインタ表示の軌跡を示すポインタ表示の軌跡情報を取得し、記録するポインタ表示の軌跡情報記録部を備える。
【００１１】
また、前記記録されたポインタ表示の軌跡情報を、前記第２のスクリーンの前記第１の映像に重畳して出力する出力部を備える。
【図面の簡単な説明】
【００１２】
【図１】実施形態に係わる電子機器を用いるシステムの外観を示す図。
【図２】実施形態に係わる電子機器の構成を示すブロック図。
【図３】実施形態に係わる電子機器を用いるシステムで用いられる映像データの概要を説明する図。
【図４】実施形態に係わる電子機器において、ポインタ表示の軌跡の表示動作を説明する図。
【図５】実施形態に係わる電子機器の動作を説明するフローチャート。
【発明を実施するための形態】
【００１３】
以下、図面を参照し、実施の形態を説明する。
【００１４】
図１は、実施形態に係わる電子機器を用いるシステムの外観を示す図である。
【００１５】
この実施形態において、電子機器（制御部）１７は、例えば、プロジェクタ１（１５）およびプロジェクタ２（１６）と接続され、第１のスクリーン（ｓｃｒｅｅｎ１）１２および、第２のスクリーン（ｓｃｒｅｅｎ２）１３に、例えば、パーソナルコンピュータ（ＰＣ）１８から出力された第１の映像の出力を指示する映像出力指示部を備えている。
【００１６】
また、第１のスクリーン（ｓｃｒｅｅｎ１）１２に出力されている第１の映像（図示せず）にポインタ表示１０が当てられている場合に、撮像部（カメラ）１４に、ポインタ表示１０が当てられている第１の映像の撮像を指示する撮像指示部を備えている。
【００１７】
また、撮像部（カメラ）１４から出力された撮像映像からポインタ表示１０の軌跡（後述）を示すポインタ表示の軌跡情報を取得し、記録するポインタ表示の軌跡情報記録部を備えている。
【００１８】
また、記録されたポインタ表示１０の軌跡情報を、第２のスクリーン（ｓｃｒｅｅｎ２）１３の第１の映像に重畳して出力する出力部を備えている。
【００１９】
すなわち、この実施形態においては、例えば、図１に示すように、撮像部（カメラ）１４と、その撮影データを処理する装置（電子機器（制御部）１７）を用いて、第１のスクリーン（ｓｃｒｅｅｎ１）１２上で指し示されたポイントの位置を特定し、これを第２のスクリーン（ｓｃｒｅｅｎ２）１３上の第１の映像に重ね合わせることで、聴講者は、第１のスクリーン（ｓｃｒｅｅｎ１）１２を見ているかのように第２のスクリーン（ｓｃｒｅｅｎ２）１３を見ながら、聴講することが可能となる。
【００２０】
なお、ここでは、電子機器（制御部）１７は、プロジェクタ１（１５）、プロジェクタ２（１６）、撮像部（カメラ）１４、パーソナルコンピュータ（ＰＣ）１８等とは、別体に構成される例を用いて説明を行うが、この実施形態においては、電子機器（制御部）１７の機能の一部または全部が、例えば、これらのプロジェクタ１（１５）、プロジェクタ２（１６）、撮像部（カメラ）１４、パーソナルコンピュータ（ＰＣ）１８等の内部に構成されても良い。
【００２１】
また、電子機器（制御部）１７の機能の一部または全部が、ソフトウェアで構成されても良い。
【００２２】
図２は、実施形態に係わる電子機器の構成を示すブロック図である。
【００２３】
ここでは、電子機器（制御部）１７は、例えば、画像生成部１００、映像合成部２０１、ポインタ形状／色検出部２０５、軌跡保存部２０６、軌跡抽出部２０７を備えている。
【００２４】
ポインタ形状／色検出部２０５は、撮影データ２０８から、レーザポインタの「ポインタ表示」１０の色や形状を検出し、「ポインタ表示」情報を取得し、画像生成部２００に向けて出力する。
【００２５】
軌跡保存部２０６は、座標データ２０２から、「ポインタ表示の軌跡情報」を検出し、取得、保存し、軌跡抽出部２０７および画像生成部２００に向けて出力する。
【００２６】
ここでは、座標データ２０２は、撮像部（カメラ）１４で撮影された映像データからレーザポインタの「ポインタ表示」１０が指し示されたポイント位置を算出したデータである。
【００２７】
軌跡抽出部２０７は、軌跡データ（「ポインタ表示の軌跡情報」）の利用の切り替えに用いられる切り替えデータ２０９を受信し、抽出された「ポインタ表示の軌跡情報」を画像生成部２００に向けて出力する。
【００２８】
画像生成部１００は、座標データ２０２から出力されたレーザポインタの「ポインタ表示」１０が指し示されたポイント位置を算出したデータ、軌跡保存部２０６から出力された「ポインタ表示の軌跡情報」、軌跡抽出部２０７から出力された軌跡データ（「ポインタ表示の軌跡情報」）の利用の切り替えに用いられる切り替えデータ、ポインタ形状／色検出部２０５から出力された「ポインタ表示」情報を受信し、「ポインタ表示」や「ポインタ表示の軌跡」の映像情報を、映像合成部２０１に向けて出力する。
【００２９】
画像生成部２００は、座標データ２０２を用い、「ポインタ表示」１０が指し示されたポイントを示す画像を生成する。
【００３０】
映像合成部２０１は、投影データ２０３および、「ポインタ表示」や「ポインタ表示の軌跡」の映像情報を受信し、映像を合成して、合成データ２０４を出力する。画像生成部２００で生成された映像データと投影データ２０３を映像合成部２０１で合成した映像が合成データ２０４である。
【００３１】
すなわち、ここでは、軌跡データ利用の切り替えを行うための切り替えデータ２０９を入力とし、軌跡保存部２０６、軌跡抽出部２０７を用いることにより、例えば、座標データ２０２を時系列に保存することが可能になる。
【００３２】
これにより、必要に応じ、軌跡抽出部２０７で取り出して、「ポインタ表示」や「ポインタ表示の軌跡」をマークとして認識することが可能になる。また、生成される「ポインタ表示」や「ポインタ表示の軌跡」の表示を変更ことも可能になる。
【００３３】
図３は、実施形態に係わる電子機器を用いるシステムで用いられる映像データの概要を説明する図である。
【００３４】
図３（ａ）は、プレゼンタがプレゼンテーションで用いている投影データである（第１の映像（元映像））。
【００３５】
図３（ｂ）は、例えば、プレゼンタが、レーザポインタ１１を用い、第１のスクリーン１２に表示された上記投影データ（第１の映像（元映像）に対し、ポインタ表示１０を指し示（ポイント）しているようすを示す図である（第１の映像（元映像）にポインタ表示）。
【００３６】
図３（ｃ）は、上記図３（ｂ）に示す、第１のスクリーン１２に表示された上記投影データ（第１の映像（元映像）にポイント表示１０が指し示された状況が撮像部（カメラ）１４で撮影され出力された、撮影データを示す図である（第１のスクリーンをカメラで撮像した映像）。
【００３７】
図３（ｄ）は、撮像部（カメラ）１４から出力された撮影データの座標データから生成された、例えば、第１の映像（元映像）を含まない、「ポインタ表示」１０の映像データ（ポインタ表示映像データ）を表す図である（ポインタ表示の映像データ）。
【００３８】
図３(ｅ)は、上記投影データ（第１の映像（元映像）に、「ポインタ表示」１０の映像データ（ポインタ表示映像データ）を合成した、合成データを示す図である（第１の映像（元映像）にポインタ表示を重畳）。
【００３９】
図４は、実施形態に係わる電子機器において、ポインタ表示の軌跡の表示動作を説明する図である。
【００４０】
ここでは、レーザポインタ１１による第１のスクリーン（ｓｃｒｅｅｎ１）１２へのポインタ表示の軌跡を、第２のスクリーン（ｓｃｒｅｅｎ２）１３へ投影した場合の見え方を示している。
【００４１】
例えば、図４(ａ)の始点４１から終点４２に、円を描くように、レーザポインタ１１のポイント表示１０を移動した場合、最終的にポイント表示１０が見える位置は、図４(ｂ)に示すように、図４(ａ)の終点４２の位置への表示だけが見えることになる（通常モード）。
【００４２】
このとき、聴講者は、例えば、上記円を描くようなポイント表示１０の移動が行なわれている間、第２のスクリーン（ｓｃｒｅｅｎ２）１３を見続けていなければ、このポインタ表示の軌跡（非表示）４０、すなわち、例えば、重要箇所（ここでは、太陽）をポインタ表示１０でマークしていたことがわからない。
【００４３】
そこで、この実施形態においては、電子機器１７を、例えば、図２に示すように構成することにより、図４(ｃ)に示すように、始点４１から終点４２（図４(ａ)）に、円を描くように、レーザポインタ１１のポイント表示１０を移動した軌跡（表示）５０を、第２のスクリーン（ｓｃｒｅｅｎ２）１３に表示することが可能になる（軌跡モード）。
【００４４】
なお、このレーザポインタ１１のポイント表示１０を移動した軌跡（表示）５０は、第１のスクリーン（ｓｃｒｅｅｎ１）１２にも表示しても良い。
【００４５】
なお、上記図２で説明した切り替えデータ生成２０９は、例えば、レーザポインタ１１の予め設定された動作（例えば、スイッチ切り替え操作やユーザのジェスチャ、レーザポインタ１１を回転させる等の固定動作、レーザポインタ１１の所定操作を繰り返し行なう動作等）を検出し、この予め設定された動作の検出に応じて行なわれるようにしても良い。
【００４６】
図５は、実施形態に係わる電子機器の動作を説明するフローチャートである。
【００４７】
ステップＳ１００は、ここでの開始ステップである。続いて、ステップＳ１０１に進む。
【００４８】
ステップＳ１０１は、複数のスクリーン（例えば、第１のスクリーン、第２のスクリーン、第３のスクリーン・・・等）に、第１の映像（元映像：プレゼンタがプレゼンテーションを行う映像の投影データ）を表示出力するステップである。続いて、ステップＳ１０２に進む。
【００４９】
ステップＳ１０２は、プレゼンタがレーザポインタ１１を操作し、第１の映像（元映像）が表示出力されている第１のスクリーン１２にポインタの光を当てるステップである。続いて、ステップＳ１０３に進む。
【００５０】
ステップＳ１０３は、制御部１７は、ポインタの光が当たっている第１のスクリーン１２の映像の撮像を、撮像部（カメラ１４）に指示するステップである。続いて、ステップＳ１０４に進む。
【００５１】
ステップＳ１０４は、撮像部（カメラ１４）は、例えば、制御部１７に指示され、撮像された映像データを制御部１７に向けて出力（送信）するステップである。続いて、ステップＳ１０５に進む。
【００５２】
ステップＳ１０５は、制御部１７は、撮像された映像データを受信し、この受信した撮像映像から、色や形状を含む「ポインタ表示」情報を検出し、記録部に記録するステップである。続いて、ステップＳ１０６に進む。
【００５３】
ステップＳ１０６は、映像の「ポインタ表示」１０は検出されたかを判別するステップである。映像の「ポインタ表示」１０は検出されたと判別される場合は、ステップＳ１０７に進む（Ｙｅｓ）。映像の「ポインタ表示」１０は検出されないと判別される場合は、ここでの処理を繰り返す（Ｎｏ）。
【００５４】
ステップＳ１０７は、制御部１７は、予め設定された動作（スイッチ切替え、所定のジェスチャ、固定動作等）に応じて、受信した撮像映像から「ポインタ表示の軌跡」情報を検出し、記録部に記録するステップである。続いて、ステップＳ１０８に進む。
【００５５】
ステップＳ１０８は、第２のスクリーン１３への「ポインタ表示」１０の表示指示がされたかを検出するステップである。第２のスクリーン１３への「ポインタ表示」１０の表示指示がされたと検出される場合は、ステップＳ１０９に進む（Ｙｅｓ）。第２のスクリーン１３への「ポインタ表示」１０の表示指示がされないと検出される場合は、ここでの処理を繰り返す（Ｎｏ）。
【００５６】
ステップＳ１０９は、制御部１７は、記録された「ポインタ表示」情報を第１の映像データ（元映像）に重畳し、第２のスクリーン１３に表示出力するステップである。続いて、ステップＳ１１０に進む。
【００５７】
ステップＳ１１０は、第２のスクリーン１３への「ポインタ表示の軌跡」５０の表示指示がされたかを検出するステップである。第２のスクリーン１３への「ポインタ表示の軌跡」５０の表示指示がされたと検出される場合は、ステップＳ１１１に進む（Ｙｅｓ）。第２のスクリーン１３への「ポインタ表示の軌跡」５０の表示指示がされないと検出される場合は、ここでの処理を繰り返す（Ｎｏ）。
【００５８】
ステップＳ１１１は、制御部１７は、記録された「ポインタ表示の軌跡」情報を第１の映像データ（元映像）に重畳し、第２のスクリーン１３に表示出力するステップである。続いて、ステップＳ１０１に進み、ここでは、上記処理を繰り返す。
【００５９】
すなわち、この実施形態においては、電子機器（制御部）１７は、例えば、プロジェクタ１（１５）およびプロジェクタ２（１６）と接続され、第１のスクリーン（ｓｃｒｅｅｎ１）１２および、第２のスクリーン（ｓｃｒｅｅｎ２）１３に、例えば、パーソナルコンピュータ（ＰＣ）１８から出力された第１の映像の出力を指示する映像出力指示部を備えている。
【００６０】
また、第１のスクリーン（ｓｃｒｅｅｎ１）１２に出力されている第１の映像（図示せず）にポインタ表示１０が当てられている場合に、撮像部（カメラ）１４に、ポインタ表示１０が当てられている第１の映像の撮像を指示する撮像指示部を備えている。
【００６１】
また、撮像部（カメラ）１４から出力された撮像映像からポインタ表示１０の軌跡（後述）を示すポインタ表示の軌跡情報を取得し、記録するポインタ表示の軌跡情報記録部を備えている。
【００６２】
また、記録されたポインタ表示１０の軌跡情報を、第２のスクリーン（ｓｃｒｅｅｎ２）１３の第１の映像に重畳して出力する出力部を備えている。
【００６３】
また、この実施形態の電子機器（制御部）１７は、例えば、第２のスクリーン１３にポインタ表示の軌跡の表示が指示された場合に、ポインタ表示の軌跡表示５０を出力するように構成しても良い。
【００６４】
また、この実施形態の電子機器（制御部）１７は、例えば、撮像映像（図３（ｃ））からポインタ表示１０を示すポインタ表示情報を取得し、第２のスクリーン１３の第１の映像（元映像）に重畳して出力するように構成しても良い。
【００６５】
また、この実施形態の電子機器（制御部）１７は、例えば、第２のスクリーン１３にポインタ表示の表示が指示された場合に、ポインタ表示情報１０を出力するように構成しても良い。
【００６６】
また、この実施形態の電子機器（制御部）１７は、例えば、ポインタ表示の軌跡情報の取得は、予め設定された動作に応じて行なわれるように構成しても良い。
【００６７】
また、この実施形態の電子機器（制御部）１７は、例えば、予め設定された動作は、スイッチ切替え、所定のジェスチャ、固定動作のいずれか１つを含むように構成しても良い。
【００６８】
また、この実施形態の電子機器（制御部）１７は、例えば、ポインタ表示情報または、ポインタ表示の軌跡情報は、第１の映像における位置情報として取得されるように構成しても良い。
【００６９】
また、上記実施形態に、複数のポインタ表示の軌跡保存機能を用いるように構成することにより、複数のポイントを指し示した状態を保つことも可能となる。
【００７０】
また、ポインタ表示１０が指し示している位置を特定することが可能であれば、上記レーザポインタに代えて用いることも可能である。
【００７１】
また、上記座標データの取得は、レーザポインタに限られることはなく、例えば、センサ等を用いることも可能である。
【００７２】
また、この実施形態に係る電子機器（制御部）１７は、外付けで構成されても良いし、例えば、撮像部（カメラ）１４やパーソナルコンピュータ（ＰＣ）に組み込んでも良い。
【００７３】
これにより、例えば、ユーザの、多スクリーンの会場においても、見ているスクリーンをポイントして欲しいという要求や、メモを取りながらでも強調箇所がよくわかるようにして欲しいという要求、他会場で視聴しても、同会場にいるような臨場感が味わえるようにして欲しいという要求、同一画面で複数のポイントがあった場合にもよくわかるようにして欲しいという要求、あるいは、同一プレゼンを別の日時に視聴できるようにして欲しいという要求に答えることも可能である。
【００７４】
上記のように構成することによって、この実施形態においては、プレゼンタが、複数のスクリーンの内の一つのスクリーンを、ポインタで指し示しながら、プレゼンテーションを行う場合において、プレゼンタが指し示すスクリーンと、聴講者が見ているスクリーンが異なっている場合でも、聴講者に、プレゼンタとの、より一体感を持った視聴を可能にすることが可能になる。
【００７５】
なお、上記実施形態の制御処理の手順は全てソフトウェアによって実行することが可能である。このため、制御処理の手順を実行するプログラムを格納したコンピュータ読み取り可能な記憶媒体を通じてこのプログラムを通常のコンピュータにインストールして実行するだけで、上記実施形態と同様の効果を容易に実現することができる。
【００７６】
なお、上記実施形態は、記述そのものに限定されるものではなく、実施段階では、その趣旨を逸脱しない範囲で、構成要素を種々変形して具体化することが可能である。
【００７７】
また、上記実施形態に開示されている複数の構成要素の適宜な組み合せにより種々の発明を形成できる。
【００７８】
例えば、実施形態に示される全構成要素から幾つかの構成要素を削除してもよい。更に、異なる実施形態に亘る構成要素を適宜組み合せてもよい。
【符号の説明】
【００７９】
１…プレゼンタ、１１…レーザポインタ、１２…第１のスクリーン、１３…第２のスクリーン、１４…撮像部（カメラ）、１５…プロジェクタ１、１６…プロジェクタ２、１７…電子機器（制御部）、１８…パーソナルコンピュータ（ＰＣ）。
【図１】
2014126611.tif 000003
【図２】
2014126611.tif 000004
【図３】
2014126611.tif 000005
【図４】
2014126611.tif 000006
【図５】
2014126611.tif 000007