(57)【要約】【課題】複数の投影のプロジェクタで、重複部分の補正処理を軽くし省電力化。【解決手段】投影部がスクリーン上に投影された画像を一定時間毎に撮影し画像情報として入力するための入力部と、スクリーン上に投影された投影像と他方の携帯端末の投影部から前期スクリーン上に投影された投影象とのつなぎ目部分に生じる投影像の重複部分を重複部形状情報として検出する重複部分検出部と、重複部形状情報を保存する記憶部と、記憶部に保存されている時間的に連続の複数の重複部分の重複部形状情報を比較し重複部形状の時間的な変化量を検出する変化量検出部と、変化量検出部で検出された変化量から未来の重複部分の重複部形状情報を形成する重複部分予測部と、重複部分予測部で算出された未来の重複部分となる重複部形状部分に補正処理を実施する重複部補正処理部とを備え前記投影部は、重複部補正処理部の補正処理に基づき画像を投影する。【選択図】図１
2011205492.tif 000002
【特許請求の範囲】
【請求項１】
画像をスクリーンに投影する投影部と,
前記投影部がスクリーン上に投影された画像を、一定時間毎に撮影し画像情報として入力するための入力部と、
前記画像情報の中で、前記投影部でスクリーン上に投影された投影像と、他方の携帯端末の投影部から前期スクリーン上に投影された投影象とのつなぎ目部分に生じる投影像の重複部分を、重複部形状情報として検出する重複部分検出部と、
前記重複部形状情報を保存する記憶部と、
前記記憶部に保存されている時間的に連続の複数の重複部分の重複部形状情報を比較し、重複部形状の時間的な変化量を検出する変化量検出部と、
前記変化量検出部で検出された変化量から、未来の重複部分の重複部形状情報を形成する重複部分予測部と、
前記重複部分予測部で算出された未来の重複部分となる重複部形状部分に補正処理を実施する重複部補正処理部と、を備え
前記投影部は、前記重複部補正処理部の補正処理に基づき画像を投影する携帯端末。
【請求項２】
請求項１に記載の携帯端末であって、
前記重複部分予測部で予測した未来の重複部分の重複部形状情報と、時間的に前の重複部分の重複部形状情報を比較し、重複部形状の差分情報を検出する重複部分差分検出部を備え、
前記重複部補正処理部は、重複部分差分検出部で検出した差分の重複部形状部分の情報のみに補正処理を行う携帯端末。
【請求項３】
請求項１又は請求項２に記載の携帯端末であって、
請求項１の記載の各部のいずれかを有効とした時に、他方の携帯端末と通信する通信部を備え、
前記通信部で受信した情報から、他方の携帯端末が請求項１の携帯端末であると判明した場合に、自身の請求項１の機能を停止する携帯端末。
【請求項４】
請求項１から請求項３のいずれか一項に記載の携帯端末であって、
電池を備え、
前記電池を電源として動作する携帯端末。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、プロジェクタ付き携帯端末に関する。
【背景技術】
【０００２】
複数のプロジェクタを同時に投影し、一画面に見せる際に生じる重複部分を補正するシステムとして、特許文献１がある。特許文献１では、2つのプロジェクタを同時に投影し一画面に見せたときに、画面の重複部分を検出し、重複部分の映像を補正（重複部分の片方のプロジェクタからの投影をやめる、あるいは、片方のプロジェクタからの投影を単一色にする）する。
【０００３】
また、プロジェクタ出力の手ぶれを補正する技術として特許文献2がある。特許文献2では、カメラ付きのプロジェクタにおいて、カメラからのフレーム間情報から動きベクトルを算出し、それに基づき、プロジェクタに投射する画像を補正する。
【先行技術文献】
【特許文献】
【０００４】
【特許文献１】特開２００７−７９０２８号公報
【特許文献２】国際公開第２００６／０３３２４５号
【発明の概要】
【発明が解決しようとする課題】
【０００５】
携帯型の複数のプロジェクタを同時に投影し、一画面に見せる際に生じる重複部分を補正する際に、特許文献１の従来技術では、複数のプロジェクタが未固定（例えば、それぞれの携帯型プロジェクタをユーザが手で持っている状態）である場合、手ぶれなどの影響で変化する重複部分を検出するためには、常にカメラの入力画像から重複部分検出する必要があり、処理量が大きくなる。そのため、性能の低いプロセッサでは、処理しきれない可能性がある。また、処理量が多くなることで、消費電流が大きくなり電池の持ちが悪くなる可能性がある。
【０００６】
また、特許文献2の従来技術では、個々の携帯型プロジェクタの出力している画像のぶれは補正できるが、プロジェクタの出力範囲のぶれを補正していないため重複部分のぶれは補正できない。そのためユーザの重複部分の画像視認性が落ちる可能性がある。
【課題を解決するための手段】
【０００７】
本発明の携帯端末は、画像をスクリーンに投影する投影部と,前記投影部がスクリーン上に投影された画像を、一定時間毎に撮影し画像情報として入力するための入力部と、前記画像情報の中で、前記投影部でスクリーン上に投影された投影像と、他方の携帯端末の投影部から前期スクリーン上に投影された投影象とのつなぎ目部分に生じる投影像の重複部分を、重複部形状情報として検出する重複部分検出部と、前記重複部形状情報を保存する記憶部と、前記記憶部に保存されている時間的に連続の複数の重複部分の重複部形状情報を比較し、重複部形状の時間的な変化量を検出する変化量検出部と、前記変化量検出部で検出された変化量から、未来の重複部分の重複部形状情報を形成する重複部分予測部と、前記重複部分予測部で算出された未来の重複部分となる重複部形状部分に補正処理を実施する重複部補正処理部と、を備え前記投影部は、前記重複部補正処理部の補正処理に基づき画像を投影する構成を有する。
【０００８】
この構成により、複数の携帯端末が投影しているスクリーン上の重複部形状情報を検出する際に、一定時間毎に入力されたスクリーン上の画像情報を元に予測した重複部形状情報を補正処理に利用するため、常に入力部から撮影しその画像情報から重複部形状情報を検出する処理を行う必要がなくなる。つまり、本発明では、入力部と重複部分検出部の機能を停止できる区間が生じることとなり、処理量を減少させることができる。これにより、性能の低いプロセッサでも、手ぶれなどにより重複部分が変動する場合にもスムーズに重複部分の補正が実施できるようになり、また、省電力の向上にも繋がる。
【０００９】
また、本発明の携帯端末は、さらに、前記重複部分予測部で予測した未来の重複部分の重複部形状情報と、時間的に前の重複部分の重複部形状情報を比較し、重複部形状の差分情報を検出する重複部分差分検出部を備え、前記重複部補正処理部は、重複部分差分検出部で検出した差分の重複部形状部分の情報のみに補正処理を行う構成を有する。
【００１０】
この構成により、未来の投影画像に対して、すでに重複部分の補正処理を実施している部分の処理はせずに、新しく重複部分となると予測している箇所に対して補正処理を実施するため処理量が減る。これにより、性能の低いプロセッサでも、手ぶれなどにより重複部分が変動する場合にもスムーズに重複部分の補正が実施できるようになり、また、省電力の向上にも繋がる。
【００１１】
また、本発明の携帯端末は、さらに、各部のいずれかを有効とした時に、他方の携帯端末と通信する通信部を備え、前記通信部で受信した情報から、他方の携帯端末が本発明の携帯端末であると判明した場合に、自身の機能を停止する。
【００１２】
この構成により、自端末と他端末が共に、本発明の携帯端末の機能を搭載し有効にしていた場合、投影画像の重複部分に対する補正処理をお互いの端末で実施することとなり、処理の無駄が発生する。後から機能を有効にした自端末の本発明の機能を停止、あるいは、起動しないことで処理の無駄を防ぐ。
【００１３】
また、本発明の携帯端末は、さらに、電池を備え、前記電池を電源として動作する構成を有する。
【００１４】
この構成により、画像をスクリーンに投影する投影部を備え、電池を電源として動作する携帯端末において、投影する画像の処理において省電力化されることで、電池で連続して動作する時間を長くすることができる。
【発明の効果】
【００１５】
本発明の携帯端末によれば、携帯型の複数のプロジェクタを同時に投影し、一画面に見せる際に生じる重複部分を補正する際に、性能の低いプロセッサでも、手ぶれなどにより重複部分が変動する場合にスムーズに重複部分の補正が実施できるようになり、また、省電力の向上にも繋がる。
【図面の簡単な説明】
【００１６】
【図１】実施の形態１における携帯端末の構成を示すブロック図
【図２】実施の形態１における携帯端末の動作を説明するフローチャート
【図３】実施の形態１における携帯端末の使用状況例を示す図
【図４】実施の形態１における重複部分の時間的変化を模式的に示す図
【図５】実施の形態１の変化量検出部、重複部分予測部の動作を模式的に示す図
【図６】実施の形態２における携帯端末の構成を示すブロック図
【図７】実施の形態２における携帯端末の動作を説明するフローチャート
【図８】実施の形態２の時間経過による重複部分の変化部の様子を模式的に示す図
【図９】実施の形態３における携帯端末の構成を示すブロック図
【図１０】実施の形態３における携帯端末の動作を説明するフローチャート
【図１１】実施の形態４における携帯端末の構成を示すブロック図
【発明を実施するための形態】
【００１７】
以下本発明の実施の形態１から４について、図面を参照しながら説明する。  なお、各実施の形態において、本発明の携帯端末は、プロジェクタ付き携帯電話して説明するが、ＰＤＡなど、他の機器に構成されるものであってももちろん構わない。
（実施の形態１)
図１は、実施の形態１における携帯端末の構成を示すブロック図である。
【００１８】
実施の形態１における携帯端末１は、投影部２、入力部３、重複部分検出部４、記憶部５、変化量検出部６、重複部分予測部７、および重複部補正処理部８から構成されている。
【００１９】
投影部２は、重複部補正処理部８で処理された画像をスクリーンに投影する。
【００２０】
入力部３は、例えばカメラであり、投影部２でスクリーンに投影している投影画像を一定時間毎（例えば、カメラの2フレーム分の時間毎）に取得する。この投影画像は、他方の携帯端末の投影部から投影されている投影画像との重複部分を含む。
【００２１】
重複部分検出部４は、入力部３により取得した投影画像情報から、例えば、輝度成分の変化が離散的に大きくなっている部分を検出し、それを重複部形状情報として検出する。
記憶部５は、重複部分検出部４で検出した重複部分形状情報を、保存する。
【００２２】
変化量検出部６は、記憶部５から時間的前の投影画像に関する重複部形状情報を取得し、現在の重複部分形状情報との差分から、重複部分形状の時間的変化量を算出する。
【００２３】
重複部分予測部７は、例えば、変化量検出部６で検出した重複部分形状の時間的変化量と、現在の重複部分形状を加算し、現時点より、未来の重複部分形状情報を算出する。
重複部補正処理部８は、これから投影部２で投影しようとしている画像に対し、重複部分予測部７で算出した重複部分形状部分に補正処理（例えば、輝度成分現象処理、あるいは、輝度成分を0にする処理）を実施する。
図２は、実施の形態１における携帯端末１の動作を説明するフローチャートである。
【００２４】
まず、スクリーンに投影されている投影画像を、入力部２（例えば、カメラ）で一定時間毎（例えば、カメラの2フレーム分の時間毎）に投影画像を入力する。 (ステップS１)。
次に、入力部３で取得した投影画像から、他方の携帯端末の投影部から投影されている投影画像との重複部分を検出（例えば、輝度成分の変化が離散的に大きくなっている部分を検出し、それを重複部形状情報として検出）し、重複部分があるかを判定する。（ステップ２）。
ここで、重複部分があると検出した場合（ステップＳ２、Ｙｅｓ）、検出した重複部分形状情報を記憶部５に保存する。（ステップＳ３）。
次に、記憶部５から時間的前の投影画像に関する重複部形状情報を取得する。（ステップＳ４）。
次に、変化量検出部６で、記憶部５から取得した時間的前の投影画像に関する重複部形状情報と、現在の重複部分形状情報との差分から、重複部分形状の時間的変化量を検出する。  （ステップＳ５）。
次に、重複部分予測部７で、例えば、変化量検出部６で検出した重複部分形状の時間的変化量と、現在の重複部分形状を加算し、現時点より、未来の重複部分形状情報を算出する。（ステップＳ６）
次に、重複部補正処理部８で、これから投影部２で投影しようとしている画像に対し、重複部分予測部７で算出した重複部分形状部分に補正処理（例えば、輝度成分現象処理、あるいは、輝度成分を0にする処理）を実施する。（ステップＳ７）
次に、投影部２で、重複部補正処理部８で重複部分形状部分を補正した次投影予定画像を投影する。（ステップＳ８）
一方、重複部分があると検出しなかった場合（ステップＳ２、Ｎｏ）、重複部補正処理部８で重複部分形状部分を補正していない次投影予定画像を投影する。（ステップＳ８）
図３は、実施の形態１の携帯端末１の使用状況例を示す図である。
実施の形態１の携帯端末１の使用状況例として、本発明の携帯端末１２の投影画像１３と、他方の携帯端末１５の投影画像１６を、同一スクリーン１４上に同時に投影している使用状況を想定している。このとき、投影画像１３と、投影画像１６の重複部分１７が発生し、この重複部分１７は、投影画像１３と投影画像１６を、例えば、一つ画像とみたときに、使用者から見ると画像として不連続となり、視認性が落ちる。そのため、重複部分１７には補正処理が必要となる。
図４は、図３で説明した重複部分の時間的変化を模式的に示す図である。
例えば、開始からＮ秒時の実施の形態１の携帯端末１２の投影画像１８と、他方の携帯端末１５の投影画像１９の重複部分２０は、使用者の手ぶれや、携帯端末の設置場所が振動した際を開始からＮ+1秒時とすると、このとき、実施の形態１の携帯端末１２の投影画像２０と、他方の携帯端末１２の投影画像２３の重複部分２２は、時間的に前の重複部分２０と比較し、重複部分の形状が変化する。
図５は、実施の形態１の携帯端末１の変化量検出部６、重複部分予測部７の動作を模式的に示す図である。
携帯端末１の変化量検出部６において、例えば、現在時（Ｎ＋１秒時）としたときの重複部分形状２５と、時間的に前（Ｎ秒時）の重複部分形状２４との差分から、横方向の時間的変化量ΔＸを算出する。重複部分予測部７において、このΔＸと、現在時（Ｎ＋１）の重複形状部分の横方向の長さを加算し未来時（Ｎ＋２秒時）の重複部分形状を算出する。
【００２５】
この実施の形態１により、複数の携帯端末が投影しているスクリーン上の重複部形状情報を検出する際に、一定時間毎に入力されたスクリーン上の画像情報を元に予測した重複部形状情報を補正処理に利用するため、常に入力部から撮影しその画像情報から重複部形状情報を検出する処理を行う必要がなくなる。つまり、入力部と重複部分検出部の機能を停止できる区間が生じることとなり、処理量を減少させることができる。これにより、性能の低いプロセッサでも、手ぶれなどにより重複部分が変動する場合にもスムーズに重複部分の補正が実施できるようになり、また、省電力の向上となる。
（実施の形態２）
図６は、本発明の実施の形態２における携帯端末の構成を示すブロック図である。
実施の形態２における携帯端末は、実施の形態１の携帯端末の構成(図１)に対し、さらに、時間的に前の重複部分形状と情報と、現在の重複部分形状情報との差分を検出する重複部分差分検出部９を備えることを特徴とする。
図７は、実施の形態２における携帯端末の動作を説明するフローチャートである。
実施の形態２におけるフローチャートは、実施の形態１の動作を説明するフローチャート（図２）に対し、ステップS6の重複部分形状に変化量を加算制御の加算結果と、時間的前の重複部分形状と差分を検出する予測重複部形状差分抽出（STEP9）と、S7の予測重複部分に補正処理制御に代わり、予測重複部形状差分抽出（STEP9）結果である予測重複部分差分形状に対してのみ補正処理を実施する予測差分部分補正処理（Ｓ１０）を、新たに備えていることを特徴とする。
図８は、時間経過により、開始からN秒時の重複部分２９が、開始から、例えば、N秒+１秒時に、新たに重複部分が発生３３している様子を模式的に示す。
【００２６】
この実施の形態２により、この構成により、未来の投影画像に対して、すでに重複部分の補正処理を実施している部分の処理はせずに、新しく重複部分となると予測している箇所に対して補正処理を実施するため処理量が減る。これにより、性能の低いプロセッサでも、手ぶれなどにより重複部分が変動する場合にもスムーズに重複部分の補正が実施できるようになり、また、省電力の向上にも繋がる。
（実施の形態３）
図９は、本発明の実施の形態３における携帯端末の構成を示すブロック図である。
実施の形態３における携帯端末は、実施の形態１の携帯端末の構成(図１)に対し、さらに、各部のいずれかを有効とした時に、他方の携帯端末が本発明の携帯端末であると判別するために、他方の携帯端末と通信する通信部１０を備えることを特徴とする。
図１０は、実施の形態３における携帯端末の動作を説明するフローチャートである。
実施の形態３におけるフローチャートは、まず、携帯端末のプロジェクタ機能を起動する（STEP11）。その後、通信部１０により、他方の携帯端末を通信し、他方の携帯端末が、本発明の携帯端末であるの情報を取得（STEP１２）する。そして取得結果から、他方の携帯端末が、本発明の携帯端末であるかどうか判別（STEP１３）する。
ここで、他方の携帯端末が、本発明の携帯端末であると判明した場合（ステップＳ１３、Ｙｅｓ）、自端末の本発明の携帯端末の機能を停止する。
一方、他方の携帯端末が、本発明の携帯端末でないと判明した場合（ステップＳ１３、Ｎｏ）なにもしない。（自端末の本発明の携帯端末の機能は有効のまま）
この実施の形態３により、他端末が、本発明の携帯端末の機能を搭載し有効にしていた場合に、後から機能を有効にした自端末の本発明の機能を停止、あるいは、起動しないことで、両方の端末で投影画像の重複部分に対する補正処理を実施するという処理の無駄を防ぐことができる。
（実施の形態４）
図１１は、本発明の実施の形態４における携帯端末の構成を示すブロック図である。
実施の形態４における携帯端末は、実施の形態１の携帯端末の構成(図１)に対し、さらに、電池１１を備え、前記電池を電源として動作する構成を備えることを特徴とする。
この実施の形態４により、この構成により、画像をスクリーンに投影する投影部を備え、電池を電源として動作する携帯端末において、投影する画像の処理において省電力化されることで、電池で連続して動作する時間を長くすることができる。
【産業上の利用可能性】
【００２７】
本発明の携帯端末は、携帯型の複数のプロジェクタを同時に投影し、一画面に見せる際に生じる重複部分を補正する際に、性能の低いプロセッサでも、手ぶれなどにより重複部分が変動する場合にスムーズに重複部分の補正が実施できるようになり、また、省電力の向上にも繋がる。
【符号の説明】
【００２８】
１    携帯端末
２    投影部
３    入力部
４    重複部分検出部
５    記憶部
６    変化量検出部
７    重複部分予測部
８    重複部分補正処理部
９    重複部分差分検出部
１０    通信部
１１    電池
１２    携帯端末（自端末）
１３、１８、２１、２７、３０    自端末の投影画像
１４    スクリーン
１５    携帯端末（他端末）
１６、１９、２３、２８、３１    他端末の投影画像
１７、２０、２２、２４、２５、２６、２９、３４    重複部分
３３    増加した重複部分
【図１】
2011205492.tif 000003
【図２】
2011205492.tif 000004
【図３】
2011205492.tif 000005
【図４】
2011205492.tif 000006
【図５】
2011205492.tif 000007
【図６】
2011205492.tif 000008
【図７】
2011205492.tif 000009
【図８】
2011205492.tif 000010
【図９】
2011205492.tif 000011
【図１０】
2011205492.tif 000012
【図１１】
2011205492.tif 000013