(57)【要約】【課題】  構成の大型化やコストを上昇させることなく、例えば低照度環境下でスクリーン上に映し出される投影映像のぶれを効果的に補正可能とする。【解決手段】  プロジェクタ１１は、スクリーン上に映し出される投影基画像を表示する液晶パネルと、その液晶パネルに表示された投影基画像をスクリーン上に投影させる投影光学系とを備えている。加速度センサ１６とジャイロセンサ１７は、プログラム１１を内蔵した携帯電話端末へ加わる物理的な振動を検知する。ＣＰＵ１０は、主画像の周囲に、スクリーン上の投影環境に応じた枠画像（例えば暗い環境では黒や灰色の枠画像）を付加した投影基画像を生成し、振動を相殺する方向に液晶パネル上で投影基画像を移動させるように制御する。【選択図】  図１
2010102064.tif 000002
【特許請求の範囲】
【請求項１】
スクリーン上に映し出される投影基画像を表示する投影基画像表示パネル部と、その投影基画像表示パネル部に表示された投影基画像をスクリーン上に投影させる投影光学系とを備えたプロジェクタ部と、
上記プロジェクタ部に対して加わる物理的な振動を検知する振動検出部と、
投影対象物画像を含む主画像の周囲に、スクリーン上の投影環境に応じた所定の枠画像を付加して、上記投影基画像を生成する投影基画像生成部と、
上記投影基画像を上記投影基画像表示パネル部に表示させる際に、上記振動検出部にて検知された振動を相殺する方向に、上記投影基画像を上記投影基画像表示パネル部上で移動させる投影基画像表示制御部と、
を有する前面投影型映像表示装置。
【請求項２】
上記投影基画像生成部は、上記スクリーン上の投影環境に応じた所定の枠画像として、当該スクリーンの色と明るさの少なくとも何れか一方に略々一致した色と明るさの枠画像を、上記主画像の周囲に付加する請求項１記載の前面投影型映像表示装置。
【請求項３】
上記投影基画像生成部は、上記スクリーンの色と明るさの少なくとも何れか一方を検出し、その検出した色と明るさに応じて上記枠画像の色と明るさを決定する請求項２記載の前面投影型映像表示装置。
【請求項４】
スクリーン上に映し出される投影基画像を表示する投影基画像表示パネル部とその投影基画像表示パネル部に表示された投影基画像をスクリーン上に投影させる投影光学系とを備えたプロジェクタ部に対して加わる物理的な振動を、振動検出部が検知するステップと、
投影基画像生成部が、投影対象物画像を含む主画像の周囲に、スクリーン上の投影環境に応じた所定の枠画像を付加して、上記投影基画像を生成するステップと、
上記投影基画像を上記投影基画像表示パネル部に表示させる際に、投影基画像表示制御部が、上記振動検出部にて検知された振動を相殺する方向に、上記投影基画像を上記投影基画像表示パネル部上で移動させるステップと、
を有する投影画像補正方法。
【請求項５】
スクリーン上に映し出される投影基画像を表示する投影基画像表示パネル部とその投影基画像表示パネル部に表示された投影基画像をスクリーン上に投影させる投影光学系とを備えたプロジェクタ部に対して加わる物理的な振動を、振動検出部に検知させる振動検出制御部と、
投影対象物画像を含む主画像の周囲に、スクリーン上の投影環境に応じた所定の枠画像を付加して、上記投影基画像を生成する投影基画像生成部と、
上記投影基画像を上記投影基画像表示パネル部に表示させる際に、上記振動検出部にて検知された振動を相殺する方向に、上記投影基画像を上記投影基画像表示パネル部上で移動させる投影基画像表示制御部として、
前面投影型映像表示装置を動作させる投影画像補正プログラム。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、例えば携帯電話端末等に内蔵或いは外部接続可能な超小型の前面投影型映像表示装置、投影画像補正方法、及び、投影画像補正プログラムに関する。
【背景技術】
【０００２】
従来より、前面投影型映像表示装置（以下、プロジェクタ装置と表記する。）は非常に大型の据え置き型装置が主流であったが、近年は、例えば携帯電話端末等に内蔵若しくは接続可能なサイズにまで小型化が進んでいる。
【０００３】
プロジェクタ装置は、一般に設置台上に置かれた状態で使用され、その設置位置から或る程度離れた場所に設けられたスクリーン上に画像を投影するようになされている。このため、例えば設置台やプロジェクタ装置自体に振動が加えられると、上記離れた場所のスクリーン上に投影される映像がぶれることになる。但し、従来の非常に大型の据え置き型プロジェクタ装置の場合は、自重が非常に大きく、また脚部等には防振部材が設けられていることが多いため、上記振動が例えば微細なものであれば、その振動により投影映像がぶれるなどの悪影響を受けることは殆ど無い。
【０００４】
なお、従来の大型のプロジェクタ装置の場合は、当該装置の光学系の光軸とクリーン投影面との間の角度差、つまり、光軸が投影面に対して略々垂直な関係を有さない場合に投影映像が台形になってしまうということが主な問題となっている。このように投影映像形状が台形になるという問題を解決するための技術として、従来より、特開２００６−１５７３２９号の公開特許公報（特許文献１）や、特開２００５−７９９３９号の公開特許公報（特許文献２）などに開示されている技術が知られている。上記特許文献１には、投写型映像表示装置の横方向に働く加速度を検出する複数個の加速度センサを用い、それら加速度センサによる複数の加速度検出値から装置の傾き角度を算出し、その算出した傾き角度に基づいて投写映像の台形歪み補正を行う技術が開示されている。また上記特許文献２には、水平面に対するプロジェクタ装置の設置角度を複数回検出し、その複数回検出した信号の中で出現頻度が最も高いデータを求め、そのデータに対応する台形歪み補正データを用いて台形歪み補正を行う技術が開示されている。すなわち、これら特許文献１，特許文献２には、プロジェクタ装置と投影面との角度差により生じる投影映像形状の矩形補正（台形補正）と、同補正時の外乱による異常動作の抑制といった静的な映像の歪みを補正する技術が開示されている。
【０００５】
一方で、携帯電話端末に内蔵若しくは接続されるような超小型のプロジェクタ装置の場合は、軽量であるため微細な振動でも投影映像にぶれが生ずるなど、外乱の影響を非常に受け易い。また、この場合のプロジェクタ装置は、あくまでも携帯電話端末の付加的・簡易的な一つの機能として搭載されることになると考えられる。このため、当該携帯電話端末の筐体形状は、携帯電話端末としてのデザインが優先されることになり、例えば、プロジェクタ装置として使用される際に特に安定した設置が可能となるように配慮した筐体形状が採用されることは少ないと考えられる。さらに、携帯電話端末のプロジェクタ装置は、簡易的に利用されることが多いと考えられ、このような簡易的な利用の場合、その設置場所は必ずしも安定した場所であるとは限らない。すなわち例えば、携帯電話端末の使用者の手や膝の上に置かれたり、鞄の上に置かれた状態のように、非常に不安定な場所に置かれた状態で利用される可能性がある。このような不安定な場所に置かれた状態で利用された場合には、振動等の外乱により常に投影映像がぶれた状態となり易く、非常に見難くなるという問題が発生すると考えられる。
【０００６】
なお、携帯電話端末にプロジェクタ装置を内蔵若しくは接続した場合において、上述のようなぶれを補正する技術としては、特開２００７−３６８４３号の公開特許公報（特許文献３）や国際公開第２００６／０３３２４５号パンフレット（特許文献４）に開示されている技術が知られている。上記特許文献３には、撮影と投影に兼用される兼用レンズのレンズ群を変位させることで振れ補正を可能とした投影表示機能一体型カメラモジュールを備え、携帯電話機に加えられた振れの検出信号に基づいて、上記兼用レンズのレンズ群を移動させることで投影像の振れを補正可能とした技術が開示されている。また、特許文献４には、振動等の外乱を検出してぶれを求め、プロジェクタモジュールの液晶パネル上に表示される画像を、上記検出したぶれに応じて移動させ、その液晶パネル上の画像を投影レンズを介してスクリーン上に投影させるような、ぶれ補正技術が開示されている。その他、特許文献４には、変形例として、ジャイロセンサや角速度センサ、加速度センサ等を用いてぶれを検出することについても開示されている。
【０００７】
【特許文献１】特開２００６−１５７３２９号公報（図５）
【特許文献２】特開２００５−７９９３９号公報（図１）
【特許文献３】特開２００７−３６８４３号公報（図４）
【特許文献４】国際公開第２００６／０３３２４５号パンフレット（図２）
【発明の開示】
【発明が解決しようとする課題】
【０００８】
上述したように、携帯電話端末に内蔵若しくは接続されるような超小型のプロジェクタ装置の場合、特許文献３や特許文献４のように、振動等の外乱によるぶれを補正することが必要になる。
【０００９】
但し、例えば特許文献３のように、振動等の外乱に応じてレンズ群を移動させることで光学的にぶれを補正する場合、光学系の構成が大型化することになる。このように光学系が大型化すると、薄型化，小型化が非常に重要な要素となっている携帯電話端末への適用には不向きとなり、現実的ではない。
【００１０】
一方、例えば特許文献４のように、プロジェクタモジュールの液晶パネル上に表示される画像をぶれに応じて移動させるような電子的なぶれ補正の方式を採用すれば、光学系の大型化等については防ぐことができると考えられる。
【００１１】
しかしながら、特許文献４では、振動等の外乱によるぶれを、例えばカメラ機能により撮影した画像から検出するようになされている。すなわち、特許文献４に記載の携帯電話端末は、カメラ機能とプロジェクタ機能を搭載しており、スクリーン上に投影された映像をカメラにより撮影し、その撮影画像から動きベクトルを検出してぶれを求めるようになされている。また、スクリーンへの映像投影は、一般に低照度環境下で行われる。そのような低照度環境下において撮影された画像は画質が悪くなり易く、このため、当該低画質の画像からぶれ（具体的には動きベクトル）を正確に検出することは非常に難しい。なお、特許文献４には、変形例として、例えばジャイロセンサや角速度センサ、加速度センサ等により振動等の外乱を検出することが記載されている。このようにジャイロセンサや加速度センサ等により振動を検出する場合には、低照度環境下でも或る程度正確なぶれ検出が可能になると考えられる。
【００１２】
また、プロジェクタ装置による映像表示は、一般に、周囲環境照度よりも明るい画像をスクリーン上に投影することにより行われる。このような環境において、上述した特許文献４のように、プロジェクタモジュールの液晶パネル上に表示される画像を移動させるような電子的なぶれ補正を行った場合、投影映像内の例えば建物画像や人物画像等の投影対象物画像自体は略々静止した状態でスクリーンに映し出されることになるが、例えば投影映像全体としてみた場合には、低照度環境下のスクリーン上で明るく映し出されている投影画像全体が、上記電子的なぶれ補正に伴って細かく揺動することになり、非常に見辛い画像になってしまう。
【００１３】
本発明は、このような実情に鑑みて提案されたものであり、構成の大型化やコストを上昇させることなく、また例えば低照度環境下等でスクリーン上に映し出される投影映像のぶれを視覚上見え難くして、見易い投影映像を実現する前面投影型映像表示装置、投影画像補正方法、及び、投影画像補正プログラムを提供することを目的とする。
【課題を解決するための手段】
【００１４】
本発明は、スクリーン上に映し出される投影基画像を表示する投影基画像表示パネル部と、その投影基画像表示パネル部に表示された投影基画像をスクリーン上に投影させる投影光学系とを備えたプロジェクタ部を有する前面投影型映像表示装置である。そして、本発明の前面投影型映像表示装置は、プロジェクタ部への物理的な振動を検知する振動検出部と、スクリーン上の投影環境に応じた所定の枠画像を主画像の周囲に付加した投影基画像を生成する投影基画像生成部と、投影基画像表示パネル部上の投影基画像を、振動を相殺する方向へ移動させる投影基画像表示制御部とを有する。これにより、本発明は上述した課題を解決する。
【００１５】
すなわち、本発明によれば、振動を相殺する方向に、投影基画像表示パネル部上で投影基画像を移動させることによる電子的なぶれ補正を行う。また、本発明によれば、主画像の周囲に、スクリーン上の投影環境に応じた枠画像を付加することにより、電子的なぶれ補正による枠画像の揺動を、スクリーン上で目立たなくしている。
【発明の効果】
【００１６】
本発明においては、振動を相殺する方向に、投影基画像表示パネル部上で投影基画像を移動させることによる電子的なぶれ補正を行うことにより、光学的なぶれ補正に比べて構成の大型化やコストの上昇を抑えている。また、本発明においては、スクリーン上の投影環境に応じた枠画像を、主画像の周囲に付加しているため、電子的なぶれ補正に伴って投影基画像全体が細かく揺動している場合でも、枠画像部分の揺動はスクリーン上で目立たず、一方、主画像は電子的なぶれ補正により略々静止する。したがって、本発明によれば、見やすい投影映像を実現可能となる。
【発明を実施するための最良の形態】
【００１７】
以下、図面を参照しながら、本発明の一実施形態について説明する。
【００１８】
なお、本実施形態では、本発明が適用される一例として、前面投影型映像表示装置を備えた携帯電話端末を挙げるが、勿論、ここで説明する内容はあくまで一例であり、本発明はこの例に限定されないことは言うまでもない。なお、本実施形態における前面投影型映像表示装置は、携帯電話端末に内蔵された機能であってもよいし、コネクタ等を介して携帯電話端末に接続される超小型の前面投影型映像表示装置であっても良い。
【００１９】
［携帯電話端末の概略構成］
図１には、本実施形態の携帯電話端末の概略構成を示す。
【００２０】
図１において、プロジェクタ１１は、本実施形態の携帯電話端末に内蔵されたプロジェクタ装置である。当該プロジェクタ１１は、前面投影型であり、投影されるべき基画像を表示する液晶パネル、その液晶パネルに投影光を照射する光源、及び、液晶パネル上に表示された投影基画像をスクリーン等に投影させるための投影光学系等を備えている。なお、プロジェクタ装置の具体的構成としては、投影方式により大別して液晶方式とＤＬＰ（Digital Light Processing）方式の２種類を挙げることができ、本発明実施形態のプロジェクタ１１はそれらの何れの方式であっても良い。
【００２１】
メインＬＣＤ(Liquid Crystal Display）１２は、本実施形態の携帯電話端末に搭載されているメイン液晶ディスプレイである。ＬＣＤＣ１３は、上記メインＬＣＤ１２の動作及び表示等を制御する液晶ディスプレイコントローラである。
【００２２】
ＬＥＤ（発光ダイオード）１４は、例えば着信ランプやキーパット４５の照明ランプなど、本実施形態の携帯電話端末に備えられている各種照明光源である。ＬＥＤドライバ１５は、それら複数のＬＥＤ１４を駆動および制御する。
【００２３】
加速度センサ１６は、本実施形態の携帯電話端末に例えば物理的な振動が加えられた時に、その振動の加速度の大きさ及び向きを検出する。この加速度センサ１６の検出信号はＣＰＵ１０へ送られる。
【００２４】
ジャイロセンサ１７は、本実施形態の携帯電話端末に例えば物理的な振動が加えられた時に、その振動による回転方向の角速度と回転角度を検出する。このジャイロセンサ１７の検出信号はＣＰＵ１０へ送られる。
【００２５】
照度センサ１８は、本実施形態の携帯電話端末の周囲環境の明るさを検出する。この照度センサ１８の検出信号はＣＰＵ１０へ送られる。
【００２６】
レシーバ１９は、本実施形態の携帯電話端末にて音声通話等が行われている時に、受話音声を出力するためのスピーカである。
【００２７】
マイクロホン２０は、本実施形態の携帯電話端末にて音声通話等が行われている時に、送話音声を入力するための音声入力デバイスである。
【００２８】
外部インターフェース（Ｉ／Ｆ）２１は、各種外部コネクタとその外部コネクタとの間で信号等を行うための外部接続部からなる。なお、上記外部コネクタにはいわゆるＵＳＢ２．０（Universal Serial Bus 2.0）規格のコネクタが含まれており、このため本実施形態の携帯電話端末はＵＳＢ２．０コントローラ２２も備えている。
【００２９】
ＵＳＩＭカードスロット２３は、加入者情報（契約者情報）等が記憶されたいわゆるＵＳＩＭ（Universal Subscriber Identity Module）カードが装填されるＩＣカードスロットである。
【００３０】
赤外線通信モジュール２４は、赤外線を用いて情報通信を行うための通信デバイスである。
【００３１】
振動モータ２５は、本実施形態の携帯電話端末に振動を発生させるためのいわゆるバイブレータである。
【００３２】
バッテリ２６は、本実施形態の携帯電話端末の各部で使用する電力用の電源である。
【００３３】
周辺ＩＣ＋電源ＩＣ２７は、上記ＵＳＩＭカードスロット２３、赤外線通信モジュール２４、振動モータ２５、バッテリ２６、外部インターフェース２１と接続されており、それら各部の制御や信号処理の他、バッテリ２６の電源の供給制御などを行う。
【００３４】
メインカメラ３１は、本実施形態の携帯電話端末に搭載されたカメラ部であり、撮影光学系や撮像デバイス等からなる。フラッシュ（フラッシュライト）３３は、カメラによる撮影時の撮影補助光を発光するための光源ランプである。フラッシュライトコントローラ３２は、メインカメラ３１による撮影に連動して、フラッシュ３３の発光を制御する。
【００３５】
サブカメラ３４は、上記メインカメラ３１とは別に設けられたカメラ部であり、一例として、いわゆる自分撮り時にユーザ自身を撮影したり、テレビ電話による通話の際にユーザ自身を撮影する際などに用いられる。
【００３６】
ＲＦ回路３５は、本実施形態の携帯電話端末が携帯電話網の基地局と通信する際の無線通信用回路である。アンテナ３６は、本実施形態の携帯電話端末が基地局と無線通信を行う際の無線通信アンテナである。
【００３７】
非接触通信カードコントローラ３７は、非接触通信ＩＣカードとの間でいわゆる電磁誘導方式により信号通信を行うための各種制御及び信号処理を行う。非接触通信カードアンテナ３８は、上記電磁誘導方式による非接触通信のためのアンテナである。
【００３８】
ブルートゥース（Ｂｌｕｅｔｏｏｔｈ：登録商標）コントローラ３９は、いわゆるブルートゥース方式により無線通信を行うための各種制御及び信号処理を行う。ブルートゥースアンテナ４０は、上記ブルートゥース方式の無線通信のためのアンテナである。
【００３９】
デジタルＴＶチューナ４１は、いわゆるデジタルテレビジョン放送用のチューナである。デジタルＴＶアンテナ４２は、当該デジタルテレビジョン放送電波を受信するためのアンテナである。
【００４０】
メモリカードスロット４４は、例えばいわゆるＳＤ（Secure Digital）カード等の外部メモリカードが着脱されるスロットである。メモリカードコントローラ４３は、メモリカードスロット４４に装填されたメモリカードに対するデータの書き込み／読み出し等の制御及び信号処理を行う。
【００４１】
キーパッド４５は、本実施形態の携帯電話端末に搭載された各種キーと、それら各キーがユーザにより操作された時のキー出力信号を生成する。
【００４２】
内部メモリ４６は、例えばＤＤＲ  ＳＤＲＡＭ（Double Data Rate SDRAM）４７と、ＮＡＮＤ型フラッシュメモリ（NAND-type flash memory）４８とを有してなる。上記ＮＡＮＤ型フラッシュメモリ４８には、ＯＳ（Operating System）のプログラムやＣＰＵ１０が各部を制御するための制御プログラム、本発明にかかる投影画像補正プログラムを含む各種のアプリケーションプログラム、圧縮符号化された楽曲・動画像・静止画データコンテンツの他、各種の設定値、フォントデータ、各辞書データ、機種名情報や端末識別情報などが記憶される。ＤＤＲ  ＳＤＲＡＭ４７は、ＣＰＵ１０が各種のデータ処理や演算を行う際の作業領域として、随時データを記憶する。
【００４３】
音声チップ４９は、例えば音楽再生などの信号処理を行うためのＩＣ回路である。当該音声チップ４９には、ステレオ音声出力用の右スピーカ５０と左スピーカ５１が接続されている。
【００４４】
ＣＰＵ（中央処理ユニット）１０は、通信制御、音声処理及びその制御、画像処理及びその制御、その他各種信号処理や各部の制御等を行う。また、ＣＰＵ１０は、内部メモリ４６に蓄積されている各種の制御プログラムやアプリケーションプログラムの実行及びそれに付随する各種データ処理等を行う。特に本実施形態の場合、ＣＰＵ１０は、内部メモリ４６に格納されている本発明にかかる投影画像補正プログラムを実行することにより、プロジェクタ１１による映像投影時に、後述するような投影基画像の生成や、振動等の外乱を相殺する方向へ液晶パネル上で投影基画像を移動させる電子的なぶれ補正処理及び制御等を行う。なお、プロジェクタ１１の映像投影時の投影基画像の生成やぶれ補正処理等の詳細については後述する。
【００４５】
その他、図１には図示を省略しているが、本実施形態の携帯電話端末は、一般的な携帯電話端末に設けられる各構成要素についても当然ながら備えている。
【００４６】
［プロジェクタによる映像投影］
図２には、上述したようなプロジェクタ１１を内蔵した携帯電話端末１によりスクリーン３上に画像４が投影されている状態の一例を示す。なお、図２に例示した投影画像４は、建物画像等の投影対象物画像５が含まれる画像であるとする。
【００４７】
ここで、上記プロジェクタ１１を内蔵した携帯電話端末１に対して振動等の外乱が加えられ、その振動によるぶれを何ら補正せず、そのまま投影基画像をスクリーン３上に投影したとする。
【００４８】
この場合、スクリーン３上の投影画像４は、例えば図３〜図６に示すように、外乱に応じてぶれた画像となる。また、携帯電話端末１に加わる振動としては、図２に示すように、当該端末１がＸ，Ｙ，Ｚの各座標軸方向に振れる振動と、当該端末１がピッチ（pitch），ヨー（yaw），ロール（roll）軸回り方向に回転する振動とが考えられる。なお、図３〜図６中の波線で示す投影画像は、ぶれた状態を模式的に表したものである。
【００４９】
すなわち図３には、端末１に対してＸ座標軸方向若しくはヨー軸回り方向の振動が加わった場合のスクリーン３上の投影画像４を示している。この図３に示すように、端末１に対してＸ座標軸方向若しくはヨー軸回り方向の振動が加わった場合、スクリーン３上の投影画像４は、図中矢印Ｖｘｙ方向に振動した画像、すなわち例えば投影画像４Ａｘｙ，４Ｂｘｙ，４Ｃｘｙのように揺れ動いた画像となる。
【００５０】
また、図４には、端末１に対してＹ座標軸方向若しくはピッチ軸回り方向の振動が加わった場合のスクリーン３上の投影画像４を示している。この図４に示すように、端末１に対してＹ座標軸方向若しくはピッチ軸回り方向の振動が加わった場合、スクリーン３上の投影画像４は、図中矢印Ｖｙｐ方向に振動した画像、すなわち例えば投影画像４Ａｙｐ，４Ｂｙｐ，４Ｃｙｐのように揺れ動いた画像となる。
【００５１】
また、図５には、端末１に対してロール軸回り方向の振動が加わった場合のスクリーン３上の投影画像４を示している。この図５に示すように、端末１に対してロール軸回り方向の振動が加わった場合、スクリーン３上の投影画像４は、図中矢印Ｖｒ方向に振動した画像、すなわち例えば投影画像４Ａｒ，４Ｂｒ，４Ｃｒのように回転した画像となる。
【００５２】
さらに、図６には、端末１に対してＺ座標軸方向の振動が加わった場合のスクリーン３上の投影画像４を示している。この図６に示すように、端末１に対してＺ座標軸方向の振動が加わった場合、スクリーン３上の投影画像４は、図中矢印Ｖｚ方向に振動した画像、すなわち例えば投影画像４Ａｚ，４Ｂｚ，４Ｃｚのように拡大・縮小する画像となる。
【００５３】
なお、これら図２〜図６の例では、携帯電話端末１にプロジェクタ１１が内蔵された場合を説明したが、例えば超小型の外付け型プロジェクタ装置を用いた場合において、その外付け型プロジェクタ装置に振動が加わった場合にも、上述同様にぶれが発生することになる。
【００５４】
［映像投影時のぶれ補正動作］
本実施形態の携帯電話端末１は、上記プロジェクタ１１により映像を投影する場合、上述の図３〜図６で示したようなぶれを、電子的なぶれ補正方式を用いて補正する。
【００５５】
すなわち本実施形態の携帯電話端末１は、上記プロジェクタ１１により映像を投影している時には、加速度センサ１６とジャイロセンサ１７を用い、当該端末１に加えられたＸ，Ｙ，Ｚの各座標軸方向への振動と、ピッチ，ヨー，ロール軸回り方向への回転振動を検知する。そして、本実施形態の携帯電話端末１は、それら検知した振動を相殺する方向へ、プロジェクタ１１の液晶パネル上で投影基画像を移動させることにより、スクリーン上に投影される映像のぶれを補正する。
【００５６】
ここで、本実施形態の携帯電話端末１は、上述のような電子的なぶれ補正の際にプロジェクタ１１の液晶パネル上に表示する投影基画像として、例えば図７に示すような建物画像等の投影対象物画像５が含まれる主画像６に対して、図８に示す所定の枠画像７を付加した画像を生成する。
【００５７】
また、本実施形態において、上記所定の枠画像７は、プロジェクタ１１によるスクリーン投影時の投影環境に応じた画像となされる。すなわち、所定の枠画像７は、画像投影時におけるスクリーン上の投影環境の明るさや色（実際には照明光の色も含まれる）、及び、それら投影環境の明るさや色によるスクリーンの視覚的な色合い・色調・色相に応じた画像となされる。より具体的に説明すると、例えば白色のスクリーンが用いられた場合において、例えばスクリーン上の投影環境が非常に暗く、本来白色のスクリーンが視覚上で黒色や灰色に見えるような時、上記枠画像７は、当該視覚上の色に略々一致する例えば黒色や灰色の画像となされる。勿論、白色以外の別の色のスクリーンが用いられた場合も同様であり、投影環境による当該スクリーンの視覚上の色や明るさに略々一致する色や明るさとなされた枠画像７が用いられる。また例えば、投影環境として、室内において或る程度の明るさの照明光が灯されており、その照明光が例えば電球光色のように薄いオレンジ色系統の照明であり、その照明光により例えば白色のスクリーンが視覚上で薄いオレンジ色に見えるような場合、上記枠画像７は、その視覚上の色に一致した薄いオレンジ色の画像となされる。なお、本実施形態で挙げた色や明るさはあくまで一例であり、本発明はどのような投影環境の色や明るさにも対応可能である。
【００５８】
また、本実施形態の携帯電話端末１は、例えば照度センサ１８により検出される周囲環境の明るさと、実際に映像を投影する前に例えばメインカメラ３１によりスクリーン面を撮影して得られた撮影画像の色合い・色調・色相等から、上述のような投影環境に応じた枠画像７の明るさと色を決めている。なお、明るさについては、カメラ撮影画像から求めてもよい。その他、枠画像の色や明るさについて予め何種類かのパターンを用意しておき、それらの中から所望の色や明るさの枠画像を選択するようにしてもよい。
【００５９】
図７には、上記主画像６の一例を示し、図８には、図７の主画像６に対して上述のように投影環境に応じて明るさ及び色が決められた枠画像７が付加されて生成された投影基画像の一例を示す。なお、図７と図８に例示した主画像６は、建物画像等の投影対象物画像５が含まれる画像である。
【００６０】
また、図９と図１０には、本実施形態の携帯電話端末１において、上記主画像６の周囲に枠画像７が付加された投影基画像をプロジェクタ１１の液晶パネル上で移動させるような電子的なぶれ補正処理を実行している時の、スクリーン３上の投影表示例を示している。これら図９，図１０に示すように、本実施形態によれば、主画像６がスクリーン３上で略々ぶれなく静止して投影されることになる。なお、図９，図１０中の白抜き波線は、枠画像７の外縁を図面上で判りやすくするために描いた線であり、実際にスクリーン投影がなされている時には見えない線である。また、これら図９，図１０中の白抜き波線は、電子的なぶれ補正により、枠画像７の外縁がスクリーン３上で移動している状態を模式的に表した線である。
【００６１】
一方、図１１と図１２には、上記図９と図１０に対する比較例として、枠画像９の色及び明るさがスクリーン３とは異なる色及び明るさになされた場合のスクリーン投影表示例を示す。すなわちこれら図１１，図１２に示すように、例えば暗いスクリーン３に対して明るい枠画像９が用いられた場合、投影対象物画像５を含む主画像６については、上記電子的なぶれ補正により略々静止した状態に見えるが、明るい枠画像９については、端末１に加わる振動に伴って暗いスクリーン３上を移動することになるため、非常に見辛い投影画像となってしまう。
【００６２】
これに対し、本実施形態によれば、図９，図１０のように、枠画像７がスクリーン３の明るさ及び色に略々一致しているため、携帯電話端末１に加わる振動を相殺する電子的なぶれ補正に伴って当該枠画像７が移動したとしても、その枠画像７の移動は略々同色のスクリーン３上では目立たず、見やすい画像となる。
【００６３】
［電子的ぶれ補正と投影画像の生成処理］
図１３には、上述した電子的なぶれ補正と主画像に枠画像が設けられた投影基画像の生成処理のフローチャートを示す。なお、この図１３のフローチャートの処理は、ＣＰＵ１０が本発明の投影画像補正プログラムを実行することにより行われる。
【００６４】
図１３において、プロジェクタ１１による映像投影の起動指示がユーザ等から入力されると、ＣＰＵ１０は、プロジェクタ映像投影を実際に開始する前に、ステップＳ１の処理として、前述したようにして枠画像の色と明るさを決定する。
【００６５】
次いで、ＣＰＵ１０は、ステップＳ２の処理として、本実施形態の携帯電話端末１においてぶれ補正機能が有効に設定されているか否かを判定する。なお、当該ぶれ補正機能の有効／無効の設定は、プロジェクタ１１による映像投影が行われる毎にユーザにより入力されてもよいし、予めメニュー選択等により設定されていてもよい。そして、ＣＰＵ１０は、ぶれ補正機能が有効に設定された場合にはステップＳ３へ処理を進め、一方、ぶれ補正機能が無効に設定された場合には後述するステップＳ７へ処理を進める。
【００６６】
ステップＳ３の処理に進むと、ＣＰＵ１０は、加速度センサ１６とジャイロセンサ１７を用いて振動を検知する。
【００６７】
また、ＣＰＵ１０は、ステップＳ４の処理として、検出した振動量を基に、プロジェクタ１１の液晶パネル上に投影基画像を表示する位置を算出し、さらに、ステップＳ５の処理として、その算出された液晶パネル上の位置に投影基画像を表示する。そして、ＣＰＵ１０は、ステップＳ６の処理として、プロジェクタ１１を制御して投影光用の光源を点灯させる。これにより、上記投影基画像は、プロジェクタ１１の投影光学系を介してスクリーン上に投影表示されることになる。
【００６８】
次に、ＣＰＵ１０は、ステップＳ７の処理として、プロジェクタ１１による映像投影の終了指示がユーザ等から入力されたか否か判定する。そして、ＣＰＵ１０は、映像投影の終了指示がなされていない時にはステップＳ２へ処理を戻し、一方、終了指示が入力された時には当該図１３のフローチャートの処理を終了する。
【００６９】
図１４には、図１３のステップＳ１にて行われる枠画像の明るさ及び色の決定処理のフローチャートの一例を示す。なお、この図１４のフローチャートの処理は、ＣＰＵ１０が本発明の投影画像補正プログラムを実行することにより行われる。
【００７０】
図１４において、図１３のステップ１の処理に進んだ場合、ＣＰＵ１０は、ステップＳ１２の処理として、照度センサ１８により周囲環境の明るさを検出させる。
【００７１】
また、ＣＰＵ１０は、ステップＳ１３の処理として例えばメインカメラ３１を起動させ、次いでステップＳ１４の処理として映像投影前のスクリーン面を当該メインカメラ３１により撮影させる。
【００７２】
次に、ＣＰＵ１０は、ステップＳ１５の処理に進むと、上記ステップＳ１２にて検知した周囲環境の明るさと、ステップＳ１４にて撮影した画像とから、スクリーン面における投影環境を求め、その投影環境におけるスクリーン面の明るさと色に略々一致するように枠画像の明るさと色を決定する。
【００７３】
このステップＳ１５の処理後、ＣＰＵ１０は、図１３のステップＳ２へ処理を進める。
【００７４】
［まとめ］
以上説明したように、本実施形態の携帯電話端末１においては、加速度センサ１６とジャイロセンサ１７の検出信号から当該端末に加えられた振動を検知し、その振動を相殺するように、プロジェクタ１１の液晶パネル上の投影基画像を移動させる電子的なぶれ補正により、スクリーン上の投影映像のぶれを無くしている。またその際、本実施形態の携帯電話端末１は、スクリーンの色と明るさに略々一致する枠画像を主画像の周囲に付加した投影基画像を生成することにより、上記電子的なぶれ補正に伴って上記スクリーン上で投影基画像が移動したとしても、枠画像部分の移動を目立たなくさせ、略々静止した状態の主画像部分が見やすい映像投影を実現可能となっている。
【００７５】
なお、上述した実施形態の説明は、本発明の一例である。このため、本発明は上述した各実施形態に限定されることなく、本発明に係る技術的思想を逸脱しない範囲であれば、設計等に応じて種々の変更が可能であることはもちろんである。例えば、上述の実施形態では、携帯電話端末を例に挙げたが、本発明はプロジェクタ機能を内蔵した他の各種端末等にも適用可能である。
【図面の簡単な説明】
【００７６】
【図１】本発明実施形態の携帯電話端末の概略構成を示すブロック図である。
【図２】プロジェクタを内蔵した携帯電話端末によりスクリーン上に画像が投影されている状態の一例を示す図である。
【図３】振動によるぶれを補正せず、投影画像をスクリーン上に映し出している場合において、端末にＸ座標軸方向若しくはヨー軸回り方向の振動が加わった時のスクリーン上の投影画像のぶれの様子を示す図である。
【図４】振動によるぶれを補正せず、投影画像をスクリーン上に映し出している場合において、端末にＹ座標軸方向若しくはピッチ軸回り方向の振動が加わった時のスクリーン上の投影画像のぶれの様子を示す図である。
【図５】振動によるぶれを補正せず、投影画像をスクリーン上に映し出している場合において、端末にロール軸回り方向の振動が加わった時のスクリーン上の投影画像のぶれの様子を示す図である。
【図６】振動によるぶれを補正せず、投影画像をスクリーン上に映し出している場合において、端末にＺ座標軸方向の振動が加わった時のスクリーン上の投影画像のぶれ（拡大・縮小）の様子を示す図である。
【図７】本発明実施形態において、建物画像等の投影対象物画像が含まれた主画像の一例を示す図である。
【図８】撮影対象物画像が含まれた主画像に枠画像が付加された投影基画像の一例を示す図である。
【図９】本実施形態において、電子的なぶれ補正処理が実行された状態で、主画像に枠画像が付加された投影画像をスクリーン上に映し出すことにより、主画像部分がスクリーン上で略々ぶれなく静止して投影されている状態の一例を示す図である。
【図１０】本実施形態において、電子的なぶれ補正処理が実行された状態で主画像に枠画像が付加された投影画像をスクリーン上に映し出すことにより、主画像部分がスクリーン上で略々ぶれなく静止して投影されている状態の他の例を示す図である。
【図１１】図９と図１０の比較例として、スクリーンの色等とは異なる枠画像を主画像の周囲に付加された投影画像がスクリーン上に映し出された状態の一例を示す図である。
【図１２】図９と図１０の比較例として、スクリーンの色等とは異なる枠画像が主画像の周囲に付加された投影画像がスクリーン上に映し出された状態の他の例を示す図である。
【図１３】本実施形態における電子的なぶれ補正と主画像に枠画像を付加する投影画像の生成処理のフローチャートである。
【図１４】本実施形態における枠画像の明るさ及び色の決定処理のフローチャートである。
【符号の説明】
【００７７】
１  携帯電話端末、３  スクリーン、４  投影画像、５  投影対象物画像、６  投影対象物画像を含む画像、７  枠画像、１０  ＣＰＵ、１１  プロジェクタ、１２  ＬＣＤ、１３  ＬＣＤＣ、１４  ＬＥＤ、１５  ＬＥＤドライバ、１６  加速度センサ、１７  ジャイロセンサ、１８  照度センサ、１９  レシーバ、２０  マイクロホン、２１  外部インターフェース、２２  ＵＳＢ２．０コントローラ、２３  ＵＳＩＭカードスロット、２４  赤外線通信モジュール、２５  振動モータ、２６  バッテリ、２７  周辺ＩＣ＋電源ＩＣ、３１  メインカメラ、３２  フラッシュライトコントローラ、３３  フラッシュ、３４  サブカメラ、３５  ＲＦ回路、３６  アンテナ、  ３７  非接触通信カードコントローラ３７、３８  非接触通信カードアンテナ、３９  ブルートゥースコントローラ、４０  ブルートゥースアンテナ、４１  デジタルＴＶチューナ、４２  デジタルＴＶアンテナ、４３  メモリカードコントローラ、４４  メモリカードスロット、４５  キーパッド、４６  内部メモリ、４７  ＤＤＲ  ＳＤＲＡＭ、４８  ＮＡＮＤ型フラッシュメモリ、４９  音声チップ、５０  右スピーカ、５１  左スピーカ
【図１】
2010102064.tif 000003
【図２】
2010102064.tif 000004
【図３】
2010102064.tif 000005
【図４】
2010102064.tif 000006
【図５】
2010102064.tif 000007
【図６】
2010102064.tif 000008
【図７】
2010102064.tif 000009
【図８】
2010102064.tif 000010
【図９】
2010102064.tif 000011
【図１０】
2010102064.tif 000012
【図１１】
2010102064.tif 000013
【図１２】
2010102064.tif 000014
【図１３】
2010102064.tif 000015
【図１４】
2010102064.tif 000016