(57)【要約】【課題】使用者の視点が画面正面から外れていても、使用者にとって均質な画像を表示して視認性を向上させること。【解決手段】画像を表示する表示部42と、装置の姿勢を検出する速度センサ39と、画像情報に対し、加速度センサ39で検出した姿勢の方向に応じて表示部42の表示画面全域にわたって表示画像が均質となるように補償するＣＰＵ31及び表示制御部36とを備える。【選択図】図２
2015102681.tif 000002
【特許請求の範囲】
【請求項１】
画像を表示する表示部と、
装置の姿勢の情報を検出する姿勢検出手段と、
上記姿勢検出手段で検出した姿勢の情報に応じて上記表示部全域にわたって均質な視覚効果が生じるように上記表示部の表示を補償する表示補償手段と
を備えたことを特徴とする表示装置。
【請求項２】
上記姿勢検出手段は、加速度センサ、傾斜センサ、及び地磁気センサの少なくとも１つを含むことを特徴とする請求項１記載の表示装置。
【請求項３】
上記表示補段は、上記姿勢検出手段で検出した姿勢の情報に応じて上記表示部の輝度値を位置により異なるように補償することを特徴とする請求項１または２記載の表示装置。
【請求項４】
上記表示補償手段は、上記姿勢検出手段で検出した姿勢の方向に沿って上記表示部の輝度値が異なるように補償することを特徴とする請求項３記載の表示装置。
【請求項５】
上記視覚効果は、グラデーション処理、遠近表現処理、立体表現処理、輪郭強調処理、及び彩度強調処理の少なくとも１つを含むことを特徴とする請求項１または２記載の表示装置。
【請求項６】
上記表示部は、画像を表示する領域を複数に分割して領域毎に輝度調整が可能なバックライト部を有し、
上記表示補償手段は、上記姿勢検出手段で検出した姿勢の情報に応じて上記表示部全域にわたって均質な視覚効果が生じるように上記バックライト部の領域毎の輝度を調整する
ことを特徴とする請求項１乃至４いずれか記載の表示装置。
【請求項７】
上記表示部に照射される外光の照度を検出する照度検出手段をさらに備え、
上記表示補償手段は、上記姿勢検出手段で検出した姿勢の情報及び上記照度検出手段で検出した照度に応じて上記表示部全域にわたって均質な視覚効果が生じるように上記表示部の表示を補償する
ことを特徴とする請求項１乃至６いずれか記載の表示装置。
【請求項８】
上記照度検出手段は、上記表示部に照射される複数方向からの外光の照度を検出し、
上記表示補償手段は、上記照度検出手段での検出結果から上記外光の光源方向を判断して、当該光源方向及び上記姿勢検出手段で検出した姿勢の情報に応じて上記表示部全域にわたって均質な視覚効果が生じるように上記表示部の表示を補償する
ことを特徴とする請求項７記載の表示装置。
【請求項９】
上記表示部の画像表示方向を撮影する撮影手段と、
上記撮影手段で撮影した画像中から顔認識処理により人物の目の位置を検出する目位置検出手段と
をさらに備え、
上記表示補償手段は、上記姿勢検出手段で検出した姿勢の情報及び上記目位置検出手段での検出位置に応じて上記表示部全域にわたって均質な視覚効果が生じるように上記表示部の表示を補償する
ことを特徴とする請求項１乃至８いずれか記載の表示装置。
【請求項１０】
画像を表示する表示部を備えた装置における表示補償方法であって、
装置の姿勢の情報を検出する姿勢検出工程と、
上記姿勢検出工程で検出した姿勢の情報に応じて上記表示部の表示画面全域にわたって均質な視覚効果が生じるように上記表示部の表示を補償する表示補償工程と
を有したことを特徴とする表示補償方法。
【請求項１１】
画像を表示する表示部を有するコンピュータを、
装置の姿勢の情報を検出する姿勢検出手段、及び
上記姿勢検出手段で検出した姿勢の情報に応じて上記表示部の表示画面全域にわたって均質な視覚効果が生じるように上記表示部の表示を補償する表示補償手段
して機能させることを特徴とするプログラム。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、例えばリスト端末やスマートフォンなど、携帯して使用する、表示部を備えた電子機器に好適な表示装置、表示補償方法及びプログラムに関する。
【背景技術】
【０００２】
近年は携帯電話、スマートフォン、リスト端末など、電子機器を携帯して歩きながら、若しくは走りながら表示部を見る機会が増えている。その場合、ユーザの視点と電子機器の表示部の位置関係が変動するため、表示部が見にくくなる。
【０００３】
そこでユーザの視点の傾きに合わせて映像を傾けて表示するべく、検出した傾き値に応じて映像を回転補正し、回転補正した映像を表示部に表示するようにした技術が開示されている。（例えば、特許文献１）
【先行技術文献】
【特許文献】
【０００４】
【特許文献１】特開２０１１−２４８２５４号公報
【発明の概要】
【発明が解決しようとする課題】
【０００５】
上記特許文献に記載された技術は、視聴者の視点が傾いている角度に着目し、表示する映像の角度を回転補正する。しかるに、視聴者の視点が傾いている場合、視聴者の視点自体が画面の中央位置から正対する位置にないことが多いものと考えられる。そのため、視聴者の視点が画面の正面から離れると、視聴者からは画面の位置によって遠い部分と近い部分とが存在し、画面の位置によって異なる明るさとなって見にくいという不具合を生じる。この点は上記特許文献に記載された技術において考慮されていない。
【０００６】
本発明は上記のような実情に鑑みてなされたもので、使用者の視点が画面正面から外れていても、使用者にとって均質な画像となるように表示を補償して視認性を向上させることを目的とする。
【課題を解決するための手段】
【０００７】
本発明の一態様は、画像を表示する表示部と、装置の姿勢の情報を検出する姿勢検出手段と、上記姿勢検出手段で検出した姿勢の情報に応じて上記表示部全域にわたって均質な視覚効果が生じるように上記表示部の表示を補償する表示補償手段とを備えたことを特徴とする。
【発明の効果】
【０００８】
本発明によれば、使用者の視点が画面正面から外れていても、視認性を向上させることが可能となる。
【図面の簡単な説明】
【０００９】
【図１】第１の実施形態に係る表示装置としてのスマートフォンの外観構成を示す斜視図。
【図２】同実施形態に係るスマートフォン内の電子回路の機能構成を示すブロック図。
【図３】同実施形態に係る図２のＣＰＵが実行する待ち受け状態での時刻表示の処理内容を示すフローチャート。
【図４】同実施形態に係るスマートフォンの筐体の上下左右を示す図。
【図５】同実施形態に係る基準姿勢のスマートフォンとユーザの視線との関係、及び基準姿勢時の表示内容を例示する図。
【図６】同実施形態に係るスマートフォンが水平面上に載置されている姿勢での３軸加速度センサの検出内容を示す図。
【図７】同実施形態に係るスマートフォンが基準姿勢にある状態での３軸加速度センサの検出内容を示す図。
【図８】同実施形態に係るスマートフォンが基準姿勢以外の姿勢にある状態での３軸加速度センサの検出内容を示す図。
【図９】同実施形態に係る同実施形態に係るスマートフォンが基準姿勢にはない場合のユーザから表示部の見え方の概念を示す図。
【図１０】同実施形態に係るスマートフォンの姿勢と背景画像のグラデーション設定を例示する図。
【図１１】同実施形態に係るスマートフォンの姿勢と背景画像のグラデーション設定を例示する図。
【図１２】同実施形態に係るスマートフォンの姿勢と背景画像のグラデーション設定を例示する図。
【図１３】第２の実施形態に係るリスト端末の外観構成を示す図。
【図１４】第３の実施形態に係るスマートフォン内の電子回路の機能構成を示すブロック図。
【図１５】第４の実施形態に係るスマートフォン内の電子回路の機能構成を示すブロック図。
【発明を実施するための形態】
【００１０】
以下、本発明を表示装置としてのスマートフォンに適用した場合の第１の実施形態について図面を参照して説明する。  
図１は、同実施形態に係るスマートフォン１０の外観構成を示す。このスマートフォン１０は、第４世代携帯電話システム及び無線ＬＡＮ規格であるＩＥＥＥ８０２．１１ａ／ｂ／ｇ／ｎ技術に準拠して、図示しない最寄りの基地局やＷｉ−Ｆｉ（登録商標）のアクセスポイント等を介して、インターネットを含むネットワークＮと無線接続される。
【００１１】
スマートフォン１０は、薄板状筐体の前面のほぼ殆どを用いた、対角が約５インチ程の大きさの、表示部とタッチ入力部とを兼ねたタッチ表示部１０Ａを有している。このタッチ表示部１０Ａにおいて、画像等を表示すると共に、表面へのタップ（軽く叩く）操作、フリック（はじく）操作、ピンチ（つまむ）操作など手指をタッチしての各種指示操作が可能となる。
【００１２】
なお、スマートフォン１０の姿勢について、３次元空間をｘｙｚ座標値で表すものとする。この場合、便宜上、図示する如くタッチ表示部１０Ａの画面中央を原点として、画面に沿った横方向にｘ座標軸、同縦方向にｙ座標軸、画面と垂直な方向にｚ軸があるものとして、以下で説明を行なう。
【００１３】
図２は、上記スマートフォン１０内の電子回路の機能構成を示すブロック図である。同図で、３１がこのスマートフォン１０全体の制御動作を司るＣＰＵである。このＣＰＵ３１に対して、バスラインＳＢを介して、プログラムメモリ３２、ワークメモリ３３、画像メモリ３４、撮像制御部３５、表示制御部３６、入力制御部３７、通信インタフェース（Ｉ／Ｆ）３８、３軸加速度センサ３９、及び外部デバイスインタフェース４０と接続される。
【００１４】
プログラムメモリ３２は、例えばフラッシュメモリ（登録商標）等の不揮発性メモリで構成され、上記ＣＰＵ３１が動作するためのＯＳ及びアプリケーションプログラム、固定データ等を記憶する。
【００１５】
ワークメモリ３３は、例えばＤＲＡＭで構成され、上記ＣＰＵ３１のメインメモリとして機能する。
【００１６】
画像メモリ３４は、複数の画像データと、後述するグラデーションパターンデータとを格納している。  
上記撮像制御部３５は、レンズ光学系と例えばＣＭＯＳイメージセンサ等の固体撮像素子とで構成される撮像部４１での撮影動作を制御し、撮影により得られる画像信号をデジタル化、及びデータ圧縮を伴うデータファイル化した上で上記画像メモリ３４に記憶させる。
【００１７】
上記表示制御部３６は、表示する画像データを保持するためのＶＲＡＭ３６Ａを備え、上記タッチ表示部１０Ａを構成する表示部４２を駆動して画像等を表示させる。表示部４２は、バックライト付きのカラー液晶パネルとその駆動回路とで構成される。この表示部４２に対して、透明電極膜を用いたタッチパネル部４３が一体に構成され、上記タッチ表示部１０Ａを構成する。上記入力制御部３７は、タッチパネル部４３がユーザのタッチ操作に応じて出力する、時系列の座標信号をデジタル化して操作信号として上記ＣＰＵ３１へ送出する。
【００１８】
上記通信インタフェース３８は、アンテナ４４，４５を用いて上述した第４世代携帯電話システム及びＩＥＥＥ８０２．１１ａ／ｂ／ｇ／ｎに基づいて、図示しないネットワークとの間での無線通信を行なう。
【００１９】
上記３軸加速度センサ３９は、上記図１で示した３次元空間中でのスマートフォン１０の装置筐体の姿勢を加速度情報として検出する。
【００２０】
上記外部デバイスインタフェース４０は、マイクロＵＳＢ端子４７及びメモリカードスロット４８を介して、例えば外付けハードディスク装置やＵＳＢメモリ、メモリカードを接続または装着可能となる。
【００２１】
次に本実施形態の動作について説明する。  
本実施形態では、待ち受け状態のスマートフォン１０において、タッチ表示部１０Ａで時刻表示を行なう場合の、ＣＰＵ３１による表示制御動作について説明する。
【００２２】
図３は、ＣＰＵ３１が実行する処理内容を示すフローチャートである。ここではＣＰＵ３１が待ち受け状態での時刻表示の変更と併行して、姿勢変化に基づく背景画像の変更処理を行なうものとする。したがって、本実施形態は、サンプルタイミングを１［秒］間隔として、タッチ表示部１０Ａで表示する時刻の更新と併せて実行する。
【００２３】
その処理当初にＣＰＵ３１は、姿勢変化のサンプルタイミングとなるのを待機する（ステップＳ１０１）。そして、サンプルタイミングとなったと判断した時点で、ＣＰＵ３１は３軸加速度センサ３９からの出力により現時点でのスマートフォン１０の姿勢を検出する（ステップＳ１０２）。  
図４乃至図９により、スマートフォン１０の姿勢の方向とその検出内容について例示する。  
図４は、スマートフォン１０の筐体を簡易化して、その上下左右を示す図である。
【００２４】
本実施形態では、図５（Ａ）中に破線で示すように、スマートフォン１０の筐体の上端が上側、下端が下側、左右が均等の高さとなってタッチ表示部１０Ａが水平面から斜め上方４５°に対向している状態で、このスマートフォン１０のユーザの目ＵＥが正対しているものと仮定し、この状態を基準姿勢とする。
【００２５】
この基準姿勢にある場合には、図５（Ｂ）に示すようにタッチ表示部１０Ａで表示する、待ち受け状態での拡大情報及び時刻情報の表示に際して、その背景画像を、グラデーション等の処理を施すことなく一様に表示するものとする。
【００２６】
すなわち、本実施形態では説明を簡易にするためにグレー単色の無地で背景画像を表しているが、実際にはユーザの好みに応じた画像やスマートフォン１０のメーカが予め用意した画像など任意の画像を壁紙として背景に設定することができるものとする。
【００２７】
スマートフォン１０が上記基準姿勢以外の姿勢にある場合、このスマートフォン１０のユーザは、タッチ表示部１０Ａ中央の正面から離れた視点位置からタッチ表示部１０Ａを見ているものと想定される。その場合、ユーザの目がタッチ表示部１０Ａ中央の正面から離れるほど、ユーザにとってタッチ表示部１０Ａの近位と遠位との距離の差が大きくなり、遠位側での画像が暗く見えるものと思われるので、その明るさを補償する必要が生じる。
【００２８】
以下、３軸加速度センサ３９での検出動作と画像の明るさ補償に関して説明する。  
図６乃至図８は、上記３軸加速度センサ３９の検出信号による検出内容を示す。まず図６に示すようにスマートフォン１０が水平面上に載置されているような姿勢では、鉛直方向に受ける重力加速度のみとなる。正確には重力加速度Ｇ≒９．８０７［ｍ／ｓ２ ］であるが、ここでは正規化して１０．０とすると、３軸加速度センサ３９の出力は、姿勢ベクトルｖ０の成分ｘ０，ｙ０，ｚ０は、  
ｘ０＝０．０，ｙ０＝０．０，ｚ０＝１０．０  
となる。
【００２９】
図７は、上記図５で示した、タッチ表示部１０Ａが斜め上方４５°を向いた理想的な基準姿勢での上記３軸加速度センサ３９の検出信号による検出内容を示す。この場合、スマートフォン１０の画面（１０Ａ）横方向のｘ軸方向の傾きはない（水平）ため、その姿勢ベクトルｖ１の成分ｘ１，ｙ１，ｚ１は、例えば  
ｘ１＝０．０，ｙ１＝７．０，ｚ１＝７．５  
となる。
【００３０】
図８は、スマートフォン１０が上記基準姿勢から外れた姿勢にある場合の上記３軸加速度センサ３９の検出信号による検出内容を示す。この場合、３軸加速度センサ３９の姿勢ベクトルｖ２での出力をｘ２，ｙ２，ｚ２とする。このベクトルｖ２の上記基準姿勢でのベクトルｖ１との差ベクトルｖ（ｘ，ｙ，ｚ）を考えると、ｖ２＝ｖ１＋ｖとなり、差ベクトルｖの各成分は  
ｖ（ｘ，ｙ，ｚ）＝（ｘ２−ｘ１，ｙ２−ｙ１，ｚ２−ｚ１）  
として表せる。
【００３１】
したがって、その時点での３軸加速度センサ３９のベクトル出力ｖ２と、既知の上記基準姿勢でのベクトルｖ１とにより、上記差ベクトルｖを算出可能となる。
【００３２】
図９は、この差ベクトルｖに基づくグラデーション処理の概念を示したものである。タッチ表示部１０Ａの中心座標（０，０，０）からのベクトルｖを、タッチ表示部１０Ａの画面であるｘｙ平面に射影した線分Ｌ１に沿って、グラデーション処理を施すものとする。
【００３３】
すなわち、線分Ｌ１に沿って、ユーザの目からより遠位となる図中の右下側が画像が暗く見えると思われるため、その暗さを補償するべく、表示する背景画像に対してグラデーション処理によって右下側がより明るくなるように輝度値を補正する。したがって、上記線分Ｌ１と直交する線上にある画素は、いずれも輝度値の補正の度合いが等しくなる。
【００３４】
加えて、上記差ベクトルｖの絶対値「(ｘ2＋ｙ2＋ｚ2)1/2」が大きいほど、ユーザが基準姿勢（正面）から大きく離れた斜め方向からタッチ表示部１０Ａの画面を視認していることになるので、上記グラデーション処理における輝度変化の度合いを大きく設定する。このグラデーション処理における輝度変化の度合いに関しては、予め段階的に上限値が異なる複数のパターンデータをプログラムメモリ３２に固定データとして記憶しておき、上記差ベクトルｖの絶対値の大きさによって対応するパターンデータを設定して読出すものとしても良い。
【００３５】
また一方で、グラデーション処理における輝度変化の度合いを所定の演算式として上記プログラムメモリ３２に記憶させることも考えられる。この場合、記憶させる演算式は、上記姿勢の線分Ｌ１に沿った方向でユーザの目からより遠位となる画素位置毎に輝度値が微小分増加するものとし、上記増加する輝度値の微小分を上記差ベクトルｖの絶対値による変数に基づいて増減するよう設定することで、姿勢に応じた方向と度合いとをグラデーション処理に反映させることができる。
【００３６】
上記図３のフローチャートにおいては、ＣＰＵ３１は上記３軸加速度センサ３９からの出力に基づくスマートフォン１０の姿勢情報から、ＣＰＵ３１は前回、すなわち１［秒］前のサンプルタイミングで検出して得た姿勢情報との差を算出し、算出した差が、予め設定されたしきい値より大きいか否かにより、スマートフォン１０の姿勢が大きく変化したか否かを判断する（ステップＳ１０３）。
【００３７】
ここでスマートフォン１０の姿勢が大きく変化したと判断した場合にのみ、ＣＰＵ３１は現在の姿勢の方向に応じた背景画像のグラデーションの表示状態を設定する（ステップＳ１０４）。
【００３８】
図１０は、大きく変化した後のスマートフォン１０の姿勢が、上記図６に示した如く、水平面に平置きされているか、もしくは水平に維持されている場合の背景画像のグラデーション設定を例示する図である。図１０（Ａ）に示すように、スマートフォン１０が水平面に平置きされている場合などでは、ユーザの目ＵＥはスマートフォン１０の画面下方側にあり、タッチ表示部１０Ａをその画面下方側から目視しているものと想定する。
【００３９】
したがって、タッチ表示部１０Ａに表示する背景画像は、図１０（Ｂ）に示すように、より近位となる画面下端の背景画像を本来の明るさとして、画面の上方ほど徐々に明るくなり、より遠位となる画面上端が最も明るくなるようなグラデーションの表示状態を設定する。
【００４０】
図１１は、大きく変化した後のスマートフォン１０の姿勢が、右上端が最も下がっている場合の背景画像のグラデーション設定を例示する。図１１（Ａ）に示すように、スマートフォン１０の右上端が最も下がっている場合、ユーザの目ＵＥはスマートフォン１０の画面の左下端側にあり、タッチ表示部１０Ａをその画面左下方側から目視しているものと想定する。
【００４１】
したがって、タッチ表示部１０Ａに表示する背景画像は、図１１（Ｂ）に示すように、より近位となる画面左下端の背景画像を本来の明るさとして、画面の右上方ほど徐々に明るくなり、より遠位となる画面右上端が最も明るくなるようなグラデーションの表示状態を設定することになる。
【００４２】
図１２は、大きく変化した後のスマートフォン１０の姿勢が、左下端が最も下がっている場合の背景画像のグラデーション設定を例示する。図１２（Ａ）に示すように、スマートフォン１０の左下端が最も下がっている場合、ユーザの目ＵＥはスマートフォン１０の画面の右上端側にあり、タッチ表示部１０Ａをその画面右上方側から目視しているものと想定する。
【００４３】
したがって、タッチ表示部１０Ａに表示する背景画像は、図１２（Ｂ）に示すように、より近位となる画面右上端の背景画像を本来の明るさとして、画面の左下方ほど徐々に明るくなり、より遠位となる画面左下端が最も明るくなるようなグラデーションの表示状態を設定することになる。
【００４４】
上記のようにスマートフォン１０の姿勢が大きく変化したと判断した場合に、必要に応じて背景画像のグラデーションの表示状態を設定し直した後、ＣＰＵ３１はあらためて直前の上記ステップＳ１０２で取得した３軸加速度センサ３９の出力を次の処理に備えて更新設定する（ステップＳ１０５）。
【００４５】
次にＣＰＵ３１は、通信インタフェース３８が最寄りの携帯電話システムの基地局との通信時に得られる現在時刻情報中から現在時刻を示す「時」「分」「秒」オーダーの時刻情報を抽出し（ステップＳ１０６）、予め保持している現在のカレンダ情報とを共に上記グラデーション処理した背景画像上に重畳して時計表示用の画像を作成する（ステップＳ１０７）。
【００４６】
ＣＰＵ３１は、この作成した画像を表示制御部３６のＶＲＡＭ３６Ａに転送して保持させ、表示制御部３６によりタッチ表示部１０Ａを構成する表示部４２で表示させた後（ステップＳ１０８）、同様の処理を繰返し実行するべく、次のサンプルタイミングに備えて上記ステップＳ１０１からの処理に戻る。
【００４７】
なお上記実施形態では、説明を簡易化するために、背景となる画像に対してスマートフォン１０の姿勢を検出した結果に応じたグラデーション処理を施すものとして説明したが、背景画像のみならず、主体となる画像、例えば時刻表示時には当該時刻情報も合わせて同処理を施した方が、より効果的にユーザに見易い画像を提供できることは勿論である。
【００４８】
また上記第１の実施形態では、本発明を表示装置としてのスマートフォンに適用した場合について説明したが、携帯して使用することで姿勢変化を伴う、表示部を有するような装置であれば、他の装置にも同様に提供可能である。
【００４９】
図１３は、第２の実施形態として表示装置であるリスト端末に適用した場合について、その外観構成を示す図である。図１３（Ａ）は、リスト端末５０の正面から見た構成を示す。同図（Ａ）において、リスト端末５０は、腕時計型の薄板状の端末本体５０Ａとバンド部５０Ｂとで構成される。
【００５０】
端末本体５０Ａは、前面側のほぼ全領域がタッチ表示部５１となっており、右側面に２つの操作ボタン５２，５３を備えると共に、前面のタッチ表示部５１下部右端にも操作ボタン５４を備える。
【００５１】
タッチ表示部５１では、例えば待ち受け状態で時刻を表示すると共に、予めインストールされているアプリケーションプログラムを呼出すために操作するメニュー（ＭＥＮＵ）ボタンを表示する。
【００５２】
端末本体５０Ａ内には、画像の表示とタッチ入力、外部の装置との通信、姿勢の検出、画像や音声等の各種コンテンツ情報の記憶、通話時の音声情報の入出力等を行なう各種電子回路とバッテリとを備える。  
またバンド部５０Ｂには、外部の装置との通信で使用するアンテナ等を内蔵する。
【００５３】
図１３（Ｂ）に示すように、リスト端末５０においてもその姿勢を３次元空間のｘｙｚ座標値で検出する。この場合、便宜上、図示する如くタッチ表示部５１の画面中央を原点として、画面に沿った横方向にｘ座標軸、同縦方向にｙ座標軸、画面と垂直な方向にｚ軸があるものとして、上記一実施形態のスマートフォン１０の場合と同様に姿勢を検出することで、姿勢に応じたタッチ表示部５１での画像に対する処理を行なうことができる。
【００５４】
以上詳述した如く本実施形態によれば、使用者の視点が画面正面から外れていても、使用者にとって均質な画像を表示して視認性を向上させることが可能となる。
【００５５】
なお上記実施形態においては、例えばスマートフォン１０が姿勢検出のために３軸加速度センサ３９を有するものとして説明したが、ｘｙｚ軸周りの回転方向の加速度を併せて検出する６軸加速度センサを用いることで、より高い精度での姿勢検出が実現できる。
【００５６】
さらに加速度センサに限らず、傾斜センサや地磁気センサにより装置の姿勢を検出するものとしてもよく、例えば傾斜センサであれば検出処理を簡素化でき、また地磁気センサであれば絶対的な方角と時刻とから太陽の方向と装置の姿勢との関係がわかるなど、それぞれのセンサの特徴を活かして表示画像に対する処理を適切に選択することができる。
【００５７】
また上記実施形態では、装置の姿勢に対応して表示画像のグラデーション処理を施すものとして説明したが、本発明はこれに限らず、例えば遠近表現や立体表現処理、輪郭強調処理や彩度強調処理など、他の画像処理を単独、あるいは組み合わせて施すことにより、表示画像の視認性をより向上させることができる。
【００５８】
また上記第１の実施形態では、スマートフォン１０のタッチ表示部１０Ａを構成する表示部４２において表示する画像によりグラデーション表現を行なうものとして説明したが、本発明はこれに限らず、表示部４２の液晶表示パネルで表示する画像自体は一様な明るさの画像としながら、バックライト側での発光輝度を調整することで、表示される画像の明るさを可変設定するものとしてもよい。
【００５９】
図１４は、そのような第３の実施形態に適用した場合のスマートフォン１０′の回路構成を示すブロック図である。上記図２に示した第１の実施形態のスマートフォン１０の回路構成と基本的には同様であるので、同一部分には同一符号を付与してその説明を省略する。
【００６０】
図１４で、タッチ表示部１０Ａを構成する表示部４２のバックライトとして、ＬＥＤバックライト（ＬＥＤ−ＢＬ）部６１を設ける。このＬＥＤバックライト部６１は、表示部４２を構成するカラー液晶パネルの各画素毎に１個のＬＥＤが１：１に対応したマトリックス状のＬＥＤアレイとなっている。このＬＥＤバックライト部６１を構成する個々のＬＥＤの発光輝度が、ＬＥＤドライバ６２によりＣＰＵ３１の制御の下に制御される。
【００６１】
したがって、表示部４２においては、本来表示すべき画像の階調をそのまま表示する一方で、３軸加速度センサ３９での検出結果に応じたスマートフォン１０′の姿勢に応じた方向及び基準姿勢からの乖離度合いでＬＥＤバックライト部６１の発光輝度を制御することにより、上記図１０乃至図１２で示したグラデーション表示を実現できる。そのため、表示制御部３６がＶＲＡＭ３６Ａに記憶した画像データに対し、各画素情報毎にグラデーション表示のための階調変換のための演算を行なう必要がなく、表示制御部３６の負担を大幅に軽減できる。
【００６２】
なお上記図１４では、ＬＥＤバックライト部６１が表示部４２のカラー液晶パネルの各画素毎に１個のＬＥＤが１：１に対応したマトリックス状のＬＥＤアレイであるものとして説明したが、本発明はこれに限らず、表示部４２を複数の表示エリアに分割し、各表示エリア毎に発光輝度を制御するものとしてもよい。
【００６３】
その場合、エリアの分割数が多いほど、ユーザにとって違和感のない、きめ細かな画像処理が行える反面、ＣＰＵ３１及びＬＥＤドライバ６２による制御は複雑化する。
【００６４】
さらに上記第１の実施形態において、表示画面における外光の照度を検出する照度センサをさらに設けることで、装置周囲の明るさをさらに勘案し、表示画像に対する処理に反映させることにより、例えば周囲が明るい場合であれば明るさの強調度合いをさらに高めるなど、表示画像の対する処理を最適化することが可能となる。
【００６５】
その場合、上記照度センサを複数、望ましくは３個以上を表示画面の周囲に分散して配置することで、周囲の光源方向を勘案したより適切な画像処理を施すことが可能となる。
【００６６】
図１５は、そのような第４の実施形態に適用した場合のスマートフォン１０″の回路構成を示すブロック図である。上記図２に示した第１の実施形態のスマートフォン１０の回路構成と基本的には同様であるので、同一部分には同一符号を付与してその説明を省略する。
【００６７】
図１５で、タッチ表示部１０Ａと同一面上の上下左右各辺の中央位置近傍に計４個の照度センサ７１Ｕ，７１Ｄ，７１Ｌ，７１Ｒを配設する。これら照度センサ７１Ｕ，７１Ｄ，７１Ｌ，７１Ｒが検出した信号は照度検出部７２に送られる。この照度検出部７２は、４個の照度センサ７１Ｕ，７１Ｄ，７１Ｌ，７１Ｒからの出力により、それら全体の絶対値レベルから当該環境下が晴天の屋外であるか曇天／雨天の屋外または屋内であるか等を判断すると共に、各出力の強弱パターンにより当該環境下で光源が位置する方向を判断し、各判断結果を上記ＣＰＵ３１へ送出する。
【００６８】
なおこの照度検出部７２での判断動作に関しては、照度検出部７２ではなくＣＰＵ３１側で実行するものとしてもよい。
【００６９】
このようにスマートフォン１０″の姿勢のみならず、周囲環境における光源の方向をも勘案することで、より適切な画像処理を施すことが可能となる。
【００７０】
また上記各実施形態では示さなかったが、例えば魚眼レンズに近い超広角系の光学レンズを含む撮像部を上記表示部と同一面に設け、表示画面を視認する人物を撮影してその顔認識処理を行ない、白目中の黒目の位置を検出することにより、ユーザの視線方向を勘案した画像処理を施すことができる。
【００７１】
そのため、ユーザが実際に表示画像中のどの部分を視認しているか否かを判断できるので、必要に応じた表示範囲で適切な画像処理を施すことが可能となる。
【００７２】
その他、本発明は上述した実施形態に限定されるものではなく、実施段階ではその要旨を逸脱しない範囲で種々に変形することが可能である。また、上述した実施形態で実行される機能は可能な限り適宜組み合わせて実施しても良い。上述した実施形態には種々の段階が含まれており、開示される複数の構成要件による適宜の組み合せにより種々の発明が抽出され得る。例えば、実施形態に示される全構成要件からいくつかの構成要件が削除されても、効果が得られるのであれば、この構成要件が削除された構成が発明として抽出され得る。
【００７３】
以下に、本願出願の当初の特許請求の範囲に記載された発明を付記する。  
請求項１記載の発明は、画像を表示する表示部と、装置の姿勢の情報を検出する姿勢検出手段と、上記姿勢検出手段で検出した姿勢の情報に応じて上記表示部全域にわたって均質な視覚効果が生じるように上記表示部の表示を補償する表示補償手段とを備えたことを特徴とする。
【００７４】
請求項２記載の発明は、上記請求項１記載の発明において、上記姿勢検出手段は、加速度センサ、傾斜センサ、及び地磁気センサの少なくとも１つを含むことを特徴とする。
【００７５】
請求項３記載の発明は、上記請求項１または２記載の発明において、上記表示補償手段は、上記姿勢検出手段で検出した姿勢の情報に応じて上記表示部の輝度値を位置により異なるように補償することを特徴とする。
【００７６】
請求項４記載の発明は、上記請求項３記載の発明において、上記表示補償手段は、上記姿勢検出手段で検出した姿勢の方向に沿って上記表示部の輝度値が異なるように補償することを特徴とする。
【００７７】
請求項５記載の発明は、上記請求項１または２記載の発明において、上記視覚効果は、グラデーション処理、遠近表現処理、立体表現処理、輪郭強調処理、及び彩度強調処理の少なくとも１つを含むことを特徴とする。
【００７８】
請求項６記載の発明は、上記請求項１乃至４いずれか記載の発明において、上記表示部は、画像を表示する領域を複数に分割して領域毎に輝度調整が可能なバックライト部を有し、上記表示補償手段は、上記姿勢検出手段で検出した姿勢の情報に応じて上記表示部全域にわたって均質な視覚効果が生じるように上記バックライト部の領域毎の輝度を調整することを特徴とする。
【００７９】
請求項７記載の発明は、上記請求項１乃至６いずれか記載の発明において、上記表示部に照射される外光の照度を検出する照度検出手段をさらに備え、上記表示補償手段は、上記姿勢検出手段で検出した姿勢の情報及び上記照度検出手段で検出した照度に応じて上記表示部全域にわたって均質な視覚効果が生じるように上記表示部の表示を補償することを特徴とする。
【００８０】
請求項８記載の発明は、上記請求項７記載の発明において、上記照度検出手段は、上記表示部に照射される複数方向からの外光の照度を検出し、上記表示補償手段は、上記照度検出手段での検出結果から上記外光の光源方向を判断して、当該光源方向及び上記姿勢検出手段で検出した姿勢の情報に応じて上記表示部全域にわたって均質な視覚効果が生じるように上記表示部の表示を補償することを特徴とする。
【００８１】
請求項９記載の発明は、上記請求項１乃至８いずれか記載の発明において、上記表示部の画像表示方向を撮影する撮影手段と、上記撮影手段で撮影した画像中から顔認識処理により人物の目の位置を検出する目位置検出手段とをさらに備え、上記表示補償手段は、上記姿勢検出手段で検出した姿勢の情報及び上記目位置検出手段での検出位置に応じて上記表示部全域にわたって均質な視覚効果が生じるように上記表示部の表示を補償することを特徴とする。
【００８２】
請求項１０記載の発明は、画像を表示する表示部を備えた装置における表示補償方法であって、装置の姿勢の情報を検出する姿勢検出工程と、上記姿勢検出工程で検出した姿勢の情報に応じて上記表示部の表示画面全域にわたって均質な視覚効果が生じるように上記表示部の表示を補償する表示補償工程とを有したことを特徴とする。
【００８３】
請求項１１記載の発明は、画像を表示する表示部を有するコンピュータを、装置の姿勢の情報を検出する姿勢検出手段、及び上記姿勢検出手段で検出した姿勢の情報に応じて上記表示部の表示画面全域にわたって均質な視覚効果が生じるように上記表示部の表示を補償する表示補償手段して機能させることを特徴とする。
【符号の説明】
【００８４】
１０…スマートフォン、１０Ａ…タッチ表示部、３１…ＣＰＵ、３２…プログラムメモリ、３３…ワークメモリ、３４…画像メモリ、３５…撮像制御部、３６…表示制御部、３６Ａ…ＶＲＡＭ、３７…入力制御部、３８…通信インタフェース（Ｉ／Ｆ）、３９…３軸加速度センサ、４０…外部デバイスインタフェース（Ｉ／Ｆ）、４１…撮像部、４２…表示部、４３…タッチパネル部、４４，４５…アンテナ、４７…マイクロＵＳＢ端子、４８…メモリカードスロット、５０…リスト端末、５０Ａ…端末本体、５０Ｂ…バンド部、５１…タッチ表示部、５２〜５４…操作ボタン、６１…ＬＥＤバックライト部（ＬＥＤ−ＢＬ）、６２…ＬＥＤドライバ、７１Ｕ，７１Ｄ，７１Ｌ，７１Ｒ…照度センサ、７２…照度検出部、ＳＢ…バスライン、ＵＥ…ユーザの目。
【図１】
2015102681.tif 000003
【図２】
2015102681.tif 000004
【図３】
2015102681.tif 000005
【図４】
2015102681.tif 000006
【図５】
2015102681.tif 000007
【図６】
2015102681.tif 000008
【図７】
2015102681.tif 000009
【図８】
2015102681.tif 000010
【図９】
2015102681.tif 000011
【図１３】
2015102681.tif 000012
【図１４】
2015102681.tif 000013
【図１５】
2015102681.tif 000014
【図１０】
2015102681.tif 000015
【図１１】
2015102681.tif 000016
【図１２】
2015102681.tif 000017