(57)【要約】【課題】疑似的な複数画面表示を利用して、個人情報の覗き見に対する安全性を高める電子機器を提供する。【解決手段】複数の方向から観察した場合に方向毎に異なる画像を表示する表示部と、複数の方向のうちの、少なくとも何れかの方向に対応する鏡と、表示部の表示面と鏡の反射面とがなす角度を検知する角度検知部と、鏡に対応する方向に表示される画像を、ユーザの操作対象となる操作対象オブジェクトを含む画像として表示制御を実行する表示制御部と、ユーザの表示部に対する操作を認識して、ユーザが指定した表示面上の座標を推定し、推定された座標に対応する表示部の虚像の表示面における座標を特定する座標特定部と、操作対象オブジェクトを含む画像のうち、特定された座標に対応する操作対象オブジェクトに対して、ユーザが操作を実行したものと見做して、操作を認識する操作認識部を含む。【選択図】図４
2017117167.tif 000002
【特許請求の範囲】
【請求項１】
複数の方向から観察した場合に方向毎に異なる画像を表示する表示部と、
前記複数の方向のうちの、少なくとも何れかの方向に対応する鏡と、
前記表示部の表示面と前記鏡の反射面とがなす角度を検知する角度検知部と、
前記鏡に対応する方向に表示される画像を、ユーザの操作対象となる操作対象オブジェクトを含む画像とし、当該画像の表示制御を実行する表示制御部と、
前記ユーザの前記表示部に対する操作を認識して、前記認識された操作によって前記ユーザが指定した前記表示面上の座標を推定し、予め与えられた前記表示部および前記鏡の大きさ及び相対位置に関する情報と、前記検知された角度と、前記推定された座標に基づいて、前記推定された座標に対応する表示部の虚像の表示面における座標を特定する座標特定部と、  前記操作対象オブジェクトを含む画像のうち、前記特定された座標に対応する操作対象オブジェクトに対して、前記ユーザが操作を実行したものと見做して、前記操作を認識する操作認識部と、
を含む電子機器。
【請求項２】
請求項１に記載の電子機器であって、
前記表示制御部は、
前記表示面上の座標と、前記反射面における座標との関係を前記ユーザに確認させるための補助表示を前記表示部に表示する表示制御を実行する
電子機器。
【請求項３】
コンピュータを請求項１または２に記載の電子機器として機能させるプログラム。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、複数の方向から観察した場合に方向毎に異なる画像を表示する電子機器、プログラムに関する。
【背景技術】
【０００２】
従来、表示画面を右側から見た場合と左側から見た場合で異なる２つの画像を同時に表示可能な情報表示装置が知られている（例えば特許文献１）。
【０００３】
以下、図１を参照して特許文献１の情報表示装置の原理を説明する。図１は、特許文献１の情報表示装置の液晶パネルの構成例を示す概略断面図である。図１に示すように同文献の情報表示装置の液晶パネルは、右側視野用画素（Ｒ−１、Ｒ−２、…）と、左側視野用画素（Ｌ−１、Ｌ−２、…）を含むカラーフィルタを備え、カラーフィルタの下層に液晶層、基板などを含む（図示略）。カラーフィルタの上層には、遮光部（Ｓ−１、Ｓ−２、…）とそれ以外の透光部とを含む視差バリア層が設けられている。図１に示すような液晶パネルによって構成された表示部を右側から見る場合、右側視野用画素（Ｒ−１、Ｒ−２、…）を透過した光だけが視差バリア層を通過し、左側視野用画素（Ｌ−１、Ｌ−２、…）を透過した光は、遮光部（Ｓ−１、Ｓ−２、…）によって遮断される。従ってこの場合は、右側視野画像が視認される。一方、表示部を左側から見る場合、左側視野用画素（Ｌ−１、Ｌ−２、…）を透過した光だけが視差バリア層を通過し、右側視野用画素（Ｒ−１、Ｒ−２、…）を透過した光は、遮光部（Ｓ−１、Ｓ−２、…）によって遮断される。従ってこの場合は、左側視野画像が視認される。視差バリア層を液晶シートで構成すれば、遮光部（Ｓ−１、Ｓ−２、…）を電気的にＯＮ／ＯＦＦ制御することができる。遮光部の機能をＯＮにしてマルチビュー状態とすると、左側視野画像と右側視野画像は液晶パネル本来の解像度の半分の解像度での表示となる。遮光部（Ｓ−１、Ｓ−２、…）の機能をＯＦＦに制御し、マルチビュー機能をＯＦＦに制御すれば、液晶パネル本来の解像度を損なうことはない。
【０００４】
同文献では、上述した表示画面に鏡面を隣接配置させ、表示中の右側視野画像、左側視野画像の何れかの画像情報を鏡面で反射させて、ユーザに視認させることにより、ユーザに二つの画像情報を同時に視認させ、疑似的なデュアルビュー表示を実現している。
【０００５】
同文献では、情報表示装置の例として、表示部（液晶画面）と操作部（操作ボタン群）とが分離した旧来型の携帯端末が開示された。
【先行技術文献】
【特許文献】
【０００６】
【特許文献１】特開２００９−０６９４４０号公報
【発明の概要】
【発明が解決しようとする課題】
【０００７】
同文献で開示された疑似的なデュアルビュー機能を認証画面などのセキュアな画面の表示に応用することは従来試みられていなかった。
【０００８】
そこで本発明では、疑似的な複数画面表示を利用して、個人情報の覗き見に対する安全性を高める電子機器を提供することを目的とする。
【課題を解決するための手段】
【０００９】
本発明の電子機器は、表示部と、鏡と、角度検知部と、表示制御部と、座標特定部と、操作認識部を含む。
【００１０】
表示部は、複数の方向から観察した場合に方向毎に異なる画像を表示する。鏡は、複数の方向のうちの、少なくとも何れかの方向に対応して設けられている。角度検知部は、表示部の表示面と鏡の反射面とがなす角度を検知する。表示制御部は、鏡に対応する方向に表示される画像を、ユーザの操作対象となる操作対象オブジェクトを含む画像とし、当該画像の表示制御を実行する。座標特定部は、ユーザの表示部に対する操作を認識して、認識された操作によってユーザが指定した表示面上の座標を推定し、予め与えられた表示部および鏡の大きさ及び相対位置に関する情報と、検知された角度と、推定された座標に基づいて、推定された座標に対応する表示部の虚像の表示面における座標を特定する。操作認識部は、操作対象オブジェクトを含む画像のうち、特定された座標に対応する操作対象オブジェクトに対して、ユーザが操作を実行したものと見做して、操作を認識する。
【発明の効果】
【００１１】
本発明の電子機器によれば、疑似的な複数画面表示を利用して、個人情報の覗き見に対する安全性を高めることができる。
【図面の簡単な説明】
【００１２】
【図１】特許文献１の情報表示装置の液晶パネルの構成例を示す概略断面図。
【図２】実施例１の電子機器の外観を示す斜視図。
【図３】実施例１の電子機器における鏡の数のバリエーションを例示する斜視図。
【図４】実施例１の電子機器の構成を示すブロック図。
【図５】実施例１の電子機器の動作を示すフローチャート。
【図６】操作対象オブジェクトと補助表示の例を示す図。
【図７】ユーザが指定した表示面上の座標とこれに対応する虚像の表示面上の座標との関係を説明する図。
【図８】本発明の電子機器を実現するために用いることができる汎用システム又はコンピュータデバイスの構成例を示すブロック図。
【発明を実施するための形態】
【００１３】
以下、本発明の実施の形態について、詳細に説明する。なお、同じ機能を有する構成部には同じ番号を付し、重複説明を省略する。
【実施例１】
【００１４】
以下、図２、図３を参照して、実施例１の電子機器の外観構成を説明する。図２は、本実施例の電子機器１の外観を示す斜視図である。図３は、本実施例の電子機器１における鏡の数のバリエーションを例示する斜視図である。
【００１５】
図２に示すように本実施例の電子機器１は、表示部１１を含む。表示部１１は、特許文献１の情報表示装置と同様に、複数の方向から観察した場合に方向毎に異なる画像を表示することができる。表示部１１は、例えば左右二方向にそれぞれ異なる画像（それぞれ左側視野画像、右側視野画像という）を表示可能であってもよいし、上下二方向、あるいは上下左右四方向にそれぞれ異なる画像（上下方向から見た画像をそれぞれ上側視野画像、下側視野画像という）を表示可能であってもよい。図２の例では、表示部１１は２方向にそれぞれ異なる画像を表示可能であるものとする。
【００１６】
電子機器１に取り付け可能なアタッチメント２には、鏡２１Ｔが含まれる。アタッチメント２は、電子機器１に取り付けた際に、鏡２１Ｔが表示部１１に隣接して配置されるように構成されている。アタッチメント２は、鏡２１Ｔの反射面と表示部１１の表示面とが所定の角度をなすように、鏡２１Ｔを支持固定する脚部２２などを含んでもよい。本実施例では、電子機器１とアタッチメント２を別の構成要件として定義したが、これに限らず、電子機器１とアタッチメント２の構成をまとめて、単に電子機器と呼称してもよいし、電子機器１とアタッチメント２にあたる構成が一体不可分に構成されている場合には、これを単に電子機器と呼称してもよい。
【００１７】
本実施例では、アタッチメント２は鏡を一つ（鏡２１Ｔ）含むこととしたが、アタッチメント２に含まれる鏡の数は任意であって、通常は表示部１１で表示可能な方向の数に依存する。図２の例では、鏡２１Ｔはアタッチメント装着時に、表示部１１の上側（電子機器１の短手方向を鉛直上下方向とした場合の上方向、上側）に隣接し、表示部１１から出力される上側視野画像を反射可能な角度で支持されている。
【００１８】
なお、本実施例では電子機器１が携帯端末、タブレット、あるいはＰＤＡであるものとして扱うが、本発明の電子機器はこれに限らず、タッチ操作可能な表示部を含む電子機器であればどんな機器であってもよい。例えば本発明の電子機器を、タッチ操作可能な表示部を含むデスクトップ型パソコン、ゲーム機、コピー機、その他の家電、あるいは産業用機器などとしてもよい。
【００１９】
前述したように、アタッチメント２には複数の鏡を設けることができるが、鏡の数、鏡の配置については、表示部１１の仕様に依存する。表示部１１が左右や上下方向のみならず、上下左右の４方向など、より複雑な方向制御ができる場合は、方向の数に応じて鏡を複数配置しても良い。例えば図３に示すように、アタッチメント２には、鏡２１Ｔだけでなく、鏡２１Ｒが含まれてもよい。
【００２０】
この場合、鏡２１Ｒはアタッチメント装着時に、表示部１１の向かって右側（電子機器１の短手方向を鉛直上下方向として、電子機器１の表示部１１に対峙した場合の、向かって右側）に隣接し、表示部１１から出力される右側視野画像を反射可能な角度で支持されている。
【００２１】
なお、図２、図３では、鏡２１Ｔ（鏡２１Ｒ）の鏡面と表示部１１の表示面のなす角度が９０°以上に開いた状態で例示されているが、この角度は９０°、あるいは９０°以下としてもよい。  以下、図４を参照して本実施例の電子機器の構成を説明する。図４は、本実施例の電子機器１の構成を示すブロック図である。図４に示すように、本実施例の電子機器１は、表示部１１と、角度検知部１２と、表示制御部１３と、座標特定部１４と、操作認識部１５と、位置関連情報記憶部１６を含む。位置関連情報記憶部１６には、後述するステップＳ１４の実行に際して必要な情報が予め記憶されている。具体的には、位置関連情報記憶部１６には、表示部１１および鏡２１Ｔ、２１Ｒの大きさ及び相対位置に関する情報などが記憶されている。アタッチメント２には、鏡２１Ｔ、鏡２１Ｒ、…が含まれる。前述したようにアタッチメント２には三つ以上の鏡が含まれていてもよいし、鏡を一つのみとしてもよい。
【００２２】
以下、図５、図６を参照して本実施例の電子機器１の動作を説明する。図５は、本実施例の電子機器１の動作を示すフローチャートである。図６は、操作対象オブジェクトと補助表示の例を示す図である。
【００２３】
角度検知部１２は、表示部１１の表示面と鏡（図６の例では鏡２１Ｔ）の反射面とがなす角度を検知する（Ｓ１２）。角度検知部１２は、例えば赤外線光源による測距センサや、表示部１１とアタッチメント２に搭載された加速度センサなどで実現することができる。例えば図６に示すように、角度検知部１２は矢印８ｂで示した方向（電子機器１の略短手方向）に赤外光を照射する測距センサを含むものとし、この測距センサが、鏡２１Ｔと表示部１１とがなす角度を検出することとしてもよい。
【００２４】
次に、表示制御部１３は、鏡（図６の例では鏡２１Ｔ）に対応する方向に表示される画像を、ユーザの操作対象となる操作対象オブジェクトを含む画像（図６の例では操作対象オブジェクト群７を含む画像）とし、当該画像の表示制御を実行する（Ｓ１３）。
【００２５】
次に、座標特定部１４は、ユーザの表示部１１に対する操作３１を認識して、認識された操作３１によってユーザが指定した表示面上の座標を推定する。座標推定においては、例えば、表示部１１の表示面上で計測された静電容量の分布、静電容量が最大値（極大値）となる座標の時間変化などを特徴量として用いてもよい。
【００２６】
座標特定部１４は、位置関連情報記憶部１６に予め記憶されている表示部１１および鏡（図６の例では鏡２１Ｔ）の大きさ及び相対位置に関する情報、ステップＳ１２で検知された角度、本ステップで推定された座標に基づいて、推定された座標に対応する表示部１１の虚像の表示面における座標を特定する（Ｓ１４）。
【００２７】
ステップＳ１４について、図７を参照してさらに詳細に説明する。図７は、ユーザが指定した表示面上の座標とこれに対応する虚像の表示面上の座標との関係を説明する図である。図７の例では、観測位置の情報（ユーザの目の位置の情報、三次元座標情報）を、（ｘｅｙｅ，ｙｅｙｅ，ｚｅｙｅ）と表した。また、ステップＳ１４で推定される表示面上の座標を（ｘｆｉｎｇｅｒ，ｙｆｉｎｇｅｒ，ｚｆｉｎｇｅｒ）とした。また、ステップＳ１４で推定される座標に対応する虚像の表示面上の座標を（ｘｖｉｒｔｕａｌ，ｙｖｉｒｔｕａｌ，ｚｖｉｒｔｕａｌ）とした。上述したように、位置関連情報記憶部１６には、表示部１１および鏡２１Ｔの大きさ及び相対位置に関する情報が記憶されている。ステップＳ１２で検知される角度は、図７において角度αとして表されている。座標特定部１４は、これらの情報に基づいて、推定された座標（ｘｆｉｎｇｅｒ，ｙｆｉｎｇｅｒ，ｚｆｉｎｇｅｒ）に対応する虚像の表示面上の座標（ｘｖｉｒｔｕａｌ，ｙｖｉｒｔｕａｌ，ｚｖｉｒｔｕａｌ）を特定する。なお座標特定部１４は（ｘｖｉｒｔｕａｌ，ｙｖｉｒｔｕａｌ，ｚｖｉｒｔｕａｌ）を、虚像の表示面上の２次元座標系の座標（Ｚｘ，Ｚｙ）に変換し、これを特定された座標として出力する（Ｓ１４）。
【００２８】
次に、操作認識部１５は、操作対象オブジェクトを含む画像（図６の例では、鏡２１Ｔに映し出されている画像）のうち、特定された座標（Ｚｘ，Ｚｙ）に対応する操作対象オブジェクト（図６の例では数字「３」を表す操作対象オブジェクト）に対して、ユーザが操作を実行したものと見做して、操作を認識する（Ｓ１５）。なお、図６に示すように、ユーザは、操作指３１ａに対する鏡像５１ａを観察しながら操作を実行することができ、ステップＳ１４で特定される座標（Ｚｘ，Ｚｙ）は、鏡像５１ａの指の先端位置に近似するため、ユーザの操作の結果も鏡像５１ａの位置に従った結果となる。すなわちユーザは、鏡２１Ｔに映し出された操作対象オブジェクト群７と、操作指３１ａに対応する鏡像５１ａの位置とを確認しながら、所望の操作対象オブジェクトを選択することになる。
【００２９】
上述したように、ユーザは、主に鏡２１Ｔに映し出された操作対象オブジェクト群７を、鏡２１Ｔに映る操作指の鏡像５１ａを用いて選択することになるため、表示部１１には何も表示しなくてもよい。なお、表示部１１には、ユーザの入力を補助する補助表示（例えば図６の補助表示４）のみを表示することとしてもよい。補助表示４については、以下に詳細に説明する。
【００３０】
＜補助表示４＞
ユーザが鏡像５１ａを目安にして、鏡２１Ｔに映し出された操作対象オブジェクトを選択しようとするとき、実際の操作指３１ａの動く方向と、その鏡像５１ａの動く方向とが食い違う場合があり、このことが直感的な入力・操作の妨げになる。例えば図６の例では、操作指３１ａの先端がユーザから見て手前側から奥側に移動するとき、その鏡像５１ａの指の先端は、奥側から手前側に向かう向きに移動する。例えば図６のようにユーザが鏡像５１ａの指の先端を鏡２１Ｔに映し出された「３」キーに位置させている場合であって、この後に「６」キーを押下したい場合、ユーザは操作指３１ａを誤って奥側から手前側にひっこめてしまう場合がある。ここでは操作指３１ａを手前側から奥側に動かす動作が正しい。
【００３１】
上述したような、ユーザが鏡像を扱う際に生じるややこしさを緩和するために、表示制御部１３は、表示部１１に、例えば鏡２１Ｔ上に映し出された操作対象オブジェクト群７の上下方向を逆さまにしてそのフレームだけとした画像を、補助表示４として表示してもよい。補助表示は図６の例に限らず、表示面上の座標と、反射面における座標との関係をユーザに確認させることができれば、どんなものであってもよい。
【００３２】
ユーザは、補助表示４を適宜参照しながら、操作・入力を行うことにより、表示面上の座標と、反射面における座標との対応関係を直感的に理解できる。
【００３３】
本実施例の電子機器１によれば、疑似的な複数画面表示機能を利用して、個人情報や秘密情報が含まれる画面（例えば認証画面など）を、鏡に映しだすこととしたため、これらの画面を他人から窃視（のぞき見）されにくくすることに成功した。
【００３４】
従来のスマートフォンでは、認証画面などのセキュアな画面も表示部１１に通常通り表示されるだけであったため、様々な角度から窃視（のぞき見）が可能であった。例えばユーザが着席した状態でスマートフォンを机の上に置いて操作している場合、当該スマートフォンは机の周辺に立っている人、机の周辺を歩行している人から簡単にのぞき見されてしまう。一方、本実施例の電子機器１においては、多くの場合ユーザの背中などが死角を形成するため、鏡面に映しだされた鏡像は容易には窃視（のぞき見）できない。
【００３５】
＜補記＞
本発明の装置は、例えば図８に示すような単一のハードウェアエンティティとして、キーボードなどが接続可能な入力部１１０００、液晶ディスプレイなどが接続可能な出力部１２０００、ハードウェアエンティティの外部に通信可能な通信装置（例えば通信ケーブル）が接続可能な通信部１３０００、ＣＰＵ１４０００（Central Processing Unit、キャッシュメモリやレジスタなどを備えていてもよい）、メモリであるＲＡＭ１５０００やＲＯＭ１６０００、ハードディスクである外部記憶装置１７０００並びにこれらの入力部１１０００、出力部１２０００、通信部１３０００、ＣＰＵ１４０００、ＲＡＭ１５０００、ＲＯＭ１６０００、外部記憶装置１７０００の間のデータのやり取りが可能なように接続するバス１８０００を有している。また必要に応じて、ハードウェアエンティティに、ＣＤ−ＲＯＭなどの記録媒体を読み書きできる装置（ドライブ）１９０００などを設けることとしてもよい。このようなハードウェア資源を備えた物理的実体としては、汎用コンピュータなどがある。
【００３６】
ハードウェアエンティティの外部記憶装置には、上述の機能を実現するために必要となるプログラムおよびこのプログラムの処理において必要となるデータなどが記憶されている（外部記憶装置に限らず、例えばプログラムを読み出し専用記憶装置であるＲＯＭに記憶させておくこととしてもよい）。また、これらのプログラムの処理によって得られるデータなどは、ＲＡＭや外部記憶装置などに適宜に記憶される。
【００３７】
ハードウェアエンティティでは、外部記憶装置（あるいはＲＯＭなど）に記憶された各プログラムとこの各プログラムの処理に必要なデータが必要に応じてメモリに読み込まれて、適宜にＣＰＵで解釈実行・処理される。その結果、ＣＰＵが所定の機能（上記、…部、…手段などと表した各構成要件）を実現する。
【００３８】
本発明は上述の実施形態に限定されるものではなく、本発明の趣旨を逸脱しない範囲で適宜変更が可能である。また、上記実施形態において説明した処理は、記載の順に従って時系列に実行されるのみならず、処理を実行する装置の処理能力あるいは必要に応じて並列的にあるいは個別に実行されるとしてもよい。
【００３９】
既述のように、上記実施形態において説明したハードウェアエンティティ（本発明の装置）における処理機能をコンピュータによって実現する場合、ハードウェアエンティティが有すべき機能の処理内容はプログラムによって記述される。そして、このプログラムをコンピュータで実行することにより、上記ハードウェアエンティティにおける処理機能がコンピュータ上で実現される。
【００４０】
この処理内容を記述したプログラムは、コンピュータで読み取り可能な記録媒体に記録しておくことができる。コンピュータで読み取り可能な記録媒体としては、例えば、磁気記録装置、光ディスク、光磁気記録媒体、半導体メモリ等どのようなものでもよい。具体的には、例えば、磁気記録装置として、ハードディスク装置、フレキシブルディスク、磁気テープ等を、光ディスクとして、ＤＶＤ（Digital Versatile Disc）、ＤＶＤ−ＲＡＭ（Random Access Memory）、ＣＤ−ＲＯＭ（Compact Disc Read Only Memory）、ＣＤ−Ｒ（Recordable）／ＲＷ（ReWritable）等を、光磁気記録媒体として、ＭＯ（Magneto-Optical disc）等を、半導体メモリとしてＥＥＰ−ＲＯＭ（Electronically Erasable and Programmable-Read Only Memory）等を用いることができる。
【００４１】
また、このプログラムの流通は、例えば、そのプログラムを記録したＤＶＤ、ＣＤ−ＲＯＭ等の可搬型記録媒体を販売、譲渡、貸与等することによって行う。さらに、このプログラムをサーバコンピュータの記憶装置に格納しておき、ネットワークを介して、サーバコンピュータから他のコンピュータにそのプログラムを転送することにより、このプログラムを流通させる構成としてもよい。
【００４２】
このようなプログラムを実行するコンピュータは、例えば、まず、可搬型記録媒体に記録されたプログラムもしくはサーバコンピュータから転送されたプログラムを、一旦、自己の記憶装置に格納する。そして、処理の実行時、このコンピュータは、自己の記録媒体に格納されたプログラムを読み取り、読み取ったプログラムに従った処理を実行する。また、このプログラムの別の実行形態として、コンピュータが可搬型記録媒体から直接プログラムを読み取り、そのプログラムに従った処理を実行することとしてもよく、さらに、このコンピュータにサーバコンピュータからプログラムが転送されるたびに、逐次、受け取ったプログラムに従った処理を実行することとしてもよい。また、サーバコンピュータから、このコンピュータへのプログラムの転送は行わず、その実行指示と結果取得のみによって処理機能を実現する、いわゆるＡＳＰ（Application Service Provider）型のサービスによって、上述の処理を実行する構成としてもよい。なお、本形態におけるプログラムには、電子計算機による処理の用に供する情報であってプログラムに準ずるもの（コンピュータに対する直接の指令ではないがコンピュータの処理を規定する性質を有するデータ等）を含むものとする。
【００４３】
また、この形態では、コンピュータ上で所定のプログラムを実行させることにより、ハードウェアエンティティを構成することとしたが、これらの処理内容の少なくとも一部をハードウェア的に実現することとしてもよい。
【図１】
2017117167.tif 000003
【図２】
2017117167.tif 000004
【図３】
2017117167.tif 000005
【図４】
2017117167.tif 000006
【図５】
2017117167.tif 000007
【図６】
2017117167.tif 000008
【図７】
2017117167.tif 000009
【図８】
2017117167.tif 000010