(57)【要約】【課題】電子機器、表示システムおよび表示方法を提供する。【解決手段】実施形態の眼鏡型電子機器は、画像表示部と、表示体と、表示制御部と、を具備する。画像表示部は、像を生成する。表示体は、装着者の視線の延長上の所定の位置に位置し、前記画像表示部からの前記像を可視化する。表示制御部は、装着者の瞳の位置と前記表示体が可視化する前記像との位置関係に基づき、前記画像表示部が生成する前記像の位置を変更するための情報を取得して前記画像表示部に表示させる。【選択図】図２
2017151363.tif 000002
【特許請求の範囲】
【請求項１】
像を生成する画像表示部と、
装着者の視線の延長上の所定の位置に位置し、前記画像表示部からの前記像を可視化する表示体と、
装着者の瞳の位置と前記表示体が可視化する前記像との位置関係に基づき、前記画像表示部が生成する前記像の位置を変更するための情報を取得して前記画像表示部に表示させる表示制御部と、
を具備する眼鏡型電子機器。
【請求項２】
前記表示制御部が表示する前記調整量の情報は、電子機器を装着した状態の装着者の瞳の位置と前記表示体が可視化する前記像の位置とに基づいて規定される請求項１の眼鏡型電子機器。
【請求項３】
前記調整量の情報に対応する前記画像表示部への制御指示を入力可能な調整機構をさらに具備する請求項１または２の眼鏡型電子機器。
【請求項４】
像を生成する画像表示部と、装着者の視線の延長上の所定の位置に位置し、前記画像表示部からの前記像を可視化する表示体と、装着者の瞳の位置と前記表示体が可視化する前記像との位置関係に基づいて、前記画像表示部が生成する前記像の位置を変更するための情報を取得して前記画像表示部に表示させる表示制御部と、
を具備する第一の電子機器と、
前記第一の電子機器を装着した装着者の画像に基づき、装着者の瞳の位置と前記表示体が可視化する前記像の位置との位置関係を取得する画像検出部と、前記第一の電子機器の前記画像表示部に、前記画像表示部が生成する前記像の位置を変更するための前記調製量を提示するための画像情報を供給する画像データ生成部と、
を具備する第二の電子機器と、
を含む表示システム。
【請求項５】
前記表示制御部が表示する前記調整量の情報は、電子機器を装着した状態の装着者の瞳の位置と前記表示体が可視化する前記像の位置とに基づいて規定される請求項４の表示システム。
【請求項６】
前記第一の電子機器は、前記調整量の情報に対応する前記画像表示部への制御指示を入力可能な調整機構をさらに具備する請求項４または５の表示システム。
【請求項７】
装着者の視線の延長上の所定の位置に位置する表示体により、画像表示部からの像を可視化し、
装着者の瞳の位置と表示体が可視化した像との位置関係に基づいて前記画像表示部が生成する前記像の位置を変更するための情報を前記画像表示部に表示させる表示方法。
【発明の詳細な説明】
【技術分野】
【０００１】
この発明は、電子機器、表示システムおよび表示方法に関する。
【背景技術】
【０００２】
電子機器、例えば装着者の少なくとも一方の視線の延長線上に、映像やメッセージ等の情報を提供するウェアラブル装置が実用化されている。この種のウェアラブル装置では、装着者は、直視している像や景色とその像や景色に重ねて表示される映像やメッセージの両方を、実質的に視線を移動することなく、視認できる。
【先行技術文献】
【特許文献】
【０００３】
【特許文献１】特開２０１２−２２６３５５号公報
【発明の概要】
【発明が解決しようとする課題】
【０００４】
新しい映像表示装置として、眼鏡型のウェアラブル装置が実用化されている。眼鏡型のウェアラブル装置は、ビジネス用途からコンシューマ用途まで幅広い用途を想定しているが、ビジネス用途では、１つのウェアラブル装置を、複数の利用者（装着者）で共有して使用することが想定される。ただし、装着者ごとに瞳の位置が違うため、装着のつど、表示位置の調整が必要である。
【０００５】
しかしながら、表示位置の調整には比較的時間がかかることもある。特に、正確な位置調整は、容易ではない場合も少なくない。また、表示位置に伴って表示内容を最適化する必要がある場合は、表示内容の調整も合わせて実施することが必要である。
【０００６】
この発明の目的は、装着者ごとの表示位置の調整を容易とする電子機器、表示システムおよび表示方法を提供することである。
【課題を解決するための手段】
【０００７】
実施形態の眼鏡型電子機器は、画像表示部と、表示体と、表示制御部と、を具備する。画像表示部は、像を生成する。表示体は、装着者の視線の延長上の所定の位置に位置し、前記画像表示部からの前記像を可視化する。表示制御部は、装着者の瞳の位置と前記表示体が可視化する前記像との位置関係に基づき、前記画像表示部が生成する前記像の位置を変更するための情報を取得して前記画像表示部に表示させる。
【図面の簡単な説明】
【０００８】
【図１】実施形態に係る電子機器とその電子機器を含む表示システムの一例を示す。
【図２】実施形態に係る電子機器とその電子機器を含む表示システムにおける動作の一例を示す。
【図３】実施形態に係る表示システムにおける動作を実現する方法の一例を示す。
【図４】実施形態に係る電子機器の一例を示す。
【図５】実施形態に係る電子機器の一例を示す。
【図６】実施形態に係る電子機器における動作を実現する方法の一例を示す。
【図７】実施形態に係る電子機器とその電子機器を含む表示システムの一例を示す。
【図８】実施形態に係る電子機器とその電子機器を含む表示システムの一例を示す。
【図９】実施形態に係る表示システムにおける動作を実現する方法の一例を示す。
【図１０】実施形態に係る電子機器の一例を示す。
【図１１】実施形態に係る電子機器とその電子機器を含む表示システムの一例を示す。
【図１２】実施形態に係る電子機器とその電子機器を含む表示システムの一例を示す。
【図１３】実施形態に係る電子機器における表示制御の一例を示す。
【発明を実施するための形態】
【０００９】
以下、図面を参照して、実施の一形態について説明する。
【００１０】
図１は、実施形態に係るウェアラブル装置（電子機器）およびウェアラブル装置を含む表示システムの一例を示す。表示システムは、利用者の所定の位置に装着可能な、あるいは利用者が携帯可能な端末装置であるウェアラブル装置と、例えばスマートフォンあるいはタブレットＰＣ（パーソナルコンピュータ）等である制御装置と、からなる。
【００１１】
ウェアラブル装置は、制御装置からの情報を、利用者（装着者）の両手もしくは少なくとも片手を自由に動かすことのできるハンズフリー状態で、装着者が利用（実施形態では主として目視）可能に、装着者の視線の延長上の所定の位置に、表示する。ウェアラブル装置は、例えば眼鏡型であって、利用者が顔部（頭部）に装着できることが好ましい。ウェアラブル装置は、利用者の頭部あるいは頭部を含む所定の位置に装着するヘッドマウントディスプレイ型であってもよい。制御装置は、画像情報を取得する撮影装置（カメラモジュール）からの入力画像に基づいて、ウェアラブル装置が表示する映像の表示位置を制御する。制御装置は、表示装置（ディスプレイ）あるいはカメラモジュールの少なくとも一方を、一体に有するものであってもよい。但し、ディスプレイあるいはカメラモジュールは、制御装置と一体に機能するものであるならば、無線もしくは有線による電気的な接続により、制御装置と別々に用意されるものであってもよい。制御装置はまた、ウェアラブル装置とともに利用者が携帯できるものであってもよい。また、制御装置は、例えばサービスサーバのように固定された状態で利用されることも許容する固定的要素（例えば、本体ユニット）とウェアラブル装置との間の信号の受け渡しのための携帯可能な要素（例えば、通信ユニット）とを含み、通信ユニット（携帯可能な要素）をウェアラブル装置ととも携帯するものであってもよい。
【００１２】
制御装置２０１は、例えば画像入力インタフェース２１１、画像取得部２１２、画像検出部２１３、表示位置検出部２１４、映像表示部２１５および画面出力インタフェース２１６を、含む。制御装置２０１には、カメラモジュール２０３およびディスプレイ２０５が接続する。制御装置２０１がタブレットＰＣあるいはスマートフォンである場合、カメラモジュール２０３あるいはディスプレイ２０５の少なくとも一方もしくは両方が（制御装置２０１）と一体である場合もある。制御装置２０１が、上述したように、固定的要素と通信ユニットとを含む場合、固定的要素から指示情報（表示情報）やデータを受信して表示するディスプレイ２０５が独立して用意されてもよい。
【００１３】
画像入力インタフェース２１１は、カメラモジュール２０３と画像取得部２１２とを、カメラモジュール２０３から画像取得部２１２への画像（画像データ）の転送が可能に、接続する。画像入力インタフェース２１１は、画像取得部２１２からカメラモジュール２０３への、およびまたはカメラモジュール２０３から画像取得部２１２への制御信号の受け渡しを制御する。
【００１４】
画像取得部２１２は、画像入力インタフェース２１１を通じてカメラモジュール２０３から画像（画像データ）を取得する。画像取得部２１２は、例えばスマートフォンやタブレットＰＣ、等のソフトウェアモジュールであってもよい。
【００１５】
画像検出部２１３は、画像取得部２１２が取得した画像（画像データ）から、ウェアラブル装置１０１のフレーム状部（２Ｒ、２Ｌ）および（装着者の）瞳の位置を検出する。画像検出部２１３は、例えば図６（ａ）−図６（ｃ）に一例を示す方法で、ウェアラブル装置１０１のフレーム状部（２Ｒ、２Ｌ）の所定の位置、例えば表示領域に表示（投影）される画像の中心位置との（装着者の）瞳の位置との間のズレの程度（ズレ量と呼称する場合もある）を、検出する。
【００１６】
表示位置検出部２１４は、画像検出部２１３が検出したデータから表示位置（表示画像を投影すべき位置）を計算する。例えば、検出したズレ量に基づいて、出力する画像の表示位置（一例として、表示する表示画像の中心座標）を設定する。表示位置検出部２１４は、より詳細には、出力する画像（表示画像）の表示位置について、ウェアラブル装置１０１の、例えば図４に一例を示すような調整機構（調整ツマミ）１７の操作により調整可能な、主として左右方向の表示位置の調整量、を設定する。
【００１７】
映像表示部２１５は、表示位置検出部２１４が設定する表示位置の調整量に基づいて、スクリーン３に表示される画像（表示）の表示位置の左右方向の表示角度を最適に設定するために利用可能な表示角度情報（ウェアラブル装置１０１を装着した装着者が調整機構（調整ツマミ）１７により調整すべき量および方向を示す情報）であって、例えば『ツマミを右にＮ（Ｎは正の整数）ダイヤル回してください』、等を生成する。
【００１８】
画面出力インタフェース２１６は、映像表示部２１５と図４および図５により説明するウェアラブル装置１０１の画像出力部１０（投影部１）とを、映像表示部２１５から画像出力部１０（画像投影部１）への画像の転送が可能に、接続する。画像は、例えば調整機構（調整ツマミ）１７により表示角度を調整ための調整すべき量および方向を示す情報、である。すなわち、画像出力インタフェース２１６は、映像表示部２１５から画像出力部（画像投影部）への、およびまたは画像出力部１０（投影部１）から画像取得部２１２への制御信号の受け渡しを制御する。
【００１９】
図２は、実施形態に係るウェアラブル装置（電子機器）と、ウェアラブル装置を含む表示システムにおける動作の一例を、ソフトウエア的に示す。
【００２０】
表示システムにおいて、ウェアラブル装置１０１を装着した装着者（利用者）は、制御装置（スマートフォンあるいはタブレットＰＣ）２０１と接続した（制御装置と一体に設けられている）撮影装置（カメラモジュール２０３（図１参照））により、ウェアラブル装置１０１を装着した状態の装着者自身の顔を撮影する［１１］。
【００２１】
撮影した画像（例えば図３（ａ）が示す表示画像）から、ウェアラブル装置１０１の投光部支持部（本体）２のフレーム状部２Ｒが支持するスクリーン（表示部）３の表示領域３ａの所定位置（基準位置）とウェアラブル装置１０１を装着した装着者の瞳の位置とを検出する［１２］。
【００２２】
検出した装着者の瞳の位置の情報から、投影画像を投影（表示）する際に、装着者にとって最適な表示位置がとなるよう、スクリーン３上での最適な表示位置を計算する。すなわち、フレーム状部２Ｒのスクリーン３の表示領域３ａが、装着者にとって最適な表示位置に位置するよう、ウェアラブル装置１０１の画像出力部１０（画像投影部１）が出力すべき出力画像の位置（左右方向）を計算する［１３］。なお、スクリーン３の表示領域３ａの基準位置は、例えば本体２の左右の（２つの）フレーム状部（２Ｒ、２Ｌ）の左右方向の中心点（以下フレーム間中心と称する場合もある）から所定の距離の位置であることが好ましい。また、表示領域３ａの基準位置を求める場合、２つのフレーム状部（２Ｒおよび２Ｌ）の、例えば上下方向の中心もしくは装着者の左右の瞳の中心を結ぶ（仮想的な）線分上で、求めることが好ましい。
【００２３】
計算された装着者にとって最適な表示位置を提示する画像（調整機構（調整ツマミ）１７により表示角度を調整ための調整すべき量および方向を示す情報）を作成し、スクリーン３（ウェアラブル装置１０１）およびディスプレイ２０５の少なくとも一方に、表示する［１４］。
【００２４】
図３（ａ）および図３（ｂ）は、ウェアラブル装置１０１装着した装着者を、装着者自身が、制御装置（タブレットＰＣもしくはスマートフォン）２０１のカメラ機構により撮影すること、および撮影により得られる（制御装置２０１の）表示装置が表示する表示画像の例を示す。
【００２５】
図４および図５が示すウェアラブル装置１０１は、投光部（表示情報生成部）１、投光部支持部（本体）２、スクリーン（表示部）３、駆動回路部（画像表示回路、光源駆動回路、あるいは信号処理部と称することもある）４、通信部５および電源部６、等を含む。
【００２６】
投光部１は、光源１０および少なくとも情報表示ユニット７および投射（拡大）光学系８を含む。投光部１は、駆動回路部４、通信部５および電源部６を内蔵し、本体２の所定の位置、例えばウェアラブル装置１０１が眼鏡型に形成される場合におけるフレーム状部から伸びる弦部（耳かけ部）に着脱可能に、位置する。投光部１は、例えばフレーム状部に内蔵されても良い。
【００２７】
本体２は、投光部１およびスクリーン３とともに、投光部１およびスクリーン３の釣合い重りとして機能する透明体９を、一体的に支持する。スクリーン３は、投光部１の情報表示ユニット７が表示する情報（像）を光源１０からの光により照明して得られる表示画像（すなわち情報表示ユニット７が表示する像に基づいて輝度が空間変調された表示）を投射（拡大）光学系８で拡大した画像光１３を可視化する。すなわち、スクリーン３は、ウェアラブル装置１０１を装着した装着者の視線の延長上に見える像、すなわち背景（環境）像の一部を透過し、表示画像を拡大した画像光１３の可視像とともに、装着者に視認（知覚）可能とする。駆動回路部４は、通信部５が取得する表示データに基づいて、情報表示ユニット７に、出力画像（スクリーン３の表示領域３ａに表示する表示画像）に対応する像、例えば映像やメッセージ（テキスト）を表示する。なお、出力画像に対応する像を、単に出力画像もしくは出力像あるいは画像光と略称する場合がある。通信部５は、情報表示ユニット７が表示する出力画像に対応する像を生成するための基となるデータを情報供給元すなわち制御装置２０１から受け取り、投光部１において共用可能な記憶部（メモリ）、例えば（自身の）ワークメモリ上に記憶領域を規定するソフトウエアメモリもしくは駆動回路部４におけるファームウエア（ソフトウエアメモリ）に、一時的に格納する。情報供給元は、制御装置２０１が接続可能な、例えばネットワーク上のシステムコントローラもしくはデータサーバである場合もある。情報供給元は、例えばＵＳＢ（Universal Serial Bus）規格等に準拠し、ウェアラブル装置１０１の投光部１の通信部５あるいは駆動回路部４と接続可能で、通信部５あるいは駆動回路部４が（データを）読み取り可能な外部メモリ装置であってもよい。電源部６は、例えばボタン型電池と、接続用の端子および駆動回路部４および通信部５との間の接続線、等を含む。情報表示ユニット７は、例えば反射型のＬＣＤ（Liquid Crystal Display）パネルであり、駆動回路部４による表示制御に基づいて、出力画像を表示する。透明体９は、例えば光量検出センサ面（光電変換膜）等を実質的に、一体に有し、装着者が（ウェアラブル装置１０１の）スクリーン３および透明体９越しに視認する環境（スクリーン３の前方の状態であってスクリーン３が表示する出力画像に対して背景と称することもある）の明るさの情報を取得できることが好ましい。もちろん、環境（背景）の明るさの情報を取得するための光量検出センサを独立に設けるものであってもよいことはいうまでもない。なお、ウェアラブル装置１０１にカメラ機能（例えば、レンズおよび画像処理部）５１が設けられている場合、装着者が本体２のスクリーン３および透明体９越しに視認する環境（背景）の明るさの情報を、カメラ機能５１の明るさ検出機能を利用してもよいことはいうまでもない。
【００２８】
投光部（表示情報生成部）１の所定の位置、例えば底面部には、例えばスライド式スイッチ１６および調整ツマミ１７、等が位置する。スイッチ１６は、例えば投光部１が出射する画像光１３（表示情報に対応する像）の輝度（光源１０が出力する照明光の明るさ（および色調））の調整のための制御量の入力を受け持つ。ツマミ１７は、例えば投光部１が出射する画像光１３の投射（出射）角度すなわちスクリーン３の表示領域３ａの左右方向の表示位置の調整のための制御量（表示角度情報）の入力を受け持つ。すなわち、ウェアラブル装置１０１を装着した装着者は、スクリーン３に表示（投影）された映像生成部２１５（図１参照）からの調整量の情報（表示）に基づいて、スクリーン３に表示される画像（表示）の表示位置の（左右方向の）表示角度を最適に設定することができる。
【００２９】
スイッチ１６および調整ツマミ１７を、異なる動作（実施形態においてはスライドおよび回転）により調整量（制御量）の設定（入力）を可能とすることで、装着者が、画像光１３をスクリーン３にて可視化した可視像（出力画像）を目視しながら、ブラインドタッチで、輝度および投射角度（表示領域３ａの左右方向の位置）を調整可能である。すなわち、実施形態においては、装着者がスイッチ１６を操作することで、装着者の希望する可視像の表示輝度や色調を提供できる。また、装着者は、調整ツマミ１７を操作することにより、ウェアラブル装置１０１の投光部１が出力する出力画像の表示領域３ａ（スクリーン３）上での（左右方向の）表示位置（表示角度）を最適な位置（角度）に設定できる。なお、スイッチ１６とツマミ１７による調整対象は逆であっても良いことはもちろんであるし、スイッチ１６とツマミ１７の位置が逆であってもよい。
【００３０】
投光部１はまた、所定の位置、例えば底面部に、スピーカ１８を有することができる。スピーカ１８は、例えば管理者（あるいは監督者）からのメッセージ、等を、音声情報として（ウェアラブル装置の）装着者である作業者に通知する（音声情報を再生する）ために有益である。スピーカ１８は、例えばイヤフォン状に構成され、装着者の耳に直接、装着可能であってもよい。
【００３１】
投光部１はまた、所定の位置にマイクロフォンを有することができる。マイクロフォンは、例えば（ウェアラブル装置１０１の）装着者から管理者（もしくは監督者）へのメッセージ、等を、管理者（もしくは監督者）へ通知する（前段として音声情報を入力する）ために有益である。マイクロフォンは、例えば投光部１から装着者の口元の近傍に伸びる支持部材により、装着者の口元の近傍に位置されることが好ましい。
【００３２】
次に、投光部１によるスクリーン３への情報（像）の表示について説明する。
【００３３】
投光部１の光源１０は、例えば３個のＬＥＤ（Light Emitting Diode）素子を含む調光型白色ＬＥＤモジュール（Ｌ−ｃｏｓ）であることが好ましい。調光型白色ＬＥＤモジュールのそれぞれのＬＥＤ素子は、互いに発光色が異なり、それぞれの（素子の）出力光量を独立して変更可能であり、任意の色の光を出力できる。光源１０からの白色光の一部（照明光）は、ミラープリズム１２のハーフミラー面１１により、情報表示ユニット７に向けられる。情報表示ユニット７は、ハーフミラー面１１で反射した光源１０からの照明光により照明される。これにより、情報表示ユニット７が表示する出力画像（映像やメッセージ）は、ミラープリズム１２側へ反射する。以下、情報表示ユニット７で反射した出力画像に対応する像を含む光を、画像光あるいは出力像もしくは出力画像１３と称する。
【００３４】
光源１０は、例えばＲ（赤）、Ｇ（緑）、Ｂ（青）のそれぞれの色の光を独立して出力する３つの発光部を有するもの（３板型Ｌ−ｃｏｓ）であってもよい。この場合、情報表示ユニット７を、例えばＭＥＭＳ（Micro Electro Mechanical Syestm）技術により得られるＤＭＤ（Digital Mirror Device）方式で像を表示することにより、より解像度の高い像を出力可能となる。また、独立した３つの発光部を用いることにより、コントラスト比の可変範囲や輝度の調整範囲を、一層、広げることが可能である。なお、それぞれの発光部（光源）は、レーザ素子であってもよい。また、図１０を用いて後段に示すように、ＤＬＰ（Digital Light Precessing）すなわちＭＥＭＳ技術を適用して得られるレーザ表示アレイが出力する光（映像）を、装着者の目（網膜）をスクリーンとして、装着者に直接、知覚させる「網膜走査方式」を適用することも可能である。
【００３５】
画像光１３は、ミラープリズム１２を透過し、投射光学系８のレンズ１４より所定の大きさに拡大され、スクリーン３のフレネルレンズ形ハーフミラー面１５に到達して、可視像となる。可視像（フレネルレンズ形ハーフミラー面１５に到達した画像光１３）は、本体２を装着した装着者の一方の眼の視線の延長上に、フレネルレンズ形ハーフミラー面１５が提供する拡大倍率に従う所定の大きさで視認（知覚）できる。画像光１３は、投光部１が１個であること、投光により得られる可視像を表示するスクリーン３と投光部１との間の距離、および投光部１からスクリーン３への像の出射時の角度に起因するが、装着者の一方の眼のみによって、視認（知覚）可能である。なお、投光部１を、装着者の一方の眼のみによって視認（知覚）可能に、画像光１３（表示情報）を提供する構成としたことにより、ウェアラブル装置１０１の重量を軽減できる。これにより、ウェアラブル装置１０１を装着した状態で、長時間の作業が可能となる。すなわち、ウェアラブル装置１０１を装着して長時間作業する場合の装着者への負担（負荷）を低減できる。
【００３６】
図６（ａ）−図６（ｃ）は、図２により説明した表示システムを適用することが好適な装着者の瞳の位置とウェアラブル装置の本体のスクリーンの表示領域の位置との関係を、装着者の両目の瞳の位置と関連付けて示している。
【００３７】
ウェアラブル装置１０１を装着した装着者を（装着者自身が）制御装置（タブレットＰＣもしくはスマートフォン）２０１と一体的に利用可能なカメラ機構により撮影した撮影結果（取得画像（図３（ａ）、図３（ｂ）参照）から、装着者の瞳の位置（右目および左目のそれぞれ）とウェアラブル装置１０１の本体２のフレーム状部２Ｒ、２Ｌのそれぞれの位置とに関係する図６（ａ）−図６（ｃ）が示すような３つのパターンのいずれかの画像情報が得られる。
【００３８】
装着者の両目の瞳の中心が、それぞれ、フレーム状部２Ｒおよび２Ｌのそれぞれの中心または両フレーム状部２Ｒ、２Ｌの上下方向の所定の位置を結んだ左右方向に延びる線分の中心から概ね等しい距離に位置する状態を考える。
【００３９】
図６（ｂ）が示すように、両フレーム状部２Ｒ、２Ｌの上下方向の所定の位置を結んだ左右方向に延びる線分の中心から概ね等しい距離Ｗ０の距離に装着者の一方の目の瞳の中心が位置する場合に、投光部１から投光され、予め決められた表示領域３ａの幅として予定された左右方向の大きさ（幅）を有する画像光（出力画像）の中心が、装着者の瞳の中心と一致するものとする。このとき、表示領域３ａの幅方向（左右方向）の一方の端部（実施形態においては、フレーム状部２Ｒおよび２Ｌの中心側の端部）は、一方のフレーム状部（実施形態においては、フレーム状部２Ｒ）側に規定される基準位置Ｒ０との間に、距離ｗ０を有するものとする。
【００４０】
基準位置Ｒ０は、例えばフレーム状部２Ｒに位置するスクリーン３の湾曲成分、等の影響を考慮し、Ｒ０とフレーム状部２Ｒ、２Ｌの中心寄りの任意の位置との間には、画像を投光しないことが好ましい領域として定義する。なお、Ｒ０の大きさは、両フレーム状部２Ｒ、２Ｌの上下方向の所定の位置を結んだ左右方向に延びる線分の中心から、例えば１５ｍｍより大きいことが好ましい。
【００４１】
制御装置（タブレットＰＣもしくはスマートフォン）２０１により撮影し、制御装置２０１の表示部（例えばディスプレイ２０５）が表示する表示画像に対応する画像情報が、例えば図６（ｃ）が示すように、距離Ｗ０よりも距離Ｗ２だけフレーム状部２Ｒおよび２Ｌの中心から離れている場合、投光部１から投光され、表示領域３ａの幅として予定された左右方向の大きさ（幅）を有する画像光は、基準位置Ｒ０との間に、距離ｗ２を有する。このような場合、投光部１の情報表示ユニット７が表示（投影）する画像（情報）の表示位置の情報（スクリーン３に映しだされる映像生成部２１５が出力する（左右方向の）表示角度の調整量）であって、装着者が（ツマミ１７により）調整すべき大きさ（調整量）は、例えば「（ｗ２−ｗ０）＋ｗ０」で、示すことができる。
【００４２】
従い、ウェアラブル装置１０１を装着した装着者は、スクリーン３に表示（投影）された映像生成部２１５（図１参照）からの調整量の情報（表示）に基づいて、スクリーン３に表示される画像（表示）の表示位置の（左右方向の）表示角度を、上述のツマミ１７による調整により（自身で）、最適に設定することができる。
【００４３】
制御装置２０１により撮影し、制御装置２０１のディスプレイ２０５が表示する表示画像から取得した画像情報が、例えば図６（ａ）が示すように、距離Ｗ０よりも距離Ｗ１だけフレーム状部２Ｒおよび２Ｌの中心に近づいている場合、投光部１から投光され、表示領域３ａの幅として予定された左右方向の大きさ（幅）を有する画像光は、基準位置Ｒ０との間に、距離ｗ１を有する。このような場合、投光部１の情報表示ユニット７が表示する画像（情報）の表示位置の情報（すなわち表示領域３ａとしてスクリーン３に映しだされる映像生成部２１５が出力する（左右方向の）表示角度の調整量）であって、装着者が（ツマミ１７により）調整すべき大きさは、例えば「（ｗ０−ｗ１）＋ｗ０」相当量、として示すことができる。
【００４４】
従い、ウェアラブル装置１０１を装着した装着者は、スクリーン３に表示（投影）された映像生成部２１５（図１参照）からの調整量に基づいて、スクリーン３に表示される画像（表示）の表示位置の（左右方向の）表示角度を最適に設定することができる。
【００４５】
図７は、実施形態に係るウェアラブル装置およびウェアラブル装置を含む表示システムの一例を示す。なお、図１により説明したウェアラブル装置と同一または実質的に等価の構成には、同じ符号を付して詳細な説明を省略する（場合もある）。
【００４６】
図７が示す実施形態においては、図１により説明したウェアラブル装置におけるカメラモジュールを、カメラ機構５１としてウェアラブル装置１０１に一体化している。
【００４７】
制御装置２０１は、画像入力インタフェース２１１、画像取得部２１２、画像検出部２１３、表示位置検出部２１４、映像表示部２１５および画面出力インタフェース２１６を含む。制御装置２０１の画面出力インタフェース２１６には、ディスプレイ２０５が接続する。
【００４８】
画像入力インタフェース２１１は、ウェアラブル装置１０１のカメラ機構５１と画像取得部２１２とを、カメラ機構５１から画像取得部２１２への画像（画像データ）転送が可能に、接続する。画像入力インタフェース２１１は、画像取得部２１２からカメラ機構５１への、およびまたはカメラ機構５１から画像取得部２１２への制御信号の受け渡しを制御する。
【００４９】
画像取得部２１２は、ウェアラブル装置１０１と一体的に位置するカメラ機構５１から画像（画像データ）を取得する。
【００５０】
画像検出部２１３は、画像取得部２１２が取得した画像（画像データ）から、ウェアラブル装置１０１のフレーム状部（２Ｒ、２Ｌ）および（装着者の）瞳の位置を検出する。画像検出部２１３は、例えば図６（ａ）−図６（ｃ）に一例を示す方法で、ウェアラブル装置１０１のフレーム状部（２Ｒ、２Ｌ）の所定の位置、を検出する。但し、ウェアラブル装置１０１のカメラ機構５１により撮影した映像は、図９（ａ）および図９（ｂ）に示すように、例えば鏡、等に写った利用者を撮影することにより、カメラ機構５１の位置が鏡像関係となる。従い、以降の処理、例えば検出したズレ量を用いる表示位置における左右方向の取り扱いにおいては、左右の方向を逆極性とする、あるいは予め左右方向の定義を反転する、等の処理を追加すればよい。なお、カメラ機構５１により撮影した映像が鏡像であることは、例えば映像中のカメラ機構５１の位置関係を、画像抽出用のソフトウエアに抽出することで容易に識別可能である。
【００５１】
図８は、実施形態に係るウェアラブル装置およびウェアラブル装置を含む表示システムの一例を示す。なお、図１あるいは図７により説明したウェアラブル装置と同一または実質的に等価の構成には、同じ符号を付して詳細な説明を省略する（場合がある）。
【００５２】
図８が示す実施形態においては、ウェアラブル装置１０１は、ウェアラブル装置１０１のスクリーン３上の投影位置（表示領域３ａ）として装着者が視認（知覚）する表示（投影）映像の位置を調整する調整機構１０５を有する。これにより、ウェアラブル装置１０１を装着した装着者自身によるスクリーン３への投影映像の表示位置の設定を、省力化できる。
【００５３】
より詳細には、制御装置２０１は、画像入力インタフェース２１１、画像取得部２１２、画像検出部２１３、表示位置検出部２１４、表示位置調整部２２１および調整機構インタフェース２２２を含む。制御装置２０１の調整機構インタフェース２２２がウェアラブル装置１０１の調整機構１０５と接続する。
【００５４】
表示位置調整部２２１は、ウェアラブル装置１０１がスクリーン３に画像（情報）を投影（表示）する際に、表示位置検出部２１４が計算した装着者にとって最適な表示位置に画像（情報）が表示されるよう、ウェアラブル装置１０１の調整機構１０５に、調整機構インタフェース２２２を通じて、所定の制御信号（表示位置検出部２１４で計算した表示位置の情報）を供給する。なお、調整機構１０５は、ウェアラブル装置１０１の情報表示ユニット７（投光部１）が出力する出力画像の表示位置のうち、主として表示角度（左右方向の表示位置）を調整きる機構であれば、その方法は任意である。
【００５５】
図９（ａ）および図９（ｂ）は、ウェアラブル装置１０１を装着した装着者が、例えば鏡等を用い、鏡に写った装着者自身を、ウェアラブル装置１０１のカメラ機構５１により撮影すること、および撮影により得られる（制御装置２０１の）表示装置が表示する表示画像の例を示す。なお、カメラ機構５１により撮影した映像が鏡像であることは、例えば映像中のカメラ機構５１の位置関係に基づいて、容易に識別可能である。
【００５６】
図１０は、ウェアラブル装置の実施形態の別の一例を示す。なお、図４および図５により説明したウェアラブル装置と同一または実質的に等価の構成には、同じ符号を付して詳細な説明を省略する。
【００５７】
図１０が示すウェアラブル装置１５１は、投光部（表示情報生成部）１６０、投光部支持部（筐体）２、表示像反射体１５１、駆動回路部（画像表示回路あるいは信号処理部と称することもある）１５４、通信部５および電源部６、等を含む。
【００５８】
投光部１６０は、情報表示ユニット１６１および投射（拡大）光学系１６２を含む。
【００５９】
情報表示ユニット１６１は、例えばＭＥＭＳ技術を適用して得られる、例えば１９２０×１０８０の画素相当の像を出力可能な複数の微細なレーザ素子群（レーザアレイ）を用いるＤＬＰ（Digital Light Precessing）により、直接、像を表示する（自発光により像を生成する）。情報表示ユニット１６１が表示する像（自発光像）は、投射（拡大）光学系２１２が拡大し、表示像反射体１５３の画像反射光学系１６４により、装着者が、直接像を知覚可能に、装着者の瞳（網膜）に向けて反射する。
【００６０】
画像反射光学系１６４は、例えば凹面鏡特性を有するフレネル拡大系のハーフミラーを含み、投射（拡大）光学系１６２が拡大した情報表示ユニット１６１の表示像を、装着者の装着者の網膜（瞳）に案内する。
【００６１】
図１１は、実施形態に係るウェアラブル装置およびウェアラブル装置を含む表示システムの一例を示す。なお、図１、図７あるいは図８により説明したウェアラブル装置と同一または実質的に等価の構成には、同じ符号を付して詳細な説明を省略する。
【００６２】
図１１が示す実施形態においては、ウェアラブル装置１０１は、スクリーン３上の投影位置（表示領域３ａ）として装着者が視認（知覚）する表示（投影）映像の位置を調整する調整機構１０５を有する。なお、ウェアラブル装置１０１を装着した装着者の画像を撮影するための要素としては、例えば制御装置２０１に、もしくは制御装置２０１およびウェアラブル装置１０１とは独立に用意されるカメラモジュール１０３であってもよいし、ウェアラブル装置１０１に一体化されたカメラ機構５１であってもよい。
【００６３】
制御装置２０１は、画像入力インタフェース２１１、画像取得部２１２、画像検出部２１３、表示位置検出部２１４、表示位置調整部２２１、調整機構インタフェース２２２、画像加工部２３１、映像表示部２１５および画面出力インタフェース２１６を含む。
【００６４】
図１１が示す表示システムにおいては、表示位置調整部２２１は、スクリーン３に画像（情報）を投影（表示）する際に、表示位置検出部２１４が計算した装着者にとって最適な表示位置に、画像（情報）が表示されるよう、調整機構インタフェース２２２を通じて、ウェアラブル装置１０１の調整機構１０５に、所定の制御信号（表示位置検出部２１４で計算した表示位置の情報）を供給する。
【００６５】
画像加工部２３１は、例えばスクリーン３の表示領域３ａに投影される表示画像のサイズの変化や表示画像のゆがみ、例えば表示位置で発生する色割れ（予定した色が表示できない）やアスペクト比のズレや画素対応の歪み（製造時）、等について、その影響を打ち消すことを可能とする。例えば、アスペクト比のズレや画素対応の歪み（製造時）について、製造段階（製造時）において、キャリブレーションデータとして記憶し、画像表示時に、そのキャリブレーションデータに基づいて、個々の要因に起因する影響を打ち消す画像処理を加えたうえで、映像表示部２１５に映像を出力することで、表示品位の高い画像の表示が可能である。
【００６６】
画像加工部２３１はまた、図１３（ａ）および図１３（ｂ）が示すように、取得した装着者の瞳の画像から、瞳の奥行き方向の位置（瞳の深度）を検出した場合において、基準となる瞳位置Ｄｒ、瞳位置Ｄｒよりも瞳の深度が深い場合の瞳位置Ｄｆ、瞳位置Ｄｒよりも瞳の深度が浅い場合の瞳位置Ｄｎのそれぞれにおいて、表示画像の仮想的な表示位置を変更する場合に、その表示位置に対応する倍率および焦点距離を変更する場合に有益である。例えば、瞳位置Ｄｆの装着者については、倍率を瞳距離Ｄｒの装着者に対する倍率Ｍｒに比較して大きいＭｆとなるよう、表示画像を生成し、焦点距離をｄｒからｄｆに変更する。例えば、瞳位置Ｄｎの装着者については、倍率を瞳距離Ｄｒの装着者に対する倍率Ｍｒに比較して小さいＭｎとなるよう、表示画像を生成し、焦点距離をｄｒからｄｎに変更する。
【００６７】
画像加工部２３１はまた、取得した装着者の瞳の画像から特定できる装着者個人のそれぞれに対し、予め設定された表示画像の表示位置／表示倍率／焦点距離、等に対応して、特定した装着者毎に、所定の表示位置に、画像を表示させるためにも有益である。
【００６８】
図１２は、実施形態に係るウェアラブル装置およびウェアラブル装置を含む表示システムの一例を示す。なお、図１、図７、図８あるいは図１１により説明したウェアラブル装置と同一または実質的に等価の構成には、同じ符号を付して詳細な説明を省略する。
【００６９】
図１２が示す実施形態においては、ウェアラブル装置１０１は、ウェアラブル装置１０１を装着した装着者個人を特定するために、例えば音声認識を用いることが可能である。
【００７０】
より詳細には、制御装置２０１は、表示位置検出部２１４の前段に、好ましくは、音声入力インタフェース２４１、音声パターン取得部２４２および個人特定部２４３を含む。
【００７１】
音声入力インタフェース２４１には、装着者の音声を収集するマイクロフォン１０７が接続する。マイクロフォン１０７は、例えばウェアラブル装置１０１の所定の位置あるいは装着者の着衣の所定の位置、等に用意することができる。
【００７２】
制御装置２０１においては、音声入力インタフェース２４１により、マイクロフォン１０７が収集する音声を音声パターン取得部２４２に入力する。音声パターン取得部２４２は、マイクロフォン１０７により収集され、音声入力インタフェース２４１により符号化された音声情報である音声データから音声パターンを取得する。音声パターンは、例えば予め用意される装着者毎の声紋パターン等を含む。
【００７３】
個人特定部２４３は、音声パターン取得部２４２が取得した音声パターンに基づいて、装着者を特定する。
【００７４】
これにより、図１２が示す表示システムにおいては、予め特定した装着者のそれぞれについて、より好適な表示位置にウェアラブル装置１０１の投光部１から、画像を出力（投影）できる。なお、図１１が示す表示システムを併用することにより、実質的に、装着者がウェアラブル装置１０１を装着した時点で、その装着者が最も視認（知覚）し易い位置に、画像を投影（出力）できる。
【００７５】
図１３（ａ）および図１３（ｂ）は、取得した装着者の瞳の画像から、瞳の奥行き方向の位置（瞳の深度）を検出すること、および検出した瞳の奥行き方向の位置に基づいて、表示する画像の出力の倍率（遠近方向）を変更できる原理の一例を示す。
【００７６】
図１３（ｂ）は、図１３（ａ）が示す、取得した装着者の瞳の位置（奥行き）が、基準となる瞳位置Ｄｒ、瞳位置Ｄｒよりも瞳の深度が深い場合の瞳位置Ｄｆ、瞳位置Ｄｒよりも瞳の深度が浅い場合の瞳位置Ｄｎのいずれかである場合に対応して、表示画像の仮想的な表示位置（焦点距離）ｄｎ、ｄｒおよびｄｆを変更する例を示す。例えば、瞳位置Ｄｆの装着者については、倍率を瞳距離Ｄｒの装着者に対する倍率Ｍｒに比較して大きいＭｆとなるよう、表示画像を生成し、焦点距離をｄｒからｄｆに変更する。例えば、瞳位置Ｄｎの装着者については、倍率を瞳距離Ｄｒの装着者に対する倍率Ｍｒに比較して小さいＭｎとなるよう、表示画像を生成し、焦点距離をｄｒからｄｎに変更する。
【００７７】
このように、実施形態の電子機器および表示方法においては、ウェアラブル装置の表示位置の調整が、装着者に応じて、容易かつ正確に実施可能である。
【００７８】
これにより、作業効率が改善できる。あるいは、作業時間を短縮できる。
【００７９】
しかも、装着者の眼の疲労を大幅に低減することが期待できる。このことは、眼の疲労に起因する肩こりや、身体の軸のゆがみ（変形）において一つの要因とされている「見難さ」に関連する諸症状の発生、を低減できる効果を期待できる。
【００８０】
これにより、例えば工場の部品ヤードや通販会社の商品倉庫、もしくは小売業の配送部署等において、作業者（ウェアラブル装置装着者）の疲労を抑えることが期待でき、装着者の作業環境も改善できる。
【００８１】
本発明のいくつかの実施形態を説明したが、これらの実施形態は、例として提示したものであり、発明の範囲を限定することは意図していない。これら新規な実施形態は、その他の様々な形態で実施されることが可能であり、発明の要旨を逸脱しない範囲で、種々の省略、置き換え、変更を行うことができる。これら実施形態やその変形は、発明の範囲や要旨に含まれるとともに、特許請求の範囲に記載された発明とその均等の範囲に含まれる。
【符号の説明】
【００８２】
１…投光部、３…スクリーン、４…駆動回路部（表示画像生成部）、７…情報表示ユニット、１０１…ウェアラブル装置、１０３…カメラモジュール、１０５…調整機構、２０１…制御装置、２０３…カメラモジュール、２０５…ディスプレイ、２１１…画像入力インタフェース、２１２…画像取得部、２１３…画像検出部、２１４…表示位置検出部、２１５…映像表示部、２１６…画面出力インタフェース、２２１…表示位置調整部、２２２…調整機構インタフェース、２３１…画像加工部、２４１…音声入力インタフェース、２４２…音声パターン取得部、２４３…個人特定部。
【図１】
2017151363.tif 000003
【図２】
2017151363.tif 000004
【図３】
2017151363.tif 000005
【図４】
2017151363.tif 000006
【図５】
2017151363.tif 000007
【図６】
2017151363.tif 000008
【図７】
2017151363.tif 000009
【図８】
2017151363.tif 000010
【図９】
2017151363.tif 000011
【図１０】
2017151363.tif 000012
【図１１】
2017151363.tif 000013
【図１２】
2017151363.tif 000014
【図１３】
2017151363.tif 000015