(57)【要約】 【課題】作業効率や生産スループットを向上させることが可能な情報表示システムおよび情報表示方法を提供する。【解決手段】実施形態の情報表示システムは、表示部と受信部と出力制御部とを備える。表示部は、ユーザの頭部に装着されるとともに、情報を虚像として表示する。受信部は、外部からの通知情報を受信する。出力制御部は、虚像の視認性を低下させている状態で通知情報を受信し、かつ、ユーザが虚像を視認していない場合は、虚像の少なくとも一部を経時的に変化させる制御を行う。【選択図】図１
2017126021.tif 000002
【特許請求の範囲】
【請求項１】
ユーザの頭部に装着されるとともに、情報を虚像として表示する表示部と、
外部からの通知情報を受信する受信部と、
前記虚像の視認性を低下させている状態で前記通知情報を受信し、かつ、前記ユーザが前記虚像を視認していない場合は、前記虚像の少なくとも一部を経時的に変化させる制御を行う出力制御部と、を備える、
情報表示システム。
【請求項２】
前記出力制御部は、
前記虚像の少なくとも一部の輝度、色、大きさ、形状、位置のうちの１以上を経時的に変化させる制御を行う、
請求項１に記載の情報表示システム。
【請求項３】
前記出力制御部は、
前記虚像の少なくとも一部の輝度を、所定値以下の範囲で経時的に変化させる制御を行う、
請求項１に記載の情報表示システム。
【請求項４】
音声または振動を発生する通知部をさらに備え、
前記出力制御部は、
前記虚像の視認性を低下させている状態で前記通知情報を受信し、かつ、前記ユーザが前記虚像を視認していない場合は、前記通知部から音声または振動を発生させる制御を行う、
請求項１に記載の情報表示システム。
【請求項５】
前記出力制御部は、
前記通知情報に応じて、前記虚像の少なくとも一部の変化のパターンを変える制御を行う、
請求項１に記載の情報表示システム。
【請求項６】
前記出力制御部は、
前記通知情報に応じて、前記通知部で発生させる音声または振動のパターンを変える制御を行う、
請求項４に記載の情報表示システム。
【請求項７】
前記ユーザが前記虚像を視認しているか否かを判定する判定部をさらに備える、
請求項１に記載の情報表示システム。
【請求項８】
前記ユーザの視線を検出する視線検出部をさらに備え、
前記判定部は、前記視線検出部により検出された前記ユーザの視線に基づいて、前記ユーザが前記虚像を視認しているか否かを判定する、
請求項７に記載の情報表示システム。
【請求項９】
前記出力制御部は、
前記虚像の少なくとも一部を経時的に変化させる制御を行っているときに、前記ユーザが前記虚像を視認した場合は、視認性の高い前記虚像を前記表示部に表示させる制御を行う、
請求項１に記載の情報表示システム。
【請求項１０】
外部からの通知情報を受信する受信ステップと、
虚像の視認性を低下させている状態で前記通知情報を受信し、かつ、情報を前記虚像として表示する表示部を頭部に装着した前記ユーザが前記虚像を視認していない場合は、前記虚像の少なくとも一部を経時的に変化させる制御を行う出力制御ステップと、を含む、
情報表示方法。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明の実施形態は、情報表示システムおよび情報表示方法に関する。
【背景技術】
【０００２】
様々な製品を製造する工場において、メガネ型などを含む頭部装着型のシースルータイプ（透過型）の表示装置を用いて、製品の組み立てマニュアルや、製品を製造する機器（製造機器）の稼働状態や部品の在庫状況、機器トラブルの情報などを虚像として視線の先に表示し、生産のスループットを向上させることが可能である。このような表示装置の技術分野において、表示装置の装着者（ユーザ）の動作や状況に基づいて、虚像の表示を制御するという技術が知られており、例えばユーザの視線の向きに応じて、虚像を見ていない場合は虚像の視認性を低下させて低消費電力を実現できる。
【先行技術文献】
【特許文献】
【０００３】
【特許文献１】特開２００８−６７２１８号公報
【発明の概要】
【発明が解決しようとする課題】
【０００４】
しかしながら、上述した従来技術では、虚像の視認性が低下していて、かつユーザが虚像を見ていない場合（典型的にはユーザの視線方向が虚像に向けられていない場合）、機器のトラブルや、着工指示などの連絡等の通知情報を虚像として表示しても、ユーザが見落としてしまう場合が多い。このため、トラブルへの対応や着工開始に遅れが生じるなど、作業効率や生産スループットが低下するという問題がある。
【課題を解決するための手段】
【０００５】
実施形態の情報表示システムは、表示部と受信部と出力制御部とを備える。表示部は、ユーザの頭部に装着されるとともに、情報を虚像として表示する。受信部は、外部からの通知情報を受信する。出力制御部は、虚像の視認性を低下させている状態で通知情報を受信し、かつ、ユーザが虚像を視認していない場合は、虚像の少なくとも一部を経時的に変化させる制御を行う。
【図面の簡単な説明】
【０００６】
【図１】実施形態の情報表示システムの構成の一例を示す図。
【図２】実施形態の情報処理装置のハードウェア構成の一例を示す図。
【図３】実施形態の情報処理装置が有する機能の一例を示す図。
【図４】実施形態の表示装置に含まれる各要素の具体的な配置例を示す模式図。
【図５】実施形態の情報表示システムの動作例を示す図。
【図６】変形例の回路部のハードウェア構成の一例を示す図。
【発明を実施するための形態】
【０００７】
以下、添付図面を参照しながら、情報表示システムおよび情報表示方法の実施形態を詳細に説明する。
【０００８】
図１は、本実施形態の情報表示システム１の構成の一例を示す図である。図１に示すように、情報表示システム１は、表示装置１０と情報処理装置２０とを備える。表示装置１０と情報処理装置２０は、有線あるいは無線を介して、直接的または間接的に、相互に通信することが可能である。表示装置１０と情報処理装置２０との間の通信方法は任意であり、いずれの通信方法を用いても構わないものとする。
【０００９】
表示装置１０は、「表示部」の一例であり、ユーザの頭部に装着されるとともに、情報を虚像として表示する装置である。表示装置１０の具体的な構成については後述する。以下の説明では、「ユーザ」とは表示装置１０の装着者を示す。
【００１０】
情報処理装置２０は、例えばスマートフォンやタブレット、ノート型ＰＣ（Personal  Computer）やスティック型のＰＣなどの可搬型の端末であってもよいし、例えばデスクトップ型のＰＣ（Personal  Computer）などの据置型の端末であってもよい。この例では、ユーザが所持する可搬型の端末が情報処理装置２０として利用される。ここでは、例えば工場内の複数のユーザごとに、表示装置１０と情報処理装置２０とを備える情報表示システム１がそれぞれ割り当てられている。以下、情報処理装置２０の具体的な構成を説明する。
【００１１】
図２は、情報処理装置２０のハードウェア構成の一例を示す図である。図２に示すように、情報処理装置２０は、ＣＰＵ(マイクロプロセッサ等の電気回路)２１と、ＲＯＭ２２と、ＲＡＭ２３と、Ｉ／Ｆ部２４とを備える。
【００１２】
ＣＰＵ２１は、情報処理装置２０の動作を統括的に制御する。ＲＯＭ２２は、プログラム等の各種のデータを記憶する不揮発性のメモリである。ＲＡＭ２３は、ＣＰＵ２１が実行する各種の処理の作業領域として機能する揮発性のメモリである。Ｉ／Ｆ部２４は表示装置１０等の外部装置と接続するためのインタフェースである。
【００１３】
図３は、情報処理装置２０が有する機能の一例を示す図である。図３に示すように、情報処理装置２０は、判定部２１０と、受信部２１１と、出力制御部２１２とを有する。説明の便宜上、図３は、本実施形態の説明に必要な機能を主に例示しているが、情報処理装置２０が有する機能は、これらに限られるものではない。
【００１４】
判定部２１０は、ユーザ（表示装置１０の装着者）が虚像を視認しているか否かを判定する。より具体的には、判定部２１０は、例えば情報処理装置２０と有線あるいは無線で接続された機器や、情報表示システム１またはユーザの体の一部に別途設置されたセンサ（例えば振動センサ、近接センサ、カメラ等）などから入力された入力信号を処理し、ユーザが虚像を視認しているか否かを判定する。判定部２１０は、例えば一定の周期で上記判定を繰り返し、判定を行うたびに、その判定結果を示す視認状態信号を生成するとともに、その生成した視認状態信号を後述の出力制御部２１２へ出力する。ここで判定部２１０に入力される入力信号は、ユーザが虚像を視認しているか否かを判定するのに用いることができる信号であれば、どのような信号であってもよい。判定は、例えば受信部２１１が情報を受信したタイミングにのみ行ってもよいし、例えば受信部２１１が情報を受信したタイミングから一定時間の間、一定の周期で行ってもよい。
【００１５】
例えば情報表示システム１は、ユーザの視線を検出する機能（視線の向きや焦点を検出する機能、以下では「視線検出部」と称する場合がある）をさらに備え、判定部２１０は、視線検出部により検出されたユーザの視線に基づいて、該ユーザが虚像を視認しているか否かを判定することもできる。例えば判定部２１０は、視線検出部により検出されたユーザの視線が虚像に向けられている場合は、ユーザは虚像を視認していると判定することができる。視線検出部は、情報処理装置２０内に設けられる（情報処理装置２０が有する機能として設けられる）形態であってもよいし、情報処理装置２０や表示装置１０とは別の装置に設けられる形態であってもよい。何れの形態であっても、判定部２１０は、ユーザの視線を示す信号（視線検出部による検出結果を示す信号）を入力信号として取得し、取得した入力信号を解析することで、ユーザが虚像を視認しているか否かを判定することができる。
【００１６】
なお、視線方向の検出方法としては公知の様々な方法を用いることができ、例えば、赤外線ＬＥＤでユーザの顔を照らして赤外線カメラで目を撮像し、撮像により得られた撮像データを解析して、ユーザの角膜における反射の位置（赤外線ＬＥＤの反射位置）と、瞳孔の位置とを特定し、特定した位置関係から視線方向を検出する方法（角膜反射法）などを利用することもできる。この場合、例えば判定部２１０は、情報表示システム１またはユーザの体の一部に別途設置された赤外線カメラで生成された撮像データに基づいてユーザの視線方向を検出する装置（情報表示システム１内に情報処理装置２０とは別に設けられる）から、ユーザの視線を示す信号を入力信号として取得し、取得した入力信号を解析することで、ユーザが虚像を視認しているか否かを判定する形態であってもよい。さらに、例えば赤外線カメラは表示装置１０や情報処理装置２０とは別に設けられる一方、赤外線カメラで生成された撮像データに基づいてユーザの視線方向を検出する機能（視線検出部）は、判定部２１０とは別に情報処理装置２０内に設けられる形態であってもよい。この場合、判定部２１０は、視線検出部から、ユーザの視線を示す信号（視線検出部による検出結果を示す信号）を入力信号として取得し、取得した入力信号を解析することで、ユーザが虚像を視認しているか否かを判定することができる。
【００１７】
また、例えば判定部２１０は、情報表示システム１またはユーザの体の一部に別途設置されたカメラで該ユーザを撮影した映像を入力信号として取得し、取得した入力信号から該ユーザの頭部の動きを推定し、所定の時間静止していると判断した場合は、該ユーザは虚像を視認していると判定する形態であってもよい。また、例えば判定部２１０は、虚像の元となる画像（画面）に対して各種の操作を行うための操作デバイス（マウス、キーボード、タッチパネル、スイッチ等）から出力される操作信号（操作状態を示す信号）を入力信号として取得し、所定の操作を行っている状態に対応する入力信号を取得した場合は、ユーザは、虚像を視認していると判定する形態であってもよい。また、例えば判定部２１０は、情報表示システム１またはユーザの体の一部に別途設置された振動センサや角度センサから得られるデータを入力信号として取得し、取得したデータを解析することで、ユーザが歩行しているなど移動していると判定した場合には、該ユーザは虚像を視認していないと判定する形態であってもよい。
【００１８】
また、例えば判定部２１０は、後述の出力制御部２１２（あるいは表示装置１０）から、虚像の元となる画像の表示状態を示す信号を入力信号として取得し、虚像の元となる画像が非表示（オフ）になっていることを示す入力信号または虚像の視認性を低下させていることを示す入力信号を取得した場合は、ユーザは虚像を視認していないと判定する形態であってもよい。
【００１９】
また、例えば判定部２１０は、ユーザが所定の作業を行っているか否かを判定し、該ユーザが所定の作業を行っている場合には、該ユーザは虚像を視認していないと判定する形態であってもよい。例えば所定の作業の一例として、ユーザがバーコードの読み取り作業を行う場合を想定する。この場合、判定部２１０は、例えばバーコード読み取り機器から、機器の動作状態を示す信号を入力信号として取得し、例えばバーコード読み取りモードになったことを示す入力信号を取得した場合は、ユーザはバーコード読み取り作業を行っていると判定し、該ユーザは虚像を視認していないと判定する形態であってもよい。
【００２０】
また、例えば所定の作業の一例として、カメラで撮影した映像を、スマートフォン（情報処理装置２０であってもよいし、別の装置であってもよい）等で遠隔地のオペレータに伝送する作業（画像伝送作業）であった場合を想定する。この場合、判定部２１０は、スマートフォンから、スマートフォンの動作状態を示す信号を入力信号として取得し、例えば画像を伝送するためのアプリケーションを起動したことを示す入力信号を取得した場合は、ユーザは画像伝送作業を行っていると判定し、該ユーザは虚像を視認していないと判定する形態であってもよい。
【００２１】
また、例えば所定の作業の一例として、カッターで梱包材を開梱するなどの、電子機器を使用しない作業を行っている場合を想定する。この場合、判定部２１０は、情報表示システム１またはユーザの体の一部に別途設置されたカメラからの映像信号を入力信号として取得し、取得した入力信号を用いた画像認識に基づいて開梱作業を開始したことを検知した場合は、該ユーザは虚像を視認していないと判定する形態であってもよい。なお、判定部２１０は、ユーザが虚像を視認しているか否かを判定する機能を有する形態であればよく、以上の例に限られるものではない。
【００２２】
図３の説明を続ける。受信部２１１は、外部（例えば工場内の工程を管理する管理者が使用するＰＣやサーバなどの情報処理装置）からの通知情報を受信する。通知情報は、ユーザに対して通知する情報であり、例えば工場内の製造機器などのトラブル発生状況を示す情報、生産工程において次の工程に進むために必要な条件が整ったので着工を指示する情報、指示者や他の作業員からの電話連絡やメール連絡を通知する情報、などが挙げられる。受信部２１１は、外部から受信した通知情報を後述の出力制御部２１２へ出力する。
【００２３】
出力制御部２１２は、表示装置１０に表示させる虚像の表示のオンオフ、表示位置、表示輝度、表示内容、コントラスト、色などを制御する。つまり、出力制御部２１２は、表示装置１０に表示させる虚像に対応する画像（虚像の元となる画像）を制御する。出力制御部２１２は、自身が制御した画像を表示装置１０へ送信し、該画像に対応する虚像を表示装置１０に表示させる制御を行う。
【００２４】
出力制御部２１２は、表示装置１０に表示する虚像の視認性を制御する。出力制御部２１２は、例えば、第１時刻における虚像の視認性を、第１時刻より前の第２時刻における虚像の視認性よりも低くする。出力制御部２１２は、例えば、第１時間における虚像の視認性を、第１時間より前であって第１時間と連続する第２時間における虚像の視認性よりも低くする。本実施形態では、出力制御部２１２は、虚像の視認性を低下させている状態で通知情報を受信し、かつ、ユーザが虚像を視認していない場合は、虚像の少なくとも一部を経時的に変化させる制御を行う。本実施形態では、出力制御部２１２は、虚像の視認性を低下させている状態で、受信部２１１から通知情報を受け取り、かつ、判定部２１０から、ユーザは虚像を視認していないことを示す視認状態信号を受け取った場合（つまり、判定部２１０によりユーザは虚像を視認していないと判定された場合）は、虚像の少なくとも一部を経時的に変化させる制御を行う。
【００２５】
この例では、出力制御部２１２は、ユーザの動作や状況に基づいて、虚像の視認性を低下させる制御を行うことができる。例えば出力制御部２１２は、ユーザが虚像を視認していないことを示す視認状態信号を判定部２１０から受け取った場合に、虚像の視認性を低下させる制御を行うこともできるし、受信部２１１が通知情報を受信していない場合に虚像の視認性を低下させる制御を行うこともできるし、ユーザが通知情報に基づく画像に対応する虚像を確認した場合（後述）に、虚像の視認性を低下させる制御を行うこともできる。
【００２６】
視認性を低下させる方法としては、例えば、虚像の元となる画像（以下の説明では「表示画像」と称する場合がある）全体を非表示にする、表示画像の輝度（輝度値）を低下させる、虚像の位置を視線外に移動させる、表示画像の一部を非表示にする、表示画像の一部の輝度（輝度値）を低下させる、表示画像を視認性の低い別の画像に切り替える、等が考えられる。ここで、表示画像の輝度を低下させると視認性が低下する理由は、表示装置１０が透過型の表示装置であるため、表示画像の輝度を低下させると、表示画像の透過率が高まるためである。なお、以上の例はあくまでも一例であり、虚像の視認性を低下させる方法であれば、上記以外の方法を使用してもよい。ここでは、表示装置１０は透過型の表示装置であるため、虚像の視認性を低下させれば、より実景が見やすくなる。また、表示画像の少なくとも一部の輝度を低下させる、または、非表示にすることで消費電力を低下させることが可能となる。
【００２７】
次に、出力制御部２１２による、虚像の少なくとも一部を経時的に変化させる制御の具体的な内容を説明する。例えば周辺視（網膜の中心から、ある程度以上離れた網膜周辺部で対象を見ること）では、経時的な輝度の変化（フリッカー）を検知しやすいことから、表示画像の全体あるいは一部の輝度を周期的に変動させてもよい。また、変動の周期は、光過敏性てんかんを誘発しにくい周波数で、かつ、フリッカーとして検知可能な周波数とするのが望ましい。また、表示画像の色、大きさ、形状などをアニメーションさせて変動させてもかまわない。これらの制御と前述の輝度を経時的に変化させる制御を組み合わせてもよい。
【００２８】
出力制御部２１２は、虚像の視認性を低下させている状態で通知情報を受信し、かつ、ユーザが虚像を視認していない場合は、虚像の少なくとも一部の輝度、色、大きさ、形状、位置のうちの１以上を経時的に変化させる制御を行うことができる。
【００２９】
また、出力制御部２１２は、虚像の少なくとも一部を経時的に変化させる制御を行っているときに、ユーザが虚像を視認した場合は、通知情報に基づく画像（以下、「通知画像」と称する場合がある）に対応する虚像を表示装置１０に表示させる制御を行う。より具体的には、出力制御部２１２は、上述したようにして虚像の少なくとも一部を経時的に変化させる制御を行っているときに、ユーザが虚像を視認していることを示す視認状態信号を判定部２１０から受け取った場合は、受信部２１１から受け取り済みの通知情報が示す通知内容に応じて決まる画像（通知画像）に対応する虚像を表示装置１０に表示させる制御を行う。通知情報が受信される前の虚像は、通知情報が示す通知内容に応じて決まる画像（通知画像）に対応する虚像よりも視認性が低い。出力制御部２１２は、虚像の少なくとも一部を経時的に変化させる制御を行っているときに、ユーザが虚像を視認した場合は、視認性の高い虚像を表示装置１０に表示させる制御を行うことができる。
【００３０】
例えば、通知情報が示す通知内容が、遠隔にいる指示者から直接ビデオ通話の要求があることを示す内容であった場合には、指示者とのビデオ通話画面に対応する虚像を表示させてもよい。また、例えば通知内容が複数ある場合など、通知情報が多いために一斉に表示できない場合には、通知内容の要約を示す情報、例えばトラブルを起こした機器の情報であれば機器の名称と状態を示すアイコンなどをリスト形式で表す画像に対応する虚像を表示させてもよい。また、複数の通知情報と１対１に対応する複数の通知画像ごとに、該通知画像に対応する虚像を、一定時間ごとに切り替えて表示させてもよい。なお、通知情報の表示方法はこれらに限られるものではなく、受信部２１１によって受信された通知情報が示す通知内容が分かる表示方法であればよく、その表示方法は任意である。
【００３１】
以上に説明した情報処理装置２０が有する機能（判定部２１０、受信部２１１、出力制御部２１２）は、ＣＰＵ２１がＲＯＭ２２等の記憶装置に格納されたプログラムを実行することにより実現されるが、これに限らず、例えばこれらの機能のうちの少なくとも一部が専用のハードウェア回路（例えば半導体集積回路等）により実現される形態であってもよい。
【００３２】
次に、表示装置１０の具体的な構成例を説明するが、表示装置１０の構成は以下に説明する内容に限られるものではなく、任意に変更可能である。表示装置１０は、ユーザの頭部に装着されるとともに、小型のディスプレイに表示する画像（情報の一例）をユーザの眼前の光学系に投射することで、該画像に対応する虚像をユーザに視認させる（「情報を虚像として表示する」ことに相当）ことが可能な表示装置である。表示装置１０は、非透過型と透過型の２種類に大別されるが、ここでは後者の透過型に限定される。透過型は小型であることが多いが、大型のものであっても構わない。また、表示装置１０には片方の眼にだけ情報を表示する単眼型と、両方の眼に情報を表示する両眼型が存在するが、ここでは何れを用いても構わない。
【００３３】
図４は、表示装置１０に含まれる各要素の具体的な配置例を示す模式図である。図４の例では、表示装置１０は両眼型であるが、これに限られるものではない。図４において、２つの眼鏡レンズ１６０が並ぶ方向をＸ軸方向とする。Ｘ軸方向に対して垂直な１つの方向をＹ軸方向とする。Ｘ軸方向およびＹ軸方向の各々に対して垂直な方向をＺ軸方向とする。図４の例では、Ｘ軸方向はユーザの左右方向に対応し、Ｙ軸方向はユーザの上下方向に対応し、Ｚ軸方向はユーザの前後方向（奥行き方向）に対応する。
【００３４】
図４に示すように、表示装置１０は、２つの眼鏡レンズ１６０と１対１に対応する２つの表示ユニット１００を備える。各表示ユニット１００は、投影ユニット１２５と、反射部１３０と、回路部１４０と、を含み、保持部３２０によって保持されている。投影ユニット１２５は、表示部１１０と、光学部１２０とを含む。
【００３５】
回路部１４０は、例えば有線または無線で接続された情報処理装置２０から画像を取得し、取得した画像を表示部１１０へ送る。図４の例では、回路部１４０は、屈曲可能なケーブル１４５を介して表示部１１０と電気的に接続されているが、これに限らず、例えば回路部１４０と表示部１１０とが無線で接続される形態であってもよい。
【００３６】
表示部１１０は、回路部１４０から取得した画像を表示する。表示部１１０は、画像を表示するディスプレイであり、複数の画素１１０ｅを含む。複数の画素１１０ｅは、平面上に並べて（例えばマトリクス状に）設けられる。表示部１１０は、画像の情報を含む光Ｌ１を出射する。画像の情報を含む光Ｌ１は、光学部１２０へ向けて出射される。なお、ディスプレイの形式は任意であり、例えば、液晶、有機ＥＬまたはリキッドクリスタルオンシリコン（Liquid  Crystal  On  Silicon）などを用いたディスプレイとすることができる。但し、実施形態は、これらに限定されない。
【００３７】
光学部１２０は、表示部１１０から出射された画像の情報を含む光Ｌ１の少なくとも一部の進行方向を変化させる。図４の例では、光学部１２０は、表示部１１０の複数の画素１１０ｅから出射された光Ｌ１の光路上において、表示部１１０と反射部１３０との間に設けられる。光学部１２０は、少なくとも１つ以上の光学素子を含む。光学素子としては、レンズ、プリズム、またはミラーなどを用いることができる。このようにして、投影ユニット１２５から出射された光Ｌ１は、反射部１３０へ入射する。なお、複数の光学素子を用いた場合、それらは直線上に配置されていなくてもよい。投影ユニット１２５は、画像の情報を含む光Ｌ１を出射する「出射部」の一例である。
【００３８】
反射部１３０は、投影ユニット１２５から出射された光の少なくとも一部を、ユーザの眼１５０に向けて反射する。反射部１３０で反射した光は、ユーザの眼１５０から見て、虚像として像を形成する。このようにして、ユーザは像を見ることができる。
【００３９】
次に、本実施形態の情報表示システム１の動作例を説明する。図５は、本実施形態の情報表示システム１の動作例を示すフローチャートである。図５に示すように、まず受信部２１１が外部からの通知情報を受信し（ステップＳ１）、受信した通知情報を出力制御部２１２へ入力する。次に、出力制御部２１２は、虚像の視認性を低下させている状態であるか否かを確認する（ステップＳ２）。ステップＳ２の結果が肯定の場合（ステップＳ２：Ｙｅｓ）、出力制御部２１２は、その時点で判定部２１０から入力済みの最新の視認状態信号が、ユーザが虚像を視認していることを示す信号であるか否かを確認する。つまり、ユーザが虚像を視認しているか否かを確認する（ステップＳ３）。
【００４０】
上述のステップＳ３の結果が否定の場合（ステップＳ３：Ｎｏ）、出力制御部２１２は、上述したようにして虚像の少なくとも一部を経時的に変化させる制御を行う（ステップＳ４）。この虚像は、ステップＳ２において表示される虚像でもよいし、ステップＳ１で受信した通知情報に基づく画像（通知画像）に対応する虚像であってもよいし、それ以外であってもよい。そして、ステップＳ３以降の処理を繰り返す。一方、上述のステップＳ３の結果が肯定の場合（ステップＳ３：Ｙｅｓ）、出力制御部２１２は、ステップＳ１で受信した通知情報に基づく画像（通知画像）に対応する虚像を表示装置１０に表示させる制御を行うとともに、低下させていた視認性を向上させる制御を行う（ステップＳ５）。
【００４１】
一方、上述のステップＳ２の結果が否定の場合（ステップＳ２：Ｎｏ）、出力制御部２１２は、上述のステップＳ３と同様に、ユーザが虚像を視認しているか否かを確認する（ステップＳ６）。ステップＳ６の結果が否定の場合（ステップＳ６：Ｎｏ）、出力制御部２１２は、上述したようにして虚像の少なくとも一部を経時的に変化させる制御を行う（ステップＳ７）。この虚像は、ステップＳ２において表示される虚像でもよいし、ステップＳ１で受信した通知情報に基づく画像（通知画像）に対応する虚像であってもよいし、それ以外であってもよい。そして、ステップＳ６以降の処理を繰り返す。一方、上述のステップＳ６の結果が肯定の場合（ステップＳ６：Ｙｅｓ）、出力制御部２１２は、ステップＳ１で受信した通知情報に基づく画像（通知画像）に対応する虚像を表示装置１０に表示させる制御を行う（ステップＳ８）。この場合は、虚像の視認性を低下させていないので、上述のステップＳ５とは異なり、虚像の視認性を向上させる制御は不要となる。
【００４２】
以上に説明したように、本実施形態では、虚像の視認性を低下させている状態で外部からの通知情報を受信し、かつ、ユーザが虚像を視認していない場合は、虚像の少なくとも一部を経時的に変化させる制御を行うので、例えば虚像の視認性を低下させている状態で機器トラブルや指示連絡等の通知があった際に、ユーザの視線が虚像に向けられていない場合でも、ユーザの注意を虚像に向けさせることができる（つまり、ユーザの視線を虚像に向けさせることができる）。また、本実施形態では、上記制御（虚像の少なくとも一部を経時的に変化させる制御）を行っているときに、ユーザが虚像を視認した場合は、通知情報に基づく画像（通知画像）に対応する虚像を表示装置１０に表示させる制御を行うので、ユーザは変化した虚像の方へ視線を向けるだけで（ハンズフリーで）、必要な情報を直ちに閲覧できる。以上の本実施形態の構成によれば、作業効率や生産スループットを向上させることができる。
【００４３】
以上、本発明の実施形態を説明したが、上述の実施形態は例として提示したものであり、発明の範囲を限定することは意図していない。これら新規な実施形態は、その他の様々な形態で実施されることが可能であり、発明の要旨を逸脱しない範囲で、種々の省略、置き換え、変更を行うことができる。これら新規な実施形態やその変形は、発明の範囲や要旨に含まれるとともに、特許請求の範囲に記載された発明とその均等の範囲に含まれる。
【００４４】
（変形例）
以下、変形例を説明する。
【００４５】
（１）変形例１
例えば出力制御部２１２は、虚像の視認性を低下させている状態で通知情報を受信し、かつ、ユーザが虚像を視認していない場合は、虚像の少なくとも一部の輝度を所定値以下の範囲で経時的に変化させる制御を行うこともできる。これにより、消費電力を低減できる。
【００４６】
（２）変形例２
また、例えば情報表示システム１は、音声または振動を発生する通知部をさらに備える形態であってもよい。この形態では、出力制御部２１２は、虚像の視認性を低下させている状態で通知情報を受信し、かつ、ユーザが虚像を視認していない場合は、通知部から音声または振動を発生させる制御を行うこともできる。なお、通知部は、有線または無線を介して表示装置１０や情報処理装置２０と接続される形態であってもよいし、例えば表示装置１０や情報処理装置２０の構成要素として（例えば表示装置１０や情報処理装置２０の内部のスピーカや振動子として）設けられる形態であってもよい。
【００４７】
例えば出力制御部２１２は、虚像の視認性を低下させている状態で通知情報を受信し、かつ、ユーザが虚像を視認していない場合は、最初に虚像の少なくとも一部を経時的に変化させる制御を行わずに音声または振動を発生させる制御を行い、一定時間が過ぎてもユーザが虚像を視認しない場合には、虚像の少なくとも一部を経時的に変化させる制御を行う形態であってもよい。また、逆に、最初に音声または振動を発生させる制御を行わずに虚像の少なくとも一部を経時的に変化させる制御を行い、一定時間が過ぎてもユーザが虚像を視認しない場合には、音声または振動を発生させる制御を行う形態であってもよい。
【００４８】
（３）変形例３
例えば出力制御部２１２は、通知情報に応じて、虚像の少なくとも一部の変化のパターンを変える制御を行うこともできる。例えば通知情報の重要度が高いほど、虚像の少なくとも一部の変化を大きくする制御を行うこともできる。ここでは、虚像の少なくとも一部の変化のパターンを変えるとは、虚像の元となる画像の色や大きさの経時的変化のパターンや、輝度を経時的に変化させる場合の輝度の最大値と最小値の幅、変化の周期などを変更することを意味する。
【００４９】
同様に、出力制御部２１２は、通知情報に応じて、変形例２で説明した通知部で発生させる音声または振動のパターンを変える制御を行うこともできる。例えば通知情報の重要度が高いほど、通知部で発生させる音声または振動を大きくする制御を行う形態であってもよい。
【００５０】
例えば、生産工場における機械トラブルを工場内の複数の作業員（ユーザ）に対して通知したい場合に本実施形態の構成を活用する場合には、例えばトラブルが発生した機器に近い場所に存在するユーザが使用する情報表示システム１においては、そのトラブルの発生を通知するための通知情報の受信をより気付きやすくするために、虚像の少なくとも一部の変化を大きくする制御を行うこともできる（併せて通知部で発生させる音声または振動を大きくする制御を行うこともできる）。つまり、該情報表示システム１に通知される通知情報の重要度が高くなるように設定される。逆に、トラブルが発生した機器から遠い場所に存在するユーザが使用する情報表示システム１においては、そのトラブルの発生を通知するための通知情報の受信をより気付きやすくする必要性は低いため、トラブルが発生した機器から近い場所に存在するユーザが使用する情報表示システム１に比べて、虚像の少なくとも一部の変化を小さくしてよい（併せて通知部で発生させる音声または振動を小さくしてよい）。つまり、該情報表示システム１に通知される通知情報の重要度が低くなるように設定される。また、例えば一定時間が経過しても、トラブルが解消されなかった場合には、通知を気付きやすくするように段階的に虚像の輝度を高くしたり、虚像が表示される領域を大きくしたりする処理を行ってもよい。
【００５１】
なお、重要度は、予め通知情報に含まれる形態であってもよい。この形態では、通知情報の送信元のサーバなどが、例えば工場内に存在する複数のユーザの位置と、トラブルが発生した機器の位置とに基づいて、複数のユーザと１対１に対応する複数の情報表示システム１の各々に通知する通知情報に含まれる重要度を決定することもできる。この場合、工場内のユーザの位置を検出する機能が必要となるが、例えば各ユーザの情報表示システム１から工場内に複数設置された無線端末への無線到達時間差より、各情報表示システム１の位置（つまり各ユーザの位置）を求める方式や、ＢＬＥビーコンを使用する方式など、位置を検出する方法であれば、既存の方式を適用可能である。
【００５２】
また、これに限らず、例えば外部からの通知情報を受信した情報表示システム１側で、その受信した通知情報の重要度を決定する形態であってもよい。例えば各情報表示システム１は、外部から受信した通知情報が示す通知内容（例えばトラブルが発生した機器の位置を示す情報などを含む）と、自装置の位置とに基づいて、その受信した通知情報の重要度を決定することもできる。例えば自装置の位置が、トラブルが発生した機器の位置に近いほど、受信した通知情報の重要度を高くすることもできる。
【００５３】
また、複数のユーザごとの、トラブルが発生した機器に対する熟練度に応じて、該機器に対して精通しているユーザが使用する情報表示システム１においては、そのトラブルの発生を通知するための通知情報の受信をより気付きやすくするために、虚像の少なくとも一部の変化を大きくする制御を行うこともできる。この場合、複数のユーザごとに、工場内の複数の機器の各々の熟練度を対応付けた情報が予めデータベース等に格納されており、例えば通知情報の送信元のサーバなどが、トラブルが発生した機器と、データベース等に格納された情報との関係から、トラブルが発生した機器に精通しているユーザが使用する情報表示システム１に通知する通知情報に含まれる重要度は高くなるよう、各情報表示システム１に通知する通知情報に含まれる重要度を決定することもできる。また、これに限らず、例えば外部からの通知情報を受信した情報表示システム１側で、その受信した通知情報の重要度を決定する形態であってもよい。例えば各情報表示システム１は、外部から受信した通知情報が示す通知内容（例えばトラブルが発生した機器を示す情報などを含む）と、データベース等に格納された情報との関係から、自装置のユーザが、トラブルが発生した機器に精通している場合は、受信した通知情報の重要度が高くなるよう、受信した通知情報の重要度を決定することもできる。また、以上に説明した各ユーザの位置と機器に対する熟練度の双方を考慮して、通知情報の重要度を決定してもよい。さらに、例えばユーザが所定の作業を行っているか否か、移動中か否かなどを考慮して通知情報の重要度を決定してもよい。
【００５４】
（４）変形例４
例えば情報処理装置２０が設けられずに、表示装置１０が、上述の実施形態で説明した判定部２１０、受信部２１１、および、出力制御部２１２を有する形態であってもよい。この場合、例えば上述の表示ユニット１００は、「情報を虚像として表示する表示部」に対応すると考えることができる。また、例えば上述の回路部１４０が、判定部２１０、受信部２１１、および、出力制御部２１２の各々の機能を有する形態であってもよい。
【００５５】
図６は、回路部１４０のハードウェア構成の一例を示す図である。図６に示すように、回路部１４０は、処理回路（プロセッサ）１４１と、メモリ１４２と、インタフェース１４３と、を少なくとも備える。
【００５６】
処理回路１４１は、回路部１４０の動作を統括的に制御する。メモリ１４２は、プログラム１４４等の各種のデータを記憶する。プログラム１４４は、予めメモリ１４２に記憶された状態で提供されてもよいし、ＣＤ−ＲＯＭ等の不揮発性の記録媒体やネットワークを介して提供され、適宜インストールされてもよい。インタフェース１４３は、外部（装置、記憶媒体、ネットワーク等）と接続するためのインタフェースである。外部との接続方法は任意であり、有線接続でもよいし無線接続でもよい。
【００５７】
この例では、処理回路１４１が、メモリ１４２に格納されたプログラム１４４を実行することにより、上述の判定部２１０、受信部２１１、および、出力制御部２１２の各々の機能を実現することができるが、これに限らず、例えば上述の判定部２１０、受信部２１１、および、出力制御部２１２の各々の機能のうちの少なくとも一部が専用のハードウェア回路で実現されてもよい。
【００５８】
この例では、表示装置１０自体が「情報表示システム１」に相当すると考えることもできる。
【００５９】
（５）変形例５
例えば表示装置１０が、上述の実施形態で説明した情報処理装置２０が有する機能の一部を有する形態であってもよい。例えば表示装置１０は、上述の判定部２１０を有し、情報処理装置２０は、上述の受信部２１１および出力制御部２１２を有する形態であってもよい。
【００６０】
要するに、本実施形態の情報表示システム１は、ユーザの頭部に装着されるとともに、情報を虚像として表示する表示部（表示装置１０または表示ユニット１００）と、外部からの通知情報を受信する受信部２１１と、虚像の視認性を低下させている状態で通知情報を受信し、かつ、ユーザが虚像を視認していない場合は、虚像の少なくとも一部を経時的に変化させる制御を行う出力制御部２１２と、を少なくとも備える形態であればよく、単一の装置で構成されてもよいし、複数の装置の組み合わせで構成されてもよい。
【００６１】
以上の実施形態および各変形例は、任意に組み合わせることが可能である。
【００６２】
なお、上述の情報表示システム１（表示装置１０、情報処理装置２０）で実行されるプログラムを、インターネット等のネットワークに接続されたコンピュータ上に格納し、ネットワーク経由でダウンロードさせることにより提供するようにしてもよい。また、上述の情報表示システム１で実行されるプログラムを、インターネット等のネットワーク経由で提供または配布するようにしてもよい。さらに、上述の情報表示システム１で実行されるプログラムを、ＲＯＭ等の不揮発性の記録媒体に予め組み込んで提供するようにしてもよい。
【符号の説明】
【００６３】
１      情報表示システム
１０    表示装置
２０    情報処理装置
２１    ＣＰＵ
２２    ＲＯＭ
２３    ＲＡＭ
２４    Ｉ／Ｆ部
１００  表示ユニット
１１０  表示部
１２０  光学部
１２５  投影ユニット
１３０  反射部
１４０  回路部
１４１  処理回路
１４２  メモリ
１４３  インタフェース
１６０  眼鏡レンズ
２１０  判定部
２１１  受信部
２１２  出力制御部
【図１】
2017126021.tif 000003
【図２】
2017126021.tif 000004
【図３】
2017126021.tif 000005
【図４】
2017126021.tif 000006
【図５】
2017126021.tif 000007
【図６】
2017126021.tif 000008