(57)【要約】【課題】表示すべき画像を虚像として観察者に表示するとともに、その観察者が、その表示された虚像を、観察者の前方に存在する現実外界の実像に重ねて観察することを可能にするシースルー型ディスプレイ装置であって、観察者が実像と虚像との双方を正常に観察することを容易にするものを提供する。【解決手段】実像の観察中にその実像上に設定される観察者の視点までの距離の長さに基づき、虚像（「Ｗａｒｎｉｎｇ！」）が強調されて表示される程度である強調度を、前記距離が設定値より長い遠位置観察状態においては、前記設定値以下である近位置観察状態より増加するように制御する。【選択図】図６
2010079121.tif 000002
【特許請求の範囲】
【請求項１】
表示すべき画像を虚像として観察者に表示するとともに、その観察者が、その表示された虚像を、観察者の前方に存在する現実外界の実像に重ねて観察することを可能にするシースルー型ディスプレイ装置であって、
前記実像の観察中にその実像上に設定される観察者の視点までの距離を測定する測定部と、
画像信号に基づき、前記虚像を表示するための画像光を発生させる画像光発生部と、
前記測定部によって測定された距離の長さに基づき、前記虚像が強調されて表示される程度である強調度を、前記距離が設定値より長い遠位置観察状態においては、前記設定値以下である近位置観察状態より増加するように制御する第１強調度制御部と
を含むシースルー型ディスプレイ装置。
【請求項２】
前記第１強調度制御部は、前記虚像を、前記遠位置観察状態においては、前記近位置観察状態より大きく表示し、一方、前記近位置観察状態においては、前記遠位置観察状態より小さく表示する第１手段を含む請求項１に記載のシースルー型ディスプレイ装置。
【請求項３】
前記第１手段は、前記遠位置観察状態においては、前記虚像の表示開始後、前記虚像の大きさを時間の経過につれて減少させ、一方、前記近位置観察状態においては、前記虚像の表示開始後、前記虚像の大きさを時間の経過につれて増加させる請求項２に記載のシースルー型ディスプレイ装置。
【請求項４】
前記第１強調度制御部は、前記虚像を、前記遠位置観察状態においては、観察者の視界の中心位置に表示し、一方、前記近位置観察状態においては、観察者の視界の中心位置から離れた所定位置に表示する第２手段を含む請求項１ないし３のいずれかに記載のシースルー型ディスプレイ装置。
【請求項５】
前記第２手段は、前記遠位置観察状態においては、前記虚像の表示開始後、前記虚像の位置を、時間の経過につれて前記中心位置から離れる向きに移動させ、一方、前記近位置観察状態においては、前記虚像の表示開始後、前記虚像の位置を、時間の経過につれて前記中心位置に向かって移動させる請求項４に記載のシースルー型ディスプレイ装置。
【請求項６】
前記第１強調度制御部は、前記虚像を、前記遠位置観察状態においては、前記近位置観察状態より鮮やかな色で表示し、一方、前記近位置観察状態においては、前記遠位置観察状態より淡い色で表示する第３手段を含む請求項１ないし５のいずれかに記載のシースルー型ディスプレイ装置。
【請求項７】
前記第３手段は、前記遠位置観察状態においては、前記虚像の表示開始後、前記虚像の色を、時間の経過につれて鮮やかさが減少するように変化させ、一方、前記近位置観察状態においては、前記虚像の表示開始後、前記虚像の色を、時間の経過につれて鮮やかさが増加するように変化させる請求項６に記載のシースルー型ディスプレイ装置。
【請求項８】
前記第１強調度制御部は、前記虚像を、前記遠位置観察状態においては、前記近位置観察状態より高い輝度で表示し、一方、前記近位置観察状態においては、前記遠位置観察状態より低い輝度で表示する第４手段を含む請求項１ないし７のいずれかに記載のシースルー型ディスプレイ装置。
【請求項９】
前記第４手段は、前記遠位置観察状態においては、前記虚像の表示開始後、前記虚像の輝度を時間の経過につれて低下させ、一方、前記近位置観察状態においては、前記虚像の表示開始後、前記虚像の輝度を時間の経過につれて増加させる請求項８に記載のシースルー型ディスプレイ装置。
【請求項１０】
さらに、
前記強調度を、前記虚像によって表される情報の意味の重要度が高いほど増加するように制御する第２強調度制御部を含む請求項１ないし９のいずれかに記載のシースルー型ディスプレイ装置。
【請求項１１】
前記測定部は、前記実像までの距離を測定する距離センサを含む請求項１ないし１０のいずれかに記載のシースルー型ディスプレイ装置。
【請求項１２】
さらに、
前記画像信号を前記画像光発生部に出力する処理装置であって、前記画像信号によって表される前記虚像が、前記実像の観察中に観察者が置かれている環境と、前記実像の観察中における観察者の動作との少なくとも一方である観察者状況の時間的変化に関連付けて時間的に変化するように、前記画像信号を作成するものを含む請求項１ないし１１のいずれかに記載のシースルー型ディスプレイ装置。
【請求項１３】
前記処理装置は、複数の候補画像から、前記観察者状況に対応するものを選択し、その選択された候補画像を表示するための前記画像信号を前記画像光発生部に出力する請求項１２に記載のシースルー型ディスプレイ装置。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、表示すべき画像を虚像として観察者に表示するとともに、その観察者が、その表示された虚像を、観察者の前方に存在する現実外界の実像に重ねて観察することを可能にするシースルー型ディスプレイ装置に関するものである。
【背景技術】
【０００２】
画像を光学的に表示する技術として、例えば、表示すべき画像を表す画像光を直接的に観察者の網膜上に投影し、それにより、観察者が画像を虚像として観察することを可能にする技術が存在する。
【０００３】
さらに、光源からの光を、表示すべき画像を表す画像光に変換する技術として、例えば、光源から一斉に入射した面状の光を、ＬＣＤ等、空間変調素子を用いて、各画素ごとに空間的に変調し、それにより、面状の画像光を形成する技術や、光源から入射したビーム状の光であって各画素ごとに強度変調されたものを、スキャナを用いて、２次元方向に走査することによって面状の画像光に変換する技術が存在する。
【０００４】
特許文献１は、画像を光学的に表示する装置としてのヘッドマウントディスプレイ装置を開示している。このヘッドマウントディスプレイ装置は、表示すべき画像を表す画像光を直接的に網膜上に投影し、それにより、観察者が画像を虚像として観察することを可能にする技術と、光源から一斉に入射した面状の光を、ＬＣＤ等、空間変調素子を用いて、各画素ごとに空間的に変調する技術とを採用している。
【特許文献１】特開平９−２９７２８２号公報
【発明の開示】
【発明が解決しようとする課題】
【０００５】
実像の観察中にその実像上に設定される観察者の視点までの距離は常に一定であるとは限らない。すなわち、観察者が実像を観察する状態として、前記距離が長い遠位置観察状態と、前記距離が短い近位置観察状態とが択一的に存在するのである。
【０００６】
しかし、本発明者の研究により、遠位置観察状態であるか近位置観察状態であるかを問わず、観察者によって実像と一緒に観察される虚像を同じ態様で表示すると、遠位置観察状態であるか近位置観察状態であるかに応じて観察者が実像と虚像との双方を正常に観察すること（すなわち、観察者が虚像を見逃すことも、その虚像によって実像の観察が邪魔されることもないこと）が困難であることに気が付いた。
【０００７】
特に、緊急時等、警告メッセージ等の画像表示を強調する場合（急に表示画像を出現させたり、点滅させたり、大きさを変化させたりする場合）、遠位置観察状態では、画像表示を強調しても、その強調に観察者が気づき難く、一方、近位置観察状態では、画像表示を強調すると、それが観察者にとって過剰であるように感じられ、そのため、驚いた拍子に二次災害を誘発するおそれがあった。
【０００８】
以上説明した知見に基づき、本発明は、表示すべき画像を虚像として観察者に表示するとともに、その観察者が、その表示された虚像を、観察者の前方に存在する現実外界の実像に重ねて観察することを可能にするシースルー型ディスプレイ装置であって、遠位置観察状態であるか近位置観察状態であるかを問わず、観察者が実像と虚像との双方を正常に観察することを容易にするものを提供することを課題としてなされたものである。
【課題を解決するための手段】
【０００９】
本発明によって下記の各態様が得られる。各態様は、項に区分し、各項には番号を付し、必要に応じて他の項の番号を引用する形式で記載する。これは、本発明が採用し得る技術的特徴の一部およびそれの組合せの理解を容易にするためであり、本発明が採用し得る技術的特徴およびそれの組合せが以下の態様に限定されると解釈すべきではない。すなわち、下記の態様には記載されていないが本明細書には記載されている技術的特徴を本発明の技術的特徴として適宜抽出して採用することは妨げられないと解釈すべきなのである。
【００１０】
さらに、各項を他の項の番号を引用する形式で記載することが必ずしも、各項に記載の技術的特徴を他の項に記載の技術的特徴から分離させて独立させることを妨げることを意味するわけではなく、各項に記載の技術的特徴をその性質に応じて適宜独立させることが可能であると解釈すべきである。
【００１１】
（１）  表示すべき画像を虚像として観察者に表示するとともに、その観察者が、その表示された虚像を、観察者の前方に存在する現実外界の実像に重ねて観察することを可能にするシースルー型ディスプレイ装置であって、
前記実像の観察中にその実像上に設定される観察者の視点までの距離を測定する測定部と、
画像信号に基づき、前記虚像を表示するための画像光を発生させる画像光発生部と、
前記測定部によって測定された距離の長さに基づき、前記虚像が強調されて表示される程度である強調度を、前記距離が設定値より長い遠位置観察状態においては、前記設定値以下である近位置観察状態より増加するように制御する第１強調度制御部と
を含むシースルー型ディスプレイ装置。
【００１２】
本発明者の研究により、観察者が画像を観察する際の視覚的特性（以下、「観察特性」という。）が、遠位置観察状態と近位置観察状態とで異なることが判明した。具体的には、遠位置観察状態においては、観察者の注意が視界全体にわたって分散し易いのに対し、近位置観察状態においては、観察者の注意が視界内の一点（例えば、視界の中央位置）に集中し易い。
【００１３】
そのため、遠位置観察状態においては、ある虚像が、観察者の注意が散漫な状態で出現しても、その虚像を観察者が速やかに認知することができない可能性がある。これに対し、近位置観察状態においては、観察者が別の画像に集中している（通常、観察者は緊張している）最中に突然、ある虚像が出現すると、観察者の観察および集中が邪魔されるうえに、観察者が驚いてしまう。
【００１４】
以上説明した知見を背景にして、本項に係るディスプレイ装置によれば、虚像が、観察者の注意が視界全体にわたって分散し易い遠位置観察状態においては、観察者の注意が視界内の一点（例えば、視界の中央位置）に集中し易い近位置観察状態より強調されて表示される。
【００１５】
したがって、このディスプレイ装置によれば、虚像が、遠位置観察状態においては、高い強調度で表示されるため、観察者の注意が散漫になり易い遠位置観察状態であるにもかかわらず、観察者が当該虚像をより確実に認知することが容易となる。
【００１６】
また、このディスプレイ装置によれば、虚像が、近位置観察状態においては、低い強調度で表示されるため、観察者の注意が一点に集中し易い近位置観察状態であるにもかかわらず、観察者が、当該虚像とは別の画像を観察中に、その観察が当該虚像によって邪魔されることなく、観察者は、当該虚像を認知することが容易となる。
【００１７】
このように、このディスプレイ装置によれば、遠位置観察状態と近位置観察状態とで観察者の観察特性（視覚的注意力）が異なるという事実を踏まえて、その観察特性の変化に適応するように、虚像の強調度が制御される。
【００１８】
ところで、シースルー型ディスプレイ装置の中には、被写界深度が通常より深いために、観察者に対し、いずれの距離においても、虚像のピントが合う形式のディスプレイ装置が存在する。この種のディスプレイ装置を使用する場合には、観察者は、遠位置観察状態でも近位置観察状態でも、実像の位置に応じて観察者の眼の焦点位置が変化しても、虚像のピントは合ったままであるため、虚像に対する違和感が生じず、その結果、虚像を実像から区別して認識することが困難である。
【００１９】
これに対し、本項に係るディスプレイ装置によれば、それの被写界深度が深くても、虚像の強調度が、観察者の観察特性に応じて制御されるため、虚像を実像から区別して認識することが容易となる。
【００２０】
本項における「測定部」は、例えば、観察者の視界の中心位置（当該ディスプレイ装置に対する幾何学的な相対位置が一義的に決まる位置）にその観察者の視点（注視点）があると仮定して、その中心位置と当該ディスプレイ装置との距離を、電磁波（音波や光）を用いて、その到達時間や位相差により、または、三角法により測定するいわゆる距離センサとして構成することが可能である。
【００２１】
これに代えて、「測定部」は、観察者の両眼のそれぞれの視線の向きから、両眼の輻輳点（両眼の視線の交点）を計算して、前記距離を測定する態様で構成することも可能である。さらに、これに代えて、「測定部」は、観察者の眼底写真を撮影し、その写真における、眼底の像から、前記距離を測定する態様で構成することも可能である。
【００２２】
本項における「第１強調度制御部」は、例えば、強調度が遠位置観察状態においては近位置観察状態より増加するように、画像信号を選択、作成または修正する手段を含む態様で実施することが可能である。
【００２３】
（２）  前記第１強調度制御部は、前記虚像を、前記遠位置観察状態においては、前記近位置観察状態より大きく表示し、一方、前記近位置観察状態においては、前記遠位置観察状態より小さく表示する第１手段を含む（１）項に記載のシースルー型ディスプレイ装置。
【００２４】
同じ虚像が大きく表示される場合には、小さく表示される場合より高い強調度で、その虚像が観察者に認識される。
【００２５】
この知見に基づき、本項に係るディスプレイ装置によれば、虚像が、遠位置観察状態においては、近位置観察状態より大きく表示され、一方、近位置観察状態においては、遠位置観察状態より小さく表示される。
【００２６】
（３）  前記第１手段は、前記遠位置観察状態においては、前記虚像の表示開始後、前記虚像の大きさを時間の経過につれて減少させ、一方、前記近位置観察状態においては、前記虚像の表示開始後、前記虚像の大きさを時間の経過につれて増加させる（２）項に記載のシースルー型ディスプレイ装置。
【００２７】
観察者が、虚像を遠位置観察状態において認識し始めた後においては、観察者は、その虚像の存在を知っているため、その虚像の大きさを時間の経過につれて減少させても（例えば、その虚像が、観察者が他の画像を観察することを邪魔しないようにするために）、観察者がその虚像を見失うことはない。
【００２８】
一方、観察者が、虚像を近位置観察状態において認識し始めた後においては、観察者は、その虚像の存在を知っているため、その虚像の大きさを時間の経過につれて増加させても（例えば、観察者が当該虚像をより正確に認識できるようにするために）、観察者が注意を乱されたり、驚いたりすることはない。
【００２９】
以上説明した知見に基づき、本項に係るディスプレイ装置によれば、遠位置観察状態においては、虚像の表示開始後、その虚像の大きさが時間の経過につれて減少させられ、一方、近位置観察状態においては、虚像の表示開始後、その虚像の大きさが時間の経過につれて増加させられる。
【００３０】
さらに、このディスプレイ装置によれば、実像の観察中、虚像の属性（それの一例が虚像の大きさであり、他の属性としては、表示位置、色の鮮やかさ、輝度、連続表示か点滅表示かの違いなどがある）が、観察中の実像から独立して、時間の経過につれて変化させられるため、実像が静止しているか、または変化するとしても虚像とは異なる態様で変化する場合には、観察者が、虚像を実像から区別して認識することが容易となる。
【００３１】
（４）  前記第１強調度制御部は、前記虚像を、前記遠位置観察状態においては、観察者の視界の中心位置に表示し、一方、前記近位置観察状態においては、観察者の視界の中心位置から離れた所定位置に表示する第２手段を含む（１）ないし（３）項のいずれかに記載のシースルー型ディスプレイ装置。
【００３２】
同じ虚像が観察者の視界の中心位置に表示される場合には、その中心位置から離れた位置に表示される場合より高い強調度で、その虚像が観察者に認識される。
【００３３】
この知見に基づき、本項に係るディスプレイ装置によれば、虚像が、遠位置観察状態においては、観察者の視界の中心位置に表示され、一方、近位置観察状態においては、観察者の視界の中心位置から離れた所定位置（例えば、視界の縁の部分）に表示される。
【００３４】
（５）  前記第２手段は、前記遠位置観察状態においては、前記虚像の表示開始後、前記虚像の位置を、時間の経過につれて前記中心位置から離れる向きに移動させ、一方、前記近位置観察状態においては、前記虚像の表示開始後、前記虚像の位置を、時間の経過につれて前記中心位置に向かって移動させる（４）項に記載のシースルー型ディスプレイ装置。
【００３５】
観察者が、虚像を遠位置観察状態において認識し始めた後においては、観察者は、その虚像の存在を知っているため、その虚像の位置を時間の経過につれて前記中心位置から離れる向きに移動させても（例えば、その虚像が、観察者が他の画像を観察することを邪魔しないようにするために）、観察者がその虚像を見失うことはない。
【００３６】
一方、観察者が、虚像を近位置観察状態において認識し始めた後においては、観察者は、その虚像の存在を知っているため、その虚像の位置を時間の経過につれて前記中心位置に向かって移動させても（例えば、観察者が当該虚像をより正確に認識できるようにするために）、観察者が注意を乱されたり、驚いたりすることはない。
【００３７】
以上説明した知見に基づき、本項に係るディスプレイ装置によれば、遠位置観察状態においては、虚像の表示開始後、その虚像の位置が、時間の経過につれて前記中心位置から離れる向きに移動させられ、一方、近位置観察状態においては、虚像の表示開始後、その虚像の位置が、時間の経過につれて前記中心位置に向かって移動させられる。
【００３８】
（６）  前記第１強調度制御部は、前記虚像を、前記遠位置観察状態においては、前記近位置観察状態より鮮やかな色で表示し、一方、前記近位置観察状態においては、前記遠位置観察状態より淡い色で表示する第３手段を含む（１）ないし（５）項のいずれかに記載のシースルー型ディスプレイ装置。
【００３９】
同じ虚像が鮮やかな色（例えば、赤）で表示される場合には、淡い色（例えば、灰赤色）で表示される場合より高い強調度で、その虚像が観察者に認識される。
【００４０】
この知見に基づき、本項に係るディスプレイ装置によれば、虚像が、遠位置観察状態においては、近位置観察状態より鮮やかな色で表示され、一方、近位置観察状態においては、遠位置観察状態より淡い色で表示される。
【００４１】
（７）  前記第３手段は、前記遠位置観察状態においては、前記虚像の表示開始後、前記虚像の色を、時間の経過につれて鮮やかさが減少するように変化させ、一方、前記近位置観察状態においては、前記虚像の表示開始後、前記虚像の色を、時間の経過につれて鮮やかさが増加するように変化させる（６）項に記載のシースルー型ディスプレイ装置。
【００４２】
観察者が、虚像を遠位置観察状態において認識し始めた後においては、観察者は、その虚像の存在を知っているため、その虚像の色を、時間の経過につれて鮮やかさ（彩度）が減少するように変化させても（例えば、その虚像が、観察者が他の画像を観察することを邪魔しないようにするために）、観察者がその虚像を見失うことはない。
【００４３】
一方、観察者が、虚像を近位置観察状態において認識し始めた後においては、観察者は、その虚像の存在を知っているため、その虚像の色を、時間の経過につれて鮮やかさ（彩度）が増加するように変化させても（例えば、観察者が当該虚像をより正確に認識できるようにするために）、観察者が注意を乱されたり、驚いたりすることはない。
【００４４】
以上説明した知見に基づき、本項に係るディスプレイ装置によれば、遠位置観察状態においては、虚像の表示開始後、その虚像の色の彩度が時間の経過につれて減少させられ、一方、近位置観察状態においては、虚像の表示開始後、その虚像の色の彩度が時間の経過につれて増加させられる。
【００４５】
（８）  前記第１強調度制御部は、前記虚像を、前記遠位置観察状態においては、前記近位置観察状態より高い輝度で表示し、一方、前記近位置観察状態においては、前記遠位置観察状態より低い輝度で表示する第４手段を含む（１）ないし（７）項のいずれかに記載のシースルー型ディスプレイ装置。
【００４６】
同じ虚像が高い輝度で表示される場合には、低い輝度で表示される場合より高い強調度で、その虚像が観察者に認識される。
【００４７】
この知見に基づき、本項に係るディスプレイ装置によれば、虚像が、遠位置観察状態においては、近位置観察状態より高い輝度で表示され、一方、近位置観察状態においては、遠位置観察状態より高い輝度で表示される。
【００４８】
（９）  前記第４手段は、前記遠位置観察状態においては、前記虚像の表示開始後、前記虚像の輝度を時間の経過につれて低下させ、一方、前記近位置観察状態においては、前記虚像の表示開始後、前記虚像の輝度を時間の経過につれて増加させる（８）項に記載のシースルー型ディスプレイ装置。
【００４９】
観察者が、虚像を遠位置観察状態において認識し始めた後においては、観察者は、その虚像の存在を知っているため、その虚像の輝度を時間の経過につれて低下させても（例えば、その虚像が、観察者が他の画像を観察することを邪魔しないようにするために）、観察者がその虚像を見失うことはない。
【００５０】
一方、観察者が、虚像を近位置観察状態において認識し始めた後においては、観察者は、その虚像の存在を知っているため、その虚像の輝度を時間の経過につれて増加させても（例えば、観察者が当該虚像をより正確に認識できるようにするために）、観察者が注意を乱されたり、驚いたりすることはない。
【００５１】
以上説明した知見に基づき、本項に係るディスプレイ装置によれば、遠位置観察状態においては、虚像の表示開始後、その虚像の輝度が時間の経過につれて低下させられ、一方、近位置観察状態においては、虚像の表示開始後、その虚像の輝度が時間の経過につれて増加させられる。
【００５２】
（１０）  さらに、
前記強調度を、前記虚像によって表される情報の意味の重要度が高いほど増加するように制御する第２強調度制御部を含む（１）ないし（９）項のいずれかに記載のシースルー型ディスプレイ装置。
【００５３】
このディスプレイ装置によれば、虚像の強調度が、前記距離に適応させられることになるのみならず、その虚像によって表される情報の意味の重要度にも適応させられることになる。
【００５４】
したがって、このディスプレイ装置によれば、前記距離が同じであっても、虚像によって表される情報の意味の重要度が高い場合には、低い場合より、その虚像が強調されて表示されるため、観察者は、その虚像によって表される情報の意味の重要度が高い場合に、その情報を確実に認知することが容易となる。
【００５５】
（１１）  前記測定部は、前記実像までの距離を測定する距離センサを含む（１）ないし（１０）項のいずれかに記載のシースルー型ディスプレイ装置。
【００５６】
本項における「距離センサ」は、例えば、観察者の視界の中心位置（当該ディスプレイ装置に対する幾何学的な相対位置が一義的に決まる位置）にその観察者の視点（注視点）があると仮定して、その中心位置と当該ディスプレイ装置との距離を測定するセンサとして構成することが可能である。
【００５７】
（１２）  さらに、
前記画像信号を前記画像光発生部に出力する処理装置であって、前記画像信号によって表される前記虚像が、前記実像の観察中に観察者が置かれている環境と、前記実像の観察中における観察者の動作との少なくとも一方である観察者状況の時間的変化に関連付けて時間的に変化するように、前記画像信号を作成するものを含む（１）ないし（１１）項のいずれかに記載のシースルー型ディスプレイ装置。
【００５８】
（１３）  前記処理装置は、複数の候補画像から、前記観察者状況に対応するものを選択し、その選択された候補画像を表示するための前記画像信号を前記画像光発生部に出力する（１２）項に記載のシースルー型ディスプレイ装置。
【００５９】
（１４）  表示すべき画像を虚像として観察者に表示するとともに、その観察者が、その表示された虚像を、観察者の前方に存在する現実外界の実像に重ねて観察することを可能にするシースルー型ディスプレイ装置を制御する方法であって、
前記実像の観察中にその実像上に設定される観察者の視点までの距離を測定する測定工程と、
その測定工程によって測定された距離の長さに基づき、前記虚像が強調されて表示される程度である強調度を、前記距離が設定値より長い遠位置観察状態においては、前記設定値以下である近位置観察状態より増加するように制御する第１強調度制御工程と
を含むシースルー型ディスプレイ装置の制御方法。
【００６０】
本項に係る制御方法によれば、前記（１）項に係るディスプレイ装置と基本的に共通する知見および原理に従い、虚像が、観察者の注意が視界全体にわたって分散し易い遠位置観察状態においては、観察者の注意が視界内の一点（例えば、視界の中央位置）に集中し易い近位置観察状態より強調されて表示される。
【００６１】
したがって、この制御方法によれば、虚像が、遠位置観察状態においては、高い強調度で表示されるため、観察者の注意が散漫になり易い遠位置観察状態であるにもかかわらず、観察者が当該虚像をより確実に認知することが容易となる。
【００６２】
また、この制御方法によれば、虚像が、近位置観察状態においては、低い強調度で表示されるため、観察者の注意が一点に集中し易い近位置観察状態であるにもかかわらず、観察者が、当該虚像とは別の画像を観察中に、その観察を当該虚像が邪魔することなく、観察者は、当該虚像を認知することが容易となる。
【００６３】
（１５）  さらに、
前記強調度を、前記虚像によって表される情報の意味の重要度が高いほど増加するように制御する第２強調度制御工程を含む（１４）項に記載のシースルー型ディスプレイ装置の制御方法。
【００６４】
この制御方法によれば、前記（１０）項に係るディスプレイ装置と基本的に同じ原理に従い、虚像の強調度が、前記距離に適応させられることになるのみならず、その虚像によって表される情報の意味の重要度にも適応させられることになる。
【００６５】
（１６）  （１４）または（１５）項に記載の方法を実行するためにコンピュータによって実行されるプログラム。
【００６６】
このプログラムがコンピュータにより実行されれば、前記（１４）または（１５）項に係る方法と基本的に同じ原理に従い、同様な作用効果が実現され得る。
【００６７】
本項に係るプログラムは、例えば、それの機能を果たすためにコンピュータにより実行される指令の組合せを意味するように解釈したり、それら指令の組合せのみならず、各指令に従って処理されるファイルやデータをも含むように解釈することが可能であるが、それらに限定されない。
【００６８】
また、このプログラムは、それ単独でコンピュータにより実行されることにより、所期の目的を達するものとしたり、他のプログラムと共にコンピュータにより実行されることにより、所期の目的を達するものとすることができるが、それらに限定されない。後者の場合、本項に係るプログラムは、データを主体とするものとすることができるが、それに限定されない。
【００６９】
（１７）  （１６）項に記載のプログラムをコンピュータ読取り可能に記録した記録媒体。
【００７０】
この記録媒体に記録されているプログラムがコンピュータにより実行されれば、前記（１４）または（１５）項に係る方法と同じ作用効果が実現され得る。
【００７１】
この記録媒体は種々な形式を採用可能であり、例えば、フレキシブル・ディスク等の磁気記録媒体、ＣＤ、ＣＤ−ＲＯＭ等の光記録媒体、ＭＯ等の光磁気記録媒体、ＲＯＭ等のアンリムーバブル・ストレージ等のいずれかを採用し得るが、それらに限定されない。
【発明を実施するための最良の形態】
【００７２】
以下、本発明のさらに具体的な実施の形態のうちの１つを図面に基づいて詳細に説明する。
【００７３】
図１には、本発明の一実施形態に従うシースルー型ディスプレイ装置（以下、単に「ディスプレイ装置」という。）１０のハードウエア構成がブロック図で概念的に表されている。この種のディスプレイ装置の一例が米国特許出願公開公報第２００３／０１４２０８６号に開示されており、この公報は、全体的に、引用により、本明細書に合体させられる。
【００７４】
このディスプレイ装置１０は、光学系として、複数の光源２０，２２，２４を備えている。それら光源２０，２２，２４は、赤色のレーザ光を発生させるＲ光源２０と、緑色のレーザ光を発生させるＧ光源２２と、青色のレーザ光を発生させるＢ光源２４とを備えている。
【００７５】
それら光源２０，２２，２４は、光源制御回路３０によって制御される。具体的には、各光源２０，２２，２４ごとに、発光タイミングと、発光時におけるレーザ光の輝度（強度）とが制御され、それにより、表示すべき画像を表す画像光（目標画像光）が３原色のレーザ光の合成によって生成される。
【００７６】
それら光源２０，２２，２４からそれぞれ発生させられた３原色のレーザ光は、それらに共通の合波部３４に入射し、その合波部３４は、それら３原色のレーザ光を単一のレーザ光に合成する。これにより、３原色の成分レーザ光が単一の合成レーザ光に変換される。合波部３４から出射したレーザ光は、スキャナ４０に入射し、そのスキャナ４０は、それに入射したレーザ光を２次元的に走査する。これにより、合波部３４から出射したレーザ光が走査光に変換される。スキャナ４０は、スキャナ駆動回路４２によって駆動される。
【００７７】
スキャナ４０から出射した走査光は、結像光学系５０および接眼光学系５２に順次入射する。接眼光学系５２からの出射光は、観察者の眼６０の瞳孔６２を通過して網膜６４上に達し、やがてその網膜６４上に結像する。したがって、このディスプレイ装置１０は、表示すべき画像を表す画像光を直接的に観察者の網膜６４上に投影し、それにより、観察者が画像を虚像として観察することを可能にする。
【００７８】
このディスプレイ装置１０は、観察者の頭部に装着されて使用されるヘッドマウント型である。このディスプレイ装置１０は、接眼光学系５２からの出射光を、そのユーザである観察者の瞳孔６２に向けて反射するためのハーフミラー７０を有する。観察者は、そのハーフミラー７０を通して、観察者の前方に存在する現実外界の実像を観察することが可能である。この種のディスプレイ装置の一例が米国特許出願公開公報第２００６／０１４６１２５号に開示されており、この公報は、全体的に、引用により、本明細書に合体させられる。
【００７９】
以上、このディスプレイ装置１０のうちの光学系を説明したが、次に、電気系を説明する。
【００８０】
図１に示すように、このディスプレイ装置１０は、画像処理回路８０を備えている。その画像処理回路８０は、コンピュータ８２を主体として構成されている。そのコンピュータ８２は、よく知られているように、図示しないが、プロセッサとメモリとがバスによって互いに接続されることによって構成されている。
【００８１】
画像処理回路８０は、映像信号入力部８６に接続されている。その映像信号入力部８６は、外部装置としてのパーソナルコンピュータ（以下、「ＰＣ」という。）９０に有線または無線で接続されている。ＰＣ９０は、ディスプレイ装置１０によって表示すべき画像を定義するための映像信号（前述の「画像信号」の一例である。）を映像信号入力部８６に供給する。その映像信号は、各々輝度信号であるＲ信号、Ｇ信号およびＢ信号と、ＳＹＮＣ信号とを含んでいる。映像信号入力部８６は、ＰＣ９０から供給された映像信号を画像処理回路８０に転送する。
【００８２】
画像処理回路８０は、光源制御回路３０とスキャナ駆動回路４２とに電気的に接続されている。画像処理回路８０は、映像信号のうちのＲ信号、Ｇ信号およびＢ信号、すなわち、輝度信号を光源制御回路３０に、各色に関連付けて出力する。光源制御回路３０は、入力された各輝度信号に基づき、３つの光源２０，２２，２４のうち対応するものを駆動する。
【００８３】
さらに、画像処理回路８０は、映像信号のうちのＳＹＮＣ信号を、上述の輝度信号と同期するように、スキャナ駆動回路４２に出力する。その結果、スキャナ４０から出射する走査光が、再現すべき映像を光学的に表現する画像光として機能することになる。
【００８４】
画像処理回路８０には、さらに、距離センサ１００も電気的に接続されている。その距離センサ１００は、実像の観察中にその実像上に設定される観察者の視点までの距離を測定するために使用される。
【００８５】
具体的には、この距離センサ１００は、観察者の視界の中心位置（ディスプレイ装置１０に対する幾何学的な相対位置が一義的に決まる位置）にその観察者の視点（注視点）があると仮定して、その中心位置とディスプレイ装置１０との距離を、電磁波（音波や光）を用いて、その到達時間や位相差により、または、三角法により測定するいわゆる距離センサとして構成することが可能である。この距離センサ１００は、前記距離を測定するために、視界の中心位置をターゲットとして、電磁波を送出する。
【００８６】
画像処理回路８０は、映像信号によって定義される虚像を、観察者がハーフミラー７０を通して観察している実像に重ねて表示するという画像表示を行う。その画像表示には、通常表示と追加表示とがある。
【００８７】
通常表示は、ＰＣ９０からの通常表示開始トリガの供給に応答して起動し、ユーザによる一連の作業を行う際に参照すべき作業マニュアルを第１の通常表示コンテンツとして、かつ、虚像として表示するとともに、その作業においてユーザが加工すべき部品のリストを第２の通常表示コンテンツとして、かつ、虚像として表示する。
【００８８】
これに対し、追加表示は、ＰＣ９０からの追加表示トリガの供給に応答して起動し、上記作業中に、ユーザの注意を喚起するためにそのユーザに告知すべき警告メッセージを追加表示コンテンツとして、かつ、虚像として、かつ、第１および第２通常表示コンテンツと一緒に、かつ、同期的に表示する。
【００８９】
通常表示を実行するために、画像処理回路８０は、ＰＣ９０からの通常表示開始トリガの供給に応答して、ＰＣ９０から映像信号を取り込み、その取り込まれた映像信号のうちの輝度信号を光源制御回路３０を介して各光源２０，２２，２４に出力するとともに、その取り込まれた映像信号のうちのＳＹＮＣ信号をスキャナ駆動回路４２に同期的に出力する。
【００９０】
これに対し、追加表示を実行するために、画像処理回路８０は、ＰＣ９０からの追加表示トリガの供給に応答して、ＰＣ９０から映像信号を取り込み、その取り込まれた映像信号のうちの輝度信号を元画像信号として取り込み、その取り込まれた元画像信号を、距離センサ１００からの出力信号（すなわち、観察者の視点までの距離）と、表示すべき虚像によって表される情報（上記警告メッセージ）の意味の重要度（例えば、緊急度や危険度）とに基づいて修正し、その修正された画像信号を光源制御回路３０を介して各光源２０，２２，２４に出力する。
【００９１】
さらに、画像処理回路８０は、ＰＣ９０からの追加表示トリガの供給に応答して、ＰＣ９０から取り込まれた映像信号のうちのＳＹＮＣ信号をスキャナ駆動回路４２に同期的に出力する。この追加表示の詳細は、後述する。
【００９２】
なお、ＰＣ９０は、ディスプレイ装置１０に通常表示および追加表示を行わせるために、作業支援プログラムを実行し、それにより、必要な情報を画像処理回路８０に供給する。その作業支援プログラムは後に詳述する。
【００９３】
図２には、以上説明した通常表示および追加表示を行うために（すなわち、虚像を表示するために）、画像処理回路８０のコンピュータ８２によって実行される画像表示プログラムが概念的にフローチャートで表されている。その画像表示プログラムは、コンピュータ８２のメモリに予め記憶されており、必要に応じ、そのメモリから読み出されてプロセッサによって実行される。
【００９４】
この画像表示プログラムがコンピュータ８２によって実行されると、まず、ステップＳ１において、この画像表示を行うために用いられる各種データの初期化が行われる。次に、ステップＳ２において、距離センサ１００を用いて前記距離を測定するために必要な設定が行われる。この処理には、距離センサ１００が接続されているか否かの判定や、距離センサ１００が接続されている場合にその距離センサ１００の動作が正常であるか否かの判定（自己診断）が含まれる。
【００９５】
続いて、ステップＳ３において、ＰＣ９０から前記通常表示開始トリガを受信したか否かが判定される。今回は、通常表示開始トリガを受信しなかったと仮定すれば、ステップＳ３の判定がＮＯとなり、直ちにこの画像表示プログラムの今回の実行が終了する。
【００９６】
これに対し、今回は、通常表示開始トリガを受信したと仮定すれば、ステップＳ３の判定がＹＥＳとなり、ステップＳ４において、今回の通常表示が開始される。
【００９７】
このステップＳ４においては、具体的には、ＰＣ９０から、前記第１および第２の通常表示コンテンツを表示するための映像信号を受信し、その受信した映像信号を光源制御回路３０とスキャナ駆動回路４２とに同期的に出力することにより、第１および第２の通常表示コンテンツを虚像として（例えば、参照用の画像として）表示する。
【００９８】
このステップＳ４においては、第１および第２の通常表示コンテンツが、例えば、今回の通常表示が終了するまで（すなわち、今回の画像表示が終了するまで）、連続的に表示される。これにより、ユーザは、それら通常表示コンテンツを、作業中、随時、参照することが可能となる。
【００９９】
その後、ステップＳ５において、ＰＣ９０から前記追加表示トリガを受信したか否かが判定される。今回は、追加表示トリガを受信しなかったと仮定すれば、ステップＳ５の判定がＮＯとなり、ステップＳ６がスキップされる。
【０１００】
これに対し、今回は、追加表示トリガを受信したと仮定すれば、ステップＳ５の判定がＹＥＳとなり、ステップＳ６において、追加表示が行われる。
【０１０１】
このステップＳ６においては、具体的には、ＰＣ９０から、追加表示の対象である警告メッセージを表示するための映像信号を受信し、受信した映像信号を光源制御回路３０とスキャナ駆動回路４２とに同期的に出力することにより、警告メッセージを虚像として（例えば、参照用の画像として）表示する。このステップＳ６においては、同じ警告メッセージが所定時間、連続的に表示される。このステップＳ６の詳細が、図３に追加表示ルーチンとしてフローチャートで概念的に表されており、これについては、後述する。
【０１０２】
その後、ステップＳ７において、今回の画像表示を終了させるべきか否かが判定される。具体的には、ＰＣ９０から表示終了指令を受信したか否かが判定される。今回は、表示終了指令を受信しなかったと仮定すれば、ステップＳ７の判定がＮＯとなり、ステップＳ５に戻る。これに対し、今回は、表示終了指令を受信したと仮定すれば、ステップＳ７の判定がＹＥＳとなり、ステップＳ８において、所定の終了処理が行われる。以上で、この画像表示プログラムの今回の実行が終了する。
【０１０３】
ここで、図３に示す追加表示ルーチンを参照することにより、図２におけるステップＳ６、すなわち、追加表示の詳細を説明する。
【０１０４】
この追加表示ルーチンが実行されると、まず、ステップＳ１０１において、距離センサ１００がオン状態にあるか否かが判定される。距離測定が可能であるか否かが判定されるのである。今回は、距離センサ１００がオン状態にあると仮定すると、ステップＳ１０１の判定がＹＥＳとなり、距離センサ１００からの出力信号に基づき、前記距離が測定される。これに対し、今回は、距離センサ１００がオン状態にはないと仮定すると、ステップＳ１０１の判定がＮＯとなり、ステップＳ１０３において、前記距離が、デフォールト距離（例えば、３ｍ）に設定される。
【０１０５】
いずれの場合にも、その後、ステップＳ１０４において、ＰＣ９０から受信された警告メッセージについて重要度が設定されているか否かが判定される。画像処理回路８０がＰＣ９０から警告メッセージを受信する場合、その警告メッセージに、それの意味の重要度が設定されている場合には、その重要度を表す重要度表示データも、ＰＣ９０から受信する。しかし、重要度が予め設定されていない警告メッセージも存在する。
【０１０６】
今回は、警告メッセージに重要度が設定されていると仮定すると、ステップＳ１０４の判定がＹＥＳとなり、ステップＳ１０５において、今回の警告メッセージに付随する重要度表示データに基づき、その警告メッセージの重要度が取得される。これに対し、今回は、警告メッセージに重要度が設定されていないと仮定すると、ステップＳ１０４の判定がＮＯとなり、ステップＳ１０６において、今回の警告メッセージの重要度が、デフォールト重要度（例えば、重要度が「大」、「中」および「小」の３段階である場合には、「中」の重要度）に設定される。
【０１０７】
いずれの場合にも、その後、ステップＳ１０７において、映像信号のうち、今回の警告メッセージを表す輝度信号が元画像信号として取り込まれる。続いて、ステップＳ１０８において、前記測定された距離と、前記取得された重要度との組合せに応じて、今回の警告メッセージの表示方法（表示サイズ、表示位置、彩度および輝度）が選択される。この選択は、例えば、図４に示す割り当てルールに従って行われる。このステップＳ１０８の詳細は、後述する。
【０１０８】
その後、ステップＳ１０９において、その選択された表示方法が実現されるように、前記取り込まれた元画像信号が修正され、それにより、表示されるべき警告メッセージ（虚像）の属性（表示サイズ、表示位置、彩度および輝度）が通常の内容から変更される。
【０１０９】
その後、ステップＳ１１０において、その修正された画像信号が光源制御回路３０を介して各光源に出力される。その結果、警告メッセージ（虚像）の表示態様が、通常の態様から、前記距離と重要度とを反映した態様に変更される。以上で、この追加表示ルーチンの今回の実行が終了する。
【０１１０】
ここで、ステップＳ１０８の詳細を図４ないし図８を参照して説明する。
【０１１１】
図４には、距離と重要度との組合せと、警告メッセージの表示方法（表示態様、強調度）との関係の一例が表形式で表されている。この例においては、距離が、「近い（近位置観察状態）」と、「遠い（遠位置観察状態）」という２つのレベルに分類され、また、重要度が、「小」と、「中」と、「大」という３つのレベルに分類され、また、表示方法が、「さりげなく」と、「普通」と、「強調」という３つのレベルに分類されている。
【０１１２】
この例によれば、例えば、距離が「近い」場合であり、かつ、重要度が「小」または「中」である場合には、表示方法として「さりげなく」が選択され、また、重要度が「大」である場合には、距離の如何を問わず、表示方法として「強調」が選択され、また、距離が「遠い」場合には、重要度が「小」であれば、表示方法として「普通」が選択されるが、重要度が「中」であれば、表示方法として「強調」が選択される。
【０１１３】
なお、距離が「近い」場合であり、かつ、重要度が「大」である場合には、距離が「遠い」である場合との距離の違いを反映するために、表示方法として、「強調」ではなく、「普通」を選択してもよい。
【０１１４】
図５には、３種類の表示方法のそれぞれの内容が、警告メッセージ（虚像）の表示サイズ、位置、彩度（鮮やかさ）および輝度に関して表形式で表されている。
【０１１５】
警告メッセージ（図６ないし図８に示す例においては、「Ｗａｒｎｉｎｇ！」）の表示サイズについて説明すれば、表示方法が「さりげなく」である場合には、最小サイズ、すなわち、「１／４画面以下」の大きさが選択され、また、表示方法が「普通」である場合には、通常サイズ、すなわち、「１／３画面以下」の大きさが選択され、また、表示方法が「強調」である場合には、最大サイズ、すなわち、「１／２画面以上」の大きさが選択される。ここに、「画面」は、例えば、図７および図８に示すように、観察者の視界に相当する矩形の領域として定義される。
【０１１６】
また、警告メッセージの表示位置について説明すれば、表示方法が「さりげなく」である場合には、画面のうちそれの中心位置から最も離れた位置、すなわち、画面の端（例えば、図６（ａ）に示すように、警告メッセージが表示される位置）が選択され、また、表示方法が「普通」である場合には、通常位置、すなわち、画面の左下または右下の位置（ただし、例えば、図６（ｂ）に示すように、画面の端から少し内側に位置する位置）が選択され、また、表示方法が「強調」である場合には、画面の中央位置（例えば、図６（ｃ）に示すように、警告メッセージが表示される位置）が選択される。
【０１１７】
また、警告メッセージの色の彩度（鮮やかさ）について説明すれば、表示方法が「さりげなく」である場合には、淡い色（例えば、灰色）が選択され、また、表示方法が「普通」である場合には、デフォールト色（例えば、薄赤色）が選択され、また、表示方法が「強調」である場合には、鮮やかな色（例えば、赤色）が選択される。
【０１１８】
また、警告メッセージの輝度について説明すれば、表示方法が「さりげなく」である場合には、低い輝度が選択され、また、表示方法が「普通」である場合には、デフォールト輝度が選択され、また、表示方法が「強調」である場合には、高い輝度が選択される。
【０１１９】
本実施形態においては、観察者の観察中、ある警告メッセージの表示が開始されると、表示方法が「さりげなく」または「強調」である場合には、その警告メッセージの表示態様が、時間の経過につれて変化するようになっている。すなわち、図６に示すように、表示方法が「さりげなく」または「強調」である場合には、警告メッセージがアニメーション表示されるようになっているのである。
【０１２０】
具体的には、表示方法が「さりげなく」である場合には、図６（ａ）に示すように、警告メッセージの表示サイズが時間の経過につれて拡大し、最終的に通常サイズに一致する。また、表示方法が「強調」である場合には、図６（ｃ）に示すように、警告メッセージの表示サイズが時間の経過につれて縮小し、最終的に通常サイズに一致する。
【０１２１】
なお付言するに、本実施形態においては、警告メッセージの属性のうち、アニメーション表示によって変化するものは、表示サイズのみであるが、それに代えて、またはそれに加えて、警告メッセージの表示位置、色の彩度および輝度のうちの少なくとも１つが時間の経過につれて変化し、最終的に、表示方法が「普通」である場合のレベルに一致するようにしてもよいことはいうまでもない。
【０１２２】
図７に示す例は、観察者が、現実外界を遠位置において観察する場合に観察者によって認識される画像である。この例においては、現実外界が、複数の加工機が設置された工場内の景色である。
【０１２３】
この例においては、前述のように、「Ｗａｒｎｉｎｇ！」という文字列が警告メッセージとして虚像として表示される。この例においては、警告メッセージは、強調されて表示されている。すなわち、警告メッセージが大きく、しかも、画面の中央位置に表示されているのである。
【０１２４】
図８に示す例は、観察者が、現実外界を近位置において観察する場合に観察者によって認識される画像である。この例においては、現実外界が、加工機としてのボール盤である。
【０１２５】
この例においても、前述のように、「Ｗａｒｎｉｎｇ！」という文字列が警告メッセージとして虚像として表示される。この例においては、警告メッセージは、さりげなく（例えば、画面の中央位置を注目している観察者を驚かせたりして観察者の注意を乱すことも散漫にしたりすることがないように）表示されている。すなわち、警告メッセージが小さく、しかも、画面の端に表示されているのである。
【０１２６】
図９には、ＰＣ９０がディスプレイ装置１０に通常表示および追加表示を行わせるためにＰＣ９０によって実行される前述の作業支援プログラムが概念的にフローチャートで表されている。
【０１２７】
なお、作業者は、ディスプレイ装置１０を装着して作業を行うため、作業者は、作業中、随時、必要な知識や情報（例えば、前述の作業マニュアルや部品リスト）をそのディスプレイ装置１０を介して取得することが可能である。
【０１２８】
また、ＰＣ９０は、作業者の、作業中における行動を図示しないカメラやセンサ（例えば、モーションキャプチャ）を用いてモニタし、必要に応じて、画像解析を行って作業者の位置や行動、作業者が掴んでいる物などを判別する。
【０１２９】
図９に示す作業支援プログラムがＰＣ９０によって起動されると、まず、ステップＳ２０１において、作業者が一連の作業を開始したか否かが判定される。作業者は、例えば、作業開始に先立ち、特定のスイッチを操作したり特定のアイコンをクリックすることにより、作業が開始されたことをＰＣ９０に入力する。
【０１３０】
作業が開始されたと仮定すると、ステップＳ２０１の判定がＹＥＳとなり、ステップＳ２０２において、前記通常表示開始トリガが、ディスプレイ装置１０に向けて出力される。その結果、図２におけるステップＳ３の判定がＹＥＳとなる。
【０１３１】
続いて、ステップＳ２０３において、図示しないメモリから前記第１および第２の通常表示コンテンツを表すデータが読み出され、それが、ディスプレイ装置１０に向けて出力される。図２におけるステップＳ４は、そのデータを用いて、通常表示を行うことになる。その結果、作業者は、手を使うことなく、前述の作業マニュアルや部品リストを参照しつつ、作業を継続することが可能となる。
【０１３２】
その後、ステップＳ２０４において、作業者が実際に掴んだ部品が、指示された部品とは異なること、すなわち、部品間違いが発生したか否かが判定される。今回は、部品間違いが発生したと仮定すると、ステップＳ２０４の判定がＹＥＳとなり、ステップＳ２０５において、前記追加表示トリガがディスプレイ装置１０に向かって出力される。その結果、図２におけるステップＳ５の判定がＹＥＳとなる。
【０１３３】
続いて、ステップＳ２０６において、「部品間違い」という警告メッセージを表示するための映像信号がディスプレイ装置１０に向かって、作業者の実際の行動に同期するように、リアルタイムで出力される。その結果、図３におけるステップＳ１０７が、その出力された映像信号を元画像信号として取り込む。
【０１３４】
ステップＳ２０４の判定がＹＥＳである場合もＮＯである場合も、その後、ステップＳ２０７において、図示しない自動搬送機が作業者に接近しているか否かが判定される。今回は、自動搬送機が作業者に接近していると仮定すると、ステップＳ２０７の判定がＹＥＳとなり、ステップＳ２０８において、前記追加表示トリガがディスプレイ装置１０に向かって出力される。その結果、図２におけるステップＳ５の判定がＹＥＳとなる。
【０１３５】
続いて、ステップＳ２０９において、作業者が自動搬送機に注意することを促すために、「自動搬送機  注意」という警告メッセージを表示するための映像信号がディスプレイ装置１０に向かって、作業者の実際の行動に同期するように、リアルタイムで出力される。その結果、図３におけるステップＳ１０７が、その出力された映像信号を元画像信号として取り込む。
【０１３６】
ステップＳ２０７の判定がＹＥＳである場合もＮＯである場合も、その後、ステップＳ２１０において、作業者が図示しない加工機（例えば、図８に示すボール盤）を用いて加工を開始したか否かが判定される。今回は、作業者が作業を開始したと仮定すると、ステップＳ２１０の判定がＹＥＳとなり、ステップＳ２１１において、前記追加表示トリガがディスプレイ装置１０に向かって出力される。その結果、図２におけるステップＳ５の判定がＹＥＳとなる。
【０１３７】
続いて、ステップＳ２１２において、作業者が前記加工機の回転数（作業中に作業者が注目すべき作業条件の一例）に注意することを促して加工条件が危険になることを予防するために、「回転数  注意」という警告メッセージを表示するための映像信号がディスプレイ装置１０に向かって、作業者の実際の行動に同期するように、リアルタイムで出力される。その結果、図３におけるステップＳ１０７が、その出力された映像信号を元画像信号として取り込む。
【０１３８】
ステップＳ２１０の判定がＹＥＳである場合もＮＯである場合も、その後、ステップＳ２１３において、作業者の左手の位置が、前記加工機の位置との関係において、異常であるか否かが判定される。今回は、左手の位置が異常であると仮定すると、ステップＳ２１３の判定がＹＥＳとなり、ステップＳ２１４において、前記追加表示トリガがディスプレイ装置１０に向かって出力される。その結果、図２におけるステップＳ５の判定がＹＥＳとなる。
【０１３９】
続いて、ステップＳ２１５において、作業者が自身の左手の位置（作業中に作業者が注目すべき作業条件の一例）に注意することを促して加工条件が危険になることを予防するために、「左手位置  注意」という警告メッセージを表示するための映像信号がディスプレイ装置１０に向かって、作業者の実際の行動に同期するように、リアルタイムで出力される。その結果、図３におけるステップＳ１０７が、その出力された映像信号を元画像信号として取り込む。
【０１４０】
ステップＳ２１３の判定がＹＥＳである場合もＮＯである場合も、その後、ステップＳ２１６において、作業者による作業が終了したか否かが判定される。作業者は、例えば、作業終了の直後、特定のスイッチを操作したり特定のアイコンをクリックすることにより、作業が終了したことをＰＣ９０に入力する。今回は、作業が終了したと仮定すると、ステップＳ２１６の判定がＹＥＳとなり、ステップＳ２１７において、前記追加表示トリガがディスプレイ装置１０に向かって出力される。その結果、図２におけるステップＳ５の判定がＹＥＳとなる。
【０１４１】
続いて、ステップＳ２１９において、作業者の今回の作業内容を確認することを可能にするために、「予定通り  時間遅れなし」という警告メッセージを表示するための映像信号がディスプレイ装置１０に向かって、作業者の実際の行動に同期するように、リアルタイムで出力される。その結果、図３におけるステップＳ１０７が、その出力された映像信号を元画像信号として取り込む。
【０１４２】
その後、ステップＳ２１９において、前記表示終了指令がＰＣ９０に対して出力される。その結果、図２におけるステップＳ７の判定がＹＥＳとなる。以上で、この作業支援プログラムの今回の実行が終了する。
【０１４３】
図１０には、複数の警告メッセージのそれぞれにつき、表示方法と、距離と、重要度とが表形式で例示されている。
【０１４４】
警告メッセージが「部品間違い」である場合には、距離が「近く」、しかも、重要度が「中」であるため、図４に示す割り当てルールに従い、表示方法に「さりげなく」が割り当てられる。また、警告メッセージが「自動搬送機  注意」である場合には、距離が「遠く」、しかも、重要度が「大」であるため、図４に示す割り当てルールに従い、表示方法に「強調」が割り当てられる。
【０１４５】
また、警告メッセージが「回転数  注意」である場合には、距離が「近く」、しかも、重要度が「小」であるため、図４に示す割り当てルールに従い、表示方法に「さりげなく」が割り当てられる。また、警告メッセージが「左手位置  注意」である場合には、距離が「近く」、しかも、重要度が「大」であるため、図４に示す割り当てルールに従い、表示方法に「強調」が割り当てられる。また、警告メッセージが「予定通り  時間遅れなし」である場合には、距離が「遠く」、しかも、重要度が「小」であるため、図４に示す割り当てルールに従い、表示方法に「普通」が割り当てられる。
【０１４６】
以上の説明から明らかなように、本実施形態においては、説明の便宜上、距離センサ１００が前記（１）項における「測定部」の一例を構成し、Ｒ光源２０、Ｇ光源２２およびＢ光源２４、合波部３４ならびにスキャナ４０が互いに共同して、同項における「画像光発生部」の一例を構成し、コンピュータ８２のうち、図３のステップＳ１０８のうち距離に応じて表示方法を選択する部分（図４参照）を実行する部分が、同項における「第１強調度制御部」の一例を構成していると考えることが可能である。
【０１４７】
さらに、本実施形態においては、説明の便宜上、コンピュータ８２のうち、図３のステップＳ１０８のうち距離に応じて警告メッセージの表示サイズを変更する部分（図５参照）を実行する部分が、前記（２）および（３）項のそれぞれにおける「第１手段」の一例を構成していると考えることが可能である。
【０１４８】
さらに、本実施形態においては、説明の便宜上、コンピュータ８２のうち、図３のステップＳ１０８のうち距離に応じて警告メッセージの表示位置を変更する部分（図５参照）を実行する部分が、前記（４）および（５）項のそれぞれにおける「第２手段」の一例を構成していると考えることが可能である。
【０１４９】
さらに、本実施形態においては、説明の便宜上、コンピュータ８２のうち、図３のステップＳ１０８のうち距離に応じて警告メッセージの彩度を変更する部分（図５参照）を実行する部分が、前記（６）および（７）項のそれぞれにおける「第３手段」の一例を構成していると考えることが可能である。
【０１５０】
さらに、本実施形態においては、説明の便宜上、コンピュータ８２のうち、図３のステップＳ１０８のうち距離に応じて警告メッセージの輝度を変更する部分（図５参照）を実行する部分が、前記（８）および（９）項のそれぞれにおける「第４手段」の一例を構成していると考えることが可能である。
【０１５１】
さらに、本実施形態においては、説明の便宜上、コンピュータ８２のうち、図３のステップＳ１０８のうち重要度に応じて表示方法を変更する部分（図４参照）を実行する部分が、前記（１０）項における「第２強調度制御部」の一例を構成していると考えることが可能である。
【０１５２】
さらに、本実施形態においては、説明の便宜上、ＰＣ９０が前記（１２）および（１３）項のそれぞれにおける「処理装置」の一例を構成していると考えることが可能である。
【０１５３】
以上、本発明の一実施形態を図面に基づいて詳細に説明したが、これは例示であり、前記［発明の開示］の欄に記載の態様を始めとして、当業者の知識に基づいて種々の変形、改良を施した他の形態で本発明を実施することが可能である。
【図面の簡単な説明】
【０１５４】
【図１】本発明の一実施形態に従うシースルー型ディスプレイ装置１０の構成を概念的に表すブロック図である。
【図２】図１に示す画像処理回路８０のコンピュータ８２によって実行される画像表示プログラムを概念的に表すフローチャートである。
【図３】図２におけるステップＳ６の詳細を追加表示ルーチンとして概念的に表すフローチャートである。
【図４】図３におけるステップＳ１０８の実行のために使用される割り当てルールを表形式で示す図である。
【図５】図４に示す複数の表示方法のそれぞれの内容を表形式で示す図である。
【図６】図４に示す複数の表示方法のそれぞれの内容を図である。
【図７】図１に示すディスプレイ装置１０を用いて観察者によって認識される画像の一例であって、遠位置観察状態で観察される現実外界と、当該画像の中央位置に虚像として表示される警告メッセージとを含むものを示す図である。
【図８】図１に示すディスプレイ装置１０を用いて観察者によって認識される画像の別の例であって、近位置観察状態で観察される現実外界と、当該画像の左下位置に虚像として表示される警告メッセージとを含むものを示す図である。
【図９】図１に示すＰＣ９０によって実行される作業支援プログラムを概念的に表すフローチャートである。
【図１０】図９に示す複数の警告メッセージのそれぞれに割り当てられる表示方法を、各警告メッセージに対応する距離および重要度と共に表形式で示す図である。
【符号の説明】
【０１５５】
１０  シースルー型ディスプレイ装置
２０  Ｒ光源
２２  Ｇ光源
２４  Ｂ光源
８０  画像処理回路
８２  コンピュータ
９０  パーソナルコンピュータ（ＰＣ）
１００  距離センサ
【図１】
2010079121.tif 000003
【図２】
2010079121.tif 000004
【図３】
2010079121.tif 000005
【図４】
2010079121.tif 000006
【図５】
2010079121.tif 000007
【図６】
2010079121.tif 000008
【図７】
2010079121.tif 000009
【図８】
2010079121.tif 000010
【図９】
2010079121.tif 000011
【図１０】
2010079121.tif 000012