(57)【要約】【課題】ガイド画面による操作支援が可能な映像表示装置を提供する。【解決手段】マウス２の操作に基づいて表示される通常画面５と、通常画面５に重ね合わせられて表示されるガイド画面（補助画面）６を表示する映像分配バリア付きディスプレイ１、そのディスプレイ１上に位置するマウス２を操作する操作者の視点を読み取り、視点が静止した位置の通常画面５の情報に関連付けられた補助情報をガイド画面６として表示させる補助画面表示処理部３０を備え、補助画面６は、映像分配バリア可視化メガネ型のフィルタ４を介することで視認可能とする。【選択図】図１
2013200440.tif 000002
【特許請求の範囲】
【請求項１】
入力手段の操作に基づいて表示される通常画面と、上記通常画面に重ね合わせられて表示される補助画面を表示する映像表示部、上記映像表示部上に位置する上記入力手段を操作する操作者の視点を読み取り、上記視点が静止した位置の上記通常画面の情報に関連付けられた補助情報を上記補助画面として表示させる補助画面表示処理部を備えたことを特徴とする映像表示装置。
【請求項２】
上記補助画面は、所定のフィルタを介することで視認可能となることを特徴とする請求項１記載の映像表示装置。
【請求項３】
上記通常画面は、所定の施設の監視および運転を行うための操作画面を含み、上記補助画面には、上記操作画面の操作を補助する上記補助情報が表示されることを特徴とする請求項１または請求項２に記載の映像表示装置。
【請求項４】
上記入力手段の操作に基づく情報を保存する入力手段操作連動情報記憶部、上記入力手段の操作に伴う上記操作者の視点の動きに基づく情報を保存する視点連動情報記憶部、上記入力手段連動情報記憶部と上記視点連動情報記憶部の情報を、上記入力手段の操作のイベントに関連付けて上記映像表示部上に再生する記憶情報再生手段を備えたことを特徴とする請求項１〜３のいずれか一項に記載の映像表示装置。
【請求項５】
上記記憶情報再生手段により、上記入力手段操作連動情報記憶部から所定の上記イベントに対応した上記通常画面の映像情報を呼び出し、上記映像表示部に再生しつつ、上記操作者が所定の上記イベントに対応した上記入力手段の操作を訓練する際に、訓練中の上記操作者の視点の動きに基づく情報を保存する訓練時視点連動情報記憶部を備えたことを特徴とする請求項４記載の映像表示装置。
【請求項６】
上記記憶情報再生手段により、上記視点連動情報記憶部と上記訓練時視点連動情報記憶部から所定の上記イベントに対応した上記操作者の視点の動きに関する情報を各々呼び出し、上記補助画面上に、二つの上記視点の動きを同時再生し、軌跡として表示することを特徴とする請求項５記載の映像表示装置。
【請求項７】
上記記憶情報再生手段により、上記入力手段操作連動情報記憶部から所定のイベントに対応した上記通常画面の映像情報を呼び出し、上記映像表示部に再生しつつ、上記操作者が上記入力手段の操作を訓練する際に、訓練中の上記操作者と上記入力手段操作連動情報記憶部に記憶された上記操作者の操作とを比較し、訓練中の上記操作者の操作遅延を検出したことに伴い、上記補助画面に、訓練中の上記操作者が操作によって表示させるべき画面の映像を表示する操作時間遅延時支援処理手段を備えたことを特徴とする請求項４記載の映像表示装置。
【請求項８】
上記視点連動情報記憶部と上記訓練時視点連動情報記憶部に蓄積された上記操作者の視点の動きの違いに基づき、訓練中の上記操作者の操作習熟度を評価する習熟度評価部を備えたことを特徴とする請求項５記載の映像表示装置。
【請求項９】
上記記憶情報再生手段により、上記入力手段操作連動情報記憶部から所定の上記イベントに対応した上記通常画面の映像情報を呼び出し、上記映像表示部に再生しつつ、上記操作者が上記入力手段の操作を訓練する際に、上記補助画面上に、上記操作者が次の操作によって表示させるべき画面の映像を、次画面予告映像として先行表示することを特徴とする請求項４記載の映像表示装置。
【請求項１０】
上記次画面予告映像は、点滅表示されることを特徴とする請求項９記載の映像表示装置。
【請求項１１】
上記次画面予告映像は、時間の経過とともに明瞭化するよう表示されることを特徴とする請求項９記載の映像表示装置。
【請求項１２】
上記映像表示部は映像分配バリア付きディスプレイであり、上記所定のフィルタは、眼鏡型の映像分配バリア可視化メガネであることを特徴とする請求項２記載の映像表示装置。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、プラント監視や運転操作に用いる映像表示装置に関するものである。
【背景技術】
【０００２】
従来の映像表示装置として、入力手段としてマウスとアイポインタの両方が使える手法（特許文献１）、アイポインタを検出して文字列やキーボードを表示する方法（特許文献２）、視線入力操作のメニューをディスプレイの一部に表示する手法（特許文献３）が開示されている。
【先行技術文献】
【特許文献】
【０００３】
【特許文献１】特開２００６−５９１４７号公報
【特許文献２】特開平６−１４９４６９号公報
【特許文献３】特開平１０−２０９９７号公報
【発明の概要】
【発明が解決しようとする課題】
【０００４】
従来の映像表示装置は、映像表示部は、通常画面を表示させた状態で、入力手段を操作する操作者の視点を、別の入力手段（アイポインタ）として利用し、通常画面を操作することが開示されているが、通常画面に重ね合わせた状態で、操作者の視点に基づいて、操作の補助情報を補助画面として表示させることはできなかった。
【０００５】
本発明は、上記のような問題を解決するためになされたものであり、通常画面に重ね合わせて表示される補助画面を、操作者の視点を基に表示させることが可能な映像表示装置を提供することを目的とする。
【課題を解決するための手段】
【０００６】
この発明に係わる映像表示装置は、入力手段の操作に基づいて表示される通常画面と、上記通常画面に重ね合わせられて表示される補助画面を表示する映像表示部、上記映像表示部上に位置する上記入力手段を操作する操作者の視点を読み取り、上記視点が静止した位置の上記通常画面の情報に関連付けられた補助情報を上記補助画面として表示させる補助画面表示処理部を備えたものである。
【発明の効果】
【０００７】
この発明の映像表示装置は、操作者の視点から、視点が静止した位置の通常画面の情報に関連付けられた補助情報を、通常画面に重ね合わせて補助画面として表示できるため、操作者は補助情報を操作の際に映像表示部にて確認することができる。
【図面の簡単な説明】
【０００８】
【図１】本発明の実施の形態１の映像表示装置の概念図である。
【図２】本発明の実施の形態１の映像表示装置の概念図である。
【図３】本発明の実施の形態２の映像表示装置の概念図である。
【図４】本発明の実施の形態３の映像表示装置の概念図である。
【図５】本発明の実施の形態４の映像表示装置の概念図である。
【図６】本発明の実施の形態５の映像表示装置の概念図である。
【発明を実施するための形態】
【０００９】
実施の形態１．
まず、本発明の適用分野について詳細に説明する。近年の火力プラント向けユニット計算機のマンマシンはマウスオペレーション化され画面展開は複雑化している。更には計算機による自動化システムが整備されており少人数による全自動運転が可能となっている。反面、異常時の手動操作も少人数で対応しなければならず、常に運転習熟度を高めておく必要がある。
【００１０】
運転員（操作者）の運転習熟度を高めるために専用のトレーニング用シミュレータ装置を設置してトレーニングする場合、運転習熟度はインストラクターが判断していた。また、実際のプラントに用いられるシステムとは別のシステムが必要であり、また、別指導者が不可欠であった。そして、実際のユニット計算機のマンマシン操作を記録してトレーニング用シミュレータ装置で再生することも不可能であった。
この発明は上記のような課題を解決するために、ユニット計算機でのマウス操作とその操作により表示される通常画面と、アイポインタの動きを記憶して再生する、或いは記憶したアイポインタの動きを解析して自動的に表示するべき情報を編集する、更には記憶したアイポインタの動きを統計処理して運転習熟度の評価指標を生成し、運転習熟度を判断する処理手段を備えたユニット計算機兼トレーニング装置の役割を果たす映像表示装置を提供することを目的とする。
【００１１】
以下、この発明の実施の形態１の映像表示装置を図１及び図２に基づいて説明する。図１は、本発明の映像表示装置の映像表示部を中心として構成概念図であり、図２は、演算処理部（計算機本体部）を中心とした構成概念図である。
この映像表示装置は、映像表示部となる映像分配バリア付きディスプレイ（以下、単にディスプレイとする。）１を構成要素として含んでいる。このディスプレイ１は、カーナビゲーション等で採用されるバックライトを２方向に分配するバリア付きのディスプレイである。また、ディスプレイ１を目視して行う、通常のマンマシン操作は、マウス（入力手段）２にて行う。またディスプレイ１の周囲には、操作者の視線を解析する視線解析カメラ３が配置されている。
【００１２】
ここで、操作者は、操作手順の案内情報となるガイド画面６（補助情報となる映像。）を目視したい場合には、フィルタ機能を持つ映像分配バリア可視化メガネ型フィルタ（以下、単にフィルタとする。）４を装着してディスプレイ１を目視する。裸眼では、ディスプレイ１上には、通常画面５しか確認できないが、フィルタ４を操作者が着用し、ディスプレイ１を、フィルタ４を介して目視することで、映像分配バリアを可視化でき、通常画面５と、この通常画面５に重ね合わせられたガイド画面６をディスプレイ１上に視認することが可能となる。
【００１３】
ここで、通常画面５は、通常画面表示処理手段１０によってディスプレイ１上に表示がなされる。また、ユーザ補助の役割を持つガイド画面６は、ディスプレイ１に補助画面表示処理部３０によって通常画面５と重ね合わせて表示される。ここで、補助画面表示処理部３０は、ガイド画面表示処理手段７、ガイド判定処理手段８、視線情報処理手段９を含む、ガイド画面６を表示するための演算処理部である。各構成部の詳細な説明は後述する。
また、通常画面５は、所定の施設の監視および運転を行うための操作画面（メニュー画面等）を含み、ガイド画面６は、例えば、その操作画面の操作を補助するガイド（補助）情報が表示される。
【００１４】
本発明は、ディスプレイ１上にアイポインタ（操作者の視点に相当する。）に連動するガイド画面６を、通常画面５に重ね合わせた状態で表示できることが特徴であり、さらに、通常画面５の操作および監視は裸眼状態で可能であり、ガイド画面６を見る必要が無いベテラン運転員（ベテラン操作者）には、これまでのユニット計算機と何も変らない機能が提供できる。ガイド画面６として提供される補助情報が必要な新任運転員（トレーニング者、または訓練者。）は、映像分配バリア可視化メガネ型のフィルタ４を掛けるだけでガイド画面６を可視化できるようになり、通常画面５を操作または監視しながらアイポインタに連動するガイド画面６によるトレーニング機能、運転支援機能を利用することができ、フィルタ４の装着、非装着によってガイド画面６の表示有無を容易に切り替えられることも特徴である。
【００１５】
次に本発明の映像表示装置の動作について説明する。
通常画面５とガイド画面６は、通常画面表示処理手段１０が表示するレイアとガイド画面表示処理手段７が表示するレイアを指定して表示出力要求をする。各レイアの表示映像は映像分配バリアで分配され、ディスプレイ１の正面から識別できる通常画面５と、正面からは裸眼では識別できないガイド画面６の表示がなされる。
映像分解バリア可視化メガネ型のフィルタ４は、裸眼では識別できないガイド画面６の光を屈折させて集光する機能を有し、操作者はフィルタ４を介して、一定の角度から通常画面５とガイド画面６の両方の映像を視認できる。
【００１６】
視線情報処理手段９は、視線解析カメラ３から取り込んだ目線映像を判別して、操作者の視点であるアイポインタの位置情報に変換する。ガイド判定処理手段８は、アイポインタの位置情報を基にアイポインタ静止位置１１にある表示部品に登録しているガイド（補助）情報を抽出する。この操作者の視点が静止した位置の通常画面５の情報に関連付けられたガイド情報をガイド画面表示処理手段７へ表示要求することでガイド画面６が表示される。
【００１７】
ここで、図１及び図２のガイド画面６の表示例について示す。例えば、通常画面５の燃料残量計を表示する画面Ａにアイポインタ静止位置１１が位置する場合、ガイド画面６として、燃料残量に関する計算式がディスプレイ１上に表示される。また、通常画面５の監視対象となる指標の変化量を示す折れ線グラフを表示する画面Ｃにアイポインタ静止位置１１が位置する場合、ガイド画面６として、このグラフに関する入力情報がディスプレイ１上に表示される。また、通常画面５の監視対象となるプラントの外観模式図を表示する画面Ｄにアイポインタ静止位置１１が位置する場合、ガイド画面６として、該当プラントの現場記録がディスプレイ１上に表示される。これらガイド画面６として表示されるガイド情報は、例えば、プラント運転時に手動運転の必要が生じた際に、通常画面（画面Ａ〜Ｄ）の情報に関連付けて確認、操作する必要がある項目であり、その操作の移行手順をガイドする情報である。
【００１８】
また、ガイド画面６として表示される情報として、次に展開するべき画面の画面名称ダイアログ、操作ガイドのテロップ／ウィンドウ表示、誤操作時のエラーメッセージ等がある。なお、図１の通常画面５、ガイド画面６の表示内容は一例を示したものであり、監視、運転対象となるプラントが異なれば、また別の項目が表示されることは言うまでもない。
さらに、ガイド画面６は、ディスプレイ１上に点灯表示する以外に、点滅表示や、時間の経過とともに徐々に明瞭化あるいは消滅するように表示させることもでき、特に点滅表示の場合は、操作者の注意をひきつけることができ、ガイド情報を強調して表示させることができ、効果的である。また、フィルタ４を装着した操作者にのみ、ディスプレイ１上で点滅表示されるガイド画面６が見え、裸眼の者には見えないことは言うまでもない。
【００１９】
また、ディスプレイ１上の操作者の視点にはアイポインタのマーク（図１中に符号１１で示す、ディスプレイ１上のアイポインタ静止位置のマーク。）が表示されるが、このマークは、ガイド画面６と同じ映像分配側にのみ表示される。アイポインタ（操作者の視点）を一つの入力手段として、ページ切替、消去等のガイド画面の操作も行うことが可能である。より具体的には、ガイド画面６として各項目の表示部分（メニュー）を設け、行いたい操作に該当する表示部分上に操作者が視点を停止させ、一定時間の視点の停止を受けて、マウス２のクリック操作と同じ要求とみなすことで該当の操作を行うことができる。
【００２０】
以上説明したように、この発明の実施の形態１の映像表示装置によれば、通常のマンマシン操作を行うマウス２とユーザ補助用の表示操作を行うアイポインタへ変換する視線解析カメラ３の両方を接続し、マウス２の操作に連動して表示される通常画面５と、映像分配バリア付きディスプレイ１に正面からは認識できない方向に表示されるガイド画面６と、裸眼で視認できないガイド画面６として表示した画像を可視化できる映像分配バリア可視化メガネ型フィルタ４との組合せにより、フィルタ４をかけない状態ではアイポインタに関連付けられたガイド画面６を見ることなく操作、監視が可能であり、フィルタ４をかけることでアイポインタに連動して視線情報処理手段９〜ガイド判定処理手段８〜ガイド画面表示処理手段７が提供するガイド画面６を利用できるようになり、マンマシン操作の補助情報をトレーニング者が認識できるようになるという効果がある。
【００２１】
なお、この映像表示装置は、例えば、火力プラント向けユニット計算機兼トレーニングシステムとして用いることができ、プラント起動／停止運転のトレーニングのためだけに別途トレーニングシステムを持つという負担を軽減することができ、また、実際のプラント監視運転に用いる装置でトレーニングすることができるため、緊急時の手動介入操作を想定したトレーニングに適している。
また、本発明の映像表示装置を、火力プラント以外にも、計算機システムのディスプレイから手動操作器を使った運転が可能なシステムに応用して用いることも可能であることは言うまでもない。
【００２２】
実施の形態２．
以下、この発明の実施の形態２の映像表示装置を、図３に基づいて説明する。
実施の形態１の映像表示装置で可能となる支援は、アイポインタに関連したガイド画面６をディスプレイ１に表示するまでに留まっていた。この実施の形態２では、マウス操作関連の情報とアイポインタ関連の情報を記憶情報として記憶、保存し、その記憶情報を呼び出して再生する機能が加えられており、記憶情報の再生をすることで、マウスポインタの動き（マウス２による画面展開操作でのマウスポインタの軌跡と展開画面の情報。）またはアイポインタの動き（マウス操作と同じ期間のアイポインタの軌跡の情報。）をトラックバックして事後確認できる効果を付加した。
【００２３】
図３に示すように、入力手段操作連動情報記憶部４０は、入力手段であるマウス２の操作に基づく情報を保存する機能を持ち、次に示すマウス操作記憶処理手段１２、通常表示画面記憶処理手段１３、プラントデータ記憶処理手段１４、マウス操作連動情報１６（記憶部）を構成要素として含んでいる。マウス操作記憶処理手段１２はディスプレイ１上でのマウス２のクリック操作位置を記憶し、通常表示画面記憶処理手段１３はそのマウス操作により切り替わった画面を記憶し、プラントデータ記憶処理手段１４はマウス操作のイベントに連動してプラントデータを記憶する。これらの記憶をマウス操作連動情報１６として保存する。このマウス操作連動情報１６には、例えば、プラントの監視および運転操作の手本となるベテラン運転員のマウス操作の連動情報が記憶される。
【００２４】
ここで、連動情報とは、マウス操作及びマウス操作による画面展開、あるいはプラントからのイベント発生による画面内の表示内容の変化、そしてアイポインタの軌跡が含まれる。例えば、これらの画面展開、状態変化の記憶情報にタイムスタンプを付けて記憶しておき、ベテラン運転員のアイポインタ連動情報１９を、このタイムスタンプ間隔でスライスして記憶する構成とする。
【００２５】
また、図３に示すように、視点連動情報記憶部４１は、マウス２の操作に伴う操作者の視点の動きに基づく情報を保存する機能を持ち、次に示す視線情報記憶処理手段１７、ガイド情報記憶処理手段１８、アイポインタ連動情報１９（記憶部）を構成要素として含んでいる。この視点連動情報記憶部４１では、マウス操作〜次のマウス操作をイベント区間と定義し、視線情報記憶処理手段１７はイベント区間に移動したアイポインタの軌跡とアイポインタが静止した位置を記憶し、ガイド情報記憶処理手段１８はアイポインタ静止位置で表示したガイド情報を記憶し、アイポインタ連動情報１９として保存する。このアイポインタ連動情報１９には、例えば、プラントの監視および運転操作の手本となるベテラン運転員のアイポインタの連動情報が記憶される。
【００２６】
さらに、前述のマウス操作連動情報１６とアイポインタ連動情報１９を、ディスプレイ１上にイベントに紐付けて連結再生する記憶情報再生手段１５により、トレーニング者の手本となるベテラン運転員のマウス操作と視線の動きを事後確認可能とした。これによって、トレーニング者は、ベテラン運転員のマウス操作と視線の動きの流れをくり返し学習してトレーニングを行うことが可能となる。
トレーニング時においては、トレーニング者が、ベテラン運転員のタイムスランプ間隔をオーバしても操作を実施しない、あるいはイベント発生による画面表示内容の変化箇所へ、アイポインタが移動しなかった、または、ベテラン運転員と異なる順序で操作を実施した場合は、操作遅延、または誤動作が生じたと見なされる。
【００２７】
以上説明したように、この実施の形態２では、マウス２のクリック操作位置を記憶するマウス操作記憶処理手段１２と、その操作により切り替わった画面を記憶する通常表示画面記憶処理手段１３と、マウス２の操作に連動してプラントデータを記憶するプラントデータ記憶処理手段１４により記憶したマウス操作連動情報１６と、マウス操作〜次のマウス操作を１つのイベント区間としてこのイベント区間にアイポインタが静止した位置を視線情報記憶処理手段１７により記憶し、その静止位置で表示したガイド情報をガイド情報記憶処理手段１８により記憶し、これらアイポインタ連動情報１９と前述のマウス操作連動情報１６とを連結して再生できる記憶情報再生手段１５により、プラントデータの変化に対応したベテラン運転員のマウス操作をディスプレイ１上で確認可能であり、フィルタ４を通すことでベテラン運転員の視線の動きを視覚的に確認可能であるため、トレーニングシステムとして適している。
【００２８】
実施の形態３．
以下、この発明の実施の形態３の映像表示装置を、図４に基づいて説明する。
上述の実施の形態２では、ベテラン運転員のマウス操作と視線の動きを事後確認できるまでの支援に留まったが、この実施の形態３では、ベテラン運転員のマウス操作と視線の動きを再生しながら同じ対応操作を実施したトレーニング者（訓練者）の視線情報も保存し、ベテラン運転員の視線の動きとトレーニング者の視線の動きの違いを視覚的に確認できる機能を付加している。
【００２９】
この実施の形態３による映像表示装置は、図４に示すように、記憶情報再生手段１５により、入力手段操作連動情報記憶部４０内のマウス操作連動情報１６から所定のイベントに対応した通常画面５の映像情報を呼び出し、ディスプレイ１上に再生しつつ、操作者が所定のイベントに対応したマウス２の操作を訓練する際に、訓練中の操作者の視点の動きに基づく情報を保存する訓練時視点連動情報記憶部５０を備えている。
【００３０】
図４に示すように、訓練時視点連動情報記憶部５０は、トレーニングの手本となるベテラン運転員のマウス操作連動情報１６を再生して行うトレーニング中に、トレーニング者の視線の動きを記憶する視線情報記憶処理手段１７ａ、トレーニング者の視点に関連付けられて表示されたガイド情報を記憶するガイド情報記憶処理手段１８ａ、トレーニング者の視線情報記憶処理手段１７ａによる記憶とガイド情報記憶処理手段１８ａによる記憶を保存するトレーニング者のアイポインタ連動情報２０を含む構成である。
記憶情報再生手段１５により、視点連動情報記憶部４１内のベテラン運転員のアイポインタ連動情報１９と、訓練時視点連動情報記憶部５０内のトレーニング者のアイポインタ連動情報２０を各々呼び出し、ガイド画面６と同じレイアに二人分の視線の軌跡を同時再生する。その際、再生した２人分の視線の軌跡は色、線種を変えて表示し、視線の動きの違いを確認可能とした。
【００３１】
このように、ディスプレイ１への表示処理に必要な演算処理部に、訓練時視点連動情報記憶部５０を付加的に設けたことにより、マウス操作連動情報１６を再生して行うトレーニング中に、トレーニング者の視線情報記憶処理手段１７ａによる記憶とガイド情報記憶処理手段１８ａによる記憶をトレーニング者のアイポインタ連動情報２０として保存し、後からベテラン運転員のアイポインタ連動情報１９とトレーニング者のアイポインタ連動情報２０を記憶情報再生処理手段１５により同時再生し、フィルタ４を通して両者の視線の動きの違いを視覚的に確認可能であるため、トレーニングシステムに適している。
【００３２】
実施の形態４．
以下、この発明の実施の形態４の映像表示装置を、図５に基づいて説明する。
上述の実施の形態３では、ベテラン運転員とトレーニング者の視線の動きの違いを確認できるまでの支援に留まったが、この実施の形態４では、トレーニング中にトレーニング者の操作遅延を検出した場合、ベテラン運転員の次操作をガイド情報として表示して支援する機能が付加された映像表示装置について説明する。
この実施の形態４の映像表示装置は、図５に示すように、記憶情報再生手段１５により、入力手段操作連動情報記憶部４０内のマウス操作連動情報１６から所定のイベントに対応した通常画面５の映像情報を呼び出し、ディスプレイ１に再生しつつ、トレーニング者である操作者がマウス２の操作を訓練する際に、訓練中の操作者と入力手段操作連動情報記憶部４０に記憶されたベテラン運転員である操作者との操作を比較し、訓練中の操作者の操作遅延を検出したことに伴い、ガイド画面６として、訓練中の操作者が操作によって表示させるべき画面の映像を表示する操作時間遅延時支援処理手段２１を備えている。また、図５中の符号２２で示す次画面情報（記憶部）には、ベテラン運転員が次の操作で表示させた画面情報（すなわち次画面情報。）が保存されている。
【００３３】
この実施の形態４によれば、図５に示すように、マウス操作連動情報１６を再生して行うトレーニング中に、操作遅延（または誤動作）が発生し、ディスプレイ１上の通常画面５に画面Ｄを展開表示すべきところを表示できず、トレーニング者が正しい次の操作を行えなくなった場合、操作時間遅延時支援処理手段２１が、トレーニング者のアイポインタ連動情報２０とベテラン運転員のアイポインタ連動情報１９とを比較し、操作遅延（または誤操作。）を検出する。操作遅延を検出すると、ベテラン運転員のマウス操作連動情報１６より作成された、ベテラン運転員が次のマウス操作で表示させた通常画面情報である次画面情報２２の中から、訓練中の操作者が表示させるべき画面（図４の例では画面Ｄ。）の映像情報を補助情報として抽出し、ガイド画面６の表示レイアへ、補助情報に基づく画面（符号６ａで示す画面Ｄ。）を自動的に追加表示する構成としている。
【００３４】
また、図５のガイド画面６の例に示すように、操作者が操作遅延を生じさせた段階で表示すべき画面Ｄ以外にも「（例文）次の操作画面は画面Ｄです。」という文章によるガイドも行うことが有効である。この場合、次画面情報２２に、画面Ｄの映像情報と文章によるガイド情報とを関連付けて記憶させておくこともガイド機能を充実化させるうえで有効である。このように、操作者の視点情報に関連付けて、ガイド画面６として補助情報を表示させる設定とすることにより、トレーニング時の誘導操作を自動判別してトレーニング者の支援を行うことが可能となる。
【００３５】
実施の形態５．
以下、この発明の実施の形態５の映像表示装置を、図６に基づいて説明する。
上述の実施の形態３、４では、トレーニング者を支援する内容は、ベテラン運転員のアイポインタ連動情報１９とトレーニング者のアイポインタ連動情報２０とを直接比較し、比較結果の違いを視覚的に確認できるまでの支援、さらに、操作遅延となった場合に、補助情報をガイド画面としてディスプレイ１上に表示する支援に留まっていた。この実施の形態５では、図６に示すように、視点連動情報記憶部４１内のベテラン運転員のアイポインタ連動情報１９と、訓練時視点連動情報記憶部５０内のトレーニング者のアイポインタ連動情報２０に蓄積された操作者の視点の動きの違いに基づき、それらを統計解析して運転習熟度評価指標２４を確立し、訓練中の操作者の操作習熟度を評価する運転習熟度評価部（習熟度評価部）６０を備えている。
【００３６】
ここで、運転習熟度評価部６０は、操作および監視対象箇所間の視点の移動速度、操作や監視をすべき箇所での静止時間、視点静止からマウス操作までの時間等をデータベース化し、ベテラン運転員らの同データから平均点（基準点）と評価項目毎の重み付け係数を設定しておき、トレーニング者の同データを評価する機能を持っており、後述する統計処置手段２３、運転習熟度評価指標２４、運転習熟度評価処理手段２５を含む構成である。
運転習熟度評価部６０では、ベテラン運転員のアイポインタ連動情報１９とトレーニング者のアイポインタ連動情報２０をデータベース化し、統計処理手段２３において、同一判断にかかった時間の差、同一プロセス値を判断するのに要した時間の差、視線位置のずれ等をパラメータとして統計処理を行い、運転習熟度評価指標２４が生成され、この運転習熟度評価指標２４に基づき、運転習熟度評価処理手段２５が、トレーニング時におけるベテラン運転員のアイポインタ連動情報１９とトレーニング者のアイポインタ連動情報２０の視線動作の違いを周期算出し、最終的に運転習熟度点数を決定する。映像表示装置の演算処理部に、運転習熟度評価部６０を付加することにより、トレーニング者の運転習熟度を運転習熟度点数として表し、相対評価する支援が可能となる。
【００３７】
このように、本発明の映像表示装置は、アイポインタの動きを記憶して再生する、或いは記憶した動きを解析して自動的に表示すべきガイド情報を編集する、更には記憶した動きを統計処理して評価指標を生成し、新たに記憶したアイポインタの動きから運転習熟度を判断することが可能である。
【００３８】
実施の形態６．
上述の実施の形態４では、操作者の操作遅延によりディスプレイ１上に通常画面５として画面Ｄを表示するタイミングが遅れた場合に、操作の遅延を受けて、ガイド画面６として、表示されるべき画面Ｄの映像情報や文章によるガイド情報が表示されることについて説明した。
しかし、プラントの監視および運転のトレーニングにおいて、操作の流れを習得する場合には、操作遅延が発生する前のタイミングで、次操作により表示させるべき画面の映像（次画面予告映像）をディスプレイ１上にガイド画面として先行表示し、トレーニング者に示して操作の練習を行うことも有効である。
【００３９】
この時、次画面予告映像は、例えば、図４のガイド画面６として例示された映像情報に相当するものであるが、マウス２にて行う操作に先行して、操作を行うべき時間の数秒前から、点灯表示または点滅表示によって次画面予告映像として画面Ｄや「次の操作画面は画面Ｄです。」という文章による表示をする。点滅表示の場合は、操作者の視線をガイド画面６に効果的に集め、操作をサポートすることが可能となる。なお、ここでは数秒前から次画面予告映像を先行表示することを例示したが、どのくらいの時間さかのぼって先行表示させるかは、表示対象となる内容に応じて異なり、適宜先行表示時間が決められることは言うまでもない。
また、点灯表示または点滅表示以外の、ガイド画面６の別の表示の仕方として、例えば、ディスプレイ１上に、時間の経過とともに明瞭化し、操作者が操作を行うべき時間に達した段階で最も明瞭に映し出されるような表示とすることもでき、ガイド画面表示処理手段７内にさまざまな表示機能を持たせることも有効である。
【符号の説明】
【００４０】
１  ディスプレイ（映像表示部）
２  マウス（入力手段）
３  視線解析カメラ
４  フィルタ
５  通常画面
６  ガイド画面
６ａ  画面Ｄ
７  ガイド画面表示処理手段
８  ガイド判定処理手段
９  視線情報処理手段
１０  通常画面表示処理手段
１１  アイポインタ静止位置
１２  マウス操作記憶処理手段
１３  通常表示画面記憶処理手段
１４  プラントデータ記憶処理手段
１５  記憶情報再生手段
１６  マウス操作連動情報
１７、１７ａ  視線情報記憶処理手段
１８、１８ａ  ガイド情報記憶処理手段
１９  アイポインタ連動情報（ベテラン運転員）
２０  アイポインタ連動情報（トレーニング者）
２１  操作時間遅延時支援処理手段
２２  次画面情報
２３  統計処理手段
２４  運転習熟度評価指標
２５  運転習熟度評価処理手段
３０  補助画面表示処理部
４０  入力手段操作連動情報記憶部
４１  視点連動情報記憶部
５０  訓練時視点連動情報記憶部
６０  運転習熟度評価部。
【図１】
2013200440.tif 000003
【図２】
2013200440.tif 000004
【図３】
2013200440.tif 000005
【図４】
2013200440.tif 000006
【図５】
2013200440.tif 000007
【図６】
2013200440.tif 000008