(57)【特許請求の範囲】
【請求項１】
方法であって、
プロセッサでカメラから、操作盤に関連する画像データを受信することと、
１つ以上の画像をディスプレイ上に提示することと、を含み、前記１つ以上の画像が前記画像データに基づいて生成され、
前記操作盤の第１操作部の位置を前記画像データに基づいて、かつ操作設定データに基づいて判断することと、
前記第１操作部の前記位置の表示を前記ディスプレイ上で行なうことと、
前記第１操作部の所望の設定の表示を前記ディスプレイ上で行なうことと、
前記第１操作部の設定が変更されているかどうかを判断することと、
前記操作盤に関連する第２画像データを受信することと、
前記第１操作部の前記変更後の設定が、前記第１操作部の前記所望の設定に対応しているかどうかを、前記第２画像データに基づいて、かつ前記操作設定データに基づいて判断することと、
１つ以上の更に別の画像を前記ディスプレイ上に提示することを含み、前記１つ以上の更に別の画像が前記第２画像データに基づいて生成され、
前記第１操作部の前記変更後の設定が、前記所望の設定に対応していると判断すると、第２操作部の第２位置を前記第２画像データに基づいて、かつ前記操作設定データに基づいて判断することと、
前記第２操作部の前記第２位置の表示を前記ディスプレイ上で行なうことと、
前記第２操作部の所望の設定の表示を前記ディスプレイ上で行なうことと、
を含み、
前記第２操作部の前記所望の設定は、前記操作設定データに基づいて決定され、
前記第２位置の前記表示は、前記第１操作部の前記位置から前記第２位置に向かう方向を表わす、方法。
【請求項２】
更に、校正データを校正機能部に対する前記カメラの位置に基づいて決定することを含み、前記第１操作部の前記位置は、前記校正データに部分的に基づいて判断される、請求項１に記載の方法。
【請求項３】
装置であって、
カメラと、
ディスプレイと、
プロセッサと、
命令群を含むメモリと、を備え、前記命令群が前記プロセッサによって実行されると、前記命令群によって前記プロセッサは：
操作盤に関連する画像データを前記カメラから受信し、
前記画像データに基づいて生成される１つ以上の画像を前記ディスプレイ上に提示し、
前記操作盤の第１操作部の位置を前記画像データに基づいて、かつ操作設定データに基づいて判断し、
前記第１操作部の前記位置の表示を前記ディスプレイ上で行ない、そして
前記第１操作部の所望の設定の表示を前記ディスプレイ上で行なうようになり、
前記操作設定データは、電子チェックリストに関連する操作データ及び方向データを含み、前記操作データは、前記操作盤の複数の操作部の配置を特定し、そして前記方向データは、前記複数の操作部の特定の操作部から前記複数の操作部の第２操作部に向かう方向を表わす情報を含む、装置。
【請求項４】
更に、少なくとも１つのセンサを備え、前記第１操作部の前記位置は更に、前記少なくとも１つのセンサから受信するセンサデータに基づいて判断され、前記少なくとも１つのセンサは、慣性センサ、モーションセンサ、方位センサ、またはこれらのセンサの組み合わせを含み、そして前記所望の設定は、前記操作設定データに基づいて決定される、請求項３に記載の装置。
【請求項５】
前記第１操作部の前記位置の前記表示は、前記画像データに重なる１つ以上の記号を含む、請求項３または４に記載の装置。
【発明の詳細な説明】
【技術分野】
【０００１】
本開示は概して、操作盤の操作部の特定及び設定に関するものである。
【背景技術】
【０００２】
多くのシステムは、当該システムを動作させるように設定される操作部を含む。例えば、航空機操縦室は、航空機の特定の操縦（例えば、離陸を行なう、着陸を行なうなど）に応じて設定される多数の操作部を含むことができる。航空機乗務員は、操縦室の操作盤（群）を１つ以上のチェックリストに基づいて設定することができる。これらのチェックリストは、紙面に表現するか、または電子形式で表現することができ、そして航空機乗務員に指示して、チェックリスト中に特定されるこれらの操作部の各操作部を手動で位置特定し、そして設定することができる。チェックリストにより特定される特定の操作部を位置特定する作業は多大な時間を要する。更に、幾つかの状況では、チェックリスト作業は、比較的短い時間長さのうちに完了させる必要がある、または多数の航空機乗務員が互いに、設定過程で通信する必要がある。
【発明の概要】
【０００３】
機器は、画像データ（例えば、映像データ）をカメラから受信し、そして前記画像データをディスプレイ上に提示するように構成することができる。前記画像データは、操作盤（例えば、航空機の操作盤、潜水艦の操作盤、製造用操作盤、船舶用操作盤、ヘリコプターの操作盤、列車の操作盤、石油精製施設に設置される操作盤など）に関連付けることができる。前記機器は、前記画像データを処理して、前記機器のユーザを、設定プロセスを通して誘導することにより、前記操作盤のこれらの操作部を設定することができる。
【０００４】
例えば、前記機器は、１つ以上の記号またはインジケータを重ね合わせ図形として前記ディスプレイ上に提示することができる。これらの重ね合わせ図形は、指示をユーザに与えて、前記操作盤の特定の操作部を設定する必要があることを表示することができる。更に、これらの重ね合わせ図形は、前記操作部の特定の設定、前記操作部を移動させる（例えば、操作部を右に回す）方向、または別の設定指令を表示することができる。前記機器のユーザは、前記ディスプレイ上に提示される前記画像データ及び前記１つ以上の重ね合わせ図形を、前記特定の操作部を設定する前に精査することができる。前記機器は、前記特定の操作部の前記設定が変更されていることを検出することができ、そして前記操作部が、正しく設定されていることを検証することができる。前記操作部が正しく設定されている場合、前記機器は、前記表示を更新して、前記操作盤の更に別の操作部の設定に関連する更に別の重ね合わせ図形群、命令群、及び記号群を提示することができる。従って、前記機器は、高い現実性を利用してユーザを、操作盤の設定過程を通して、支援し、そして誘導することができる。
【０００５】
特定の実施形態では、操作盤を特定し、そして設定する方法が開示される。前記方法では、プロセッサで、カメラから操作盤に関連する画像データを受信する。前記方法では更に、１つ以上の画像をディスプレイ上に提示する。前記１つ以上の画像は、前記画像データに基づいて生成される。前記方法では、前記操作盤の第１操作部の位置を前記画像データに基づいて、かつ操作設定データに基づいて判断する。前記方法では、前記第１操作部の前記位置の表示を前記ディスプレイ上で行ない、そして前記第１操作部の所望の設定の表示を前記ディスプレイ上で行なう。
【０００６】
別の実施形態では、装置は、カメラ、ディスプレイ、プロセッサ、及びメモリを含む。前記メモリは命令群を含み、前記命令群が前記プロセッサによって実行されると、前記命令群によって前記プロセッサは、操作盤に関連する画像データを前記カメラから受信する、または前記画像データを処理するようになる。前記メモリは命令群を含み、前記命令群が前記プロセッサによって実行されると、前記命令群によって前記プロセッサは、１つ以上の画像を前記ディスプレイ上に提示するようになる。前記１つ以上の画像は、前記画像データに基づいて生成される。前記メモリは命令群を含み、前記命令群が前記プロセッサによって実行されると、前記命令群によって前記プロセッサは、前記操作盤の第１操作部の位置を前記画像データに基づいて、かつ操作設定データに基づいて判断するようになる。前記メモリは命令群を含み、前記命令群が前記プロセッサによって実行されると、前記命令群によって前記プロセッサは、前記第１操作部の前記位置の表示を前記ディスプレイ上で行なうようになる。前記メモリは命令群を含み、前記命令群が前記プロセッサによって実行されると、前記命令群によって前記プロセッサは、前記第１操作部の所望の設定の表示を前記ディスプレイ上で行なうようになる。
【０００７】
更に別の実施形態では、非一時的なコンピュータ可読記憶媒体は命令群を含み、前記命令群がプロセッサによって実行されると、前記命令群によって前記プロセッサは、操作盤に関連する画像データをカメラから受信する、または前記画像データを処理するようになる。前記非一時的なコンピュータ可読記憶媒体は更に、命令群を含み、前記命令群が前記プロセッサによって実行されると、前記命令群によって前記プロセッサは、１つ以上の画像をディスプレイ上に提示するようになる。前記１つ以上の画像は、前記画像データに基づいて生成される。前記非一時的なコンピュータ可読記憶媒体は更に、命令群を含み、前記命令群が前記プロセッサによって実行されると、前記命令群によって前記プロセッサは、前記操作盤の第１操作部の位置を前記画像データに基づいて、かつ操作設定データに基づいて判断するようになる。前記非一時的なコンピュータ可読記憶媒体は更に、命令群を含み、前記命令群が前記プロセッサによって実行されると、前記命令群によって前記プロセッサは、前記第１操作部の前記位置の表示を前記ディスプレイ上で行ない、そして前記第１操作部の所望の設定の表示を前記ディスプレイ上で行なうようになる。
【０００８】
有利な点として、前記非一時的なコンピュータ可読記憶媒体は更に、命令群を含み、前記命令群が前記プロセッサによって実行されると、前記命令群によって前記プロセッサは、前記操作盤に関連する第２画像データを前記カメラから受信し、そして前記第１操作部の設定が前記第２画像データに基づいて変更されているかどうかを判断するようになる。好適には、前記プロセッサは更に、前記第１操作部の前記変更後の設定が、前記第１操作部の前記所望の設定に対応しているかどうかを、前記第２画像データに基づいて、かつ前記操作設定データに基づいて更に判断する。好適には、前記プロセッサは更に、前記第２画像データに基づいて生成される１つ以上の更に別の画像を前記ディスプレイ上に提示し、そして前記第１操作部の前記設定が、前記所望の設定に対応していると判断すると、前記プロセッサは、第２操作部の第２位置を前記第２画像データに基づいて、かつ前記操作設定データに基づいて判断する。好適には、前記非一時的なコンピュータ可読記憶媒体は更に、命令群を含み、前記命令群が前記プロセッサによって実行されると、前記命令群によって前記プロセッサは、前記第２操作部の前記第２位置の表示を前記ディスプレイ上で行ない、そして前記第２操作部の所望の設定の表示を前記ディスプレイ上で行なうようになり、前記所望の設定は、前記操作設定データに基づいて決定される。好適には、前記第２位置は、前記第１操作部の前記位置を基準として特定される。
【図面の簡単な説明】
【０００９】
【図１】図１は、操作盤を特定し、そして設定するシステムの例示的な実施形態のブロック図である。
【図２】図２は、操作盤を特定し、そして設定するシステムの別の例示的な実施形態のブロック図である。
【図３】図３は、操作盤を特定し、そして設定するシステムの別の例示的な実施形態のブロック図である。
【図４Ａ】図４Ａは、操作盤を特定し、そして設定するシステムの別の例示的な実施形態の図である。
【図４Ｂ】図４Ｂは、操作盤を特定し、そして設定するシステムの別の例示的な実施形態の図である。
【図５Ａ】図５Ａは、操作盤を特定し、そして設定するシステムの別の例示的な実施形態の図である。
【図５Ｂ】図５Ｂは、操作盤を特定し、そして設定するシステムの別の例示的な実施形態の図である。
【図６Ａ】図６Ａは、操作盤を特定し、そして設定するシステムの別の例示的な実施形態の図である。
【図６Ｂ】図６Ｂは、操作盤を特定し、そして設定するシステムの別の例示的な実施形態の図である。
【図７】図７は、操作盤を特定し、そして設定するシステムの別の例示的な実施形態の図である。
【図８】図８は、操作盤を特定し、そして設定する方法の特定の実施形態のフローチャートである。
【図９】図９は、特定の実施形態による図８の操作盤を特定し、そして設定する方法の更に別の部分を示すフローチャートである。
【図１０】図１０は、図１〜９に関連して開示される種々の方法、システム、及びコンピュータ可読媒体を支援するように動作することができるコンピュータシステムの例示的な実施形態のブロック図である。
【発明を実施するための形態】
【００１０】
図１を参照するに、操作盤を特定し、そして設定するシステム１００の特定の実施形態が開示されている。システム１００は、機器１０２と、そして操作盤（例えば、操作盤１０８Ａ，１０８Ｂ）と、を含む。機器１０２は、ディスプレイ１０４及びカメラ１０６を含む。特定の実施形態では、ディスプレイ１０４はタッチスクリーンディスプレイとすることができる。ディスプレイ１０４は、カメラ１０６から受信する画像データに基づいて生成される１つ以上の画像を表示するように構成される。機器１０２は更に、スタイラスペン、マウス、キーボードなどを含む入力／出力デバイス（図示せず）を含むことができる。機器１０２は、無線通信機能を含むことができ、この無線通信機能によって、機器１０２は、別の機器（図示せず）と無線通信リンクを介して、１つ以上の無線通信プロトコル（例えば、ＩＥＥＥ８０２．１１Ｘプロトコル、Ｂｌｕｅｔｏｏｔｈプロトコルなど）を使用して通信することができる。機器１０２は、持ち運び可能な計算装置（例えば、ラップトップコンピュータ）、タブレット、スマートフォン、電子飛行バッグ、または別の計算装置とすることができる。特定の実施形態では、カメラ１０６は機器１０２に搭載されるか、またはその他には、機器１０２に一体化される。別の特定の実施形態では、１つ以上のカメラ（図示せず）は、機器１０２の外部（例えば、航空機の操縦室の内部）に配置される。別の特定の実施形態では、カメラ１０６はヘッドセット、帽子のひさし、眼鏡などに搭載することができる。機器１０２は、画像データをカメラ１０６から受信することができ、そして１つ以上の画像をディスプレイ１０４上に提示することができる。
【００１１】
操作盤は、複数の操作部１１０〜１５８を含むことができる。複数の操作部は、スイッチ、サーキットブレーカ、ノブ、スライド操作部、計器、ディスプレイ、レバー、インジケータ、及び他の操作部を含むことができる。図１に示すように、操作盤は、第１操作盤部分（例えば、操作盤１０８Ａ）及び第２操作盤部分（例えば、操作盤１０８Ｂ）を含むことができる。複数の操作部１１０〜１５８のうちの第１集合の操作部（例えば、操作部１１０〜１４２）は、操作盤の第１操作盤部分（例えば、操作盤１０８Ａ）に配置することができ、そして複数の操作部１１０〜１５８のうちの第２集合の操作部（例えば、操作部１４４〜１５８）は、操作盤の第２操作盤部分（例えば、操作盤１０８Ｂ）に配置することができる。別の実施形態では、操作盤は、操作盤部分を１個だけ（例えば、操作盤１０８Ａのみを）含むことができ、そして複数の操作部１１０〜１５８は、操作盤の１個だけの操作盤部分に配置することができる。
【００１２】
図１に示すように、複数の操作部は、推力レバー群１１０、ディスプレイ１１６〜１２０，１２８，１３０，１３６，１４０，１４２，１４６、計器１３２及び１５４〜１５８、ノブ操作部１３４、スイッチ１４８〜１５２、スイッチボックス１１２，１４４、スライド操作部１２４、及び／又はインジケータ１２２，１２６，及び１３８を含むことができる。スイッチボックス１１２は、複数のスイッチ（例えば、スイッチ１１４）を含むことができる。スイッチボックス１４４は、複数のスイッチを含むことができる。
【００１３】
機器１０２は、１つ以上の操作盤（例えば、操作盤１０８Ａ，１０８Ｂ）に関連する操作設定データを格納することができる。機器１０２は、操作設定データをネットワークから、操作盤のデータ記憶装置から、外部装置（例えば、ユニバーサルシリアルバス（ＵＳＢ）ドライブ）から、または別の計算装置から受信することができる。操作設定データは、電子チェックリストに関連付けることができる。電子チェックリストは、操作盤を設定して特定の操作を行なう１つ以上の作業を含むことができる（例えば、飛行前チェックリスト、航空機着陸手順チェックリスト、別の状態が検出されたときに完了させる必要がある作業に関連するチェックリストなど）。特定の実施形態では、操作設定データは操作データを含むことができ、この操作データにより、操作盤の１つ以上の操作部の配置を特定することができる。操作設定データは、操作盤の１つ以上の操作部の各操作部に関連する方向データを含むことができ、そして当該方向データは、第１操作部から第２操作部に向かう方向を表わすことができる。
【００１４】
例えば、操作設定データは、第１操作部（例えば、計器１３２）に関連する方向データを含むことができる。第１操作部に関連する方向データは、第１操作部が第２操作部（例えば、ディスプレイ１３６）の左側に、かつ第３操作部（例えば、ディスプレイ１３０）の右側に位置していることを表わすことができる。第１操作部に関連する方向データは更に、第１操作部が、第４操作部（例えば、ディスプレイ１２０）の上方に位置していることを表わすことができる。特定の電子チェックリストは、第１操作部の表示数値の設定、またはその他には、第１操作部の表示数値の検証に関連する手順を含むことができる。機器１０２は、第１操作部の位置を、第１操作部に関連する方向データに少なくとも部分的に基づいて判断することができる。例えば、機器１０２は、画像データをカメラ１０６から受信することができる。機器１０２は、第１操作部（例えば、計器１３２）を、操作盤の１つ以上の操作部の配置を特定する操作データ、電子チェックリストデータ、またはこれらのデータの任意の組み合わせに基づいて特定することができる。機器１０２は、１つ以上の基準操作部を、操作データ及び画像データに基づいて特定することができる。１つ以上の基準操作部は、カメラ１０６の視野内の１つ以上の操作部に対応させることができる。機器１０２は、１つ以上の基準操作部に対する第１操作部の位置を、第１操作部に関連する方向データに基づいて、１つ以上の基準操作部に関連する方向データに基づいて、またはこれらの方向データの任意の組み合わせに基づいて判断することができる。
【００１５】
例えば、機器１０２は、第１基準操作部（例えば、ディスプレイ１２０）がカメラ１０６の視野内に収まっていると判断することができる。機器１０２は、第１操作部（例えば、計器１３２）が第１基準操作部の上方に位置していると、第１操作部に関連する方向データに基づいて判断することができる。第１操作部が基準操作部の上方に位置していると判断すると、機器１０２は、１つ以上の重ね合わせ図形をディスプレイ１０４上に提示することができる。１つ以上の重ね合わせ図形は、第１操作部がカメラ１０６の視野内に収まるようにカメラ１０６をパンする方向を表わすことができる。従って、任意の特定の操作部の場合、機器１０２は、別の特定の操作部の位置を、方向データに基づいて判断することができる。機器１０２は、電子チェックリストに含まれる１つ以上の作業をディスプレイ１０４上に提示するように構成することができる。機器１０２は、カメラ１０６から受信する画像データを使用して、機器１０２のユーザを、電子チェックリストに関連する設定作業群のうちの１つ以上の設定作業を通して誘導する。
【００１６】
例えば、機器１０２は、画像データをカメラ１０６から受信することができる。当該画像データは、カメラ１０６の視野内に収まる操作盤の少なくとも一部（例えば、操作盤１０８Ａ，１０８Ｂ）に関連付けることができる。機器１０２は、図２〜７を参照して説明されるように、画像データ、または画像データを表わす１つ以上の写真をディスプレイ１０４上に提示することができる。機器１０２は、操作盤の第１操作部を、操作設定データに基づいて特定することができ、そして第１操作部の位置を、カメラ１０６から受信する画像データに基づいて判断することができる。機器１０２は、第１操作部の位置の表示をディスプレイ１０４上に提示することができる。第１操作部の位置がカメラ１０６の現在の視野内に収まっている場合、機器１０２は、第１操作部の位置を、１つ以上の記号（例えば、ボックス）を画像データに、またはディスプレイ１０４上に提示される画像データの一部に重ねることにより表示することができる。
【００１７】
第１操作部の位置がカメラ１０６の現在の視野内に収まらない場合、機器１０２は、現在の視野から第１操作部の位置に向かう方向を、操作設定データに基づいて決定することができる。特定の実施形態では、機器１０２は、現在の視野から第１操作部の位置に向かう方向を、操作設定データ、及び機器１０２の１つ以上のセンサ（例えば、１つ以上の慣性センサ、１つ以上の方位センサなど）を介して供給されるデータに基づいて決定することができる。機器１０２は、現在の視野から第１操作部の位置に向かう方向を、１つ以上の記号（例えば、矢印）をディスプレイ１０４上に提示される画像データに重ねることにより表示することができる。ユーザは機器１０２を、カメラ１０６の視野が、表示されている方向に移動するように移動させることができる。機器１０２を移動させると、カメラ１０６は、ディスプレイ１０４上に提示される更に別の画像データを受信する。
【００１８】
特定の実施形態では、機器１０２は、機器１０２を移動させるときに、操作盤に対する機器１０２及び／又はカメラ１０６の現在の方位を、更に別の画像データに基づいて、操作設定データに基づいて、１つ以上のセンサ（例えば、１つ以上の慣性センサ、１つ以上の方位センサなど）に基づいて、またはこれらのデータ及びセンサの組み合わせに基づいて判断することができる。特定の実施形態では、操作盤に対する機器１０２及び／又はカメラ１０６の方位の判断では、画像データを更に別の画像データと比較することができる。例えば、機器１０２は、特定の操作部の第１位置を、画像データの少なくとも一部に基づいて特定することができ、そして特定の操作部の第２位置を、更に別の画像データの少なくとも一部分に特定することができる。機器１０２は、操作設定データを使用して、機器１０２及び／又はカメラ１０６の現在の方位を、第１位置及び第２位置を比較することにより判断することができる。機器１０２は、現在の視野から第１操作部の位置に向かう方向を、機器１０２及び／又はカメラ１０６の現在の方位に基づいて更新することができる。
【００１９】
特定の実施形態では、カメラ１０６の方位（例えば、カメラ１０６の視野の方位）は、機器１０２の方位に関連付けることができる。例えば、機器１０２を第１位置から、第１位置の左側の第２位置に移動させる場合、カメラ１０６の視野は、左側に移動することができる。従って、機器１０２が第１位置に位置しているときのカメラ１０６の視野内に収まる被写体（例えば、操作盤の操作部）は、機器１０２が第２位置に位置しているときのカメラ１０６の視野の右側に、かつ当該視野の外側に位置させることができる。別の構成として、機器１０２が第１位置に位置しているときのカメラ１０６の視野内に収まる当該被写体は、機器１０２を第２位置に移動させるときに、カメラ１０６の視野内に収めることができ、かつ当該視野の少し右寄りの位置に配置することができる。
【００２０】
別の特定の実施形態では、カメラ１０６の方位（例えば、カメラ１０６の視野の方位）は、機器１０２の方位と直接には対応しないようにしてもよい。例えば、機器１０２を第１位置から第２位置に移動させるときに、機器１０２を右に回転させる場合、カメラ１０６の視野は、機器１０２が第１位置に位置していたときのカメラ１０６の視野に対応させることができる。従って、カメラ１０６の視野は、機器１０２を移動させる場合に殆ど変化しないようにすることができる。特定の実施形態では、カメラ１０６の視野は、被写体（例えば、操作盤の操作部）に対するカメラ１０６の透視投影の変化により、機器１０２の回転方向に拡大することができる。例えば、機器１０２が第１位置に位置している場合、被写体（例えば、操作盤の操作部）は、カメラ１０６の視野の最も左側の辺に沿って位置させることができる。機器１０２を第１位置から第２位置に移動させるときに機器１０２を右に回転させる場合、被写体は、カメラ１０６の視野の最も左側の辺に沿って位置した状態で留まることができ、かつ機器１０２が第１位置に位置していたときの視野の最も右側の辺の右に位置していた１つ以上の他の被写体（例えば、操作盤の１つ以上の他の操作部、または操作盤の複数の構成部分）は、機器１０２が第２位置に位置しているときのカメラ１０６の視野内に含めることができる。
【００２１】
別の特定の実施形態では、操作盤に対する機器１０２及び／又はカメラ１０６の方位を判断する際、機器１０２を移動させるときに、１つ以上のセンサから受信するセンサデータの変化を監視し、そしてカメラ１０６の位置を、当該センサデータに基づいて計算することができる。当該センサデータは、機器１０２を水平方向に移動させた（例えば、左から右に移動させた）こと、垂直方向に移動させた（例えば、上方または下方に移動させた）こと、水平方向に回転させた（例えば、左に、または右に回転またはチルトさせた）こと、垂直方向に回転させた（例えば、上方または下方に回転またはチルトさせた）こと、またはこれらの操作の組み合わせを表わすことができる。例えば、機器１０２は、機器１０２及び／又はカメラ１０６の方位（画像データを受信したときの機器１０２の方位）が第１位置に設定されることを表わす第１センサデータを受信することができる。機器１０２を（例えば、ディスプレイ１０４上に表示される第１操作部の方向に）移動させるときに、機器１０２は、更に別のセンサデータを受信することができる。更に別のセンサデータは、機器１０２及び／又はカメラ１０６の方位が、第２位置（例えば、機器１０２及び／又はカメラ１０６を左に移動させたときの位置、右に移動させたときの位置、上方に移動させたときの位置、下方に移動させたときの位置、左に回転させたときの位置、右に回転させたときの位置、下方に回転させたときの位置、またはこれらの操作を組み合わせて行なったときの位置）に設定されることを表わすことができる。機器１０２は、機器１０２の現在の方位、及び／又はカメラ１０６の方位を、更に別のセンサデータに基づいて計算することができる。
【００２２】
更に別の画像データをカメラ１０６で受信するときに、機器１０２は、第１操作部がカメラ１０６の視野内に位置しているかどうかを判断することができる。機器１０２が、第１操作部がカメラ１０６の視野内に位置していると判断する場合、機器１０２は、第１操作部の位置を、１つ以上の記号（例えば、ボックス）を画像データに、または画像データの一部にディスプレイ１０４上で重ねることにより表示することができる。機器１０２を移動させるときに、現在の視野から第１操作部に向かう方向をディスプレイ１０４上で更新することができる。特定の実施形態では、機器１０２は、ディスプレイ１０４上に、カメラ１０６と第１操作部との間の視線が遮られる（例えば、カメラ１０６と操作盤との間の物体または人間によって）場合でも、カメラ１０６の視野を第１操作部に向けることができることを表示することができる。機器１０２は、第１操作部がカメラ１０６の視野内に収まっていると、１つ以上のセンサから受信するセンサデータに基づいて判断することができる。従って、機器１０２が、第１操作部がカメラ１０６の視野内に収まっているかどうかを、更に別の画像に基づいて判断することができない（すなわち、カメラ１０６の視野が遮られているので）場合でも、機器１０２は、現在の視野から第１操作部に向かう方向をディスプレイ１０４上で、センサデータに基づいて更新することができる。更に、１つ以上の記号をディスプレイ１０４上に提示して、遮られているにも拘わらず、カメラ１０６の視野が第１操作部に向くようにしている（すなわち、第１操作部をカメラ１０６の現在の視野内に位置させる）ことを表示することができる。
【００２３】
現在の視野から第１操作部に向かう方向を表示する他に、１つ以上の記号は、カメラ１０６の現在の視野を基準とする第１操作部の距離を表示することができる。例えば、長い方の矢印は、第１操作部が、現在の視野から第１距離にあることを表わすことができ、そして視野が、第１操作部により近くなるように移動するときに、当該矢印をより短くすることができる。第１操作部が、機器１０２の現在の視野内に収まっている（すなわち、第１操作部が、カメラ１０６の現在の視野内に位置している）と判断される場合、機器１０２は、第１操作部の位置を、１つ以上の記号（例えば、ボックス）を画像データ（または、画像データを表わす１つ以上の画像）に重ねる、またはディスプレイ１０４上に提示される画像データの一部に重ねることにより表示することができる。
【００２４】
機器１０２は更に、図３〜７を参照して説明されるように、電子チェックリストの少なくとも１つの作業をディスプレイ１０４上に提示するように構成することができる。特定の実施形態では、少なくとも１つの作業は、１つ以上の重ね合わせ図形としてディスプレイ１０４上に提示される。特定の実施形態では、重ね合わせ図形（群）の位置は、設定対象の操作部の位置によって異ならせることができる。例えば、設定対象の操作部が、ディスプレイ１０４の上部に位置している場合、少なくとも１つの作業を実行すべきであることを表わす重ね合わせ図形（群）は、ディスプレイ上の設定対象の操作部の下方に提示することができる。設定対象の操作部が、ディスプレイ１０４の下部に位置している場合、少なくとも１つの作業を実行すべきであることを表わす重ね合わせ図形（群）は、ディスプレイ上の設定対象の操作部の上方に提示することができる。設定対象の操作部が、ディスプレイ１０４の左側に位置している場合、少なくとも１つの作業を実行すべきであることを表わす重ね合わせ図形（群）は、ディスプレイ上の設定対象の操作部の右に提示することができる。設定対象の操作部が、ディスプレイ１０４の右側に位置している場合、少なくとも１つの作業を実行すべきであることを表わす重ね合わせ図形（群）は、ディスプレイ上の設定対象の操作部の左に提示することができる。別の実施形態では、重ね合わせ図形（群）は、設定対象の操作部に部分的に重ねてもよい。特定の実施形態では、電子チェックリストの少なくとも１つの作業を提示するために使用される重ね合わせ図形（群）は、半透明のテキストボックス（図示せず）として提示することができる。少なくとも１つの作業は、第１操作部に関して完了させる必要がある設定操作に関連付けることができる。例えば、少なくとも１つの作業は、第１操作部が、第１設定に従って設定される必要があることを表わすことができる。例えば、特定の操作部（例えば、ノブ操作部１３４）は、複数の設定のうちの第１設定に、特定の操作部を図５〜７を参照して説明されるように、特定の位置に回転させることにより設定することができる。他の操作部は、当該操作部を特定の方向に移動させることにより（例えば、スライダ操作部を左／右または上／下に摺動させる、スイッチ操作部を第１設定（ＯＮ）と第２設定（ＯＦＦ）との間で切り替えることなどにより）設定することができる。機器１０２は、第１操作部の現在の設定を画像データに基づいて特定することができる。機器１０２は、現在の設定が第１設定に対応しているかどうかを、画像データに基づいて、または続いて受信する画像データ（すなわち、ユーザが第１操作部の設定を変更した後に受信する画像データ）に基づいて判断することができる。
【００２５】
特定の実施形態では、機器１０２が、第１操作部が第１設定に従って設定されていると判断する場合、機器１０２は、アイコン（図示せず）をディスプレイ１０４上に提示することができる。アイコンの選択は、機器１０２のユーザが、第１操作部の設定を検証したことを表わすことができる。アイコンの選択が行なわれると、機器１０２は、別の操作部を設定する必要があるかどうかを判断することができる。別の実施形態では、ユーザ検証ステップは省略してもよい。例えば、機器１０２が、第１操作部が、第１設定に従って設定されていると判断する場合、機器１０２は、操作盤の第２操作部の位置または方向の表示、及び電子チェックリストの次の作業をディスプレイ１０４上に自動的に提示することができる。
【００２６】
機器１０２が、第１操作部が、第１設定に従って設定されていないと判断する場合、機器１０２は、図５〜７を参照して説明されるように、第１操作部の第１設定を表わす情報のような別の情報をディスプレイ１０４上に提示することができる。第１操作部の第１設定を表わす情報は、ディスプレイ１０４上に、１つ以上の記号または重ね合わせ図形として提示することができる。機器１０２のユーザは、第１操作部の設定を、ディスプレイ１０４上に提示される１つ以上の画像、及び１つ以上の記号に基づいて変更することができる。ユーザは、入力を機器１０２に対して行なって（例えば、ディスプレイ１０４上に表示されるアイコンを選択することにより）、第１操作部が変更されていること、そして／または第１設定に従って設定されていることを表示することができる。
【００２７】
第１操作部の変更後の設定が第１設定に対応しない場合、機器１０２は、第１操作部が第１設定に従って設定されていないという表示（例えば、警告メッセージまたは他のインジケータ）を提示することができる。次に、ユーザは、第１操作部を設定し直すことができ、そして第２入力を行なって、第１操作部の設定が変更されていることを表示することができる。このプロセスは、機器１０２が、第１操作部が第１設定に従って設定されると判断するまで継続することができる。別の特定の実施形態では、機器は、第１操作部が第１設定に従って設定されていると判断すると、電子チェックリストの次の作業を自動的に提示することができる。
【００２８】
特定の実施形態では、複数の機器をネットワーク接続する（図示せず）ことができ、そして操作盤を設定するために使用することができる。例えば、機器１０２のような第１機器を使用して、操作盤の第１部分を設定し、そして第２機器（例えば、機器１０２と同様の機器）を使用して、操作盤の第２部分を設定することができる。第１機器及び第２機器は、電子チェックリストの作業群を、特定の操作部の設定に従って、これらの機器の位置に従って、設定作業群の依存関係に従って、またはこれらの任意の組み合わせに従って分担することができる。例えば、第１機器は、操作盤の第１の側（例えば、操縦士側）に配置することができ、そして第２機器は、操作盤の第２の側（例えば、副操縦士側）に配置することができる。第１機器は、第１ユーザ（例えば、操縦士）を、操作盤の第１の側に配置される操作部の設定に関連する設定手順を通して誘導することができ、そして第２機器は、第２ユーザ（例えば、副操縦士）を、操作盤の第２の側に配置される操作部の設定に関連する設定手順を通して誘導することができる。操作盤の中央に配置される設定対象操作部は、これらの機器のうちの一方の機器に割り当てることができる、または操作盤の中央に配置されるこれらの操作部の第１部分は、第１機器に割り当てることができ、そして操作盤の中央に配置されるこれらの操作部の第２部分は、第２機器に割り当てることができる。これらの機器は互いに、電子チェックリストを実行しているときに、無線通信リンク（例えば、Ｂｌｕｅｔｏｏｔｈ（ブルートゥース）リンクまたは８０２．１１Ｘリンク）を介して通信することができる。
【００２９】
別の特定の実施形態では、機器（群）はフィードバック情報を操作盤及び他のシステムに供給して操作盤の設定状態を、電子チェックリストを実行することにより表示するができる。例えば、操作盤は、機器（群）と有線リンクまたは無線リンクを介して通信するように設定することができる。特定の実施形態では、操作盤は、フィードバック情報（すなわち、操作盤の設定状態）を格納する、そして／または再送することができる。例えば、電子チェックリストが航空機の飛行中に実行される場合、操作盤は、コンピュータ装置を含むことにより、またはコンピュータ装置に接続することにより、サーバ（例えば、航空機を運行する航空会社の空港ターミナルに設置される）と次の通信を行なうためのフィードバック情報を格納することができる。航空機が着陸すると、操作盤は、１つ以上の無線ネットワークとの接続を行なうことができ、そしてフィードバック情報を航空会社のサーバに送信することができる。別の構成として、またはフィードバック情報をサーバに送信する他に、フィードバック情報は、操作盤から（例えば、操作盤コンピュータから）、有線リンクまたは無線リンクを使用して取り出すことができる。例えば、航空機が着陸した後、航空機の保守整備に携わる作業員は、フィードバック情報を取り出すことができ、そして操作盤、または操作盤により制御される１つ以上のシステムの操作状態を判断することができる。
【００３０】
カメラ１０６で受信する画像データを使用することにより、機器１０２は、操作盤上の各操作部の位置及び設定を、操作設定データ（例えば、電子チェックリストに関連する設定）に従って表示することができる。従って、機器１０２は、これらの操作部が、操作設定データに従って（例えば、電子チェックリストに準拠して）、カメラ１０６から受信する画像データに基づいて正しく設定されていることを検証することができる。機器１０２は、視覚的な支援を、操作盤を設定するユーザに対して行ない、そして更に、操作盤の設定の検証を行なって、設定手順を飛ばしてしまう可能性、及び操作部を不正に設定してしまう可能性を低くすることができる。複数の機器１０２を使用する場合、操作盤を設定するために要する時間長さを短くすることにより、操作盤設定効率を高めることができる。
【００３１】
図２を参照するに、操作盤を特定し、そして設定するシステム１００の例示的な実施形態が開示されている。図１の構成要素群に対応する図２の構成要素群は、同じ参照番号で指示されており、そして図２の構成要素群が図１を参照して説明した通りに動作することができることを理解されたい。更に、図１の構成要素群の更に別の動作上の特徴は、以下に説明される。
【００３２】
図２では、機器１０２及び操作盤（例えば、操作盤１０８Ａ，１０８Ｂ）が図示されている。図２に示すように、カメラ１０６は視野２０２を有する。操作盤１０８Ａの一部が視野２０２内に収まっている。操作盤１０８Ａの一部は、推力レバー群１１０、スイッチボックス１１２の一部、スイッチ群１１４の一部、及びディスプレイ１１８の一部を含む。図２に示すように、操作盤１０８Ａのうち、カメラ１０６の視野２０２内に収まる部分は、機器１０２のディスプレイ１０４上に提示される。機器１０２が画像データを受信しており、かつ画像データをディスプレイ１０４上に提示している状態では、ユーザは、図３〜７を参照して説明されるように、操作盤１０８Ａ及び／又は１０８Ｂの設定に関連する電子チェックリストの提示を開始することができる。
【００３３】
特定の実施形態では、機器１０２は、メニュー（図示せず）を提示することができ、このメニューの中から、ユーザは、電子チェックリストを提示する前に、設定対象の特定の操作盤を表示することができる。例えば、機器１０２は、複数の操作盤（例えば、複数の航空機操縦室操作盤）に関する操作設定データを格納することができ、そして複数の操作盤の各操作盤は、１つ以上の電子チェックリスト（例えば、飛行前チェックリスト、着陸手順チェックリスト、別のチェックリストなど）に関連付けることができる。ユーザは、所望の電子チェックリストを、特定の設定可能な設備（例えば、航空機、工場機械、船舶など）及び電子チェックリストをメニューの中から特定することにより表示することができる。例えば、ユーザは、入力を行なって、設定対象の特定の設定可能な設備が航空機であることを選択するか、またはその他には、表示することができる。特定の実施形態では、ユーザは更に入力を行なって、航空機が第１機種の航空機であることを表示し、そしてユーザが、航空機の特定の操作盤を、第１電子チェックリスト（例えば、飛行前チェックリスト）に従って設定したいと考えていることを表示することができる。
【００３４】
別の実施形態では、機器１０２は、特定の種類のチェックリスト及び操作盤を、操作盤と通信することにより自動的に決定することができる。例えば、機器１０２は操作盤と、無線通信リンク（例えば、Ｂｌｕｅｔｏｏｔｈリンクまたは８０２．１１Ｘリンク）（図示せず）を介して通信することができる。別の実施形態では、機器１０２は、特定の種類のチェックリスト及び操作盤を、バーコードに埋め込まれた情報に基づいて特定するように構成することができる。例えば、バーコードタグを操作盤に配置することができる、または操作盤に近い位置に配置することができ、そして機器１０２はバーコードを、カメラ１０６から受信するバーコード画像データを使用して分析することができる。更に別の実施形態では、機器１０２（または、機器１０２に接続される別の機器）は、特定の種類のチェックリスト及び操作盤を、操作盤に取り付けられる、または設定可能な設備（例えば、航空機）の別の位置に取り付けられる無線周波数識別（ＲＦＩＤ）タグ（図示せず）から受信する情報に基づいて特定するように構成することができる。
【００３５】
特定の実施形態では、操作盤は、設定対象の特定の操作盤を特定する情報を機器１０２に、無線通信リンクを介して送信することができる。機器１０２は、特定の操作盤に関連する１つ以上のチェックリストを、無線通信リンクを介してダウンロードすることができる。機器１０２は、適切なチェックリスト（例えば、飛行前チェックリスト）を、操作盤から無線通信リンクを介し受信する、または操作盤の外部のソースから受信する情報に基づいて決定することができる。別の実施形態では、機器１０２は、設定対象の特定の設定可能な設備を特定することができ、そして特定の設定可能な設備の設定に関連する適切なチェックリストに、通信リンクを介してアクセスすることができる。通信リンクは、電気通信リンク、光通信リンク、無線周波数通信リンク、またはこれらの通信リンクの組み合わせのうちの１つの通信リンクとすることができる。通信リンクは、機器１０２と特定の設定可能な設備との間で確立させることができる、または機器１０２と、設定可能な設備から遠く離れた位置の設定システム（例えば、オペレーションセンター、現場、空港、工場、航空会社オペレーションセンターなど）との間で確立させることができる。
【００３６】
特定の状態（例えば、乱気流）を検出すると、操作盤は、情報を機器１０２に送信して、操作盤の１つ以上の操作部を設定する必要があることを表示することができる。特定の実施形態では、当該情報から特定の状態を特定することができ、そして機器１０２は、設定対象の１つ以上の操作部を、機器１０２に格納されている情報に基づいて決定することができる。設定対象の１つ以上の操作部を決定する際、特定の電子チェックリストを、機器１０２に格納されている複数の電子チェックリストの中から選択することができる。選択された特定のチェックリストは、特定の状態を特定する情報に基づいて特定することができる。別の特定の実施形態では、機器１０２は、電子チェックリストを操作盤から、特定の状態を特定する情報とともに受信することができる。機器１０２は、図３〜７を参照して説明されるように、電子チェックリストをユーザにディスプレイ１０４を介して提示することができる。
【００３７】
別の実施形態では、機器１０２は、操作設定データ及び１つ以上の電子チェックリストをサーバ（図示せず）からネットワーク（図示せず）を介してダウンロードすることができる。例えば、航空機が離陸を開始する前に、機器１０２のユーザは、サーバに有線または無線ネットワークを介してアクセスすることができ、そして航空機に関連する操作設定データ及び１つ以上のチェックリスト（例えば、離陸チェックリスト、着陸チェックリストなど）をダウンロードすることができる。当該サーバは、航空機を運行する航空会社、または航空機を製造した製造業者に接続することができる。当該サーバは、電子チェックリストを機器１０２に送信する前に、認証データを機器１０２に対して要求することができる。当該認証データは、ユーザ名、及びパスワード、指紋スキャンデータ、虹彩スキャンデータ、発声データ、全顔スキャンデータ、識別バッジのスキャンデータまたはスワイプデータ、ＲＦＩＤタグから受信する情報（識別バッジに埋め込まれた情報）、公開／秘密鍵認証データ、授受される認証証明書データ、またはこれらの任意の組み合わせを含むことができる。認証データが正しいことを確認すると、サーバは、操作設定データ及び１つ以上のチェックリストを機器１０２に、ネットワークを介して送信することができる、またはサーバは、鍵を送信して、機器１０２に格納されているデータまたはアプリケーションをロック解除することができる。特定の実施形態では、操作設定データ及び／又はチェックリスト（群）は、アンセキュアなネットワーク接続を介して送信してもよい。別の構成として、または更に、操作設定データ及び／又はチェックリスト（群）は、セキュアなネットワーク接続、または暗号化ネットワーク接続を介して送信することができる。
【００３８】
特定の実施形態では、機器１０２は、電子チェックリストの実行に関連する情報をサーバに送信することができる。例えば、当該情報は、チェックリストが無事に完了したこと、チェックリストが完了しなかったこと、エラーが電子チェックリストの実行中に生じたことなどを表わすことができる。当該サーバは、この情報を格納して次の分析を行なうことができる。電子チェックリストまたは操作盤デザインは、当該分析に基づいて変更することができる。１つの実施形態では、電子チェックリストの作業が完了したと判断すると、機器１０２は、操作盤の結果的な設定を表わす情報をサーバに送信することができる。例えば、機器１０２のユーザは、航空機の操作盤を飛行前チェックリストに従って設定することができる。離陸前、機器１０２は、電子チェックリストの作業に関連する操作部が、電子チェックリストに従って設定されていると判断することができ、そして確認メッセージをサーバにネットワークを介して送信することができる。確認メッセージは、これらの操作部が、飛行前チェックリストに従って設定されていることを表わすことができる。別の実施形態では、機器１０２は、サーバに対する次の送信に関する情報を格納することができる。例えば、機器１０２のユーザは、航空機の操作盤を、着陸手順チェックリストに従って設定することができる。離陸手順が完了し、そして航空機が、当該航空機の目的地（例えば、ターミナルまたは駐機場）に到着した後、機器１０２は、ネットワークとの接続を行なって、確認メッセージをサーバに送信することができる。特定の実施形態では、当該サーバは、航空機を運行する航空会社に接続される。別の特定の実施形態では、当該サーバは、航空機を運行するためのガイドラインを作成する責任を負う規制機関に接続される。
【００３９】
特定の実施形態では、機器１０２は、無効化指示をユーザから受信して、電子チェックリストの特定の設定作業に関連する設定を飛ばすか、またはその他には、変更することができる。電子チェックリストのこれらの作業が完了したか、または無効化されたかのいずれかであると判断すると、機器１０２は、各作業の結果（完了した、または無効化された）を表わす情報（例えば、確認メッセージ）をサーバに送信することができる。
【００４０】
このようにして、機器１０２は、設定対象の操作盤の１つ以上の操作部を、操作盤に関連する操作設定データに従って決定することができる。機器１０２は、ユーザが、特定の電子チェックリストを、操作盤の１つ以上の操作部を設定するときに選択することができるようにすることができる。更に、機器１０２は、操作盤に関連する複数の電子チェックリストを自動的にダウンロードし、そして格納することができ、そして操作盤と通信して、完了させる必要のある特定の電子チェックリストを特定し、そして選択することができる。
【００４１】
図３を参照するに、操作盤を特定し、そして設定するシステム１００の例示的な実施形態が開示されている。図１及び図２の構成要素群に対応する図３の構成要素群は、同じ参照番号で指示されており、そして図３の構成要素群は、図１及び図２を参照して説明した通りに動作することができることを理解されたい。更に、図１及び図２の構成要素群の更に別の動作上の特徴が以下に説明される。
【００４２】
図３に示すように、機器１０２は、操作盤１０８Ａの一部に関連する画像データをカメラ１０６から受信することができ、そして当該画像データをディスプレイ１０４上に提示することができる。機器１０２は、第１設定手順（例えば、手順３０２）に関する情報をディスプレイ１０４上に、画像データの上部の重ね合わせ図形として提示することができる。特定の実施形態では、第１設定手順は、校正手順とすることができる。校正手順の間、機器１０２は、校正データを、操作盤の１つ以上の校正機能部に対するカメラ１０６の位置に基づいて決定する。例えば、第１設定手順は、カメラ１０６を推力レバー群１１０の方に、これらの推力レバー１１０が視野２０２内に収まるまで誘導する必要があることを表わすことができる。これらの推力レバー１１０が視野２０２内に収まると、機器１０２は、１つ以上の記号（例えば、ボックス３０４）を使用して、これらの推力レバー１１０をディスプレイ１０４上で強調することができる。
【００４３】
特定の実施形態では、校正データを決定する際、機器１０２及び／又はカメラ１０６の方位を、１つ以上のセンサ（例えば、慣性センサ及び方位センサ）から受信するセンサデータに基づいて決定することができる。１つ以上のセンサは、機器１０２の内部の１つ以上のセンサ、機器１０２の外部の１つ以上のセンサ（例えば、カメラ１０６が機器１０２の外部に位置している場合）を含むことができる、または内部センサ及び外部センサの組み合わせを使用することができる。特定の実施形態では、機器１０２の方位は、カメラ１０６から受信する画像データに基づいて検出される校正機能部に基づいて決定されるセンサデータ及びセンサ情報に基づいて決定することができる。特定の実施形態では、動作中（例えば、チェックリストを実行しているときに）、機器１０２は、少なくとも１つの校正機能部が、カメラ１０６から受信する画像データに基づいて検出されているかどうかを判断することができ、そして１つ以上のセンサを、少なくとも校正機能部が、受信する画像データに基づいて検出されると、自動的に再校正することができる。
【００４４】
当該校正機能部が視野２０２内に収まると、機器１０２は、当該校正機能部に対する１つ以上の操作部の位置を判断することができる。１つ以上の操作部は、設定対象の操作部群に、操作設定データ（例えば、選択される電子チェックリスト）に基づいて関連付けることができる。特定の実施形態では、特定の操作盤に関する校正手順は、機器１０２の各使用中に実行される。別の構成として、校正手順は、機器１０２の最初の使用前に実行して、特定の操作盤を設定してもよく、そして校正手順は、機器１０２の次の使用前には、特定の操作盤を設定するために実行することはしない。例えば、ユーザが機器１０２を操作盤の設定中に、飛行前チェックリストに従って校正する場合、機器１０２は、操作盤を着陸手順チェックリストに従って設定するときに、再度校正される必要はない。
【００４５】
特定の実施形態では、操作設定データは、所定の順序に従って並べられ、そして機器１０２は、これらの電子チェックリスト手順を所定の順序で提示する。別の特定の実施形態では、機器１０２は、設定対象の操作盤の操作部群を、操作設定データに基づいて特定することができ、そして更に、これらの電子チェックリスト手順をディスプレイ１０４上に提示すべき順序を決定することができる。操作設定データは、第１操作部の設定が、第２操作部の設定に依存していることを表わすことができる。機器１０２は、第２操作部の設定に対する第１操作部の設定の依存性のような依存関係を、これらの電子チェックリスト手順を順序付けするときに考慮に入れることができる。
【００４６】
特定の実施形態では、特定の電子チェックリスト作業は、任意とすることができる。機器１０２は、電子チェックリストのこれらの手順を、特定の手順または作業が、任意であるか、または必要であるかどうかに応じて順序付けすることができる。例えば、第１設定作業は任意とすることができ、そして第２設定作業は必要であるとすることができる。特定の実施形態では、機器１０２は、電子チェックリスト作業群を順序付けして、全ての必要チェックリスト作業群を電子チェックリストに、任意の全ての電子チェックリスト作業群の手前に挿入することができる。別の特定の実施形態では、これらのチェックリスト作業は、所定の順序に従って提示することができ、そして任意の全てのチェックリスト作業群は、必要チェックリスト作業群から、色付け方式（例えば、必要作業群に対応する第１色、及び任意作業群に対応する第２色）を使用して、記号（例えば、必要作業を表わす第１記号、及び任意作業を表わす第２記号）を使用して、または色及び記号の組み合わせを使用して区別することができる。
【００４７】
別の特定の実施形態では、機器１０２は、無効化選択画面（図示せず）をディスプレイ１０４上に提示することができる。無効化選択画面は、ユーザが使用することにより、特定のチェックリスト作業を飛ばすか、または現在の設定作業／操作が完了していない、検証されていない、または操作設定データに一致することなく完了した場合でも、次の設定作業／操作に進むことができる。
【００４８】
特定の実施形態では、操作盤の１つ以上の校正機能部は、操作設定データに基づいて特定される。別の特定の実施形態では、１つ以上の校正機能部は、操作盤上に配置される検出可能な機能部（例えば、可視マーカまたはキュー、バーコード、方位マーカなど）に関連付けられ、これらの機能部を機器１０２が使用して、固有の校正機能部の位置を特定することができる。固有の校正機能部の位置は更に、操作設定データに基づいて特定することができる。１つの実施形態では、固有の位置を特定する情報は、１つ以上の校正機能部のうちの少なくとも１つの校正機能部内で符号化することができる。例えば、特定の校正機能部は、より長いデータ列を符号化した２次元バーコードを含むことができ、これらのデータ列から、特定の校正機能部の位置を特定する。別の実施形態では、操作設定データから操作盤の各操作部を特定し、そしてカメラ１０６の視野２０２内に置かれた任意の操作部は、機器１０２が使用することにより、機器１０２を操作盤に合わせて校正することができる。特定の実施形態では、機器１０２を校正すると、電子チェックリストの第１手順を特定することができ、そして設定対象の操作部の位置を第１手順中に特定することができる。特定の実施形態では、機器１０２は、校正機能部を操作盤の設定中に電子チェックリストに従って検出すると、校正データを更新することができる。例えば、チェックリストプロセスの任意の段階で、機器１０２は、校正機能部を検出し、そして校正データを、検出した校正機能部に基づいて更新することができる。
【００４９】
図４Ａを参照するに、操作盤を特定し、そして設定するシステム１００の例示的な実施形態が開示されている。図１〜３の構成要素群に対応する図４Ａの構成要素群は、同じ参照番号で指示されており、そして図４Ａの構成要素群が図１〜３を参照して説明した通りに動作することができることを理解されたい。更に、図１〜３の構成要素群の更に別の動作上の特徴は、以下に説明される。
【００５０】
図４Ａに示すように、機器１０２は、第１設定手順（例えば、手順３０２）が完了していることを表示することができ、そして次の設定手順（例えば、手順４０２）の表示を行なうことができる。特定の実施形態では、機器１０２は、電子チェックリスト作業が完了していることを、ディスプレイ１０４上に提示される１つ以上の記号の色を変更することにより表示することができる。例えば、ボックス３０４を第１色（例えば、赤色ボックス）にして、手順３０２が完了していないことを表示することができる。ボックス３０４の色は、手順３０２が完了していることを検出すると、第２色（例えば青色ボックス）に変更することができる。
【００５１】
機器１０２は、次の設定手順をディスプレイ１０４上に、重ね合わせ図形として表示することができる。特定の実施形態では、重ね合わせ図形はアイコン４０６を含む。アイコン４０６は、次の設定手順で設定されることになる操作部に関連する画像とすることができる。例えば、図４Ｂを参照するに、アイコン４０６の拡大図が図示されている。アイコン４０６は、ノブ操作部１３４の画像を含む。ノブ操作部１３４は、第１設定４１２、第２設定４１４、及び第３設定４１６のうちの１つの設定に、ノブ操作部１３４上の直線が、これらの設定指針のうちの１つの設定指針と一直線に並ぶまで、ノブ操作部１３４を回転操作することにより設定することができる。
【００５２】
図４Ａを参照するに、機器１０２は、次の設定手順（例えば、手順４０２）に関連する操作部の位置を判断することができる。図４Ａに示すように、機器１０２は、次の設定手順に関連する操作部がノブ操作部１３４であると判断することができる。機器１０２は、ノブ操作部１３４が、現在の視野２０２内に収まっていない目標視野４０８内に位置していると判断することができる。目標視野４０８が、現在の視野２０２内に収まっていないと判断すると、機器１０２は、１つ以上の記号（例えば、矢印４０４）を重ね合わせ図形として、ディスプレイ１０４上に提示することができる。１つ以上の記号は、目標視野４０８の方向（及び、次の設定手順（例えば、手順４０２）に関連する操作部）を指示する。
【００５３】
図５Ａ及び５Ｂを参照するに、操作盤を特定し、そして設定するシステム１００の別の例示的な実施形態が開示されている。図１〜４の構成要素群に対応する図５Ａ及び５Ｂの構成要素群は、同じ参照番号で指示されており、そして図５Ａ及び５Ｂの構成要素群が図１〜４を参照して説明した通りに動作することができることを理解されたい。更に、図１〜４の構成要素群の更に別の動作上の特徴は、以下に説明される。
【００５４】
図５Ａに示すように、カメラ１０６は、カメラ１０６の視野５０８が、図４Ａの目標視野４０８に近づくまで、または目標視野４０８をほぼ覆うまで、図４Ａの矢印４０４で指示される方向に移動している。ノブ操作部１３４が、視野５０８（すなわち、カメラ１０６の現在の視野）内に収まっていると判断すると、機器１０２は、次の設定手順（例えば、図４Ａの手順４０２）に関連する操作部（例えば、ノブ操作部１３４）の位置の表示を行なうことができる。例えば、機器１０２は、ノブ操作部１３４の位置を、１つ以上の記号（例えば、ボックス５０４）を重ね合わせ図形として使用して、ディスプレイ１０４上で強調することができる。
【００５５】
カメラ１０６から受信する画像データが、次の設定手順（例えば、手順４０２）に関連する操作部の位置を含んでいると判断すると、機器１０２は、当該操作部の現在の設定を画像データに基づいて判断することができる。当該操作部の現在の設定を判断した後、機器１０２は、当該操作部の設定が操作設定データにより特定される設定に対応しているかどうかを判断することができる。当該操作部の設定が操作設定データにより特定される設定に対応していない場合、機器１０２は、次の設定手順の表示をディスプレイ１０４上で更新して、操作設定データにより特定される設定を表示することができる（例えば、手順５０２）。
【００５６】
更新した次の設定手順は、操作設定データにより特定される設定をアイコン５０６で表示することができる。例えば、図５Ｂを参照するに、アイコン５０６の拡大図が図示されている。アイコン５０６は、ノブ操作部１３４の画像を含む。ノブ操作部１３４は、第１設定４１２、第２設定４１４、及び第３設定４１６のうちの１つの設定に、ノブ操作部１３４上の直線が、これらの設定指針のうちの１つの設定指針と一直線に並ぶまで、ノブ操作部１３４を回転操作することにより設定することができる。
【００５７】
アイコン５０６は更に、ノブ操作部１３４を回転操作する方向を指示し、そして更に、操作設定データにより特定される操作部の設定を特定する矢印５１０を含む。例えば、図５Ａは、ディスプレイ１０４上に提示されるノブ操作部１３４の現在の設定を示している。ノブ操作部１３４は、ボックス５０４により強調され、そして現時点で、第１設定４１２に設定されている。操作設定データにより特定される設定は、アイコン５０６で表わされるノブ操作部１３４の設定により指示される。アイコン５０６は、ノブ操作部１３４を第２設定４１４に設定する必要があることを表わしている。アイコン５０６は更に、ノブ操作部１３４の現在の設定を変更して、操作設定データにより特定される設定（すなわち、第２設定４１４）に対応させるためには、ノブ操作部１３４を時計回りに、ディスプレイ１０４上に提示されるノブ操作部１３４の現在の設定が第２設定４１４に対応するまで回転操作する必要があることを表わしている。
【００５８】
図６Ａ及び６Ｂを参照するに、操作盤を特定し、そして設定するシステム１００の別の例示的な実施形態が開示されている。図１〜５の構成要素群に対応する図６Ａ及び６Ｂの構成要素群は、同じ参照番号で指示されており、そして図６Ａ及び６Ｂの構成要素群が図１〜５を参照して説明した通りに動作することができることを理解されたい。更に、図１〜５の構成要素群の更に別の動作上の特徴は、以下に説明される。
【００５９】
図６Ａに示すように、カメラ１０６の現在の視野が、視野５０８であり、そして機器１０２は、視野５０８に対応する画像データを受信することができ、そして当該画像データをディスプレイ１０４上に提示することができる。図６Ａでは、ノブ操作部１３４の設定は変更されている。機器１０２は、ノブ操作部１３４の設定が変更されていることを検出することができ、そしてノブ操作部１３４の現在の設定が、操作設定データにより特定される設定（例えば、第２設定４１４）に対応しているかどうかを判断することができる。
【００６０】
図６Ａに示すように、ノブ操作部１３４の変更後の設定は、操作設定データにより特定される設定に対応していない。例えば、操作設定データは、ノブ操作部１３４を、第３設定４１６にではなく、第２設定４１４に設定する必要があることを表わすことができる。ノブ操作部１３４の現在の設定（すなわち、変更後の設定）が、操作設定データにより特定される設定に対応していないと判断すると、機器１０２は、ディスプレイ１０４を変更するか、またはその他には、更新することにより、手順５０２に関連する操作部が正しく設定されていないことを表示することができる。
【００６１】
特定の実施形態では、機器１０２はディスプレイ１０４を、アイコン５０６を別のアイコン（例えば、アイコン６０２）に入れ替えることにより更新することができる。例えば、図６Ｂを参照するに、アイコン６０２の拡大図が図示されている。アイコン６０２は、ノブ操作部１３４の画像を含む。ノブ操作部１３４は、第１設定４１２、第２設定４１４、及び第３設定４１６のうちの１つの設定に、ノブ操作部１３４上の直線が、これらの設定指針のうちの１つの設定指針と一直線に並ぶまで、ノブ操作部１３４を回転操作することにより設定することができる。
【００６２】
アイコン６０２は更に、ノブ操作部１３４を回転操作する方向を指示し、そして更に、操作設定データにより特定される操作部の設定を特定する矢印６０４を含む。例えば、図６Ａは、ディスプレイ１０４上に提示されるノブ操作部１３４の現在の設定を示している。ノブ操作部１３４は、ボックス５０４により強調され、そして現時点で、第３設定４１６に設定されている。操作設定データにより特定される設定は、アイコン６０２で指示されるノブ操作部１３４の設定により指示される。アイコン６０２は、ノブ操作部１３４を第２設定４１４に設定する必要があることを表わしている。アイコン６０２は更に、ノブ操作部１３４の現在の設定を変更して、操作設定データにより特定される設定（すなわち、第２設定４１４）に対応させるためには、ノブ操作部１３４を反時計回りに、ノブ操作部１３４の現在の設定が第２設定４１４に対応するまで回転操作する必要があることを表わしている。
【００６３】
図７を参照するに、操作盤を特定し、そして設定するシステム１００の別の例示的な実施形態が開示されている。図１〜６の構成要素群に対応する図７の構成要素群は、同じ参照番号で指示されており、そして図７の構成要素群が図１〜６を参照して説明した通りに動作することができることを理解されたい。更に、図１〜６の構成要素群の更に別の動作上の特徴は、以下に説明される。
【００６４】
図７に示すように、機器１０２は、カメラ１０６から、視野５０８に対応する画像データを受信することができ、そして当該画像データをディスプレイ１０４上に提示することができる。図７では、ノブ操作部１３４の設定は、当該ノブ操作部の前の設定（すなわち、図６のノブ操作部１３４の設定）から変更されている。機器１０２は、ノブ操作部１３４の設定が変更されていることを検出することができ、そしてノブ操作部１３４の現在の設定が、操作設定データにより特定される設定（例えば、第２設定４１４）に対応しているかどうかを判断することができる。
【００６５】
図７に示すように、ノブ操作部１３４の変更後の設定は、操作設定データにより特定される設定（すなわち、第２設定４１４）に対応している。ノブ操作部１３４が正しく設定されていると判断すると、機器１０２は、ディスプレイ１０４を更新して、設定手順５０２が完了したことを表示し、そして完了させる必要のある別の設定手順（例えば、手順７０２）に関連する操作部の位置の表示を行なうことができる。機器１０２は、次の設定手順を、ディスプレイ１０４上に、重ね合わせ図形として表示することができる。機器１０２は、次の設定手順に関連する操作部がスライド操作部１２４であると判断することができる。特定の実施形態では、重ね合わせ図形はアイコン７０６を含む。アイコン７０６は、次の設定手順（例えば、手順７０２）で設定されることになる操作部に関連する画像とすることができる。例えば、図７では、アイコン７０６はスライド操作部１２４の画像を含む。
【００６６】
図７に示すように、機器１０２は、スライド操作部１２４が、カメラ１０６の現在の視野５０８内に収まっていない目標視野７０８内に位置していると判断することができる。スライド操作部１２４が、現在の視野５０８内に収まっていないと判断すると、機器１０２は、１つ以上の記号（例えば、矢印７０４）を重ね合わせ図形として、ディスプレイ１０４上に提示することができる。１つ以上の記号（例えば、矢印７０４）は、スライド操作部１２４の方向を指示する。
【００６７】
機器１０２を使用しながら電子チェックリストを実行することにより、操作盤を設定するときに生じる設定誤りの数を減らすことができる。更に、カメラ１０６から受信する画像データを使用することにより、機器１０２は、各操作部が正しく設定されている（すなわち、操作設定データに従って）ことを検証することができる。機器１０２は、電子チェックリスト上の各作業に対応して設定されることになる特定の操作部の表示を行なうので、操作盤を設定する作業に慣れない人でも、電子チェックリスト作業を完了させ、そしてこれらの操作部を正しく設定することができる。
【００６８】
図８を参照するに、操作盤を特定し、そして設定する方法の１つの実施形態が説明され、そして参照番号８００で総称的に指示される。方法８００は、図１〜７の機器１０２によって実行することができる。ステップ８０２では、方法８００において、操作盤に関連する画像データをカメラから電子機器のプロセッサで受信することができる。例えば、図５Ａを参照して説明したように、機器１０２は、画像データをカメラ１０６から受信することができる。当該画像データは、カメラ１０６の視野５０８に対応させることができる。ステップ８０４では、当該方法において、当該画像データに基づいて生成される１つ以上の画像を電子機器のディスプレイ上に提示する。例えば、図５Ａに示すように、機器１０２は、１つ以上の画像をディスプレイ１０４上に提示することができる。１つ以上の画像は、視野５０８内に収まる操作盤１０８Ａの少なくとも一部を表わすことができる。
【００６９】
ステップ８０６では、当該方法において、操作盤の第１操作部の位置を、画像データに基づいて、かつ操作設定データに基づいて判断する。例えば、図５Ａを参照して説明したように、機器１０２は、ノブ操作部１３４が、視野５０８内に収まっていると判断することができる。上に説明したように、特定の実施形態では、第１操作部の位置は更に、機器１０２が１つ以上のセンサ（例えば、１つ以上の慣性センサ、及び１つ以上の方位センサ）から受信するセンサデータに基づいて判断することができる。ステップ８０８では、当該方法において、第１操作部の位置の表示をディスプレイ１０４上で行なう。例えば、図５Ａを参照して説明したように、機器１０２は、１つ以上の記号（例えば、ボックス５０４）をディスプレイ１０４上に提示することができる。ステップ８１０では、当該方法において、第１操作部の所望の設定の表示をディスプレイ上で行なう。例えば、図５Ａを参照して説明したように、機器１０２は、１つ以上の記号（例えば、手順５０２及びアイコン５０６）をディスプレイ１０４上に提示することができる。第１操作部の所望の設定は、操作設定データに基づいて決定することができる。
【００７０】
図９を参照するに、ユーザは、第１操作部の設定を、ディスプレイ上に提示される１つ以上の画像、及び１つ以上の記号に基づいて変更することができる。ステップ９２０では、当該方法において、第１操作部の設定が変更されているかどうかを判断する。第１操作部の設定が変更されていないと判断すると、当該方法では、第１操作部の設定が、ステップ９２０において変更されているかどうかを再度判断することができる。特定の実施形態では、当該機器は、第１操作部の設定が、変更されているかどうかについての再判断を、或る時間長さだけ遅らせることができる。第１操作部の設定が変更されていると判断すると、当該方法では、第１操作部の変更後の設定をステップ９２２において決定することができる。ステップ９２４では、当該方法において、第１操作部の変更後の設定が、所望の設定に対応しているかどうかを判断することができる。ステップ９２６では、第１操作部の変更後の設定が、所望の設定に対応していない場合、当該方法では、第１操作部が、所望の設定に従って設定されていないことを表示することができる。特定の実施形態では、第１操作部が、所望の設定に従って設定されていないことを表示する際、ディスプレイ上に提示される１つ以上の画像、及び１つ以上の記号を変更するか、またはその他には、更新することができる。ディスプレイ上に提示される１つ以上の画像、及び１つ以上の記号を変更するか、またはその他には、更新すると、当該方法では、第１操作部の設定がステップ９２０において変更されているかどうかについて再判断することができる。当該機器は、第１操作部の設定が、変更されているかどうかについての再判断を、或る時間長さだけ遅らせることができる。
【００７１】
ステップ９２８では、第１操作部の変更後の設定が、所望の設定に対応していると判断すると、当該方法では、もし次の操作部がある場合に、設定されることになる操作盤の次の操作部を決定することができる。ステップ９３０では、次の操作部を設定する必要があると判断すると、当該方法では、次の操作部の位置を、カメラ１０６から受信する画像データ、及び操作設定データに基づいて判断することができる。特定の実施形態では、次の操作部の位置は、１つ以上のセンサを介して受信するセンサデータに基づいて判断することができる。特定の実施形態では、次の操作部の位置を判断する際、第１操作部から次の操作部までの距離を決定し、そして第１操作部から次の操作部に向かう方向を決定する。ステップ９３２では、当該方法において、ディスプレイ上に提示される１つ以上の画像、及び１つ以上の記号を、画像データ、センサデータ、操作設定データ、またはこれらのデータの組み合わせに基づいて変更するか、またはその他には、更新することにより、次の操作部の位置を表示することができる。当該方法では、更に別の画像データをカメラから、ステップ９３４において受信することができる。特定の実施形態では、当該方法において、更に別のセンサデータを、機器を移動させているときに受信することができる。例えば、図１〜７の機器１０２を移動させるときに、カメラ１０６は、更に別の画像データを撮影することができる、これらのセンサは、更に別のセンサデータを生成することができる、または両方の動作を行なうことができる。更に別の画像データを受信すると、当該方法では、更に別の画像データに基づいて生成される１つ以上の更に別の画像をディスプレイ上に提示することができる。機器１０２は、図１〜７を参照して説明した更に別の動作を実行することができ、そして／またはこれらの動作を、図８及び９に関連して上に提示した順序とは異なる順序で実行することができる。
【００７２】
図１０は、本開示によるコンピュータ実行方法及びコンピュータ実行可能プログラム命令の実施形態を支援するように動作することができる汎用計算装置１０１０を含む計算環境１０００のブロック図である。例えば、計算装置１０１０、または計算装置１０１０の種々の構成部分は、図１〜７に示す種々の実施形態、またはこれらの実施形態の構成要素群のうちのいずれか１つ以上の実施形態または構成要素を実行することができる、含むことができる、またはいずれか１つ以上の実施形態または構成要素の内部に含めることができる。計算装置１０１０は、少なくとも１つのプロセッサ１０２０を含むことができる。計算装置１０１０の内部では、プロセッサ１０２０は、システムメモリ１０３０、１つ以上の記憶装置１０４０、１つ以上の入力／出力インターフェース１０５０、１つ以上の通信インターフェース１０６０、及び少なくとも１つのカメラ１０９０と通信することができる。特定の実施形態では、計算装置１０１０は、１つ以上のセンサ１０９２を含む。１つ以上のセンサは、慣性センサ、モーションセンサ、方位センサ、またはこれらのセンサの組み合わせを含むことができる。
【００７３】
システムメモリ１０３０は、揮発性メモリ装置（例えば、ランダムアクセスメモリ（ＲＡＭ）装置）、不揮発性メモリ装置（例えば、リードオンリメモリ（ＲＯＭ）装置、プログラマブルムリードオンリメモリ、及びフラッシュメモリ）、または、揮発性メモリ装置及び不揮発性メモリ装置の両方を含むことができる。システムメモリ１０３０は、オペレーティングシステム１０３２を含むことができ、このオペレーティングシステム１０３２は、計算装置１０１０をブートするための基本／入出力システム（ＢＩＯＳ）だけでなく、フルオペレーティングシステムを含むことにより、計算装置１０１０は、ユーザ、他のプログラム、及び他の装置と対話することができる。システムメモリ１０３０は、アプリケーションプログラムのような１つ以上のアプリケーションプログラム１０３４を含むことにより、上に説明した操作盤を設定するために使用される電子チェックリスト、及び画像データ、及び重ね合わせ図形を提示する。システムメモリ１０３０は更に、プログラムデータ１０３６を含むことができる。
【００７４】
プロセッサ１０２０は、１つ以上の記憶装置１０４０と通信することができる。例えば、１つ以上の記憶装置１０４０は、磁気ディスク、光ディスク、またはフラッシュメモリ装置のような不揮発性記憶装置を含むことができる。これらの記憶装置１０４０は、着脱式メモリ装置及び非着脱式メモリ装置の両方を含むことができる。これらの記憶装置１０４０は、オペレーティングシステム、アプリケーション、及びプログラムデータを記憶するように構成することができる。特定の実施形態では、システムメモリ１０３０、記憶装置群１０４０、またはシステムメモリ及び記憶装置の両方は、非一時的な有形コンピュータ可読媒体を含む。
【００７５】
プロセッサ１０２０は、１つ以上の入力／出力インターフェース１０５０と通信することもでき、これらの入力／出力インターフェース１０５０によって計算装置１０１０は、１つ以上の入力／出力デバイス１０７０と通信することにより、ユーザとの対話を容易にすることができる。これらの入力／出力インターフェース１０５０は、シリアルインターフェース（例えば、ユニバーサルシリアルバス（ＵＳＢ）インターフェースまたはＩＥＥＥ１３９４インターフェース）、パラレルインターフェース、ディスプレイアダプタ、オーディオアダプタ、及び他のインターフェースを含むことができる。これらの入力／出力デバイス１０７０は、キーボード、ポインティングデバイス、１つ以上のディスプレイ、スピーカ、マイクロフォン、タッチスクリーン、及び他のデバイスを含むことができる。特定の実施形態では、１つ以上のディスプレイは、少なくとも１つのタッチスクリーンディスプレイを含むことができる。少なくとも１つのタッチスクリーンディスプレイは、指紋防止コーティング剤で被覆することができる。
【００７６】
プロセッサ１０２０は、他のコンピュータシステム１０８０と、１つ以上の通信インターフェース１０６０を介して通信することができる。１つ以上の通信インターフェース１０６０は、有線イーサネット（登録商標）インターフェース、ＩＥＥＥ８０２．１１ａ／ｂ／ｇ／ｎ対応無線インターフェース、Ｂｌｕｅｔｏｏｔｈ（登録商標）通信インターフェース、第３世代（３Ｇ）通信インターフェース、第４世代（４Ｇ）通信インターフェース、ロングタームエボリューション（次世代高速移動通信規格：ＬＴＥ）通信インターフェース、高速パケットアクセス（ＨＳＰＡ）通信インターフェース、ＨＳＰＡ＋通信インターフェース、デュアルセル（ＤＣ）−ＨＳＤＰＡ通信インターフェース、モバイル通信用グローバルシステム（ＧＳＭ）（登録商標）通信インターフェース、ＧＳＭデータレート強化仕様（Ｅｎｈａｎｃｅｄ  Ｄａｔａ  ｒａｔｅｓ  ｆｏｒ  ＧＳＭ  Ｅｖｏｌｕｔｉｏｎ：ＥＤＧＥ）通信インターフェース、ＥＤＧＥ（拡張データＧＳＭ環境）ユニバーサルモバイルテレコミュニケーションシステム（ＵＭＴＳ）通信インターフェース、符号分割多元接続（ＣＤＭＡ）通信インターフェース、時分割多元接続（ＴＤＭＡ）通信インターフェース、周波数分割多元接続（ＦＤＭＡ）通信インターフェース、直交周波数分割多元接続（ＯＦＤＭＡ）通信インターフェース、シングルキャリア周波数分割多元接続（ＳＣ−ＦＤＭＡ）通信インターフェース、光通信インターフェース、他のネットワークインターフェース、またはこれらのインターフェースの任意の組み合わせを含むことができる。他のコンピュータシステム１０８０は、ホストコンピュータ、サーバ、ワークステーション、及び他の計算装置を含むことができる。
【００７７】
カメラ１０９０は、画像データを生成し、そして画像データをプロセッサ１０２０に送信するように動作することができる。カメラ１０９０は、更に別のモジュール群（図示せず）を含むことができ、これらのモジュールは、デジタルズーム操作、光学ズーム操作、及びオートフォーカス操作のような更に別の画像処理操作を行なう。特定の実施形態では、カメラ１０９０は、静止画像及び／又は標準動画像／高精細動画像を生成するように動作することができるデジタルカメラとすることができる。特定の実施形態では、カメラ１０９０は、カメラの少なくとも一部が計算装置１０１０の外部に位置するように配置することができる。例えば、カメラ１０９０は、１つ以上のイメージセンサレンズを含むことができ、これらのイメージセンサレンズは、計算装置１０１０に取り付けられるか、またはその他には、計算装置１０１０に一体化され、かつプロセッサ１０２０と通信可能に接続される。特定の実施形態では、プロセッサ１０２０は、ディスプレイ上に表示される１つ以上の画像を、これらのイメージセンサレンズから受信する画像データに基づいて生成することができる。別の実施形態では、１つ以上のイメージセンサレンズは、別のプロセッサ（例えば、グラフィック処理ユニット（図示せず））と通信可能に接続され、別のプロセッサは、１つ以上の画像を、これらのイメージセンサレンズから受信する画像データに基づいて生成し、そして１つ以上の画像をディスプレイ上に提示するように構成される。別の実施形態では、カメラ１０９０は、計算装置１０１０の外部に（例えば、ヘッドセットに）配置することができ、そして画像データを計算装置１０１０に入力／出力インターフェース（群）１０５０または通信インターフェース（群）１０６０を介して送信することができる。例えば、カメラ１０９０は、計算装置１０１０とＵＳＢ接続またはＢｌｕｅｔｏｏｔｈリンクを介して通信可能に接続することができる。
【００７８】
（条項１）
方法であって、
プロセッサでカメラから、操作盤に関連する画像データを受信することと、
１つ以上の画像をディスプレイ上に提示することと、を含み、前記１つ以上の画像が前記画像データに基づいて生成され、
前記操作盤の第１操作部の位置を前記画像データに基づいて、かつ操作設定データに基づいて判断することと、
前記第１操作部の前記位置の表示を前記ディスプレイ上で行なうことと、
前記第１操作部の所望の設定の表示を前記ディスプレイ上で行なうことと、
を含む、方法。
（条項２）
更に、前記第１操作部の設定が変更されていることを表わす入力を受信することを含む、条項１に記載の方法。
（条項３）
更に：
前記操作盤に関連する第２画像データを受信することと、
前記第１操作部の前記変更後の設定が、前記第１操作部の前記所望の設定に対応しているかどうかを、前記第２画像に基づいて、かつ前記操作設定データに基づいて判断することと、
を含む、条項２に記載の方法。
（条項４）
更に：
１つ以上の更に別の画像を前記ディスプレイ上に提示することを含み、前記１つ以上の更に別の画像が前記第２画像データに基づいて生成され、
前記第１操作部の前記変更後の設定が、前記所望の設定に対応していると判断すると、第２操作部の第２位置を前記第２画像データに基づいて、かつ前記操作設定データに基づいて判断することと、
前記第２操作部の前記第２位置の表示を前記ディスプレイ上で行なうことと、
前記第２操作部の所望の設定の表示を前記ディスプレイ上で行なうことと、を含み、前記第２操作部の前記所望の設定は、前記操作設定データに基づいて決定される、条項３に記載の方法。
（条項５）
前記第２位置の前記表示は、前記第１操作部の前記位置から前記第２位置に向かう方向を表わす、条項４に記載の方法。
（条項６）
更に、校正データを校正機能部に対する前記カメラの位置に基づいて決定することを含み、前記第１操作部の前記位置は、前記校正データに部分的に基づいて判断される、条項１に記載の方法。
（条項７）
前記プロセッサは、エレクトロニックフライトバッグ装置に組み込まれる、条項１に記載の方法。
（条項８）
装置であって、
カメラと、
ディスプレイと、
プロセッサと、
命令群を含むメモリと、を備え、前記命令群が前記プロセッサによって実行されると、前記命令群によって前記プロセッサは：
操作盤に関連する画像データを前記カメラから受信し、
前記画像データに基づいて生成される１つ以上の画像を前記ディスプレイ上に提示し、
前記操作盤の第１操作部の位置を前記画像データに基づいて、かつ操作設定データに基づいて判断し、
前記第１操作部の前記位置の表示を前記ディスプレイ上で行ない、そして
前記第１操作部の所望の設定の表示を前記ディスプレイ上で行なうようになる、装置。
（条項９）
前記メモリは更に、命令群を含み、前記命令群が前記プロセッサによって実行されると、前記命令群によって前記プロセッサは、前記第１操作部の設定が変更されているかどうかを判断するようになる、条項８に記載の装置。
（条項１０）
前記メモリは更に、命令群を含み、前記命令群が前記プロセッサによって実行されると、前記命令群によって前記プロセッサは：
前記操作盤に関連する第２画像データを受信し、そして
前記第１操作部の前記変更後の設定が、前記第１操作部の前記所望の設定に対応しているかどうかを、前記第２画像データに基づいて、かつ前記操作設定データに基づいて判断するようになる、条項９に記載の装置。
（条項１１）
前記メモリは更に、命令群を含み、前記命令群が前記プロセッサによって実行されると、前記命令群によって前記プロセッサは：
前記第２画像データに基づいて生成される１つ以上の更に別の画像を前記ディスプレイ上に提示し、
前記第１操作部の前記変更後の設定が、前記所望の設定に対応していると判断すると、第２操作部の第２位置を前記第２画像データに基づいて、かつ前記操作設定データに基づいて判断し、
前記第２操作部の前記第２位置の表示を前記ディスプレイ上で行ない、そして、
前記第２操作部の所望の設定の表示を前記ディスプレイ上で行なうようになり、
前記所望の設定は、前記操作設定データに基づいて決定される、条項１０に記載の装置。
（条項１２）
前記第２位置は、前記第１操作部の前記位置、基準操作部の位置、基準マークの位置、またはこれらの位置の組み合わせを基準として特定される、条項１１に記載の装置。
（条項１３）
更に、少なくとも１つのセンサを備え、前記第１操作部の前記位置は更に、前記少なくとも１つのセンサから受信するセンサデータに基づいて判断され、前記少なくとも１つのセンサは、慣性センサ、モーションセンサ、方位センサ、またはこれらのセンサの組み合わせを含み、そして前記所望の設定は、前記操作設定データに基づいて決定される、条項８に記載の装置。
（条項１４）
前記操作設定データは、電子チェックリストに関連する操作データ及び方向データを含み、前記操作データは、前記操作盤の複数の操作部の配置を特定し、そして前記方向データは、前記複数の操作部の特定の操作部から前記複数の操作部の第２操作部に向かう方向を表わす情報を含む、条項８に記載の装置。
（条項１５）
前記第１操作部の前記位置の前記表示は、前記画像データに重なる１つ以上の記号を含む、条項８に記載の装置。
本明細書において記載される実施形態は、種々の実施形態の構造に関する概略的な理解が得られるために例示される。これらの例示は、本明細書において記載される構造または方法を利用する装置及びシステムの構成要素群及び特徴群の全てに関する完全な記述として利用されてはならない。多くの他の実施形態が存在することは、この技術分野の当業者には、本開示を精査することにより明らかである。他の実施形態は、本開示に基づいて利用することができ、そして本開示から想到し得るので、構造的な置き換え、及び論理的な置き換え、及び構造的な変更、及び論理的な変更は、本開示の範囲から逸脱しない限り行なうことができる。例えば、方法ステップは、これらの例示に示されている順序とは異なる順序で実施することができる、または１つ以上の方法ステップは、省略してもよい。従って、本開示及びこれらの図は、限定的ではなく、例示として考えられるべきである。
【００７９】
更に、特定の実施形態が本明細書において例示され、そして記載されているが、同じ、または同様の結果を実現するように設計される任意の補助的な構成を、例示されている特定の実施形態の代わりに用いることができることを理解されたい。本開示は、種々の実施形態の任意かつ全ての補助的な適応物または変形物を包含するものとする。上記実施形態、及び本明細書において詳細には記載されていない他の実施形態の組み合わせは、この技術分野の当業者であれば、本記述を精査することにより理解することができるであろう。
【００８０】
これまでの詳細な説明では、種々の特徴をグループにまとめて、または単一の実施形態において説明して、本開示を簡潔にしている。本開示は、特許請求するこれらの実施形態が、各請求項において明示的に記載されているよりも多くの特徴を必要とするという意図を反映していると解釈されてはならない。そうではなく、以下の請求項に記載されているように、特許請求する主題は、開示されるこれらの実施形態のいずれかの実施形態の特徴群の全てよりも少ない特徴を対象としている。
【図１】
0006320369.tif 000002
【図２】
0006320369.tif 000003
【図３】
0006320369.tif 000004
【図４Ａ】
0006320369.tif 000005
【図４Ｂ】
0006320369.tif 000006
【図５Ａ】
0006320369.tif 000007
【図５Ｂ】
0006320369.tif 000008
【図６Ａ】
0006320369.tif 000009
【図６Ｂ】
0006320369.tif 000010
【図７】
0006320369.tif 000011
【図８】
0006320369.tif 000012
【図９】
0006320369.tif 000013
【図１０】
0006320369.tif 000014