(57)【要約】  運転者に車両動作情報を表示するように構成された計器群（１２）の動作を監視するためのシステム（１０）および方法（１１０）である。システムには、計器群の動作の画像を撮影するために、計器群に向けられたカメラ（１４）が含まれている。制御モジュール（５０）は、計器群の画像を受信している。制御モジュールは、画像に撮影された計器群の動作を、計器群の所定の予想される動作と比較するように構成されている。故障状態通知モジュール（５２）は、画像に撮影された計器群の動作と、計器群の所定の予想される動作との間に矛盾がある場合に、故障通知を生成するように構成されている。
2021501081.tif 000002
【特許請求の範囲】
【請求項１】
運転者に車両動作情報を表示するように構成された計器群（１２）の動作を監視するシステムであって、
前記計器群の動作の画像を撮影するために、前記計器群に向けられたカメラ（１４）と、
前記計器群の画像を受信し、前記画像に撮影された前記計器群の動作を、前記計器群の既定の期待される動作と比較するように構成されている制御モジュール（５０）と、
前記画像に撮影された前記計器群の動作と、前記計器群の既定の期待される動作との間に不一致がある場合、故障通知を生成するように構成された故障状態通知モジュール（５２）とを備える計器群監視システム。
【請求項２】
前記制御モジュールは、さらに、車両動作情報を受信し、前記制御モジュールは、さらに、前記画像に撮影された前記計器群の動作を、前記車両動作情報と比較するように構成されており、
前記故障状態通知モジュールは、さらに、前記画像に撮影された前記計器群の動作と、前記車両動作情報との間に不一致がある場合に、故障通知を生成するように構成されている請求項１に記載の計器群監視システム。
【請求項３】
前記カメラは、前記計器群と共通のハウジング内にある請求項１または請求項２に記載の計器群監視システム。
【請求項４】
前記カメラは、照明されたときに車両動作情報を運転者に伝える前記計器群の告知表示（３０Ａ−３０Ｕ）の画像を撮影する請求項１から請求項３のいずれかに記載の計器群監視システム。
【請求項５】
前記告知表示は、パーキングブレーキライト告知表示（３０Ａ）；サスペンションダンパー告知表示（３０Ｂ）；ウインカー告知表示（３０Ｃ）；トラクションコントロール告知表示（３０Ｄ）；ブレーキ摩耗告知表示（３０Ｅ）；電源システム告知表示（３０Ｆ）；エンジンチェック告知表示（３０Ｇ）；バッテリーチェック告知表示（３０Ｈ）；低油圧告知表示（３０Ｉ）；温度警告告知表示（３０Ｊ）；タイヤ空気圧警告告知表示（３０Ｋ）；ドアロックシステム告知表示（３０Ｌ）；ハイビームライトアクティブ告知表示（３０Ｍ）；ブレーキシステム告知表示（３０Ｎ）；情報告知表示（３０Ｏ）；ロービームヘッドライトアクティブ告知表示（３０Ｐ）；シートベルト締結告知表示（３０Ｑ）；エアバッグ警告告知表示（３０Ｒ）；アンチロックブレーキシステム警告告知表示（３０Ｓ）；ブレーキチェック告知表示（３０Ｔ）；および、低燃料警告告知表示（３０Ｕ）の少なくともひとつを備える請求項４に記載の計器群監視システム。
【請求項６】
前記制御モジュールは、前記告知表示のそれぞれについて、前記カメラによって撮影された前記計器群の所定の領域を探索し、前記所定の領域が黒であるか、少なくとも部分的に照明されているかを識別するように構成されており、
前記制御モジュールは、前記告知表示が黒の場合、前記告知表示がオフ状態にあると判断する請求項４または請求項５に記載の計器群監視システム。
【請求項７】
前記制御モジュールは、前記告知表示のそれぞれについて、前記カメラによって撮影された画像における前記告知表示の形状を、前記告知表示の期待される形状と比較するように構成され、
前記制御モジュールは、前記カメラによって撮影された前記画像における前記告知表示が、前記告知表示の期待される形状とは異なる形状である場合、前記告知表示は、形状誤差を有すると判断する請求項４から請求項６のいずれかに記載の計器群監視システム。
【請求項８】
前記制御モジュールは、前記告知表示のそれぞれについて、前記カメラによって撮影された画像における前記告知表示の色を、前記告知表示の期待される色と比較するように構成され、
前記制御モジュールは、前記カメラによって撮影された前記画像における前記告知表示が、前記告知表示の期待される色とは異なる色である場合、前記告知表示は、色誤差を有すると判断する請求項４から請求項７のいずれかに記載の計器群監視システム。
【請求項９】
前記制御モジュールは、５０ｍｓから１００ｍｓごとに前記計器群の画像を撮影するように前記カメラを制御する請求項１から請求項８のいずれかに記載の計器群監視システム。
【請求項１０】
運転者に車両動作情報を表示するように構成された計器群（１２）の動作を監視する方法であって、
前記計器群に向けられたカメラ（１４）によって、前記計器群の動作の画像を撮影すること、
前記計器群の画像を受信する制御モジュール（５０）によって、前記画像に撮影された前記計器群の動作を、前記計器群の既定の期待される動作と比較すること、および、
前記画像に撮影された前記計器群の動作と、前記計器群の既定の期待される動作との間に不一致がある場合、故障状態通知モジュール（５２）によって、故障通知を生成することとを含む計器群監視方法。
【請求項１１】
前記画像に撮影された前記計器群の動作と、前記制御モジュールによって受信された車両動作情報とを、前記制御モジュールによって比較すること、および、
前記画像に撮影された前記計器群の動作と、前記車両動作情報との間に不一致がある場合、前記故障状態通知モジュールによって故障通知を生成することをさらに含む請求項１０に記載の計器群監視方法。
【請求項１２】
前記計器群の画像を撮影することは、照明されたときに車両動作情報を運転者に伝えるための前記計器群における告知表示（３０Ａ−３０Ｕ）の画像を取り込むことを含む請求項１０または請求項１１に記載の計器群監視方法。
【請求項１３】
前記告知表示は、パーキングブレーキライト告知表示（３０Ａ）；サスペンションダンパー告知表示（３０Ｂ）；ウインカー告知表示（３０Ｃ）；トラクションコントロール告知表示（３０Ｄ）；ブレーキ摩耗告知表示（３０Ｅ）；電源システム告知表示（３０Ｆ）；エンジンチェック告知表示（３０Ｇ）；バッテリーチェック告知表示（３０Ｈ）；低油圧告知表示（３０Ｉ）；温度警告告知表示（３０Ｊ）；タイヤ空気圧警告告知表示（３０Ｋ）；ドアロックシステム告知表示（３０Ｌ）；ハイビームライトアクティブ告知表示（３０Ｍ）；ブレーキシステム告知表示（３０Ｎ）；情報告知表示（３０Ｏ）；ロービームヘッドライトアクティブ告知表示（３０Ｐ）；シートベルト締結告知表示（３０Ｑ）；エアバッグ警告告知表示（３０Ｒ）；アンチロックブレーキシステム警告告知表示（３０Ｓ）；ブレーキチェック告知表示（３０Ｔ）；および、低燃料警告告知表示（３０Ｕ）の少なくともひとつを備える請求項１２に記載の計器群監視方法。
【請求項１４】
前記制御モジュールによって、前記告知表示のそれぞれについて、前記カメラによって撮影された前記計器群の所定の領域を探索し、前記所定の領域が黒であるか、少なくとも部分的に照明されているかを識別すること、および、
前記制御モジュールによって、前記告知表示が黒の場合、前記告知表示がオフ状態にあると判断することをさらに含む請求項１２または請求項１３に記載の計器群監視方法。
【請求項１５】
前記制御モジュールによって、前記告知表示のそれぞれについて、前記カメラによって撮影された前記画像における前記告知表示の形状を、前記告知表示の期待される形状と比較すること、および、
前記制御モジュールによって、前記カメラによって撮影された前記画像における前記告知表示が、前記告知表示の期待される形状とは異なる形状である場合、前記告知表示は、形状誤差を有すると判断することをさらに含む請求項１２から請求項１４のいずれかに記載の計器群監視方法。
【請求項１６】
前記制御モジュールによって、前記告知表示のそれぞれについて、前記カメラによって撮影された前記画像における前記告知表示の色を、前記告知表示の期待される色と比較すること、および、
前記制御モジュールによって、前記カメラによって撮影された前記画像における前記告知表示が、前記告知表示の期待される形状とは異なる色である場合、前記告知表示は、色誤差を有すると判断することをさらに含む請求項１２から請求項１５のいずれかに記載の計器群監視方法。
【請求項１７】
前記カメラによって、５０ｍｓから１００ｍｓごとに前記計器群の画像を撮影することをさらに含む請求項１０から請求項１６のいずれかに記載の計器群監視方法。
【請求項１８】
故障通知を生成することは、前記計器群から離れた冗長的なディスプレイ上に故障通知を表示することを含む請求項１０から請求項１７のいずれかに記載の計器群監視方法。
【請求項１９】
故障通知を生成することは、故障警告チャイムを生成すること、および、電子的な故障メッセージを生成することのうちの少なくとも１つを含む請求項１０から請求項１７のいずれかに記載の計器群監視方法。
【請求項２０】
部品搭載公差、貼付物公差、表示公差、カメラ公差、および、車両の動的公差のうちの少なくともひとつ以上の公差を考慮して、前記制御モジュールを校正することをさらに含む請求項１０から請求項１９のいずれかに記載の計器群監視方法。
【発明の詳細な説明】
【関連出願の相互参照】
【０００１】
この出願は、２０１８年２月２日に出願された米国仮出願第６２／６２５、４１４号および２０１９年１月１１日に出願された米国特許出願第１６／２４５、９３５号に基づいている。上記出願のすべての内容は、参照によりこの明細書に組み込まれている。
【技術分野】
【０００２】
この開示は、計器群（ｉｎｓｔｒｕｍｅｎｔ  ｃｌｕｓｔｅｒ）の動作を監視するために計器群に向けられたカメラを含む計器群監視システムに関する。
【背景技術】
【０００３】
このセクションは、この開示に関連する、必ずしも従来技術ではない背景技術情報を提供する。
【０００４】
計器群は、車両の動作状態、および車両の特徴部分および機能の故障状態に関する情報を、運転者または操作者に伝えるために、車両においてしばしば使用される。計器群は、例えば、車両速度、エンジン回転速度、エンジン温度、燃料レベル、および、エンジンオイルレベルなどを伝えるための、メータ、または、指針盤をしばしば備える。計器群には、通常、さまざまな「告知表示（ｔｅｌｌ−ｔａｌｅｓ）」も含まれており、それらは、照明された場合に、運転者に故障情報を提供する。故障状態が存在する場合、電球、ＬＥＤ、または、告知表示に関連する他の同様のデバイスが、故障状態を表示するように照明される。重要な告知表示は、通常、一定時間にわたって照明することにより照明装置が正しく機能していることを運転者に知らせるために、車両を始動するときに、存在実証動作に付される。
【０００５】
現代的な計器群では、運転者は計器群を視覚的に監視して、告知表示が照明されていないことを確認して故障状態を識別する必要がある。場合によっては、車両の中央処理装置（ＣＰＵ）は回路の電気的特性を監視し、他の手段（例えば、スピーカーからの警告音）によって運転者に障害を通知できる。自動車産業がアナログタイプの計器群からＴＦＴディスプレイ、または、同様の技術を使用したデジタル式計器群に移行するにつれて、計器群が正しく表示されるようにするためのより明確な方法が望まれている。この開示は、計器群の動作を監視するための改善されたシステムを有利に提供する。
【発明の概要】
【０００６】
この項は、開示の一般的な概要を提供するものであり、その全範囲またはすべての機能の包括的な開示ではない。
【０００７】
この開示は、運転者に車両動作情報を表示するように構成された計器群の動作を監視するためのシステムおよび方法に関する。システムには、計器群の動作の画像を撮影するために、計器群に向けられたカメラが含まれている。制御モジュールは、計器群の画像を受信している。制御モジュールは、画像に撮影された計器群の動作を、計器群の所定の予想される動作と比較するように構成されている。故障状態通知モジュールは、画像に撮影された計器群の動作と、計器群の所定の予想される動作との間に不一致がある場合に、故障通知を生成するように構成されている。
【０００８】
適用性のさらなる領域は、この明細書で提供される説明から明らかになるであろう。この概要の説明および特定の例は、例示のみを目的とするものであり、この開示の範囲を限定するものではない。
【図面の簡単な説明】
【０００９】
ここに記載された図面は、選択された実施形態を図示するだけのものであって、すべての実用的な可能性を示すものではなく、この開示の範囲を限定するものではない。
【図１】図１は例示的な計器群と計器群の動作を監視するためのこの開示によるカメラを図示している。
【図２】図２は図１のカメラを使用して計器群の機能を監視する方法を図示している。
【図３】図３は図１のカメラを使用して計器群の機能を監視する別の方法を図示している。
【００１０】
複数の図面の図示にわたって、対応する参照番号は対応する部分を示している。
【発明を実施するための形態】
【００１１】
添付の図面を参照して、例示的な実施形態をより完全に説明する。
【００１２】
図１は、この開示によるところの、車両の動作情報を運転者に表示するように構成された計器群１２の動作を監視するためのシステム１０を示している。計器群１２は、任意の適切な車両の動作情報を車両の運転者に伝えるための任意の適切な計器群であり得る。例示的な車両には、限定的ではない以下のもの、乗用車、大量輸送車両、実用車両、レクリエーション車両、建設車両／機器、軍用車両／機器、航空機、船舶など、が含まれている。
【００１３】
システム１０は、任意の適切なカメラ１４で計器群１２の動作を監視する。図１は単一のカメラ１４を示しているが、計器群１２の所望の領域を監視するために、必要に応じて任意の適切な数のカメラを含めることができる。カメラ１４は、計器群１２と共通のハウジング１６に含まれてもよい。あるいは、カメラ１４は、その動作を視覚的に捕捉するために、計器群１２に（直接的または間接的に）向けられている限り、カメラ１４は、他の任意の適切な位置に配置されてもよい。
【００１４】
計器群１２は、車両の運転情報を運転者に伝えるのに適した任意の適切なメータ、指針盤、告知表示（テルテール：ｔｅｌｌ−ｔａｌｅ）、ディスプレイなどを有することができる。図１の例では、計器群１２は、物理的な指針盤、または、計器群１２のディスプレイ（任意の適切なＴＦＴ、ＬＣＤなどのディスプレイ）上に表示される仮想的な指針盤であり得る中央の指針盤２０を含む。中央の指針盤２０は、エンジン速度、および／または、車両速度などの任意の適切な情報を表示するように構成されてもよい。図１の例はまた、以下の例示的なサブメータ／指針盤（任意の適切な表示画面に表示される物理的な指針盤、または、仮想的な指針盤であり得る）を含む：エンジン温度指針盤２２Ａ；アシスト／充電指針盤２２Ｂ；バッテリーレベル指針盤２２Ｃ；燃料レベル指針盤２２Ｄ。
【００１５】
計器群１２は、複数の告知表示３０Ａ−３０Ｕも含む。告知表示３０Ａ−３０Ｕは、運転者に車両動作情報を伝えるために照明される文字、および／または、模様を含む。告知表示３０Ａ−３０Ｕは、電球、ＬＥＤ、または他の適切な照明装置など、任意の適切な方法で照明されてもよい。告知表示は、任意の適切なディスプレイ画面（任意の適切なＴＦＴ、ＬＣＤなどのディスプレイ）に表示される仮想的な告知表示でもよい。
【００１６】
図１の例は、以下の例示的な告知表示を含むが、他の適切な告知表示が含まれてもよい：パーキングブレーキライト告知表示３０Ａ；サスペンションダンパー告知表示３０Ｂ；ウインカー告知表示３０Ｃ；トラクションコントロール告知表示３０Ｄ；ブレーキ摩耗告知表示３０Ｅ；電源システム告知表示３０Ｆ；エンジンチェック告知表示３０Ｇ；バッテリーチェック告知表示３０Ｈ；低油圧告知表示３０Ｉ；温度警告告知表示３０Ｊ；タイヤ空気圧警告告知表示３０Ｋ；ドアロックシステム告知表示３０Ｌ；ハイビームライトアクティブ告知表示３０Ｍ；ブレーキシステム告知表示３０Ｎ；情報（ｉ）告知表示３０Ｏ；ロービームヘッドライトアクティブ告知表示３０Ｐ；シートベルト締結告知表示３０Ｑ；エアバッグ警告告知表示３０Ｒ；アンチロックブレーキシステム警告告知表示３０Ｓ；ブレーキチェック告知表示３０Ｔ；および、低燃料警告告知表示３０Ｕ。
【００１７】
システム１０は、制御モジュール５０および故障状態通知モジュール５２をさらに含む。この出願において、以下の定義を含めて、用語「モジュール」は、用語「回路」に置き換えられてもよい。用語「モジュール」は、コードを実行するためのハードウェアのプロセッサ（共有、専用、またはグループ）、およびハードウェアのプロセッサによって実行されるコードを格納するハードウェアのメモリ（共有、専用、またはグループ）の一部、または全体を指す。コードは、制御モジュール５０および故障状態通知モジュール５２など、この明細書で説明されるモジュールの機能を提供するように構成される。用語「ハードウェアのメモリ」は、コンピュータ読み取り可能な媒体という用語の一部である。この明細書で使用されるコンピュータ読み取り可能な媒体という用語は、媒体を介して（搬送波などで）伝播する一時的な電気信号または電磁信号を含まない。したがって、コンピュータ読み取り可能な媒体という用語は、有形で一時的ではないと見なされる。非一時的なコンピュータ読み取り可能な媒体の非限定的な例は、（フラッシュメモリデバイス、消去可能なプログラム可能な読み出し専用メモリデバイス、またはマスク型の読み出し専用メモリデバイスなどの）不揮発性メモリデバイス、または（スタティックランダムアクセスメモリデバイスまたはダイナミックランダムアクセスメモリデバイスなどの）揮発性メモリデバイス、または、（アナログまたはデジタル磁気テープまたはハードディスクドライブなどの）磁気記憶媒体、または（ＣＤ、ＤＶＤ、またはＢｌｕ−ｒａｙ（登録商標）ディスクなどの）光記憶媒体である。
【００１８】
制御モジュール５０は、カメラ１４の動作を制御し、故障状態通知モジュール５２を制御する。制御モジュール５０は、カメラ１４によって撮影された計器群１２の画像データを受信する。制御モジュール５０は、車両の任意の適切なセンサまたは他の搭載制御モジュールから車両動作情報を受信することもできる。車両動作情報は、中央の指針盤２０の計器群１２、サブ指針盤２２Ａ−２２Ｄ、および、告知表示３０Ａ−３０Ｕによって表示される車両動作情報を含む。
【００１９】
制御モジュール５０は、カメラ１４によって撮影された画像における計器群１２の動作を、その期待される動作および以前の動作と比較して、故障状態を識別する。例えば、図２の方法１１０でさらに説明されるように、制御モジュール５０は、各指針盤２０、２２Ａ−２２Ｄ、および、各告知表示３０Ａ−３０Ｕの画像データを分析して、指針盤または告知表示が照明されており、期待される形状を有し、期待される色を有するか否かを決定する。制御モジュール５０は、例えば、すべての指針盤２０、２２Ａ−２２Ｄが、活性化され、その範囲内において移動し、かつ、すべての告知表示３０Ａ−３０Ｕが照明される、車両始動時の存在実証動作の時点を含む、任意の適切な時点でこの分析および比較を実行するように構成することができる。この分析は、車両の運転中に継続的に実行することもできる。
【００２０】
制御モジュール５０は、故障状態通知モジュール５２に、以下の場合に故障通知を生成するように指示する：指針盤または告知表示が期待されるように照明されていない場合；指針盤または告知表示が期待と一致しない不規則な形状を有する場合（これは、ディスプレイ画面による不適切な表示、または、計器群１２における部品の位置ずれを示す場合がある）；または、指針盤または告知表示が期待と一致しない不規則な色を有する場合（これは、ディスプレイ画面による不適切な表示、または、計器群１２における部品の位置ずれを示す場合がある）。故障状態通知モジュール５２によって生成される故障通知は、車室内の冗長的な表示画面上で運転者に伝えられる故障通知、車室内のスピーカによって生成される故障警告チャイム、および／または、任意の適切な方法で運転者に送信される故障メッセージ、例えば、運転者の携帯電子機器へのテキストメッセージ、および／または、電子メールメッセージの送信を含む、任意の適切な通知によって提供される。
【００２１】
図２は、車両運転情報を運転者に表示するための計器群１２の動作を監視するためのこの開示による方法１１０を示している。方法１１０は、制御モジュール５０および故障状態通知モジュール５２の動作に関する追加の詳細を含む。方法１１０は、告知表示３０Ａ−３０Ｕ、および／または、指針盤２０、２２Ａ−２２Ｄに対して個別に実行される。方法１１０は、告知表示３０Ａ−３０Ｕ、および、指針盤２０、２２Ａ−２２Ｄのそれぞれについて、または、告知表示３０Ａ−３０Ｕ、および、指針盤２０、２２Ａ−２２Ｄのうちの最も重要なものとして選択されたもののみに対して実行される。
【００２２】
方法１１０は、すべての告知表示３０Ａ−３０Ｕが活性化され（したがって照明されなければならない）、指針盤２０、２２Ａ−２２Ｄが活性化され（および、通常は照明される）、その可動範囲全体を移動するとき、例えば、車両始動時における存在実証動作の間に実行される。存在実証動作において方法１１０を実行することに代えて、または、それに加えて、方法１１０は、車両の動作中に継続的に実行されてもよい。例えば、制御モジュール５０は、５０ミリ秒から１００ミリ秒ごとに計器群１２の画像を撮影するようにカメラ１４に指示することができる。カメラ１４は、計器群１２全体の単一の画像を撮影するように構成することができ、そこから、制御モジュール５０は、様々な指針盤２０および２２Ａ−２２Ｄ、および、告知表示３０Ａ−３０Ｕが位置すると期待されている場所に位置する撮影された画像の部分（たとえば、撮影された画像の特定のピクセル）を分離する。
【００２３】
方法１１０の動作を、照明された場合に運転者に対してパーキングブレーキが締結されたことを知らせる告知表示３０Ａを例に、告知表示３０Ａ−３０Ｕのうちの例示的な１つの分析に関して詳細に説明する。方法１１０のブロック１１２で、制御モジュール５０は、パーキングブレーキライト３０Ａが存在すると期待される場所に対応する撮影画像の領域から、カメラ１４によって撮影され二値化されたカメラデータを処理する。制御モジュール５０は、照明されたこの領域を探索する。探索領域すべてが黒である（すなわち、告知表示３０Ａのどの部分も照明されていない）場合、方法１１０はブロック１１６に進み、制御モジュール５０は、告知表示３０Ａがオフであると判断し、告知表示３０ＡにＮｅｗＳｔａｔｅはＯｆｆに等しいこと（ＮｅｗＳｔａｔｅ＝Ｏｆｆ）を割り当てる。方法１１０は、ブロック１１６からブロック１１８に進み、ここでＮｅｗＳｔａｔｅがブロック１５０に送信され、これについてはこの細書でさらに説明される。ブロック１１４で、制御モジュール５０が検索領域すべてが黒ではないと判断した場合、方法１１０はブロック１２０に進む。
【００２４】
ブロック１２０で、制御モジュール５０は、照明された告知表示３０Ａの形状を分析し、照明された告知表示３０Ａの形状を、制御モジュール５０に格納された告知表示３０Ａの期待される形状と比較する。期待される形状は、告知表示３０Ａが完全に照明された場合に期待される形状である。カメラ１４によって撮影された告知表示３０Ａの形状が期待される形状と一致しない場合、方法１１０はブロック１２２に進む。ブロック１２２で、制御モジュール５０は、形状誤差が発生したと判断し、告知表示３０ＡにＮｅｗＳｔａｔｅはＳｈａｐｅ  Ｅｒｒｏｒに等しいこと（ＮｅｗＳｔａｔｅ＝Ｓｈａｐｅ  Ｅｒｒｏｒ）を割り当てる。方法１１０は、ブロック１２２からブロック１１８に進む。この明細書で説明するように、ＮｅｗＳｔａｔｅはブロック１５０に送信され、ブロック１５０でロードされる。ブロック１２０で、カメラ１４によって撮影された告知表示３０Ａの形状が期待される形状と一致する場合、方法１１０はブロック１２４に進むか、直接にブロック１２８に進む。
【００２５】
ブロック１２４で、制御モジュール５０は、カメラ１４によって撮影された告知表示３０Ａの色を、照明時の告知表示３０Ａの期待される色（制御モジュール５０に格納されている）と比較する。カメラ１４によって撮影された色が期待される色と一致しない場合、方法１１０はブロック１２６に進む。ブロック１２６で、制御モジュール５０は、照明された告知表示３０Ａは色誤差を有すると判断し、告知表示３０ＡにＮｅｗＳｔａｔｅはＣｏｌｏｒ  Ｅｒｒｏｒに等しいこと（ＮｅｗＳｔａｔｅ＝Ｃｏｌｏｒ  Ｅｒｒｏｒ）を割り当て、ブロック１１８および１５０に送信する。ブロック１２４で、制御モジュール５０が、カメラ１４によって撮影された告知表示３０Ａの色が期待される色と一致すると判断した場合、方法１１０はブロック１２８に進む。ブロック１２８で、制御モジュール５０は、告知表示３０Ａが適切に照明されていることを決定し、告知表示３０ＡにＮｅｗＳｔａｔｅはＯｎに等しいこと（ＮｅｗＳｔａｔｅ＝Ｏｎ）を割り当てる。方法１１０は、ブロック１２８からブロック１１８に進む。
【００２６】
ブロック１５０で新しい状態（ＮｅｗＳｔａｔｅ［１．．Ｘ］）がロードされた後、方法１１０はブロック１５２に進む。ブロック１５２で、制御モジュール５０は、ロードされた新しい状態（ＮｅｗＳｔａｔｅ［１．．Ｘ］）を、ブロック１５０で以前にロードされた状態（ＰｒｅｖＳｔａｔｅ［１．．Ｘ］）と比較する。以前にロードされた状態は、メーカーから出荷されたときの告知表示の状態である可能性があり、これは、告知表示３０Ａが適切に機能していることを確認することである。言い換えれば、最初の「以前の」状態は、メーカーによって確認およびテストされた完全に機能する状態である。後続の「前の状態」は、例えば、方法１１０を使用して制御モジュール５０によって検知された告知表示の状態である。
【００２７】
新しい状態が、ブロック１５０で以前にロードされた状態に等しい場合、方法１１０はブロック１５４に進む。ブロック１５４で、方法１１０が繰り返されるときに、さらに新しい状態を可能とするために、上記の新しい状態を、以前の状態に割り当てる。方法１１０は、ブロック１５４からブロック１５６に進む。ブロック１５６で、制御モジュール５０は、告知表示３０Ａのカメラ１４によって撮影された追加の画像データ１５６をロードするために、５０ｍｓから１００ｍｓなどの所定の期間待機する。所定の期間が終了した後、方法１１０はブロック１１２に戻る。
【００２８】
ブロック１５２で、制御モジュール５０が、新しい状態が、ブロック１５０においてロードされた以前の状態に等しくないと判断した場合、方法１１０はブロック１５８に進む。ブロック１５８で、制御モジュール５０は、割り込みを送信し、新しい状態をブロック１５４およびブロック１６０に出力する。方法１１０は、ブロック１５４から、上述のようにブロック１５６に進む。
【００２９】
ブロック１６０で、制御モジュール５０は、故障状態通知モジュール５２に指示して、適切な故障通知を生成して、告知表示３０Ａが期待したとおりに機能していないことを運転者に知らせる。例えば、故障通知は車室の適切な位置にある冗長的なディスプレイに表示される。故障通知は、運転者に送信される警告チャイム、および／または、障害メッセージの形式でもよい。故障メッセージは、運転者の個人用電子デバイス（スマートフォンやタブレットなど）や、運転者のメールアカウントへのテキストメッセージなど、適切な方法で運転者に伝えられる。
【００３０】
いくつかの用途において、制御モジュール５０は、カメラ１４によって撮影された画像に取り込まれた計器群１２の動作を、様々な車両センサから制御モジュール５０に入力される「リアルタイム」の車両動作情報と比較するように構成され得る。制御モジュール５０が、画像に取り込まれた計器群１２の動作と、車両動作情報との間の不一致を識別すると、制御モジュール５０は、故障状態通知モジュール５２に故障通知を生成するよう指示する。例えば、制御モジュール５０は、燃料タンクが満タンの５０％であることを示す燃料レベルセンサからの信号を受信しているにもかかわらず、カメラ１４によって撮影された画像が、燃料指針盤２２Ｄが満タンの１００％位置にあることを示す場合、制御モジュール５０は、故障通知を生成するように故障状態通知モジュール５２に指示する。
【００３１】
告知表示３０Ａ−３０Ｕに関して、例えば、制御モジュール５０が、１つ以上のタイヤの圧力が所定の臨界レベルを下回ったことを示す車両タイヤ圧力センサからの信号を受信しているが、タイヤ空気圧警告告知表示３０Ｋの画像は、告知表示３０Ｋが照明されていないこと、期待される形状と一致しない形状であること、および／または、所定の期待される色と一致しない色を持っていることを示している場合、制御モジュール５０は、故障状態通知モジュール５２に故障通知を生成するよう指示する。他の告知表示３０Ａ−３０Ｊおよび３０Ｌ−３０Ｕのいずれかが、それらが割り当てられた車両状態が存在するときに照明されない場合、または、告知表示が照明されているが、期待される形状、および／または、色に一致しない形状、および／または色を有している場合、制御モジュール５０は、故障状態通知モジュール５２に、故障通知を生成するよう指示する。
【００３２】
図３は、車両運転情報を運転者に表示するための計器群１２の動作を監視するためのこの開示による他の方法を示している。ブロック２１２を参照すると、カメラ１４は、既知の表示画像に対して制御モジュール５０により校正される。カメラ１４が校正された後、方法２１０はブロック２１４に進む。ブロック２１４で、制御モジュール５０は、カメラ１４を制御して、計器群１２を５０ミリ秒ごとに、または他の適切な間隔で撮影して、二値化する。方法１１０は、ブロック２１４からブロック２１６に進む。ブロック２１６で、制御モジュール５０は、分析されるべきカメラ１４によって撮影された画像を分解し、格納する。例えば、告知表示３０Ａ−３０Ｕのそれぞれの画像、および／または、指針盤２０、２２Ａ−２２Ｄのそれぞれの画像は、分析するために分解および格納されてもよい。
【００３３】
分析される各告知表示３０Ａ−３０Ｕ、および／または、各指針盤２０Ａ、２２Ａ、２２Ｄについて、制御モジュール５０は、ブロック２２２で制御モジュール５０のメモリから期待される画像データをロードする。期待される照明データ、期待される色データ、期待される形状データなど、期待される画像データのさまざまなパラメータがロードされる（ブロック２２２を参照）。ブロック２２４を参照すると、分析される告知表示のそれぞれについて、制御モジュール５０は、カメラ１４によって撮影された実際の分解された二値化画像データをロードする。例示的な実際の分解された二値化画像データは、ブロック２２２のロードされた期待される画像データに対応する。例示的な実際に分解された二値化画像データには、実際の照明データ、実際の色データ、および実際の形状データが含まれる。
【００３４】
ブロック２３０を参照すると、制御モジュール５０は、ロードされた期待される画像データ（ブロック２２２を参照）を、ロードされた実際に分解された二値化画像データ（ブロック２２４を参照）と比較する。ブロック２３０で、制御モジュール５０が、期待される照明データが、実際の照明データに等しいと判定すると、制御モジュール５０は、照明誤差が偽に等しい（Ｔ．ｉｌｌｕｍｉＥｒｒ＝ＦＡＬＳＥ）と判定する。期待される照明データが実際の照明データに等しくない場合、制御モジュール５０は、照明誤差が真に等しい（Ｔ．ｉｌｌｕｍｉＥｒｒ＝ＴＲＵＥ）と判断する。制御モジュール５０が、期待される色データが実際の色データに等しいと判定すると、制御モジュール５０は、色誤差が偽に等しい（Ｔ．ｃｏｌｏｒＥｒｒ＝ＦＡＬＳＥ）と判定する。期待される色データが実際の色データと等しくない場合、制御モジュール５０は、色誤差が真に等しい（Ｔ．ｃｏｌｏｒＥｒｒ＝ＴＲＵＥ）と判断する。制御モジュール５０が、期待される形状データが実際の形状データに等しいと判定すると、制御モジュール５０は、形状誤差が偽に等しい（Ｔ．ｓｈａｐｅＥｒｒ＝ＦＡＬＳＥ）と判定する。期待される形状データが実際の形状データと等しくない場合、制御モジュール５０は、形状誤差が真に等しい（Ｔ．ｓｈａｐｅＥｒｒ＝ＴＲＵＥ）と判断する。
【００３５】
ブロック２４０で、制御モジュール５０は、告知表示３０Ａ−３０Ｕのすべて（およびオプションで指針盤（２０、２２Ａ−２２Ｄ）のすべて）がチェックされたかどうかを判定する。それらがチェックされていない場合、方法２１０は、すべての告知表示３０Ａ−３０Ｕ、および、オプションですべての指針盤２０、２２Ａ−２２Ｄがチェックされるまでブロック２２０に戻る。すべてがチェックされると、方法２１０はブロック２４２に進む。ブロック２４２で、制御モジュール５０は、ブロック２３０で示された診断用のフラグに基づいて診断用報告を生成する。診断用報告に基づいて、故障状態通知モジュール５２は故障通知を生成する。冗長的なディスプレイの活性化、故障警告チャイムの生成、および／または、故障メッセージの生成など、任意の適切な故障通知を生成することができる（ブロック２４４を参照）。ブロック２４４から、方法２１０はブロック２１２またはブロック２１４のいずれかに戻る。
【００３６】
システム１０および方法１１０および２１０は、様々な車両システムの公差を考慮するように構成されている。例示的な公差には、カメラ１４の位置に対して監視される、指針盤２０、２２Ａ−２２Ｄの位置、および告知表示３０Ａ−３０Ｕの位置が含まれる。具体的な公差は、限定的ではなく、以下を含む：部品搭載公差（Ｘ、Ｙ、Ｚ）、貼付物公差（サイズ、位置、回転、色）、ディスプレイ公差（ピクセルの欠落、回転、色ずれ）、カメラ公差（魚眼レンズ）、および、車両の動的公差（例えば、振動）。公差を考慮するために、指針盤２０、２２Ａ−２２Ｄ、または、告知表示３０Ａ−３０Ｕが配置されると期待される位置に、カメラ１４によって撮影された画像の部分を探索するとき、および、抽出するときに、制御モジュール５０は、カメラ１４によって撮影された対象物画像から対象物データを抽出するために、絶対誤差の蓄積（ＳＡＤ）、および／または、エッジ検出フィルタ、または、その他の適切な画像処理技術のような位置校正のための既知のランドマークを使用する。この校正は、システム１０の製造業者によって実行されるか、車両始動プロセスの一部として含まれ、したがって車両が始動されるたびに実行される場合がある。
【００３７】
したがって、この開示は、告知表示３０Ａ−３０Ｕの期待される形状、および／または、色、または指針盤２０、２２Ａ−２２Ｄ、および／または、車両の現在の動作条件に基づいて、カメラ１４によって撮影された計器群１２の動作と、計器群１２の期待される動作との間に不一致がある場合に、車両の運転者に通知するシステム１０および方法１１０および方法２１０を有利に提供する。これにより、運転手が告知表示３０Ａ−３０Ｕまたは指針盤２０、２２Ａ−２２Ｄを自分で手動で検査する必要がなくなる。
【００３８】
上述の複数の実施形態の説明は、例示および説明のために提供されたものである。この開示は、網羅的であること、または開示を限定することを意図するものではない。特定の実施形態の個々の要素または特徴は、一般にその特定の実施形態に限定されないが、適用可能であれば、交換可能であり、特に示されていないまたは記載されていない場合でも選択された実施形態で使用できる。同じことは、多様に変化することができる。そのような変形は、開示からの逸脱とみなされるべきではなく、そのような変更のすべては、この開示の範囲内に含まれることが意図されている。
【００３９】
例示的な実施形態は、この開示が完全であるために提供されており、その範囲を当業者に完全に伝える。この開示の実施形態の完全な理解を提供するために、特定の構成部品、デバイス、および方法の例など、多くの具体的な詳細が示されている。特定の詳細を採用する必要はなく、例示的な実施形態は多くの異なる形態で実施することができ、いずれもこの開示の範囲を限定するものと解釈すべきでないことは、当業者には明らかであろう。いくつかの例示的な実施形態において、周知のプロセス（方法における段階）、周知のデバイス構造、および周知の技術は詳細には記載されていない。
【００４０】
この明細書で使用される用語は、特定の例示的な実施形態を説明する目的のためだけであり、限定することを意図するものではない。この明細書で使用されるように、単数形（定冠詞および不定冠詞）は、文脈が他に明白に示さない限り、複数形も含むことが意図されている。用語「備える」、「有する」、「含む」、および「持つ」は、包括的であり、従って、記載された特徴、整数、ステップ、操作、要素および／または構成部品の存在を特定するが、ひとつまたは複数の他の特徴、整数、ステップ、動作、要素、構成部品、および／またはそれらのグループの追加を除外しない。この明細書に記載の方法のステップ、プロセス、および動作は、特定の順序として具体的に特定されない限り、必ずしも説明または図示された特定の順序を必要とすると解釈されるべきではない。付加的または代替的なステップを用いることが可能であることも理解されるべきである。
【００４１】
ある要素または層が「上にある」、「連結されている」、「接続されている」または「結合されている」と言及されている場合、それは、他の要素、または他の層に対して、直接的に上に、連結され、接続され、または結合されていることがあり、さらに、介在要素または介在層が存在していることがある。対照的に、ある要素が別の要素または層に「直接的に上に」、「直接的に連結されている」、「直接的に接続されている」または「直接的に結合されている」と言及されている場合、介在要素または介在層は存在しない。要素間の関係を説明するために使用される他の言葉は、同様のやり方で（例えば、「間に」対「直接的に間に」、「隣接する」対「直接的に隣接する」など）解釈されるべきである。この明細書で使用される場合、用語「および／または」は、関連する列挙された１つまたは複数の項目に関する任意の組み合わせ、およびすべての組み合わせを含む。
【００４２】
第１、第２、第３などの用語は、様々な要素、構成部品、領域、層および／または区画を説明するために、この明細書で使用することができるが、これらの要素、構成部品、領域、層および／または区画はこれらの用語によって限定されるべきではない。これらの用語は、ある要素、構成部品、領域、層、または区画を、他の要素、構成部品、領域、層または区画から区別するためにのみ使用されてもよい。「第１」、「第２」および他の数値的な用語は、ここで使用される場合、文脈によって明白に示されない限り、手順または順序を意味するものではない。したがって、以下に説明する第１の「要素、構成部品、領域、層または区画」は、例示的な実施形態の教示から逸脱することなく、第２の「要素、構成部品、領域、層または区画」と呼ぶことができる。
【００４３】
空間的に相対的な用語「内」、「外」、「裏」、「下」、「低」、「上」、「高」などは、図示されているような、ひとつの要素または特徴の他の要素または特徴に対する関係を説明する記載を容易にするためにここでは利用されている。空間的に相対的な用語は、図に示されている向きに加えて、使用中または操作中のデバイスのさまざまな向きを包含することを意図している場合がある。例えば、図中の装置がひっくり返されている場合、他の要素または機能の「下」または「裏」と記載された要素は、他の要素または機能の「上」に向けられる。したがって、例示された用語「下」は、上および下の両方の方向を含むことができる。この装置は、他の方向に向いていてもよく（９０度または他の向きに回転されてもよい）、この明細書で使用される空間的に相対的な記述子はそれに応じて解釈される。
【図１】
2021501081.tif 000003
【図２】
2021501081.tif 000004
【図３】
2021501081.tif 000005
【国際調査報告】
2021501081.tif 000006
2021501081.tif 000007