(57)【要約】【課題】  記録媒体への書き込み不良による表示装置の誤表示を検出しその報知を可能とする画像の誤表示検出方法、画像の誤表示検出装置及び画像表示システムを提供すること。【解決手段】  本発明に係る運転支援システム１の制御部２は、カメラ３，４からの画像データに基づいて、モニタ１２に画像を表示する過程で、画像データをＦＩＦＯメモリ８、ＳＲＡＭ９，１０に書き込む際に、画像データの水平同期信号又は垂直同期信号の帰線期間のタイミングに合わせてＦＩＦＯメモリ８、ＳＲＡＭ９，１０に誤表示検出用データを書き込む。つぎに画像データをＦＩＦＯメモリ８、ＳＲＡＭ９，１０から読み出す際に、誤表示検出用データを適正に読み出すことができるか否かを判断し、適正に読み出すことができないと判断した場合にＦＩＦＯメモリ８、ＳＲＡＭ９，１０への画像データの書き込みが不良であるとしてモニタ１２における画像の誤表示を検出する。【選択図】      図５
2006050189.tif 000002
【特許請求の範囲】
【請求項１】
撮像装置からの画像データに基づいて表示装置に画像を表示する過程で、前記画像データを記録媒体に書き込む際に、前記画像データの水平同期信号又は垂直同期信号の帰線期間のタイミングに合わせて前記記録媒体に誤表示検出用データを書き込み、前記画像データを前記記録媒体から読み出す際に、前記誤表示検出用データを適正に読み出すことができるか否かを判断し、適正に読み出すことができないと判断した場合に前記記録媒体への前記画像データの書き込みが不良であるとして前記表示装置における画像の誤表示を検出することを特徴とする画像の誤表示検出方法。
【請求項２】
前記誤表示検出用データはフィールドの特定が可能なデータであって、前記画像データを前記記録媒体から読み出す際に読み出した誤表示検出用データが前記画像データのフィールドと同じフィールドを示すデータであるときに前記誤表示検出用データを適正に読み出すことができると判断することを特徴とする請求項１に記載の画像の誤表示検出方法。
【請求項３】
撮像装置からの画像データに基づいて表示装置に画像を表示する過程で前記画像データを記録媒体に書き込む際に、前記画像データの水平同期信号又は垂直同期信号の帰線期間のタイミングに合わせて前記記録媒体に誤表示検出用データを書き込む誤表示検出用データ書込手段と、
前記誤表示検出用データ書込手段によって書き込まれた誤表示検出用データを、前記画像データを前記記録媒体から読み出す際に適正に読み出すことができるか否かを判断する適正読出判断手段と、
前記適正読出判断手段によって誤表示検出用データを適正に読み出すことができないと判断された場合に前記記録媒体への前記画像データの書き込みが不良であるとして前記表示装置における画像の誤表示を判断する誤表示判断手段と
を備えたことを特徴とする画像の誤表示検出装置。
【請求項４】
前記誤表示検出用データはフィールドの特定が可能なデータであって、
前記適正読出判断手段は、前記画像データを前記記録媒体から読み出す際に読み出した誤表示検出用データが前記画像データのフィールドと同じフィールドを示すデータであるときに適正に読み出すことができると判断することを特徴とする請求項３に記載の画像の誤表示検出装置。
【請求項５】
前記記録媒体はＳＲＡＭであって、
前記誤表示検出用データ書込手段は、誤表示検出用データを前記ＳＲＡＭ内の画像データの書込領域とは異なる領域に書き込むことを特徴とする請求項３又は請求項４に記載の画像の誤表示検出装置。
【請求項６】
前記記録媒体はＦＩＦＯメモリであって、
前記誤表示検出用データ書込手段は、誤表示検出用データを前記ＦＩＦＯメモリ内の画像データと画像データとの間の帰線期間にあたるデータ空白領域に挿入して書き込むことを特徴とする請求項３又は請求項４に記載の画像の誤表示検出装置。
【請求項７】
請求項３乃至請求項６のいずれか１項に記載の画像の誤表示検出装置を有し、前記誤表示判断手段によって画像の誤表示が判断された場合に前記表示装置又は音声出力装置を介して警告を発することを特徴とする画像表示システム。
【請求項８】
車両に搭載されてドライバーの運転を支援することを特徴とする請求項７に記載の画像表示システム。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、撮像装置が撮像した画像を表示装置に表示する際の誤表示を検出する画像の誤表示検出方法、画像の誤表示検出装置及び画像表示システムに関する。
【背景技術】
【０００２】
従来より、画像表示システムとして、例えば車両に搭載したカメラ等の撮像装置で同車両の周辺を撮像し、この撮像した映像を車室内のモニタ等の表示装置に映し出すことによりドライバーの運転支援を行うシステムが知られている。このような運転支援システムとしては、例えば車両後方に取り付けられたカメラからの映像によって駐車等の際に車両後方の視界を補助するものや、車両側方に取り付けられたカメラからの映像に基づいて車両後方からの車の接近を報知するもの等が考案されている（例えば、特許文献１参照）。
【０００３】
ところで、このようなカメラの映像を利用するシステムでは、１フィールド程度の画像データを格納可能なメモリ（記録媒体）が内蔵されていることがある。このメモリはカメラからの画像データの入力に伴って順次書き換えを行うことにより、常に最新の画像データを格納するようになっており、このメモリに格納された画像データに基づいて随時リアルタイムの映像がモニタに映し出される。
【０００４】
しかしながら、このようなシステムでは、メモリの故障等なんらかの原因で一旦そのメモリに新しい画像データが書き込まれなくなるとメモリ内の画像データが更新されなくなる。したがって、モニタにリアルタイムの映像が表示されず、かわりにそれ以前の映像が繰り返されて静止映像が映し出されるというようなことが起こる。このようなモニタ上の誤表示が発生しているときは、ドライバーが判断を迷わないようにドライバーに逸早くそのことを認識させて、ドライバーがモニタ上の映像に頼ることなく運転できるように促すことができれば、より高い安全性を確保することが可能となる。
【特許文献１】特開平１１−３３４４７０号公報
【発明の開示】
【発明が解決しようとする課題】
【０００５】
本発明は、このような問題に鑑みてなされたもので、記録媒体への書き込み不良による表示装置の誤表示を検出しその報知を可能とする画像の誤表示検出方法、画像の誤表示検出装置及び画像表示システムを提供することを課題としている。
【課題を解決するための手段】
【０００６】
このような課題を解決するために、請求項１に記載の発明は、撮像装置からの画像データに基づいて表示装置に画像を表示する過程で、前記画像データを記録媒体に書き込む際に、前記画像データの水平同期信号又は垂直同期信号の帰線期間のタイミングに合わせて前記記録媒体に誤表示検出用データを書き込み、前記画像データを前記記録媒体から読み出す際に、前記誤表示検出用データを適正に読み出すことができるか否かを判断し、適正に読み出すことができないと判断した場合に前記記録媒体への前記画像データの書き込みが不良であるとして前記表示装置における画像の誤表示を検出する画像の誤表示検出方法を特徴とする。
【０００７】
請求項２に記載の発明は、請求項１に記載の発明において、前記誤表示検出用データはフィールドの特定が可能なデータであって、前記画像データを前記記録媒体から読み出す際に読み出した誤表示検出用データが前記画像データのフィールドと同じフィールドを示すデータであるときに前記誤表示検出用データを適正に読み出すことができると判断することを特徴とする。
【０００８】
請求項３に記載の発明は、撮像装置からの画像データに基づいて表示装置に画像を表示する過程で前記画像データを記録媒体に書き込む際に、前記画像データの水平同期信号又は垂直同期信号の帰線期間のタイミングに合わせて前記記録媒体に誤表示検出用データを書き込む誤表示検出用データ書込手段と、前記誤表示検出用データ書込手段によって書き込まれた誤表示検出用データを、前記画像データを前記記録媒体から読み出す際に適正に読み出すことができるか否かを判断する適正読出判断手段と、前記適正読出判断手段によって誤表示検出用データを適正に読み出すことができないと判断された場合に前記記録媒体への前記画像データの書き込みが不良であるとして前記表示装置における画像の誤表示を判断する誤表示判断手段とを備えた画像の誤表示検出装置を特徴とする。
【０００９】
請求項４に記載の発明は、請求項３に記載の発明において、前記誤表示検出用データはフィールドの特定が可能なデータであって、前記適正読出判断手段は、前記画像データを前記記録媒体から読み出す際に読み出した誤表示検出用データが前記画像データのフィールドと同じフィールドを示すデータであるときに適正に読み出すことができると判断することを特徴とする。
【００１０】
請求項５に記載の発明は、請求項３又は請求項４に記載の発明において、前記記録媒体はＳＲＡＭであって、前記誤表示検出用データ書込手段は、誤表示検出用データを前記ＳＲＡＭ内の画像データの書込領域とは異なる領域に書き込むことを特徴とする。
【００１１】
請求項６に記載の発明は、請求項３又は請求項４に記載の発明において、前記記録媒体はＦＩＦＯメモリであって、前記誤表示検出用データ書込手段は、誤表示検出用データを前記ＦＩＦＯメモリ内の画像データと画像データとの間の帰線期間にあたるデータ空白領域に挿入して書き込むことを特徴とする。
【００１２】
請求項７に記載の発明は、請求項３乃至請求項６のいずれか１項に記載の画像の誤表示検出装置を有し、前記誤表示判断手段によって画像の誤表示が判断された場合に前記表示装置又は音声出力装置を介して警告を発する画像表示システムを特徴とする。
【００１３】
請求項８に記載の発明は、請求項７に記載の発明において、車両に搭載されてドライバーの運転を支援することを特徴とする。
【発明の効果】
【００１４】
本発明によれば、記録媒体への書き込み不良による表示装置の誤表示を検出しその報知を可能とする画像の誤表示検出方法、画像の誤表示検出装置及び画像表示システムを提供することができる。
【発明を実施するための最良の形態】
【００１５】
以下、図面を参照して本発明を実施するための最良の形態について説明する。図１は、本実施の形態に係る画像の誤表示検出装置としての制御部を備えた運転支援システム（画像表示システム）の構成を模式的に示すブロック図である。この運転支援システム１は、制御部２と、車両の右側方及び左側方からの画像を取り込むカメラ（撮像装置）３，４と、カメラ３，４からの画像データ（画像信号）をそれぞれＡ／Ｄ変換するデコーダ５，６と、カメラ３からの画像データとの同期をとるためにカメラ４側の伝達系統７に設けられたＦＩＦＯメモリ（記録媒体）８と、デコーダ５，６を経た画像データをそれぞれ格納するＳＲＡＭ（記録媒体）９，１０と、ＳＲＡＭ９，１０から読み込まれた画像データをＤ／Ａ変換するエンコーダ１１と、エンコーダ１１を経た画像データを映像として表示するモニタ（表示装置）１２とを備えている。
【００１６】
運転支援システム１は、カメラ３，４で車両（図示略）の周辺を撮像し、この撮像した映像を車室内のモニタ１２に映し出すことによりドライバーの運転支援を行うシステムであり、制御部２はこの運転支援システム１全体の動作制御を行うとともに、モニタ１２に映像（画像）の誤表示がされていないかを検出するようになっている。
【００１７】
カメラ３，４は、例えばＣＣＤカメラであり、それぞれ車両の右側方及び左側方に設置され、車両の側方から後方に向けて撮像するようになっている。カメラ３，４で撮像された画像の画像データは、それぞれの伝達系統１３，７を通ってデコーダ５，６でＡ／Ｄ変換され、さらにカメラ４からの画像データはＦＩＦＯメモリ８に一旦格納されてカメラ３からの画像データと同期を取りながら、それぞれＳＲＡＭ９，１０に入力される。
【００１８】
ＳＲＡＭ９，１０は、１フィールド程度の画像データを格納することができ、カメラ３，４からの画像データの入力に伴って順次書き換えを行うことにより、常に最新の画像データを格納するようになっている。
【００１９】
ＳＲＡＭ９，１０は、図２に示すように制御部２と接続されて制御される。同図において、符号１５はアドレスバス（ＡＤＲ）、１６は双方向データバス（ＤＡＴ）、１７は書き込み信号（Write Enable信号、ＷＥ）、１８は読み込み信号（Output Enable信号、ＯＥ）をそれぞれ示す。
【００２０】
図３（ａ）の例で示すように、制御部２の制御によってＷＥ１７がハイレベルになると、ＳＲＡＭ９，１０に画像データが書き込まれ（例えばアドレス１に１６ビットデータＡＡＡＡｈが、またアドレス２に５５５５ｈが書き込まれる。）、ＯＥ１８がハイレベルになると、ＳＲＡＭ９，１０から画像データが読み出される（例えば、アドレス１からＡＡＡＡｈが、またアドレス２から５５５５ｈが読み出される。）。
【００２１】
なお、カメラ４側の伝達系統７に設けられたＦＩＦＯメモリ８は、入力された順番に従って画像データの出力を行うメモリであり、新しい画像データが一番最後に格納されるようになっている。ＦＩＦＯメモリ８は、図４に示すように制御部２と接続されて制御される。同図において、符号１９は入力データバス（ＤＩＮ）、２０は出力データバス（ＤＯＵＴ）、２１は書き込み信号（Write Enable信号、ＷＥ）、２２は読み込み信号（Read Enable信号、RＥ）、２３は書き込みポインタリセット信号（Reset Write信号、ＲＳＴＷ）、２４は読み込みポインタリセット信号（Reset Read信号、ＲＳＴＲ）をそれぞれ示す。このＦＩＦＯメモリ８も、ＳＲＡＭ９，１０と同様に、制御部２の制御によってＷＥ２１がハイレベルになると新たな画像データが書き込まれ、ＲＥ２２がハイレベルになると格納してある画像データが読み出される。
【００２２】
カメラ４からの画像データがこのＦＩＦＯメモリ８に一旦格納された後カメラ３からの画像データに同期した形で出力されることにより、両画像データは互いに同期してＳＲＡＭ９，１０に格納される。ＳＲＡＭ９，１０に格納された画像データは、制御部２によって読み出されて必要に応じて画像処理された後にエンコーダ１１でＤ／Ａ変換されてモニタ１２に映像として表示される。
【００２３】
モニタ１２は、例えばＬＣＤ等のディスプレイであって、車室内のドライバーが視認しやすい位置、例えばインストルメントパネル等に設置されている。このモニタ１２は、カメラ３，４からの画像のうち、一方の画像のみを表示したり、表示画面を分割等して両方の画像をそれぞれ表示したりするようになっており、このモニタ１２の表示画面の切り換えは制御部２の制御によって行われる。
【００２４】
制御部２は、上述のように、ＦＩＦＯメモリ８及びＳＲＡＭ９，１０への書き込み・読み出しや画像処理等運転支援システム１全体の動作制御を行う。また、モニタ１２に映像の誤表示がされていないかを検出するようになっている。すなわち、例えば、図３（ｂ）の例で示すように、何らかの理由（例えば、半田ショート等）でＷＥ１７がグランド（０Ｖ）レベルのままになってしまったとすると、ＳＲＡＭ９，１０に画像データが書き込まれなくなる（例えば１６ビットデータＡＡＡＡｈ及び５５５５ｈがアドレス１、アドレス２に書き込まれなくなる。）。つぎに、ＯＥ１８がハイレベルになると、ＳＲＡＭ９，１０には新たな画像データが書き込まれていないので、ＳＲＡＭ９，１０に既に格納されていた画像データが読み出されることになり（例えば、アドレス１、アドレス２から既に格納されていたデータＸＸＸＸｈが読み出される。）、この動作が繰り返される。
【００２５】
このように、カメラ３，４から画像データが取り込まれているにもかかわらず、故障等なんらかの原因でＦＩＦＯメモリ８、ＳＲＡＭ９，１０にその新しい画像データが書き込まれなくなると、そのメモリ内の画像データが更新されなくなる。したがって、モニタ１２にリアルタイムの映像が表示されず、かわりにそれ以前の映像が繰り返されて静止映像が映し出されてしまう。メモリの書き込み不良によってこのようなリアルタイムのものとは異なった映像（虚像）がモニタ１２から提供されていないか否か、すなわちモニタ１２において画像の誤表示が発生していないか否かを制御部２は検出するようになっている。
【００２６】
その検出にかかわる処理を図５を参照しながら説明すると、まずＮＴＳＣ規格ではインタレース方式をとり、奇数フィールドと偶数フィールドとで１つの画面（フレーム）を構成する。また、画像データには、各走査ラインの開始を示す水平同期信号（ＨＶＡＬＩＤ）と、各フィールドの開始を示す垂直同期信号（ＶＶＡＬＩＤ）とが含まれる。
【００２７】
そこで、運転支援システム１の制御部２は、まずＦＩＦＯメモリ８、ＳＲＡＭ９，１０に画像データを書き込む際そのメモリに、水平同期信号の各帰線期間（水平ブランキング期間）及び垂直同期信号の各帰線期間（垂直ブランキング期間）のタイミングで誤表示検出用の所定のデータを併せて書き込む（誤表示検出用データ書込手段）（Ｓ１）。ここで所定のデータは、その画像データが奇数フィールドのデータか偶数フィールドのデータかを識別（特定）可能な任意のデータとし、例えば奇数フィールドを示す誤表示検出用のデータをＹ１、偶数フィールドを示す誤表示検出用のデータをＹ２とする。そして、書き込む画像データのフィールドに合致した誤表示検出用の所定のデータを併せて書き込む。具体的には、書き込む画像データが奇数フィールドの場合はデータＹ１を併せて書き込み、書き込む画像データが偶数フィールドの場合はデータＹ２を併せて書き込むようにする。
【００２８】
また、水平同期信号及び垂直同期信号の各帰線期間のタイミングで書き込みを行うのは、これらの帰線期間中はメモリに書き込むべき画像データが存在しないため、その間に誤表示検出用のデータを書き込むことによりこれらの時間を有効に活用することができるからである。
【００２９】
例えば、書き込むメモリがＳＲＡＭ９，１０の場合は、そのメモリ内に画像データの書込領域とは別に誤表示検出用の所定のデータの書込領域を設け、その領域に各帰線期間毎に所定のデータを書き込むようにする。また書き込むメモリがＦＩＦＯメモリ８の場合は、帰線期間にあたる画像データと画像データとの間のデータが空白な領域に所定のデータを挿入して書き込むようにする。
【００３０】
つぎに、制御部２は、画像データをＦＩＦＯメモリ８、ＳＲＡＭ９，１０から読み出す際に、誤表示検出用の所定のデータを適性に読み出すことができるか否か、すなわち、その読み出すデータのフィールドに合致した誤表示検出用の所定のデータを読み出すことができるか否かを検証する（適正読出判断手段）（Ｓ２）。具体的には、読み出すデータが奇数フィールドの場合は奇数フィールドを示すデータＹ１を併せて読み出すことができるかどうか、読み出すデータが偶数フィールドの場合は偶数フィールドを示すデータＹ２を併せて読み出すことができるかどうかを制御部２は検証する。そして、読み出すデータのフィールドに合致した所定のデータを読み出すことができた場合は、そのメモリの書き込みが正常に行われたとして確認する。一方、読み出すデータのフィールドに合致した所定のデータを読み出すことができなかった場合（例えば、読み出すデータが偶数フィールドであるのに対して所定のデータが奇数フィールドを示すもの（データＹ１）であった場合）は、そのメモリの書き込みになんらかの支障があったとして、メモリの書き込み不良と確認する（誤表示判断手段）（Ｓ３）。そして、誤表示検出フラグを発行する（Ｓ４）。
【００３１】
誤表示検出フラグが発行された場合、モニタ１２に静止画像が表示されているとして、運転支援システム１は、例えばモニタ１２や車両に搭載された図示を略すスピーカ（音声出力装置）によってドライバーに警告を行うようにする。
【００３２】
この実施の形態に係る運転支援システム１の制御部２では、カメラ３，４からの画像データに基づいてモニタ１２に画像を表示する過程で、画像データをＦＩＦＯメモリ８、ＳＲＡＭ９，１０に書き込む際に、画像データの水平同期信号又は垂直同期信号の帰線期間のタイミングに合わせてＦＩＦＯメモリ８、ＳＲＡＭ９，１０に誤表示検出用の所定のデータを書き込み、画像データをＦＩＦＯメモリ８、ＳＲＡＭ９，１０から読み出す際に、誤表示検出用データを適正に読み出すことができるか否かを判断し、適正に読み出すことができないと判断した場合にＦＩＦＯメモリ８、ＳＲＡＭ９，１０への画像データの書き込みが不良であるとしてモニタ１２における画像の誤表示を検出するようにするので、この検出結果に基づいてモニタ１２上で警告の表示を行ったり、スピーカを介して音声による警告を行ったりしてドライバーに報知することにより、ドライバーに逸早く画像の誤表示を認識させることができる。これによって、ドライバーはモニタ１２に映し出させる映像に頼ることなく運転するようになるため、安全性をより高めることができ、ドライバーの運転支援に寄与することもできる。
【００３３】
なお、本発明は上述した実施の形態に限られるものではなく、例えば本実施の形態ではモニタ上で１画面表示と２画面分割表示の切り換えが可能であるとして説明したが、これには限定されず、例えば俯瞰画像等の表示が可能としてもよい。
【００３４】
また、本実施の形態では画像表示システムを運転支援システムとして説明したが、例えば建築物に設けられるセキュリティシステムや表示部を備えたカメラそのもの等、画像データに基づいて画像を表示するものであれば、これに限定されるものではない。
【図面の簡単な説明】
【００３５】
【図１】本発明の実施の形態に係る制御部を備えた運転支援システムの構成を模式的に示すブロック図である。
【図２】図１の制御部とＳＲＡＭとの接続構造を説明するための模式図である。
【図３】ＳＲＡＭにおける書き込み信号、読み込み信号と画像データとの関係を説明するためのタイミングチャートであり、（ａ）は正常に書き込み信号が入力された場合を示し、（ｂ）はなんらかの理由で書き込み信号が入力されなかった場合を示す。
【図４】図１の制御部とＦＩＦＯメモリとの接続構造を説明するための模式図である。
【図５】画像の誤表示の検出にかかわる処理の流れを示すフローチャートである。
【符号の説明】
【００３６】
１            運転支援システム（画像表示システム）
２            制御部（画像の誤表示検出装置）
３、４        カメラ（撮像装置）
８            ＦＩＦＯメモリ（記録媒体）
９、１０      ＳＲＡＭ（記録媒体）
１２          モニタ（表示装置）
Ｙ１、Ｙ２    誤表示検出用のデータ（誤表示検出用データ）
【図１】
2006050189.tif 000003
【図２】
2006050189.tif 000004
【図３】
2006050189.tif 000005
【図４】
2006050189.tif 000006
【図５】
2006050189.tif 000007