(57)【要約】【課題】記憶ユニットに残った古い画像が画像表示装置に表示されてしまうことを抑制できる画像処理装置及び画像表示システムを提供すること。【解決手段】画像処理装置７は、画像取得ユニット１１と、画像処理ユニット１３と、画像出力ユニット１５とを備える。画像処理ユニットは、記憶画像を一時的に記憶するように構成された記憶ユニット２５、２７を備える。記憶ユニットは、複数のメモリ領域と、メモリ領域の記憶内容を記憶画像により更新する第１更新処理を順番に行う第１更新ユニットと、メモリ領域の記憶内容を特定画像により更新する第２更新処理を順番に行う第２更新ユニットと、メモリ領域に記憶された画像を読み出す読み出し処理を順番に行う読み出しユニットとを備える。【選択図】図１
2020053799.tif 000002
【特許請求の範囲】
【請求項１】
撮像装置（３、５）から第１画像を取得するように構成された画像取得ユニット（１１）と、
前記第１画像に対し画像処理を行い、第２画像を生成するように構成された画像処理ユニット（１３）と、
前記第２画像を画像表示装置（９）に出力するように構成された画像出力ユニット（１５）と、
を備えた画像処理装置（７）であって、
前記画像処理ユニットは、前記第１画像又は前記第２画像である記憶画像を一時的に記憶するように構成された記憶ユニット（２５、２７）を備え、
前記記憶ユニットは、
複数のメモリ領域（Ｍ１、Ｍ２、Ｍ３）と、
前記メモリ領域の記憶内容を前記記憶画像により更新する第１更新処理を、前記複数のメモリ領域のそれぞれに対し、予め設定された順番に従って行うように構成された第１更新ユニット（２９）と、
前記メモリ領域の記憶内容を、特定の形態を有する特定画像により更新する第２更新処理を、前記複数のメモリ領域のそれぞれに対し、前記順番に従って行うように構成された第２更新ユニット（３１）と、
前記メモリ領域に記憶された画像を読み出す読み出し処理を、前記複数のメモリ領域のそれぞれに対し、前記順番に従って行うように構成された読み出しユニット（３３）と、を備え、
前記第２更新ユニットは、第２更新処理の対象となる前記メモリ領域よりも、前記順番において後である前記メモリ領域に対する前記第１更新処理が終了してから、前記第２更新処理を行うように構成された画像処理装置。
【請求項２】
請求項１に記載の画像処理装置であって、
前記第２更新ユニットは、最も新しく前記第１更新処理が終了した前記メモリ領域よりも、前記順番において１つ前の前記メモリ領域に対し、前記第２更新処理を行うように構成された画像処理装置。
【請求項３】
請求項１又は２に記載の画像処理装置であって、
前記読み出しユニットは、最も新しく前記第１更新処理が終了した前記メモリ領域に対し前記読み出し処理を行うよう構成され、
前記記憶画像は前記第２画像であり、  
前記画像出力ユニットは、前記読み出しユニットが読み出した前記第２画像を前記画像表示装置に出力するように構成された画像処理装置。
【請求項４】
請求項１〜３のいずれか１項に記載の画像処理装置であって、
前記読み出しユニットが読み出した前記記憶画像が、前記特定画像を含むか否かを判断するように構成された判断ユニット（３５）と、
前記判断ユニットの判断結果を反映する信号を出力するように構成された信号出力ユニット（３７）と、
をさらに備えた画像処理装置。
【請求項５】
請求項１〜４のいずれか１項に記載の画像処理装置と、
前記撮像装置と、
前記画像表示装置と、
を備える画像表示システム（１）。
【発明の詳細な説明】
【技術分野】
【０００１】
本開示は画像処理装置及び画像表示システムに関する。
【背景技術】
【０００２】
車両用の画像表示システムは、カメラと、画像処理装置と、ディスプレイとを備える。カメラは車両の周囲の風景を撮影し、画像を生成する。画像処理装置は、カメラが生成した画像に対し画像処理を行う。ディスプレイは、画像処理後の画像を表示する。ディスプレイは車室内に設置されている。画像表示システムは特許文献１に開示されている。
【先行技術文献】
【特許文献】
【０００３】
【特許文献１】特許第６３１１６４６号公報
【発明の概要】
【発明が解決しようとする課題】
【０００４】
画像処理装置は、一般的に、画像を一時的に記憶する記憶ユニットを備える。記憶ユニットの記憶内容は、定期的に、新たに生成された画像により更新される。カメラの故障等の原因により、記憶ユニットの記憶内容が更新されないと、古い画像が記憶ユニットに残る。そして、ディスプレイは、古い画像を表示することがある。ユーザは、ディスプレイに表示された古い画像を、最新の画像であると誤認識するおそれがある。また、画像処理装置は、記憶ユニットに残っている画像が表す風景が古いものであるのか最新のものであるのか判別できないので、古い画像が更新されずに記憶ユニットに残る現象（以下では更新異常とする）を検知できない。
【０００５】
本開示の一局面は、記憶ユニットに残った古い画像が画像表示装置に表示されてしまうことを抑制でき、更新異常を検知できる画像処理装置及び画像表示システムを提供することを目的とする。
【課題を解決するための手段】
【０００６】
本開示の一局面は、撮像装置（３、５）から第１画像を取得するように構成された画像取得ユニット（１１）と、前記第１画像に対し画像処理を行い、第２画像を生成するように構成された画像処理ユニット（１３）と、前記第２画像を画像表示装置（９）に出力するように構成された画像出力ユニット（１５）と、を備えた画像処理装置（７）であって、前記画像処理ユニットは、前記第１画像又は前記第２画像である記憶画像を一時的に記憶するように構成された記憶ユニット（２５、２７）を備え、前記記憶ユニットは、複数のメモリ領域（Ｍ１、Ｍ２、Ｍ３）と、前記メモリ領域の記憶内容を前記記憶画像により更新する第１更新処理を、前記複数のメモリ領域のそれぞれに対し、予め設定された順番に従って行うように構成された第１更新ユニット（２９）と、前記メモリ領域の記憶内容を、特定の形態を有する特定画像により更新する第２更新処理を、前記複数のメモリ領域のそれぞれに対し、前記順番に従って行うように構成された第２更新ユニット（３１）と、前記メモリ領域に記憶された画像を読み出す読み出し処理を、前記複数のメモリ領域のそれぞれに対し、前記順番に従って行うように構成された読み出しユニット（３３）と、を備え、前記第２更新ユニットは、第２更新処理の対象となる前記メモリ領域よりも、前記順番において後である前記メモリ領域に対する前記第１更新処理が終了してから、前記第２更新処理を行うように構成された画像処理装置である。
【０００７】
本開示の一局面である画像表処理装置によれば、第１更新処理が正常に行われなかった
場合、画像表示装置に表示される画像は、特定画像である。そのため、第１更新処理が正常に行われなかった場合でも、第１更新処理の前からメモリ領域に記憶されていた古い画像が画像表示装置に表示されてしまうことを抑制できる。その結果、ユーザが、画像表示装置に表示された古い画像を最新の画像であると誤認識してしまうことを抑制できる。  
【図面の簡単な説明】
【０００８】
【図１】画像表示システム１の構成を表すブロック図である。
【図２】第１記憶ユニット２５の構成を表す説明図である。
【図３】第１記憶ユニット２５が実行する処理を表すフローチャートである。
【図４】図４Ａは、水平同期信号異常が生じた場合にメモリ領域から読み出される画像３９を表す説明図であり、図４Ｂは、垂直同期信号異常が生じた場合にメモリ領域から読み出される画像４１を表す説明図である。
【図５】第１記憶ユニット２５が実行する処理を表すタイムチャートである。
【発明を実施するための形態】
【０００９】
本開示の例示的な実施形態を、図面を参照しながら説明する。
＜第１実施形態＞
１．画像表示システム１の構成
画像表示システム１の構成を、図１〜図２に基づき説明する。画像表示システム１は車両に搭載される車載システムである。図１に示すように、画像表示システム１は、右カメラ３と、左カメラ５と、画像処理装置７と、ディスプレイ９と、を備える。右カメラ３及び左カメラ５は撮像装置に対応する。ディスプレイ９は画像表示装置に対応する。
【００１０】
右カメラ３は、車両の右後側方の風景を撮像し、画像を生成する。左カメラ５は、車両の左後側方の風景を撮像し、画像を生成する。右カメラ３が生成した画像を第１画像ＲＰとする。左カメラ５が生成した画像を第１画像ＬＰとする。
【００１１】
右カメラ３及び左カメラ５は、それぞれ、所定時間ごとに繰り返し画像を生成する。以下では、右カメラ３が所定時間ごとに繰り返し生成した複数の第１画像ＲＰを区別するために、第１画像ＲＰ１、ＲＰ２、ＲＰ３、ＲＰ４・・・のように表すことがある。第１画像ＲＰ（ｉ＋１）は、第１画像ｉの次に生成した画像である。ｉは１以上の自然数である。
【００１２】
画像処理装置７は、画像取得ユニット１１と、画像処理ユニット１３と、画像出力ユニット１５と、メモリ１７と、電源部１９と、通信インターフェース（Ｉ／Ｆ）２１と、を備える。
【００１３】
画像取得ユニット１１は、右カメラ３から第１画像ＲＰを取得し、左カメラ５から第１画像ＬＰを取得する。画像取得ユニット１１は、第１画像ＲＰ及び第１画像ＬＰを画像処理ユニット１３に送る。
【００１４】
画像処理ユニット１３は、演算ユニット２３と、第１記憶ユニット２５と、第２記憶ユニット２７と、を備える。演算ユニット２３は、第１画像ＲＰに対し画像処理を行い、第２画像ＲＰを生成する。演算ユニット２３は、第１画像ＬＰに対し画像処理を行い、第２画像ＬＰを生成する。画像処理として、例えば、画像の一部を切り出す処理、視点が異なる画像に変換する処理、複数の画像を合成する処理等が挙げられる。
【００１５】
第１記憶ユニット２５は、第１画像ＲＰ及び第１画像ＬＰを一時的に記憶してから、第１画像ＲＰ及び第１画像ＬＰを演算ユニット２３に送る機能を有する。第１記憶ユニット２５はバッファとして機能する。
【００１６】
図２に示すように、第１記憶ユニット２５は、メモリ領域Ｍ１〜Ｍ３と、第１更新ユニット２９と、第２更新ユニット３１と、読み出しユニット３３と、判断ユニット３５と、信号出力ユニット３７と、を備える。メモリ領域Ｍ１〜Ｍ３は、メモリ１７により仮想的に実現される構成である。メモリ領域Ｍ１〜Ｍ３は複数のメモリ領域に対応する。
【００１７】
第２記憶ユニット２７は、第２画像ＲＰ及び第２画像ＬＰを一時的に記憶してから、第２画像ＲＰ及び第２画像ＬＰを画像出力ユニット１５に送る機能を有する。第２記憶ユニット２７はバッファとして機能する。
【００１８】
第２記憶ユニット２７は、基本的には、第１記憶ユニット２５と同様の構成を有する。ただし、第２記憶ユニット２７では、第１更新ユニット２９は、画像取得ユニット１１ではなく、演算ユニット２３と接続する。また、読み出しユニット３３は、演算ユニット２３ではなく、画像出力ユニット１５と接続する。
【００１９】
画像出力ユニット１５は、第２画像ＲＰ及び第２画像ＬＰを画像処理ユニット１３から受け取り、ディスプレイ９に出力する。
なお、画像表示システム１は、電子ミラーシステム、リアバックアップカメラ等に好適に適用できる。リアバックアップカメラは、車両の後退時に後方画像を表示する。
画像表示システム１を電子ミラーシステムに適用した場合、ディスプレイ９は車室内の左側と右側とに１つずつ配置される。画像出力ユニット１５が出力する第２画像ＲＰは右側のディスプレイ９に表示される。画像出力ユニット１５が出力する第２画像ＬＰは左側のディスプレイ９に表示される。
メモリ１７はメモリ領域Ｍ１〜Ｍ３を提供する。電源部１９は画像処理装置７に電源を供給する。通信インターフェース２１は車載通信バス２２と接続している。通信インターフェース２１は、車載通信バス２２を介して車速、シフトレンジ、ウインカー等を表す情報を取得し、取得した情報を画像処理ユニット１３に送る。送られた情報は、画像処理に用いられる。
【００２０】
ディスプレイ９は車室内に設置されている。ディスプレイ９は、画像出力ユニット１５から出力された画像を表示する。
２．画像表示システム１が実行する処理
（２−１）処理の概略
画像表示システム１が実行する処理の概略は以下のとおりである。右カメラ３は、所定時間ごと繰り返し第１画像ＲＰを生成する。左カメラ５は、所定時間ごとに繰り返し第１画像ＬＰを生成する。
【００２１】
画像取得ユニット１１は、第１画像ＲＰ及び第１画像ＬＰを順次取得し、画像処理ユニット１３に送る。第１記憶ユニット２５は、第１画像ＲＰ及び第１画像ＬＰを一時的に記憶してから、演算ユニット２３に送る。
【００２２】
演算ユニット２３は、第１画像ＲＰに対し画像処理を行い、第２画像ＲＰを生成する。演算ユニット２３は、第１画像ＬＰに対し画像処理を行い、第２画像ＬＰを生成する。第２記憶ユニット２７は、第２画像ＲＰ及び第２画像ＬＰを一時的に記憶してから、画像出力ユニット１５に送る。
【００２３】
画像出力ユニット１５は、第２画像ＲＰ及び第２画像ＬＰをディスプレイ９に出力する。ディスプレイ９は第２画像ＲＰ及び第２画像ＬＰを表示する。
（２−２）第１記憶ユニット２５が実行する処理
第１記憶ユニット２５が実行する処理を、図２〜図４に基づき説明する。第１記憶ユニ
ット２５は、第１画像ＲＰと第１画像ＬＰのそれぞれについて、同様の処理を行う。ここでは、第１画像ＲＰに対する処理を説明する。第１記憶ユニット２５が実行する処理において、第１画像ＲＰ及び第１画像ＬＰは記憶画像に対応する。
【００２４】
図３のステップ１では、第１更新ユニット２９が、メモリ領域Ｍ１の記憶内容を、第１画像ＲＰｉで更新する第１更新処理を行う。ｉは１以上の自然数である。
第１更新処理が正常に行われた場合、メモリ領域Ｍ１の記憶内容は第１画像ＲＰｉとなる。第１更新処理が正常に行われなかった場合、メモリ領域Ｍ１の記憶内容は、更新前の画像か、異常な画像となる。更新前の画像は、後述する特定画像ＰＸである。
【００２５】
ステップ２では、第２更新ユニット３１が、メモリ領域Ｍ３の記憶内容を、特定画像ＰＸにより更新する第２更新処理を行う。特定画像ＰＸとは、特定の形態を有する画像である。特定画像ＰＸは、ユーザが、第１画像ＲＰ及び第１画像ＬＰと区別できる画像である。特定画像ＰＸとして、例えば、色彩及び輝度が均一な画像（以下では均一画像とする）、規則正しい模様が表現された画像等が挙げられる。画像処理装置７は、例えば、予め特定画像ＰＸを保持している。また、特定画像ＰＸが均一画像である場合、画像処理装置７は、所定の色値を予め記憶しておき、第２更新処理の際に画像の全画素に対して記憶している色値を適応することで特定画像ＰＸを生成してもよい。画像処理装置７は、例えば、製品出荷時から所定の色値や特定画像ＰＸを保持している。第２更新処理の終了後、メモリ領域Ｍ３の記憶内容は、特定画像ＰＸとなる。
【００２６】
なお、メモリ領域Ｍ１〜Ｍ３には、予め順番が設定されている。その順番は、Ｍ１→Ｍ２→Ｍ３→Ｍ１→Ｍ２→Ｍ３・・・のように循環する順番である。メモリ領域Ｍ３は、メモリ領域Ｍ１よりも、順番において１つ前である。
【００２７】
ステップ３では、読み出しユニット３３が、メモリ領域Ｍ１に記憶された画像を読み出す読み出し処理を行う。読み出しユニット３３は、読み出した画像を演算ユニット２３に送る。
【００２８】
ステップ４では、前記ステップ３で読み出した画像が特定画像ＰＸを含むか否かを判断ユニット３５が判断する。前記ステップ３で読み出した画像であって、特定画像ＰＸを含む画像として、例えば、図４Ａに示す画像３９、図４Ｂに示す画像４１等がある。
【００２９】
画像３９では、水平方向における一部が特定画像ＰＸとなっており、他の部分が第１画像ＲＰｉとなっている。前記ステップ１において水平同期信号異常が生じると、メモリ領域Ｍ１の記憶内容のうち、水平方向における一部を更新できず、メモリ領域Ｍ１の記憶内容が画像３９となる。その結果、前記ステップ３で読み出した画像が画像３９となる。
【００３０】
画像４１では、垂直方向における一部が特定画像ＰＸとなっており、他の部分が第１画像ＲＰｉとなっている。前記ステップ１において垂直同期信号異常が生じると、メモリ領域Ｍ１の記憶内容のうち、垂直方向における一部を更新できず、メモリ領域Ｍ１の記憶内容が画像４１となる。その結果、前記ステップ３で読み出した画像が画像４１となる。
【００３１】
なお、前記ステップ１において第１更新処理が正常に行われると、前記ステップ３で読み出した画像の全体は第１画像ＲＰｉであり、特定画像ＰＸを含まない。
前記ステップ３で読み出した画像が特定画像ＰＸを含む場合、本処理はステップ５に進む。前記ステップ３で読み出した画像が特定画像ＰＸを含まない場合、本処理はステップ６に進む。
【００３２】
ステップ５では、読み出した画像が異常であることを表す信号を信号出力ユニット３７
が出力する。ディスプレイ９又は他の装置は、その信号に基づき、更新異常が発生していることをユーザに知らせる報知や、更新異常に対する処置等を行うことができる。更新異常に対する処置は、例えば、画像表示システム１が備えるいずれかの構成が行うことができる。
【００３３】
ステップ６では、第１更新ユニット２９が、メモリ領域Ｍ２の記憶内容を、第１画像ＲＰ（ｉ＋１）で更新する第１更新処理を行う。メモリ領域Ｍ２は、メモリ領域Ｍ１よりも、順番において１つ後である。
【００３４】
第１更新処理が正常に行われた場合、メモリ領域Ｍ２の記憶内容は第１画像ＲＰ（ｉ＋１）となる。第１更新処理が正常に行われなかった場合、メモリ領域Ｍ２の記憶内容は、更新前の画像か、異常な画像となる。更新前の画像は特定画像ＰＸである。
【００３５】
ステップ７では、第２更新ユニット３１が、メモリ領域Ｍ１の記憶内容を、特定画像ＰＸにより更新する第２更新処理を行う。第２更新処理の終了後、メモリ領域Ｍ１の記憶内容は、特定画像ＰＸとなる。なお、メモリ領域Ｍ１は、メモリ領域Ｍ２よりも、順番において１つ前である。
【００３６】
ステップ８では、読み出しユニット３３が、メモリ領域Ｍ２に記憶された画像を読み出す読み出し処理を行う。読み出しユニット３３は、読み出した画像を演算ユニット２３に送る。
【００３７】
ステップ９では、前記ステップ８で読み出した画像が特定画像ＰＸを含むか否かを判断ユニット３５が判断する。前記ステップ８で読み出した画像が特定画像ＰＸを含む場合、本処理はステップ１０に進む。前記ステップ８で読み出した画像が特定画像ＰＸを含まない場合、本処理はステップ１１に進む。
【００３８】
ステップ１０では、読み出した画像が異常であることを表す信号を信号出力ユニット３７が出力する。ディスプレイ９又は他の装置は、その信号に基づき、更新異常が発生していることをユーザに知らせる報知や、更新異常に対する処置等を行うことができる。更新異常に対する処置は、例えば、画像表示システム１が備えるいずれかの構成が行うことができる。
【００３９】
ステップ１１では、第１更新ユニット２９が、メモリ領域Ｍ３の記憶内容を、第１画像ＲＰ（ｉ＋２）で更新する第１更新処理を行う。メモリ領域Ｍ３は、メモリ領域Ｍ２よりも、順番において１つ後である。第１更新処理が正常に行われた場合、メモリ領域Ｍ３の記憶内容は第１画像ＲＰ（ｉ＋２）となる。第１更新処理が正常に行われなかった場合、メモリ領域Ｍ３の記憶内容は、更新前の画像か、異常な画像となる。更新前の画像は特定画像ＰＸである。
【００４０】
ステップ１２では、第２更新ユニット３１が、メモリ領域Ｍ２の記憶内容を、特定画像ＰＸにより更新する第２更新処理を行う。第２更新処理の終了後、メモリ領域Ｍ２の記憶内容は特定画像ＰＸとなる。なお、メモリ領域Ｍ２は、メモリ領域Ｍ３よりも、順番において１つ前である。
【００４１】
ステップ１３では、読み出しユニット３３が、メモリ領域Ｍ３に記憶された画像を読み出す読み出し処理を行う。読み出しユニット３３は、読み出した画像を演算ユニット２３に送る。
【００４２】
ステップ１４では、前記ステップ１３で読み出した画像が特定画像ＰＸを含むか否かを
判断ユニット３５が判断する。前記ステップ１３で読み出した画像が特定画像ＰＸを含む場合、本処理はステップ１５に進む。前記ステップ１３で読み出した画像が特定画像ＰＸを含まない場合、本処理はステップ１６に進む。
【００４３】
ステップ１５では、読み出した画像が異常であることを表す信号を信号出力ユニット３７が出力する。ディスプレイ９又は他の装置は、その信号に基づき、更新異常が発生していることをユーザに知らせる報知や、更新異常に対する処置等を行うことができる。更新異常に対する処置は、例えば、画像表示システム１が備えるいずれかの構成が行うことができる。
【００４４】
ステップ１６では、第１記憶ユニット２５が、ｉの値を３だけ増す。次に、本処理はステップ１に戻る。
上述した処理の事例のタイムチャートを図５に示す。第１更新ユニット２９は、時刻ｔ１からｔ２において、メモリ領域Ｍ１に対し第１更新処理Ｕ１を行った。次に、第１更新ユニット２９は、時刻ｔ４からｔ５において、メモリ領域Ｍ２に対し第１更新処理Ｕ１を行った。次に、第１更新ユニット２９は、時刻ｔ７からｔ８において、メモリ領域Ｍ３に対し第１更新処理Ｕ１を行った。
【００４５】
次に、第１更新ユニット２９は、時刻ｔ１０からｔ１１において、メモリ領域Ｍ１に対し第１更新処理Ｕ１を行った。次に、第１更新ユニット２９は、時刻ｔ１３からｔ１４において、メモリ領域Ｍ２に対し第１更新処理Ｕ１を行った。次に、第１更新ユニット２９は、時刻ｔ１６からｔ１７において、メモリ領域Ｍ３に対し第１更新処理Ｕ１を行った。このように、第１更新ユニット２９は、複数のメモリ領域Ｍ１〜Ｍ３のそれぞれに対し、予め設定された順番に従って第１更新処理Ｕ１を行った。
【００４６】
第２更新ユニット３１は、時刻ｔ２からｔ３において、メモリ領域Ｍ３に対し第２更新処理Ｕ２を行った。次に、第２更新ユニット３１は、時刻ｔ５からｔ６において、メモリ領域Ｍ１に対し第２更新処理Ｕ２を行った。次に、第２更新ユニット３１は、時刻ｔ８からｔ９において、メモリ領域Ｍ２に対し第２更新処理Ｕ２を行った。
【００４７】
次に、第２更新ユニット３１は、時刻ｔ１１からｔ１２において、メモリ領域Ｍ３に対し第２更新処理Ｕ２を行った。次に、第２更新ユニット３１は、時刻ｔ１４からｔ１５において、メモリ領域Ｍ１に対し第２更新処理Ｕ２を行った。次に、第２更新ユニット３１は、時刻ｔ１７からｔ１８において、メモリ領域Ｍ２に対し第２更新処理Ｕ２を行った。このように、第２更新ユニット３１は、複数のメモリ領域Ｍ１〜Ｍ３のそれぞれに対し、予め設定された順番に従って第２更新処理Ｕ２を行った。
【００４８】
第２更新ユニット３１は、第２更新処理Ｕ２の対象となるメモリ領域よりも、順番において後であるメモリ領域に対する第１更新処理Ｕ１が終了してから、第２更新処理Ｕ２を行った。
【００４９】
例えば、第２更新ユニット３１は、メモリ領域Ｍ１に対する時刻ｔ１からｔ２における第１更新処理Ｕ１が終了してから、メモリ領域Ｍ３に対する時刻ｔ２からｔ３における第２更新処理Ｕ２を行った。メモリ領域Ｍ１は、メモリ領域Ｍ２よりも順番において後である。
【００５０】
第２更新ユニット３１は、最も新しく第１更新処理Ｕ１が終了したメモリ領域よりも、順番において１つ前のメモリ領域に対し、第２更新処理Ｕ２を行った。
例えば、時刻ｔ２において、最も新しく第１更新処理Ｕ１が終了したメモリ領域はメモリ領域Ｍ１である。メモリ領域Ｍ１よりも、順番において１つ前のメモリ領域はメモリ領
域Ｍ３である。第２更新ユニット３１は、時刻ｔ２からｔ３において、メモリ領域Ｍ３に対し第２更新処理Ｕ２を行った。
【００５１】
読み出しユニット３３は、メモリ領域Ｍ３に記載された画像を、時刻ｔ０からｔ２までの期間Ｒに読み出した。次に、読み出しユニット３３は、メモリ領域Ｍ１に記載された画像を、時刻ｔ２からｔ５までの期間Ｒに読み出した。次に、読み出しユニット３３は、メモリ領域Ｍ２に記載された画像を、時刻ｔ５からｔ８までの期間Ｒに読み出した。
【００５２】
次に、読み出しユニット３３は、メモリ領域Ｍ３に記載された画像を、時刻ｔ８からｔ１１までの期間Ｒに読み出した。次に、読み出しユニット３３は、メモリ領域Ｍ１に記載された画像を、時刻ｔ１１からｔ１４までの期間Ｒに読み出した。次に、読み出しユニット３３は、メモリ領域Ｍ２に記載された画像を、時刻ｔ１４からｔ１７までの期間Ｒに読み出した。いずれの期間Ｒも、読み出し処理の対象となるメモリ領域において、第１更新処理Ｕ１が終了してから、第２更新処理Ｕ２が開始されるまでの期間である。
【００５３】
図５に示す事例では、時刻ｔ１からｔ２における第１更新処理Ｕ１と、時刻ｔ４からｔ５における第１更新処理Ｕ１と、時刻ｔ７からｔ８における第１更新処理Ｕ３とは正常に行われた。そのため、時刻ｔ２からｔ５までの期間Ｒと、時刻ｔ５からｔ８までの期間Ｒと、時刻ｔ８からｔ１１までの期間Ｒとに読み出しユニット３３が読み出した画像はそれぞれ第１画像ＲＰであった。
【００５４】
時刻ｔ１０からｔ１１における第１更新処理Ｕ１と、時刻ｔ１３からｔ１４における第１更新処理Ｕ１と、時刻ｔ１６からｔ１７における第１更新処理Ｕ３とは正常に行われず、更新前の特定画像ＰＸがメモリ領域に残存した。そのため、時刻ｔ１１からｔ１４までの期間Ｒと、時刻ｔ１４からｔ１７までの期間Ｒと、時刻ｔ１７以降の期間Ｒとに読み出しユニット３３が読み出した画像はそれぞれ特定画像ＰＸであった。
【００５５】
（２−３）第２記憶ユニット２７が実行する処理
第２記憶ユニット２７は、基本的には第１記憶ユニット２５と同様の処理を行う。ただし、メモリ領域Ｍ１〜Ｍ３に記憶する画像は、第１画像ＲＰ及び第１画像ＬＰではなく、第２画像ＲＰ及び第２画像ＬＰである。また、第２記憶ユニット２７は、メモリ領域Ｍ１〜Ｍ３から読み出した画像を、演算ユニット２３ではなく、画像出力ユニット１５に送る。第２記憶ユニット２７が実行する処理において、第２画像ＲＰ及び第２画像ＬＰは記憶画像に対応する。
【００５６】
３．画像表示システム１が奏する効果
（１Ａ）画像表示システム１によれば、第１更新処理が正常に行われなかった場合、ディスプレイ９に表示される画像は、特定画像ＰＸである。そのため、第１更新処理が正常に行われなかった場合でも、第１更新処理の前からメモリ領域Ｍ１〜Ｍ３に記憶されていた古い画像がディスプレイ９に表示されてしまうことを抑制できる。その結果、ユーザが、ディスプレイ９に表示された古い画像を最新の画像であると誤認識してしまうことを抑制できる。
画像表示システム１は、電子ミラーシステム、リアバックアップカメラ等に適用できる。電子ミラーシステム、及びリアバックアップカメラは、光学ミラーと同様に、ユーザが車両周辺の現状を確認し、車両操作をするために使用される。仮に、電子ミラーシステム、リアバックアップカメラが過去の画像を表示すると、ユーザは過去の画像を見て現状を誤認するおそれがあり、危険である。
画像表示システム１は上記のように、古い画像がディスプレイ９に表示されることを抑制できるので、ユーザが過去の画像を見て現状を誤認してしまうことを抑制できる。
【００５７】
（１Ｂ）画像表示システム１によれば、第１更新処理が正常に行われなかった場合、ディスプレイ９に特定画像ＰＸが表示される。そのため、ユーザは、第１更新処理が正常に行われなかったことを容易に知ることができる。
【００５８】
（１Ｃ）第２更新ユニット３１は、最も新しく第１更新処理が終了したメモリ領域よりも、順番において１つ前のメモリ領域に対し、第２更新処理を行う。そのため、メモリ領域の記憶内容を、早期に特定画像ＰＸで更新することができる。その結果、前記（１Ａ）及び（１Ｂ）の効果を一層確実に奏することができる。
【００５９】
（１Ｄ）第２記憶ユニット２７は、第２画像ＲＰ及び第２画像ＬＰを一時的に記憶する処理において、前記（１Ａ）〜（１Ｃ）の効果を奏することができる。
（１Ｅ）画像表示システム１は、読み出しユニット３３が読み出した画像が、特定画像ＰＸを含むか否かを判断する。画像表示システム１は、その判断結果を反映する信号を出力する。よって、画像表示システム１によれば、読み出しユニット３３が読み出した画像が正常であるか否かをユーザが容易に知ることができる。画像表示システム１によれば、読み出しユニット３３が読み出した画像が異常であることを容易に検出することができる。
＜他の実施形態＞
以上、本開示の実施形態について説明したが、本開示は上述の実施形態に限定されることなく、種々変形して実施することができる。
【００６０】
（１）画像表示システム１が備えるカメラの数は１であってもよいし、３以上であってもよい。演算ユニット２３は、複数の第１画像を合成して単一の第２画像を生成してもよい。単一の第２画像として、例えば、上方の視点から車両を見た鳥瞰図等が挙げられる。
【００６１】
（２）画像表示システム１は、第１記憶ユニット２５及び第２記憶ユニット２７のうちの一方では、第２更新処理を行わなくてもよい。
（３）第２更新処理の頻度は、第１更新処理の頻度より低くてもよい。例えば、画像表示システム１は、第１更新処理をＮ回行うごとに、第２更新処理を１回行ってもよい。Ｎは２以上の自然数である。
【００６２】
（４）画像表示システム１が備える複数のメモリ領域の数は３以外であってもよい。複数のメモリ領域の数は、例えば、２、４、５、６・・・であってもよい。
（５）画像表示システム１は、複数のメモリ領域のうち、一部のメモリ領域に限定して、第２更新処理を行ってもよい。
【００６３】
（６）読み出しユニット３３が画像を読み出す頻度は、第１更新処理の頻度より高くてもよい。この場合、読み出しユニット３３は、例えば、メモリ領域Ｍ１から連続してｎ回画像を読み出し、次に、メモリ領域Ｍ２から連続してｎ回画像を読み出し、次に、メモリ領域Ｍ３から連続してｎ回画像を読み出すことができる。ｎは２以上の自然数である。上記の態様も、順番に従って行う読み出し処理に対応する。
【００６４】
（７）第２更新処理を開始する時刻は、順番において後であるメモリ領域に対する第１更新処理が終了した時刻と同時であってもよいし、それより後の時刻であってもよい。
（８）上記実施形態における１つの構成要素が有する複数の機能を、複数の構成要素によって実現したり、１つの構成要素が有する１つの機能を、複数の構成要素によって実現したりしてもよい。また、複数の構成要素が有する複数の機能を、１つの構成要素によって実現したり、複数の構成要素によって実現される１つの機能を、１つの構成要素によって実現したりしてもよい。また、上記実施形態の構成の一部を省略してもよい。また、上記実施形態の構成の少なくとも一部を、他の上記実施形態の構成に対して付加又は置換し
てもよい。
【００６５】
（９）上述した画像処理装置の他、当該画像処理装置を構成要素とするシステム、当該画像処理装置としてコンピュータを機能させるためのプログラム、このプログラムを記録した半導体メモリ等の非遷移的実態的記録媒体、画像処理方法、画像記憶方法、画像表示方法等、種々の形態で本開示を実現することもできる。
【符号の説明】
【００６６】
１…画像表示システム、３…右カメラ、５…左カメラ、７…画像処理装置、９…ディスプレイ、１１…画像取得ユニット、１３…画像処理ユニット、１５…画像出力ユニット、１７…メモリ、２３…演算ユニット、２５…第１記憶ユニット、２７…第２記憶ユニット、２９…第１更新ユニット、３１…第２更新ユニット、３３…読み出しユニット、３５…判断ユニット、３７…信号出力ユニット
【図１】
2020053799.tif 000003
【図２】
2020053799.tif 000004
【図３】
2020053799.tif 000005
【図４】
2020053799.tif 000006
【図５】
2020053799.tif 000007