(57)【要約】【課題】その他の車両の挙動を効果的に認識する方法がないため、自動運転機器が道路状況に応じて適切な運転ストラテジーで対応することができず、自動運転の安全性と信頼性に深刻な影響を与えるという問題を解決する自動車画像の処理方法、自動車画像の処理装置及びコンピュータ読み取り可能な記憶媒体を提供する。【解決手段】本発明は、自動運転機器に設置された自動車画像の収集点が収集した処理すべき画像を取得し、ディープラーニングモデルを利用して処理すべき画像を処理し、処理すべき画像における自動車の状態パラメータを出力し、状態パラメータに基づいて処理すべき画像における自動車挙動を確定する。このように自動車挙動を取得し、さらに、自動運転機器が道路状況に応じて運転ストラテジーを調整するための基礎及び根拠を提供する。【選択図】図２
2020042786.tif 000002
【特許請求の範囲】
【請求項１】
自動運転機器に設置された自動車画像の収集点が収集した処理すべき画像を取得することと、
ディープラーニングモデルを利用して前記処理すべき画像を処理し、前記処理すべき画像における自動車の状態パラメータを出力することと、
前記状態パラメータに基づいて前記処理すべき画像における自動車挙動を確定することとを含むことを特徴とする自動車画像の処理方法。
【請求項２】
前記ディープラーニングモデルを利用して前記処理すべき画像を処理し、前記処理すべき画像における自動車の状態パラメータを出力することは、
自動車の前記処理すべき画像における位置を確定することと、
確定した前記位置に基づいて前記処理すべき画像の目標領域画像を取得することと、
ディープラーニングモデルを利用して前記目標領域画像を処理し、前記目標領域画像における自動車の状態パラメータを出力することとを含むことを特徴とする請求項１に記載の自動車画像の処理方法。
【請求項３】
前記ディープラーニングモデルの出力した前記処理すべき画像における自動車の状態パラメータは、ブレーキランプ状態、方向指示ランプ状態、カードア状態、トランクドア状態、車輪向き状態のうちの１つ又は複数を示すために用いられることを特徴とする請求項１に記載の自動車画像の処理方法。
【請求項４】
前記ディープラーニングモデルの出力した前記処理すべき画像における自動車の状態パラメータはさらに、自動車の測定サイズ、及び／又は、自動車と自動車画像を収集する収集点との間の距離を含むことを特徴とする請求項３に記載の自動車画像の処理方法。
【請求項５】
前記状態パラメータに基づいて確定された自動車挙動は、ブレーキ挙動、走行挙動、転舵挙動及び駐車挙動のうちの１つを含むことを特徴とする請求項１に記載の自動車画像の処理方法。
【請求項６】
前記状態パラメータに基づいて前記処理すべき画像における自動車挙動を確定した後、  前記自動運転機器が前記自動車挙動に基づいて自動運転ストラテジーを調整するように、取得した前記処理すべき画像における自動車挙動を前記自動運転機器に送信することをさらに含むことを特徴とする請求項１〜５のいずれか１項に記載の自動車画像の処理方法。
【請求項７】
自動運転機器に設置された自動車画像の収集点が収集した処理すべき画像を取得するために用いられる通信ユニットと、
ディープラーニングモデルを利用して前記処理すべき画像を処理し、前記処理すべき画像における自動車の状態パラメータを出力するために用いられ、さらに、前記状態パラメータに基づいて前記処理すべき画像における自動車挙動を確定するために用いられる処理ユニットとを含むことを特徴とする自動車画像の処理装置。
【請求項８】
前記処理ユニットは、具体的には、
自動車の前記処理すべき画像における位置を確定することと、
確定した前記位置に基づいて前記処理すべき画像の目標領域画像を取得することと、
ディープラーニングモデルを利用して前記目標領域画像を処理し、前記目標領域画像における自動車の状態パラメータを出力することとに用いられることを特徴とする請求項７に記載の自動車画像の処理装置。
【請求項９】
前記ディープラーニングモデルの出力した前記処理すべき画像における自動車の状態パラメータは、ブレーキランプ状態、方向指示ランプ状態、カードア状態、トランクドア状態、車輪向き状態のうちの１つ又は複数を示すために用いられることを特徴とする請求項７に記載の自動車画像の処理装置。
【請求項１０】
前記ディープラーニングモデルの出力した前記処理すべき画像における自動車の状態パラメータはさらに、自動車の測定サイズ、及び／又は、自動車と自動車画像を収集する収集点との距離を含むことを特徴とする請求項９に記載の自動車画像の処理装置。
【請求項１１】
前記状態パラメータに基づいて確定された自動車挙動は、ブレーキ挙動、走行挙動、転舵挙動及び駐車挙動のうちの１つを含むことを特徴とする請求項７に記載の自動車画像の処理装置。
【請求項１２】
前記通信ユニットは、状態パラメータに基づいて前記処理すべき画像における自動車挙動を確定した後、さらに、前記自動運転機器が前記自動車挙動に基づいて自動運転ストラテジーを調整するように、取得した前記処理すべき画像における自動車挙動を前記自動運転機器に送信するために用いられることを特徴とする請求項７〜１１のいずれか１項に記載の自動車画像の処理装置。
【請求項１３】
メモリ、前記メモリに接続されたプロセッサ、及び前記メモリに記憶され且つ前記プロセッサにおいて実行可能なコンピュータプログラムを含む自動車画像の処理装置であって、
前記プロセッサは、前記コンピュータプログラムを実行する時、請求項１〜６のいずれか１項に記載の自動車画像の処理方法を実行することを特徴とする自動車画像の処理装置。
【請求項１４】
コンピュータ読み取り可能な記憶媒体であって、端末において実行される時、端末に請求項１〜６のいずれか１項に記載の自動車画像の処理方法を実行させるプログラムを含むことを特徴とするコンピュータ読み取り可能な記憶媒体。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、自動運転技術に関し、特に自動車画像の処理方法、自動車画像の処理装置及びコンピュータ読み取り可能な記憶媒体に関する。
【背景技術】
【０００２】
科学技術の発展及び社会の進歩に伴い、自動運転技術は交通分野でトレンドとなっている。自動運転機器には、複数の運転ストラテジーが予め設定されており、自動運転機器が現在の道路状況に基づいて現在の道路状況に応じた運転ストラテジーを確定し、自動運転タスクを実行することができる。上記過程において、自動運転機器がどのように様々な道路状況を正確に認識するかは研究の焦点となっている。
【０００３】
道路状況を認識するために、自動運転機器は所在環境におけるその他の車両の挙動を把握する必要がある。しかしながら、従来技術では、その他の車両の挙動を効果的に認識できる方法がないため、自動運転機器が道路状況に応じて適切な運転ストラテジーで対応することができず、自動運転の安全性と信頼性に深刻な影響を与えることを引き起こす。
【発明の概要】
【発明が解決しようとする課題】
【０００４】
上記従来技術では、その他の車両の挙動を効果的に認識する方法がないため、自動運転機器が道路状況に応じて適切な運転ストラテジーで対応することができず、自動運転の安全性と信頼性に深刻な影響を与える。この問題に対して、本発明は、自動車画像の処理方法、自動車画像の処理装置及びコンピュータ読み取り可能な記憶媒体を提供する。
【課題を解決するための手段】
【０００５】
本発明の一態様にて提供される自動車画像の処理方法は、自動車画像を含む処理すべき画像を取得することと、ディープラーニングモデルを利用して前記処理すべき画像を処理し、前記処理すべき画像における自動車の状態パラメータを出力することと、前記状態パラメータに基づいて前記処理すべき画像における自動車挙動を確定することとを含む。
【０００６】
１つの選択可能な実施形態においては、前記ディープラーニングモデルを利用して前記処理すべき画像を処理し、処理すべき画像における自動車の状態パラメータを出力することは、自動車の前記処理すべき画像における位置を確定することと、確定した前記位置に基づいて前記処理すべき画像の目標領域画像を取得することと、ディープラーニングモデルを利用して前記目標領域画像を処理し、前記目標領域画像における自動車の状態パラメータを出力することを含む。
【０００７】
１つの選択可能な実施形態においては、前記ディープラーニングモデルの出力した前記処理すべき画像における自動車の状態パラメータは、ブレーキランプ状態、方向指示ランプ状態、カードア状態、トランクドア状態、車輪向き状態のうちの１つ又は複数を示すために用いられる。
【０００８】
１つの選択可能な実施形態においては、前記ディープラーニングモデルの出力した前記処理すべき画像における自動車の状態パラメータはさらに、自動車の測定サイズ、及び／又は、自動車と自動車画像を収集する収集点との距離を含む。
【０００９】
１つの選択可能な実施形態においては、前記状態パラメータに基づいて確定された自動車挙動は、ブレーキ挙動、走行挙動、転舵挙動及び駐車挙動のうちの１つを含む。
【００１０】
１つの選択可能な実施形態においては、前記状態パラメータに基づいて前記処理すべき画像における自動車挙動を確定した後、さらに、前記自動運転機器が前記自動車挙動に基づいて自動運転ストラテジーを調整するように、取得した前記処理すべき画像における自動車挙動を自動運転機器に送信することを含む。
【００１１】
本発明の別の態様にて提供される自動車画像の処理装置は、自動運転機器に設置された自動車画像の収集点が収集した処理すべき画像を取得するために用いられる通信ユニットと、ディープラーニングモデルを利用して前記処理すべき画像を処理し、前記処理すべき画像における自動車の状態パラメータを出力するために用いられ、さらに、前記状態パラメータに基づいて前記処理すべき画像における自動車挙動を確定するために用いられる処理ユニットとを含む。
【００１２】
１つの選択可能な実施形態においては、前記処理ユニットは、具体的には、自動車の前記処理すべき画像における位置を確定することと、確定した前記位置に基づいて前記処理すべき画像の目標領域画像を取得することと、ディープラーニングモデルを利用して前記目標領域画像を処理し、前記目標領域画像における自動車の状態パラメータを出力することとに用いられる。
【００１３】
１つの選択可能な実施形態においては、前記ディープラーニングモデルの出力した前記処理すべき画像における自動車の状態パラメータは、ブレーキランプ状態、方向指示ランプ状態、カードア状態、トランクドア状態、車輪向き状態のうちの１つ又は複数を示すために用いられる。
【００１４】
１つの選択可能な実施形態においては、前記ディープラーニングモデルの出力した前記処理すべき画像における自動車の状態パラメータはさらに、自動車の測定サイズ、及び／又は、自動車と自動車画像を収集する収集点との距離を含む。
【００１５】
１つの選択可能な実施形態においては、前記状態パラメータに基づいて確定された自動車挙動は、ブレーキ挙動、走行挙動、転舵挙動及び駐車挙動のうちの１つを含む。
【００１６】
１つの選択可能な実施形態においては、前記通信ユニットは、状態パラメータに基づいて前記処理すべき画像における自動車挙動を確定した後、さらに、前記自動運転機器が前記自動車挙動に基づいて自動運転ストラテジーを調整するように、取得した前記処理すべき画像における自動車挙動を自動運転機器に送信するために用いられる。
【００１７】
本発明のさらなる態様にて提供される自動車画像の処理装置は、メモリ、前記メモリに接続されたプロセッサ、及び前記メモリに記憶され且つ前記プロセッサにおいて実行可能なコンピュータプログラムを含む自動車画像の処理装置であって、前記プロセッサは、前記コンピュータプログラムを実行する時、前記いずれか１項に記載の自動車画像の処理方法を実行する。
【００１８】
本発明の最後の態様にて提供されるコンピュータ読み取り可能な記憶媒体は、端末において実行されると、端末に前記いずれか１項に記載の自動車画像の処理方法を実行させるプログラムを含む。
【発明の効果】
【００１９】
本発明による自動車画像の処理方法、自動車画像の処理装置及びコンピュータ読み取り可能な記憶媒体は、自動運転機器に設置された自動車画像の収集点が収集した処理すべき画像を取得し、ディープラーニングモデルを利用して前記処理すべき画像を処理し、前記処理すべき画像における自動車の状態パラメータを出力し、前記状態パラメータに基づいて前記処理すべき画像における自動車挙動を確定することにより、ディープラーニングモデルを利用して収集点が収集した処理すべき画像を処理することができ、自動車挙動を確定できる状態パラメータを取得し、それにより、自動車挙動を取得し、さらに、自動運転機器が道路状況に応じて運転ストラテジーを調整するための基礎及び根拠を提供する。
【図面の簡単な説明】
【００２０】
図面には、本開示の明確な実施例が示されており、より詳細なものについては、後で説明する。これらの図面及び文字による説明は、何らかの形態によって本開示の趣旨の範囲を制限するものではなく、特定の実施例を参照しながら、当業者のために本開示の概念を説明するものである。ここでの図面は明細書に組み込まれて本明細書の一部となり、本開示に該当する実施例を示し、且つ明細書と共に本開示の原理を解釈するために用いられる。
【図１】本発明に係るネットワークアーキテクチャを示す模式図である。
【図２】本発明の実施例１による自動車画像の処理方法を示すフロー模式図である。
【図３】本発明の実施例２による自動車画像の処理方法を示すフロー模式図である。
【図４】本発明の実施例３による自動車画像の処理装置を示す構造模式図である。
【図５】本発明の実施例４による自動車画像の処理装置のハードウェア構造を示す模式図である。
【発明を実施するための形態】
【００２１】
本発明の実施例の目的、技術的解決手段及び利点をより明確にするために、以下、本発明の実施例における図面を参照しながら、本発明の実施例における技術的解決手段を明確に説明する。
【００２２】
科学技術の発展及び社会の進歩に伴い、自動運転技術は交通分野でトレンドとなっている。自動運転機器は、複数の運転ストラテジーが予め設定されており、自動運転機器は現在の道路状況に基づいて現在の道路状況に応じた運転ストラテジーを確定し、自動運転タスクを実行することができる。上記過程において、自動運転機器がどのように様々な道路状況を正確に認識するかは研究の焦点となっている。
【００２３】
道路状況を認識するために、自動運転機器は所在環境におけるその他の車両の挙動を把握する必要がある。しかしながら、従来技術では、その他の車両の挙動を効果的に認識できる方法がないため、自動運転機器が道路状況に応じて正確な運転ストラテジーで対応することができず、自動運転の安全性と信頼性に深刻な影響を与えることを引き起こす。
【００２４】
図１は本発明に係るネットワークアーキテクチャを示す模式図であり、図１に示すように、本発明による自動車画像の処理方法の実行主体は、具体的には、自動車画像の処理装置１であってもよく、自動車画像の処理装置１が含まれるネットワークアーキテクチャはさらに、自動運転機器２及び自動運転機器に設置された収集点３を含む。ここで、自動車画像の処理装置１はハードウェア及び／又はソフトウェアの形態で実現されてもよい。自動車画像の処理装置１は、無線ローカルエリアネットワークによって自動運転機器２及び収集点３と通信接続されたり、データ交換を行ったりすることができる。また、自動車画像の処理装置１は自動運転機器２に設置されてもよく、遠端サーバに設置されてもよい。収集点３は、ドライブレコーダ、スマートフォン、車載画像監視装置などを含むが、これらに制限されない。
【００２５】
図２は本発明の実施例１による自動車画像の処理方法を示すフロー模式図である。
【００２６】
図２に示すように、自動車画像の処理方法は、自動運転機器に設置された自動車画像の収集点が収集した処理すべき画像を含むものを取得するステップ１０１と、ディープラーニングモデルを利用して処理すべき画像を処理し、処理すべき画像における自動車の状態パラメータを出力するステップ１０２と、状態パラメータに基づいて処理すべき画像における自動車挙動を確定するステップ１０３とを含む。
【００２７】
従来技術においてはその他の車両の挙動を効果的に認識できる方法がないため、自動運転機器が道路状況に応じて正確な運転ストラテジーで対応することができず、自動運転の安全性と信頼性に深刻な影響を与えるという上記問題を解決するために、本発明の実施例１は、自動車画像の処理方法を提供する。まず、自動車画像の処理装置は、自動運転機器に設置された収集点から送信された処理すべき画像を受信してもよく、ここで、処理すべき画像は、具体的には、自動車の外形又は自動車の輪郭などの自動車画像情報を含む画像であってもよい。
【００２８】
続いて、自動車画像の処理装置は、ディープラーニングモデルを利用して処理すべき画像を処理し、処理すべき画像における自動車の状態パラメータを出力する。なお、処理すべき画像に複数の自動車が含まれる場合、出力した処理すべき画像の自動車の状態パラメータも対応する自動車の各々の状態パラメータである。また、ディープラーニングモデルは、ディープビリーフネットワークモデル、畳み込みニューラルネットワークモデル、回帰型ニューラルネットワークモデルを含むが、これらに制限されず、本実施例による自動車画像の処理を実行する前に、また、画像における自動車の状態パラメータを認識し、且つ出力するためのディープラーニングネットワークアーキテクチャを予め構築でき、大量のトレーニング画像を収集し、且つマークするという方式によってトレーニングサンプルを取得し、構築されたディープラーニングネットワークアーキテクチャに学習及びトレーニングさせ、さらに、本実施形態が基づくディープラーニングモデルを取得させてもよい。
【００２９】
最後に、自動車画像の処理装置は、状態パラメータに基づいて処理すべき画像における自動車挙動を確定する。具体的には、状態パラメータに基づいて確定された自動車挙動は、ブレーキ挙動、走行挙動、転舵挙動及び駐車挙動のうちの１つを含む。
【００３０】
選択的に、本実施形態において、ディープラーニングモデルの出力した処理すべき画像における自動車の状態パラメータは、ブレーキランプ状態、方向指示ランプ状態、カードア状態、トランクドア状態、車輪向き状態のうちの１つ又は複数を示すために用いられる。
【００３１】
ここで、ブレーキランプ状態及び方向指示ランプ状態は、ブレーキランプ及び方向指示ランプがオンであるかオフであるかを示すために用いられ、ここで、方向指示ランプ状態はさらに、左方向指示ランプ状態と右方向指示ランプ状態に分けられてもよい。カードア状態及びトランクドア状態は、カードア及びトランクドアが開いたか閉じたかを示すために用いられる。ここで、カードア状態はさらに、左側フロントカードア状態、左側リアカードア状態、右側フロントカードア状態、右側リアカードア状態に分けられてもよく、当然のことながら、車種によって、カードア状態はさらに、左側カードア状態と右側カードア状態に分けられてもよい。車輪向き状態は、車輪の向きを示すために用いられ、一般には、それは転舵輪、即ち前輪の向きを示す。上記状態パラメータを出力することによって、自動車のブレーキ挙動、走行挙動、転舵挙動及び駐車挙動を確定するための判断根拠を効果的に提供できる。
【００３２】
さらに、例えば、ディープラーニングモデルの出力したブレーキランプ状態はオンであるとすると、自動車にブレーキ挙動が存在すると確定できる。ディープラーニングモデルの出力したカードア状態及び／又はトランクドア状態は開くと、自動車に駐車挙動が存在すると確定できる。ディープラーニングモデルの出力した車輪向き状態は前車輪と後車輪の向きが一致しないことを示すと、該自動車に転舵挙動が存在すると確定できる。当然のことながら、ディープラーニングモデルがその他の自動車状態を出力すると、当該自動車が正常な走行挙動を行っている可能性がある。
【００３３】
より好ましくは、ディープラーニングモデルの出力した処理すべき画像における自動車の状態パラメータはさらに、自動車の測定サイズ、及び／又は、自動車と自動車画像を収集する収集点との距離を含む。
【００３４】
具体的には、自動車挙動をよりよく確定するために、ディープラーニングモデルの出力した状態パラメータはさらに、自動車の測定サイズ、及び、自動車と収集点との距離を含んでもよい。この２つの挙動パラメータによって、確定された自動車の挙動をより正確にする。例えば、取得した自動車と自動車画像を収集する収集点との距離の値が小さい場合、当該自動車にブレーキ挙動又は駐車挙動が存在する可能性があると確定できる。
【００３５】
本発明の実施例１による自動車画像の処理方法は、自動運転機器に設置された自動車画像の収集点が収集した処理すべき画像を取得し、ディープラーニングモデルを利用して処理すべき画像を処理し、処理すべき画像における自動車の状態パラメータを出力し、状態パラメータに基づいて処理すべき画像における自動車挙動を確定することにより、ディープラーニングモデルを利用して収集点が収集した処理すべき画像を処理することができ、自動車挙動を確定できる状態パラメータを取得し、それにより、自動車挙動を取得し、さらに、自動運転機器が道路状況に応じて運転ストラテジーを調整するために基礎及び根拠を提供する。
【００３６】
実施例１を基礎として、図３は、本発明の実施例２による自動車画像の処理方法を示すフロー模式図である。
【００３７】
図３に示すように、自動車画像の処理方法は、自動運転機器に設置された自動車画像の収集点が収集した処理すべき画像を含むものを取得するステップ２０１と、自動車の処理すべき画像における位置を確定するステップ２０２と、当該確定した位置に基づいて処理すべき画像の目標領域画像を取得するステップ２０３と、ディープラーニングモデルを利用して目標領域画像を処理し、目標領域画像における自動車の状態パラメータを出力するステップ２０４と、状態パラメータに基づいて処理すべき画像における自動車挙動を確定するステップ２０５とを含む。
【００３８】
実施例１と同様に、本実施例２において、自動車画像の処理装置は、自動運転機器に設置された収集点から送信された処理すべき画像を受信することができ、ここで、処理すべき画像は、具体的には、自動車の外形又は自動車の輪郭などの自動車画像情報を含む画像であってもよい。
【００３９】
実施例１と異なり、本実施例２においては、自動車画像の処理装置は、ディープラーニングモデルを利用して処理すべき画像を処理し、処理すべき画像における自動車の状態パラメータを出力する。具体的には、以下のステップを採用できる。
【００４０】
まず、自動車の処理すべき画像における位置を確定し、具体的には、自動車の外形又は自動車の輪郭を認識することにより、自動車の処理すべき画像における位置を確定できる。続いて、確定した位置に基づいて処理すべき画像の目標領域画像を取得し、つまり、位置を取得した後、その位置に基づいて矩形領域を目標領域画像として割り出し、その目標領域画像に自動車の全ての情報を含ませるように、矩形領域の境界が自動車の輪郭又は自動車の外形に接してもよい。当然のことながら、なお、処理すべき画像に複数の自動車が含まれる場合、同一処理すべき画像について複数の目標領域画像を得ることができ、各目標領域画像は１つの自動車に対応している。さらに、ディープラーニングモデルを利用して各々の目標領域画像を処理し、目標領域画像における自動車の状態パラメータを出力する。また、ディープラーニングモデルは、ディープビリーフネットワークモデル、畳み込みニューラルネットワークモデル、回帰型ニューラルネットワークモデルを含むが、これらに制限されない。本実施例による自動車画像の処理を実行する前に、さらに、画像における自動車の状態パラメータを認識し、且つ出力するためのディープラーニングネットワークアーキテクチャを予め構築でき、大量のトレーニング画像を収集し、且つマークするという方式によってトレーニングサンプルを取得し、構築されたディープラーニングネットワークアーキテクチャに学習及びトレーニングさせ、さらに、本実施形態が基づくディープラーニングモデルを取得させてもよい。
【００４１】
最後に、自動車画像の処理装置は、状態パラメータに基づいて処理すべき画像における自動車挙動を確定する。具体的には、状態パラメータに基づいて確定された自動車挙動は、ブレーキ挙動、走行挙動、転舵挙動及び駐車挙動のうちの１つを含む。
【００４２】
また、１つの選択可能な実施形態においては、状態パラメータに基づいて処理すべき画像における自動車挙動を確定した後、さらに、自動運転機器が自動車挙動に基づいて自動運転ストラテジーを調整するように、取得した処理すべき画像における自動車挙動を自動運転機器に送信することを含む。例えば、自動車の自動車挙動がブレーキ挙動であると確定した場合、走行時の危険を避けるように、自動運転機器はブレーキ又は迂回などのドライブ挙動を取るべきであり、自動車の自動車挙動が駐車挙動であると確定した場合、自動車内の乗車者の横からの飛び出しによる交通安全上のリスクを避けるように、自動運転機器は迂回などのドライブ挙動を取るべきである。
【００４３】
好ましくは、本実施形態において、ディープラーニングモデルの出力した処理すべき画像における自動車の状態パラメータは、ブレーキランプ状態、方向指示ランプ状態、カードア状態、トランクドア状態、車輪向き状態のうちの１つ又は複数を示すために用いられる。
【００４４】
ここで、ブレーキランプ状態及び方向指示ランプ状態は、ブレーキランプ及び方向指示ランプがオンであるかオフであるかを示すために用いられ、ここで、方向指示ランプ状態はさらに、左方向指示ランプ状態と右方向指示ランプ状態に分けられてもよい。カードア状態及びトランクドア状態は、カードア及びトランクドアが開いたか閉じたかを示すために用いられる。ここで、カードア状態はさらに、左側フロントカードア状態、左側リアカードア状態、右側フロントカードア状態、右側リアカードア状態に分けられてもよく、当然のことながら、車種によって、カードア状態はさらに、左側カードア状態と右側カードア状態に分けられてもよい。車輪指示状態は、車輪の向きを示すために用いられ、一般には、それは転舵輪、即ち前輪の向きを示す。上記状態パラメータを出力することによって、自動車のブレーキ挙動、走行挙動、転舵挙動及び駐車挙動を確定するための判断根拠を効果的に提供できる。
【００４５】
さらに、例えば、ディープラーニングモデルの出力したブレーキランプ状態はオンであると、当該自動車にブレーキ挙動が存在すると確定できる。ディープラーニングモデルの出力したカードア状態及び／又はトランクドア状態が「開」であれば、当該自動車に駐車挙動が存在すると確定できる。ディープラーニングモデルの出力した車輪向き状態は前車輪と後車輪の向きが一致しないことを示すと、当該自動車に転舵挙動が存在すると確定できる。当然のことながら、ディープラーニングモデルがその他の自動車状態を出力すると、当該自動車は正常な走行挙動を行っている可能性がある。
【００４６】
より好ましくは、ディープラーニングモデルの出力した処理すべき画像における自動車の状態パラメータはさらに、自動車の測定サイズ、及び／又は、自動車と自動車画像を収集する収集点との距離を含む。
【００４７】
具体的には、自動車挙動をよりよく確定するために、ディープラーニングモデルの出力した状態パラメータはさらに、自動車の測定サイズ、及び、自動車と収集点との距離を含んでもよい。この２つの挙動パラメータによって、確定された自動車の挙動をより正確にする。例えば、取得した自動車と自動車画像を収集する収集点との距離の値が小さい場合、当該自動車にブレーキ挙動又は駐車挙動が存在する可能性があると確定できる。
【００４８】
本発明の実施例２による自動車画像の処理方法は、自動運転機器に設置された自動車画像の収集点が収集した処理すべき画像を取得し、ディープラーニングモデルを利用して処理すべき画像を処理し、処理すべき画像における自動車の状態パラメータを出力し、状態パラメータに基づいて処理すべき画像における自動車挙動を確定することにより、ディープラーニングモデルを利用して収集点が収集した処理すべき画像を処理することができ、自動車挙動を確定できる状態パラメータを取得し、それにより、自動車挙動を取得し、さらに、自動運転機器が道路状況に応じて運転ストラテジーを調整するために基礎及び根拠を提供する。
【００４９】
図４は、本発明の実施例３による自動車画像の処理装置を示す構造模式図であり、図４に示すように、自動車画像の処理装置は、自動運転機器に設置された自動車画像の収集点が収集した処理すべき画像を含むものを取得するために用いられる通信ユニット１０と、ディープラーニングモデルを利用して処理すべき画像を処理し、処理すべき画像における自動車の状態パラメータを出力するために用いられ、さらに、状態パラメータに基づいて処理すべき画像における自動車挙動を確定するために用いられる処理ユニット２０とを含む。
【００５０】
１つの選択可能な実施形態においては、処理ユニット２０は、具体的には、自動車の処理すべき画像における位置を確定することと、確定した位置に基づいて処理すべき画像の目標領域画像を取得すること、ディープラーニングモデルを利用して目標領域画像を処理し、目標領域画像における自動車の状態パラメータを出力することに用いられる。
【００５１】
１つの選択可能な実施形態においては、ディープラーニングモデルの出力した処理すべき画像における自動車の状態パラメータは、ブレーキランプ状態、方向指示ランプ状態、カードア状態、トランクドア状態、車輪向き状態のうちの１つ又は複数を示すために用いられる。
【００５２】
１つの選択可能な実施形態においては、ディープラーニングモデルの出力した処理すべき画像における自動車の状態パラメータはさらに、自動車の測定サイズ、及び／又は、自動車と自動車画像を収集する収集点との距離を含む。
【００５３】
１つの選択可能な実施形態においては、状態パラメータに基づいて確定された自動車挙動は、ブレーキ挙動、走行挙動、転舵挙動及び駐車挙動のうちの１つを含む。
【００５４】
１つの選択可能な実施形態においては、通信ユニット１０は、状態パラメータに基づいて処理すべき画像における自動車挙動を確定した後、さらに、自動運転機器が自動車挙動に基づいて自動運転ストラテジーを調整するように、取得した処理すべき画像における自動車挙動を自動運転機器に送信するために用いられる。
【００５５】
当業者であれば、上記説明したシステムの具体的な作動過程及び対応する有益な効果については、前述方法の実施例における対応過程を参照すればよいことが当然理解されるものであり、説明を便利、且つ簡潔にするために、ここでの説明を省略する。
【００５６】
本発明の実施例３による自動車画像の処理装置は、自動運転機器に設置された自動車画像の収集点が収集した処理すべき画像を含むものを取得し、ディープラーニングモデルを利用して処理すべき画像を処理し、処理すべき画像における自動車の状態パラメータを出力し、状態パラメータに基づいて処理すべき画像における自動車挙動を確定することにより、ディープラーニングモデルを利用して収集点が収集した処理すべき画像を処理することができ、自動車挙動を確定できる状態パラメータを取得し、それにより、自動車挙動を取得し、さらに、自動運転機器が道路状況に応じて運転ストラテジーを調整するための基礎及び根拠を提供する。
【００５７】
図５は、本発明の実施例４による自動車画像の処理装置のハードウェア構造を示す模式図である。図５に示すように、該自動車画像の処理装置は、メモリ４１、プロセッサ４２、及びメモリ４１に記憶され、且つプロセッサ４２において実行可能なコンピュータプログラムを備え、プロセッサ４２は、コンピュータプログラムを実行すると、上記いずれかの実施例の自動車画像の処理方法を実行する。
【００５８】
本発明はさらに、端末において実行される時、端末に上記いずれかの実施例の自動車画像の処理方法を実行させるプログラムを含むコンピュータ読み取り可能な記憶媒体を提供する。
【００５９】
当業者であれば、上記各方法の実施例を実現する全て又は一部のステップがプログラム命令に関連するハードウェアによって完成されてもよいことは、当然理解されるものである。プログラムはコンピュータ読み取り可能な記憶媒体に記憶されてもよい。プログラムが実行されると、上記各方法の実施例を含むステップが実行される。記憶媒体には、例えばＲＯＭ、ＲＡＭ、磁気ディスク又は光ディスクなどが挙げられ、プログラムコードを記憶できる様々な媒体を含む。
【００６０】
最後に、以上の実施例は、本発明の技術的解決手段を説明するためのものであって、これを制限するものではない。各実施例を参照しながら、本発明を詳細に説明したが、当業者であれば、各実施例に記載の技術的解決手段に対する修正や、その一部又は全ての技術特徴に対する同等置換が可能であるが、これらの修正や、置換が対応する技術的解決手段の趣旨を本発明の各実施例の技術的解決手段の範囲から逸脱させないことは、当然理解されるものである。
【図１】
2020042786.tif 000003
【図２】
2020042786.tif 000004
【図３】
2020042786.tif 000005
【図４】
2020042786.tif 000006
【図５】
2020042786.tif 000007