(57)【要約】【解決手段】一実施形態では、システムはＡＤＶの画像キャプチャ装置からＡＤＶの環境を感知するキャプチャ画像を受信し、キャプチャ画像はＡＤＶ付近の移動中の障害物を認識する。システムは、移動障害物の投影に基づいて移動障害物周囲の実行可能領域を生成する。ＡＤＶが実行可能領域内にある場合、システムはＡＤＶの上限速度制限を確定する。システムは、上限速度制限未満の軌跡速度を有する軌跡を生成し、ＡＤＶが実行可能領域内にある場合に、ＡＤＶが減速するように、ＡＤＶを該軌跡に従って自律的に制御する。【選択図】図６
2021501714.tif 000002
【特許請求の範囲】
【請求項１】
自動運転車両のためのコンピュータ実施方法であって、前記方法は、
自動運転車両の画像キャプチャ装置から、前記自動運転車両の環境を感知するキャプチャ画像を受信するステップであって、前記キャプチャ画像は前記自動運転車両付近の移動中の障害物を認識するものであるステップと、
移動障害物の投影に基づいて、前記移動障害物周囲の実行可能領域を生成するステップと、
前記自動運転車両が前記実行可能領域内にある場合に、前記自動運転車両の上限速度制限を確定するステップと、
前記上限速度制限未満の軌跡速度を有する軌跡を生成して、前記自動運転車両が前記実行可能領域内にある場合に前記自動運転車両が減速するように、前記自動運転車両を前記軌跡に従って自律的に制御するステップと、を含む自動運転車両のためのコンピュータ実施方法。
【請求項２】
生成された実行可能領域は、時間Ｔにおける前記移動障害物の速度方向に基づいて確定される中心位置と、前記移動障害物の速度に基づいて確定される半径とを含む、請求項１に記載の方法。
【請求項３】
前記移動障害物の投影位置は、前記移動障害物及び前記自動運転車両の現在位置に基づいて確定される、請求項２に記載の方法。
【請求項４】
前記上限速度制限は、現在時刻における前記自動運転車両と前記移動障害物の投影との間の距離に基づいて確定される、請求項３に記載の方法。
【請求項５】
前記上限速度制限はｖ０ｅ−α／ｄであり、式中、ｖ０は前記自動運転車両の現在速度であり、αは減衰率であり、ｄは現在時刻における前記自動運転車両と前記移動障害物の投影との間の距離である、請求項３に記載の方法。
【請求項６】
時間Ｔはｖ上限／ａｃｃｍａｘ＋ｋであり、式中、ｖ上限は前記自動運転車両の最大速度又は前記自動運転車両の道路に応じて確定される最大速度であり、ａｃｃｍａｘは前記自動運転車両の最大加速度であり、ｋは定数である、請求項３に記載の方法。
【請求項７】
前記移動障害物は歩行者である、請求項１に記載の方法。
【請求項８】
命令が格納されている非一時的機械可読媒体であって、前記命令はプロセッサにより実行されるときに前記プロセッサに動作を実行させ、前記動作は、
自動運転車両の画像キャプチャ装置から前記自動運転車両の環境を感知するキャプチャ画像を受信するステップであって、前記キャプチャ画像は前記自動運転車両付近の移動中の障害物を認識するものであるステップと、
移動障害物の投影に基づいて、前記移動障害物周囲の実行可能領域を生成するステップと、
前記自動運転車両が前記実行可能領域内にある場合に、前記自動運転車両の上限速度制限を確定するステップと、
前記上限速度制限未満の軌跡速度を有する軌跡を生成して、前記自動運転車両が前記実行可能領域内にある場合に前記自動運転車両が減速するように、前記自動運転車両を前記軌跡に従って自律的に制御するステップとを含む、非一時的機械可読媒体。
【請求項９】
生成された実行可能領域は、時間Ｔにおける前記移動障害物の速度方向に基づいて確定される中心位置と、前記移動障害物の速度に基づいて確定される半径とを含む、請求項８に記載の非一時的機械可読媒体。
【請求項１０】
前記移動障害物の投影位置は、前記移動障害物及び前記自動運転車両の現在位置に基づいて確定される、請求項９に記載の非一時的機械可読媒体。
【請求項１１】
前記上限速度制限は、現在時刻における前記自動運転車両と前記移動障害物の投影との間の距離に基づいて確定される、請求項１０に記載の非一時的機械可読媒体。
【請求項１２】
前記上限速度制限はｖ０ｅ−α／ｄであり、式中、ｖ０は前記自動運転車両の現在速度であり、αは減衰率であり、ｄは現在時刻における前記自動運転車両と前記移動障害物の投影との間の距離である、請求項１０に記載の非一時的機械可読媒体。
【請求項１３】
時間Ｔはｖ上限／ａｃｃｍａｘ＋ｋであり、式中、ｖ上限は前記自動運転車両の最大速度又は前記自動運転車両の道路に応じて確定される最大速度であり、ａｃｃｍａｘは前記自動運転車両の最大加速度であり、ｋは定数である、請求項１０に記載の非一時的機械可読媒体。
【請求項１４】
前記移動障害物は歩行者である、請求項８に記載の非一時的機械可読媒体。
【請求項１５】
プロセッサと、命令を格納するために前記プロセッサに接続されるメモリと、を備えるデータ処理システムであって、
前記命令は、前記プロセッサにより実行されるときに、前記プロセッサに動作を実行させ、
前記動作は、
自動運転車両の画像キャプチャ装置から前記自動運転車両の環境を感知するキャプチャ画像を受信するステップであって、前記キャプチャ画像は前記自動運転車両付近の移動中の障害物を認識するステップと、
移動障害物の投影に基づいて、前記移動障害物周囲の実行可能領域を生成するステップと、
前記自動運転車両が前記実行可能領域内にある場合に、前記自動運転車両の上限速度制限を確定するステップと、
前記上限速度制限未満の軌跡速度を有する軌跡を生成して、前記自動運転車両が前記実行可能領域内にある場合に前記自動運転車両が減速するように、前記自動運転車両を前記軌跡に従って自律的に制御するステップとを含む、データ処理システム。
【請求項１６】
生成された実行可能領域は、時間Ｔにおける前記移動障害物の速度方向に基づいて確定される中心位置と、前記移動障害物の速度に基づいて確定される半径とを含む、請求項１５に記載のシステム。
【請求項１７】
前記移動障害物の投影位置は、前記移動障害物及び前記自動運転車両の現在位置に基づいて確定される、請求項１６に記載のシステム。
【請求項１８】
前記上限速度制限は、現在時刻における前記自動運転車両と前記移動障害物の投影との間の距離に基づいて確定される、請求項１７に記載のシステム。
【請求項１９】
前記上限速度制限はｖ０ｅ−α／ｄであり、式中、ｖ０は前記自動運転車両の現在速度であり、αは減衰率であり、ｄは現在時刻における前記自動運転車両と前記移動障害物の投影との間の距離である、請求項１７に記載のシステム。
【請求項２０】
時間Ｔはｖ上限／ａｃｃｍａｘ＋ｋであり、式中、ｖ上限は前記自動運転車両の最大速度又は前記自動運転車両の道路に応じて確定される最大速度であり、ａｃｃｍａｘは前記自動運転車両の最大加速度であり、ｋは定数である、請求項１７に記載のシステム。
【請求項２１】
前記移動障害物は歩行者である、請求項１５に記載のシステム。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明の実施形態は全体として自動運転車両の操作に関するものである。より具体的には、本発明の実施形態は自動運転車両（ＡＤＶ）のための低速シーンにおける歩行者インタラクションシステムに関する。
【背景技術】
【０００２】
自動運転モード（例えば、無人運転）で操作される車は、乗員、特に運転手を一部の運転に関する責務から解放することができる。自動運転モードで操作する場合、車は車載センサを用いて様々な位置までナビゲートし、車を人との最小限のインタラクションで、又は一部の場合には乗員がいないままで走行させることができる。
【０００３】
自動運転モードが実行されるとき、都市道路上の自動運転車両のインタラクション戦略は、低速シーンで走行する車両に適しないことがある。このような低速シーンの場所としては、駐車場、車線、大学、並びに教育機関、施設の建物のキャンパスランドなどを含むことができる。自動運転車両と歩行者とのインタラクションは、都市道路よりもキャンパスランドにおいてより多く行われる。
【発明の概要】
【０００４】
第１の態様では、本発明は、自動運転車両（ＡＤＶ）のためのコンピュータ実施方法を提供し、この方法は、ＡＤＶの画像キャプチャ装置からＡＤＶの環境を感知するキャプチャ画像を受信するステップであって、キャプチャ画像はＡＤＶ付近の移動中の障害物を認識するものであるステップと、移動障害物の投影に基づいて移動障害物周囲の実行可能領域を生成するステップと、ＡＤＶが実行可能領域内にある場合に、ＡＤＶの上限速度制限を確定するステップと、上限速度制限未満の軌跡速度を有する軌跡を生成して、ＡＤＶが実行可能領域内にある場合に、ＡＤＶが減速するように、該軌跡に従ってＡＤＶを自律的に制御するステップとを含む。
【０００５】
第２の態様では、本発明は、命令が格納されている非一時的機械可読媒体を提供し、前記命令はプロセッサにより実行されるときにプロセッサに動作を実行させ、該動作は、ＡＤＶの画像キャプチャ装置からＡＤＶの環境を感知するキャプチャ画像を受信するステップであって、キャプチャ画像はＡＤＶ付近の移動中の障害物を認識するものであるステップと、移動障害物の投影に基づいて、移動障害物周囲の実行可能領域を生成するステップと、ＡＤＶが実行可能領域内にある場合に、ＡＤＶの上限速度制限を確定するステップと、上限速度制限未満の軌跡速度を有する軌跡を生成して、ＡＤＶが実行可能領域内にある場合に、ＡＤＶが減速するように、該軌跡に従ってＡＤＶを自律的に制御するステップとを含む。
【０００６】
第３の態様では、本発明はデータ処理システムを提供し、該データ処理システムは、プロセッサと、命令を格納するためにプロセッサに接続されるメモリとを備えるデータ処理システムであって、前記命令は、前記プロセッサにより実行されるときに、前記プロセッサに動作を実行させ、該動作は、ＡＤＶの画像キャプチャ装置からＡＤＶの環境を感知するキャプチャ画像を受信するステップであって、キャプチャ画像はＡＤＶ付近の移動中の障害物を認識するものであるステップと、移動障害物の投影に基づいて、移動障害物周囲の実行可能領域を生成するステップと、ＡＤＶが実行可能領域内にある場合に、ＡＤＶの上限速度制限を確定するステップと、上限速度制限未満の軌跡速度を有する軌跡を生成して、ＡＤＶが実行可能領域内にある場合に、ＡＤＶが減速するように、該軌跡に従ってＡＤＶを自律的に制御するステップとを含む。
【図面の簡単な説明】
【０００７】
本発明の実施形態は添付図面の各図において例示的且つ非制限的に示されており、添付図面における同じ参考符号は類似素子を示す。
【０００８】
【図１】一実施形態に係るネットワーク化システムを示すブロック図である。
【０００９】
【図２】一実施形態に係る自動運転車両のためのセンサと制御システムとの一例を示すブロック図である。
【００１０】
【図３Ａ】いくつかの実施形態に係る自動運転車両のための感知・計画システムの一例を示すブロック図である。
【図３Ｂ】いくつかの実施形態に係る自動運転車両のための感知・計画システムの一例を示すブロック図である。
【００１１】
【図４】一実施形態に係る速度制限モジュールの一例を示すブロック図である。
【００１２】
【図５】一実施形態に係るキャンパスシーンの一例を示すブロック図である。
【００１３】
【図６】一実施形態に係る方法を示すフローチャートである。
【００１４】
【図７】一実施形態に係るデータ処理システムを示すブロック図である。
【発明を実施するための形態】
【００１５】
本発明の様々な実施形態と態様は、以下で論述される詳細を参照しながら記載され、添付図面が様々な実施形態を説明する。下記説明及び添付図面は本発明を説明するためのものであり、本発明を限定するものとして解釈されてはいけない。多くの具体的な詳細は、本発明の様々な実施形態に対する全面的な理解を提供するために記載される。しかしながら、特定の場合において、本発明の実施形態に対する簡潔な論述を提供するために、公知又は通常の詳細は記載されないことがある。
【００１６】
本明細書において、「一実施形態」又は「実施形態」とは、当該実施形態に記載されている特定の特徴、構成又は特性を組み合わせて本発明の少なくとも一つの実施形態に含むことができることを意味する。「一実施形態において」という表現は、本明細書の全体において全てが同一の実施形態を指すとは限らない。
【００１７】
本発明の実施形態は自動運転車両のための低速シーンにおける車両−歩行者のインタラクションシステムを開示した。一実施形態によれば、システムはＡＤＶの画像キャプチャ装置からＡＤＶの環境を感知するキャプチャ画像を受信し、うち、キャプチャ画像はＡＤＶ付近の移動中の障害物を認識する。システムは、移動障害物の投影に基づいて移動障害物周囲の実行可能領域を生成する。ＡＤＶが実行可能領域内にある場合、システムはＡＤＶの上限速度制限を確定する。システムは、上限速度制限未満の軌跡速度を有する軌跡を生成して、ＡＤＶが実行可能領域内にある場合に、ＡＤＶが減速するように、該軌跡に従って自律的にＡＤＶを制御する。
【００１８】
一実施形態において、生成された実行可能領域は、時間Ｔにおける移動障害物の位置及び／又は速度方向に基づいて確定される中心位置と、移動障害物の速度に基づいて確定される半径とを含む。別の実施形態では、移動障害物の投影の位置は、移動障害物及びＡＤＶの位置に基づいて確定され、例えば、ＡＤＶ及び移動障害物の移動方向との間の垂直交差点（例えば、９０度）において、別の実施形態では、上限速度制限が現在時間におけるＡＤＶと移動障害物の投影との間の距離に基づいて確定される。
【００１９】
別の実施形態では、時間ＴにおけるＡＤＶの上限速度制限又は速度制限（ｖ制限）はｖ０ｅ−α／ｄであり、ｖ０はＡＤＶの現在速度であり、αは減衰率であり、ｄは現在時間におけるＡＤＶと移動障害物の投影との間の距離である。別の実施形態では、時間ＴはＴ＝ｖ上限／ａｃｃｍａｘ＋ｋによって確定され、ｖ上限はＡＤＶの最大速度またはＡＤＶの道路によって確定される最大速度であり、ａｃｃｍａｘはＡＤＶの最大加速度であり、ｋは定数である。一実施形態では、移動障害物は歩行者である。
【００２０】
図１は、一実施形態に係る自動運転車両のネットワーク配置を示すブロック図である。図１を参照し、ネットワーク配置１００は、ネットワーク１０２を介して１つまたは複数のサーバ１０３〜１０４に通信可能に接続される自動運転車両１０１を含む。１台の自動運転車両が示されているが、複数の自動運転車両がネットワーク１０２を介して互いに、および／またはサーバ１０３〜１０４に接続されてもよい。ネットワーク１０２は、有線または無線のローカルエリアネットワーク（ＬＡＮ）、インターネットなどのようなワイドエリアネットワーク（ＷＡＮ）、セルラーネットワーク、衛星ネットワーク、またはそれらの組み合わせなど任意の種類のネットワークであってもよい。サーバ１０３〜１０４は、ネットワークまたはクラウドサーバ、アプリケーションサーバ、バックエンドサーバ、またはそれらの組み合わせなど、任意のタイプのサーバまたはサーバクラスタであってもよい。サーバ１０３〜１０４は、データ解析サーバ、コンテンツサーバ、交通情報サーバ、地図・ポイントオブインタレスト（ＭＰＯＩ）サーバ、または位置サーバなどであってもよい。
【００２１】
自動運転車両とは、車両が運転者からの入力が非常に少なくまたはない場合でもナビゲーションして環境を通過するように、自律走行モードに設定できる車両のことである。このような自動運転車両は、車両走行環境に関連する情報を検出するように構成された１つまたは複数のセンサを有するセンサシステムを備えてもよい。前記車両およびそれに関連するコントローラは、検出された情報を用いてナビゲーションして前記環境を通過できる。自動運転車両１０１は、手動モード、完全自律運転モード、又は部分自律運転モードで走行することができる。
【００２２】
一実施形態では、自動運転車両１０１は、感知・計画システム１１０、車両制御システム１１１、無線通信システム１１２、ユーザインターフェースシステム１１３、及びセンサシステム１１５を含むが、これらに限定されない。自動運転車両１０１には、一般車両に備えられているいくつかの一般的な構成要素、例えば、エンジン、車輪、ステアリングホイール、変速機などが更に備えられてもよく、前記構成要素は、車両制御システム１１１及び／又は感知・計画システム１１０により複数種類の通信信号及び／又はコマンド、例えば、加速信号又はコマンド、減速信号又はコマンド、ステアリング信号又はコマンド、ブレーキ信号又はコマンドなどを使用して制御可能である。
【００２３】
構成要素１１０〜１１５は、インターコネクタ、バス、ネットワーク又はこれらの組み合わせを介して互いに通信可能に接続することができる。例えば、構成要素１１０〜１１５は、コントローラエリアネットワーク（ＣＡＮ）バスを介して互いに通信可能に接続することができる。ＣＡＮバスは、ホストコンピュータなしのアプリケーションにおいてマイクロコントローラ及びデバイスが互いに通信できるように許容された車両通信規格である。それは、もともとは自動車内の多重電気配線のために設計されたメッセージに基づくプロトコルであるが、他の多くの環境にも用いられる。
【００２４】
以下図２を参照すると、一実施形態では、センサシステム１１５は、一つ以上のカメラ２１１、全地球測位システム（ＧＰＳ）ユニット２１２、慣性計測ユニット（ＩＭＵ）２１３、レーダユニット２１４並びに光検出・測距（ＬＩＤＡＲ）ユニット２１５を含むが、これらに限定されない。ＧＰＳユニット２１２は、自動運転車両の位置に関する情報を提供するように操作可能な送受信機を含んでもよい。ＩＭＵユニット２１３は、慣性加速度に基づいて自動運転車両の位置及び向きの変化を感知することができる。レーダユニット２１４は、無線信号を用いて自動運転車両のローカル環境におけるオブジェクトを感知するシステムを表してもよい。いくつかの実施形態において、オブジェクトを感知することに加えて、レーダユニット２１４は、更にオブジェクトの速度及び／又は進行方向を感知することもできる。ＬＩＤＡＲユニット２１５は、自動運転車両が位置する環境におけるオブジェクトをレーザで感知することができる。他のシステム構成要素に加えて、ＬＩＤＡＲユニット２１５は、更に一つ以上のレーザ光源、レーザスキャナ及び一つ以上の検出器を含んでもよい。カメラ２１１は、自動運転車両の周囲環境における画像を取り込むための一つ以上のデバイスを含んでもよい。カメラ２１１は、固定カメラ及び／又はＰＴＺ（パンチルトズーム）カメラであってもよい。カメラは、例えば、回転及び／又は傾斜のプラットフォームにカメラを取り付けることによって、機械的に移動可能なものであってもよい。
【００２５】
センサシステム１１５は更に他のセンサ、例えばソナーセンサ、赤外線センサ、ステアリングセンサ、スロットルセンサ、ブレーキセンサ及びオーディオセンサ（例えば、マイクロホン）を含んでもよい。オーディオセンサは、自動運転車両の周囲の環境から音声を取得するように構成されてもよい。ステアリングセンサ（例えば、電動パワーステアリングシステム（ＥＰＳ））は、ステアリングホイール、車両の車輪又はこれらの組み合わせの操舵角を感知するように構成されてもよい。スロットルセンサ及びブレーキセンサはそれぞれ車両のスロットル位置及びブレーキ位置を感知する。ある場合に、スロットルセンサ及びブレーキセンサは集積型スロットル／ブレーキセンサとして統合されてもよい。
【００２６】
車両制御システム１１１は、ステアリングユニット２０１、スロットルユニット２０２（加速ユニットともいう）及びブレーキユニット２０３を含むが、これらに限定されない。ステアリングユニット２０１は、車両の方向又は進行方向を調整するために用いられる。スロットルユニット２０２は、モータ又はエンジンの速度を制御するために用いられ、モータ又はエンジンの速度によって更に車両の速度及び加速度を制御する。ブレーキユニット２０３は、摩擦を提供することによって車両の車輪又はタイヤを減速させることで、車両を減速させる。注意すべきことは、図２に示された構成要素は、ハードウェア、ソフトウェア又はこれらの組み合わせで実施することができる。
【００２７】
再び図１を参照し、無線通信システム１１２は、自動運転車両１０１と、デバイス、センサ、他の車両などのような外部システムとの通信を可能にする。例えば、無線通信システム１１２は、直接又は通信ネットワークを介して一つ以上のデバイスと無線通信することができ、例えば、ネットワーク１０２を介してサーバ１０３〜１０４と通信することができる。無線通信システム１１２は、任意のセルラー通信ネットワーク又は無線ローカルエリアネットワーク（ＷＬＡＮ）を使用して、例えばＷｉＦｉ（登録商標）を使用して他の構成要素又はシステムと通信することができる。無線通信システム１１２は、例えば赤外線リンク、ブルートゥース（登録商標）などを使用して、デバイス（例えば、乗員のモバイルデバイス、表示装置、車両１０１内のスピーカ）と直接通信することができる。ユーザインターフェースシステム１１３は、車両１０１内で実施された周辺装置の部分、例えば、キーボード、タッチスクリーン表示装置、マイクロホン及びスピーカなどを含んでもよい。
【００２８】
自動運転車両１０１の機能のうちの一部又は全部は、特に自動運転モードで操作する場合に、感知・計画システム１１０により制御されるか、又は管理されることができる。感知・計画システム１１０は、センサシステム１１５、制御システム１１１、無線通信システム１１２及び／又はユーザインターフェースシステム１１３から情報を受信し、受信された情報を処理し、出発地から目的地までのルート又は経路を計画した後に、計画及び制御情報に基づいて車両１０１を運転するために、必要なハードウェア（例えば、プロセッサ、メモリ、記憶デバイス）並びにソフトウェア（例えば、オペレーティングシステム、計画及びルーティングプログラム）を含む。あるいは、感知・計画システム１１０は車両制御システム１１１と一体に集積されてもよい。
【００２９】
例えば、乗員であるユーザは、例えば、ユーザインターフェースを介して旅程の出発地位置及び目的地を指定することができる。感知・計画システム１１０は旅程関連データを取得する。例えば、感知・計画システム１１０は、ＭＰＯＩサーバから位置及びルート情報を取得することができる、前記ＭＰＯＩサーバは、サーバ１０３〜１０４の一部であってもよい。位置サーバは位置サービスを提供し、ＭＰＯＩサーバは地図サービス及びある位置のＰＯＩを提供する。あるいは、このような位置及びＭＰＯＩ情報は、感知・計画システム１１０の永続性記憶装置にローカルキャッシュされてもよい。
【００３０】
自動運転車両１０１がルートに沿って移動している場合に、感知・計画システム１１０は交通情報システム又はサーバ（ＴＩＳ）からリアルタイム交通情報を取得することもできる。注意すべきことは、サーバ１０３〜１０４は第三者エンティティにより操作させることができる。場合に応じて、サーバ１０３〜１０４の機能は、感知・計画システム１１０と一体に集積されてもよい。リアルタイム交通情報、ＭＰＯＩ情報及び位置情報、並びにセンサシステム１１５によって検出されたか又は感知されたリアルタイムローカル環境データ（例えば、障害物、オブジェクト、周辺車両）に基づいて、感知・計画システム１１０は、指定された目的地までに安全かつ効率的に到着するように、最適なルートを計画し、計画されたルートに従って、例えば、制御システム１１１によって、車両１０１を運転することができる。
【００３１】
サーバ１０３は、様々なクライアントに対してデータ解析サービスを実行するためのデータ解析システムであってもよい。一実施形態において、データ解析システム１０３は、データコレクタ１２１と、機械学習エンジン１２２とを含む。データコレクタ１２１は、様々な車両（自動運転車両又は人間の運転手によって運転される一般車両）から運転統計データ１２３を収集する。運転統計データ１２３は、発した運転命令（例えば、スロットル、ブレーキ、ステアリングの命令）及び車両のセンサによって異なる時点で取得された車両の応答（例えば、速度、加速、減速、方向）を指示する情報を含む。運転統計データ１２３は更に、異なる時点における運転環境を記述する情報、例えば、ルート（出発地及び目的地を含む）、ＭＰＯＩ、道路状況、天気状況などを含んでもよい。
【００３２】
機械学習エンジン１２２は、運転統計データ１２３に基づいて、様々な目的に応じてルールセット、アルゴリズム及び／又はモデル１２４を生成するか又は訓練する。一実施形態では、例えば、アルゴリズム／モデル１２４は、歩行者などのオブジェクトを検出し、これらのオブジェクトに関する情報を識別するように、１つ以上の機械学習モデル及び／又は画像分割モデルを含んでもよい。機械学習モデルは、ＡＤＶの自動運転にリアルタイムで使用されるように、トレーニングされるとともにＡＤＶにアップロードされる。アルゴリズム／モデル１２４は、ＡＤＶが使用する速度制限を確定するためのアルゴリズム／モデルを含むことができる。
【００３３】
図３Ａ〜図３Ｂは、一実施形態に係る自動運転車両に併用される感知・計画システムの一例を示すブロック図である。システム３００は、図１の自動運転車両１０１の一部として実現されてもよく、感知・計画システム１１０、制御システム１１１及びセンサシステム１１５を含むが、これらに限定されない。図３Ａ及び図３Ｂを参照すると、感知・計画システム１１０は、測位モジュール３０１、感知モジュール３０２、予測モジュール３０３、決定モジュール３０４、計画モジュール３０５、制御モジュール３０６、ルーティング／サンプリングモジュール３０７及び速度制限モジュール３０８を含むが、これらに限定されない。
【００３４】
モジュール３０１〜３０８のうちの一部又は全部は、ソフトウェア、ハードウェア又はこれらの組み合わせで実現されてもよい。例えば、これらのモジュールは、永続性記憶装置３５２にインストールされ、メモリ３５１にロードされ、且つ一つ以上のプロセッサ（図示せず）により実行されてもよい。注意すべきことは、これらのモジュールのうちの一部又は全部は、図２の車両制御システム１１１の一部又は全部のモジュールに通信可能に接続されるか、又はそれらと一体に統合されてもよい。モジュール３０１〜３０８のうちの一部は集積モジュールとして一体に統合されてもよい。速度制限モジュール３０８及び計画モジュール３０５は集積モジュールとして一体化されてもよい。
【００３５】
測位モジュール３０１は、（例えば、ＧＰＳユニット２１２を利用して）自動運転車両３００の現在の位置を確定し、ユーザの旅程又はルートに関連する如何なるデータを管理する。測位モジュール３０１（地図及びルーティングモジュールともいう）は、ユーザの旅程又はルートに関連する如何なるデータを管理する。ユーザは、例えば、ユーザインターフェースを介してログインして旅程の出発地及び目的地を指定することができる。測位モジュール３０１は、自動運転車両３００における地図及びルート情報３１１のような他の構成要素と通信して、旅程関連データを取得する。例えば、測位モジュール３０１は、位置サーバ並びに地図・ポイントオブインタレスト（ＭＰＯＩ）サーバから位置及びルート情報を取得することができる。位置サーバは位置サービスを提供し、ＭＰＯＩサーバは地図サービス及びある位置のＰＯＩを提供することにより、地図及びルート情報３１１の一部としてキャッシュされることができる。自動運転車両３００がルートに沿って移動している場合に、測位モジュール３０１は交通情報システム又はサーバからリアルタイム交通情報を取得することもできる。
【００３６】
感知モジュール３０２は、センサシステム１１５により提供されたセンサデータと、測位モジュール３０１により取得された測位情報とに基づいて、周囲環境への感知を確定する。感知情報は、一般の運転手が運転手により運転されている車両の周囲において感知すべきものを示すことができる。感知は、例えば、オブジェクト形式を採用した車線構成（例えば、直線車線、曲がり車線）、信号機信号、他の車両の相対位置、歩行者、建築物、横断歩道又は他の交通関連標識（例えば、止まれ標識、ゆずれ標識）などを含むことができる。車線構成は、例えば、車線の形状（例えば、直線または湾曲）、車線の幅、道路内の車線数、一方向または二方向車線、合流または分流車線、退出車線などのような、１つまたは複数の車線を記述する情報を含む。
【００３７】
感知モジュール３０２は、一つ以上のカメラにより取り込まれた画像を処理、解析して、自動運転車両の環境におけるオブジェクト及び／又は特徴を認識するために、コンピュータビジョンシステム又はコンピュータビジョンシステムの機能を含むことができる。前記オブジェクトは、交通信号、道路の境界、他の車両、歩行者及び／又は障害物などを含むことができる。コンピュータビジョンシステムは、オブジェクト認識アルゴリズム、ビデオトラッキング及び他のコンピュータビジョン技術を使用することができる。いくつかの実施形態では、コンピュータビジョンシステムは、環境地図の描画、オブジェクトの追跡、及びオブジェクトの速度推定などを行うことができる。感知モジュール３０２は、レーダ及び／又はＬＩＤＡＲのような他のセンサにより提供される他のセンサデータに基づいてオブジェクトを検出することもできる。
【００３８】
各オブジェクトについて、予測モジュール３０３は、様々な場合にオブジェクトがどのように挙動するかを予測する。予測は、地図及びルート情報３１１と交通ルール３１２のセットに応じて、該時点において運転環境が感知された感知データに基づいて実行される。例えば、オブジェクトが反対方向における車両で、且つ現在の運転環境に交差点が含まれている場合に、予測モジュール３０３は車両が直進するか又は方向転換するかを予測する。感知データが、交差点に信号機がないことを示す場合、予測モジュール３０３は、交差点に入る前に車両が完全に停止する必要があると予測する可能性がある。感知データが、車両が現在左折専用車線又は右折専用車線にあることを示す場合、予測モジュール３０３は、車両がそれぞれ左折又は右折する可能性がより高いと予測することができる。
【００３９】
各オブジェクトに対して、決定モジュール３０４はオブジェクトをどのように対応するかを決定する。例えば、特定のオブジェクト（例えば、交差のルートにおける他の車両）及びオブジェクトを記述するメタデータ（例えば、速度、方向、方向転換角）について、決定モジュール３０４は前記オブジェクトと遇うときに如何に対応するか（例えば、追い越し、道譲り、停止、追い抜き）を決定する。決定モジュール３０４は、交通ルール又は運転ルール３１２のルールセットに基づいてこのような決定を下すことができ、前記ルールセットは永続性記憶装置３５２に格納されてもよい。
【００４０】
ルーティングモジュール３０７は、出発地から目的地までの一つ以上のルート又は経路を提供するように構成される。例えば、ユーザから受信した出発地から目的地までの所定の旅程に対して、ルーティングモジュール３０７は地図及びルート情報３１１を取得して出発地から目的地に到着する全ての可能なルート又は経路を決定する。決定された出発地から目的地に到着するルート毎に、ルーティングモジュール３０７は地形図の形式で基準線を生成することができる。基準線とは、他の車両、障害物又は交通状況のような如何なる干渉を受けない理想的なルート又は経路を指す。即ち、路上に他の車両、歩行者又は障害物がなければ、ＡＤＶは基準線に完全に又は緊密に従うべきである。そして、地形図が決定モジュール３０４及び／又は計画モジュール３０５に提供される。決定モジュール３０４及び／又は計画モジュール３０５は全ての可能なルートを検査して他のモジュールから提供された他のデータ、例えば測位モジュール３０１からの交通状況、感知モジュール３０２により感知された運転環境及び予測モジュール３０３により予測された交通状況に基づいて最適ルートのうちの一つを選択し修正する。ＡＤＶを制御するための実際のルート又は経路は、その時点における特定運転環境によって、ルーティングモジュール３０７から提供された基準線に近接するか又は異なっていてもよい。
【００４１】
計画モジュール３０５は、感知されたオブジェクトのそれぞれに対する決定に基づいて、自動運転車両のために経路又はルート並びに運転パラメータ（例えば、距離、速度及び／又は方向転換角）を計画する。言い換えれば、所定のオブジェクトについて、決定モジュール３０４は当該オブジェクトに対して何をするかを決定し、計画モジュール３０５はどのようにするかを確定する。例えば、所定のオブジェクトについて、決定モジュール３０４は前記オブジェクトを追い抜くかを決定することができ、計画モジュール３０５は前記オブジェクトを左側から追い抜くかそれとも右側から追い抜くかを確定することができる。計画及び制御データは計画モジュール３０５により生成され、車両３００が次の移動周期（例えば、次のルート／経路区間）にはどのように移動するかを記述する情報を含む。例えば、計画及び制御データは、車両３００が３０マイル／時間（ｍｐｈ）の速度で１０メートル移動し、その後２５ｍｐｈの速度で右側車線に変更するように指示することができる。
【００４２】
制御モジュール３０６は、計画及び制御データに基づいて、計画及び制御データにより限定されたルート又は経路に応じて適当なコマンド又は信号を車両制御システム１１１に送信することにより自動運転車両を制御しながら運転する。前記計画及び制御データは、経路又はルートに沿って異なる時点で適切な車両構成又は運転パラメータ（例えば、スロットル、ブレーキ、及びステアリングコマンド）を使用して、車両をルート又は経路の第１の点から第２の点まで運転するのに十分な情報を含む。
【００４３】
一実施形態では、計画段階は、例えば、時間間隔１００ミリ秒（ｍｓ）あたりの周期など、複数の計画周期（命令周期ともいう）で実行される。計画周期又は命令周期のそれぞれについては、計画及び制御データに基づいて一つ以上の制御コマンドを発する。すなわち、１００ｍｓごとに、計画モジュール３０５は、例えば、目標位置及びＡＤＶが目標位置に到着するのに必要な時間を含む次のルート区間又は経路区間を計画する。あるいは、計画モジュール３０５は更に具体的な速度、方向及び／又は操舵角などを指定することもできる。一実施形態では、計画モジュール３０５は、次の所定時間周期（例えば、５秒）のルート区間又は経路区間を計画する。各計画周期について、計画モジュール３０５は、前の周期で計画された目標位置に基づいて、現在の周期（例えば、次の５秒）のための目標位置を計画する。次に、制御モジュール３０６は、現在の周期の計画及び制御データに基づいて、一つ以上の制御コマンド（例えば、スロットル、ブレーキ、ステアリング制御コマンド）を生成する。
【００４４】
注意すべきことは、決定モジュール３０４及び計画モジュール３０５は、集積モジュールとして一体化されてもよい。決定モジュール３０４／計画モジュール３０５は、自動運転車両の運転経路を確定するために、ナビゲーションシステム又はナビゲーションシステムの機能を具備することができる。例えば、ナビゲーションシステムは、自動運転車両が下記の経路に沿って移動することを実現するための一連の速度及び進行方向を確定することができる。すなわち、前記経路では、自動運転車両が最終的な目的地に通じる走行車線に基づく経路に沿って進行するとともに、感知された障害物を実質的に回避できる。目的地は、ユーザインターフェースシステム１１３を経由して行われたユーザ入力に応じて設定されることができる。ナビゲーションシステムは、自動運転車両が走行していると同時に運転経路を動的に更新することができる。ナビゲーションシステムは、自動運転車両のための運転経路を確定するために、ＧＰＳシステム及び一つ以上の地図からのデータをマージすることができる。
【００４５】
決定モジュール３０４／計画モジュール３０５は、自動運転車両の環境内の潜在的な障害物を識別し、評価し、回避し、またはその他の方式で追い越すために、衝突回避システムまたは衝突回避システムの機能をさらに含むことができる。例えば、衝突回避システムは以下の方式によって自動運転車両のナビゲーションにおける変更を実現することができる。すなわち、制御システム１１１における１つ以上のサブシステムを操作することで、急ハンドル操作、方向転換操作、ブレーキ操作などを行う。衝突回避システムは、周囲の交通モード、道路状況などに基づいて、実行可能な障害物回避操作を自動的に決定することができる。衝突回避システムは、自動運転車両が方向転換して進入しようとする隣接領域における車両、建物障害物などが他のセンサシステムによって検出された場合に、方向転換操作を取らないように構成されてもよい。衝突回避システムは、使用可能で且つ自動運転車両乗員の安全性を最大化する操作を自動的に選択することができる。衝突回避システムは、自動運転車両の車室内に最小限の加速度が発生すると予測される退避操作を選択することができる。
【００４６】
図４は、一実施形態に係る速度制限モジュールの一例を示すブロック図である。図４を参照すると、速度制限モジュール３０８は、１人以上の歩行者周囲の一つ以上の実行可能領域（例えば、警戒領域）に基づいてＡＤＶの上限速度制限を確定することができる。また、速度制限モジュール３０８は、ＡＤＶが実行可能な領域内である場合にＡＤＶが減速するように、上限速度制限に基づいてＡＤＶの運転軌跡を生成することができる。一実施形態では、速度制限モジュール３０８は、画像受信機／前処理モジュール４０１、実行可能領域生成モジュール４０３、速度制限確定モジュール４０５、及び軌跡生成モジュール４０７を含む。画像受信機／前処理モジュール４０１は、ＡＤＶの画像キャプチャ装置（例えば、１つ以上のカメラ）によってキャプチャされた画像を受信することができる。画像受信機／前処理モジュール４０１は画像を前処理することもできる。前処理は、画像に適用される露出制御、ゲイン制御、トーンマッピング、ホワイトバランス、並びにデモザイク及びバイラテラルフィルタを調整することを含むが、これらに限らない。画像を前処理することにより、異なる時間および天候条件を有する画像内のオブジェクト（例えば、歩行者）をよりよく識別するために画像を前もって準備しておくことができる。例えば、オブジェクトがより明晰に認識されるように、夜間では画像の露出量を日中よりも多くする必要がある。前処理は、別の例として、異なる構成を有する異なるカメラが画像キャプチャ装置に適用されるように、画像を標準画像サイズにスケーリング及び／又は切り取ることを含む。実行可能領域生成モジュール４０３は、検出されたオブジェクト（例えば、歩行者）毎に実行可能領域を生成することができる。実行可能領域は警戒領域であり、実行可能領域内のＡＤＶが慎重に進むことを示し、例えば、ＡＤＶは、所定の速度制限に基づいて車両速度を低下させ、毎秒より高いフレームレートで画像をキャプチャし、及び／又は停止するまでブレーキをかけることなどを示す。速度制限確定モジュール４０５は、速度制限モデル（例えば、図３Ａの速度制限モデル３１３の一部）に従って、与えられたオブジェクト／障害物（例えば、歩行者）の速度制限を確定することができる。軌跡生成モジュール４０７は、如何なる確定された速度制限に基づいて軌跡を生成してＡＤＶを制御し、それによって、歩行者の近くにおけるＡＤＶの速度を制限することができる。
【００４７】
図５は、一実施形態に係るキャンパスシーンの一例を示すブロック図である。図５を参照すると、一実施形態では、シーン５００は、移動中のオブジェクト５０１（例えば、歩行者）及びＡＤＶ１０１を含む。シーン５００は、大学キャンパス内の低速エリアまたは如何なる低速エリアを表してもよい。ＡＤＶ１０１が低速エリアに入り始まるか、または低速エリア内に位置しているとき（地図及びルート情報３１１によって確定）、ＡＤＶ１０１は、速度制限モジュール３０８を有効化／起動する。同様に、ＡＤＶ１０１が低速エリアから退出するか、または低速エリア外に位置する場合（地図及びルート情報３１１によって確定）、ＡＤＶ１０１は速度制限モジュール３０８を無効化／退出することができる。
【００４８】
低速エリアにあるとき、一実施形態では、画像受信モジュール（図４の速度制限モジュール３０８の画像受信機／前処理モジュール４０１など）は、ＡＤＶの画像センサから画像を受信する。画像受信機４０１は、ＡＤＶ１０１の近くの複数の障害物又はオブジェクトを認識するために画像を処理することができる。例えば、ＡＤＶ１０１は歩行者５０１を移動中の障害物として認識することができる。画像受信機４０１は、後続の画像フレームを受信し、機械学習モデル又は画像セグメンテーションモデルを介して、歩行者５０１の方向、速度及び／又は向きを検出することができる。他の一実施形態では、速度制限モジュール３０８は、図３Ａの感知モジュール３０２などの感知モジュールから歩行者５０１の歩行者情報（例えば、方向、速度及び／又は向き）を受信することができる。
【００４９】
次に、図４のモジュール４０３などの実行可能領域生成モジュールは、歩行者／障害物の情報に基づいて、ＡＤＶ−歩行者間のインタラクションのための歩行者５０１用の実行可能領域５０５を生成する。例えば、ＡＤＶ１０１が実行可能領域５０５内にある場合、図４のモジュール４０５のような速度制限確定モジュールは、ＡＤＶ１０１に適用されるべき上限速度制限を確定することができる。一実施形態では、移動障害物の投影（例えば、投影５０７）は、歩行者５０１の現在位置（例えば、（ｘ０，ｙ０））とＡＤＶ１０１との垂直交差点として確定される。一実施形態では、速度制限は、ＡＤＶ１０１と歩行者５０１の投影（例えば、投影５０７）との間の距離（例えば、距離ｄ）に基づいて決定されてもよい。また、ＡＤＶ１０１は、歩行者５０１が進路を変更しようと判断されたか又は移動を停止しようと判断された場合、新たな実行可能領域を生成するとともに、新たな速度制限を確定することができる。注意されたいことは、実行可能領域の形状は円形に限定されなく、楕円形や矩形など他の形状であってもよい。
【００５０】
速度制限に基づいて、図４のモジュール４０７などの軌跡生成モジュールは、速度が速度制限未満である軌跡を生成することができる。速度制限は、ＡＤＶ１０１を歩行者５０１から安全な距離に保つことができ、例えばＡＤＶ１０１が歩行者５０１に接近すると、ＡＤＶ１０１はＡＤＶ１０１と歩行者５０１との間の距離に応じて減速するか、又はＡＤＶ１０１が単に歩行者５０１の側方を通過すると、ＡＤＶ１０１の速度が速度制限まで徐々に減少する。図５では、説明のために一人の歩行者５０１しか示していないが、複数の歩行者が検出され、複数の実行可能領域が生成されてもよい。このような場合は、複数の実行可能領域に基づいて、最低速度制限を使用して軌跡を生成することができる。
【００５１】
実行可能領域を生成するために、一実施形態では、実行可能領域のサイズおよび中心点は、歩行者５０１の向き（および／または速度方向）並びに速度に応じて確定される。一実施形態では、実行可能領域５０５は円形であってもよい。実行可能領域５０５は、歩行者５０１の速度に比例する円の半径を有することができる。一実施形態では、該半径は歩行者５０１の速度に線形比例し、例えば、半径∝ｐｖであり、ｐは定数であり、ｖは歩行者５０１の速度である。別の実施形態では、実行可能領域は卵形または楕円形であってもよい。
【００５２】
実施可能領域５０５について、中心点５０３は中心（ｘ，ｙ）＝ｆ（θ）＋（ｘ０，ｙ０）と確定することができ、式中、θは歩行者５０１の速度方向であり、（ｘ０，ｙ０）は歩行者５０１の現在位置の座標である。ここで、ｆ（θ）は、歩行者５０１が現在の座標（例えば、歩行者の投影）から離れるときのその後の動きの予測値であってもよい。一実施形態では、時間Ｔにおける歩行者５０１のための実行可能領域５０５の中心点５０３を確定し、ここで、Ｔはｖ上限／ａｃｃｍａｘ＋ｋであり、ｖ上限はＡＤＶ１０１の最大速度、または低速エリアにおけるＡＤＶの道路によって確定される最大速度であり、ａｃｃｍａｘはＡＤＶの最大加速度または減速度（例えば、ブレーキ）であり、ｋは定数である。一実施形態において、時間間隔Ｔの方向速度θに基づいてf(θ)をＴ＊θと確定し、中心点５０３を式：中心（ｘ，ｙ）＝ｆ（θ）＋（ｘ０，ｙ０）に従って確定することができる。
【００５３】
そして、時間Ｔにおける速度制限を式：（ｖ制限）＝ｖ０ｅ−α／ｄに基づいて確定し、うち、ｖ０はＡＤＶ１０１の現在の速度、αは減衰率、ｄは現在時刻におけるＡＤＶと移動障害物の投影５０７との間の距離である。一実施形態では、投影５０７は、歩行者５０１の現在位置（例えば、（ｘ０，ｙ０））とＡＤＶ１０１との間の垂直交差部に位置する。減衰率は、距離ｄに対する速度制限の変化速度を調整するために使用され得る。一実施形態では、αは一定値（たとえば、＞１）またはＡＤＶ１０１のユーザによって予め設定された値である。速度制限が確定されると、当該速度制限は、図４のモジュール４０７などの軌跡生成モジュールによって生成された軌跡に適用可能となり、軌跡の速度がｖ制限まで徐々に減少するように、軌跡の速度を制限する。
【００５４】
図６は、一実施形態に係る方法を示すフローチャートである。プロセス６００は、ソフトウェア、ハードウェア、またはそれらの組み合わせを含み得る処理ロジックによって実行され得る。例えば、プロセス６００は、図３Ａの速度制限モジュール３０８によって実行され得る。図６を参照すると、ブロック６０１で、処理ロジックは、ＡＤＶの画像キャプチャ装置からＡＤＶの環境を感知するキャプチャ画像を受信し、ここで、キャプチャ画像はＡＤＶ付近の移動中の障害物を認識する。ブロック６０２では、処理ロジックは、移動障害物の投影に基づいて移動障害物周囲の実行可能領域を生成する。ブロック６０３において、ＡＤＶが実行可能領域内にある場合、処理ロジックはＡＤＶの上限速度制限を確定する。ブロック６０４で、処理ロジックは、上限速度制限未満の軌跡速度を有する軌跡を生成し、ＡＤＶが実行可能領域内にあればＡＤＶが減速するように、ＡＤＶを軌跡に従って自律的に制御する。
【００５５】
一実施形態において、生成された実行可能領域は、時間Ｔにおける移動障害物の速度方向に基づいて確定される中心位置と、移動障害物の速度に基づいて確定される半径とを含む。別の実施形態では、移動障害物の投影位置は、移動障害物の現在位置と移動障害物の速度方向とに基づいて確定される。別の実施形態では、移動障害物の投影位置は、移動障害物とＡＤＶとの間の垂直交差点として確定される（例えば、図５を参照）。別の実施形態では、上限速度制限は、現在時間ＡＤＶと移動障害物の投影との間の距離に基づいて確定される。
【００５６】
別の実施形態では、時間ＴにおけるＡＤＶの上限速度制限又は速度制限ｖ制限はｖ０ｅ−α／ｄであり、ｖ０はＡＤＶの現在速度であり、αは減衰率であり、ｄは現在時間におけるＡＤＶと移動障害物の投影との間の距離である。別の実施形態では、時間Ｔは式：Ｔ＝ｖ上限／ａｃｃｍａｘ＋ｋによって確定され、ｖ上限はＡＤＶの最大速度またはＡＤＶの道路によって確定される最大速度であり、ａｃｃｍａｘはＡＤＶの最大加速度であり、ｋは定数である。一実施形態では、移動障害物は歩行者である。
【００５７】
なお、上記の構成要素の一部または全部は、ソフトウェア、ハードウェアまたはそれらの組み合わせにより実現できる。例えば、このような構成要素は、永続性記憶装置にインストールされ且つ格納されたソフトウェアとして実現でき、前記ソフトウェアは、プロセッサ（図示せず）でメモリにロードされ且つ実行されることにより、本明細書にわたって説明されるプロセスまたは操作を実行する。あるいは、このような構成要素は専用ハードウェア（例えば、集積回路（例えば、特定用途向け集積回路またはＡＳＩＣ）、デジタル信号プロセッサ（ＤＳＰ）またはフィールドプログラマブルゲートアレイ（ＦＰＧＡ））にプログラミングされまたは組み込まれた実行可能なコードとして実現されてもよく、前記実行可能なコードは対応するドライバーおよび／またはオペレーティングシステムによってアプリケーションからアクセスできる。また、このような構成要素は、プロセッサまたはプロセッサコアにおける特定ハードウェアロジックとして実現されてもよく、ソフトウェア構成要素が１つまたは複数の特定命令によってアクセスされる命令セットの一部となる。
【００５８】
図７は、本発明の一実施形態と組み合わせて使用されるデータ処理システムを例示的に示すブロック図である。例えば、システム１５００は、上記プロセスまたは方法のいずれかを実行する上記任意のデータ処理システム、例えば、図１の感知・計画システム１１０またはサーバ１０３〜１０４を示すことができる。システム１５００は、多数の異なる構成要素を含んでもよい。これらの構成要素は、集積回路（ＩＣ）、集積回路の一部、分散型電子デバイスまたは回路基板に適用された他のモジュール（例えば、コンピュータシステムのマザーボードまたはアドインカード）、または他の方式でコンピュータシステムのシャシーに組み込まれた構成要素として実現できる
【００５９】
さらに、システム１５００は、コンピュータシステムの多数の構成要素の高レベルビューを示すことを意図している。しかしながら、いくつかの実現形態では、付加的構成要素を要してもよいことを理解すべきであり、また、他の実現形態において示される構成要素が異なる配置を有してもよい。システム１５００は、デスクトップコンピュータ、ラップトップコンピュータ、タブレットコンピュータ、サーバ、携帯電話、メディアプレーヤー、パーソナルディジタルアシスタント（ＰＤＡ）、スマート腕時計、パーソナルコミュニケーター、ゲーム装置、ネットワークルータまたはハブ、無線アクセスポイント（ＡＰ）またはリピーター、セット・トップボックス、またはそれらの組み合わせを示してもよい。また、単一の機械またはシステムのみを示したが、用語「機械」または「システム」は、さらに、本明細書で説明されるいずれか１つ又は複数の方法を実行するための、１つ（又は複数）の命令セットを単独で又は共同で実行する機械又はシステムの任意の組み合わせも含まれることを理解されたい。
【００６０】
一実施形態において、システム１５００は、バスまたはインターコネクト１５１０によって接続されたプロセッサ１５０１、メモリ１５０３およびデバイス１５０５〜１５０８を備える。プロセッサ１５０１は、単一のプロセッサコアまたは複数のプロセッサコアを含む単一のプロセッサまたは複数のプロセッサであってもよい。プロセッサ１５０１は、マイクロプロセッサ、中央処理装置（ＣＰＵ）等のような１つまたは複数の汎用プロセッサであってもよい。より具体的には、プロセッサ１５０１は、複雑命令セットコンピューティング（ＣＩＳＣ）マイクロプロセッサ、縮小命令セットコンピューティング（ＲＩＳＣ）マイクロプロセッサ、超長命令語（ＶＬＩＷ）マイクロプロセッサ、または他の命令セットを実現するプロセッサ、または命令セットの組み合わせを実現するプロセッサであってもよい。プロセッサ１５０１は、さらに、特定用途向け集積回路（ＡＳＩＣ）、セルラまたはベースバンドプロセッサ、フィールドプログラマブルゲートアレイ（ＦＰＧＡ）、デジタル信号プロセッサ（ＤＳＰ）、ネットワークプロセッサ、グラフィックプロセッサ、通信プロセッサ、暗号プロセッサ、コプロセッサ、組込みプロセッサのような１つまたは複数の専用プロセッサ、あるいは命令処理可能な任意の他のタイプのロジックであってもよい。
【００６１】
プロセッサ１５０１（超低電圧プロセッサのような低電力マルチコアプロセッサソケットであってもよい）は、前記システムの各種構成要素と通信するための主処理ユニットおよび中央ハブとして機能できる。このようなプロセッサは、システムオンチップ（ＳｏＣ）として実現できる。プロセッサ１５０１は、本明細書に説明される操作およびステップを実行するための命令を実行するように構成される。システム１５００は、選択可能なグラフィックサブシステム１５０４と通信するグラフィックインターフェースをさらに含んでもよく、グラフィックサブシステム１５０４は、表示コントローラ、グラフィックプロセッサおよび／または表示装置を備えてもよい。
【００６２】
プロセッサ１５０１は、メモリ１５０３と通信してもよく、メモリ１５０３は、一実施形態において所定量のシステムメモリを提供するための複数のメモリデバイスによって実装されてもよい。メモリ１５０３は、ランダムアクセスメモリ（ＲＡＭ）、ダイナミックＲＡＭ（ＤＲＡＭ）、シンクロナスＤＲＡＭ（ＳＤＲＡＭ）、スタティックＲＡＭ（ＳＲＡＭ）または他のタイプの記憶デバイスのような１つまたは複数の揮発性記憶（またはメモリ）デバイスを備えてもよい。メモリ１５０３は、プロセッサ１５０１または任意の他のデバイスにより実行される命令シーケンスを含む情報を格納できる。例えば、複数種のオペレーティングシステム、デバイスドライバ、ファームウェア（例えば、基本入出力システムまたはＢＩＯＳ）および／またはアプリケーションの実行可能なコードおよび／またはデータはメモリ１５０３にロードされてもよく、プロセッサ１５０１により実行されてもよい。オペレーティングシステムは、例えば、ロボットオペレーティングシステム（ＲＯＳ）、Ｍｉｃｒｏｓｏｆｔ（登録商標）社からのＷｉｎｄｏｗｓ（登録商標）オペレーティングシステム、アップル社からのＭａｃ    ＯＳ（登録商標）／ｉＯＳ（登録商標）、Ｇｏｏｇｌｅ（登録商標）社からのＡｎｄｒｏｉｄ（登録商標）、ＬＩＮＵＸ（登録商標）、ＵＮＩＸ（登録商標）または他のリアルタイムまたは組込みオペレーティングシステムのような任意のタイプのオペレーティングシステムであってもよい。
【００６３】
システム１５００は、Ｉ／Ｏデバイス、例えばデバイス１５０５〜１５０８をさらに備えてもよく、ネットワークインターフェースデバイス１５０５、選択可能な入力デバイス１５０６および他の選択可能なＩ／Ｏデバイス１５０７を備える。ネットワークインターフェースデバイス１５０５は、無線送受信機および／またはネットワークインターフェースカード（ＮＩＣ）を備えてもよい。前記無線送受信機は、ＷｉＦｉ（登録商標）送受信機、赤外線送受信機、ブルートゥース（登録商標）送受信機、ＷｉＭａｘ送受信機、無線セルラーホン送受信機、衛星送受信機（例えば、全地球測位システム（ＧＰＳ）送受信機）または他の無線周波数（ＲＦ）送受信機またはそれらの組み合わせであってもよい。ＮＩＣはイーサネット（登録商標）カードであってもよい。
【００６４】
入力デバイス１５０６は、マウス、タッチパッド、タッチスクリーン（それは表示装置１５０４と一体化されてもよい）、ポインタデバイス（例えば、スタイラス）および／またはキーボード（例えば、物理キーボードまたはタッチスクリーンの一部として表示された仮想キーボード）を備えてもよい。例えば、入力デバイス１５０６は、タッチスクリーンに接続されるタッチスクリーンコントローラを含んでもよい。タッチスクリーンおよびタッチスクリーンコントローラは、例えば、複数種のタッチ感応技術（コンデンサ、抵抗、赤外線および表面弾性波の技術を含むが、それらに限定されない）のいずれか、および他の近接センサアレイまたはタッチスクリーンとの１つまたは複数の接触点を確定するための他の素子を用いてそれらの接触、移動または中断を検出できる。
【００６５】
Ｉ／Ｏデバイス１５０７は音声装置を備えてもよい。音声装置は、スピーカおよび／またはマイクロホンを含んでもよく、それにより音声認識、音声複製、デジタル記録および／または電話機能のような音声サポートの機能を促進する。他のＩ／Ｏデバイス１５０７は、ユニバーサルシリアルバス（ＵＳＢ）ポート、パラレルポート、シリアルポート、印刷機、ネットワークインターフェース、バスブリッジ（例えば、ＰＣＩ−ＰＣＩブリッジ）、センサ（例えば、加速度計、ジャイロスコープ、磁力計、光センサ、コンパス、近接センサ等のモーションセンサ）またはそれらの組み合わせをさらに備えてもよい。デバイス１５０７は、結像処理サブシステム（例えば、カメラ）をさらに備えてもよく、前記結像処理サブシステムは、カメラ機能（例えば、写真およびビデオ断片の記録）を促進するための電荷結合素子（ＣＣＤ）または相補型金属酸化物半導体（ＣＭＯＳ）光学センサのような光学センサを備えてもよい。あるセンサは、センサハブ（図示せず）によってインターコネクト１５１０に接続されてもよく、キーボードまたはサーマルセンサのような他のデバイスは、システム１５００の具体的な構成または設計に応じて組込みコントローラ（図示せず）により制御されてもよい。
【００６６】
データ、アプリケーション、１つまたは複数のオペレーティングシステム等のような情報の永続性記憶を提供するために、大容量記憶デバイス（図示せず）は、プロセッサ１５０１に接続されてもよい。様々な実施形態において、薄型化と軽量化のシステム設計を実現し且つシステムの応答能力を向上させるために、このような大容量記憶デバイスは、ソリッドステートデバイス（ＳＳＤ）によって実現できる。しかし、他の実施形態において、大容量記憶デバイスは、主にハードディスクドライブ（ＨＤＤ）で実現されてもよく、より小さい容量のＳＳＤ記憶デバイスは、ＳＳＤキャッシュとして機能することで、停電イベント期間にコンテキスト状態および他のこのような情報の不揮発性記憶を実現し、それによりシステム動作が再開する時に通電を速く実現できる。さらに、フラッシュデバイスは、例えばシリアルペリフェラルインターフェース（ＳＰＩ）を介してプロセッサ１５０１に接続されてもよい。このようなフラッシュデバイスは、システムソフトウェアの不揮発性記憶に用いられてもよく、前記システムソフトウェアは、前記システムのＢＩＯＳおよび他のファームウェアを備える。
【００６７】
記憶デバイス１５０８は、本明細書に記載の方法または機能のいずれか１つ又は複数を具現化する１つまたは複数の命令セットまたはソフトウェア（例えば、モジュール、ユニットおよび／またはロジック１５２８）が格納されるコンピュータアクセス可能な記憶媒体１５０９（機械可読記憶媒体またはコンピュータ可読媒体とも呼ばれる）を備えてもよい。処理モジュール/ユニット/ロジック１５２８は、例えば、図３Ａの速度制限モジュール３０８のような上記構成要素のいずれかを示してもよい。処理ジュール／ユニット／ロジック１５２８は、さらにデータ処理システム１５００、メモリ１５０３、及びプロセッサ１５０１により実行される期間にメモリ１５０３内および／またはプロセッサ１５０１内に完全または少なくとも部分的に存在してもよく、データ処理システム１５００、メモリ１５０３およびプロセッサ１５０１も、機械アクセス可能な記憶媒体を構成する。処理モジュール／ユニット／ロジック１５２８は、さらにネットワークによってネットワークインターフェースデバイス１５０５を経由して送受信されてもよい。
【００６８】
コンピュータ可読記憶媒体１５０９は、以上に説明されたいくつかのソフトウェア機能を永続的に格納してもよい。コンピュータ可読記憶媒体１５０９は、例示的な実施形態において単一の媒体として示されたが、用語「コンピュータ可読記憶媒体」は、前記１つまたは複数の命令セットが格納される単一の媒体または複数の媒体（例えば、集中型または分散型データベース、および／または関連するキャッシュおよびサーバ）を備えることを理解すべきである。用語「コンピュータ可読記憶媒体」は、さらに命令セットを格納または符号化可能な任意の媒体を備えることを理解すべきであり、前記命令セットは、機械により実行され且つ前記機械に本発明のいずれか１種または複数種の方法を実行させるためのものである。従って、用語「コンピュータ可読記憶媒体」は、ソリッドステートメモリ、光学媒体および磁気媒体、または任意の他の非一時的機械可読媒体を備えるが、それらに限定されないことを理解すべきである。
【００６９】
本明細書に記載の処理モジュール／ユニット／ロジック１５２８、構成要素および他の特徴は、ディスクリートハードウェア構成要素として実現されてもよく、またはハードウェア構成要素（例えば、ＡＳＩＣＳ、ＦＰＧＡ、ＤＳＰまたは類似のデバイス）の機能に統合されてもよい。さらに、処理モジュール／ユニット／ロジック１５２８は、ハードウェアデバイス内のファームウェアまたは機能性回路として実現されてもよい。また、処理モジュール／ユニット／ロジック１５２８は、ハードウェアデバイスとソフトウェア構成要素の任意の組み合わせで実現されてもよい。
【００７０】
なお、システム１５００は、データ処理システムの各種の構成要素を有するように示されているが、構成要素を相互接続させる任意の特定のアーキテクチャ又は方法を表すことは意図されていないことに留意されたい。それは、このような詳細が本発明の実施形態とは密接な関係がない。また、より少ない構成要素またはより多くの構成要素を有するネットワークコンピュータ、ハンドヘルドコンピュータ、携帯電話、サーバおよび／または他のデータ処理システムは、本発明の実施形態と共に使用されてもよいことを理解されたい。
【００７１】
上記詳細な説明の一部は、コンピュータメモリにおけるデータビットに対する演算のアルゴリズムおよび記号表現で示される。これらのアルゴリズムの説明および表現は、データ処理分野における当業者によって使用される、それらの作業実質を所属分野の他の当業者に最も効果的に伝達する方法である。本明細書において、アルゴリズムは、通常、所望の結果につながるセルフコンシステントシーケンスと考えられる。これらの操作とは、物理量に対して物理的操作を行う必要となるステップを指す。
【００７２】
ただし、これらの全ておよび類似の用語は、いずれも適切な物理量に関連付けられ、且つただこれらの量を標識しやすくするためのものに過ぎないことに注意すべきである。特に断らない限り、本明細書の全体にわたって理解すべきなのは用語（例えば、添付している特許請求の範囲に説明された用語）による説明とは、コンピュータシステムまたは類似の電子計算装置の動作および処理であり、前記コンピュータシステムまたは電子計算装置は、コンピュータシステムのレジスタおよびメモリにおける物理（例えば、電子）量として示されたデータを制御するとともに、前記データをコンピュータシステムメモリまたはレジスタまたは他のこのような情報記憶デバイス、伝送または表示装置内において同様に物理量として示された他のデータに変換する。
【００７３】
本発明の実施形態は、さらに本明細書における操作を実行するための装置に関する。このようなコンピュータプログラムは、非一時的コンピュータ可読媒体に格納される。機械可読媒体は、機械（例えば、コンピュータ）により読み取り可能な形態で情報を格納するための任意の機構を備える。例えば、機械可読（例えば、コンピュータ可読）媒体は、機械（例えば、コンピュータ）可読記憶媒体（例えば、読み出し専用メモリ（「ＲＯＭ」）、ランダムアクセスメモリ（「ＲＡＭ」）、磁気ディスク記憶媒体、光記憶媒体、フラッシュメモリデバイス）を備える。
【００７４】
上記図面に示されるプロセスまたは方法は、ハードウェア（例えば、回路、専用ロジック等）、ソフトウェア（例えば、非一時的コンピュータ可読媒体に具現化されるもの）、または両方の組み合わせを含む処理ロジックにより実行されてもよい。前記プロセスまたは方法は、本明細書において特定の順序に応じて説明されるが、説明された操作の一部は、異なる順序で実行されてもよい。また、いくつかの操作は、順番ではなく並行に実行されてもよい。
【００７５】
本発明の実施形態は、いずれかの特定のプログラミング言語を参照することなく記載されている。本明細書に記載の本発明の実施形態の教示を実現するために様々なプログラミング言語を使用できることを理解すべきである。
【００７６】
本明細書では、本発明の実施形態は、既にその具体的な例示的な実施形態を参照しながら記載された。明らかなように、添付している特許請求の範囲に記載の本発明のより広い趣旨および範囲を逸脱しない限り、様々な変形が可能である。従って、限定的なものではなく例示的なものとして本明細書および図面を理解すべきである。
【図１】
2021501714.tif 000003
【図２】
2021501714.tif 000004
【図３Ａ】
2021501714.tif 000005
【図３Ｂ】
2021501714.tif 000006
【図４】
2021501714.tif 000007
【図５】
2021501714.tif 000008
【図６】
2021501714.tif 000009
【図７】
2021501714.tif 000010
【手続補正書】
【提出日】令和1年9月25日(2019.9.25)
【手続補正１】
【補正対象書類名】特許請求の範囲
【補正対象項目名】全文
【補正方法】変更
【補正の内容】
【特許請求の範囲】
【請求項１】
自動運転車両のためのコンピュータ実施方法であって、前記方法は、
自動運転車両の画像キャプチャ装置から、前記自動運転車両の環境を感知するキャプチャ画像を受信するステップであって、前記キャプチャ画像は前記自動運転車両付近の移動中の障害物を認識するものであるステップと、
移動障害物の投影に基づいて、前記移動障害物周囲の実行可能領域を生成するステップと、
前記自動運転車両が前記実行可能領域内にある場合に、前記自動運転車両の上限速度制限を確定するステップと、
前記上限速度制限未満の軌跡速度を有する軌跡を生成して、前記自動運転車両が前記実行可能領域内にある場合に前記自動運転車両が減速するように、前記自動運転車両を前記軌跡に従って自律的に制御するステップと、を含む自動運転車両のためのコンピュータ実施方法。
【請求項２】
生成された実行可能領域は、時間Ｔにおける前記移動障害物の速度方向に基づいて確定される中心位置と、前記移動障害物の速度に基づいて確定される半径とを含む、請求項１に記載の方法。
【請求項３】
前記移動障害物の投影位置は、前記移動障害物及び前記自動運転車両の現在位置に基づいて確定される、請求項２に記載の方法。
【請求項４】
前記上限速度制限は、現在時刻における前記自動運転車両と前記移動障害物の投影との間の距離に基づいて確定される、請求項３に記載の方法。
【請求項５】
前記上限速度制限はｖ０ｅ−α／ｄであり、式中、ｖ０は前記自動運転車両の現在速度であり、αは減衰率であり、ｄは現在時刻における前記自動運転車両と前記移動障害物の投影との間の距離である、請求項３に記載の方法。
【請求項６】
時間Ｔはｖ上限／ａｃｃｍａｘ＋ｋであり、式中、ｖ上限は前記自動運転車両の最大速度又は前記自動運転車両の道路に応じて確定される最大速度であり、ａｃｃｍａｘは前記自動運転車両の最大加速度であり、ｋは定数である、請求項３に記載の方法。
【請求項７】
前記移動障害物は歩行者である、請求項１に記載の方法。
【請求項８】
命令が格納されている非一時的機械可読媒体であって、前記命令はプロセッサにより実行されるときに前記プロセッサに動作を実行させ、前記動作は、
自動運転車両の画像キャプチャ装置から前記自動運転車両の環境を感知するキャプチャ画像を受信するステップであって、前記キャプチャ画像は前記自動運転車両付近の移動中の障害物を認識するものであるステップと、
移動障害物の投影に基づいて、前記移動障害物周囲の実行可能領域を生成するステップと、
前記自動運転車両が前記実行可能領域内にある場合に、前記自動運転車両の上限速度制限を確定するステップと、
前記上限速度制限未満の軌跡速度を有する軌跡を生成して、前記自動運転車両が前記実行可能領域内にある場合に前記自動運転車両が減速するように、前記自動運転車両を前記軌跡に従って自律的に制御するステップとを含む、非一時的機械可読媒体。
【請求項９】
生成された実行可能領域は、時間Ｔにおける前記移動障害物の速度方向に基づいて確定される中心位置と、前記移動障害物の速度に基づいて確定される半径とを含む、請求項８に記載の非一時的機械可読媒体。
【請求項１０】
前記移動障害物の投影位置は、前記移動障害物及び前記自動運転車両の現在位置に基づいて確定される、請求項９に記載の非一時的機械可読媒体。
【請求項１１】
前記上限速度制限は、現在時刻における前記自動運転車両と前記移動障害物の投影との間の距離に基づいて確定される、請求項１０に記載の非一時的機械可読媒体。
【請求項１２】
前記上限速度制限はｖ０ｅ−α／ｄであり、式中、ｖ０は前記自動運転車両の現在速度であり、αは減衰率であり、ｄは現在時刻における前記自動運転車両と前記移動障害物の投影との間の距離である、請求項１０に記載の非一時的機械可読媒体。
【請求項１３】
時間Ｔはｖ上限／ａｃｃｍａｘ＋ｋであり、式中、ｖ上限は前記自動運転車両の最大速度又は前記自動運転車両の道路に応じて確定される最大速度であり、ａｃｃｍａｘは前記自動運転車両の最大加速度であり、ｋは定数である、請求項１０に記載の非一時的機械可読媒体。
【請求項１４】
前記移動障害物は歩行者である、請求項８に記載の非一時的機械可読媒体。
【請求項１５】
プロセッサと、命令を格納するために前記プロセッサに接続されるメモリと、を備えるデータ処理システムであって、
前記命令は、前記プロセッサにより実行されるときに、前記プロセッサに動作を実行させ、
前記動作は、
自動運転車両の画像キャプチャ装置から前記自動運転車両の環境を感知するキャプチャ画像を受信するステップであって、前記キャプチャ画像は前記自動運転車両付近の移動中の障害物を認識するステップと、
移動障害物の投影に基づいて、前記移動障害物周囲の実行可能領域を生成するステップと、
前記自動運転車両が前記実行可能領域内にある場合に、前記自動運転車両の上限速度制限を確定するステップと、
前記上限速度制限未満の軌跡速度を有する軌跡を生成して、前記自動運転車両が前記実行可能領域内にある場合に前記自動運転車両が減速するように、前記自動運転車両を前記軌跡に従って自律的に制御するステップとを含む、データ処理システム。
【請求項１６】
生成された実行可能領域は、時間Ｔにおける前記移動障害物の速度方向に基づいて確定される中心位置と、前記移動障害物の速度に基づいて確定される半径とを含む、請求項１５に記載のシステム。
【請求項１７】
前記移動障害物の投影位置は、前記移動障害物及び前記自動運転車両の現在位置に基づいて確定される、請求項１６に記載のシステム。
【請求項１８】
前記上限速度制限は、現在時刻における前記自動運転車両と前記移動障害物の投影との間の距離に基づいて確定される、請求項１７に記載のシステム。
【請求項１９】
前記上限速度制限はｖ０ｅ−α／ｄであり、式中、ｖ０は前記自動運転車両の現在速度であり、αは減衰率であり、ｄは現在時刻における前記自動運転車両と前記移動障害物の投影との間の距離である、請求項１７に記載のシステム。
【請求項２０】
時間Ｔはｖ上限／ａｃｃｍａｘ＋ｋであり、式中、ｖ上限は前記自動運転車両の最大速度又は前記自動運転車両の道路に応じて確定される最大速度であり、ａｃｃｍａｘは前記自動運転車両の最大加速度であり、ｋは定数である、請求項１７に記載のシステム。
【請求項２１】
前記移動障害物は歩行者である、請求項１５に記載のシステム。
【請求項２２】
コンピュータプログラムであって、
前記コンピュータプログラムがプロセッサにより実行されると、請求項１〜７のいずれか一項に記載の方法を実現する、コンピュータプログラム。
【国際調査報告】
2021501714.tif 000011
2021501714.tif 000012