【手続補正書】
【提出日】令和3年1月8日(2021.1.8)
【手続補正１】
【補正対象書類名】特許請求の範囲
【補正対象項目名】全文
【補正方法】変更
【補正の内容】
【特許請求の範囲】
【請求項１】
車両装置によって実行される車両制御方法であって、
車両に設けられたカメラコンポーネントにより、現時点で車両使用を要求するユーザの顔画像を取得することであって、前記車両使用の操作は、車両使用予約、車両運転、乗車、洗車、車両保守、車両修理、車両給油、車両充電のうちの少なくとも１つを含む、ことと、
前記顔画像と車両のデータセット中の少なくとも１つの事前記憶顔画像との特徴マッチング結果を取得することであって、前記データセットには少なくとも１つの予め記録された車両使用許可ユーザの１つまたは複数の事前記憶顔画像が記憶され、前記データセット中に少なくとも１つの乗車予約済みユーザの事前記憶顔画像が記憶されている、ことと、
前記特徴マッチング結果に特徴マッチング成功が示されることに応答して、車両の動作を制御して、前記ユーザに車両使用を許可するようにし、前記特徴マッチング結果に特徴マッチング未成功が示されることに応答して、車両の動作を制御して前記ユーザの車両使用を拒否するようにすることであって、前記車両の動作を制御して、前記ユーザに車両使用を許可するようにすることには、車両用ドアを開かせるように制御すること、車両用ドアを開かせ且つ車両運転制御権限を許可するように制御すること、開錠させるように制御すること、車両給油口を開かせるように制御することおよび充電装置に車両の電池を接続させるように制御することのうちの少なくとも１つを含む、ことと、を含むことを特徴とする車両制御方法。
【請求項２】
車両にユーザが車両を使用できることを示すためのリマインド情報を送信させるように制御することを更に含むことを特徴とする請求項１に記載の方法。
【請求項３】
現時点で車両使用を要求するユーザの顔画像を取得することには、
前記車両に設置された撮影アセンブリにより前記ユーザの顔画像を収集することを含むことを特徴とする請求項１に記載の方法。
【請求項４】
前記車両とクラウドサーバとが通信接続状態にある時に、前記クラウドサーバにデータセットダウンロード要求を送信することと、
前記クラウドサーバから送信されるデータセットを受信し記憶することと、を更に含み、
または、
前記車両と携帯端末機とが通信接続状態にある時に、前記携帯端末機にデータセットダウンロード要求を送信することと、
前記携帯端末機から送信されるデータセットを受信し記憶することであって、前記データセットは、前記携帯端末機が前記データセットダウンロード要求を受信した時にクラウドサーバから取得され且つ前記車両に送信されるものであることと、を更に含むことを特徴とする請求項１に記載の方法。
【請求項５】
前記特徴マッチング結果に特徴マッチング成功が示されることに応答して、特徴マッチングが成功した事前記憶顔画像により前記ユーザの身元情報を取得することと、
前記クラウドサーバに前記顔画像と前記身元情報を送信することと、を更に含むことを特徴とする請求項１に記載の方法。
【請求項６】
前記顔画像の生体検出結果を取得することを更に含み、
前記特徴マッチング結果により、車両の動作を制御して、前記ユーザに車両使用を許可するようにすることには、
前記特徴マッチング結果と前記生体検出結果により、車両の動作を制御して、前記ユーザに車両使用を許可するようにすることを含むことを特徴とする請求項１に記載の方法。
【請求項７】
予約情報のリマインドを出すことと、
前記予約情報によりユーザの予約顔画像を含む前記ユーザの予約要求を受信することと、
前記予約顔画像によりデータセットを確立することと、を更に含むことを特徴とする請求項６に記載の方法。
【請求項８】
前記顔画像に基づいてユーザ状態検出を行うことであって、前記ユーザ状態検出は、ユーザ疲労状態検出、ユーザ注意散漫状態検出、ユーザ所定注意散漫動作検出のいずれか一項又は複数項を含むことと、
ユーザ状態検出の結果により異常状態の警報リマインドを行うことと、を更に含み、
前記顔画像に基づいてユーザ疲労状態検出を行うことには、
前記顔画像の顔の少なくとも一部の領域を検出し、開眼閉眼状態情報、開口閉口状態情報のいずれか一項又は複数項を含む顔の少なくとも一部の領域の状態情報を得ることと、
一定時間内の前記顔の少なくとも一部の領域の状態情報により、ユーザ疲労状態を特徴づけるための指標のパラメータ値を取得することと、
ユーザ疲労状態を特徴づけるための指標のパラメータ値によりユーザ疲労状態検出の結果を決定することと、を含み、
前記のユーザ疲労状態を特徴づけるための指標は、閉眼度、欠伸度のいずれか一項又は複数項を含み、前記閉眼度のパラメータ値は、閉眼回数、閉眼頻度、閉眼持続時間、閉眼幅、半閉眼回数、半閉眼頻度のいずれか一項又は複数項を含み、前記欠伸度のパラメータ値は、欠伸状態、欠伸回数、欠伸持続時間、欠伸頻度のいずれか一項又は複数項を含むことを特徴とする請求項１に記載の方法。
【請求項９】
前記顔画像に基づいてユーザ注意散漫状態検出を行うことには、
前記顔画像に対して顔向き方向及び／又は視線方向の検出を行って、顔向き方向情報及び／又は視線方向情報を得ることと、
一定時間内の前記顔向き方向情報及び／又は視線方向情報により、ユーザ注意散漫状態を特徴づけるための指標のパラメータ値を決定することであって、前記ユーザ注意散漫状態を特徴づけるための指標は、顔偏向度、視線偏向度のいずれか一項又は複数項を含む、ことと、
前記ユーザ注意散漫状態を特徴づけるための指標のパラメータ値によりユーザ注意散漫状態検出の結果を決定することと、を含み、
前記顔偏向度のパラメータ値は、振り返り回数、振り返り持続時間、振り返り頻度のいずれか一項又は複数項を含み、前記視線偏向度のパラメータ値は、視線方向偏向角度、視線方向偏向時間、視線方向偏向頻度のいずれか一項又は複数項を含むことを特徴とする請求項８に記載の方法。
【請求項１０】
前記顔画像中のユーザに対して顔向き方向及び／又は視線方向検出を行うことには、
前記顔画像の顔キーポイントを検出することと、
前記顔キーポイントにより顔向き方向及び／又は視線方向検出を行うことと、を含むことを特徴とする請求項９に記載の方法。
【請求項１１】
前記顔キーポイントにより顔向き方向検出を行って顔向き方向情報を得ることには、
前記顔キーポイントにより頭部姿勢の特徴情報を取得することと、
前記頭部姿勢の特徴情報により顔向き方向情報を決定することと、を含むことを特徴とする請求項１０に記載の方法。
【請求項１２】
前記所定注意散漫動作は、喫煙動作、水を飲む動作、飲食動作、電話通話動作、娯楽動作のいずれか一項又は複数項を含み、
前記顔画像に基づいてユーザ所定注意散漫動作検出を行うことには、
前記顔画像に対して前記所定注意散漫動作に対応する目標対象検出を行って目標対象の検出枠を得ることと、
前記目標対象の検出枠により、前記所定注意散漫動作が発生したか否かを決定することと、を含むことを特徴とする請求項８に記載の方法。
【請求項１３】
所定注意散漫動作が発生したことに応答して、一定時間内に前記所定注意散漫動作が発生したか否かの決定結果により、ユーザ注意散漫度を特徴づけるための指標のパラメータ値を取得することであって、前記ユーザ注意散漫度を特徴づけるための指標のパラメータ値は、所定注意散漫動作の回数、所定注意散漫動作の持続時間、所定注意散漫動作の頻度のいずれか一項又は複数項を含むことと、
前記のユーザ注意散漫度を特徴づけるための指標のパラメータ値によりユーザ所定注意散漫動作検出の結果を決定することと、を更に含むことを特徴とする請求項１２に記載の方法。
【請求項１４】
ユーザ所定注意散漫動作検出の結果に所定注意散漫動作が検出されたことが示されることに応答して、検出された所定注意散漫動作をリマインドすることを更に含むことを特徴とする請求項１２に記載の方法。
【請求項１５】
前記ユーザ状態検出の結果に対応する制御操作を実行することを更に含み、
前記ユーザ状態検出の結果に対応する制御操作を実行することには、
決定された前記ユーザ状態検出の結果がリマインド／警告所定条件を満たしたことに応答して、前記リマインド／警告所定条件に対応するリマインド／警告情報を出力すること、
決定された前記ユーザ状態検出の結果が所定情報送信条件を満たしたことに応答して、予め設定された連絡先に所定情報を送信するか又は予め設定された連絡先と通信接続を確立すること、
決定された前記ユーザ状態検出の結果が所定走行モード切換条件を満たしたことに応答して、走行モードを自動走行モードに切り換えることの少なくとも一項を含むことを特徴とする請求項８に記載の方法。
【請求項１６】
クラウドサーバに前記ユーザ状態検出の少なくとも一部の結果を送信することを更に含み、前記少なくとも一部の結果は、ユーザ状態検出により決定された異常車両使用状態情報を含み、
前記方法は、
前記異常車両使用状態情報に対応する顔画像を記憶すること、及び／又は、
前記クラウドサーバに前記異常車両使用状態情報に対応する顔画像を送信することを更に含むことを特徴とする請求項８に記載の方法。
【請求項１７】
プロセッサと、
前記プロセッサによって実行可能な命令を格納するためのメモリと、を備え、前記プロセッサは、前記命令を実行して、
現時点で車両使用を要求するユーザの顔画像を取得することであって、前記車両使用の操作は、車両使用予約、車両運転、乗車、洗車、車両保守、車両修理、車両給油、車両充電のうちの少なくとも１つを含む、ことと、
前記顔画像と車両のデータセット中の少なくとも１つの事前記憶顔画像との特徴マッチング結果を取得することであって、前記データセットには少なくとも１つの予め記録された車両使用許可ユーザの１つまたは複数の事前記憶顔画像が記憶され、前記データセット中に少なくとも１つの乗車予約済みユーザの事前記憶顔画像が記憶されている、ことと、
前記特徴マッチング結果に特徴マッチング成功が示されることに応答して、車両の動作を制御して、前記ユーザに車両使用を許可するようにし、前記特徴マッチング結果に特徴マッチング未成功が示されることに応答して、車両の動作を制御して前記ユーザの車両使用を拒否するようにすることであって、前記車両の動作を制御して、前記ユーザに車両使用を許可するようにすることには、車両用ドアを開かせるように制御すること、車両用ドアを開かせ且つ車両運転制御権限を許可するように制御すること、開錠させるように制御すること、車両給油口を開かせるように制御することおよび充電装置に車両の電池を接続させるように制御することのうちの少なくとも１つを含む、ことと、を実行することを特徴とする車載インテリジェントシステム。
【請求項１８】
クラウドサーバによって実行される車両制御方法であって、
車両から送信される被識別顔画像を受信することと、
前記顔画像とデータセット中の少なくとも１つの事前記憶顔画像との特徴マッチング結果を得ることであって、前記データセットには少なくとも１つの予め記録された車両使用の車両使用許可ユーザの１つまたは複数の事前記憶顔画像が記憶され、前記データセット中に少なくとも１つの乗車予約済みユーザの事前記憶顔画像が記憶され、前記車両使用の操作は、車両使用予約、車両運転、乗車、洗車、車両保守、車両修理、車両給油、車両充電のうちの少なくとも１つを含む、ことと、
前記特徴マッチング結果に特徴マッチング成功が示されることに応答して、前記車両に車両制御を許可するコマンドを送信し、前記特徴マッチング結果に特徴マッチング未成功が示されることに応答して、前記車両に車両制御を拒否するコマンドを送信することであって、前記車両の動作を制御して、前記ユーザに車両使用を許可するようにすることには、車両用ドアを開かせるように制御すること、車両用ドアを開かせ且つ車両運転制御権限を許可するように制御すること、開錠させるように制御すること、車両給油口を開かせるように制御することおよび充電装置に車両の電池を接続させるように制御することのうちの少なくとも１つを含む、ことと、を含むことを特徴とする車両制御方法。
【請求項１９】
車両から送信される、少なくとも１つの予め記録された車両使用許可ユーザの事前記憶顔画像を記憶したデータセットのダウンロード要求を受信することと、
前記車両に前記データセットを送信することと、
車両又は携帯端末機から送信される、ユーザの予約顔画像を含む予約要求を受信することと、
前記予約顔画像によりデータセットを確立することと、を更に含むことを特徴とする請求項１８に記載の方法。
【請求項２０】
前記顔画像とデータセット中の少なくとも１つの事前記憶顔画像との特徴マッチング結果を得ることには、
前記車両から前記顔画像とデータセット中の少なくとも１つの事前記憶顔画像との特徴マッチング結果を取得することを含むことを特徴とする請求項１８に記載の方法。
【請求項２１】
前記車両から送信される前記ユーザ状態検出の少なくとも一部の結果を受信して異常車両使用状態の警報リマインドを行うことであって、前記少なくとも一部の結果は、ユーザ状態検出により決定された異常車両使用状態情報を含むことと、
前記ユーザ状態検出の結果に対応する制御操作を実行することを更に含み、
前記ユーザ状態検出の結果に対応する制御操作を実行することには、
決定された前記ユーザ状態検出の結果がリマインド／警告所定条件を満たしたことに応答して、前記リマインド／警告所定条件に対応するリマインド／警告情報を出力すること、
決定された前記ユーザ状態検出の結果が所定情報送信条件を満たしたことに応答して、予め設定された連絡先に所定情報を送信するか又は予め設定された連絡先と通信接続を確立すること、
決定された前記ユーザ状態検出の結果が所定走行モード切換条件を満たしたことに応答して、走行モードを自動走行モードに切り換えることを含むことのうちの少なくとも一項を含むことを特徴とする請求項１８に記載の方法。
【請求項２２】
前記車両から送信される、前記異常車両使用状態情報に対応する顔画像を受信することを更に含むことを特徴とする請求項２１に記載の方法。
【請求項２３】
前記異常車両使用状態情報に基づいて、データ統計、車両管理、ユーザ管理の少なくとも１種の操作を行うことを更に含み、
前記異常車両使用状態情報に基づいてデータ統計を行うことには、
前記異常車両使用状態情報に基づいて受信された前記異常車両使用状態情報に対応する顔画像を統計し、異なる異常車両使用状態に従って前記顔画像を分類し、各種の前記異常車両使用状態の統計詳細を決定することを含み、
前記異常車両使用状態情報に基づいて車両管理を行うことには、
前記異常車両使用状態情報に基づいて受信された前記異常車両使用状態情報に対応する顔画像を統計し、異なる車両に従って前記顔画像を分類し、各前記車両の異常車両使用統計詳細を決定することを含み、
前記異常車両使用状態情報に基づいてユーザ管理を行うことには、
前記異常車両使用状態情報に基づいて受信された前記異常車両使用状態情報に対応する顔画像を処理し、異なるユーザに従って前記顔画像を分類し、それぞれの前記ユーザの異常車両使用統計詳細を決定することを含むことを特徴とする請求項２２に記載の方法。
【請求項２４】
プロセッサと、
前記プロセッサによって実行可能な命令を格納するためのメモリと、を備え、前記プロセッサは、前記命令を実行して、請求項１８に記載の車両制御方法を実行することを特徴とする電子機器。
【請求項２５】
車両装置に適用される、コンピュータ可読命令を記憶するための非一時的なコンピュータ記憶媒体であって、前記命令は、請求項１に記載の車両制御方法を実施するために実行されることを特徴とする非一時的なコンピュータ記憶媒体。
【請求項２６】
クラウドサーバに適用される、コンピュータ可読命令を記憶するための非一時的なコンピュータ記憶媒体であって、前記命令は、請求項１８に記載の車両制御方法を実施するために実行されることを特徴とする非一時的なコンピュータ記憶媒体。