【手続補正書】
【提出日】令和2年5月22日(2020.5.22)
【手続補正１】
【補正対象書類名】特許請求の範囲
【補正対象項目名】全文
【補正方法】変更
【補正の内容】
【特許請求の範囲】
【請求項１】
車両の乗員の画像を検出して、検出結果を取得するステップと、
前記検出結果に基づいて前記乗員の体型関連情報及び／又は顔高さ情報を決定するステップと、
前記体型関連情報及び／又は前記顔高さ情報に基づいて、前記乗員のシートの調節情報を決定するステップと、
前記調節情報を出力するか、前記調節情報に基づいて前記シートを調節するステップと、を含むことを特徴とする車両シート知能化調節方法。
【請求項２】
前記検出結果は、顔基準点座標を含み、
前記車両の乗員の画像を検出して、検出結果を取得する前記ステップは、
前記乗員の画像に対して顔基準点検出を行って、前記乗員のカメラ座標系での顔基準点座標を取得するステップを含み、
前記検出結果に基づいて前記乗員の顔高さ情報を決定する前記ステップは、
前記顔基準点座標を前記カメラ座標系から車両座標系に変換するステップと、
前記車両座標系での顔基準点座標に基づいて前記乗員の顔高さ情報を決定するステップと、を含むことを特徴とする請求項１に記載の方法。
【請求項３】
前記顔基準点は、少なくとも１つの顔キーポイント及び／又は少なくとも１つの顔の他の位置点を含み、
前記乗員の画像に対して顔基準点検出を行って、前記乗員のカメラ座標系での顔基準点座標を取得する前記ステップは、
前記乗員の画像に対して顔基準点検出を行って、前記乗員のカメラ座標系での少なくとも１つの顔キーポイント座標を取得するステップ、及び／又は、
前記少なくとも１つの顔キーポイント座標に基づいて少なくとも１つの顔の他の位置点を決定するステップを含むことを特徴とする請求項２に記載の方法。
【請求項４】
前記体型関連情報は、人種情報及び／又は性別情報を含み、
前記車両の乗員の画像を検出して、検出結果を取得する前記ステップは、
前記乗員の画像を属性検出のためのニューラルネットワークに入力して属性検出を行い、ニューラルネットワークから出力される属性検出結果を得るステップを含み、
前記検出結果に基づいて前記乗員の体型関連情報を決定する前記ステップは、
前記属性検出結果に基づいて前記画像に対応する乗員の人種情報及び／又は性別情報を取得するステップを含むことを特徴とする請求項１〜３のいずれか一項に記載の方法。
【請求項５】
前記体型関連情報及び／又は前記顔高さ情報に基づいて、前記乗員のシートの調節情報を決定する前記ステップは、
予め設定された、体型及び／又は顔高さに関連するシート調節変換関係を取得するステップと、
前記体型関連情報及び／又は前記顔高さ情報と前記シート調節変換関係に基づいて、前記乗員に対応するシート所望状態を決定するステップと、
前記シート所望状態に基づいて前記シートの調節情報を決定するか、前記シート所望状態とシート現在状態に基づいて前記シートの調節情報を決定するステップと、を含むことを特徴とする請求項１〜４のいずれか一項に記載の方法。
【請求項６】
前記体型関連情報及び前記顔高さ情報に基づいて、前記乗員のシートの調節情報を決定する前記ステップは、
予め設定された、顔高さに関連する第１シート調節変換関係を取得するステップと、
前記顔高さ情報及び前記第１シート調節変換関係に基づいて、前記運転者に対応する第１シート所望状態を決定するステップと、
予め設定された、体型関連情報に関連する第２シート調節変換関係を取得するステップと、
前記体型関連情報、前記第２シート調節変換関係及び前記第１シート所望状態に基づいて、第２シート所望状態を決定するステップと、
前記第２シート所望状態に基づいて前記シートの調節情報を決定するか、前記第２シート所望状態とシート現在状態に基づいて前記シートの調節情報を決定するステップと、を含むことを特徴とする請求項１〜４のいずれか一項に記載の方法。
【請求項７】
前記乗員の画像を検出して、検出結果を取得する前記ステップの前に、
前記画像に基づいて身元認証を行うステップと、
前記身元認証が成功したことに応えて、前記乗員にシート調節権限を持たせるステップと、を更に含むことを特徴とする請求項１〜９のいずれか一項に記載の方法。
【請求項８】
前記画像に基づいて身元認証を行う前記ステップは、
前記画像に基づいて顔認識を行って、前記乗員の顔特徴を取得するステップと、
前記顔特徴を、権限を有する少なくとも１つの事前記憶顔特徴とマッチングするステップと、を含み、
前記身元認証が成功したことに応えて、前記乗員にシート調節権限を持たせる前記ステップは、
前記顔特徴とマッチング可能な前記事前記憶顔特徴が存在することに応えて、身元認証成功とし、前記乗員にシート調節権限を持たせるステップを含むことを特徴とする請求項７に記載の方法。
【請求項９】
前記身元認証が成功したことに応えて、前記乗員にシート調整権限を持たせる前記ステップは、
前記身元認証が成功したことに応えて、データベースに前記乗員の身元情報が含まれているか否かを判断するステップであって、前記データベースは少なくとも１つの乗員の身元情報とシート所望状態を記憶し、前記データベースは少なくとも１つの事前記憶顔特徴と少なくとも１つのシート位置情報を含み、各前記事前記憶顔特徴がそれぞれ１つのシート位置情報に対応する、ステップと、
前記データベースに前記乗員の身元情報が含まれないことに応えて、前記乗員がシートを調節することを許可するステップと、を含むことを特徴とする請求項７又は８に記載の方法。
【請求項１０】
車両の乗員の画像を検出して、検出結果を取得するための人員検出ユニットと、
前記検出結果に基づいて前記乗員の体型関連情報及び／又は顔高さ情報を決定するための関連情報決定ユニットと、
前記体型関連情報及び／又は前記顔高さ情報に基づいて、前記乗員のシートの調節情報を決定するための調節情報決定ユニットと、
前記調節情報を出力するか、前記調節情報に基づいて前記シートを調節するための情報処理ユニットと、を含むことを特徴とする車両シート知能化調節装置。
【請求項１１】
電子機器であって、
前記電子機器は、請求項１０に記載の車両シート知能化調節装置を含み、又は、
前記電子機器は、実行可能コマンドを記憶するためのメモリと、前記メモリと通信して前記実行可能コマンドを実行して請求項１〜９のいずれか一項に記載の車両シート知能化調節方法を完了するためのプロセッサと、を含むことを特徴とする電子機器。
【請求項１２】
コンピュータ読取可能コマンドを記憶するためのコンピュータ記憶媒体であって、前記コマンドが実行されるとき、請求項１〜９のいずれか一項に記載の車両シート知能化調節方法の操作を実行することを特徴とするコンピュータ記憶媒体。
【請求項１３】
コンピュータ読取可能コードを含むコンピュータプログラムであって、前記コンピュータ読取可能コードがデバイスで実行されるとき、前記デバイス中のプロセッサが請求項１〜９のいずれか一項に記載の車両シート知能化調節方法を実現するためのコマンドを実行することを特徴とするコンピュータプログラム。
【手続補正２】
【補正対象書類名】明細書
【補正対象項目名】００１３
【補正方法】変更
【補正の内容】
【００１３】
本願の上記実施例で提供された車両シート知能化調節方法及び装置、車両、電子機器並びに媒体によれば、車両の乗員の画像を検出して検出結果を取得し、検出結果に基づいて乗員の体型関連情報及び／又は顔高さ情報を決定し、体型関連情報及び／又は顔高さ情報に基づいて乗員のシートの調節情報を決定し、調節情報を出力するか、調節情報に基づいてシートを調節する。本願の実施例は、画像検出技術に基づいて、車両の乗員の着座するシートに対する知能化調節を実現でき、つまり、画像検出によって乗員の体型関連情報及び／又は顔高さ情報を取得し、体型関連情報及び／又は顔高さ情報に基づいてシートの調節情報をより正確に決定でき、シートの調節情報に基づいて調整されたシートは、乗員がより適切な着座姿勢で着座可能であり、乗員の使用の快適度が高くなった。
例えば、本願は以下の項目を提供する。
（項目１）
車両の乗員の画像を検出して、検出結果を取得するステップと、
前記検出結果に基づいて前記乗員の体型関連情報及び／又は顔高さ情報を決定するステップと、
前記体型関連情報及び／又は前記顔高さ情報に基づいて、前記乗員のシートの調節情報を決定するステップと、
前記調節情報を出力するか、前記調節情報に基づいて前記シートを調節するステップと、を含むことを特徴とする車両シート知能化調節方法。
（項目２）
前記検出結果は、顔基準点座標を含み、
前記車両の乗員の画像を検出して、検出結果を取得する前記ステップは、
前記乗員の画像に対して顔基準点検出を行って、前記乗員のカメラ座標系での顔基準点座標を取得するステップを含み、
前記検出結果に基づいて前記乗員の顔高さ情報を決定する前記ステップは、
前記顔基準点座標を前記カメラ座標系から車両座標系に変換するステップと、
前記車両座標系での顔基準点座標に基づいて前記乗員の顔高さ情報を決定するステップと、を含むことを特徴とする項目１に記載の方法。
（項目３）
前記顔基準点は、少なくとも１つの顔キーポイント及び／又は少なくとも１つの顔の他の位置点を含み、
前記乗員の画像に対して顔基準点検出を行って、前記乗員のカメラ座標系での顔基準点座標を取得する前記ステップは、
前記乗員の画像に対して顔基準点検出を行って、前記乗員のカメラ座標系での少なくとも１つの顔キーポイント座標を取得するステップ、及び／又は、
前記少なくとも１つの顔キーポイント座標に基づいて少なくとも１つの顔の他の位置点を決定するステップを含むことを特徴とする項目２に記載の方法。
（項目４）
前記体型関連情報は、人種情報及び／又は性別情報を含み、
前記車両の乗員の画像を検出して、検出結果を取得する前記ステップは、
前記乗員の画像を属性検出のためのニューラルネットワークに入力して属性検出を行い、ニューラルネットワークから出力される属性検出結果を得るステップを含み、
前記検出結果に基づいて前記乗員の体型関連情報を決定する前記ステップは、
前記属性検出結果に基づいて前記画像に対応する乗員の人種情報及び／又は性別情報を取得するステップを含むことを特徴とする項目１〜３のいずれか一項に記載の方法。
（項目５）
前記体型関連情報及び／又は前記顔高さ情報に基づいて、前記乗員のシートの調節情報を決定する前記ステップは、
予め設定された、体型及び／又は顔高さに関連するシート調節変換関係を取得するステップと、
前記体型関連情報及び／又は前記顔高さ情報と前記シート調節変換関係に基づいて、前記乗員に対応するシート所望状態を決定するステップと、
前記シート所望状態に基づいて前記シートの調節情報を決定するか、前記シート所望状態とシート現在状態に基づいて前記シートの調節情報を決定するステップと、を含むことを特徴とする項目１〜４のいずれか一項に記載の方法。
（項目６）
前記体型関連情報及び前記顔高さ情報に基づいて、前記乗員のシートの調節情報を決定する前記ステップは、
予め設定された、顔高さに関連する第１シート調節変換関係を取得するステップと、
前記顔高さ情報及び前記第１シート調節変換関係に基づいて、前記運転者に対応する第１シート所望状態を決定するステップと、
予め設定された、体型関連情報に関連する第２シート調節変換関係を取得するステップと、
前記体型関連情報、前記第２シート調節変換関係及び前記第１シート所望状態に基づいて、第２シート所望状態を決定するステップと、
前記第２シート所望状態に基づいて前記シートの調節情報を決定するか、前記第２シート所望状態とシート現在状態に基づいて前記シートの調節情報を決定するステップと、を含むことを特徴とする項目１〜４のいずれか一項に記載の方法。
（項目７）
前記乗員に対応するシート調節情報と前記乗員の身元情報との間のマッピング関係を確立、記憶するステップを更に含むことを特徴とする項目１〜６に記載の方法。
（項目８）
前記シートの調節情報は、シート調節パラメータの目標値、シートの上下調節量、シートの前後調節量、シートの左右調節量、背凭れ傾斜角度の調節量、及びシートクッション傾斜角度の調節量の中の少なくとも１種の情報を含むことを特徴とする項目１〜７のいずれか一項に記載の方法。
（項目９）
前記シートの調節情報に基づいて前記シートを調節する前記ステップは、
前記シート調節パラメータの目標値に基づいて前記シートを調節する操作、
前記シートの上下調節量に基づいて前記シートを上下方向に調節する操作、
前記シートの前後調節量に基づいて前記シートを前後方向に調節する操作、
前記シートの左右調節量に基づいて前記シートを左右方向に調節する操作、
前記背凭れ傾斜角度の調節量に基づいて前記シートの背凭れの傾斜角度を調節する操作、及び
前記シートクッション傾斜角度の調節量に基づいて前記シートのシートクッションの傾斜角度を調節する操作の中の少なくとも１種の操作を含むことを特徴とする項目８に記載の方法。
（項目１０）
前記乗員の画像を検出して、検出結果を取得する前記ステップの前に、
前記画像に基づいて身元認証を行うステップと、
前記身元認証が成功したことに応えて、前記乗員にシート調節権限を持たせるステップと、を更に含むことを特徴とする項目１〜９のいずれか一項に記載の方法。
（項目１１）
前記画像に基づいて身元認証を行う前記ステップは、
前記画像に基づいて顔認識を行って、前記乗員の顔特徴を取得するステップと、
前記顔特徴を、権限を有する少なくとも１つの事前記憶顔特徴とマッチングするステップと、を含み、
前記身元認証が成功したことに応えて、前記乗員にシート調節権限を持たせる前記ステップは、
前記顔特徴とマッチング可能な前記事前記憶顔特徴が存在することに応えて、身元認証成功とし、前記乗員にシート調節権限を持たせるステップを含むことを特徴とする項目１０に記載の方法。
（項目１２）
前記身元認証が成功したことに応えて、前記乗員にシート調整権限を持たせる前記ステップは、
前記身元認証が成功したことに応えて、データベースに前記乗員の身元情報が含まれているか否かを判断するステップであって、前記データベースは少なくとも１つの乗員の身元情報とシート所望状態を記憶し、前記データベースは少なくとも１つの事前記憶顔特徴と少なくとも１つのシート位置情報を含み、各前記事前記憶顔特徴がそれぞれ１つのシート位置情報に対応する、ステップと、
前記データベースに前記乗員の身元情報が含まれないことに応えて、前記乗員がシートを調節することを許可するステップと、を含むことを特徴とする項目１０又は１１に記載の方法。
（項目１３）
前記車両の乗員の画像を検出して、検出結果を取得する前記ステップの前に、
車両内部に設置された少なくとも１種のカメラによって前記乗員の画像を取得するステップを更に含むことを特徴とする項目１〜１２のいずれか一項に記載の方法。
（項目１４）
前記カメラは、赤外線カメラ、ＲＧＢカメラ、ＴＯＦカメラ、両眼カメラの中の少なくとも１種を含むことを特徴とする項目１３に記載の方法。
（項目１５）
前記車両内部に設置された少なくとも１種のカメラによって前記乗員の画像を取得する前記ステップは、
車両内部に設置された前記少なくとも１種のカメラと補光装置によって前記乗員の画像を取得するステップを含むことを特徴とする項目１３又は１４に記載の方法。
（項目１６）
車両の乗員の画像を検出して、検出結果を取得するための人員検出ユニットと、
前記検出結果に基づいて前記乗員の体型関連情報及び／又は顔高さ情報を決定するための関連情報決定ユニットと、
前記体型関連情報及び／又は前記顔高さ情報に基づいて、前記乗員のシートの調節情報を決定するための調節情報決定ユニットと、
前記調節情報を出力するか、前記調節情報に基づいて前記シートを調節するための情報処理ユニットと、を含むことを特徴とする車両シート知能化調節装置。
（項目１７）
前記検出結果は、顔基準点座標を含み、
前記人員検出ユニットは、前記乗員の画像に対して顔基準点検出を行って、前記乗員のカメラ座標系での顔基準点座標を取得するように構成され、
前記関連情報決定ユニットは、検出結果に基づいて前記乗員の顔高さ情報を決定する時に、前記顔基準点座標を前記カメラ座標系から車両座標系に変換するステップと、前記車両座標系での顔基準点座標に基づいて前記乗員の顔高さ情報を決定するステップとを実行するように構成されることを特徴とする項目１６に記載の装置。
（項目１８）
前記顔基準点は、少なくとも１つの顔キーポイント及び／又は少なくとも１つの顔の他の位置点を含み、
前記関連情報決定ユニットは、前記乗員の画像に対して顔基準点検出を行って、前記乗員のカメラ座標系での顔基準点座標を取得する時に、前記乗員の画像に対して顔基準点検出を行って、前記乗員のカメラ座標系での少なくとも１つの顔キーポイント座標を取得するステップ、及び／又は、前記少なくとも１つの顔キーポイント座標に基づいて少なくとも１つの顔の他の位置点を決定するステップを実行するように構成されることを特徴とする項目１７に記載の装置。
（項目１９）
前記体型関連情報は、人種情報及び／又は性別情報を含み、
前記人員検出ユニットは、前記乗員の画像を属性検出のためのニューラルネットワークに入力して属性検出を行い、ニューラルネットワークから出力される属性検出結果を得るように構成され、
前記関連情報決定ユニットは、前記検出結果に基づいて前記乗員の体型関連情報を決定する時に、前記属性検出結果に基づいて前記画像に対応する乗員の人種情報及び／又は性別情報を取得するように構成されることを特徴とする項目１６〜１８のいずれか一項に記載の装置。
（項目２０）
前記調節情報決定ユニットは、予め設定された、体型及び／又は顔高さに関連するシート調節変換関係を取得するステップと、前記体型関連情報及び／又は前記顔高さ情報と前記シート調節変換関係に基づいて、前記乗員に対応するシート所望状態を決定するステップと、前記シート所望状態に基づいて前記シートの調節情報を決定するか、前記シート所望状態とシート現在状態に基づいて前記シートの調節情報を決定するステップとを実行するように構成されることを特徴とする項目１６〜１９のいずれか一項に記載の装置。
（項目２１）
前記調節情報決定ユニットは、予め設定された、顔高さに関連する第１シート調節変換関係を取得するステップと、前記顔高さ情報及び前記第１シート調節変換関係に基づいて、前記運転者に対応する第１シート所望状態を決定するステップと、予め設定された、体型関連情報に関連する第２シート調節変換関係を取得するステップと、前記体型関連情報、前記第２シート調節変換関係及び前記第１シート所望状態に基づいて、第２シート所望状態を決定するステップと、前記第２シート所望状態に基づいて前記シートの調節情報を決定するか、前記第２シート所望状態とシート現在状態に基づいて前記シートの調節情報を決定するステップとを実行するように構成されることを特徴とする項目１６〜１９のいずれか一項に記載の装置。
（項目２２）
前記乗員に対応するシート調節情報と前記乗員の身元情報との間のマッピング関係を確立、記憶するための関係記憶ユニットを更に含むことを特徴とする項目１６〜２１に記載の装置。
（項目２３）
前記シートの調節情報は、シート調節パラメータの目標値、シートの上下調節量、シートの前後調節量、シートの左右調節量、背凭れ傾斜角度の調節量、及びシートクッション傾斜角度の調節量の中の少なくとも１種の情報を含むことを特徴とする項目１６〜２２のいずれか一項に記載の装置。
（項目２４）
前記情報処理ユニットは、前記シートの調節情報に基づいて前記シートを調節する時に、
前記シート調節パラメータの目標値に基づいて前記シートを調節する操作、
前記シートの上下調節量に基づいて前記シートを上下方向に調節する操作、
前記シートの前後調節量に基づいて前記シートを前後方向に調節する操作、
前記シートの左右調節量に基づいて前記シートを左右方向に調節する操作、及び
前記背凭れ傾斜角度の調節量に基づいて前記シートの背凭れの傾斜角度を調節する操作、
前記シートクッション傾斜角度の調節量に基づいて前記シートのシートクッションの傾斜角度を調節する操作の中の少なくとも１種の操作を実行することを特徴とする項目２３に記載の装置。
（項目２５）
前記画像に基づいて身元認証を行うための身元認証ユニットと、
前記身元認証が成功したことに応えて、前記乗員にシート調節権限を持たせるための権限取得ユニットと、を更に含むことを特徴とする項目１６〜２４のいずれか一項に記載の装置。
（項目２６）
前記身元認証ユニットは、前記画像に基づいて顔認識を行って、前記乗員の顔特徴を取得するステップと、前記顔特徴を、権限を有する少なくとも１つの事前記憶顔特徴とマッチングするステップとを実行するように構成され、
前記権限取得ユニットは、前記顔特徴とマッチング可能な前記事前記憶顔特徴が存在することに応えて、身元認証成功とし、前記乗員にシート調節権限を持たせるように構成されることを特徴とする項目２５に記載の装置。
（項目２７）
前記権限取得ユニットは、前記身元認証が成功したことに応えて、データベースに前記乗員の身元情報が含まれているか否かを判断するステップであって、前記データベースは少なくとも１つの乗員の身元情報とシート所望状態を記憶し、前記データベースは少なくとも１つの事前記憶顔特徴と少なくとも１つのシート位置情報を含み、各前記事前記憶顔特徴がそれぞれ１つのシート位置情報に対応する、ステップと、前記データベースに前記乗員の身元情報が含まれないことに応えて、前記乗員がシートを調節することを許可するステップとを実行するように構成されることを特徴とする項目２５又は２６に記載の装置。
（項目２８）
車両内部に設置された少なくとも１種のカメラによって前記乗員の画像を取得するための画像取得ユニットを更に含むことを特徴とする項目１６〜２７のいずれか一項に記載の装置。
（項目２９）
前記カメラは、赤外線カメラ、ＲＧＢカメラ、ＴＯＦカメラ、両眼カメラの中の少なくとも１種を含むことを特徴とする項目２８に記載の装置。
（項目３０）
前記画像取得ユニットは、車両内部に設置された前記少なくとも１種のカメラと補光装置によって前記乗員の画像を取得するように構成されることを特徴とする項目２８又は２９に記載の装置。
（項目３１）
項目１６〜３０のいずれか一項に記載の車両シート知能化調節装置を含むことを特徴とする車両。
（項目３２）
項目１６〜３０のいずれか一項に記載の車両シート知能化調節装置を備えるプロセッサを含むことを特徴とする電子機器。
（項目３３）
実行可能コマンドを記憶するためのメモリと、
前記メモリと通信して前記実行可能コマンドを実行して項目１〜１５のいずれか一項に記載の車両シート知能化調節方法を完了するためのプロセッサと、を含むことを特徴とする電子機器。
（項目３４）
コンピュータ読取可能コマンドを記憶するためのコンピュータ記憶媒体であって、前記コマンドが実行されるとき、項目１〜１５のいずれか一項に記載の車両シート知能化調節方法の操作を実行することを特徴とするコンピュータ記憶媒体。
（項目３５）
コンピュータ読取可能コードを含むコンピュータプログラム製品であって、前記コンピュータ読取可能コードがデバイスで実行されるとき、前記デバイス中のプロセッサが項目１〜１５のいずれか一項に記載の車両シート知能化調節方法を実現するためのコマンドを実行することを特徴とするコンピュータプログラム製品。