【手続補正書】
【提出日】平成31年4月9日(2019.4.9)
【手続補正１】
【補正対象書類名】特許請求の範囲
【補正対象項目名】全文
【補正方法】変更
【補正の内容】
【特許請求の範囲】
【請求項１】
把持された物体を用いた筆記動作をユーザの手首に装着されたモーション認識装置によるモーション認識方法であって、
前記把持された物体を用いた前記ユーザの前記筆記動作の開始を検出するステップと、
前記把持された物体を用いた前記筆記動作によるユーザの手首状態を推定するステップと、
前記筆記動作により、前記手首と関連する前記ユーザの人体部位の関節動作を推定するステップと、
把持された前記物体の状態を前記手首状態及び前記関節動作により推定するステップとを有し、
前記把持された物体の種類を識別するステップと、
前記物体の状態を連続的に追跡し、前記物体の種類に対応する動作を行うステップと、をさらに有し、
前記把持された物体を用いた前記ユーザの前記筆記動作の開始を検出するステップは、前記筆記動作により発生するサウンド及び前記筆記動作による前記物体に対する把持行為を検出した場合、前記筆記動作が開始されたと判断するステップを含み、
前記筆記動作により発生するサウンドは、物体と接触面との間の摩擦音を含み、
前記把持された物体の種類を識別するステップは、前記物体を把持した姿勢、前記筆記動作によるサウンド、及びユーザ音声の内の少なくとも１つを用いて前記物体の種類を識別するステップを含み、
前記筆記動作は、筆記動作、筆記を修正する動作、及び筆記を消去する動作を含むことを特徴とする把持された物体を用いたモーション認識方法。
【請求項２】
前記物体の状態を連続的に追跡して外部機器を制御するための制御信号を生成するステップをさらに有することを特徴とする請求項１に記載の把持された物体を用いたモーション認識方法。
【請求項３】
前記把持された前記物体の状態を前記手首状態及び前記関節動作により推定するステップは、前記物体の筆記面と接触する部分の位置を前記手首状態及び前記関節動作により推定するステップを含むことを特徴とする請求項１に記載の把持された物体を用いたモーション認識方法。
【請求項４】
前記筆記動作によるユーザの手首状態を推定するステップは、前記把持された物体を用いた前記筆記動作による加速度を検出するステップと、
前記加速度により前記手首状態を推定するステップとを含むことを特徴とする請求項１に記載の把持された物体を用いたモーション認識方法。
【請求項５】
前記筆記動作により、前記手首と関連する人体部位の関節動作を推定するステップは、前記筆記動作による前記手首と関連する人体部位の筋電図情報を検出するステップと、
前記筋電図情報により前記関節動作を推定するステップとを含むことを特徴とする請求項１に記載の把持された物体を用いたモーション認識方法。
【請求項６】
前記ユーザに対応する生体信号を検出するステップと、
前記生体信号による動きアーチファクト（ｍｏｔｉｏｎ  ａｒｔｉｆａｃｔ）を用いて、推定された前記物体の状態の誤差を補正するステップとをさらに有することを特徴とする請求項１に記載の把持された物体を用いたモーション認識方法。
【請求項７】
前記物体の状態を連続的に追跡して生成された形態（ｆｉｇｕｒｅ）を格納するステップをさらに有することを特徴とする請求項１に記載の把持された物体を用いたモーション認識方法。
【請求項８】
前記筆記動作により、前記手首と関連する人体部位の関節動作を推定するステップは、前記物体を把持するために前記ユーザによって加えられた力の強度を推定するステップを含み、
前記物体の状態を連続的に追跡し、前記力の強度に対応する太さで形態を生成するステップをさらに含むことを特徴とする請求項１に記載の把持された物体を用いたモーション認識方法。
【請求項９】
把持された物体を用いた筆記動作を行うユーザの手首に装着され、
前記把持された物体を用いた前記筆記動作によるユーザの手首状態を推定する手首状態推定部と、
前記筆記動作により、前記手首と関連する前記ユーザの人体部位の関節動作を推定する関節動作推定部と、
把持された前記物体の状態を前記手首状態及び前記関節動作により推定する物体状態推定部とを備え、
前記把持された物体を用いた前記筆記動作の開始を検出する動作開始検出部をさらに備え、
前記動作開始検出部は、前記筆記動作により発生するサウンドを検出する音声検出部と、
前記筆記動作により発生する前記サウンド及び前記筆記動作による前記物体に対する把持行為を検出した場合、前記筆記動作が開始されたと判断する動作開始判断部とを含み、
前記物体の状態を連続的に追跡して形態（ｆｉｇｕｒｅ）を生成する筆記生成部をさらに備え、
前記関節動作推定部は、前記ユーザが前記物体を把持するために前記ユーザによって加えられた力の強度を推定する把持強度推定部を含み、
前記筆記生成部は、前記物体の状態を連続的に追跡し、前記力の強度に対応する太さで形態を生成し、
前記筆記生成部は、前記物体を把持した姿勢、前記筆記動作によるサウンド、及びユーザ音声の内の少なくとも１つを用いて前記物体の種類を識別する物体識別部を含み、前記物体の種類による動作を行って前記形態を生成し、
前記筆記動作により発生するサウンドは、前記物体と接触面との間の摩擦音を含み、
前記筆記動作は、筆記動作、筆記を修正する動作、及び筆記を消去する動作を含むことを特徴とする把持された物体を用いたモーション認識装置。
【請求項１０】
前記物体の状態を連続的に追跡して外部機器を制御するための制御信号を生成する信号生成部をさらに備えることを特徴とする請求項９に記載の把持された物体を用いたモーション認識装置。
【請求項１１】
前記物体状態推定部は、前記物体の筆記面と接触する部分の位置を前記手首状態及び前記関節動作により推定する筆記面接触推定部を含むことを特徴とする請求項９に記載の把持された物体を用いたモーション認識装置。
【請求項１２】
前記手首状態推定部は、前記把持された物体を用いた前記筆記動作による６軸に対する加速度を検出する加速度検出部を含み、
前記加速度により前記手首の位置変化又は前記手首の回転の少なくとも１つを含む前記手首状態を推定することを特徴とする請求項９に記載の把持された物体を用いたモーション認識装置。
【請求項１３】
前記関節動作推定部は、前記筆記動作により前記手首と関連する人体部位で発生する筋電図情報を検出する筋電図検出部を含み、
前記筋電図情報により前記関節動作を推定することを特徴とする請求項９に記載の把持された物体を用いたモーション認識装置。
【請求項１４】
前記ユーザに対応する生体信号を検出する生体信号検出部と、
前記生体信号による動きアーチファクト（ｍｏｔｉｏｎ  ａｒｔｉｆａｃｔ）を用いて、前記推定された物体の状態の誤差を補正する物体状態補正部をさらに備えることを特徴とする請求項９に記載の把持された物体を用いたモーション認識装置。
【請求項１５】
請求項９に記載のモーション認識装置と、
外部機器と、を備え、
前記モーション認識装置は、物体の状態を連続的に追跡して生成した外部機器を制御するための制御信号を送信し、
前記外部機器は、前記制御信号を受信した場合、前記制御信号に対応する予め決められた動作を行うことを特徴とする把持された物体を用いたモーション認識システム。
【請求項１６】
前記モーション認識装置は、前記物体の状態を連続的に追跡した形態（ｆｉｇｕｒｅ）に対応する外部機器を選択し、前記選択された外部機器を制御するための信号を前記制御信号で生成することを特徴とする請求項１５に記載の把持された物体を用いたモーション認識システム。
【請求項１７】
前記制御信号は、前記モーション認識装置が前記形態で前記外部機器の予め決められた部分を活性化するユーザ動作を検出した場合、前記外部機器が前記予め決められた部分に対応する動作を行うようにする制御命令を備えることを特徴とする請求項１６に記載の把持された物体を用いたモーション認識システム。
【請求項１８】
把持された物体を用いたユーザの手首に装着されたモーション認識装置によるモーション認識方法であって、
前記把持された物体を用いた前記ユーザの動作の開始を検出するステップと、
ユーザの手首状態及び前記手首と関連する人体部位の関節動作により前記把持された物体の状態を推定するステップと、
前記把持された物体の状態を連続的に追跡することによって生成される、字、文章、及び図形の少なくとも１つを含む形態（ｆｉｇｕｒｅ）を格納するステップと、
前記形態に対応する外部機器を識別するために前記形態を認識し、前記外部機器によって行われる動作を決定するステップと、
前記外部機器が前記決定された動作を行うように指示する制御信号を前記外部機器に送信するステップとを有し、
前記把持された物体を用いた前記ユーザの動作の開始を検出するステップは、前記ユーザの動作により発生するサウンド及び前記ユーザの動作による前記物体に対する把持行為を検出した場合、前記ユーザの動作が開始されたと判断するステップを含み、
前記ユーザの動作により発生するサウンドは、物体と接触面との間の摩擦音を含むことを特徴とする把持された物体を用いたモーション認識方法。
【請求項１９】
前記形態は、文字であり、
前記形態を認識し、前記外部機器によって行われる動作を決定するステップは、前記文字を認識するステップを含むことを特徴とする請求項１８に記載の把持された物体を用いたモーション認識方法。
【請求項２０】
前記外部機器は、前記認識された文字に基づいて識別されることを特徴とする請求項１９に記載の把持された物体を用いたモーション認識方法。
【請求項２１】
前記外部機器によって行われる動作は、前記認識された文字に基づいて決定されることを特徴とする請求項１９に記載の把持された物体を用いたモーション認識方法。
【請求項２２】
前記外部機器は、前記外部機器を示す前記形態の認識に基づいて識別されることを特徴とする請求項１８に記載の把持された物体を用いたモーション認識方法。
【請求項２３】
前記形態の領域は、前記決定された動作を行う前記外部機器の一部分の図形であり、
前記ユーザが前記一部分を選択した場合、前記決定された動作を前記外部機器が行うように指示する前記制御信号を送信するステップをさらに有することを特徴とする請求項２２に記載の把持された物体を用いたモーション認識方法。
【手続補正２】
【補正対象書類名】明細書
【補正対象項目名】０００５
【補正方法】変更
【補正の内容】
【０００５】
上記目的を達成するためになされた本発明による把持された物体を用いたモーション認識方法は、把持された物体を用いた筆記動作をユーザの手首に装着されたモーション認識装置によるモーション認識方法であって、前記把持された物体を用いた前記ユーザの前記筆記動作の開始を検出するステップと、前記把持された物体を用いた前記筆記動作によるユーザの手首状態を推定するステップと、前記筆記動作により、前記手首と関連する前記ユーザの人体部位の関節動作を推定するステップと、把持された前記物体の状態を前記手首状態及び前記関節動作により推定するステップとを有し、前記把持された物体の種類を識別するステップと、前記物体の状態を連続的に追跡し、前記物体の種類に対応する動作を行うステップと、をさらに有し、前記把持された物体を用いた前記ユーザの前記筆記動作の開始を検出するステップは、前記筆記動作により発生するサウンド及び前記筆記動作による前記物体に対する把持行為を検出した場合、前記筆記動作が開始されたと判断するステップを含み、前記筆記動作により発生するサウンドは、物体と接触面との間の摩擦音を含み、前記把持された物体の種類を識別するステップは、前記物体を把持した姿勢、前記筆記動作によるサウンド、及びユーザ音声の内の少なくとも１つを用いて前記物体の種類を識別するステップを含み、前記筆記動作は、筆記動作、筆記を修正する動作、及び筆記を消去する動作を含むことを特徴とする。
【手続補正３】
【補正対象書類名】明細書
【補正対象項目名】０００８
【補正方法】変更
【補正の内容】
【０００８】
上記目的を達成するためになされた本発明による把持された物体を用いたモーション認識装置は、把持された物体を用いた筆記動作を行うユーザの手首に装着され、前記把持された物体を用いた前記筆記動作によるユーザの手首状態を推定する手首状態推定部と、前記筆記動作により、前記手首と関連する前記ユーザの人体部位の関節動作を推定する関節動作推定部と、把持された前記物体の状態を前記手首状態及び前記関節動作により推定する物体状態推定部とを備え、前記把持された物体を用いた前記筆記動作の開始を検出する動作開始検出部をさらに備え、前記動作開始検出部は、前記筆記動作により発生するサウンドを検出する音声検出部と、前記筆記動作により発生する前記サウンド及び前記筆記動作による前記物体に対する把持行為を検出した場合、前記筆記動作が開始されたと判断する動作開始判断部とを含み、前記物体の状態を連続的に追跡して形態（ｆｉｇｕｒｅ）を生成する筆記生成部をさらに備え、前記関節動作推定部は、前記ユーザが前記物体を把持するために前記ユーザによって加えられた力の強度を推定する把持強度推定部を含み、前記筆記生成部は、前記物体の状態を連続的に追跡し、前記力の強度に対応する太さで形態を生成し、前記筆記生成部は、前記物体を把持した姿勢、前記筆記動作によるサウンド、及びユーザ音声の内の少なくとも１つを用いて前記物体の種類を識別する物体識別部を含み、前記物体の種類による動作を行って前記形態を生成し、前記筆記動作により発生するサウンドは、前記物体と接触面との間の摩擦音を含み、前記筆記動作は、筆記動作、筆記を修正する動作、及び筆記を消去する動作を含むことを特徴とする。
【手続補正４】
【補正対象書類名】明細書
【補正対象項目名】００１３
【補正方法】変更
【補正の内容】
【００１３】
また、上記目的を達成するためになされた本発明による把持された物体を用いたモーション認識方法は、把持された物体を用いたユーザの手首に装着されたモーション認識装置によるモーション認識方法であって、前記把持された物体を用いた前記ユーザの動作の開始を検出するステップと、ユーザの手首状態及び前記手首と関連する人体部位の関節動作により前記把持された物体の状態を推定するステップと、前記把持された物体の状態を連続的に追跡することによって生成される、字、文章、及び図形の少なくとも１つを含む形態（ｆｉｇｕｒｅ）を格納するステップと、前記形態に対応する外部機器を識別するために前記形態を認識し、前記外部機器によって行われる動作を決定するステップと、前記外部機器が前記決定された動作を行うように指示する制御信号を前記外部機器に送信するステップとを有し、前記把持された物体を用いた前記ユーザの動作の開始を検出するステップは、前記ユーザの動作により発生するサウンド及び前記ユーザの動作による前記物体に対する把持行為を検出した場合、前記ユーザの動作が開始されたと判断するステップを含み、前記ユーザの動作により発生するサウンドは、物体と接触面との間の摩擦音を含むことを特徴とする。