(57)【特許請求の範囲】
【請求項１】
多数の行動体の標準的な動作に関する標準動作モデルが記憶される記憶部と、
複数の第１の時系列画像に映った第１の行動体の動作を取得する第１の動作取得部と、
前記取得された第１の行動体の動作が前記標準動作モデルに含まれない場合、前記取得された動作を非標準動作として前記第１の行動体と紐づけて登録する登録部と、
複数の第２の時系列画像に映った第２の行動体の動作を取得する第２の動作取得部と、
前記取得された第２の行動体の動作が前記非標準動作と所定以上の一致度を有する場合に、前記第２の行動体を前記第１の行動体として特定する特定部と、
を備えたことを特徴とする行動体特定システム。
【請求項２】
前記登録部は、前記第１の行動体の動作について、複数の前記非標準動作を登録し、
前記第２の動作取得部は、前記複数の第２の時系列画像に映った第２の行動体の複数の動作を取得し、
前記特定部は、前記取得された第２の行動体の複数の動作のうち、前記複数の非標準動作と前記所定以上の一致度を有するものが所定割合以上あった場合に、前記第２の行動体を前記第１の行動体として特定することを特徴とする請求項１に記載の行動体特定システム。
【請求項３】
報知を行うことを決定する報知決定部と、
所定の場所を撮影した前記複数の第２の時系列画像において、他の行動体により前記第２の行動体に対して支援が行われたことを示す支援情報を取得する支援情報取得部と、
を更に備え、
前記支援が行われた第２の行動体が前記第１の行動体として前記特定部により特定され、前記支援情報が前記支援情報取得部により取得されると、前記登録部は、前記登録された第１の行動体を支援対象として登録し、
前記第２の動作取得部によって新たに取得された第２の行動体が前記支援対象として登録された第１の行動体として前記特定部により特定されると、前記報知決定部は報知を行うことを決定することを特徴とする請求項１又は２に記載の行動体特定システム。
【請求項４】
報知を行うことを決定する報知決定部と、
複数の第３の時系列画像に映った第３の行動体の複数の動作を取得する第３の動作取得部と、
を更に備え、
前記記憶部には、支援を必要とする複数の非標準動作が更に記憶されており、
前記取得された第３の行動体の複数の動作のうち、前記記憶部に記憶された前記複数の非標準動作と所定以上の一致度を有するものが所定割合以上あった場合に、前記報知決定部は報知を行うことを決定することを特徴とする請求項１又は２に記載の行動体特定システム。
【請求項５】
多数の行動体の標準的な動作に関する標準動作モデルが記憶されたコンピュータにインストールされるプログラムであって、
複数の第１の時系列画像に映った第１の行動体の動作を取得するステップと、
前記取得された第１の行動体の動作が前記標準動作モデルに含まれない場合、前記取得された動作を非標準動作として前記第１の行動体と紐づけて登録するステップと、
複数の第２の時系列画像に映った第２の行動体の動作を取得するステップと、
前記取得された第２の行動体の動作が前記非標準動作と所定以上の一致度を有する場合に、前記第２の行動体を前記第１の行動体として特定するステップと、
を備えたことを特徴とする行動体特定プログラム。
【請求項６】
前記登録するステップでは、前記第１の行動体の動作について、複数の前記非標準動作を登録し、
前記第２の行動体の動作を取得するステップでは、前記複数の第２の時系列画像に映った第２の行動体の複数の動作を取得し、
前記特定するステップでは、前記取得された第２の行動体の複数の動作のうち、前記複数の非標準動作と前記所定以上の一致度を有するものが所定割合以上あった場合に、前記第２の行動体を前記第１の行動体として特定することを特徴とする請求項５に記載の行動体特定プログラム。
【請求項７】
報知を行うことを決定するステップと、
所定の場所を撮影した前記複数の第２の時系列画像において、他の行動体により前記第２の行動体に対して支援が行われたことを示す支援情報を取得するステップと、
を更に備え、
前記登録するステップでは、前記支援が行われた第２の行動体が前記第１の行動体として前記特定するステップで特定され、前記支援情報が前記支援情報を取得するステップで取得されると、前記登録された第１の行動体を支援対象として登録し、
前記第２の行動体の動作を取得するステップで新たに取得された第２の行動体が、前記支援対象として登録された第１の行動体として前記特定するステップで特定されると、前記報知を行うことを決定するステップでは、報知を行うことを決定すること特徴とする請求項５又は６に記載の行動体特定プログラム。
【請求項８】
報知を行うことを決定するステップと、
複数の第３の時系列画像に映った第３の行動体の複数の動作を取得するステップと、
を更に備え、
前記コンピュータには、支援を必要とする複数の非標準動作が更に記憶されており、
前記取得された第３の行動体の複数の動作のうち、前記コンピュータに記憶された前記複数の非標準動作と所定以上の一致度を有するものが所定割合以上あった場合に、前記報知を行うことを決定するステップでは、報知を行うことを決定することを特徴とする請求項５又は６に記載の行動体特定プログラム。
【請求項９】
多数の行動体の標準的な動作に関する標準動作モデルが記憶される記憶部と、
複数の第１の時系列画像に映った第１の行動体の動作を取得する第１の動作取得部と、
前記取得された第１の行動体の動作が前記標準動作モデルに含まれない場合、前記取得された動作を非標準動作として前記第１の行動体と紐づけて登録する登録部と、
を備え、
複数の第２の時系列画像に映った第２の行動体の動作を取得する第２の動作取得部と、前記取得された第２の行動体の動作が前記非標準動作と所定以上の一致度を有する場合に、前記第２の行動体を前記第１の行動体として特定する特定部と、を有する行動体特定装置との間で通信可能であることを特徴とする非標準動作登録装置。
【請求項１０】
前記登録部は、前記第１の行動体の動作について、複数の前記非標準動作を登録し、
前記第２の動作取得部は、前記複数の第２の時系列画像に映った第２の行動体の複数の動作を取得し、
前記特定部は、前記第２の動作取得部により取得された第２の行動体の複数の動作のうち、前記複数の非標準動作と前記所定以上の一致度を有するものが所定割合以上あった場合に、前記第２の行動体を前記第１の行動体として特定することを特徴とする請求項９記載の非標準動作登録装置。
【請求項１１】
報知を行うことを決定する報知決定部と、
所定の場所を撮影した前記複数の第２の時系列画像において、他の行動体により前記第２の行動体に対して支援が行われたことを示す支援情報を取得する支援情報取得部と、
を更に備え、
前記第２の動作取得部は、所定の場所を撮影した前記複数の第２の時系列画像において、他の行動体により前記第２の行動体に対して支援が行われたことを示す支援情報を更に取得し、
前記支援が行われた第２の行動体が前記第１の行動体として前記特定部により特定され、前記支援情報取得部が前記支援情報により取得されると、前記登録部は、前記登録された第１の行動体を支援対象として登録し、
前記第２の動作取得部によって新たに取得された第２の行動体が前記支援対象として登録された第１の行動体として前記特定部により特定されると、前記報知決定部は報知を行うことを決定することを特徴とする請求項９又は１０に記載の非標準動作登録装置。
【請求項１２】
報知を行うことを決定する報知決定部と、
複数の第３の時系列画像に映った第３の行動体の複数の動作を取得する第３の動作取得部と、
を更に備え、
前記記憶部又は前記行動体特定装置には、支援を必要とする複数の非標準動作が更に記憶されており、
前記取得された第３の行動体の複数の動作のうち、前記記憶された前記複数の非標準動作と所定以上の一致度を有するものが所定割合以上あった場合に、前記報知決定部は報知を行うことを決定することを特徴とする請求項９又は１０に記載の非標準動作登録装置。
【請求項１３】
多数の行動体の標準的な動作に関する標準動作モデルが記憶されたコンピュータにインストールされるプログラムであって、
複数の第１の時系列画像に映った第１の行動体の動作を取得するステップと、
前記取得された第１の行動体の動作が前記標準動作モデルに含まれない場合、前記取得された動作を非標準動作として前記第１の行動体と紐づけて登録するステップと、
を備え、
前記コンピュータは、複数の第２の時系列画像に映った第２の行動体の動作を取得する第２の動作取得部と、前記取得された第２の行動体の動作が前記非標準動作と所定以上の一致度を有する場合に、前記第２の行動体を前記第１の行動体として特定する特定部と、を有する行動体特定装置との間で通信可能であることを特徴とする非標準動作登録プログラム。
【請求項１４】
前記登録するステップでは、前記第１の行動体の動作について、複数の前記非標準動作を登録し、
前記第２の動作取得部は、前記複数の第２の時系列画像に映った第２の行動体の複数の動作を取得し、
前記特定部は、前記第２の動作取得部により取得された第２の行動体の複数の動作のうち、前記複数の非標準動作と前記所定以上の一致度を有するものが所定割合以上あった場合に、前記第２の行動体を前記第１の行動体として特定することを特徴とする請求項１３に記載の非標準動作登録プログラム。
【請求項１５】
報知を行うことを決定するステップと、
所定の場所を撮影した前記複数の第２の時系列画像において、他の行動体により前記第２の行動体に対して支援が行われたことを示す支援情報を取得するステップと、
を更に備え、
前記第２の動作取得部は、所定の場所を撮影した前記複数の第２の時系列画像において、他の行動体により前記第２の行動体に対して支援が行われたことを示す支援情報を更に取得し、
前記支援が行われた第２の行動体が前記第１の行動体として前記特定部により特定され、前記支援情報が前記支援情報を取得するステップで取得されると、前記登録するステップでは、前記登録された第１の行動体を支援対象として登録し、
前記第２の動作取得部によって新たに取得された第２の行動体が前記支援対象として登録された第１の行動体として前記特定部により特定されると、前記報知を行うことを決定するステップでは、報知を行うことを決定することを特徴とする請求項１３又は１４に記載の非標準動作登録プログラム。
【請求項１６】
報知を行うことを決定するステップと、
複数の第３の時系列画像に映った第３の行動体の複数の動作を取得するステップと、
を更に備え、
前記コンピュータ又は前記行動体特定装置には、支援を必要とする複数の非標準動作が更に記憶されており、
前記取得された第３の行動体の複数の動作のうち、前記記憶された前記複数の非標準動作と所定以上の一致度を有するものが所定割合以上あった場合に、前記報知を行うことを決定するステップでは、報知を行うことを決定することを特徴とする請求項１３又は１４に記載の非標準動作登録プログラム。
【請求項１７】
多数の行動体の標準的な動作に関する標準動作モデルが記憶される記憶部と、複数の第１の時系列画像に映った第１の行動体の動作を取得する第１の動作取得部と、前記取得された第１の行動体の動作が前記標準動作モデルに含まれない場合、前記取得された動作を非標準動作として前記第１の行動体と紐づけて登録する登録部と、を有する非標準動作登録装置との間で通信可能な行動体特定装置であって、
複数の第２の時系列画像に映った第２の行動体の動作を取得する第２の動作取得部と、
前記取得された第２の行動体の動作が前記非標準動作と所定以上の一致度を有する場合に、前記第２の行動体を前記第１の行動体として特定する特定部と、
を備えたことを特徴とする行動体特定装置。
【請求項１８】
前記登録部は、前記第１の行動体の動作について、複数の前記非標準動作を登録し、
前記第２の動作取得部は、前記複数の第２の時系列画像に映った第２の行動体の複数の動作を取得し、
前記特定部は、前記第２の動作取得部により取得された第２の行動体の複数の動作のうち、前記複数の非標準動作と前記所定以上の一致度を有するものが所定割合以上あった場合に、前記第２の行動体を前記第１の行動体として特定することを特徴とする請求項１７に記載の行動体特定装置。
【請求項１９】
報知を行うことを決定する報知決定部と、
所定の場所を撮影した前記複数の第２の時系列画像において、他の行動体により前記第２の行動体に対して支援が行われたことを示す支援情報を取得する支援情報取得部と、
を更に備え、
前記支援が行われた第２の行動体が前記第１の行動体として前記特定部により特定され、前記支援情報が前記支援情報取得部により取得されると、前記登録部は、前記登録された第１の行動体を支援対象として登録し、
前記第２の動作取得部によって新たに取得された第２の行動体が前記支援対象として登録された第１の行動体として前記特定部により特定されると、前記報知決定部は報知を行うことを決定することを特徴とする請求項１７又は１８に記載の行動体特定装置。
【請求項２０】
報知を行うことを決定する報知決定部と、
複数の第３の時系列画像に映った第３の行動体の複数の動作を取得する第３の動作取得部と、
を更に備え、
前記記憶部又は別途設けられた記憶部には、支援を必要とする複数の非標準動作が更に記憶されており、
前記取得された第３の行動体の複数の動作のうち、前記記憶された前記複数の非標準動作と所定以上の一致度を有するものが所定割合以上あった場合に、前記報知決定部は報知を行うことを決定することを特徴とする請求項１７又は１８に記載の行動体特定装置。
【請求項２１】
多数の行動体の標準的な動作に関する標準動作モデルが記憶される記憶部と、複数の第１の時系列画像に映った第１の行動体の動作を取得する第１の動作取得部と、前記取得された第１の行動体の動作が前記標準動作モデルに含まれない場合、前記取得された動作を非標準動作として前記第１の行動体と紐づけて登録する登録部と、を有する非標準動作登録装置との間で通信可能なコンピュータにインストールされるプログラムであって、
複数の第２の時系列画像に映った第２の行動体の動作を取得するステップと、
前記取得された第２の行動体の動作が前記非標準動作と所定以上の一致度を有する場合に、前記第２の行動体を前記第１の行動体として特定するステップと、
を備えたことを特徴とする行動体特定プログラム。
【請求項２２】
前記登録部は、前記第１の行動体の動作について、複数の前記非標準動作を登録し、
前記第２の行動体の動作を取得するステップでは、前記複数の第２の時系列画像に映った第２の行動体の複数の動作を取得し、
前記特定するステップでは、前記取得された第２の行動体の複数の動作のうち、前記複数の非標準動作と前記所定以上の一致度を有するものが所定割合以上あった場合に、前記第２の行動体を前記第１の行動体として特定することを特徴とする請求項２１に記載の行動体特定プログラム。
【請求項２３】
報知を行うことを決定するステップと、
所定の場所を撮影した前記複数の第２の時系列画像において、他の行動体により前記第２の行動体に対して支援が行われたことを示す支援情報を取得するステップと、
を更に備え、
前記支援が行われた第２の行動体が前記第１の行動体として前記特定するステップで特定され、前記支援情報が前記支援情報を取得するステップで取得されると、前記登録部は、前記登録された第１の行動体を支援対象として登録し、
前記第２の行動体の動作を取得するステップで新たに取得された第２の行動体が、前記支援対象として登録された第１の行動体として前記特定するステップで特定されると、前記報知を行うことを決定するステップでは、報知を行うことを決定すること特徴とする請求項２１又は２２に記載の行動体特定プログラム。
【請求項２４】
報知を行うことを決定するステップと、
複数の第３の時系列画像に映った第３の行動体の複数の動作を取得するステップと、
を更に備え、
前記記憶部又は前記コンピュータには、支援を必要とする複数の非標準動作が更に記憶されており、
前記取得された第３の行動体の複数の動作のうち、前記記憶された前記複数の非標準動作と所定以上の一致度を有するものが所定割合以上あった場合に、前記報知を行うことを決定するステップでは、報知を行うことを決定することを特徴とする請求項２１又は２２に記載の行動体特定プログラム。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、行動体の特徴的な動作に基づき、時系列画像に映った行動体を高精度に特定することの可能な行動体特定システムに関する。
【背景技術】
【０００２】
従来より、リハビリテーション対象者の動作の特徴を表す対象者動作特徴情報を記憶しておき、当該対象者動作特徴情報に基づき、画像に映った対象者がリハビリテーション対象者であるが否かを判定する動作情報処理装置が知られている（例えば、特許文献１参照）。
【先行技術文献】
【特許文献】
【０００３】
【特許文献１】特許第６６７５４６２号
【発明の概要】
【発明が解決しようとする課題】
【０００４】
しかしながら、上記技術では、例えば「足を引きずっている」という対象者動作特徴情報の場合、「動作が行われている間の足根のｙ座標の最大変化量が１ｃｍ未満」のように、対象者動作特徴情報ごとに判定基準を設ける必要があるため、判定基準が設けられていない動作では、リハビリテーション対象者を特定することができない。
【０００５】
また、判定基準が設けられている対象者動作特徴であっても、判定基準を満たす複数の人物が画像に映っている場合には、他の要素も考慮しなければ、リハビリテーション対象者を特定することができない。
【０００６】
そこで、本発明は、行動体の特徴的な動作に基づき、時系列画像に映った行動体を高精度に特定することの可能な行動体特定システムを提供することを目的としている。
【課題を解決するための手段】
【０００７】
本発明は、多数の行動体の標準的な動作に関する標準動作モデルが記憶される記憶部と、複数の第１の時系列画像に映った第１の行動体の動作を取得する第１の動作取得部と、前記取得された第１の行動体の動作が前記標準動作モデルに含まれない場合、前記取得された動作を非標準動作として前記第１の行動体と紐づけて登録する登録部と、複数の第２の時系列画像に映った第２の行動体の動作を取得する第２の動作取得部と、前記取得された第２の行動体の動作が前記非標準動作と所定以上の一致度を有する場合に、前記第２の行動体を前記第１の行動体として特定する特定部と、を備えたことを特徴とする行動体特定システムを提供している。
【０００８】
このような構成によれば、“標準動作モデル”に含まれない特徴的な動作（“非標準動作”）に基づき、行動体を特定するので、顔が判然としない場合（行動体が遠くに映っている場合、ヘルメットやマスクをしている場合、整形を行っている場合等）、指紋を消している場合等であっても、時系列画像に映った行動体を高精度に特定することが可能となる。また、“登録段階”において、所定の“非標準動作”を検出するのではなく、“標準動作モデル”に含まれない動作を“非標準動作”であると判断する構成であるため、所定の“非標準動作”を定めたり、所定の“非標準動作”であると判断するための判断基準を設ける必要がない。更に、“特定段階”において、検出された動作が所定の“非標準動作”に対して設けられた判定基準を満たしているか否かで行動体を特定するのではなく、登録部に登録された“非標準動作”と、第２の検出部により検出された動作と、を直接比較するので、精度よく行動体の特定を行うことが可能となる。
【０００９】
また、前記登録部は、前記第１の行動体の動作について、複数の前記非標準動作を登録し、前記第２の動作取得部は、前記複数の第２の時系列画像に映った第２の行動体の複数の動作を取得し、前記特定部は、前記取得された第２の行動体の複数の動作のうち、前記複数の非標準動作と前記所定以上の一致度を有するものが所定割合以上あった場合に、前記第２の行動体を前記第１の行動体として特定することが好ましい。
【００１０】
このような構成によれば、複数の“非標準動作”を検出した場合に第２の行動体を第１の行動体として特定するので、より精度よく行動体の特定を行うことが可能となる。
【００１１】
また、報知を行うことを決定する報知決定部と、所定の場所を撮影した前記複数の第２の時系列画像において、他の行動体により前記第２の行動体に対して支援が行われたことを示す支援情報を取得する支援情報取得部と、を更に備え、前記支援が行われた第２の行動体が前記第１の行動体として前記特定部により特定され、前記支援情報が前記支援情報取得部により取得されると、前記登録部は、前記登録された第１の行動体を支援対象として登録し、前記第２の動作取得部によって新たに取得された第２の行動体が前記支援対象として登録された第１の行動体として前記特定部により特定されると、前記報知決定部は報知を行うことを決定することが好ましい。
【００１２】
このような構成によれば、支援を必要とする行動体が自動的に登録されることになるので、支援を必要とする行動体に対して適切かつ迅速に対応を行うことが可能となる。
【００１３】
また、報知を行うことを決定する報知決定部と、複数の第３の時系列画像に映った第３の行動体の複数の動作を取得する第３の動作取得部を更に備え、前記記憶部には、支援を必要とする複数の非標準動作が更に記憶されており、前記取得された第３の行動体の複数の動作のうち、前記記憶部に記憶された前記複数の非標準動作と所定以上の一致度を有するものが所定割合以上あった場合に、前記報知決定部は報知を行うことを決定することが好ましい。
【００１４】
このような構成によれば、支援を必要とする可能性の高い行動体に対して幅広く対応を行うことが可能となる。
【００１５】
また、本発明の別の観点によれば、多数の行動体の標準的な動作に関する標準動作モデルが記憶されたコンピュータにインストールされるプログラムであって、複数の第１の時系列画像に映った第１の行動体の動作を取得するステップと、前記取得された第１の行動体の動作が前記標準動作モデルに含まれない場合、前記取得された動作を非標準動作として前記第１の行動体と紐づけて登録するステップと、複数の第２の時系列画像に映った第２の行動体の動作を取得するステップと、前記取得された第２の行動体の動作が前記非標準動作と所定以上の一致度を有する場合に、前記第２の行動体を前記第１の行動体として特定するステップと、を備えたことを特徴とする行動体特定プログラムを提供している。
【００１６】
また、本発明の別の観点によれば、多数の行動体の標準的な動作に関する標準動作モデルが記憶される記憶部と、複数の第１の時系列画像に映った第１の行動体の動作を取得する第１の動作取得部と、前記取得された第１の行動体の動作が前記標準動作モデルに含まれない場合、前記取得された動作を非標準動作として前記第１の行動体と紐づけて登録する登録部と、を備え、複数の第２の時系列画像に映った第２の行動体の動作を取得する第２の動作取得部と、前記取得された第２の行動体の動作が前記非標準動作と所定以上の一致度を有する場合に、前記第２の行動体を前記第１の行動体として特定する特定部と、を有する行動体特定装置との間で通信可能であることを特徴とする非標準動作登録装置を提供している。
【００１７】
また、本発明の別の観点によれば、多数の行動体の標準的な動作に関する標準動作モデルが記憶されたコンピュータにインストールされるプログラムであって、複数の第１の時系列画像に映った第１の行動体の動作を取得するステップと、前記取得された第１の行動体の動作が前記標準動作モデルに含まれない場合、前記取得された動作を非標準動作として前記第１の行動体と紐づけて登録するステップと、を備え、前記コンピュータは、複数の第２の時系列画像に映った第２の行動体の動作を取得する第２の動作取得部と、前記取得された第２の行動体の動作が前記非標準動作と所定以上の一致度を有する場合に、前記第２の行動体を前記第１の行動体として特定する特定部と、を有する行動体特定装置との間で通信可能であることを特徴とする非標準動作登録プログラムを提供している。
【００１８】
また、本発明の別の観点によれば、多数の行動体の標準的な動作に関する標準動作モデルが記憶される記憶部と、複数の第１の時系列画像に映った第１の行動体の動作を取得する第１の動作取得部と、前記取得された第１の行動体の動作が前記標準動作モデルに含まれない場合、前記取得された動作を非標準動作として前記第１の行動体と紐づけて登録する登録部と、を有する非標準動作登録装置との間で通信可能な行動体特定装置であって、複数の第２の時系列画像に映った第２の行動体の動作を取得する第２の動作取得部と、前記取得された第２の行動体の動作が前記非標準動作と所定以上の一致度を有する場合に、前記第２の行動体を前記第１の行動体として特定する特定部と、を備えたことを特徴とする行動体特定装置を提供している。
【００１９】
また、本発明の別の観点によれば、多数の行動体の標準的な動作に関する標準動作モデルが記憶される記憶部と、複数の第１の時系列画像に映った第１の行動体の動作を取得する第１の動作取得部と、前記取得された第１の行動体の動作が前記標準動作モデルに含まれない場合、前記取得された動作を非標準動作として前記第１の行動体と紐づけて登録する登録部と、を有する非標準動作登録装置との間で通信可能なコンピュータにインストールされるプログラムであって、複数の第２の時系列画像に映った第２の行動体の動作を取得するステップと、前記取得された第２の行動体の動作が前記非標準動作と所定以上の一致度を有する場合に、前記第２の行動体を前記第１の行動体として特定するステップと、を備えたことを特徴とする行動体特定プログラムを提供している。
【発明の効果】
【００２０】
本発明の行動体特定システム異常行動によれば、行動体の特徴的な動作に基づき、時系列画像に映った行動体を高精度に特定することの可能となる。
【図面の簡単な説明】
【００２１】
【図１】本発明の実施の形態による時系列画像の説明図
【図２】本発明の実施の形態による行動体特定システムのブロック図
【図３】本発明の実施の形態による行動体特定のフローチャート
【図４】本発明の変形例による行動体特定システムのブロック図
【発明を実施するための形態】
【００２２】
以下、本発明の実施の形態による行動体特定システム１について、図１−図３を参照して説明する。
【００２３】
行動体特定システム１は、図１に示すように、撮影手段によって撮影された複数の時系列画像Ｘ（動画を構成する各フレーム等）に映った行動体Ｙを特定するためのものである。
【００２４】
本実施の形態では、ある場所で撮影された複数の時系列画像Ｘ１（図１（ａ））を取得し、複数の時系列画像Ｘ１に映った第１の行動体Ｙ１の特徴的な動作を登録しておき、その後、任意の場所で撮影された複数の時系列画像Ｘ２（図２（ａ））を取得し、複数の時系列画像Ｘ２に映った第２の行動体Ｙ２の特徴的な動作を、登録された第１の行動体Ｙ１の特徴的な動作と比較することで、第２の行動体Ｙ２が第１の行動体Ｙ１であるか否かを判定する。本実施の形態では、行動体Ｙとして人間を採用し、理解容易のため、行動体Ｙを骨格だけで簡易的に表示する。
【００２５】
行動体特定システム１は、図２に示すように、記憶部２と、第１の検出部３と、第１の動作取得部４と、登録部５と、第２の検出部６と、第２の動作取得部７と、特定部８と、を備えている。本実施の形態では、図２に示すように、記憶部２と、第１の動作取得部４と、登録部５と、第２の動作取得部７と、特定部８と、がサーバに設けられており、外部に設けられた第１の検出部３及び第２の検出部６と通信可能なものとする。
【００２６】
記憶部２には、多数の行動体の標準的な動作に関する“標準動作モデル”が記憶されている。本実施の形態では、“標準動作モデル”は、人間の一般的な動作の標準的なモデルを示したものとする。
【００２７】
一般的な動作の種類としては、「歩く」、「走る」、「座る」等が考えられ、記憶部２には、一般的な動作の種類ごとに“標準動作モデル”が記憶されている。
【００２８】
一方で、「頭をかく」、「鼻を触る」、「腰に手を当てる」等のイレギュラーな動作や癖などに関しては、“標準動作モデル”が記憶されていない。
【００２９】
但し、一般的な動作は、上記したものに限定されず、行動体特定システム１の使用目的に応じて、必要な動作の“標準動作モデル”を記憶すれば良い。従って、例えば、「頭をかく」という動作が必要な場合には、「頭をかく」という動作の“標準動作モデル”が記憶されることとなる。
【００３０】
また、“多数の行動体の標準的な動作”は、“人類全体の標準的な動作”に限定されず、例えば、“日本人全体の標準的な動作”、“大人（子供）全体の標準的な動作”、“行動体特定システム１が使用される施設等への入退場者全体の標準的な動作”等、目的に応じたものを記憶すれば良い。
【００３１】
なお、“標準動作モデル”は、予め記憶部２内に記憶されていても良いが、本実施の形態では、行動体特定システム１内で、多数の行動体から検出された多数の動作（複数の関節の動き）に基づき決定するものとする。
【００３２】
この場合、多数の行動体の時系列画像から一般的な動作として設定された動作を検出し、各動作に関し、検出された全動作の中で所定（閾値）以上の割合を有する動作を“標準動作モデル”として決定する等が考えられる。
【００３３】
また、記憶部２には、“関節識別基準”と、“行動体特定基準”と、も記憶されている。
【００３４】
“関節識別基準”は、行動体（人間）の複数の関節（首、右肘、左肘、腰、右膝、左膝等）を識別するためのものであり、関節ごとに、それぞれを識別するための形状、方向、サイズ等を示したものである。
【００３５】
“行動体特定基準”は、行動体（人間）の様々なバリエーション（“歩行”、“直立”等）の “基本姿勢 “、”各関節の可動域“、一の行動体における”各関節間の距離“等を示したものである。
【００３６】
第１の検出部３は、複数の第１の時系列画像Ｘ１に映った第１の行動体Ｙ１の動作を検出する。本実施の形態では、複数の第１の時系列画像Ｘ１に映った第１の行動体Ｙ１を特定した上で、特定された第１の行動体Ｙ１の動作を検出する。
【００３７】
行動体の特定としては、公知の方法を用いることもできるが、本実施の形態では、記憶部２に記憶された“関節識別基準”に該当する複数の関節を検出した上で、“行動体特定基準”を参照して、行動体Ｙに含まれる複数の関節を特定する。
【００３８】
動作の検出としては、所定の動作を行った場合の各関節の動きを記憶部２に記憶しておき、特定された行動体Ｙを公知のトラッキング方法等でトラッキングして各関節の該当する動きを検出した場合に当該所定の動作を行ったと検出してもよいし、関節全体の動き、腰の関節の動き、重心の動き（ＸＹＺ方向への移動速度）等を単に検出するだけでもよい。
【００３９】
第１の動作取得部４は、第１の検出部３により検出された第１の行動体Ｙ１の動作を取得する。
【００４０】
登録部５は、取得された第１の行動体Ｙ１の動作が“標準動作モデル”に含まれない場合、取得された動作を“非標準動作”として第１の行動体Ｙ１と紐づけて登録する。
【００４１】
“非標準動作”としては、例えば、「歩く（走る）際に片方の肩が上がっている」、「歩く（走る）際に足を引きずり気味である」、「首や腰が曲がった状態で歩いて（走って）いる」、「座る動作が遅い」等の動作が登録される可能性が考えられる。
【００４２】
第２の検出部６は、複数の第２の時系列画像Ｘ２に映った第２の行動体Ｙ２の動作を検出する。この第２の行動体Ｙ２の特定、及び、行動の検出は、第１の検出部３における第１の行動体Ｙ１の特定、及び、行動の検出と同様の方法で行うことができる。
【００４３】
第２の動作取得部７は、第２の検出部６により検出された第２の行動体Ｙ２の動作を取得する。
【００４４】
特定部８は、取得された第２の行動体Ｙ２の動作が“非標準動作”と所定以上の一致度を有する場合に、第２の行動体Ｙ２を第１の行動体Ｙ１として特定する。
【００４５】
続いて、図３のフローチャートを用いて、行動体特定システム１による行動体の特定について説明する。
【００４６】
行動体の特定は、“登録段階”と“特定段階”の２段階で行われる。
【００４７】
（１）登録段階
【００４８】
“登録段階”では、まず、複数の第１の時系列画像Ｘ１に映った第１の行動体Ｙ１の動作を取得する（Ｓ１）。このＳ１は、異なる複数の第１の時系列画像Ｘ１に対して行われ、多数の動作を取得することが好ましい。
【００４９】
続いて、Ｓ１で取得された第１の行動体Ｙ１の動作が“標準動作モデル”に含まれない場合（Ｓ２：ＹＥＳ）、取得された動作を“非標準動作”として第１の行動体Ｙ１と紐づけて登録する（Ｓ３）。
【００５０】
（２）特定段階
【００５１】
続いて、“特定段階”では、まず、複数の第２の時系列画像Ｘ２に映った第２の行動体Ｙ２の動作を取得する（Ｓ４）。
【００５２】
続いて、Ｓ４で取得された第２の行動体Ｙ２の動作がＳ３で登録された“非標準動作”と所定以上の一致度を有する場合に（Ｓ５：ＹＥＳ）、第２の行動体Ｙ２を第１の行動体Ｙ１として特定する（Ｓ６）。
【００５３】
なお、一の“非標準動作”との一致度を比較するだけでは、正確に特定することができない可能性もあるので、Ｓ３において、第１の行動体Ｙ１について複数の“非標準動作”を登録しておき、Ｓ４において、第２の行動体Ｙ２の動作を複数取得し、Ｓ５において、第２の行動体Ｙ２の複数の動作が登録された複数の“非標準動作”と所定以上の一致度を有する場合に、第２の行動体Ｙ２を第１の行動体Ｙ１として特定することが好ましい。本実施の形態では、検出された第２の行動体Ｙ２の複数の動作と、登録された複数の“非標準動作”と、の全てが一致していなくても、検出された第２の行動体Ｙ２の複数の動作のうち、登録された複数の“非標準動作”と所定以上の一致度を有するものが所定割合以上あった場合に、第２の行動体Ｙ２を第１の行動体Ｙ１として特定するものとする。
【００５４】
このような構成を有する行動体特定システム１は、様々な用途で用いることができる。
【００５５】
例えば、入館管理、勤怠管理、個人認証（決済システムや駅改札、バス乗車）等を目的として行動体特定システム１を用いる場合には、対象とする行動体の動作を“登録段階”で予め登録しておき、空港、会社の入り口、改札等で“特定段階”を行うことで、入退管理を行うことが可能となる。また、認知症等により徘徊の可能性のある行動体の動作を予め登録しておくことで、街頭カメラに映った映像等から当該行動体を発見することも可能となる。
【００５６】
また、犯罪捜査を目的として行動体特定システム１を用いる場合にも、対象とする行動体の動作を“登録段階”で予め登録しておき、対象とする行動体の出没予測地点で“特定段階”を行うことで、対象とする行動体を発見することが可能となる。
【００５７】
一方、対象とする行動体が未定の状態で行動体特定システム１を用いることも可能である。
【００５８】
例えば、バス、無人店舗、ＡＴＭ、店舗や公共施設へのリピーター（高齢者や体の不自由な顧客等）には、支援が必要な場合がある。
【００５９】
そこで、バス等に行動体特定システム１を設置しておくことで、バス等の利用者の“非標準動作”が、当該利用者と紐づけて自動的に登録される。そして、次回のバス等の利用の際には、当該利用者を特定することができるので、乗車時等にスタッフが支援に駆け付けることが可能となる。
【００６０】
以上説明したように、本実施の形態による行動体特定システム１では、“登録段階”において、第１の行動体Ｙ１の動作が“標準動作モデル”に含まれない場合、当該動作を“非標準動作”として第１の行動体Ｙ１と紐づけて登録しておき、“特定段階”において、第２の行動体Ｙ２の動作が“非標準動作”と所定以上の一致度を有する場合に、第２の行動体Ｙ２を第１の行動体Ｙ１として特定する。
【００６１】
このような構成によれば、“標準動作モデル”に含まれない特徴的な動作（“非標準動作”）に基づき、行動体を特定するので、顔が判然としない場合（行動体が遠くに映っている場合、ヘルメットやマスクをしている場合、整形を行っている場合等）、指紋を消している場合等であっても、時系列画像に映った行動体を高精度に特定することが可能となる。また、“登録段階”において、所定の“非標準動作”を検出するのではなく、“標準動作モデル”に含まれない動作を“非標準動作”であると判断する構成であるため、所定の“非標準動作”を定めたり、所定の“非標準動作”であると判断するための判断基準を設ける必要がない。更に、“特定段階”において、検出された動作が所定の“非標準動作”に対して設けられた判定基準を満たしているか否かで行動体を特定するのではなく、登録部５に登録された“非標準動作”と、第２の検出部６により検出された動作と、を直接比較するので、精度よく行動体の特定を行うことが可能となる。
【００６２】
また、本実施の形態による行動体特定システム１では、“特定段階”において、第２の行動体Ｙ２の複数の動作のうち、複数の“非標準動作”と所定以上の一致度を有するものが所定割合以上あった場合に、第２の行動体Ｙ２を第１の行動体Ｙ１として特定する。
【００６３】
このような構成によれば、複数の“非標準動作”を検出した場合に第２の行動体Ｙ２を第１の行動体Ｙ１として特定するので、より精度よく行動体の特定を行うことが可能となる。
【００６４】
尚、本発明の行動体特定システムは、上述した実施の形態に限定されず、特許請求の範囲に記載した範囲で種々の変形や改良が可能である。
【００６５】
例えば、上記実施の形態では、バス等での支援について説明を行ったが、特定された全ての行動体が支援を必要としているとは限らない。そこで、図４に示すように、報知を行うことを決定する報知決定部９と、所定の場所を撮影した複数の第２の時系列画像Ｘ２において、他の行動体により第２の行動体Ｙ２に対して支援が行われたことを検出する第３の検出部１０と、他の行動体により第２の行動体Ｙ２に対して支援が行われたことを示す支援情報を第３の検出部１０から取得する支援情報取得部１１と、を更に備える構成が考えられる。
【００６６】
この場合、例えば、記憶部２に支援の動作を行った場合の各関節の動きを記憶しておき、支援の動作を行った他の行動体と第２の行動体Ｙ２との距離が所定距離以内であった場合に、第３の検出部１０は、他の行動体により第２の行動体Ｙ２に対して支援が行われたことを検出する。
【００６７】
そして、支援が行われた第２の行動体Ｙ２が第１の行動体Ｙ１として特定部８により特定され、支援情報が支援情報取得部１１により取得されると、登録部５は、登録された第１の行動体Ｙ１を支援対象として登録する。その後、第２の検出部６によって新たに検出された第２の行動体Ｙ２が“支援対象として登録された第１の行動体Ｙ１”として特定部８により特定されると、報知決定部９は報知を行うことを決定する。報知を行うことが決定されると、第２の検出部６が設置されているバス等に音声等でアラートを行えば良い。
【００６８】
このような構成によれば、支援を必要とする行動体が自動的に登録されることになるので、支援を必要とする行動体に対して適切かつ迅速に対応を行うことが可能となる。
【００６９】
なお、第２の検出部６が第３の検出部１０を兼ねる構成であっても良い。同様に、第１の動作取得部４又は第２の動作取得部７が支援情報取得部１１を兼ねる構成であっても良い。
【００７０】
更に、上記変形例は、登録部５に登録されていない第３の行動体Ｙ３に対しても応用可能である。
【００７１】
この場合、図４に示すように、複数の第３の時系列画像Ｘ３に映った第３の行動体Ｙ３の複数の動作を取得する第３の動作取得部１２を更に備え、取得された第３の行動体Ｙ３の複数の動作のうち、前記支援対象として登録された第１の行動体Ｙ１の複数の非標準動作と所定以上の一致度を有するものが所定割合以上あった場合に、報知決定部９は報知を行うことを決定する。
【００７２】
このような構成によれば、支援対象として登録された第１の行動体Ｙ１と同じような非標準動作を行う行動体（第３の行動体Ｙ３）は、第１の行動体Ｙ１と同様の支援が必要なことが多いので、支援を必要とする可能性の高い行動体に対して幅広く対応を行うことが可能となる。
【００７３】
なお、この場合の“所定以上の一致度”、“所定割合”は、第１の実施の形態と同じであっても良いし、異なっていても良い。また、“前記支援対象として登録された第１の行動体Ｙ１の複数の非標準動作”の代わりに、“支援を必要とする複数の非標準動作”を記憶部２に記憶しておき、当該“支援を必要とする複数の非標準動作”と所定以上の一致度を有するものが所定割合以上あった場合に、報知決定部９は報知を行うことを決定してもよい。“支援を必要とする複数の非標準動作”としては、例えば、「足をひきずっている」、「手を膝に当てる」、「手すりを掴む」、「歩く（座る）動作が遅い」等が考えられるが、これらに限らず、状況や目的に応じて設定すれば良い。
【００７４】
また、第３の動作取得部１２は、第３の行動体Ｙ３の複数の動作を、第１の検出部３、第２の検出部６、第３の検出部１０のいずれかから取得してもよいし、他の検出部から取得してもよい。更に、第１の動作取得部４又は第２の動作取得部７が第３の動作取得部１２を兼ねる構成であってもよい。
【００７５】
また、上記実施の形態では、第１の検出部３と第２の検出部６が行動体システム１に含まれていたが、行動体の動作を取得できれば、行動体特定システム１に含まれていなくても良い。また、非標準動作登録装置（記憶部２、第１の動作取得部４、登録部５）と行動体特定装置（第２の動作取得部７、特定部８）のように別体とし、互いに通信可能な構成にすることも考えられる。
【００７６】
また、上記実施の形態では、行動体Ｙとして人間を例に説明したが、動物やロボットについて使用することも可能である。例えば、動物の場合には、田畑を荒らす個体を特定することが可能となる。
【００７７】
また、上記実施の形態では複数の関節の動きに基づいて行動体の動作を検出したが、行動体の動作の検出は、関節の動き以外に基づいて行っても良い。
【００７８】
また、上記実施の形態では、第１の時系列画像Ｘ１に第１の行動体Ｙ１のみが、第２の時系列画像Ｘ２に第２の行動体Ｙ２のみが映っている場合で説明を行ったが、複数の行動体Ｙが映っている場合であっても同様にして、行動体Ｙごとに登録及び特定が行われる。この場合、記憶部２に記憶された“関節識別基準”に該当する複数の関節を検出した上で、“行動体特定基準”を参照して、行動体Ｙに含まれる複数の関節を特定することで、各行動体Ｙを特定することが可能である。
【００７９】
また、本発明は、行動体特定システム１、非標準動作登録装置、行動体特定装置が行う処理に相当するプログラムや、当該プログラムを記憶した記録媒体にも応用可能である。記録媒体の場合、コンピュータ等に当該プログラムがインストールされることとなる。ここで、当該プログラムを記憶した記録媒体は、非一過性の記録媒体であっても良い。非一過性の記録媒体としては、ＣＤ−ＲＯＭ等が考えられるが、それに限定されるものではない。なお、上記“支援を必要とする複数の非標準動作”は、記憶部２に限らず、コンピュータや行動体特定装置に記憶されていても良い。
【符号の説明】
【００８０】
１      行動体特定システム
２      記憶部
３      第１の検出部
４      第１の動作取得部
５      登録部
６      第２の検出部
７      第２の動作取得部
８      特定部
９      報知決定部
１０    第３の検出部
１１    支援情報取得部
１２    第３の動作取得部
【要約】
【課題】  行動体の特徴的な動作に基づき、時系列画像に映った行動体を高精度に特定することの可能な行動体特定システムを提供する。
【解決手段】  行動体特定システム１は、多数の行動体の標準的な動作に関する標準動作モデルが記憶される記憶部２と、複数の第１の時系列画像Ｘ１に映った第１の行動体Ｙ１の動作を取得する第１の動作取得部４と、取得された第１の行動体Ｙ１の動作が標準動作モデルに含まれない場合、取得された動作を非標準動作として第１の行動体Ｙ１と紐づけて登録する登録部５と、複数の第２の時系列画像Ｘ２に映った第２の行動体Ｙ２の動作を取得する第２の動作取得部７と、取得された第２の行動体Ｙ２の動作が非標準動作と所定以上の一致度を有する場合に、第２の行動体Ｙ２を第１の行動体Ｙ１として特定する特定部８と、を備えている。
【選択図】図３【図１】
0006793383.tif 000002
【図２】
0006793383.tif 000003
【図３】
0006793383.tif 000004
【図４】
0006793383.tif 000005