自然会話におけるジェスチャーの時間的変化パターンはどのように分析できるか。
この研究では、ジェスチャーの時間的変化パターンを分析するために、ジェスチャーを準備、ストローク、引き込みの段階に分類し、それぞれの段階をシーケンスラベリングの枠組みでモデル化しています。具体的には、スケルトンの動きを時間ウィンドウごとに処理し、Transformerエンコーダーを使用してコンテキスト埋め込みを学習し、CRFを活用してシーケンスラベリングを行っています。このアプローチにより、ジェスチャーの時間的な変化をより詳細に捉え、ジェスチャーの複雑なダイナミクスを捉えることが可能となっています。