注目★★★★★Hugging Face Papers
SynthGait-19K、19,272本の歩行動画で歩容推定を拡張
30秒で把握
- 1SynthGait-19Kが19,272本の歩行動画と6種の歩行パラメータを提供
- 26,427件のMoCapと437人のデータをGait2VidでRGB動画へ統合
- 3GaitXFormerで合成学習の実動画移転と視覚ドメイン差を評価
要約
研究チームは、歩行パラメータ推定向けの物理整合型合成動画データセットSynthGait-19Kを公開した。6,427件のMoCapシーケンスと437人の被験者から19,272本のRGB歩行動画を生成し、6種類の歩行パラメータとSMPLモーションを対応付けた。Gait2Vidは視点やシーン外観を制御しながら、異なるMoCap記録を統合して動画化する。GaitXFormerなどで合成データを学習すると、実動画にも知識が移転した。空間的な歩行パラメータは視覚ドメイン差の影響を受けやすく、HMR再構成の改善だけでは歩容推定精度が向上しない場合も確認した。
あなたへの影響
歩行解析を研究する日本のエンジニアは、SynthGait-19Kを使った合成学習と実動画評価を次の検証候補にできる。
推奨：合成データと実データの視点・外観差が精度に影響し得るため、空間パラメータを含む評価ではドメインシフトの確認が必要になる可能性がある。