Pose Estimation
深層学習を活用した高精度な人物姿勢推定技術とその応用
Overview
PFNは、3DCGの人体シミュレーションや自社の豊富な計算資源を利用した深層学習により、カメラ映像のみで人の姿勢・動きを指先まで高精度で認識する姿勢推定技術を開発しています。現在、この技術を手話サポートやスポーツ解析、エンターテインメント、技術継承、遠隔診断などに実用化するための研究開発を行っています。
Features
手話アバター動画の生成
ソフトバンク株式会社が開発する手話と音声による双方向コミュニケーションシステム SureTalk(シュアトーク)で、手話話者個人を特定しないコンピュータグラフィックスによる統一規格の手話アバター動画の生成にPFNの3D人物姿勢推定技術が利用されています。
スポーツ解析
PFNの人物姿勢推定技術を利用し、サッカーのプレー解析アルゴリズムおよび選手の姿勢推定アルゴリズムを開発しました。

選手の姿勢推定(特許出願済)

姿勢推定にもとづく選手の向き検出(特許出願済)

サッカーシーンの分類(特許出願済)