ProxyPose: 6-DoF Pose Tracking via Video-to-Video Translation | 動画内の1点を指定するだけで物体や表面の6DoFポーズを追跡！動画生成AIとPnPを組み合わせた新技術！コードも公開

ツイート

University of TorontoとVector InstituteのRuihang Zhang氏らの研究チームが、単眼RGB動画と最初のフレーム上の1点から、対象の6DoFポーズを追跡できる新手法「ProxyPose: 6-DoF Pose Tracking via Video-to-Video Translation」を発表しました。動画生成モデルによるVideo-to-Video変換と古典的な姿勢推定を組み合わせたユニークな手法で、コードもGitHub上で公開されています。







Proxy…