arXiv · AI· Noam Rotstein, Yoad Tewel, Chen Tessler, Haggai Maron, Gal Chechik, Or Litany, Yoni Kasten, Yuval Atzmon·· 4 小时前AI 评分32
Joints, Camera, Action!：任意 Rig 的 3D 动作与视频联合生成模型
Joints, Camera, Action! Co-Generating 3D Motion and Video for Arbitrary Rigs
AI 导读
该模型通过交叉注意力层连接预训练视频模型与独立动作模型，支持任意骨骼 Rig 的动作生成。动作模型在 20 万训练对上进行优化，能定位关节以恢复相机并生成忠实于文本的 3D 运动。该架构支持从视频生成动作、反向生成视频及关键帧控制，优于视频优先流水线。
来源：arXiv · AI · arxiv.org