arXiv · AI· Yuhao Lu, Jiongxu Chen, Hexiang Wei, Jiajin Wu, Juelin Li, Mingjian Liang, Fan Yang, Zhuowei Liang, Zihao Liu, Zhennan Wang, Sheng Wang, Lin Shao·· 6 小时前AI 评分33
WorldFlow: 通过大规模预训练联合预测视频与3D运动
WorldFlow: Joint Video and 3D Motion Prediction via Large-Scale Pretraining
AI 导读
WorldFlow 作为生成式世界模型，联合预测未来视频与基于查询的3D 轨迹，并在 WorldFlowBench 上取得最低的 ADE 和 FDE。 模型采用 Mixture-of-Transformers 骨干网络，在 144 万个物体级异构样本上进行训练。在 SpatialCog 评测集中，ADE 达到 0.060 m，相比最强外部基线降低 54.2%。
来源：arXiv · AI · arxiv.org