arXiv · ML· Xueyun Tian, Bingbing Xu, Jiaming Liu, Jinpeng Yu, Yang Shi, Yu Zhao, Ruihua Huang, Yuanzhuo Wang, Huawei Shen·· 5 小时前AI 评分37
SyncPro：实现主动流式视频理解的同步推理与响应
SyncPro: Synchronous Reasoning and Responding for Proactive Streaming Video Understanding
AI 导读
论文提出 SyncPro，一种通过同步双流框架解决主动流式视频理解中推理与响应冲突的模型。该框架拥有独立的内部证据跟踪和响应分支，能并发处理证据更新与用户响应，避免固定间隔导致的延迟或无效更新。 实验在三个主动基准测试上验证，SyncPro 通过 189K 双流样本结合监督微调与轨迹级强化学习训练，实现了更优的响应时机和答案准确性。
来源：arXiv · ML · arxiv.org