跳到正文
arXiv · AI· Yuanhong Zheng, Ruichuan An, Xiaopeng Lin, Yuxing Liu, Sihan Yang, Huanyu Zhang, Haodong Li, Qintong Zhang, Renrui Zhang, Guopeng Li, Yifan Zhang, Yuheng Li, Wentao Zhang·· 12 小时前AI 评分37

PEARL:基于运行时定义概念的个人化流式视频理解

PEARL: Personalized Streaming Video Understanding with Runtime-Defined Concepts

AI 导读

PEARL 提出 PSVU 任务并构建 PSVU-Bench,解决用户实时定义概念及回顾历史的问题。 方法将概念与视频片段分离存储,结合 PSVU-10K 训练检索器。在三个架构上平均提升实时问答 15.05%,优于现有在线模型。 代码、数据和模型已公开。

来源:arXiv · AI · arxiv.org