arXiv · NLP· Ian Porada, Suraj Tripathi, Chaitanya Animesh, Leda Sari, Chaitanya Narisetty, Austin R. Matthews, Bohan Yu, Ramesh L. Thulasiram, Gregory Sell, Kean Chin, Dmitriy Genzel·· 16 小时前AI 评分28
OSynth：纵向与情境敏感的会议理解评测数据集
OSynth: A Longitudinal, Context-Sensitive Evaluation of Meeting Understanding
AI 导读
研究者发布合成数据集OSynth，包含570小时模拟组织会议音频及相关工件。 在成对对比测试中，人类评估者基于150-300词节选识别OSynth与真实会议转录的准确率仅为56%。 额外情境对当前最先进大语言模型在多个实体敏感维度带来显著提升。
来源：arXiv · NLP · arxiv.org