arXiv · AI· Xiaoyu Gu, Chencheng Wang, Fuyang Li, Yu Xi, Tao Liu, Jiaoqi Guo, Kai Yu·· 4 小时前AI 评分25
SMART:基于语义分段映射与上下文评估标准的 ASR 转录评估框架
SMART: Semantic Segment Mapping and Assessment of Recognition Transcripts with Contextual Rubrics
AI 导读
研究提出 SMART 框架,通过语义分段映射和上下文评估标准解决 WER 无法区分错误语义后果的问题。该框架可生成明确的后果标签以支持 SIER 量化评估。 SMART 在多数投票人工标注下达到 0.843 F1,优于直接 LLM 判断的 0.745,且对评估模型选择不敏感。
来源:arXiv · AI · arxiv.org