arXiv发布CTI幻觉测量探索性研究论文
热点事件持续更新
arXiv发布CTI幻觉测量探索性研究论文
1 篇报道1 个报道来源16 小时前更新
先了解这件事
AI 综述
2026年11月19日,Seungho Song等人在arXiv平台(cs.AI板块)发布论文《Measuring Hallucination in Large Language Models for Cyber Threat Intelligence》,提出名为HalluVision的可复现框架,用于测量大语言模型在网络威胁情报任务中的幻觉问题。 该框架基于4940篇网络安全文章,通过微调命名实体识别模型提取实体,并采用多种相似度指标评估事实一致性。研究团队使用100个人工标注样本对指标进行验证,发现语义相似度与人类判断一致性较高,而基于实体的指标一致性有限。 研究发现不同模型间的差异主要集中在问答任务上。该研究成果已被《Computers and Electrical Engineering》期刊录用,为评估LLM在专业领域的事实可靠性提供了新的测量工具。
AI 根据报道生成 · 15 小时前更新
最新进展11月20日 13:00
基于 HalluVision 框架的大语言模型网络威胁情报幻觉测量研究报道时间线
沿着报道,了解事件的不同侧面。
11月20日
- arXiv · AI基于 HalluVision 框架的大语言模型网络威胁情报幻觉测量研究
该研究提出可复现框架 HalluVision,基于 4940 篇网络安全文章测量 LLM 幻觉,结果被《Computers and Electrical Engineering》录用。 框架通过微调命名实体识别模型提取实体,采用多种相似度指标评估事实一致性,并用 100 个人工标注样本进行验证。 发现语义相似度与人类判断一致,而基于实体的指标一致性有限,不同模型差异集中在问答任务上。
本事件热度走势
- 可比范围当前
- 6
- 可比范围峰值
- 911月20日 15:00
- 近 24 小时变化
- –
02.557.510
15:0018:0021:0011月21日03:00
趋势仅比较持续完整观测到的相同主体,范围可能小于当前热度统计。移动指针或点击图表查看每小时热度;键盘可用左右方向键切换。