跳到正文
热点事件持续更新

arXiv发布CTI幻觉测量探索性研究论文

1 篇报道1 个报道来源16 小时前更新

先了解这件事

AI 综述

2026年11月19日,Seungho Song等人在arXiv平台(cs.AI板块)发布论文《Measuring Hallucination in Large Language Models for Cyber Threat Intelligence》,提出名为HalluVision的可复现框架,用于测量大语言模型在网络威胁情报任务中的幻觉问题。 该框架基于4940篇网络安全文章,通过微调命名实体识别模型提取实体,并采用多种相似度指标评估事实一致性。研究团队使用100个人工标注样本对指标进行验证,发现语义相似度与人类判断一致性较高,而基于实体的指标一致性有限。 研究发现不同模型间的差异主要集中在问答任务上。该研究成果已被《Computers and Electrical Engineering》期刊录用,为评估LLM在专业领域的事实可靠性提供了新的测量工具。

AI 根据报道生成 · 15 小时前更新

报道时间线

沿着报道,了解事件的不同侧面。

11月20日
  1. arXiv · AI
    基于 HalluVision 框架的大语言模型网络威胁情报幻觉测量研究

    该研究提出可复现框架 HalluVision,基于 4940 篇网络安全文章测量 LLM 幻觉,结果被《Computers and Electrical Engineering》录用。 框架通过微调命名实体识别模型提取实体,采用多种相似度指标评估事实一致性,并用 100 个人工标注样本进行验证。 发现语义相似度与人类判断一致,而基于实体的指标一致性有限,不同模型差异集中在问答任务上。

本事件热度走势

可比范围当前
6
可比范围峰值
911月20日 15:00
近 24 小时变化
–

趋势仅比较持续完整观测到的相同主体,范围可能小于当前热度统计。移动指针或点击图表查看每小时热度;键盘可用左右方向键切换。