跳到正文
11月17日周二
  1. arXiv · NLP25

    GPBam: 面向德国公法考试的检索感知基准

    GPBam 包含 81 个德国公法案例及 200 部法规背诵任务,用于联合评估法律检索与长文本生成。 在无检索条件下,32 个模型得分介于 4.81 至 76.42 分之间;引入检索后,最佳提升幅度为 4.1 分。 该基准已发表于 JURIX 2026 会议,旨在量化法律意见对检索质量的需求。

  2. arXiv · NLP27

    错误却自信:测量大语言模型幻觉、过度自信及身份条件行为

    summary_zh: 针对五个开源模型的研究显示,面对指代不明的问题,模型错误率从39.1%升至52.0%,但仅75.3%的错误答案包含不确定性表达。 在指代缺失时模型寻求澄清的比例为33.7%,专业领域问题失败率更高;性别代词遵循职业刻板印象,用户身份声明使答案长度增加约45%。

  3. arXiv · NLP35

    CAPS 框架:通过标准激活偏好合成实现可归因的偏好数据生成

    研究提出标准激活偏好合成(CAPS)框架,通过双重信号评分和归因过滤器,从显式质量标准中生成可归因的偏好数据。 使用 2 万条通用合成偏好对,CAPS 在 IFEval、IFBench 等基准上超越 3.5 万条人工标注数据;在法律任务中,基于公开法条使 Qwen3-8B/14B 提升 4.9 至 6.6 分。 该方法展示了显著的数据效率和领域迁移能力,并构建了 CAPS-Legal 偏好数据集。

  4. arXiv · NLP33

    Beyond Binary Audits: Does Guideline Grounding Mitigate Decision-Space Framing in LLM Opioid Prescribing?

    新工具 Q-Pain++ 通过固定临床内容并独立变异风险因素与剂量选项粒度进行 LLM 阿片类药物处方审计。在原本不变的病例中添加中间剂量选项,显著降低了大多数模型与专家标注剂量的匹配度。 通过检索引入围手术期指南可平均减少这种框架效应,但无法消除它,且单个模型的决策会因检索段落顺序改变而变化。研究代码及相关资源将在 GitHub 开源,14 页论文包含 6 图 6 表。

  5. arXiv · NLP20

    基于六阶段价值链分析的Dread暗网欺诈生态系统结构

    本研究通过分析Dread论坛67,976篇帖子和305,048条评论,绘制了地下欺诈生态系统的六阶段价值链。 研究揭示了少量"桥梁者"用户维持了生态系统的结构凝聚力,同时发现生成式AI在知识构建阶段饱和但在操作阶段渗透率低。 该网络分析框架为执法部门提供了针对性的高影响干预手段。

  6. arXiv · NLP33

    Decision 1.0:面向开放决策基础模型的研究发布

    研究团队发布 Decision 1.0,这是一个开放权重模型家族,将文本状态和运行时定义的问题转化为类型化概率分布。 其 Choice、Noul 和 Score 接口允许应用在推理时指定结果;六个模型涵盖双向编码器和因果解码器架构。Lux-9B 在常见决策基准测试中,显式决策得 84.17%,推理得 91.25%,加权总体得 77.22%。

  7. arXiv · NLP23

    EmoTrace:基于递归轨迹分解的情感支持对话生成方法

    EmoTrace 提出一种递归轨迹分解生成方法,解决现有模型在长程对话中情感支持连贯性不足的问题,在标准基准测试中显著提升策略规划与回复生成效果。 该方法将对话轮次建模为包含寻求者状态、支持者策略等因子的结构化增量,通过价值引导与轨迹条件化机制优化生成过程。 多轮对话中的保留结构化轨迹在扩展对话中产生复合收益,为持续性情感对齐提供了稳健机制。

  8. arXiv · NLP34

    Skill Transfer: 将强模型 Agent 技能适配至弱模型

    提出 Skill Transfer 方法,在固定技能能力上限和模型参数的前提下,通过抽象强/弱轨迹为类型化执行结构并计算图编辑距离(GED)来诊断修复技能,使弱 Agent 能有效执行原本由强模型隐式补全步骤的技能。该方法在三个基准测试和两个模型族上显著提升了未修改技能的通过率,并优于其他技能进化基线,且能正向迁移至强 Agent 及分布外任务。

  9. arXiv · NLP25

    多语言证据下事实核查 LLM 的鲁棒性评估

    针对多语言事实核查场景,研究构建包含英语、德语等 190 条声明的数据集,测试模型在证据缺失或误导下的表现。 实验表明,误导性编辑使 Llama 3.1 8B 的英语准确率从 80.00% 跌至 16.84%,且低资源语言性能下降更显著;机器翻译可部分恢复差距,但裁判评分衰减慢于准确率,显示自动评估低估了性能退化。 研究警告不应在嘈杂多语言证据上部署 LLM 事实核查,并开源了数据集与评估代码。

  10. arXiv · NLP20

    哪种数学上下文支持目标对齐的猜想生成?一项配对消融研究

    该研究通过配对消融设计,分析了定义、对象等六种数学上下文组件对生成目标对齐猜想的影响。实验涵盖 12 篇论文中的 61 个定理,共生成 793 个猜想,发现各上下文组件具有互补性。 局部数学对象提供了最强的独立信号,而移除结构约束和条件会导致目标对齐程度显著下降。研究结果表明确保相关对象识别与允许声明约束的信息结合是生成目标对齐猜想的关键。

  11. arXiv · NLP29

    利用公开健康论坛构建高效医疗问答系统的指南

    summary_zh: 该研究提出一种方法,利用公开在线健康论坛构建无偏见、注重隐私的医疗问答数据集,并采用主题引导语义建模(TGSM)实现自动化标注。 基于检索器-读者架构,研究通过微调 BioBERT 等模型提升性能,实验结果证明其显著优于现有基准,为构建高效医疗问答系统提供了可复制框架。

  12. arXiv · NLP34

    医学 LLM 评估中的自我偏好:裁判并非 impartial

    研究显示 LLM 裁判在医学评估中存在自我偏好,8 个模型在 13,760 次判断中均倾向于给自身生成的答案更高排名或分数。在 Real-POCQi 测试中,合并后的 Answer Rank Bias 为 +1.22 位置,揭示生成者身份仅使该偏倚平均减少 0.094 位置。临床 AI 部署应使用多模型裁判小组以增强评估公正性。

  13. arXiv · NLP21

    SEMPA框架通过双角色对抗辩论提升医疗药物推荐安全性

    SEMPA是一个无需训练的Agentic框架,在MIMIC-IV数据集上药物推荐的F1分数达到0.7295,药物相互作用率降至0.0172。 该框架结合分子感知检索与语义锚点约束,使F1分数比最强监督基线提升57.7%,药物相互作用率降低77.5%。 六类基座模型实验证实增益源自框架本身而非特定模型,已被EMNLP 2026接收。

  14. arXiv · NLP29

    SUM:一种可控且可扩展的金融证券市场模拟模型

    提出名为 SUM 的语义效用模型,将群体级语义感知与个体级效用决策分离,解决了现有提示词代理中连续特征控制失效及推理成本随代理数量增长的问题。 在 A 股限价订单簿市场实验中,SUM 表现出比基于提示词的代理更稳定的单调行为控制,并显著降低了随种群扩大而产生的重复语言模型推理成本。 闭环模拟复现了市场方向性响应、波动率持续性、差异化投资风格及持续的财富异质性。

  15. arXiv · NLP20

    LLM智能体在经济环境中的安全评测:提出首个基准EconSafeBench

    研究团队提出首个LLM智能体经济安全评测基准EconSafeBench,包含828个案例和30期动态交互。 该基准覆盖5类经济场景和4类安全违规,匹配评估用户请求、其他参与者压力及自身绩效目标三种压力源。 对8个LLM模型的静态评测显示整体违规率介于8.5%至40.6%之间,证明在部署至高风险经济环境前需强化安全对齐与严格评测。

  16. arXiv · NLP20

    CoT2Graph:通过学习 Chain-of-Thought 的结构化表示理解大语言模型推理失败

    研究提出 CoT2Graph 框架,将 Chain-of-Thought 表示为有向依赖图并借助图神经网络分析推理质量。 该框架通过归因方法识别结构模式,基于图的信号比树结构方法高 2.5%、比长度基线高 7.8% 地预测答案正确性,并提升 Best-of-N 选择效果。 该工作已被 EMNLP 2026 Findings 接收,论证了从序列级评估转向结构化分析的必要性。

  17. arXiv · NLP28

    Many Paths to the Same Mistake: 生成同一学生错误背后的多样化推理路径

    本文提出一种生成-过滤管线,通过前向一致性指标验证错误推理路径能否还原学生的实际错误答案,并利用LLM评估其现实性。 该研究发现,多数大语言模型难以在推理过程中维持错误逻辑,而小型监督微调模型能有效捕捉这些发散路径。 这项工作为高保真错误轨迹生成提供了框架,推进了非合作型用户模拟。

  18. arXiv · NLP20

    arXiv: 提出首个多轮对话投资建议检测框架

    研究人员提出首个多轮对话投资建议检测框架,针对 LLM 金融助手的隐性建议风险。 该方法采用模块化合成数据生成管线,通过 LLM-as-a-Judge 进行评估,结果显示上下文建议检测比顺序案例更具挑战性。 这项工作为高风险合规领域可扩展的护栏开发奠定了基础。

  19. arXiv · NLP23

    前沿 LLM 在医学本体实体链接中的幻觉剖析

    研究发现前沿大语言模型在将临床文本映射到 SNOMED CT 时存在严重幻觉,导致其目前不适用于自主临床编码。研究指出限制模型使用真实提及片段会加剧而非缓解幻觉,并提出了包含废弃代码和跨本体错误在内的幻觉类型分类体系。 结果显示通用 LLM 性能显著低于专门的零样本实体链接方法,凸显了在临床部署前需要建立健壮的验证机制。

  20. arXiv · NLP33

    EndoUT 如何利用内生偏好发现 LLM 的通用对抗触发器

    EndoUT 提出基于内生偏好扰动的框架,发现可跨输入复用的 LLM 通用对抗触发器。 在 4 个指令调优模型和 9 个基准上,固定触发器使无害任务效用平均降低 40.2 个百分点,且优于所有评估基线。 消融实验表明,源端选择后固定复用的策略在跨提案者迁移中比空上下文固定复用或逐输入生成具有更强的迁移效果。

  21. arXiv · NLP33

    视觉语言模型与失语症患者在词汇生成架构上的解离对比研究

    研究者提出“计算架构解离”方法,利用视觉语言模型的架构特性预测失语症患者的错误类型。 使用 LLaVA 1.6 (Vicuna-13B) 对 88 名患者和 175 个命名项目进行了约 3700 万次测试。结果显示 8 种错误类别中有 6 种在语义阶段与患者模式显著对齐(Spearman ρ = 0.32-0.50),但音韵编码阶段无对齐。

  22. arXiv · NLP39

    大语言模型自动化文献筛选与知识合成框架

    该 LLM 驱动的自动化框架在三项材料科学筛选任务中表现优异,11 个模型中 7 个平衡准确率超 0.90,最高达 0.96-0.98。 框架在 4 分钟内完成 10,000 条记录筛选,对比人工所需的 83 人时,效率提升显著。 通过提取全文结构化信息,该框架可揭示方法趋势,支持假设发展与数据驱动发现。

  23. arXiv · NLP27

    研究揭示 LLM 中的认知幼稚化偏见:残障披露导致技术深度下降

    研究通过构建反事实数据集,发现大语言模型在残障用户披露身份后,会以更高层级的摘要替代形式化解释,导致认知可及性降低。 研究提出“认知幼稚化偏见指数”和“认知可及性响应得分”两个复合指标,在五个开源权重模型族中验证了该效应,其中物理和数学领域受影响最大。 该现象揭示了“包容性税收”,即残障用户需比非残障用户更明确地请求严谨内容,可及性应意味着格式适应而非内容简化。

  24. OpenClaw Releases36

    OpenClaw 2026.11.5 更新发布

    OpenClaw 发布 2026.11.5 更新,实现 Gateway 重启后保留队列消息及会话状态,并确保 Doctor 或 Gateway 启动失败时自动回滚激活的更新。 新增 Telegram 交互组件渲染支持,优化内存索引重建可靠性,修复 Claude CLI 回退机制被主账户阻塞的问题,同时调整第三方 harness 会话控制接口。

  25. OpenAI (X)44

    OpenAI 推出 20+ 医疗插件强化智能体能力

    OpenAI 发布 20+ 医疗插件并升级 Computer-Use 智能体,以提升临床答复质量。 @AbridgeHQ 与 @CVSHealth 等机构已在先验授权、转诊及出院计划等环节应用相关模型。 此举旨在帮助医疗团队连接医学证据与实际工具,从而减少系统操作耗时,增加患者护理时间。

  26. AWS Machine Learning Blog47

    多智能体设计模式、反模式及制造业经验分类

    约88%的AI试点未能进入生产环境,多智能体协调属于分布式系统问题。斯坦福HAI研究表明,当协调开销超过收益时,双模型协作表现可能不如单模型。 该文章将协调模式分为两层:层级1由用户定义确定性路径,层级2由LLM在运行时自主决定路径。十步95%可靠性对应59.9%端到端成功率,每步依赖都会放大风险。 文章还指出节拍时间、安全边界及换班周期等制造业因素会直接影响架构设计。

  27. AWS Machine Learning Blog65

    Duco 如何用 Amazon Bedrock AgentCore 重构金融数据自动化

    金融服务平台 Duco 使用 Amazon Bedrock 和 Amazon Bedrock AgentCore 重构智能体技术栈,以应对传统机器学习的局限。系统采用多租户隔离架构和按需加载的 MCP 技能设计,将上下文占用降低 90%,使对账部署速度提升 10 倍,一家全球银行的入驻成本降低了 70%。

    推荐理由:Duco 在受监管的多租户环境中落地智能体系统,提供了 MCP 按需加载工具与严格隔离的具体工程架构。

  28. OpenAI25

    Holiday Extras 案例:Dots 主动生成报告并辅助会议准备

    Dots 在 Holiday Extras 无需提示即主动交付发布报告,标记潜在遗漏问题,并在通勤时梳理即将召开的会议。 该 AI 助手通过自动化工作流将被动响应转为主动预警,优化了团队在发布与协作场景中的注意力分配。