研究人员提出代码改写管道与HMI评估LLM代码脆弱性
热点事件观察中
研究人员提出代码改写管道与HMI评估LLM代码脆弱性
1 篇报道1 个报道来源1 天前更新
先了解这件事
AI 综述
2026年10月27日,Lizhe Zhang等研究人员在arXiv发布论文,针对大语言模型代码生成中的“有害记忆”现象,提出了自动化语义扰动管道与有害记忆指数(HMI)。(78字) 实验基于MBPP+和BigCodeBench基准显示,HMI不随模型规模单调增加,且主要集中于约束变更等逻辑编辑中。(58字) 研究发现监督微调可能推高HMI,而PPO后训练在准确率与HMI的权衡中表现更优,为模型评估提供了新视角。(56字)
AI 根据报道生成 · 1 小时前更新
最新进展10月27日 12:00
评估LLM代码生成中的有害记忆现象报道时间线
沿着报道,了解事件的不同侧面。
10月27日
- arXiv · AI评估LLM代码生成中的有害记忆现象
研究人员提出代码重写管道与有害记忆指数(HMI),用于量化LLM在语义微变下的代码生成脆弱性。 实验基于MBPP+和BigCodeBench基准发现,HMI不随模型规模单调增加,且集中在约束变更等逻辑编辑中。监督微调可能推高HMI,而PPO后训练在准确率与HMI权衡中表现更优。
本事件热度走势
还没有足够的连续观测数据,暂不绘制趋势。