扩散语言模型去噪动态与端点不确定性研究

2026年10月27日，一项关于扩散语言模型去噪动态的研究发布。该研究发现，扩散语言模型单次去噪轨迹的内部收敛度与最终输出的端点不确定性显著相关，具体表现为内部收敛度越高，最终输出分布的熵值越低，二者存在强相关性。 在实验方法上，该研究在4个推理基准上采集了32,000条去噪轨迹。数据分析结果显示，相关系数$eta=-0.222$，且$p<10^{-25}$，进一步证实了内部收敛度与输出不确定性之间的统计显著性。

AI 根据报道生成 · 1 小时前更新

还没有足够的连续观测数据，暂不绘制趋势。