跳到正文
arXiv · ML· Zixuan Liu, Fangzheng Wu, Brian Summa, Zizhan Zheng·· 2026-10-09AI 评分29

风险条件化微调:单个 LLM 策略实现推理时连续风险控制

Risk-Conditioned Fine-Tuning of Large Language Models

AI 导读

提出风险条件化 RLHF 框架,训练单一策略支持推理时连续选择风险规避程度,避免重训。 该方法解决现有 CVaR 优化仅针对固定风险水平的局限,在多个基准测试中验证了单一策略对不同风险水平的适应性与部署灵活性。

来源:arXiv · ML · arxiv.org