跳到正文
arXiv · NLP· Agnibh Karmakar, Mayur Parvatikar, Shreyash Dhoot, Amit Dhanda, Aman Chadha, Kapil Wanaskar, Vinija Jain, Amitava Das·· 13 小时前AI 评分28

Swiss-Knife 框架:解码时多目标对齐的可重构方案

Swiss-Knife: A Framework for Reconfigurable Externalised Multi-Objective Alignment at Decode Time

AI 导读

Swiss-Knife 框架通过可热交换评分模块和解码时选择规则,在帮助性/诚实性/无害性平衡上取得谐波 F1 0.797,优于基线 0.750。 其核心组件 Candidate-Batch Normalization 使权重单形对奖励模型重标定不变,且目标重构耗时仅 0.05 ms,无需梯度计算。

来源:arXiv · NLP · arxiv.org