跳到正文
arXiv · AI· Chaolang Li, Jingyu Li, Zhaocheng Du, Xuyang Xie, Gang Wang, Pengwen Dai·· 5 小时前AI 评分23

NHNM:基于正样本的自然难负例挖掘用于指令跟随检索

Natural Hard-Negative Mining from Positives for Instruction-Following Retrieval

AI 导读

研究提出NHNM方法,将原正样本复用为自然指令难负例,解决指令条件对比监督数据稀缺问题。在MSMARCO构建含近7K实例的NHNM-MARCO数据集,568M至4B参数模型微调后性能超越更大检索器,证明增益源于难负例监督。

来源:arXiv · AI · arxiv.org