arXiv · NLP· Bakary Gibba, Muhammad Abba Mandara, Karim Ismail Abd-Ellah Mohamed·· 3 天前AI 评分36
AfriBizClaims:低资源非洲商业网络中证据接地检索的评估基准
Attribute or Abstain: Evaluating Evidence-Grounded Retrieval on the Low-Resource African Business Web
AI 导读
研究者发布AfriBizClaims基准,包含六个非洲市场150条公司研究查询,涵盖英语、法语及葡萄牙语。 实验显示简单基线在虚构公司问题上拒绝率为100%且引用支持率98%,而多步智能体管道Konexium V1的查询精确度仅68%。 该研究表明增加步骤未提升证据接地效果,相关数据与标签将予以公开。
来源:arXiv · NLP · arxiv.org