印尼研究团队发布Pancasila-Dilemmas价值观数据集
热点事件持续更新
印尼研究团队发布Pancasila-Dilemmas价值观数据集
1 篇报道1 个报道来源3 小时前更新
先了解这件事
AI 综述
研究团队Supryadi等人在arXiv NLP发布Pancasila-Dilemmas数据集，该数据集包含1834道源自印尼新闻的难题，按宗教、人道等5项价值观分类，旨在基于印尼价值观评估大语言模型表现。 该数据集经过本土人士审阅及5名公民作答后，用于评测50个闭源与开源大语言模型。评测结果显示所有模型的PMS分数均低于0.5，揭示了模型在宗教与团结场景下存在显著的价值观缺失问题。 该数据集目前已公开发布，为印尼价值观与大语言模型评估研究提供了新的公开数据资源。
AI 根据报道生成 · 1 小时前更新
最新进展10月27日 12:00
Pancasila-Dilemmas 数据集发布：基于印尼价值观评估大语言模型报道时间线
沿着报道，了解事件的不同侧面。
10月27日
- arXiv · NLPPancasila-Dilemmas 数据集发布：基于印尼价值观评估大语言模型
研究团队发布 Pancasila-Dilemmas 数据集，包含源自印尼新闻的 1834 道难题，按宗教、人道等 5 项价值观分类。 经本土人士审阅及 5 名公民作答后，对 50 个闭源与开源 LLM 进行评测，结果显示 PMS 分数均低于 0.5。 该数据集揭示了 LLM 在宗教与团结场景下的显著价值观缺失，目前已公开发布。
本事件热度走势
还没有足够的连续观测数据，暂不绘制趋势。