arXiv · NLP· Lijia Liu, Kyohei Atarashi, Jiyi Li, Koh Takeuchi, Shunji Umetani, Hisashi Kashima·· 8 小时前AI 评分36
NLData2Opt：评估大语言模型从自然语言和噪声数据中推导优化参数的基准测试
NLData2Opt: Benchmarking Parameter Derivation and Prediction for Modeling Optimization Problems from Natural Language and Data
AI 导读
NLData2Opt基准测试揭示LLM在实用优化流程中表现大幅下降，因其包含从噪声数据中提取、计算和预测参数等现实推理步骤。 该基准将问题分解为描述与数据，要求模型处理误导性属性、转换缺失参数及预测未来值。 结果显示，现有基准的进步无法直接转化为实际优化建模的准确性。
来源：arXiv · NLP · arxiv.org