arXiv · ML· Jennifer Zhang, Amanda Coston·· 12 小时前AI 评分21
LLM 在高利害风险预测中问题构建的有效性:决策依赖的挑战
When Do LLMs Model the Right Target? Problem Formulation in High-Stakes Risk Prediction
AI 导读
LLM 在缺乏提示指导时无法可靠处理高利害风险预测中的决策依赖问题。 测试了 OpenAI 和 Anthropic 的 11 个模型,当提示明确指定目标、假设和程序时,目标对齐实现率达 99-100%。 研究建议分析师需通过明确的方法论指导和仔细审查来使用 LLM,而非依赖其自主构建预测问题。
来源:arXiv · ML · arxiv.org