arXiv · NLP· Siyuan Li, Ke Wan, Boyong Hou, Yujie Deng, Zixuan Yuan·· 10 天前AI 评分28
FinCutBench:衡量 LLM 金融知识时间边界的持续更新基准
FinCutBench: A Continually Updated Benchmark for Measuring the Temporal Boundaries of LLM Financial Knowledge
AI 导读
FinCutBench 推出每月更新的金融知识基准,衡量 LLM 参数化知识在日历时间上的延伸边界。 当前数据集含 9,000 道中英语四选一题目,覆盖 2023 年 1 月至 2026 年 9 月中美市场及四类金融信息。 基于 FinCut Boundary 的实证参考有助于确定评估窗口并解释结果,但部分市场指标显著性不足。
来源:arXiv · NLP · arxiv.org