跳到正文
热点事件持续更新

Foyer 邮箱代理发布 9 系统路由基准

1 篇报道1 个报道来源5 小时前更新

先了解这件事

AI 综述

Federico Lucca 提出自托管个人邮箱智能体 Foyer 及其评测协议。研究基于 739 封意大利语/英语私邮(含 231 封无偏及 500 封对抗样本),采用线程分组交叉验证对比 9 种系统。在约 200 个标签下,逻辑回归在消息类型等核心字段准确率最高(0.79),但极少类预测能力不足。最准确系统在转化为动作时,忽略了 18% 需处理邮件,显著高于最佳 LLM 的 4%。该数据集私有且未公开,评估流程在训练前生成基准真值。

AI 根据报道生成 · 2 小时前更新

报道时间线

沿着报道,了解事件的不同侧面。

10月26日
  1. arXiv · ML
    Foyer 个人邮箱智能体:类型化决策模型与生成式 LLM 路由基准测试

    基于 739 封多语言邮件,Foyer 个人邮箱智能体对比了类型化决策模型与生成式 LLM 的路由性能。 在约 200 个标签下,逻辑回归在消息类型(0.79)等核心字段准确率最高,但极少类预测能力不足。 最准确的系统在转化为动作时,忽略了 18% 需处理邮件,显著高于最佳 LLM 的 4%。

本事件热度走势

还没有足够的连续观测数据,暂不绘制趋势。