EventGPT预训练模型及代码开源
热点事件持续更新
EventGPT预训练模型及代码开源
1 篇报道1 个报道来源10 小时前更新
先了解这件事
AI 综述
Denis Burakov 发布 EventGPT,这是一种分层因果 Transformer,基于公开的多模态银行数据集 MBD-mini 进行下一事件预训练。该数据集包含 100,224 名客户、3,880 万笔交易及 6,630 万个地理位置信息。 预训练过程在单张 L4 GPU 上耗时约 2 小时,最大序列长度为 8,192 tokens。模型在无需标签的情况下即可预测未来事件概率,针对五类“首次交易”目标的 ROC-AUC 达到 0.79 至 0.92。 目前,EventGPT 的源代码及预训练权重已完全开源,供社区访问使用。
AI 根据报道生成 · 1 小时前更新
最新进展11月3日 13:00
EventGPT:银行客户历史数据的下一事件预训练模型报道时间线
沿着报道,了解事件的不同侧面。
11月3日
- arXiv · MLEventGPT:银行客户历史数据的下一事件预训练模型
EventGPT 在 MBD-mini 数据集上完成下一事件预训练,无需标签即可预测未来事件概率。 模型基于 100,224 名客户和 3,880 万笔交易训练,在 L4 GPU 上耗时约 2 小时,使用 8,192 tokens 窗口;对五类“首次交易”目标的 ROC-AUC 达 0.79–0.92。 预训练权重与代码已开源。
本事件热度走势
还没有足够的连续观测数据,暂不绘制趋势。