HybridSpec论文发表
热点事件持续更新
HybridSpec论文发表
1 篇报道1 个报道来源2 小时前更新
先了解这件事
报道摘要
HybridSpec 为混合 GDN-MoE 模型设计吞吐量感知投机解码方案,在单请求贪心解码中比自回归解码快 1.75 倍至 1.88 倍,比 DFlash 快 1.30 倍至 1.33 倍。
摘自 arXiv · AI
最新进展11月4日 13:00
HybridSpec 实现混合 GDN-MoE 模型的吞吐量感知投机解码报道时间线
沿着报道,了解事件的不同侧面。
11月4日
- arXiv · AIHybridSpec 实现混合 GDN-MoE 模型的吞吐量感知投机解码
HybridSpec 为混合 GDN-MoE 模型设计吞吐量感知投机解码方案,在单请求贪心解码中比自回归解码快 1.75 倍至 1.88 倍,比 DFlash 快 1.30 倍至 1.33 倍。
本事件热度走势
还没有足够的连续观测数据,暂不绘制趋势。