跳到正文
R/ArtificialInteligence· /u/coolmum18·· 2026-10-16AI 评分63

Tencent Hunyuan Hy4 Preview 770B参数模型压缩至214 GiB的技术解析

Tencent Packs Open Source 770B-Parameter Hy4 Preview into 214 GiB

AI 导读

腾讯Hunyuan Hy4 Preview模型实现1.5TB权重至214 GiB的压缩,保留全部770B参数。技术细节包括采用Sherry算法与STQ1_0存储格式,混合精度分配平均约2.38 bits/weight,基于完整Hessian矩阵评估权重敏感度。实测表明在类似位宽下MRCR检索性能基本不变,数学能力略有下降,但总体优于UD-IQ1_M基准。

来源:R/ArtificialInteligence · reddit.com