跳到正文
arXiv · NLP· Rhea Sanjay Sukthanker, Pashmina Cameron·· 3 小时前AI 评分36

ThinkBit: 面向推理保持的严格标量 2-bit 量化框架

ThinkBit: Search Codewords, Recalibrate Scales, Select by Reasoning

AI 导读

ThinkBit 是一种专为保留推理能力设计的 2-bit 量化框架,在 Qwen3-1.7B 模型上 MATH-500 得分 46.7,显著高于 EfficientQAT 的 30.0。

来源:arXiv · NLP · arxiv.org