跳到正文
arXiv · NLP· Xiaoqiang Wang, Mengyang Xiong, Jun Dai, Bang Liu·· 13 小时前AI 评分33

HyperQ:基于电路超网络量子增强的掩码扩散语言模型

Circuit Hypernetworks for Quantum-Augmented Diffusion Language Models

AI 导读

HyperQ 提出量子增强掩码扩散语言模型,通过轻量级电路超网络动态生成特定于 token 的量子电路。将量子期望值通过残差连接投影回冻结的语言模型骨干网络。 基于 IQP 架构,HyperQ 将 qubit 数量从 16 扩展至 64,在 6 项 zero-shot 基准上平均准确率从 47.65 提升至 54.30,超越冻结骨干网络的 49.59。

来源:arXiv · NLP · arxiv.org