arXiv · AI· Yidan Sun, Viktor Schlegel, Srinivasan Nandakumar, Iqra Zahid, Yuping Wu, Yulong Wu, Hao Li, Jie Zhang, Warren Del-Pinto, Goran Nenadic, Siew Kei Lam, Anil Anthony Bharath·· 8 小时前AI 评分26
SynBench：用于差分隐私文本生成的基准
SynBench: A Benchmark for Differentially Private Text Generation
AI 导读
summary_zh: SynBench 是一个包含 9 个精选数据集的统一评估框架，用于标准化衡量差分隐私（DP）文本生成的效用、保真度与隐私审计。 该框架在对 1B-8B 规模 LLM 的基准测试中显示，当私有数据偏离预训练语料库时生成质量显著下降；即使在高隐私预算下，成员推断（MIA）审计仍检测到可测量的成员信号。
来源：arXiv · AI · arxiv.org