跳到正文
arXiv · ML· Yining Wang, Xi Li, Mi Zhang, Xiaohan Zhang, Xiaoyu You, Zhenxing Qian, Mi Wen·· 2026-10-08AI 评分26

基于扩散模型的多模态大模型地理位置隐私泄露缓解方法

Hiding in Plain Sight: A Diffusion-based Mitigation of Geolocation Privacy Leakage in Vision-Language Models

AI 导读

研究人员发现,多模态大模型(MLRM)会利用视觉线索推断用户地理位置,且现有的拒答机制可被攻击绕过,攻击成功率高达100%。 该方法引入扩散模型,在生成过程的潜空间中注入扰动,配合专门针对GPS坐标对齐的GeoCLIP模型进行优化,从而破坏模型对地理位置的提取能力。 该方案在保持图像清晰度的同时,显著提升了模型在面对未知模型攻击时的黑盒泛化能力,并具备直接部署于社交媒体平台的潜力。

来源:arXiv · ML · arxiv.org