arXiv cs.CR· Boheng Li, Yueming Xing, Yiming Li, Jie Zhang, Tianwei Zhang·· 5 小时前AI 评分70
LETHE论文提出通过价值多样性坍塌防御未经授权的图像转视频生成
LETHE: Defending against Unauthorized Image-to-Video Generation via Value Diversity Collapse
AI 摘要
该论文针对图像转视频(I2V)扩散模型可能被滥用将个人照片转为伪造视频的问题,提出了一种名为LETHE的新型防御方法。作者通过凸几何分析发现,参考值向量的扩散度(spread)是控制后续帧读取参考图像机制的关键因素,即使轻微的扩散收缩也能严重破坏生成的视频质量。
基于这一发现,LETHE设计了两个互补的目标:价值坍塌目标驱使参考值向量趋向均匀化,而注意力吸引目标则引导后续帧向这些坍塌的标记聚集以放大视觉损坏。研究者在构建了两个以人为中心的I2V保护基准后,在多个现代I2V模型上进行了广泛实验,结果显示该方法在常见扰动预算下实现了最先进的保护性能和通用性。
事实层面,本文确认了参考值向量扩散度对I2V生成过程的决定性作用,并验证了LETHE在特定基准上的有效性。推断层面,这种基于几何特性的防御机制可能比传统对抗扰动更难以被常规去噪或修复手段绕过。猜测层面,若此类技术被广泛集成到图像发布流程中,可能会显著增加恶意Deepfake制作的门槛,但也可能引发关于隐私保护与内容创作自由之间平衡的新讨论。
来源:arXiv cs.CR · arxiv.org