arXiv cs.LG精选72

对抗训练中鲁棒性与几何准确性之间的权衡

On the tradeoff between robustness and geometric accuracy in adversarial training

· 2小时前

精选理由

量化鲁棒性与几何精度的权衡,为对抗分类器设计提供理论依据。

AI 摘要

arXiv:2610.22955v1 发布类型:新 摘要:对于存在对手的非参数二分类问题,我们证明了一个关于对抗分类器的最优定量估计:以其鲁棒性(由对抗预算 $\varepsilon$ 表示)为依据,对其几何准确性进行控制,其中几何准确性通过与 Bayes 分类器之间的 Hausdorff 距离来衡量。这严格表明,根据底层 Bayes 分类器的正则性,鲁棒分类器在准确性上的牺牲至多为 $O(\sqrt{\varepsilon})$ 或 $O(\varepsilon)$。不同于以往关于低复杂度假设类中鲁棒性与准确性不相容性的研究,我们的工作表明,高复杂度假设类允许构造具有精确定量准确性的鲁棒分类器。我们的结果适用于由欧氏空间上的任意范数所确定的对手,并同时适用于无限数据和有限数据情形。

查看原文(arXiv cs.LG)