作者与机构
Yuxi Mi
Fudan University, Shanghai, China
Qiuyang Yuan
Fudan University, Shanghai, China
Jianqing Xu
Youtu Lab, Tencent, Shanghai, China
Yichun Zhou
Fudan University, Shanghai, China
Xuan Zhao
Fudan University, Shanghai, China
Jun Wang
WeChat Pay Lab33, Tencent, Shenzhen, China
Rizen Guo
WeChat Pay Lab33, Tencent, Shenzhen, China
Shuigeng Zhou
Fudan University, Shanghai, China
解决了什么问题
论文要解决的是身份条件生成器把非身份线索吸收到身份语义中,导致合成数据与真实识别任务之间出现落差。
关键结果
结果显示 SteerFace 能缓解视觉倾向,在下游人脸识别中优于既有合成数据方法,并能跨训练数据集和生成流水线泛化。
摘要
合规可用的人脸识别训练数据不足,使合成人脸成为重要替代方案。论文指出,现有扩散式合成人脸虽然在身份保持和多样性上表现较好,但会产生与真实数据分布不一致的视觉倾向;SteerFace 通过在身份嵌入超球面上进行自适应残差扰动,抑制生成器对非身份视觉线索的依赖,从而缩小 synthetic-real gap。
研究出发点
人脸识别采购与研发越来越需要合规训练数据,但合成人脸可能带有不真实的视觉倾向,从而影响下游验证效果。
方法概述
SteerFace 在身份嵌入超球面上向随机正交方向扰动,并学习自适应强度,使生成器减少对残余非身份线索的依赖,同时保持身份一致性。
论文总结
SteerFace 的价值在于把合成人脸生成视为训练数据质量问题,而不只是图像真实感问题。它通过扰动身份嵌入、削弱非身份视觉线索的残留影响,让团队有机会在训练识别模型之前就降低 synthetic-real gap,对合规数据扩充和偏差审计都更有参考价值。