|
这项由重庆工商大学、重庆增强西湖大学、工商构联法国巴黎综合理工学院旗下Telecom SudParis以及广州应用科技学院联合开展的大学等机研究,于2026年7月2日以预印本形式发布在arXiv平台,合揭编号为arXiv:2607.02271v1,示生收录于计算机视觉领域(cs.CV)。物识对这一课题感兴趣的别领读者可通过上述编号在arXiv检索到完整论文。 每个人的困局手掌和手指内部,藏着一张独一无二的重庆增强"蓝图"——那是密密麻麻的静脉血管网络。由于这张蓝图深藏皮肤之下,工商构联既无法被简单复制,大学等机也难以被伪造,合揭静脉识别因此成为当前安全性最高的示生生物特征识别技术之一。用它来解锁手机、物识验证身份、别领进入银行金库,比指纹甚至人脸识别都要可靠得多。然而,要让人工智能学会"认识"这张蓝图,就必须喂给它大量的训练样本——越多越好。问题偏偏出在这里:采集静脉图像需要专用的近红外摄像设备,涉及隐私保护,数据量天然稀缺。 面对这种"粮荒",研究人员们早就想出了一个常用办法:数据增强。简单地说,就是对已有的图像动动手脚——翻个面、旋转一下、调调亮度、拼接两张图……用这种方式人为制造出更多"新"样本,让人工智能有足够的素材去练习。这种技巧在识别猫狗照片、分类自然风景图时效果显著,于是研究者们几乎不假思索地把同样的招数搬到了静脉识别领域。 然而,这项联合研究的核心发现让人有些意外:那些在自然图像识别上屡试不爽的增强方法,放到静脉识别上,结果好坏参半,甚至有时适得其反。更棘手的是,那些让识别"准确率"看起来漂亮的方法,往往在安全性和可靠性上留下了隐患。为了彻底摸清这个问题,研究团队建立了一个名为AGVBench的评估平台,对30种代表性的数据增强策略进行了系统性的"体检",实验横跨五个公开静脉数据集和七种深度学习骨干架构。 一、为什么静脉图像不能随便"乱动"要理解这场困局,得先弄清楚静脉图像与普通照片的根本差异。在日常的图片识别任务里,一只猫不管是正着放还是倒着放、亮着还是暗着、完整还是只露出半个脑袋,人眼一眼就能认出它是猫,机器经过训练之后也能做到同样的事。正是因为这种鲁棒性,对自然图像做各种花式变换,反而有助于让模型学得更扎实。 然而静脉图像的识别逻辑完全不同。身份信息藏在那些细如发丝的血管走向、分叉位置和相互连接的拓扑结构里——换句话说,是结构关系,而不是整体外观。一旦对图像做了大幅度的旋转、翻转或裁剪,血管的走向就变了、位置关系就乱了,原本精妙的"身份密码"可能就此被抹去。这就好比把一张详细的地铁线路图随意旋转90度并裁掉一半:你仍然能看出那是个地铁线路图,却完全无法判断从A站到B站该怎么走。 正因如此,研究团队认为,专门针对静脉识别的增强方法评估框架早该建立。目前学界的状况是:各个研究团队用着各自不同的参数设置、各自不同的代码风格、各自不同的评测标准,彼此之间的结果根本没法比较,实践者也不知道该优先采用哪种方法。AGVBench的出现,正是为了填补这个空白。 二、AGVBench:一座专为静脉识别搭建的"测试赛道"AGVBench的整体框架建立在PyTorch和OpenMMLab的计算机视觉基础库(MMCV)之上,被设计成高度模块化的结构。研究人员把整个系统拆分成四大功能板块:负责模型组件注册与数据流水线的核心库、负责集中管理超参数和实验配置的配置模块、负责分布式训练执行与综合指标评估的工具脚本,以及负责存储训练日志、模型权重和分析结果的工作目录。整个流程由一份配置文件统一驱动,用户只需在其中指定数据集、增强方法、骨干架构和训练超参数,系统就会自动完成从初始化到评估的全套流程。 在增强方法的选择上,研究团队覆盖了三大类共30种方法,每一类都有其独特的作用机制。
在骨干架构方面,研究团队选取了两类七种模型。通用视觉模型包括轻量级卷积网络MobileNetv2、标准残差网络ResNet18、基于全局注意力机制的Vision Transformer Small(ViT-S)和基于层次化注意力的Swin Transformer Tiny(Swin-T)。领域专用模型则包括FVRASNet(专为手指静脉设计的嵌入式识别网络)、AMPVNet(专为无约束条件下的掌静脉识别设计的网络)和StarLKNet-S(一种基于大核卷积的静脉识别专用架构)。 在数据集方面,研究团队选取了三个掌静脉数据集和两个手指静脉数据集。 三、评估不止于"答对了多少题":六维度的全面体检在评价指标设计上,研究团队的眼光远不止于通常意义上的"识别准确率"。他们构建了六个相互补充的评估维度,就像给一辆汽车不只测试最高时速,还要测试刹车距离、油耗、侧风稳定性和碰撞安全等级。
四、识别性能的大比拼:混合方法的统治,以及令人意外的例外把所有实验结果摊开来看,最显眼的规律是:在掌静脉数据集上,多图混合类方法(MixUp、PuzzleMix、StarMixup)几乎包揽了准确率榜单的前列。以VERA220数据集为例,在ResNet18骨干上,不做任何增强的基线模型(Vanilla)Top-1准确率只有71.45%,而MixUp一下子把这个数字推到了95.27%,PuzzleMix更达到95.55%,等错误率也从5.20%分别降至0.91%和0.83%。在SCUT1100这个更大、更难的数据集上,MixUp的ResNet18更是把等错误率从0.30%压低到0.07%,同时把TAR@FAR=0.0001这个极严苛指标从97.30%提升到99.63%——这意味着在一万次验证中,误识的概率从原来就已经很低的3‰进一步压缩到了几乎可以忽略不计的水平。 然而,当视野转向手指静脉数据集时,局面发生了戏剧性的逆转。在SDUMLA-HMT数据集上,MixUp反而把ResNet18的准确率从84.51%的基线拖到了79.87%——低于不做任何增强的水平。而RICAP这个相对冷门的混合方法,却以98.66%的准确率傲视群雄。在另一个手指静脉数据集FV-USM上,RandAugment以93.90%的准确率力压群雄,而MixUp仅有86.75%。这说明,增强方法的效果高度依赖于数据集的特性:掌静脉图像与手指静脉图像在成像方式、分辨率、纹理复杂度等方面都存在差异,同一种方法并不能无差别地搬来搬去。 在单图增强阵营里,TrivialAugment和RandomQuant表现出了跨数据集的一致稳健性,在掌静脉和手指静脉两种场景下都名列前茅。研究团队推测,TrivialAugment无需任何调参、直接随机采样的机制,可能偶然地降低了模型对特定传感器噪声和微小光照变化的敏感性,使其具有更广泛的适应性;RandomQuant则通过量化处理把连续像素值离散化,可能帮助模型学会忽略传感器级别的细节差异,专注于更宏观的结构特征。 而几乎所有的几何变换类方法——翻转、旋转、平移——在几乎所有数据集和模型上都带来了不同程度的性能下降。这印证了前文的推断:静脉识别的身份信息就藏在空间拓扑结构里,随意扭曲图像就是在抹去这张"身份密码"。 五、性能亮眼的背后:那些被遮掩的"暗面"到这里,如果研究团队只是做到这一步,那最多算是一次规模较大的比较实验。真正让这项研究具有洞察价值的,是他们把评估扩展到了校准性、腐蚀鲁棒性、对抗攻击鲁棒性和遮挡鲁棒性这几个维度,而这些维度上的发现,彻底颠覆了"准确率高就是好方法"的朴素认知。
六、方法的"化学反应":组合比单独使用更有效研究团队还专门做了一系列"配方实验",探究不同类别的增强方法混合使用时会不会产生"1+1>2"的效果。结果显示,来自不同大类的方法组合使用时,几乎总能产生超越单独使用的效果。 在ResNet18结合VERA220的实验里: 相比之下,同一大类内的方法叠加收益要小得多。AutoAugment和MixUp同属不同大类,它们的组合效果远超各自单独使用;而两种策略驱动类方法的叠加,带来的提升则微乎其微。这说明不同类别的增强方法针对的是不同的问题:策略驱动方法改善了图像层面的多样性,混合方法优化了决策边界的平滑性,标签增强方法则调节了训练目标的校准性,三者相辅相成。 七、效率这把尺:哪些方法在"性价比"上脱颖而出在以MobileNetv2为基准、VERA220为数据集的效率分析中,大多数方法与基线模型共享完全相同的推理计算量(0.65 GFLOPs)和参数量,因此它们的额外开销主要体现在训练时间和显存上。
归根结底,这项研究讲的其实是一个关于"理想与现实"的故事。研究者们本以为,给人工智能更多样化的训练素材,它就能认识更多的静脉图案,结果确实如此——至少在"答对了多少题"这个维度上。但当你追问"答题时有多自信?""面对刁难时还能不能答对?""被遮住一半还能不能答对?",整个排行榜就重新洗牌了,原来的冠军可能变成末尾。 这意味着,在生物识别这个安全攸关的领域,用单一的准确率指标来评价一种增强方法,根本不够用。一套真正可靠的系统,需要同时在准确性、校准诚实度、对抗鲁棒性、腐蚀鲁棒性和遮挡鲁棒性上都达到可接受的水平,而目前还没有任何一种增强方法能够全面做到这一点。研究团队希望,AGVBench能成为一块标准"试金石",推动后续研究设计出能同时满足多维度要求的新型增强策略。目前,他们已将完整代码库开放在GitHub上(可通过"Advance-VeinTech-Innovators/AGVBench"找到),对这一领域感兴趣的研究者可直接获取完整实验代码、数据集配置和基线结果,无需从头复现。 Q&AQ1:AGVBench评估的是什么? A:AGVBench是一个专门针对静脉识别领域的数据增强方法评估平台,由重庆工商大学等机构联合开发。它系统评估了30种数据增强策略在五个公开静脉数据集(包括掌静脉和手指静脉)上的表现,测试维度涵盖识别准确率、等错误率、校准性、腐蚀鲁棒性、对抗攻击鲁棒性和遮挡鲁棒性共六个方面,目的是为研究者提供一个标准化、可复现的评测基准。 Q2:MixUp在静脉识别上效果好不好? A:MixUp在提升识别准确率和等错误率方面表现突出,尤其在掌静脉数据集上效果显著。但它同时也是校准性最差的方法之一,期望校准误差(ECE)可高达35%,并且对抗攻击鲁棒性极弱,在PGD攻击下准确率可跌至4.87%,远低于不做任何增强的基线。因此,MixUp适合对安全性要求不高的场景,但不适合作为高安全静脉识别系统的单一增强策略。 Q3:几何变换类增强方法(如旋转、翻转)适合用于静脉识别吗? A:总体来说不适合。AGVBench的实验结果显示,翻转、旋转、平移等几何变换在几乎所有数据集和模型架构上都导致了性能下降。原因是静脉识别的身份信息藏在血管的拓扑结构和相对位置关系中,随意的空间变换会破坏这些精细结构,让模型难以提取有效的身份特征,效果适得其反。 |

