大湾区大学团队解决人脸识别欺诈难题，为金融反诈装上火眼金睛

南方财经记者程浩 东莞报道

大到智慧城市建设，小到手机端应用登录，人脸识别作为人工智能的标志性技术，凭借便捷高效的特性，迅速渗透至金融支付、公共安防、政府服务、商业营销等各个领域，一度成为数字化转型的“标配”。

然而，在“刷脸取款”“刷脸支付”快速普及的同时，金融终端身份认证面临前所未有的安全挑战。人脸图像可被纸质照片、电子屏幕、3D 头模乃至 DeepFake 视频高保真还原，传统识别系统易被穿透全球因“人脸攻击”导致的金融欺诈案件呈高发态势，严重削弱了智能金融系统的可信基础。

针对目前市场上主流的人工智能伪造攻击，来自大湾区大学余梓彤教授团队利用大模型关键技术，通过智能图像采集成像技术，多态异构生物特征防伪鉴伪技术，研发更加智能化，通用化，高安全的人脸活体检测技术，进而研发出搭载算法模型的模组，形成电子化、智能化处理的软硬件系统，能秒速级识别出人脸活体，并给出相应分析报告，准确率99.9%以上。

余梓彤是大湾区大学长聘副教授，长期从事微视觉计算、多模态基础模型研究。余梓彤向南方财经记者介绍，最初人脸识别技术广泛应用在手机解锁、考勤打卡和安防等领域，应用场景相对单一。硕士毕业后，余梓彤曾在一家安防公司工作过一年时间，对人脸识别技术在安防产业一线应用有了深刻理解，并从中发现人脸识别技术在算法和模型架构上的不足和痛点。

在芬兰和新加坡求学期间，余梓彤团队提出中心差分卷积操作子的空域微弱信息增强算法，为提升模型对于高保真度人脸攻击及变化环境下的微弱伪造表征的鲁棒性提供了崭新的思路，并成功应用于人脸反欺诈领域。

在余梓彤看来，现今的人脸识别技术已成泛滥之势，个人隐私信息泄露、AI伪造攻击等带来的安全问题频发。而人脸活体检测已成为智能金融终端最核心、最具挑战的环节，更是守护国家金融安全的技术底座。

伴随我国智慧金融建设全面提速，银行业加速由传统网点向“自助柜员机(ATM)、远程视频柜员机(VTM)、智慧柜员机(STM)”等智能终端迁移。智能金融终端已成为国家金融基础设施的重要组成，直接决定金融服务普惠、便捷水平，更关乎国家金融与信息安全稳定，是防范系统性风险、确保交易可信的第一道关口。

“目前活体检测依托深度学习快速发展，但高安全级算法、跨人种鲁棒模型、生理信号级检测等关键环节仍由欧美主导，国内差距明显，存在高保真伪造样本识别困难、跨人种泛化能力不足、跨模态融合性能不佳及算法工程化部署等关键科学与技术问题。”余梓彤说。

余梓彤介绍，目前AI 换脸、3D 打印等技术使伪造人脸细节逼近真人，传统纹理、光流特征误检率高，难以达到金融级安全阈值。国内算法多基于单一肤色、场景训练，对深肤色及海外用户识别精度显著下降，制约国际化部署。现有方案主要依赖 RGB、红外、深度图像等外观单一视角线索，对非接触式生理视角线索利用率低，模型可解释性与复杂环境鲁棒性不足。反欺诈算法多停留在学术或软件层面，尚未形成自主知识产权、可量产的'金融级”一体化设备。

面对智能金融国际化、智慧化趋势，亟需突破上述瓶颈，构建自主可控、安全可信、跨区域可用的人脸反欺诈技术体系。

作为全国金融装备制造与人工智能创新高地，近五年来，广东正以人脸识别、反欺诈技术为引擎，迎来新一轮金融科技发展机遇。

聚焦“人脸反欺诈关键技术与高安全智能金融终端研制”，来自大湾区大学的余梓彤团队围绕时空微弱信号增强、多模态跨域自适应、生理信号级活体检测等方向开展系统攻关，致力于在复杂环境、跨人群条件下实现高精度活体检测与身份认证，打造国际领先、可出口的新一代智能反欺诈终端。

在活体检测领域，余梓彤教授团队基于生理信号的多视角协同感知活体检测技术项目进一步融合非接触式生理信号与外观特征，提出多视角协同感知反欺诈检测方法。该方法突破了传统活体检测依赖单一RGB模态、易受环境干扰的局限，显著提高了系统对复杂场景和高仿真攻击的检测能力与可解释性。通过多摄像头同步采集人脸动态信息，提取rPPG生理信号(如心率、血流节律、血氧变化等)，并结合微表情、眨眼频率等动态行为特征，实现从外观到生理层面的多层次活体判别。

“我们在2024年研发出类似3D云台的技术，提升了人脸抓取和交互便利性，目前我们的人脸反诈技术在国内处于领先地位，在可靠性和实时性方面表现出色，同时具备良好的用户交互性和国际适应性，可以解决跨人种、跨种族的难题。”余梓彤说。

事实上，余梓彤教授团队研发的智能金融反欺诈终端系统集成与产业化应用在算法研究基础上，构建了具备“算法一硬件一系统”全链路自主可控的人脸反欺诈智能金融终端通过软硬件协同优化，研发嵌入式AI加速模块，实现反欺诈算法的实时检测与边缘推理。智能金融反欺诈终端系统集成人脸识别、反欺诈检测、身份认证及加密通信等功能模块，形成可批量生产的金融级反欺诈智能终端。目前，该终端已在中国工商银行等核心金融机构部署运行，并在东南亚地区成功商用，具备广泛的行业适配性与国际化应用前景。

余梓彤介绍，通过多模态融合与跨域自适应技术创新，系统解决了智能金融领域人脸活体检测在复杂环境下的可信识别难题，实现了算法理论创新、工程化落地与产业化应用的有机统一。该项目经广东省图像图形学会组织科技鉴定，在多模态人脸反欺诈关键技术装备及产业化应用方面取得了创造性成果，形成自主知识产权，整体技术达到国际先进水平；其中面向人脸反欺诈的多视觉线索驱动的中心差分卷积模型、多模态跨域适配方法达到国际领先水平。

据了解，目前该项目相关装备产品通过广电运通集团各类金融机具应用推广，3年累计实现整机销售收入达18.14亿元，净利润7264.48万元，实现国内市场占有率第一、国际前三的市场规模。