智能安防

权威人脸测试FRVT最新结果:又一国内企业跻身C位

CPS中安网 2022-04-27

摘要 2022年3月18日,美国国家标准与技术研究院(NIST)公布了全球最权威的人脸识别算法测试Ongoing Face Recognition Vendor Test(FRVT)的最新排名。

    【CPS中安网 cps.com.cn】 2022年3月18日,美国国家标准与技术研究院(NIST)公布了全球最权威的人脸识别算法测试Ongoing Face Recognition Vendor Test(FRVT)的最新排名。瑞为技术在关键指标——Visa-Border(出入境照片比对签证照片)测试集项目中取得了FNMR=0.27%@FMR=0.000001的优异成绩,位列全球第5,国内第2。(原表格中商汤005、006号算法测试成绩分别第2、第1)

图片

图象(a)和图象(d)分别为签证照和边境照

FRVT主要评价指标(参考)

FRVT评价指标主要包括:FNMR (false non-match rate)和FMR (false match rate)。FNMR和FMR在FRVT报告中有严格公式说明,通俗解释则为:

目前主流的人脸识别技术基本上可以归结为三类,即:基于几何特征的方法、基于模板的方法和基于模型的方法:

基于几何特征的方法是最早、最传统的方法,通常需要和其他算法结合才能有比较好的效果;

基于模板的方法可以分为基于相关匹配的方法、特征脸方法、线性判别分析方法、奇异值分解方法、神经网络方法、动态连接匹配方法等;

基于模型的方法则有基于隐马尔柯夫模型,主动形状模型和主动外观模型的方法等。

FRVT的由来

FRVT被誉为全球规模最大、标准最严、竞争最激烈、最权威的人脸识别算法竞赛,有工业界黄金标准之称,对人脸识别算法的评估可达到百万分之一的精度。

起初,美国国防部的ARPA资助建立了一个对现有面像识别技术进行评测的程序,并分别于1994年8月、1995年3月和1996年9月(截至1997年3月)组织了三次面像识别和人脸确认的性能评测,尽管该测试只对美国研究机构开放,但它在事实上成为了该领域的公认测试标准,其测试结果已被认为反映了面像识别研究的最高学术水平。

为进一步测试商业面像识别系统的性能,并揭示2000年前后面像识别技术的最新进展,美国国防部于2000年5月和6月对美国的主要商业面像识别系统进行了评测,称为FRVT’2000(Face Recognition Vender Test)评测。

NIST已组织了多次针对人脸识别供应商系统的评测——FRVT(Face Recognition Vendor Test),至今已连续举办了FRVT2000、FRVT2002、FRVT2006、FRVT2010和FRVT2013等多届评测。这些评测一方面对知名的人脸识别系统的性能进行比较,另一方面全面总结了人脸识别技术发展的现状,并进一步指出了人脸识别算法亟待解决的若干问题。

历届FRVT及相关测试活动

FRVT比赛面向全球人脸算法供应商,接受算法提交,进行保密测试后在NIST官网上发布成绩和排名。比赛分为四个大项,分别为:

FRVT 四大测试类型

截至目前,全球已有近三百家公司和研究机构参与了此项测试,包括VisionLabs(俄罗斯)、Paravision(美国)、Vocord(俄罗斯)、商汤、旷视、依图、海康、大华、云从、腾讯等。

中国AI厂商力争C位

在2017年人工智能落地成熟应用之时,我国的AI公司开始积极进行人工智能与安防等多个行业的结合探索。并且,国内AI公司在拓展技术普及和场景落地的同时,也不断在底层技术、理论基础等方面进行提升,同时对FRVT测试发起冲击:

依图科技

依图科技在2018年10月提交的算法,获得了当年的竞赛冠军,并且是参赛团队中在千万分之一误报指标下,唯一将漏报率降到1%以下的团队 。

依图科技获得签证照比对第一

格灵深瞳

2019年7月,首次参与此竞赛的格灵深瞳取得了优异成绩:在最具挑战的“非约束性自然环境人脸照片”测试项目中获得全球第一名。

格灵深瞳在“非约束性自然环境人脸照片”

测试项目中获得全球第一名

商汤科技

2020年3月, NIST FRVT 1:N 2020公布了结果,商汤科技一举拿下了五项第一。

商汤科技获五项第一

云从科技

在2021年3月, 云从科技在人脸识别1:1、人脸识别1:N和口罩遮挡下的人脸识别三个赛道,获得两项冠军、一项亚军,展现强大核心技术实力。

云从科技在人脸识别1:N赛道获第一名

上海芯翌科技

同年3月,上海芯翌科技在“NIST-FRVT戴口罩人脸识别评测”获得世界第一,并在“FRVT 1:1人脸识别评测”中获得世界前三。

上海芯翌科技在FRVT戴口罩

人脸识别评测获得世界第一

其实,在2018年官方公布的报告中,中国人工智能公司实力就已经得以展现,依图科技(yitu)、商汤科技(sensetime)、旷视科技(megvii)囊括了前十中的五席,加上排名第五的中国科学院深圳先进技术研究院(siat),中国团队已经超过半数,并稳稳“霸屏”前五,领跑全球人脸识别算法。

目前人工智能技术的火热发展,离不开AI厂商在技术和理论上的积极探索和实践,作为基础设施的深度学习组件、框架越来越多的开源便是其标志。诸多的框架相继开源,一方面印证了国内技术厂商、院校对于基础性研究增加;另一方面,也显示出国内厂商在人工智能发展和应用过程中对于底层基础设施的重视程度的提高。越来越头部企业对于技术和理论上的积极探索和实践以及进行框架的开源,将带动整个行业对底层技术的关注和投入,从而更好地推动人工智能技术地发展与升级。

责任编辑:lxy