AI人工智能 | 人工智能机器人【中国人工智能网】

滚动新闻

动态|最权威的角逐,看全球人脸识别技能成长名堂

时间:2017-07-17 22:28来源:网络整理 作者:AI人工智能

AI 科技评论按:在最近发布的国际权威人脸识别供给商测试 FRVT(Face Recognition Vendor Test)功效中,中国公司依图科技得到了四项测试的第一名,高出了俄罗斯公司 Vocord (Vocord是国际老牌安防厂商,持久以来逾越Google等公司盘踞人脸识别算法第一名)。

FRVT是由美国国度尺度技能局NIST(National Institute of Standards and Technology)组织的人脸识别供给商测试,作为美国国度采购的官方指导,其测试的权威性是全球家产界实际应用的黄金尺度。

FRVT的人脸识别测试荟萃来自美国疆域安详局的真实业务场景,譬喻进出境、刑侦进程中收集的大量照片。与时下热门的由学术机构举行的LFW、MegaFace测试对比, FRVT更贴近实战,测试局限更大,不只拥有百万量级测试数据,同时这些测试数据均不果真,有效制止算法过拟合甚至是作弊手段。


主办方场景漫衍 测试集巨细测试、练习数据 独立性指标
LFW美国马萨诸塞大学互联网明星 照 

易过拟合
测试数据果真; 练习、测试数据独立性不担保千分之一误报下的识别机能,无法区分差异算法性 能差别
Mega Face美国华盛顿大学互联网明星 照 百万测试数据果真; 练习、测试数据独立性无法担保百万量级测试集上的首位掷中率;可以区分差异算法机能差别
FRV人脸识别供给商测试美国国度尺度技能局 (NIST)美国官方真实边检、刑侦用数据百万测试数据不果真(盲测)千万分之一误报下的机能(取样百亿对样本),最大的测试局限 

表一:主流的人脸识别测试场景、测试集、指标较量


依图科技Vocord腾讯优图大华百度Face++商汤
FRVT

95.5%

第一名

93.5%

第二名





Mega Face

91.7%

第一名 

83.3%

第二名




LFW

99.8%

第二名 

99.78%

第四名

99.77%

第七名
99.5%99.53%

表二: 在三个测试集上代表厂商后果较量。安防厂商海康威视未宣布果真测试后果。

LFW是由美国马萨诸塞大学宣布并维护的果真人脸数据集,测试数据局限为万,海内多个团队譬喻百度、腾讯、大华、旷视、商汤都曾得到了99.5%以上的后果。

MegaFace是由美国华盛顿大学宣布并维护的果真人脸数据集,测试局限比LFW大100倍,更能区分各个算法的机能差别。第一名是创建于1999年的老牌俄罗斯公司Vocord,得到91.7%的后果,比第二名腾讯优图跨越8%,优势明明。由此可见,固然海内大互联网公司拥有超大局限计较算法练习平台、互联网级的数据优势,但离全球顶级的测试功效尚有差距。

在顶级的竞争中,数据和计较的优势并不能担保输出最优秀的算法机能

由美国国度尺度技能局(NIST)主持的FRVT,除了主持机构的权威性外,测试功效的权威性还来自其评测的严谨和全面性:

1、数据均来自真实业务场景,测试功效好则代表该技能可以在实疆场景中直策应用。

2、数据局限是通过对百亿对样本采样,到达百万量级。如此大局限的测试集可以不变评估算法机能,具体区分差异算法的黑白。

3、测试数据不果真(盲测),这担保了测试的合理性。因为参赛的算法团队无法操作测试数据做模子练习,可以有效制止过拟合或直接作弊等手段,因此相对付LFW、MegaFace而言,FRVT则更能浮现测试的合理性。

4、科学专业性,FRVT对差异实疆场景、人种、年数、性别,做了具体解析下的识别机能较量,并在模子速度、特征库巨细、比对阈值等做了具体评估。

据官方最新宣布的陈诉,FRVT 的第一名是中国公司依图科技,在千万分之一误报下(采样百亿对样本)的精确率为 95.5%,比第二名俄罗斯公司Vocord 93.5%的精确率跨越 2%。这是今朝为止全球果真的、最大局限测试集、最权威测试指标下的最好后果,比2014年参加同样测试的第一名日本公司NEC在精确率上有大幅提高。

NIST针对测试作了差异场景、差异人种、差异性别、差异年数的识别机能较量。从 FRVT 的官方描写来看,其提供的测试数据对应了进出境打点、身份门禁认证、平安都市监控等实战应用场景,依图在四项主要的测试场景中均得到第一名。

在更具体的人种(黑人、白人、亚洲人等)、性别较量中,依图的算法表示险些没有差别;而其他算法跟着识别难度增加,识别率呈现了差异水平的较大低落。比拟功效说明依图的算法可以在差异范例数据漫衍的实用场景中,譬喻黑人较多的场景下,算法也可有不变表示。

详细陈诉来历于Ongoing FRVT 2017.6.19 陈诉 (链接地点:https://www.nist.gov/sites/default/files/documents/2017/06/20/frvt_report_2017_06_19.pdf)

智能万倍增长

已往四年,从LFW到FRVT,测试指标已经从千分之一误报到千万分之一误报,识别机能已经提高一万倍,意味着误报低落万倍。可以预见,很快就会呈现测试指标在亿分之一、十亿分之一、百亿分之一误报下的识别机能较量,这将是另一个千倍的智能识别本领的增长。

可以想象,在十亿级超大局限比对、十亿分之一超低误报下的高识别机能,意味着智能技能将解锁更多的应用场景,从楼宇修建到都市量级,甚至多城联动,再到全国范畴内的人脸比对、安防布控都将成为大概。

我们就此事出格采访了依图科技CEO朱珑,朱珑说:“NIST是家产界最权威的测试,有最直接的应用指导代价。从测试的功效来说,有两个意义: 我们可以安静的接管,来自中国的算法技能高出全球的竞争敌手;更大的意义在于,把握尺度拟定话语权和实际全球影响力的美国国度尺度技能局,已经显得‘没见过世面’,千万分之一的误报下的识别率并不能拉开我们和第二名的差距,我们的算法已经在 10 亿分之一的误报下到达高出90%的识别率。但愿未来,国际主流学术机构能接管,只有中国参加的尺度测试,才反应全球最前沿的技能领略。”

动态|最权威的竞赛,看全球人脸识别技术生长花样

    标签: