Face++产品分析

1,产品和本文介绍

Face++是旷视推出面向开发者,以API或SDK形式,将计算机视觉技术开放给开发者。

2,Face++组织结构

face++由下至上软件能力分别为API的单个能力,SDK再到解决方案三层结构。

而API技术目前按业务维度分为“人脸识别”,“人体识别”,“文字识别”和“图像识别”四大类。

3,人脸识别

3.1人脸检测

人脸检测是检测图片中的人脸,并返回高精度的人脸坐标。


Face++产品分析_第1张图片

人脸检测是对人脸进行分析和处理的第一步。

能力的演示效果如下。


Face++产品分析_第2张图片

接口主要传参和返参的格式如下

传参主要信息:图片

返参主要信息:被检测出人脸数组,人脸数组信息主要包含人脸的标识,人脸矩形框的位置,人脸关键点坐标数组,人脸的特征数组(性别,年龄,是否佩戴眼镜,人脸姿势信息,人脸模糊状态,眼睛状态,情绪识别,人种识别等)。

人脸的特征数据就是人脸的结构化数据的一部分,其中的性别,年龄,和是否佩戴眼镜就可以用于实际的业务,例如广告机依据摄像机采集图片中的性别,年龄比例投放不同的广告。

应用场景:可以在零售业,机场和学校等场所基于人脸的人流量和出勤率统计。

3.2人脸对比


Face++产品分析_第3张图片

人脸对比是两业务上会依据输入的两张图片进行对比,输出置信度分数和相应的阈值,用来评估张人脸属于同一个人的可能性大小。


Face++产品分析_第4张图片

接口主要传参信息:对比图片与源图片。

接口主要返参信息:对比结果置信度与参考的置信度阈值。

当上传的图片含有多个头像时,系统会采用最大的头像做对比(业务设计)。

应用场景:主要应用于金融等行业,用于证件(例如身份证)和真人身份校验(通常会和活体校验一起做未身份校验)。

3.3人脸检索


Face++产品分析_第5张图片

人脸检索是针对一个新的人脸,在一个已有的人脸集合中搜索相似的人脸,搜索算法会返回一系列相似人脸,以及相应的置信度与阈值。

功能演示的效果如下


Face++产品分析_第6张图片

传参主要信息:搜索的图片,可以指定图片的搜索区域,加搜索标识。

返参主要信息:搜索结果数组(数据库中的人脸标识与对应的结果置信度),参考的置信度阈值。

人脸检索技术可以用在刷脸门禁和安防监控场景,把捕捉到的人脸和已有的数据库对比,核实身份。

3.4人脸关键点


Face++产品分析_第7张图片

人脸关键点能力是定位并返回人脸五官与轮廓的关键点坐标位置。关键点包括人脸轮廓,眼镜,眉毛,嘴唇以及鼻子轮廓。高精度的人脸关键点可以对人脸图像进行各类复杂的变化,例如人脸妆容,滤镜贴纸和3D动画等。


Face++产品分析_第8张图片

人脸关键点能力偏向娱乐化,3D人脸模型大致是下面的样子


Face++产品分析_第9张图片

3.5人脸属性

人脸属性可以获取到人脸的各种属性,包括年龄,性别,微笑程度,头部姿态,情绪,皮肤状态,人种等信息。


Face++产品分析_第10张图片

能力的演示如下图


Face++产品分析_第11张图片

人脸属性同样可以用于广告机精准投放场景。

3.6情绪识别

情绪检测是分析检测人脸情绪,并在返回该人脸在各类不同情绪上的置信度份数,用于推测人脸情绪。可以用于广告机的精准投放场景。

能力演示如下:


Face++产品分析_第12张图片

3.7颜值评分

颜值评估是用来评估该人脸的颜值份数,Face++是给出同一个人脸男性和女性的评估份数。演示效果如下(下图选中的是男性的图片):


Face++产品分析_第13张图片

可应用于美妆和婚恋交友场景。

3.8视线评估


Face++产品分析_第14张图片

视线评估是对图片中的人眼视线方向进行评估,计算并返回高精度的双眼眼球中心位置坐标,以及双眼视线方向向量,在视频中可以实现对人眼视线的实时追踪。

该能力主要应用于基于注意力分析的复杂任务,例如广告精准投放,在线教育学生状态分析等。

4,人体识别

4.1人体检测

人体检测主要是检测和定位图片中的人体,返回高精度的人体矩形坐标。

人体检测是人体进行分析和处理的第一步。所有检测出的人体都可以进一步进行人体属性分析,获取完整的人体信息。

功能演示如下图。


Face++产品分析_第15张图片

可用于公共场所的人群监控,零售场所的人流量统计,和视频中对人体进行追踪,根据人体移动速度和方向,调整摄像头对人进行追踪拍摄。

4.2人体抠像

识别出图像中人体的轮廓范围,与背景进行区分,并返回图片中每个像素是否在人体轮廓内的置信度。

人体抠像可用于照片合成,相片处理和娱乐特效场景。

功能演示的效果图如下


Face++产品分析_第16张图片

4.3人体属性

指获取人体上的衣物,人体本身性别,衣物上logo等能力,是人体图像方面的基础能力。


Face++产品分析_第17张图片

4.4手势识别

检测并返回图片或视频中所有手部矩形框位置,以及手势的含义。目前face++支持的手势有“OK”,“比心”,“胜利”等19种。

能力演示的效果如下图:


Face++产品分析_第18张图片

手势识别一旦识别的种类和精度达到一定的条件,可应用的业务场景及其广泛,猜想其重要程度等同于现在手机与手滑动,点击的互动。

5,文字识别

文字识别可以分为证件识别和OCR识别两大类。OCR文字识别技术可以用于资料结构化整理,内容审核与管理和单据识别应用场景。

6,图像识别

6.1场景与物体识别

检测图片中的场景与物体,返回检测出的场景与物体名称,以及相应的置信度。


Face++产品分析_第19张图片

可应用于图片分类场景。

你可能感兴趣的:(Face++产品分析)