人工智能视觉大脑：司眸双目视觉人体识别引擎

​

前言

市场研究机构 IDC 最新发布的《全球半年度 AI 系统支出指南》显示，亚太地区 2019 年在人工智能 (AI) 系统方面的支出预计将达到 55 亿美元，比 2018 年增长近 80 %。随着各行各业积极投资于利用 AI 软件功能的项目，预计 2022 年将增至 150.6 亿美元。亚太地区正迅速推动 AI 应用迅速增长，因为其数字生态系统非常适合这种新生技术发展。

此时此刻，AI 正在改变世界。

AI 时代，多元化的视觉识别技术带来了更多的人机交互新场景。人工智能领域初创公司人加智能依靠自身强大的从 RGBD 传感器、边缘计算到人体行为识别算法的全栈“三合一”研发实力， 重磅推出业内首款双目人体识别引擎——司眸。通过对人体进行特征提取，进而针对人的姿态和行为分析洞察，从而构建以人为中心的数字孪生，打造 AI 时代下的新体验。

当下，基于 3D 视觉的人体行为识别技术在各行各业均有应用。

比如3D 体感游戏机，使用人体分割和关键点定位技术获取人体 3D 姿态，通过对连续帧检测结果的分析实现对多人的动作行为识别，以此作为输入与屏幕中的虚拟世界进行互动。

安防中人体识别技术也扮演着重要的角色，如人体入侵检测、跨镜人体追踪等应用，已经逐步将安防监控摄像头升级为安防智能分析摄像头。

零售行业人体识别技术比较典型的一个代表是亚马逊打造的Amazon Go 无人店技术，实现了单店级封闭区域的全区域人体连续跟踪以及购物行为识别。通过运用 Just Walk Out 专利技术，自动甄别消费者是将商品放回货架上，还是取走，并通过 Amazon Go APP 上的虚拟购物车将信息发送给顾客，顾客取到所需要的商品后即刻就能够离开商店。随后，亚马逊会通过 Amazon Go APP 将购物清单发送给顾客，包括各种商品的价格和信息，并通过 APP 与顾客完成结算。

敲敲小黑板，做好小笔记，开启充电模式↓↓↓

人体识别指的是运用计算机技术在视频流或图像中对人体进行检测、属性描述以及行为识别，如我们熟知的人体检测与跟踪、人体关键点定位、人像分割、人体行为识别 ReID 技术、手势识别等。

视觉传感器，通常分为 2D 传感器和 3D 传感器。相对 2D 成像而言，3D 传感技术更适宜应用于 AI 诸多领域，比如智能安防、零售数字化门店或无人机场景等。3D 传感器通常由 2D 摄像头与深度传感器组成，通过视差或飞行时间等原理获取物体的深度信息，实现场景实时三维信息的采集，为后期的图像分析提供关键特征，并实现后续的智能交互。

毫无疑问，人体识别技术的应用前景可期，特别是在注重消费体验的零售行业。比如，在顾客进门的时候，将他的信息推送给店员实现精准推荐，这就需要门店能够实时定位顾客和洞察其需求。人加智能自主研发的「端到端」的双目人体识别引擎——司眸，可以实现对进店顾客行为的实时感知。运用基于零售场景优化过的行为识别算法，统计和分析消费者对商品的关注和交互（包含触碰、拿起和放回），从而实现消费者对商品的交互行为识别、消费者驻足分析以及消费者商品偏好洞察等自动化零售应用。

司眸双目人体识别引擎目前可以做到高精度和高实时性的人体识别和智能交互场景识别。想要做好这个功能，需要解决三大难题：

要实现精准检测，需要耗费高昂的计算资源。传统的方案，通常采用云端计算或本地机房部署服务器运算，前者实时性难以保障，后者成本高昂，皆不利于方案的批量复制。

在生活场景中，准确地检测并识别人体行为一直是计算机视觉领域中的一个热点和难点。当下的传感技术和通用的主流算法受场景光线、地面颜色、人群拥挤等因素影响，在非针对性大样本训练下，很难准确检测人体行为，遑论识别。

当下的人体识别往往是以人体或人脸为锚点，很难精细到人与商品交互的颗粒度。如何真实还原人在线下的行为，将每一个人的数字孪生还原，也是个亟待解决的问题。

通过多年的技术积累和丰富的场景落地经验，以上几项业界难题均已被人加智能公司攻克。目前，人加智能自主研发的 3D 视觉人体识别技术——司眸双目人体识别引擎，有效解决了 3D 传感和边缘计算加速在应用落地方面存在的技术瓶颈。

区别于传统的人体识别方案通常将摄像头传感器直接联网，使用云端计算或在本地部署性能强劲的服务器进行运算，人加司眸产品将 3D 感知和边缘计算深度整合，采用 SDK 内置双目人体识别算法的方式，直接输出结构化数据，最大程度上节省了底层运算成本。

此外，人加智能已推出商品级人货交互方案，实现了消费者与商品的实时交互行为检测和识别，支持顾客轨迹动线、销售转化漏斗和货架热力分析等模块。

在零售门店场景中（包括店内、店外），所处环境光线复杂，2D 视觉技术容易造成识别误差。人加智能自主研发的主动式双目立体视觉技术，扩充了在弱纹理区域（白墙、纯色对象等）、黑夜、弱光环境下的感知能力，相对于其他传感方式而言，对阳光等光线复杂的场景适应性更强。

创新的 AI 零售应用解决方案，开创前所未有零售新体验，背后离不开人加智能自主研发的 AI 技术——司眸双目人体识别引擎：

· 优化商品组合和货架陈列，提升商品组合购买率；

· 通过深度相机采集图像识别人体行为，助力门店防盗损；

· 结合智能 AI 互动屏，实现用户引流、商品推荐。

AI 技术需要不断迭代更新，人加智能基于自主研发的双目视觉传感器，结合 FPGA 异构型边缘计算终端，以及以人体识别为核心的视觉算法，打造的“三合一”全栈式技术产品，支持开发者基于司眸引擎，快速构建 AI 行业应用。司眸双目人体识别引擎技术，将人工智能系统的「感」和「知」融为一体，成为人工智能的视觉大脑，将每一位管理者的视野和思维延伸到每一个他渴望关注的角落，给管理者提供强大助力。

人加智能

人加智能机器人技术（北京）有限公司（www.humanplus.ai）是一家以智能视觉为核心的全栈式 AIoT 解决方案提供商，总部位于北京。自 2016 年成立以来，已获得多轮融资，成为中国成长速度最快的人工智能创业企业之一。

依靠自身强大的从 RGBD 传感器、边缘计算到人体行为识别算法的全栈“三合一”人工智能技术研发实力，构建起了“3D 视觉传感网络与边缘计算服务引擎系统”，帮助众多开发者可以快速构建适合各行各业独特需求与场景的 AIoT 应用，为智能零售、智慧安防、智能机器人等领域提供以嵌入式 AI 视觉为核心的解决方案，致力于成为企业管理者的“眼睛”和“大脑”，目前已服务阿里巴巴、京东、新天地集团、苏宁科技集团、便利蜂、网易严选、极飞科技、中国航天等重要客户。

往期新闻精选

人加智能：司眸️双目人体识别引擎构建零售新体验 -

业务合作

电话：010-81046658

邮箱：[email protected]