RK3588+昇腾AI｜40TOPS算力AI盒子设计方案

1. 综合视频智能AI分析系统介绍

以计算机视觉技术为基础，AI赋能千行百业，依托人工智能视觉分析技术以及强大的“端+边”算力支撑，实时分析烟火，入侵等事件，同时结合云上预警业务平台，实现事件发现、预警、处置全流程闭环。

1. 1. 设计架构
      1. 系统架构

视频智能识别系统自下而上分为“感知层、网络层、支撑层、应用层”四层，系统逻辑架构如下图所示：

感知层

对接前端感知设备，如视频监控、NVR、和其他物联感知设备，对重要通道和场所进行实时监控分析，为场景的分析提供数据基础，采集数据的类型包含图片流和视频流两种。

网络层

网络层对接厂区主要局域网、视频专网等。

支撑层

支撑层为应用层的主要能力支撑，包括视频监控、智能算法仓库、其他物联感知数据及告警模型的建立，为未来更智慧化的业务应用和管理需要提供能力支撑。

应用层

应用层主要综合视频智能预警业务应用，包括并不限于视频监控、设备管理、事件中心及各类安全、消防隐患等应用。

1. 1. 1. 部署架构

以新建和现有摄像头进行数据采集，通过边缘端和云端接入视频流，对事件进行AI智能分析，并支持将结果传送到第三方平台用于数据展示，如下图是系统的组网架构图：

系统组成：

1. 利旧监控摄像机

利旧监控摄像机是指充分利用已建视频监控及视频存储等基础设施，做为视频AI分析的数据采集端。

1. 新建智能摄像机

新建智能摄像机是指对于新增、补充的监控盲点区域，直接采用具备AI分析能力的监控摄像机，主动识别、发现生产安全事件。

1. AI智能分析服务器

AI智能分析服务器同时具备两大基础能力，既对利旧监控摄像机的实时视频进行各类行为的检测分析识别，同时也接收和存储新建智能摄像机的识别出的告警事件；智能分析AI一体机高度集成了视频预览、AI算法模型以及综合视频智能AI分析业务系统。

综合视频智能AI分析业务系统主要通过将视频数据通过通用协议如rtsp协议等经过智能分析算法进行分析，将分析的结果进行综合展示以及其他业务功能，同时支持通过接口的方式将告警数据对接第三方业务系统。

=================RK3588+昇腾AI｜40TOPS算力盒子================

● 搭载四核A76+四核A55，CPU主频高达2.4GHz，可扩展2个昇腾AI加速模组，算力最高达40T

● 2路4K UI，能流畅运行复杂的图形处理

● 支持MindStudio,MindEdge,CANN计算架构等开发工具

●  支持Docker、ubuntu 22.04

● 可扩展4G/WIFI6/BT等无线通信模组

● 可扩展 mSATA SSD 固态硬盘

● 工作温度：-20℃ ~ 70℃

宽温边缘计算盒子，内置40T算力，最大满足80路1080p视频解码，支持8K@30fps HDMI输出，具有环境适应性强、超强计算性能、云边协同、大容量存储、配置灵活、支持宽温度范围、易于维护管理等特点，可以在边缘环境广泛部署。

项目	类型	型号参数	说明
核 心 配 置	处理器	CPU	Quad-core ARM [email protected] Quad-core ARM [email protected]
		GPU	四核 ARM Mali-G610 MP4
		NPU	6 TOPS@INT8
	内存	LPDDR4X	默认配置16 GB
	闪存	eMMC	默认配置64 GB
	编解码性能	视频解码	16 x 1080P@30fps H.264 AVC/MVC 32 x 1080P@30fps H.265/VP9/AVS2
		视频编码	16 x 1080P@30fps H.264/H.265
		图片编解码	支持高质量的 JPEG 编码
硬件特性	以太网口 ( Ethernet)	x1	以太网口，支持接入10/100/1000M网络
		x8	交换机网口，支持接入10/100/1000M网络
	SFP	x1	用于实现千兆位光电信号转换和数据传输
	RS232	x1	可接入烟雾探测器、红外探测器、门禁等，报警输入设备，或警铃等报警输出设备 (注：RS232 线缆长度建议不超过 10m)
	RS485	x2	可接入烟雾探测器、红外探测器、门禁等，报警输入设备，或警铃等报警输出设备
	HDMI OUT	x1	HDMI 2.1接口，可输出4k@120fps/8k@30fps视频源到显示终端，可兼容音频输出
	LINE IN/OUT	x1	1个音频输入接口，1个音频输出接口，3.5mm立体声接口
	USB3.0	x2	可接入 U 盘、USB 鼠标、USB 键盘等设备
	CAN	x1	标准CAN 2.0接口
	TF卡槽	x1	可接入TF卡扩展存储空间
	SIM卡槽	x1	用于无线网络连接
	ADB	x1	用于设备镜像文件烧写（Type-C）
	DBG	x1	用于设备有线调试（Type-C）
	供电接口	x1	DC 12V
可 扩 展 功 能	预留两个AI模组扩展接口 （双模组规格）	NPU	40 TOPS@INT8
		视频解码	80 x 1080P@30fps H.264/H.265 视频解码
		视频编码	40 x 1080P@30fps H.264/H.265 视频编码
	WiFi+BT	x1	WIFI6，双频2.4GHz和5GHz; 蓝牙 BT5.4; 需搭配可扩展外接天线的外壳以及天线。
	4G/5G	x1	可扩展4G/5G无线通信模组，需搭配天线使用
	mSATA	x1	可扩展mSATA 大容量固态硬盘
	SATA	x1	支持选配1个3.5英寸SATA硬盘
	SIM卡槽	x1	配合4G/5G 无线通信模块使用
Linux	文件系统	ext4	Ubuntu22.04 LTS
软 件 开 发	媒体处理	Gstreamer	兼容rkmpp插件，其中包括视频解码、视频编码、图片编码、图片解码、显示、RGA等接口插接
	计算架构	AI框架	支持 TensorFlow、Caffe、Pytorch、Tflite、ONNX、MindSpore等深度学习框架
		CANN	通过提供AscendCL编程接口（支持Python和C++语言），支持用户快速构建基于昇腾AI处理器的AI应用和业务。
基 础 模 块	网络设置	命令执行	支持静态、DHCP网络参数设置
	运行状态		CPU、内存、磁盘
	设备信息		硬件运行频率、设备结温
	日志管理		运行状态、运行报错等
	时间		NTP、手动校时
	升级管理	烧录升级	支持TF卡升级