基于NOVATEK NT98530芯片是新一代的安防产品用的芯片, 传统的安防产品多用于监控领域, 如家用的防盗搜证, 老人及小孩的安全监视, 也用于警用交通的监控, 如路口的监视器, 应用于电脑的远端视讯会议等等, 各种应用巳深入生活之中, 新一代的产品加入了AI的功能, 更扩大了应用的层面, 如防盗可加入人脸辨识, 对于陌生人可发出警告, 老人或小孩跌倒意外, 可通知相关人; 火灾发生时, 可通知相关单位; 交通方面, 可做车牌辨识, 车速检测, 车流监控及ADAS应用. 商业方面, 可做人流的大数据分析, 分析年龄层对不同产品的喜好等等, 其它还有AIOT的应用, 如手势控制开关, 灯光照明等等, 愈来愈丰富.
NT98530整合了四颗ARM Cortex A53核心, 可以撷取8Mp60的影像, 拥有先进的AI能力, 运算模型为HW-CNN 2.5, 运算力为2T, 可分析人脸辨识. 影像有多种输入界面, 包含MIPI/LVDS/BT656/BT1120…等, 输出界面有YUV/RGB/BT656/LCD Parallel/MIPI-DSI/HDMI/USB及Ethernet. 另外还有Video codec and Audio codec.
影像Sensor是安防监控系统的重要组成元件, 好的Sensor决定了清淅度, 及色彩饱合度, 亮度调整及强光抑制, 因此也衍生出很多的相关技术, 如画素合并, WDR, HDR, 3A调整等等, SmartSens在Sensor领域巳深耕多年, 也有相当大的市占率及好评, 在安防监控领域, SmartSens强化科技于星光夜视, HDR, 近红外增益及影像低噪, 都得到很好的效果.
Novatek的IPCam处理器加上SmartSens的Sensor, 经优化调整后, 都得到很好的成果, 因此, 我们也在NT98530方案上, 整合了一系列的SmartSens Sensor, 如8M的SC850SL, 5M的SC530AI/SC5239, 2M的SC2336. 特别推荐的是今年主力产品SC850SL, 最大图像速率可逹8Mp60, 可用在车载录影机, 也可用在网路摄像机. 模组相片如下:
1. 硬件设计
1.1 MIPI-CSI sensor
1.2 Storage
1.3 LPDDR4
1.4 LCD
2. Linux 版本及软体架构
2.1 Linux 版本
Linux 4.19
2.2 软体架构
HDAL为硬体装置抽象层(Hardware Device Abstraction Layer),用来取代现存软体架构的HAL层,为Novatek所开发且适用旗下许多芯片,SDK以HDAL为主体,发展独立于不同芯片且共用的API接口,让芯片能更好地发挥效能。亦有提供许多自定义接口如ISP、AI、IQ等Vendor API,可供用户实现许多功能。
3. 影像显示设定步骤
3.1连接EVB和Notebook间的网路线,
3.2设定Ethernet IPv4的设定如下,
3.3开完机后, 在console写入下列命令
pq_video_rtsp 18 0 2 0 0 6
开机下这行指令,可以开启imx415+os02k10 sensor
3.4执行VLC.exe
3.5 (SC850SL)输入网路串流位置: rtsp://192.168.0.3/stream0
后可看到影像#
3.6 (SC2336)输入网路串流位置: rtsp://192.168.0.3/stream1
后可看到影像#
4. 可提供的文件列表
4.1 NT98530应用主板的电路图
4.2 使用的零件列表
4.3 NT98530应用主板的布线图(Layout file)
4.4 主板的零件位置图
4.5 主板的布线规范
4.6 NT98530设计的应用规范
4.7 NT98530的datasheet
4.8 SDK for NT98530
(1) 影像监控结合AI人脸辨识, 动作更加精确;
(2) 有高, 中, 低系列平台, 符合市场不同需求;
(3) Sensor+ISP的调校技术;
(4) 支持多种sensor输入界面, 包含MIPI-CSI/sub-LVDS /HiSPi/Parallel;
(5) 支持多种影像分辨率上至8Mp60;
(6) 支持多种影像输出界面, 包含LCD Parallel/MIPI_DSI/HDMI/USB/Ethernet;
(1) 芯片核心是Qual Cortex-A53;
(2) AI运算力是2T;
(3) 电源输入是12V/1A;
(4) 系统OS是Linux;
(5) 结合Video Codec and Audio Codec;
点击原文即可获取~