视频监控 | XDFS电信全球眼云存储扩容项目

分布式存储|北京大道云行科技有限公司
监控 & 存储

项目介绍

随着安防与互联网、物联网、云计算等技术融合，云架构将普遍应用于视频监控领域。以统一的平台服务于不同的机构，从而减少重复的ICT设施建设。监控云平台是解决视频共享最佳的模式，通过云来承载视频监控的图像信息大数据，具有平滑扩容、便于共享、便于处理、便于管控等优点，对视频数据应用升级提供基础保障。

“全球眼”网络视频监控业务，是由中国电信推出的一项完全基于宽带网的图像远程监控、传输、存储、管理的增值业务。该业务系统利用中国电信无处不达的宽带网络，将分散、独立的图像采集点进行联网，实现跨区域的统一监控、统一存储、统一管理、资源共享，为各行业的管理决策者提供一种全新、直观、扩大视觉和听觉范围的管理工具，提高其工作绩效。同时，通过二次应用开发，为各行业的资源再利用提供了手段。

项目需求

1.本期建设支持2000路4M码流1080P高清监控视频流并发写入的性能及保存30天数据的容量需求，并支持在线动态扩容

全球眼智能视频云承接的银行视频监控业务，全部高清摄像头IPC的视频流数据通过视频监控平台的流媒体/存储服务器将视频流数据转存到后端云存储；2000路4M码流1080P视频对存储的并发I/O带宽需求达1GB/秒，保存30天数据要求云存储的可用容量达2.4PB。且要求后端云存储便于在线动态扩容。

2. 满足中国电信全球眼分布式存储接口技术规范的要求

中国电信全球眼有明确的分布式存储接口技术规范，并要求每一款接入全球眼智能视频云后端的分布式存储产品完全满足并通过接口技术规范测试。

3. 完善的数据冗余保护机制，且需在冗余保护和单位存储容量成本之间取得平衡

客户的视频监控数据是其无形的数据资产，是用于解决问题的重要凭证，需要随时查找关键帧图片和回放对应视频。由于视频监控数据量巨大，因此需要在数据冗余保护和单位存储容量成本之间找到平衡点。

项目概述

根据华北某省电信全球眼智能视频云的需求，TaoCloud设计了20节点的分布式文件存储系统XDFS方案并获得了电信的认可和采纳；存储节点采用15台4U36盘位服务器（8TB盘满配）和5台2U12盘位服务器（8TB盘满配），在4+1的纠删码数据保护模式下，可为前端视频流数据提供2.56PB的可用存储容量及5GB/秒的并发I/O带宽，满足了该区域电信全球眼智能视频云本期的业务需求。XDFS分布式文件存储系统可随时按需在线扩容，满足全球眼业务拓展的发展需求。

在本次项目中，TaoCloud的XDFS分布式文件存储系统与中国电信的管理平台按接口技术规范完成了对接测试，使管理平台可通过API对TaoCloud的XDFS分布式文件存储系统进行管理和配置，满足了全球眼智能视频云用户的管理、使用要求。

在数据保护和存储利用率的选择上，选择了4+1的纠删码，可实现80%的存储容量利用率，在实现一定数据冗余能力的同时，尽可能地提升了存储容量利用率。

客户收益

1.海量存储空间，实时动态扩容

XDFS分布式文件存储系统采用分布式集群架构，实现大规模的存储集群和海量数据管理。通过集群在线扩展，用户可以方便的按需配置、随需扩展，XDFS分布式文件存储系统支持高达192PB的单文件系统容量。

2.超高的并发读写性能支持

XDFS分布式文件存储系统采用优化设计的高效分布式系统，有效利用多节点负载均衡和多链路聚合技术，跨存储单元的切片化并行写入，有效提升并发读写能力。

3.超高的可靠性与可用性

XDFS分布式文件存储系统采用全活多节点冗余设计，节点故障时可在数秒内实现故障、接管和智能回切。XDFS分布式文件存储系统的数据存储支持多副本或纠删码机制，可通过副本或数据校验块修复故障数据，保障存储服务不中断。

4.标准协议支持

XDFS分布式文件存储系统支持标准iSCSI和NAS访问协议，用户无需改变操作和管理习惯即可获得分布式存储的体验。

5.管理集成

通过Restful API的对接，中国电信的管理平台可以与分布式存储的管理平台无缝对接，实现统一的监控配置，日志报警信息监控。