技术博客

LeoStor园区视频监控存储配置方案

龙骧网络 复制链接
摘要:LeoStor以其优异的、可期的大、小文件数据吞吐能力,恶劣硬盘和网络管理能力,单卷300PB,基于全局文件系统的、无需停机的、自有横向扩展透明扩容,超过传统的NAS over FC-SAN和Ceph架构存储,优异的并行文件读写性能,同时满足视频存储、智能分析和数据结构化使用,让系统的性价比更高。

总体需求

园区视频监控主要包括高校、软件园、工业园、创业园、大型物业、大型购物中心、大型写字楼、大型数据中心、街道、游乐场,以及边缘存储等场景,高清摄像头数量一般在100~500个,且有AI视频分析的需求。例如,某高校技改升级200个高清摄像头,高清摄像头为1080P分辨率,码流为6Mbps,保存3个月数据,需要做视频结构化AI分析,包括边界禁止和区域禁止、点名、带口罩、车辆区间测速等,存储需求如下:

分项 数据
码流 6Mbps
单摄像头/3个月 3.8TB
200摄像头/3个月 755TB

存储设计

视频监控以MB级视频文件为主,通过视频结构化AI分析软件,截取视频片段,并保存成海量KB级图片为辅的存储模式,考虑到视频业务的特点、存储服务器的故障率和最大化有效空间利用率,LeoRaid 2+M:M、4+M:M(M=1、2)等模式比较适合视频存储,本方案可根据实际情况使用LeoRaid 4+2:2或LeoRaid 2+2:2 冗余方案,当节点数量不满足冗余条件,自动从Server Raid转成Disk Raid。

基于成本的考虑,可以将元数据节点与存储节点融合部署,并可做“应用融合”,配置KVM虚拟机或Docker容器和GPU卡,部署视频录制、分析、推流、数据中台或态势监控等软件,基于KVM超融合的节点,每块硬盘可支持50+路摄像头,多节点共享同一个全局文件目录,全压力下,边录边写边删的性能延迟小于1秒(客户实测),满足业务需求。

冗余后容量:

  1. LeoRaid 4+2,最少配置3个节点,在3个节点的时候,仅支持Disk Raid,可利用率为66%,则裸容量(1)= 755TB ÷ 66% = 1,144TB ;
  2. LeoRaid 2+2,最少配置2个节点,在2个节点的时候,支持Server Raid,可故障1个节点;支持Disk Raid,同时故障2块硬盘,可利用率为50%,裸容量(2)= 755TB ÷ 55% = 1,510TB ;

与友商系统对比优势:

  1. Ceph系分布式:较之产品化程度更高,扩展体系架构清晰,融合部署更简单,硬盘利用率更高,持久性能可预测,数据恢复更快;
  2. 多机大容量NVR;较之对应用透明度更高,绝对的应用无关性,横向扩展更容易,较之板卡Raid模式,性能更好,可靠性更高,数据恢复更快;
  3. 超融合系统:较之系统稳定性更高,存储扩展更容易,硬盘利用率更高,交付成本更低;

MDS节点配置

OSS存储节点和MDS元数据节点可融合部署,以降低成本,建议每个元数据节点配置960GB的SSD硬盘。

分项 配置
节点数量 2个,融合部署
元数据盘 2 * 960GB 三星/Intel 企业级SATA SSD JBOD
网络 2 * 10GE

OSS节点配置

LeoRaid 4+2冗余方案,需至少3个节点,每个节点均需要有2块元数据盘。

单硬盘容量 硬盘数量 24盘位设备 36盘位设备
6TB 191 9 6
8TB 143 7 5
10TB 115 6 4
12TB 96 5 3
14TB 82 4 3
16TB 72 4 3

备注:绿色区域代表可选。

LeoRaid 2+2冗余方案,需至少2个节点,每个节点需要有2块元数据盘。

单硬盘容量 硬盘数量 24盘位设备 36盘位设备
6TB 252 12 8
8TB 189 9 6
10TB 151 7 5
12TB 126 6 4
14TB 108 5 4
16TB 95 5 3

备注:绿色区域代表可选。

  • 硬件配置

    1. 型        号:DF3600
    2. 设备形态:4U 3.5" 36盘位设备;
    3. 节点数量:2台 / 3台 ;
    4. 存储硬盘:34 * 16TB希捷企业级SATA机械盘 HBA;
    5. CPU: 1 * 银牌 CPU 或1*2620V4(应用融合配置2颗);
    6. 内存:64G内存(应用融合配置128G);
    7. 网络:2 * 10GE;
    8. 建议选择盛科、迈普、技腾万兆交换机。