视频监控系统云存储介绍

③ 由及时维护转变为定期维护 ④ 将各种数据融合，提供统一接口
架构篇
有形不累物，无迹却随风
云存储的系统架构
云存储的系统架构，分为“控制节点”和“存储节点”两个部分。
控制节点 存储节点
存储节点
控制节点
控制节点
存储节点
存储节点
控制节点采用集群架构， 存储元数据，对存储节点 进行调度 存储节点对数据进行分布 式存储，可进行复制或者 RAID备份
维护人员仅需定期检查受损硬盘或节点，更换或修复即可。
一个月后…
安防监控迈入云存储时代
云存储
海量存储
Cloud Storage
高可用性
弹性伸缩 高性能
高可靠性 统一访问空间
难题的解决之道
① 海量数据存储，如何统一管理和统一调度
① 提供分布式文件系统，数据调度与存储分离
② 大容量并发读写，设备性能成为瓶颈
② 将单打独斗升级为团队作战
③ 设备故障须及时修复，维护成本激增
④ 不同的应用系统间数据难以融合
申请
调度
业务系统
1234
网
数据
络
控制节 点
控制节 点
控制节 点
同步
存储节点
1
存储节点
调度
存储节点
3
存储节点
云
存
储
系
备份
统
4
2
海量存储，弹性伸缩
相比传统的存储设备，云存储可支持的存储节点数以千计，支持的容量达百PB级别，并可弹性伸缩，无缝扩 展。
控制节点
控制节点
控制节点
存储节点
6
存储节点
1
5
7
4
8
2
黄色衬衫 移动警务
图像资源信息库
北纬31°.3′ 东 经 120°.6′
人脸抓拍图片
移动警务
行车轨迹
移动警务
智能分析抽离出的图片、文字、摘要视频等，数据种类多种多样。
Байду номын сангаас
② 大容量并发读写，设备性能成为瓶颈
在并发读写时，存储设备的性能瓶颈在控制器或ＣＰＵ处理能力上。为提升并发处理能力，必须不断 的进行硬件升级。
业务系统1
业务系统2
业务系统3
业务系统4
控制节点 存储节点
存储节点
控制节点 存储节点
存储节点
控制节点 存储节点
云存储的特点---高可用，由及时维护变为定期维护
云存储系统摆脱单台束缚，采用数据冗余存储机制，硬盘或存储节点损坏时，其余节点可自动重组，数据 不丢失，系统运行不受影响。
云存储的特点---高可用，由及时维护变为定期维护
某台设备发生故障时，虽可以用负载均衡技术分 担给其它设备，但需要立即更换或修复故障设备， 否则存储于其中的数据无法读取。
存储设备
RAID 热备 硬盘 硬盘
硬盘 硬盘 硬盘 硬盘
硬盘 硬盘 硬盘 硬盘
硬故盘障 硬盘 硬盘 硬盘
存储故设障备1 存储设备２ 存储设备３
容量达到“PB”级别，维护就成为最大的难题
云
Cloud
什么叫做”云”？
像是拧开水龙头取水，打开开关获取电一样便捷，用户也可以方便的使用“云”资源。
什么是云存储？
用户按需使用存储资源，无需关心存储设备在何处，如何构建。在视频监控领域，云存储作为基础 资源，其“用户”为各类业务系统。
卡口平台
统一数据平台
图像资源数据库
智能应用系统 视频监控平台
300路高清
存储设备
已经撑不住了
30000路高清
云存储
毫无压力
高可靠，系统业务不中断
云存储系统的控制节点采用集群架构，单点发生故障时，可无缝切换，系统业务不会中断。
备份节
点
控制节点
工作节 点
控制节点
备份节 点控制节点
统一访问入口，多用户并行访问
云存储可为多个业务系统同时提供服务，内部架构对其透明，提供统一的访问入口，利于数据共享与融合。
单台最大并发处理能力
300路高清 200路高清 100路高清
存储设备 存储设备 存储设备
升级内存 升级CPU
③ 设备故障须及时修复，维护成本激增
某块硬盘发生故障时，例如RAID５，只允许设备 中有一块硬盘失效。而RAID恢复时间往往需要十 几个小时，期间再坏盘，就无法恢复了。因此， 需要立即更换或修复故障硬盘。
控制节点 存储节点
控制节点
万千兆交换网络
数据流不经过控制节点
存储节点
存储节点
存储节点
控制节点 存储节点
高并发读写性能，摆脱单台设备能力束缚
传统的存储设备并发读写性能，受到NAS机头、CPU或控制器的能力限制，而云存储系统采用控制与数据分 离的架构，脱离了单台设备的能力束缚，整个系统的性能主要受到网络吞吐能力的限制。
注：元数据（metadata），包括文件目录组织、属性维护、访问控 制信息、文件操作日志记录、文件到块的映射信息、块当前所在的
位置等。
云存储的工作流程
业息数控存务据制储系 经 节统 由 点向 网 与 间 的控 络 存 进 数制 ， 储 行 据节 到 节 元 进点 达 点 数 行申 存 间 据 复请 储 同 制存 节 步 或储 点 调 备RA资 进 度 份ID源 行 与备， 分 存份控 布 储制 式 信节存息点储回复调度信
存储节点
3
1
9
5
7
6
存储节点
6
8
4
2
9
3
增加存储节 点
，数据自减动少重存组储节 点
，数据自动恢复
存储节点
高并发读写性能，摆脱单台设备能力束缚
传统的存储设备并发读写性能，受到NAS机头、CPU或控制器的能力限制，而云存储系统采用控制与数据分 离的架构，脱离了单台设备的能力束缚，整个系统的性能主要受到网络吞吐能力的限制。
IP SAN存储设备 IP SAN存储设备 IP SAN存储设备
如何解决些难题？
① 海量数据存储，如何统一管理和统一调度 ② 大容量并发读写，设备性能成为瓶颈 ③ 设备故障须及时修复，维护成本激增 ④ 不同的应用系统间数据难以融合
云存储应运而生……
概念篇
只在此山中，云深不知处
什么叫做”云”？
使用者按需获取资源，无需关心资源在何处，如何构建。—— 就像从“云端”获取资源
大容量
高效率
高可用
大数据时代,现有存储系统面临的难题 以智慧城市的建设为例……
① 海量数据存储，如何统一管理和统一调度
数以万计的监控点，存储容量已经达到PB级别
除视频监控数据外，各类应用系统的数据也需进行融 合
白色小型车
车牌信息数据 库
红色上衣
沪FW6461
人员信息数据 库
逆行
闯红灯
红色小型车
人员聚集告警
④ 不同的应用系统间数据难以融合
各个应用系统，都建设独立的一套存储调度系统，可移植性和重复利用率较差。而且，不同的应用系 统需要各种类型的存储系统，NAS、IPSAN或集群NAS，难以融合。
卡口平台
图像资源数据库
监控平台
NAS存储设备 NAS存储设备 NAS存储设备
NAS集群存储设备 NAS集群存储设备 NAS集群存储设备
这是一个大数据的时代
大数据时代的4V特征
Veracity 真实准确
利用数据挖掘和分析得出真实准确的信息
Velocity 实时性
Variety 数据种类繁多
海量数据需要快速的处理和检索
有各类文本、图片、视频等数据， 而且非结构化数据越来越多
Volume 海量数据
从TB级别，增长到PB级别
大数据时代，对存储系统提供更高要求