视频监控系统云存储介绍ppt
合集下载
相关主题
- 1、下载文档前请自行甄别文档内容的完整性,平台不提供额外的编辑、内容补充、找答案等附加服务。
- 2、"仅部分预览"的文档,不可在线预览部分如存在完整性等问题,可反馈申请退款(可完整预览的文档不适用该条件!)。
- 3、如文档侵犯您的权益,请联系客服反馈,我们会尽快为您处理(人工客服工作时间:9:00-18:30)。
IP SAN存储设备 IP SAN存储设备 IP SAN存储设备
如何解决些难题?
① 海量数据存储,如何统一管理和统一调度 ② 大容量并发读写,设备性能成为瓶颈 ③ 设备故障须及时修复,维护成本激增 ④ 不同的应用系统间数据难以融合
云存储应运而生……
概念篇
只在此山中,云深不知处
什么叫做”云”?
使用者按需获取资源,无需关心资源在何处,如何构建。—— 就像从“云端”获取资源
大容量
高效率
高可用
大数据时代,现有存储系统面临的难题 以智慧城市的建设为例……
① 海量数据存储,如何统一管理和统一调度
数以万计的监控点,存储容量已经达到PB级别
除视频监控数据外,各类应用系统的数据也需进行融 合
白色小型车
车牌信息数据 库
红色上衣
沪FW6461
人员信息数据 库
逆行
闯红灯
红色小型车
人员聚集告警
④ 不同的应用系统间数据难以融合
各个应用系统,都建设独立的一套存储调度系统,可移植性和重复利用率较差。而且,不同的应用系 统需要各种类型的存储系统,NAS、IPSAN或集群NAS,难以融合。
卡口平台
图像资源数据库
监控平台
NAS存储设备 NAS存储设备 NAS存储设备
NAS集群存储设备 NAS集群存储设备 NAS集群存储设备
云存储
海量存储
Cloud Storage
高可用性
弹性伸缩 高性能
高可靠性 统一访问空间
难题的解决之道
① 海量数据存储,如何统一管理和统一调度
① 提供分布式文件系统,数据调度与存储分离
② 大容量并发读写,设备性能成为瓶颈
② 将单打独斗升级为团队作战
③ 设备故障须及时修复,维护成本激增
④ 不同的应用系统间数据难以融合
申请
调度
业务系统
1234
网
数据
络
控制节 点
控制节 点
控制节 点
同步
存储节点
1
存储节点
调度
存储节点
3
存储节点
云
存
储
系
备份
统
4
2
海量存储,弹性伸缩
相比传统的存储设备,云存储可支持的存储节点数以千计,支持的容量达百PB级别,并可弹性伸缩,无缝扩 展。
控制节点
控制节点
控制节点
存储节点
6
存储节点
1
5
7
4
8
2
业务系统1
业务系统2
业务系统3
业务系统4
控制节点 存储节点
存储节点
控制节点 存储节点
某台设备发生故障时,虽可以用负载均衡技术分 担给其它设备,但需要立即更换或修复故障设备, 否则存储于其中的数据无法读取。
存储设备
RAID 热备 硬盘 硬盘
硬盘 硬盘 硬盘 硬盘
硬盘 硬盘 硬盘 硬盘ቤተ መጻሕፍቲ ባይዱ
硬故盘障 硬盘 硬盘 硬盘
存储故设障备1 存储设备2 存储设备3
容量达到“PB”级别,维护就成为最大的难题
③ 由及时维护转变为定期维护 ④ 将各种数据融合,提供统一接口
架构篇
有形不累物,无迹却随风
云存储的系统架构
云存储的系统架构,分为“控制节点”和“存储节点”两个部分。
控制节点 存储节点
存储节点
控制节点
控制节点
存储节点
存储节点
控制节点采用集群架构, 存储元数据,对存储节点 进行调度 存储节点对数据进行分布 式存储,可进行复制或者 RAID备份
300路高清
存储设备
已经撑不住了
30000路高清
云存储
毫无压力
高可靠,系统业务不中断
云存储系统的控制节点采用集群架构,单点发生故障时,可无缝切换,系统业务不会中断。
备份节
点
控制节点
工作节 点
控制节点
备份节 点控制节点
统一访问入口,多用户并行访问
云存储可为多个业务系统同时提供服务,内部架构对其透明,提供统一的访问入口,利于数据共享与融合。
注:元数据(metadata),包括文件目录组织、属性维护、访问控 制信息、文件操作日志记录、文件到块的映射信息、块当前所在的
位置等。
云存储的工作流程
业息数控存务据制储系 经 节统 由 点向 网 与 间 的控 络 存 进 数制 , 储 行 据节 到 节 元 进点 达 点 数 行申 存 间 据 复请 储 同 制存 节 步 或储 点 调 备RA资 进 度 份ID源 行 与备, 分 存份控 布 储制 式 信节存息点储回复调度信
这是一个大数据的时代
大数据时代的4V特征
Veracity 真实准确
利用数据挖掘和分析得出真实准确的信息
Velocity 实时性
Variety 数据种类繁多
海量数据需要快速的处理和检索
有各类文本、图片、视频等数据, 而且非结构化数据越来越多
Volume 海量数据
从TB级别,增长到PB级别
大数据时代,对存储系统提供更高要求
黄色衬衫 移动警务
图像资源信息库
北纬31°.3′ 东 经 120°.6′
人脸抓拍图片
移动警务
行车轨迹
移动警务
智能分析抽离出的图片、文字、摘要视频等,数据种类多种多样。
② 大容量并发读写,设备性能成为瓶颈
在并发读写时,存储设备的性能瓶颈在控制器或CPU处理能力上。为提升并发处理能力,必须不断 的进行硬件升级。
存储节点
3
1
9
5
7
6
存储节点
6
8
4
2
9
3
增加存储节 点
,数据自减动少重存组储节 点
,数据自动恢复
存储节点
高并发读写性能,摆脱单台设备能力束缚
传统的存储设备并发读写性能,受到NAS机头、CPU或控制器的能力限制,而云存储系统采用控制与数据分 离的架构,脱离了单台设备的能力束缚,整个系统的性能主要受到网络吞吐能力的限制。
云
Cloud
什么叫做”云”?
像是拧开水龙头取水,打开开关获取电一样便捷,用户也可以方便的使用“云”资源。
什么是云存储?
用户按需使用存储资源,无需关心存储设备在何处,如何构建。在视频监控领域,云存储作为基础 资源,其“用户”为各类业务系统。
卡口平台
统一数据平台
图像资源数据库
智能应用系统 视频监控平台
单台最大并发处理能力
300路高清 200路高清 100路高清
存储设备 存储设备 存储设备
升级内存 升级CPU
③ 设备故障须及时修复,维护成本激增
某块硬盘发生故障时,例如RAID5,只允许设备 中有一块硬盘失效。而RAID恢复时间往往需要十 几个小时,期间再坏盘,就无法恢复了。因此, 需要立即更换或修复故障硬盘。
控制节点 存储节点
控制节点
万千兆交换网络
数据流不经过控制节点
存储节点
存储节点
存储节点
控制节点 存储节点
高并发读写性能,摆脱单台设备能力束缚
传统的存储设备并发读写性能,受到NAS机头、CPU或控制器的能力限制,而云存储系统采用控制与数据分 离的架构,脱离了单台设备的能力束缚,整个系统的性能主要受到网络吞吐能力的限制。