存储复制技术与容灾中应用 刘启军
合集下载
相关主题
- 1、下载文档前请自行甄别文档内容的完整性，平台不提供额外的编辑、内容补充、找答案等附加服务。
- 2、"仅部分预览"的文档,不可在线预览部分如存在完整性等问题,可反馈申请退款(可完整预览的文档不适用该条件!)。
- 3、如文档侵犯您的权益，请联系客服反馈,我们会尽快为您处理(人工客服工作时间：9:00-18:30)。
Secondary logical Volume
容灾中心
4.
5.
I/O响应时间惩罚；
距离限制，距离越长，时 延越大，理论极限值
1 - Write to primary logical disk 2 - Write to secondary logical disk 3 - Write complete on secondary logical disk 4 - I/O Completion
1.架构稳定性中 2.资源消耗小 3.日常运维管理方便 4.可扩展性强
@2014
18
复制技术容灾中应用
生产中心 同城灾备中心 异地容灾中心
异步数据复制
点对点容灾
A
B
可用于 灾难恢复
实时同步 A B
快照
C1
批量数据异步复制 快照 可用于 C 灾难恢复
3DC多级跳容灾
B1
3DC 级联容灾
实时同步 A B 远程异步 C
BC Tier 7 – 服务器或者存储复制，且端到端的服务器自动恢复
成 本 价 值
BC Tier 6 – 实时的持续数据复制，服务器或者存储 BC Tier 5 – 应用/数据库级的复制和集成 BC Tier 4 – 快照复制， 用于备份/恢复 BC Tier 3 – 磁带库，电子Vaulting BC Tier 2 – 热备站点，磁带恢复 BC Tier 1 – 磁带恢复
实施 Implement
• 方案实现 • 预案开发
启动 Activate
• 验证 • 演练 • 执行
维持 Sustain
• 维护 • 改善 • 培训
目标、范围 及路线图
@2014
场景、策略 及解决方案
系统建立、 流程确立
系统可用、 预案可行
有效性保持、 审核评估
5
影响业务连续性关键指标
指标1：RTO（Recovery Time Objective）： 反映的是业务恢复及时性指标，从业务发生灾难到复恢 所需的全部时间。 指标2：RPO （Recovery Point Objective）： 反映的是数据恢复完成整性的指标。在业务发生灾备后 数据可恢复的点，损失那部份就是RPO。
存储复制技术与容灾中应用 存储前沿趋势开讲啦
2014年11月20日
@2014
1
目 录
一、引言
二、存储复制技术 三、存储复制在容灾中的应用
@2014
2
业务连续性历程
@2014
3
业务连续性管理BCM的驱动力
发布国家标准《信息系统灾 难恢复规范》（GB/T 20988—2007） 国家监管要求
企业提高核心 竞争力要求
近距离同步复制技术
1. 基于存储的远程数据复制 技术；
Primary Host 100公 里
Optional secondary Host
2.
同步方式，远程拷贝实时
4
1 2 3 Synchronous
镜像，数据完整、一致； 3. 快速的数据恢复，没有数 据丢失；
生产中心
Primary logical Volume
企业上市监管 要求
企业投资人要 求
用户要求
业务连续规划管理 （Business Continuity Management）
@2014 4
业务连续性管理BCM方法论
项目开始 方案设计 实施开发 验证 运行
评估 Evaluate
• 差异分析 • 风险评估 • 影响分析
构架 Architect
• 策略分析 • 方案设计
链路稳定性：
要求光纤链路数据传输稳定
同城灾备距离要求与链路延时要求
需存储厂商测试后确定
@2014 14
目 录
一、引言
二、存储复制技术 三、存储复制在容灾中的应用
@2014
15
数据容灾级别BC Tier
提示: 在级别6和7, 网络成本将 >50% 的3年TCO总体拥有成本.
从磁盘恢复 从磁带拷贝恢复
2. 3.
“实时”异步方式数据镜像保 护； 采用Bitmap判断源数据卷的变 化；
镜像 数据
数据镜像保护
4. 双重数据保护＝数据镜像＋磁
盘RAID保护；
5. 可定义不同镜像数据的使用策 略。
– 数据副本
原始 数据
镜像 数据
数据查询
– 历史数据查询统计
镜像 数据
数据恢复
– 日常数据备份恢复
@2014 10
存储层复制技术
通过存储间的同步/异步的方式 将数据复制到同城/异地中心。
存储虚拟化复制技术
先将生产端的存储环境虚拟化 ，通过虚拟化设备间的同步/异 步的方式将数据复制到同城/异 地中心。 IBM SVC，HP XP20000，EMC VPLEX，HDS USPV，FalconStor NSS&CDP 1：生产与容灾需要配置同品牌 同系列的虚拟化存储产品 2：监听生产端虚拟化存储环境 的I/O的数据变化并传输至灾备 中心 3：基于主、备间的FC或TCP/IP 通道完成数据传输 1：能复制外置存储阵列上所有 数据 2：易于管理 3：数据复制由存储保障，稳定 性和可靠性高 4：扩展容易 5：不占用生产系统资源 6：与存储平台无关
可用于 灾难恢复
实时同步
B
3DC 并联容灾 @2014
A
远程异步
C
可用于 19 灾难恢复
HDS案例
NAS DB Server AP Server B/R Master Server
亦庄 生产中心
东单同城容灾、 生产中心
DB Server
AP Server
B/R Media Server
NAS
FC MDS 9509 FC/IP
亦庄到东单的同步复制链路
FC/IP
亦庄到广州的异步复制链路
东单到广州的备用异步复制链路
@2014
磁带库
DB Server
AP Server
B/R Media Server
HDS USP 3来自百度文库TB
广州生产、容 灾 数据中心 20
IBM案例
@2014
21
谢谢！
@2014
22
RPO: Recovery Point Objective Weeks Days Disaster RTO: Recovery Time Objective Hours Days Weeks
Hours Minutes
Minutes
@2014
6
影响业务连续性的技术
交易双 由应用实现两中心双写技术。 写技术 数据库 技术
@2014
13
存储复制指标
存储品牌
RTO
同步
RPO NRO RTO
异步
RPO
备注
NRO RPO：主要指当发生灾难或紧急事件
时，业务系统所能容忍的数据丢失
量；
RTO：主要指当发生灾难或紧急事件
时，业务系统所能容忍的停止服务
的最长时间；
0 0-30
NRO：网络恢复目标
链路延时要求：
同城灾备光纤链路延时<5毫秒；
7
存储复制技术
@2014
目 录
一、引言
二、存储复制技术 三、存储复制在容灾中的应用
@2014
8
存储复制技术
为满足企业数据及业务连续的保护， 存储厂商提供了多种解决方案：
本地数据镜像复制技术 近距离同步复制技术 远程异步复制技术
@2014
9
本地数据镜像复制技术
1. 基于存储系统的高速复制技术；
12
常见容灾技术对比
比较项目
复制原理
数据库复制技术
对数据库的日志进行采集和分析 ，通过IP协议把变化的数据传送 到灾备中心的数据库上进行重现 IBM HADR，Oracle GoldenGate ，Oracle DataGuard，DSG
操作系统复制技术
在所有需要实时复制的服务器 上安装数据复制软件，通过IP 协议将数据复制到同城和异地 中心。 IBM SoftTek，Veritas VVR
1：生产与容灾需要配置同品牌 同系列的高级存储 2：监听生产端存储环境的I/O 的数据变化并传输至灾备中心 3：基于主、备间的FC或TCP/IP 通道完成数据传输
1：对带宽需求少 2：与底层存储平台无关 3：切换速度快
特 点
优 点
1：能复制外置存储阵列上所有 数据 2：易于管理 3：数据复制由存储保障，稳定 性和可靠性高 4：扩展容易 5：不占用生产系统资源
复制技术
IBM PPRC，EMC SRDF，HP CA， HDS TrueCopy
概要特点
1：生产与容灾需配置同品牌的 数据库远程复制管理软件 2：基于主、备间的TCP/IP通道 完成数据传输 3：通过生产端Redo Log俘获数 据变化并传输至灾备中心重现
1：生产与容灾需配置同品牌的 系统远程复制管理软件 2：通过生产端操作系统上俘获 数据变化并传输至灾备中心 3：基于主、备间的TCP/IP通道 完成数据传输 4：适用于系统级的数据复制 1：与存储平台无关，但对操作 系统不透明 2：能复制OS上所有数据
如DB2 puerScale HADR， ORACLE GoldenGate。
操作系统层技 术
CDP技术/SAN技术
如 IBM的POWERHA GLVM，
Veritas VVR
如CDP快照，I/O录相功能 等，存储虚拟化。 如IBM Metro/Global mirror， EMC SRDF，HDS TC
@2014
100km。
11
远距离异步复制技术
本地主机 远端主机
2
1
3
IP
4
ATM T1/T3 E1/E3 OC3
1 3
@2014
本地 接收本地主机一个写I/O
2
远端 通知主机IO完成
远程磁盘阵列读取缓存 4 远程磁盘阵列确认 或JNL卷的I/O 使用 SMS 时间标记和consistency group 来保证数据完整性
Cisco 15540 DWDM 4 个波段
Cisco 15540 MDS 9509 FC/IP Cisco 7600 Cisco 7600
虚拟磁带库
异步容灾主传输链 路 34Mbps
Cisco 7600
异步容灾备用传输 链路34Mbps
NAS Blade
HDS USP31TB
HDS USP 44TB
15 Min. 1-4 Hr.. 4 -8 Hr.. 8-12 Hr.. 12-16 Hr.. 24 Hr.. Days
16
@2014
/ 恢复时间目标
16
两地三中心数据复制设计并联模式
1.架构稳定性高 2.资源消耗小 3.日常运维管理简单 4.可扩展性强
@2014
17
两地三中心数据复制设计级联模式
容灾中心
4.
5.
I/O响应时间惩罚；
距离限制，距离越长，时 延越大，理论极限值
1 - Write to primary logical disk 2 - Write to secondary logical disk 3 - Write complete on secondary logical disk 4 - I/O Completion
1.架构稳定性中 2.资源消耗小 3.日常运维管理方便 4.可扩展性强
@2014
18
复制技术容灾中应用
生产中心 同城灾备中心 异地容灾中心
异步数据复制
点对点容灾
A
B
可用于 灾难恢复
实时同步 A B
快照
C1
批量数据异步复制 快照 可用于 C 灾难恢复
3DC多级跳容灾
B1
3DC 级联容灾
实时同步 A B 远程异步 C
BC Tier 7 – 服务器或者存储复制，且端到端的服务器自动恢复
成 本 价 值
BC Tier 6 – 实时的持续数据复制，服务器或者存储 BC Tier 5 – 应用/数据库级的复制和集成 BC Tier 4 – 快照复制， 用于备份/恢复 BC Tier 3 – 磁带库，电子Vaulting BC Tier 2 – 热备站点，磁带恢复 BC Tier 1 – 磁带恢复
实施 Implement
• 方案实现 • 预案开发
启动 Activate
• 验证 • 演练 • 执行
维持 Sustain
• 维护 • 改善 • 培训
目标、范围 及路线图
@2014
场景、策略 及解决方案
系统建立、 流程确立
系统可用、 预案可行
有效性保持、 审核评估
5
影响业务连续性关键指标
指标1：RTO（Recovery Time Objective）： 反映的是业务恢复及时性指标，从业务发生灾难到复恢 所需的全部时间。 指标2：RPO （Recovery Point Objective）： 反映的是数据恢复完成整性的指标。在业务发生灾备后 数据可恢复的点，损失那部份就是RPO。
存储复制技术与容灾中应用 存储前沿趋势开讲啦
2014年11月20日
@2014
1
目 录
一、引言
二、存储复制技术 三、存储复制在容灾中的应用
@2014
2
业务连续性历程
@2014
3
业务连续性管理BCM的驱动力
发布国家标准《信息系统灾 难恢复规范》（GB/T 20988—2007） 国家监管要求
企业提高核心 竞争力要求
近距离同步复制技术
1. 基于存储的远程数据复制 技术；
Primary Host 100公 里
Optional secondary Host
2.
同步方式，远程拷贝实时
4
1 2 3 Synchronous
镜像，数据完整、一致； 3. 快速的数据恢复，没有数 据丢失；
生产中心
Primary logical Volume
企业上市监管 要求
企业投资人要 求
用户要求
业务连续规划管理 （Business Continuity Management）
@2014 4
业务连续性管理BCM方法论
项目开始 方案设计 实施开发 验证 运行
评估 Evaluate
• 差异分析 • 风险评估 • 影响分析
构架 Architect
• 策略分析 • 方案设计
链路稳定性：
要求光纤链路数据传输稳定
同城灾备距离要求与链路延时要求
需存储厂商测试后确定
@2014 14
目 录
一、引言
二、存储复制技术 三、存储复制在容灾中的应用
@2014
15
数据容灾级别BC Tier
提示: 在级别6和7, 网络成本将 >50% 的3年TCO总体拥有成本.
从磁盘恢复 从磁带拷贝恢复
2. 3.
“实时”异步方式数据镜像保 护； 采用Bitmap判断源数据卷的变 化；
镜像 数据
数据镜像保护
4. 双重数据保护＝数据镜像＋磁
盘RAID保护；
5. 可定义不同镜像数据的使用策 略。
– 数据副本
原始 数据
镜像 数据
数据查询
– 历史数据查询统计
镜像 数据
数据恢复
– 日常数据备份恢复
@2014 10
存储层复制技术
通过存储间的同步/异步的方式 将数据复制到同城/异地中心。
存储虚拟化复制技术
先将生产端的存储环境虚拟化 ，通过虚拟化设备间的同步/异 步的方式将数据复制到同城/异 地中心。 IBM SVC，HP XP20000，EMC VPLEX，HDS USPV，FalconStor NSS&CDP 1：生产与容灾需要配置同品牌 同系列的虚拟化存储产品 2：监听生产端虚拟化存储环境 的I/O的数据变化并传输至灾备 中心 3：基于主、备间的FC或TCP/IP 通道完成数据传输 1：能复制外置存储阵列上所有 数据 2：易于管理 3：数据复制由存储保障，稳定 性和可靠性高 4：扩展容易 5：不占用生产系统资源 6：与存储平台无关
可用于 灾难恢复
实时同步
B
3DC 并联容灾 @2014
A
远程异步
C
可用于 19 灾难恢复
HDS案例
NAS DB Server AP Server B/R Master Server
亦庄 生产中心
东单同城容灾、 生产中心
DB Server
AP Server
B/R Media Server
NAS
FC MDS 9509 FC/IP
亦庄到东单的同步复制链路
FC/IP
亦庄到广州的异步复制链路
东单到广州的备用异步复制链路
@2014
磁带库
DB Server
AP Server
B/R Media Server
HDS USP 3来自百度文库TB
广州生产、容 灾 数据中心 20
IBM案例
@2014
21
谢谢！
@2014
22
RPO: Recovery Point Objective Weeks Days Disaster RTO: Recovery Time Objective Hours Days Weeks
Hours Minutes
Minutes
@2014
6
影响业务连续性的技术
交易双 由应用实现两中心双写技术。 写技术 数据库 技术
@2014
13
存储复制指标
存储品牌
RTO
同步
RPO NRO RTO
异步
RPO
备注
NRO RPO：主要指当发生灾难或紧急事件
时，业务系统所能容忍的数据丢失
量；
RTO：主要指当发生灾难或紧急事件
时，业务系统所能容忍的停止服务
的最长时间；
0 0-30
NRO：网络恢复目标
链路延时要求：
同城灾备光纤链路延时<5毫秒；
7
存储复制技术
@2014
目 录
一、引言
二、存储复制技术 三、存储复制在容灾中的应用
@2014
8
存储复制技术
为满足企业数据及业务连续的保护， 存储厂商提供了多种解决方案：
本地数据镜像复制技术 近距离同步复制技术 远程异步复制技术
@2014
9
本地数据镜像复制技术
1. 基于存储系统的高速复制技术；
12
常见容灾技术对比
比较项目
复制原理
数据库复制技术
对数据库的日志进行采集和分析 ，通过IP协议把变化的数据传送 到灾备中心的数据库上进行重现 IBM HADR，Oracle GoldenGate ，Oracle DataGuard，DSG
操作系统复制技术
在所有需要实时复制的服务器 上安装数据复制软件，通过IP 协议将数据复制到同城和异地 中心。 IBM SoftTek，Veritas VVR
1：生产与容灾需要配置同品牌 同系列的高级存储 2：监听生产端存储环境的I/O 的数据变化并传输至灾备中心 3：基于主、备间的FC或TCP/IP 通道完成数据传输
1：对带宽需求少 2：与底层存储平台无关 3：切换速度快
特 点
优 点
1：能复制外置存储阵列上所有 数据 2：易于管理 3：数据复制由存储保障，稳定 性和可靠性高 4：扩展容易 5：不占用生产系统资源
复制技术
IBM PPRC，EMC SRDF，HP CA， HDS TrueCopy
概要特点
1：生产与容灾需配置同品牌的 数据库远程复制管理软件 2：基于主、备间的TCP/IP通道 完成数据传输 3：通过生产端Redo Log俘获数 据变化并传输至灾备中心重现
1：生产与容灾需配置同品牌的 系统远程复制管理软件 2：通过生产端操作系统上俘获 数据变化并传输至灾备中心 3：基于主、备间的TCP/IP通道 完成数据传输 4：适用于系统级的数据复制 1：与存储平台无关，但对操作 系统不透明 2：能复制OS上所有数据
如DB2 puerScale HADR， ORACLE GoldenGate。
操作系统层技 术
CDP技术/SAN技术
如 IBM的POWERHA GLVM，
Veritas VVR
如CDP快照，I/O录相功能 等，存储虚拟化。 如IBM Metro/Global mirror， EMC SRDF，HDS TC
@2014
100km。
11
远距离异步复制技术
本地主机 远端主机
2
1
3
IP
4
ATM T1/T3 E1/E3 OC3
1 3
@2014
本地 接收本地主机一个写I/O
2
远端 通知主机IO完成
远程磁盘阵列读取缓存 4 远程磁盘阵列确认 或JNL卷的I/O 使用 SMS 时间标记和consistency group 来保证数据完整性
Cisco 15540 DWDM 4 个波段
Cisco 15540 MDS 9509 FC/IP Cisco 7600 Cisco 7600
虚拟磁带库
异步容灾主传输链 路 34Mbps
Cisco 7600
异步容灾备用传输 链路34Mbps
NAS Blade
HDS USP31TB
HDS USP 44TB
15 Min. 1-4 Hr.. 4 -8 Hr.. 8-12 Hr.. 12-16 Hr.. 24 Hr.. Days
16
@2014
/ 恢复时间目标
16
两地三中心数据复制设计并联模式
1.架构稳定性高 2.资源消耗小 3.日常运维管理简单 4.可扩展性强
@2014
17
两地三中心数据复制设计级联模式