CommVault培训_基础培训内容

理解存储策略
• • • Storage Police：是一组数据拷贝（Data Copy）的集合，它定义了用户备份 数据的ILM方案。 Data Copy：每个数据拷贝定义了相关的备份数据类型，目的设备和保留时间 的策略。共有3种类型的数据副本。 Aux Copy：辅助拷贝是一个操作，该操作是在一个存储策略中，将该存储策略 中备份的数据按照一定的规则和时间策略，从一个数据拷贝复制到另外一个拷 贝。
5
什么是RTO/RPO？
RTO (恢复时间目标) — 在业务中断后的某一个时间点，业务的进程或 应用服务必须恢复，确保业务正常进行（您能接受多长的宕机时间） RPO (恢复点目标) — 在已确定的RTO内，应用数据或文件系统信息必 须恢复到某一个时间顺序点 (您能接受丢失多少数据）
Recovery Point Objective
YES YES YES YES 分钟、小时、 天 小时、天 几周 几月 几年
恢复点（RPO）
恢复时间（RTO） 数据保留时间
能容忍丢失多少数据？
要多久才能恢复
没丢失
实时
秒、分钟、小 小时 时 分钟、小时 不能 分钟 几小时 几天
能恢复多长时间内丢失的 不能 数据
数据保护系统主要有5个目标：防止物理错误、防止逻辑错误、满足 RPO及RTO、满足数据保留的时间，没有一种单一的数据保护算法能 同时完全满足这5个目标。因此一个完整的数据备份系统应该是这几 种算法结合而构成。
1 2
3 4
数据保护基本概念 备份概念介绍
CommVault基本架构
备份系统基础设计 CommVault备份系统基础管理
来自百度文库
5
CV的三层体系结构
Oracle
Exchange
Informix
Lotus Notes
Share Point AIX
SQL
SAP
NetWare
VMWare Hyper-V
HPUX
备份服务器 生产系统
LAN
备份服务器
SAN
SAN
Server-free Backup
7
Server-less Backup
数据保护方法对比分析
RAID 物理错误 （47%） 逻辑错误 （53%）
自然灾害 硬件失效 人工出错 软件失效 病毒 YES
复制
YES YES
快照
备份
YES
YES YES YES YES
XXXCommVault培训 -基础培训部分
备份系统基本概念介绍
1 2
3 4
数据保护基本概念 备份概念介绍
CommVault基本架构
备份系统基础设计 CommVault备份系统基础管理
5
备份
备份（Backup）
收集生产系统上的数据，存储在备份介质上，万一当生产系统的数 据丢失或不能访问时，可以用来进行恢复。 备份就是创建备份副本的操作, 应用和用户不能直接访问备份副本。
Subclient Subclient
一种快速数据保护技术，快照是某个数据集在某一特定时刻 的镜像，也称为即时拷贝，是数据集的一个完整可用的副本。
产生快照数据只要几十秒钟 产生的快照数据，可以直接使用 存储设备产生的快照数量是有限的
生产数据
快照数据
常用快照产品：
存储设备：EMC TimeFinder、 IBM FlashCopy、 HDS ShadowImage、 NetApp Snapshot 卷级别：Veritas Volume Manager、Linux LVM、Microsoft® Windows® VSS 文件系统级别：AIX JFS2、Veritas File System
CommVault去重工作原理
次序
1. 2. 3. 4. 5.
读取数据 计算Hash值（SHA256） 传输Hash值到MA 和MA的DDB中键值进行比较 写数据到备份磁盘 • 如果是新的数据写人备份磁盘 • 如果是老的数据，将原始指针 写入磁盘
Restore数据和DDB无关
DDB
DISK
备份系统基本概念介绍
iDataAgent 智能数据代理
支持所有主要文件系统和应用
安装iDataAgent的主机被称为 客户端
iDA
Application Data
一个客户端能安装多个 iDataAgent，但至少必须安装1 个基本模块 iDataAgent有多种类型，包括：
基本模块（文件系统）
应用在线备份模块（Oracle，SQL 等） 其他功能模块（QR，DM等）
BU BU
Failure 出错时刻
Recovery Time Objective
Recover
数据保护时间轴
12 hrs
12 hrs
12 hrs
12 hrs
12 hrs
12 hrs
备份传输模式
生产系统 生产系统
LAN
LAN
主控服务器
备份服务器
SAN
LAN Backup
生产系统
LAN-free Backup LAN
Enterprise
备份系统基本概念介绍
1 2
3 4
数据保护基本概念 备份概念介绍
CommVault基本架构
备份系统基础设计 CommVault备份系统基础管理
5
备份系统设计
• 备份系统设计的最关键因素就是这些：
• 备份计划的制定 • 数据保留策略 • 备份内容制定 所有这些关键因素，在CV中都是通过2个策 略来制定的： • 备份计划策略－备份计划的制定 • 存储策略－数据保留和备份设备设计 通过子客户端将备份计划，内容和保留策略 关联在一起
对备份集合中所有数据进 完全恢复系统需要的时间 行备份 最短，可靠性最高。 对自上次备份后改变的数 存储的数据最少，备份速 据进行备份 度最快。
差量备份
恢复时仅需要最新全备份 对自上次全备份后改变的 和相应的差分备份，备份 数据进行备份 速度比全备份快。
将上次全备份和与其相 关增量备份或差量备份 重新组成一个全备份 第一次全备份后，不再需 要进行全备份，可进行永 久增量/差量备份
存储策略举例说明
副本名称 副本类型 副本指向的MA
包含这些副本的存储策略
副本指向的备份设备
副本保留时间
存储策略说明：
• • • 共有主，Copy to Localdisk，Archive to Cloud 3个数据副本 主保留30天， Copy to Localdisk保留90 天， Archive to Cloud保留365天 备份数据首先备份到主拷贝上，再拷贝到 其他拷贝上
LINUX
Windows
Solaris
Tru64
Library
MediaAgent
Windows NetWare Linux
MediaAgent CommServe
MetaData Jobs Control GUI&WEB Service
Library
Disk Library
HPUX Solaris AIX
理解客户端数据源结构
Client Host Uniquely addressable host 唯一的主机标识 File System or Application data 文件系统或应用数据
iDataAgent iDataAgent
Hierarchical Control
BackupSet BackupSet
操作系统备份：
操作系统备份除了需要备份相应的文件系统外，还需要备份操作系统的状态和分区信 息，以方便恢复操作系统和应用程序环境；
数据库备份介绍
数据库系统的备份过程：
首先将数据库至于热备模式
此时数据库文件是静止不动的，所有的实时更新，都写入数据库日志中
此时备份数据库文件，可以确保数据库的一致性，并且数据库仍然可以运行； 但此时数据库运行的性能会下降 备份数据库文件结束后，数据库从热备模式变为正常模式
File System Data
CommCell就是备份管理域
管理服务器管理的备 份域中，有且只有1 个CommServer备 份管理服务器
Workgroup Departmental
可以包括1个或多个 介质代理 （MediaAgent）、 和1个或多个智能数 据代理 （iDataAgent）
MediaAgent 介质服务器
真正往备份存储设备上读 /写数据 维护该介质服务器上所有 作业的索引信息和索引缓 冲区信息 维护和管理去重数据库 作业的索引信息会和备份 任务一起写入介质 能支持Windows, UNIX, Linux 和Netware系统.
Index Cache
MA
Data Storage
原先写入数据库日志的数据再更新到数据库文件中
数据库系统的备份注意点：
数据库备份需要备份数据库环境信息 数据库备份需要备份数据词典（ORACLE是控制文件，MSSQL是Master数据库）
可以通过频繁的备份数据库日志文件提高RPO
数据库的运行往往是捆绑在相应IP地址上，所以让恢复的数据库正确运行， 往往需要考虑IP地址的设定
原先写入日志的数据再更新到虚拟机数据文件中
VSA
SAN
TCP/IP
VSA VSA
SAN
Hot-Add
NDB
如何进行重复数据删除
节省大量 磁盘空间！
原数据集合
重复数 据删除 的过程
重复数据删除
逻辑视图
物理存储
在存储数据前，以块为单位进行哈希比对，对已经存储的数据块不再进行 存储，只是用索引来记录该数据块；对没有存储的新数据块，进行物理存 储，再用索引记录，这样相同的数据块物理上只存储一次。通过索引，可 以看到完整的数据逻辑视图，而实际上物理存储的数据却很少。
Disk
CTE
Library
CommServer 备份管理服务器
维护所有的配置信息 （客户端，介质代理， 备份设备等） 维护管理用户的权限 和软件许可 管理所有的作业和历 史任务记录 提供WEB和GUI服务
CommCell Console CS MetaData
Security & Licensing
文件服务器 磁带库 备份服务器 数据库服务器 磁带
3
恢复
恢复（Recovery）
重新创建生产系统应用或计算环境的过去操作状态 在应用或计算环境被破坏或其他原因导致的不能使用后，需要进行 恢复操作 恢复模式：完全恢复，小颗粒恢复
文件服务器
磁带库
磁带
备份服务器
数据库服务器
4
快照
快照
合成全备份
10
文件/OS备份介绍
文件备份是最基本的备份，类似于拷贝 文件系统的增量备份：
在文件系统增量备份中，如果1个文件中一个字节被修改，那这个文件也必须被整个 备份到增量备份中。
打开文件备份：
在WINDOWS系统中，当一个应用锁定某个文件时，该文件是不能被其他应用访问。所 以也不能被备份系统备份。如果要备份该文件，现在流行的方式是采用快照方式的打 开文件备份。原理是通过在数据卷上产生一个静态的快照，备份系统从这个静态快照 卷上读取文件进行备份。由于应用程序不会锁定快照卷上的文件，所以就能备份了。 在UNIX和Linux环境下，即使应用锁定了某个文件，该文件还是能被读取和备份的。 所以，UNIX和LINUX不需要打开文件备份方式。
虚拟环境备份介绍
虚拟系统（VMWare/Hyper-V/Ctrix）的备份过程：
备份软件首先发送指令，让虚拟机产生快照
此时虚机快照是静止不动的，所有的实时更新，都写入日志中
此时虚拟机数据文件，可以确保虚拟机的一致性，并且虚拟机仍然可以运行； 但此时虚拟机运行的性能会下降 备份虚拟机数据文件结束后，备份软件发送指令，删除快照
备份系统基本概念介绍
1 2
3 4
数据保护基本概念 备份概念介绍
CommVault基本架构
备份系统基础设计 CommVault备份系统基础管理
5
备份类型
备份类型
全备份 增量备份
原理
优点
缺点
费时，费空间； 完全恢复系统需要的时间比全 备份或差异备份长。可恢复性 最差； 完全恢复系统需要的时间比全 备份长。如果大量数据发生变 化，备份所需的时间长于增量 备份的时间。 只能对文件系统、文档系统和 邮件系统进行合成全备份，不 能对数据库进行合成全备份。
•
•
计划策略设计
存储策略设计
• • • 归档数据：往往指的是这些备份介质必须被保留很长时间，往往>=1年；同时经常是被 保留在异地，例如：银行，保险柜等。这些数据通常是以全备份的方式保留的。 循环周期：指的是备份数据经过了一个循环，1个循环包括了1个全备份和到下一个全备 份间的所有其它类型的备份；所以，最后一个循环周期肯定是一个开发的循环（因为没 有下一个全备份） 保留时间：指的是备份数据需要保留的天数。