华为OceanStor BCManager技术白皮书
华为OceanStor T系列 技术白皮书
资料编码OceanStor T 系列技术白皮书文档版本V3.1 发布日期201307目录1执行摘要/Executive Summary (4)2简介/Introduction (5)3解决方案/Solution (6)4推广/Experience (21)5结论/Conclution (27)6缩略语表/Acronyms and Abbreviations (28)第3 页, 共28 页1 执行摘要/Executive Summary本文从存储技术的发展趋势为切入点,结合用户需求,从融合统一、高性能、高可靠、高扩展及绿色节能等方面详细介绍了华为公司OceanStor T 系列统一存储产品的功能及亮点,旨在突出T 系列产品独有的功能点以及为客户带来的价值。
2 简介/Introduction随着IT 技术的发展,IT 系统的数据量也随之日益增大,而异构多样的网络、割裂林立的部门和庞大冗杂的业务系统,造成了IT 总体架构的复杂性,设备管理和维护也面临着巨大的挑战。
权威机构调查表明,当前IT 运维日益复杂,IT 预算中运维成本占到了IT 总投资的72%,而仅有28%的投资用于基础架构的投资。
复杂的网络环境,单台存储系统遭遇的性能瓶颈,成本与性能需求的平衡以及客户对于混合型存储的强烈需求等等问题被抛出,如何解决这些问题成为IT 业界关注的重中之重。
华为技术有限公司全力打造的OceanStor T系列存储产品正是以统一存储为主打,高性能、高可靠、可扩展以及绿色节能为其设计理念,充分满足用户需求,保护用户投资,最大化提升用户价值。
3解决方案/Solution随着信息产业的发展,存储逐渐从计算机中独立出来,成为IT 产业中的一个大类。
在计算技术迅速发展的今天,技术的进步必然引起相关产业的发展,存储也不例外。
技术发展首先会产生新概念、新标准,这些都会直接影响相关产业的发展趋向,据业内专家分析,存储行业正在朝以下几方面发展:统一存储成为趋势随着信息化进程的加快,数据急速增长,非结构化数据的增长速度更是远超预期。
OceanStor 2100存储系统技术白皮书
华为OceanStor 2100 V3存储系统技术白皮书目录1 概述 (3)2 “经济高效、丰富精巧” (4)3 架构介绍 (5)4 自动数据分级55 自动精简配置 (8)6 小结 (10)7 缩略语表 (11)概述信息技术从诞生发展到在生活和工作中无处不在,经历了大型机萌芽,小型机应用,个人电脑普及和桌面互联网,如今正在逐步步入移动互联的时代。
应用环境的变化催生了数据的大爆炸。
根据权威机构的统计结果,在小型机应用阶段,全世界大约生产了2.6EB的数据量;到个人电脑普及阶段,数据量增长到15.8EB;而上一个桌面互联网阶段,数据量几乎翻了3倍,达到了54.5EB;现在的移动互联时代,将会产生高达1800EB的数据。
一个问题不禁摆在了人们的面前:爆炸的仅仅是容量吗?首先,数据的来源更加的多样化。
云会逐渐打破个人电脑和消费电子两强的局面,成为最大的数据产生源。
未来数据来源的预计参考图表1-1图表1-1 数据应用来源预测产生数据的应用在不断变化,带来数据类型随之变化。
关键业务数据(如数据库等)量持续增长,但在整个数据容量的比例却急剧减小;企业办公数据迅速增长,电子邮件、大媒体文件等数据一度暂居整个数据容量的最大比例;随着个人数据迅猛增长,媒体娱乐等消费产生的数据迅速替代了企业办公数据在整个数据容量比例中的老大位置。
1993年,关键业务和企业办公产生的数据各占50%,个人数据几乎为零;2002年左右,企业办公产生的数据占有70%,关键业务数据占有20%;而到了2010年后,个人数据占据50%的比例,企业办公占有40%,关键业务数据所占比例仅有10%。
这些来自不同数据源的不同类型数据,对数据存储介质的性能、可靠性、成本等要求是多种多样的。
关键业务要求的是高性能、高可靠的存储设备,而个人娱乐数据强调的却是低成本。
如此矛盾的需求却常常要求在同一套存储设备中得到满足。
这些新的趋势对统一存储提出了新的挑战。
新一代的统一存储需要具备以下新的特质,才能不断跟上信息时代的脚步:1.具备融合、简约、智能的高性价比系统架构2.满足用户多变的存储使用需求3.灵活数据规划与管理4.实用多样的功能特性1 “经济高效、丰富精巧”华为OceanStor 2100 V3是面向企业级应用的新一代入门级存储产品。
OceanStor9000存储系统技术白皮书
OceanStor 9000 V5华为OceanStor 9000 V5 横向扩展文件存储,采用全对称分布式架构,以其卓越性能、大规模横向扩展能力和超大单一文件系统为用户提供非结构化数据共享资源存储,能够应用于广电媒体、卫星测绘、基因测序、能源勘探、科研教育、视频监控、归档备份等多种业务应用及存储资源共享领域。
全对称分布式架构并行读写,性能领先⏹高性能的读写访问:单节点带宽最高可达2.8 GB/s,单盘性能业界领先⏹网络加速:支持10GE、25GE、40GE等多种组网形态,支持RDMA模式传输及TOE卸载,提高系统传输性能⏹线性增长:系统性能随节点增加线性增长,最高可达700GB/s带宽容量性能线性扩展,规模最大的单一文件系统⏹单一文件系统:140PB级存储容量,降低系统管理和维护的复杂度,并消除多个命名空间带来的数据孤岛⏹超强扩展:3节点到288节点的平滑扩展,容量、性能随节点增加而线性增长⏹数据均匀分布:Share-nothing全对称分布式架构,系统的数据和元数据均匀分布在各个节点上,消除单独的元数据节点访问瓶颈⏹超高利用率:高可靠性的同时,硬盘利用率最高可达95%开放融合,承载多种应用⏹多种接口:支持NFS,CIFS,NDMP,FTP,HDFS等多种接口,一个系统承载多业务应用,实现数据的全生命周期管理⏹多种节点类型:支持多种节点类型,支持不同应用承载⏹管理融合:实现对IT设备统一管理,提供分析报表,简化管理复杂度,提升运营效率全方位可视化,简化资源管理⏹可靠性灵活配置:支持基于目录的冗余配比策略,提供不同的数据保护级别⏹自动统计和分析:自动化的性能统计及分析,辅助合理利用资源⏹自动部署:软件平台自动化部署和配置,“一键式”快速扩容,单节点扩容60秒之内完成⏹权限管理:提供针对IP地址或用户/用户组的访问权限控制,创建安全、隔离的存储池Info系列软件,智能存储管理InfoEqualizer,客户端连接负载均衡⏹跨节点的客户端连接负载均衡,自动平衡容量和性能,优化集群资源⏹智能统一管理,支持节点故障切换(failover)和故障恢复(failback)⏹基于DNS域名的负载均衡技术,支持多种负载均衡策略配置InfoTier,动态分级存储⏹不同节点间动态分级存储,热点数据智能迁移,让不同性价比的存储发挥最大效益,降低TCO⏹支持多种数据迁移策略和优先级设置,无缝适应业务需求及变更InfoAllocator,空间配额管理⏹在目录、用户、用户组的级别对存储进行精简资源调配,满足不同客户所需⏹支持配额项的多层嵌套关系管理,为客户提供易用,弹性灵活的空间访问InfoProtector,高可靠数据保护⏹应用Erasure Code专利技术实现N+M数据保护–InfoProtector,业界最高水平的数据可靠性和可用性保护机制,可支持4个节点同时故障的数据保护⏹系统能够自动重构,多节点并行重构数据,重构速度高达2TB/小时InfoStamper,快照功能⏹目录级别快照,快速数据恢复⏹支持手动快照、定时快照(以天/周/月为粒度)InfoLocker,WORM功能⏹保护数据免遭意外、恶意更改和删除⏹支持设置WORM时钟,设置保护期InfoReplicator,异步远程复制⏹减少系统恢复时间,应用于灾难恢复,数据备份或远距离数据迁移⏹支持不同目录1:N复制,N:1复制InfoRevive视频监控图像修复功能硬盘故障损坏不影响视频流畅度,只对实际丢失数据进行空置处理技术规格。
OceanStor BCManager eBackup备份管理技术指南
第10页
备份服务器规划
eBackup服务器规格
CPU
内存 硬盘空闲空间
私有云备份
8core*2.0GHZ 8GB 120GB
部署形态
物理机部署
最大备份代理个数 单个备份代理最大备份流数 备份虚拟机/卷个数
64 40 30000个卷
公有云备份
4core*2.0GHZ
8GB 120GB 物理机部署 虚拟机部署: FusionSphere
计算节点带宽受限于网络,千兆网VMware和FusionSphere 使用FusionStorage为生产存储场景 按80MB/s估算,FusionSphere使用虚拟化存储为生产存储场景按50MB/s估算;万兆网按 200MB/s估算。
第8页
备份策略规划--备份数据保留时间规划(仅虚拟化备份涉及)
虚拟机分组数评估:虚拟机分组数 = 虚拟机总数 * 单台虚拟机容量 / (备份系统带宽 * 备份时间窗口)* 120%,结果向上取整。
备份系统带宽:
在eBackup服务器和备份存储不存在瓶颈的情况下,备份系统的总带宽可以按照生产系统传 输带宽估算。备份系统带宽 = 虚拟化平台计算节点数量 * 单台计算节点--备份类型、备份周期规划(仅虚拟化备份涉及)
eBackup目前只提供永久增量备份和周期性全备两种类型的备份。建议增备周期1天1 次,备份数据保留1周;全备周期为1周1次。
如用户需要备份的虚拟机总数据量较大,建议将虚拟机进行分组,不同组的虚拟机 首次全备设置在不同日期,避免大量虚拟机在同一天进行全备,导致在备份时间窗 口内无法完成备份作业。
备份需求 全量备份周期(天)、增量备份周期(天)、备份数据保留时间(天) 备份窗口(小时)、日数据变化(%)、虚拟机分组数(组)
OceanStor BCManager eBackup日常维护指南
编号 1
2
工具
Command Line Interface(CLI) eBackup GUI
3
OceanStor Toolkit
4
PuTTY
5
Internet Explorer(IE)/
Mozilla Firefox……
说明
用于管理和维护eBackup的备份与恢复业 务以及 eBackup本身
用于管理和维护eBackup的备份与恢复业 务以及 eBackup本身
收集的本台设备信息经过压缩保存在/opt/huawei-dataprotection/ebackup/bin/HCP_Report_XXXXXX.tar文件中。
第14页
信息搜集 - 通过 OceanStor Toolkit搜集
1. 启动信息搜集工具 2. 选择设备a 3. 执行搜集 4. 搜集结束
2. 进入eBackup CLI所在目录。
3. 执行脚本hcpcli.sh登录eBackup CLI( 脚本后面的参数表示的是eBackup 备份管理系统中的用户,而非OS中 的用户)。
第5页
登录 eBackup GUI
1. 在 IE 地址栏中输入“备份服务器 的备份管理平面IP地址”后,按 “Enter”
2. 在登录界面输入服务器的OS管理员 用户名(hcp)和密码(默认 Huawei@CLOUD8!)。
3. 使用hcp用户登录OS后,可以使用 ”su root”的方法切换到root用户( eBackup模板禁止远程直接使用root 用户登录OS)。
第4页
登录 eBackup CLI
1. 使用 PuTTY 工具,通过hcp用户 登录OS
在Windows终端上通过OceanStor Toolkit进行收 集信息; 可以搜集单台设备上的信息; 也可以批量搜集多台设备上的信息。
OceanStor BCManager eBackup备份恢复配置管理指南
➢ 对于虚拟机,将所有自上次虚拟机全量备份或者虚拟机增量备份操 作以来所修改过的磁盘数据和全部虚拟机配置信息数据进行备份。
➢ 对于LUN,将基于快Байду номын сангаас对比机制进行增量备份,备份的数据为V3存 储LUN上的数据。
每次备份的数据都较少,且备份时间较短。
1.第一次备份(全量) eBackup备份管理系统对磁盘启动第一次备份任务,默认执 行全量备份,将磁盘中全部数据进行备份。
2.后续备份(增量) eBackup备份管理系统对磁盘启动后续备份任务,默认执行 增量备份。通过对比生产端磁盘的前后两次快照获取前后两 次备份之前的数据变更信息,从磁盘中取出有变更的数据进 行备份。
⚫ 具体请参考:
《 OceanStor BCManager V200R001C00SPC200 eBackup用户指南》备份前准备小节
第11页
备份功能应用配置——增加受保护环境
1.在导航栏上选择“ > FusionSphere”。 2.单击“受保护环境”区域的图标 。
3.设置FusionSphere受保护环境基本信息。
第12页
备份功能应用配置——创建存储单元
1.在导航栏上选择“ > 存储单元”。 2.单击“创建”。
第5页
备份方式及适用场景
备份方式 CBT
快照对比
适用场景
⚫ FusionSphere(存储类型 为虚拟化存储) ⚫ VMware
说明 备份时自动开启CBT功能。
⚫ FusionSphere(存储类型 FusionStorage) ⚫ 存储设备的LUN
对比说明
OceanStor9000存储系统技术白皮书
OceanStor 9000 V5华为OceanStor 9000 V5 横向扩展文件存储,采用全对称分布式架构,以其卓越性能、大规模横向扩展能力和超大单一文件系统为用户提供非结构化数据共享资源存储,能够应用于广电媒体、卫星测绘、基因测序、能源勘探、科研教育、视频监控、归档备份等多种业务应用及存储资源共享领域。
全对称分布式架构并行读写,性能领先⏹高性能的读写访问:单节点带宽最高可达2.8 GB/s,单盘性能业界领先⏹网络加速:支持10GE、25GE、40GE等多种组网形态,支持RDMA模式传输及TOE卸载,提高系统传输性能⏹线性增长:系统性能随节点增加线性增长,最高可达700GB/s带宽容量性能线性扩展,规模最大的单一文件系统⏹单一文件系统:140PB级存储容量,降低系统管理和维护的复杂度,并消除多个命名空间带来的数据孤岛⏹超强扩展:3节点到288节点的平滑扩展,容量、性能随节点增加而线性增长⏹数据均匀分布:Share-nothing全对称分布式架构,系统的数据和元数据均匀分布在各个节点上,消除单独的元数据节点访问瓶颈⏹超高利用率:高可靠性的同时,硬盘利用率最高可达95%开放融合,承载多种应用⏹多种接口:支持NFS,CIFS,NDMP,FTP,HDFS等多种接口,一个系统承载多业务应用,实现数据的全生命周期管理⏹多种节点类型:支持多种节点类型,支持不同应用承载⏹管理融合:实现对IT设备统一管理,提供分析报表,简化管理复杂度,提升运营效率全方位可视化,简化资源管理⏹可靠性灵活配置:支持基于目录的冗余配比策略,提供不同的数据保护级别⏹自动统计和分析:自动化的性能统计及分析,辅助合理利用资源⏹自动部署:软件平台自动化部署和配置,“一键式”快速扩容,单节点扩容60秒之内完成⏹权限管理:提供针对IP地址或用户/用户组的访问权限控制,创建安全、隔离的存储池Info系列软件,智能存储管理InfoEqualizer,客户端连接负载均衡⏹跨节点的客户端连接负载均衡,自动平衡容量和性能,优化集群资源⏹智能统一管理,支持节点故障切换(failover)和故障恢复(failback)⏹基于DNS域名的负载均衡技术,支持多种负载均衡策略配置InfoTier,动态分级存储⏹不同节点间动态分级存储,热点数据智能迁移,让不同性价比的存储发挥最大效益,降低TCO⏹支持多种数据迁移策略和优先级设置,无缝适应业务需求及变更InfoAllocator,空间配额管理⏹在目录、用户、用户组的级别对存储进行精简资源调配,满足不同客户所需⏹支持配额项的多层嵌套关系管理,为客户提供易用,弹性灵活的空间访问InfoProtector,高可靠数据保护⏹应用Erasure Code专利技术实现N+M数据保护–InfoProtector,业界最高水平的数据可靠性和可用性保护机制,可支持4个节点同时故障的数据保护⏹系统能够自动重构,多节点并行重构数据,重构速度高达2TB/小时InfoStamper,快照功能⏹目录级别快照,快速数据恢复⏹支持手动快照、定时快照(以天/周/月为粒度)InfoLocker,WORM功能⏹保护数据免遭意外、恶意更改和删除⏹支持设置WORM时钟,设置保护期InfoReplicator,异步远程复制⏹减少系统恢复时间,应用于灾难恢复,数据备份或远距离数据迁移⏹支持不同目录1:N复制,N:1复制InfoRevive视频监控图像修复功能硬盘故障损坏不影响视频流畅度,只对实际丢失数据进行空置处理技术规格。
华为OceanStor BCManager技术白皮书
分布式可扩展64节点,保护10000虚拟机
任务自动负载均衡,1分钟内完成任务故障切换
简单易用
配置向导,4步完成虚拟机保护
图形化界面直观监控备份系统运行状态
租干预
BCManager eBackup支持华为虚拟化备份、私有云备份、公有云备份场景:
秒级快照备份保护
本地快照和异地快照回滚与自动拉起
按时按需生成副本及副本自动挂载
BCManager eReplication支持企业自建数据中心、私有云等环境的各类容灾方案管理,包括:
传统容灾
包括双活、主备、两地三中心容灾方案的拓扑展示与端到端监控功能,能够提供应用感知、应用一致性保护、一键容灾测试与切换的功能特性。
CDM
基于华为存储双活、异步复制和快照技术,实现业务主机应用、生产存储、灾备存储的灾备一体化管理;实现生产存储本地秒级备份和异地备份,实现基于策略定时按需生成副本并自动挂载。
私有云容灾
作为FusionCloud私有云的容灾引擎,提供租户虚拟机的高可用、主备容灾的保护能力。
高效备份
永久增量备份
无合成恢复技术,10倍效率提升
产品特性
业务一体化
支持对虚拟化环境的保护与切换
支持对物理环境的保护与切换
支持对云环境的保护与切换
管理自动化
应用自动识别
提供模板化的策略配置
支持可定制化的恢复流程
支持一键式容灾切换
支持一键式容灾测试
支持分权分域的用户权限管理
容灾可视化
提供可视化的容灾拓扑展示
提供可视化的容灾流程展示
容灾备份一体化融合管理
虚拟化备份
面向传统数据中心,提供FusionSphere和VMware vSphere虚拟化环境下虚拟机的备份能力,提供海量虚拟机及磁盘的数据备份。
OceanStor BCManager eBackup产品介绍
组网架构—混合云备份
eBackup支持部署在SmartContainer中。
eBackup的备份数据支持三种备份模式: 1、本地备份
运行备份任务后,从生产存储的快照卷 上读取备份数据,备份数据仅保存到本地 的备份存储(SAN)。 2、远端备份 运行备份任务后,从生产存储的快照卷 上读取备份数据,备份数据直接存储到远 端的备份存储(华为企业云S3备份桶)。 3、本地和远端备份 运行备份任务后,从生产存储的快照卷 上读取备份数据,备份数据先写入到本地 的备份存储(SAN)上,再自动执行拷贝 任务,按照拷贝计划将备份数据从本地的 备份存储拷贝到远端的备份存储(华为企 业云S3备份桶)。
通过备份数据重复删除、压缩,永久增量 备份等技术,降低35%用户备份存储购置成本 支持块级增量备份/恢复,缩减95%备份恢 复窗口
第5页
目录
1. 产品定位 2. 架构介绍 3. 功能特性介绍
第6页
高可靠易扩展的分布式架构
VMware
eBackup 备份节点
eBackup 备份节点
IT系统管理员
eBackup 备份节点
备份服务器
HA
备份服务器
(备)
(主)
ห้องสมุดไป่ตู้
备份代理
任务负载均衡 及故障切换
备份代理
任务负载均衡 及故障切换
备份代理
FusionSphere
分布式:BCManager eBackup备
份软件分为备份服务器和备份代理, 可根据需要扩展备份代理节点。最大 可扩展到64节点,支持10000虚拟机 或30000虚拟机卷的备份/恢复
备份服务器与备份代理各司其职,分布式可扩展架构 虚拟机智能选择,自动保护新增虚拟机,减轻维护工作量 任务负载均衡、故障切换,保证可靠性
OceanStor18000系列高端存储技术白皮书
OceanStorOceanStor 18500/18800 V5高端存储系统OceanStor 18500/18800 V5高端存储是华为最新一代的高端存储系统,为企业核心业务提供最高水平的数据服务。
凭借业界领先的SmartMatrix 2.0系统架构、HyperMetro 免网关A-A 双活、闪存优化技术、持续领先一代的硬件平台以及丰富的效率提升和数据保护方案,OceanStor 18500/18800 V5高端存储在可靠性、性能和解决方案方面都达到业界领先水平,满足了大型数据库OLTP/OLAP 、云计算等各种应用的数据存储需求,广泛适用于政府、金融、运营商、能源、交通、制造等行业,是企业核心应用的最佳选择。
领先的SmartMatrix 2.0系统架构·4控制器全对称引擎:革命性的在引擎6U 空间内集成4个控制器,并在无源背板互连基础上融合了Cache 持续镜像和后端硬盘控制器全互连技术,实现业界领先的4控全冗余特性。
引擎内4个控制器互为热备,即使在3个控制器故障的情况下也依然能够保证业务稳定运行,完全避免了传统高端存储在系统升级或者控制单元故障时的单点运行状态,最大程度保证关键应用的业务连续性。
·负载均衡:支持控制器间负载均衡,应用可通过多个控制器并发加速,消除性能瓶颈,实现业务的压力均衡。
产品特点稳定可靠OceanStor 18500/18800 V5高端存储系统产品规格OceanStorOceanStor 18500/18800 V5高端存储系统最大处理器数OceanStor 18800 V5OceanStor 18500 V5SmartMatrix 2.032TBFC 、iSCSI 、NFS 、CIFS 、HTTP 、FTP8/16/32Gbps FC 、1/10/25/40/100Gbps Ethernet 、SAS3.0(后端端口,单端口4*12Gbps)2.5”: SSD,SAS ;3.5”: SSD,NL-SASAC: 100V~240V ,380V DC:192V~288V 或–48V~–60V76865,53665,53676832TB9,600(2.5”)/ 4,608(3.5”)6,400(2.5”)/ 3,072(3.5”)32快照(HyperSnap) 克隆(HyperClone)支持多核多处理器拷贝(HyperCopy)卷镜像(HyperMirror)阵列双活(HyperMetro)远程复制(HyperReplication) WORM(HyperLock )一体化备份(HyperVault)智能服务质量控制(SmartQoS)智能缓存分区(SmartPartition)智能精简配置(SmartThin)智能数据迅移(SmartMotion)智能数据分级(SmartTier)智能数据销毁(SmartErase)智能LUN 迁移(SmartMigration)智能SSD 缓存(SmartCache)智能异构虚拟化(SmartVirtualization)智能多租户(SmartMulti-tenant)智能重删压缩(SmartDedupe & SmartCompression)SmartQuota (配额管理)主机多路径(UltraPath)容灾管理(BCManager)单设备管理软件(DeviceManager)远程维护管理软件(eService)机柜尺寸/重量集中运维管理软件(eSight)机柜最大外形尺寸(包括机柜外部滑轮、地脚等的外形尺寸):600mm (宽)*1232mm (深)*2000mm (高)整柜满配重量:系统柜680 kg ;硬盘柜540 kg独立网关形态最大主机数量最大LUN数量智能的服务,助力企业云化转型·智能运维管理:eService 智能运维软件可实现云监控,7*24主动监控,每天自动深度巡检;分钟级感知故障,自动报障并自动建单;提供云评估服务,自动化Workload 特征分析,一键式生成分析报告,推荐存储设计;智能趋势预测,提前规划扩容。
OceanStor 5000混合闪存系统技术白皮书-D
华为OceanStor 5000 系列混合闪存存储系统技术白皮书华为OceanStor 5000 V5 系列混合闪存存储系统技术白皮书目录目录1摘要 (1)2简介 (2)2.1产品系列 (2)2.2客户价值 (3)3系统架构 (5)3.1硬件架构 (5)3.1.1多控Scale-out. (5)3.1.2硬件全冗余 (6)3.1.3门卫式数据加密(国内适用) (7)3.1.4SED 数据加密(国外适用) (7)3.2软件架构 (8)3.2.1块级虚拟化 (9)3.2.2SAN/NAS 一体化 (11)3.2.3负载均衡 (12)3.2.4数据缓存 (12)3.2.5端到端数据完整性保护 (13)3.2.6丰富软件特性 (13)3.2.7面向闪存的系统优化 (14)4精简高效Smart 特性系列 (15)4.1异构虚拟化(SmartVirtualiztaion) (15)4.2数据迁移(SmartMigration) (17)4.3数据重删压缩(SmartDedupe&SmartCompression) (18)4.4智能数据分级(SmartTier) (21)4.4.1块数据分级(SmartTier for Block) (21)4.4.2文件数据分级(SmartTier for File) (22)4.5智能精简配置(SmartThin) (23)4.6智能服务质量控制(SmartQoS) (23)4.7智能缓存分区(SmartPartition) (25)4.8SSD 智能缓存(SmartCache) (27)4.9LUN 销毁(SmartErase) (27)4.10多租户(SmartMulti-Tenant) (28)华为OceanStor 5000 V5 系列混合闪存存储系统技术白皮书目录4.11智能配额(SmartQuota) (29)4.12智能数据迅移(SmartMotion) (30)5数据保护Hyper 特性系列 (31)5.1快照(HyperSnap) (31)5.1.1LUN 快照(HyperSnap For Block) (31)5.1.2FS 快照(HyperSnap For File) (32)5.2克隆(HyperClone) (34)5.2.1LUN 克隆(HyperClone For Block) (34)5.2.2FS 克隆(HyperClone For File) (36)5.3远程复制(HyperReplication) (37)5.3.1LUN 同步远程复制(HyperReplication/S For Block) (38)5.3.2LUN 异步远程复制(HyperReplication/A For Block) (40)5.3.3FS 异步远程复制(HyperReplication/A For File) (41)5.4阵列双活(HyperMetro) (43)5.4.1阵列双活(HyperMetro For Block) (43)5.4.2阵列双活(HyperMetro For File) (45)5.5一体化备份(HyperVault) (47)5.6LUN 拷贝(HyperCopy) (47)5.7卷镜像(HyperMirror) (49)5.8WORM(HyperLock) (51)5.9两地三中心(3DC) (53)6最佳实践 (55)A 附录 (56)A.1更多参考信息 (56)A.2如何反馈意见 (56)A.3缩略语表 (57)技术白皮书 1 摘要1摘要华为OceanStor 5000 V5系列混合闪存存储系统(以下简称OceanStor V5中端存储系统)是面向企业级应用的新一代统一存储产品。
OceanStor2200存储系统技术白皮书
--.俨-----------------..、- -华为OceanStor 2200 V3是新一代面向全闪存设计的企业级入门存储产品。
OceanStor 2200 V3具备卓越经济、丰富精巧、传承创新的特性,能够满足中小型企业数据库OLTP/OLAP、Exchange、服务器虚拟化和视频监控等各种应用需求,广泛适用千政府、医疗、教育、能源、制造等行业。
OceanStor 2200 V3有效保证用户数据安全,为用户提供卓越的存储服务,是中小企业IT应用的最佳选择。
产品特点卓越经济•全面领先的性能和规格:OceanStor 2200 V3采用全新多核处理器,支持16Gbps FC等主机接口,内部采用新—代PCI- E 3.0总线,并采用12Gbps SAS 3.0离速硬盘接口,性能及规格全面领先同级产品。
•业界独有的Smart lO卡:单张接口卡可根据用户需求设定不同的接口协议,支持8Gbps FC、16GbpsFC、10Gbps Ethernet等协议类型。
丰富精巧•丰富的数据服务功能:OceanStor 2200 V3存储通过丰富的Smart系列软件( Smart T ier/Smart-Cache/SmartThin/SmartMotion/SmartM i gration/SmartErase/ SmartQos ) 为中低端用户提供更加高效的存储资源使用效率,通过Hyper系列数据保护软件( HyperSnap/HyperCopy/Hyper-Clone/HyperM irror/HyperReplication )满足用户本地、异地以及多地数据保护需求,最大程度保障用户业务连续性和数据可用性。
•精巧的系统设计:OceanStor 2200 V3小巧的机身设计、更低的运行噪音和能耗最大限度的降低环境门槛,通过华为独特的易用性软件Smart C onfig极大简化了传统存储复杂配置的过程,只需 3 步,分钟级可轻松完成存储资源配置,解决了传统存储IT 运维人员需要专业技能的瓶颈,满足了中小企业对IT简单易用的关键需求。
华为OceanStor 企业统一存储可靠性技术白皮书
华为OceanStor 企业统一存储可靠性技术白皮书文档版本01 发布日期 2014-3-18华为技术有限公司版权所有© 华为技术有限公司2014。
保留一切权利。
非经本公司书面许可,任何单位和个人不得擅自摘抄、复制本文档内容的部分或全部,并不得以任何形式传播。
商标声明和其他华为商标均为华为技术有限公司的商标。
本文档提及的其他所有商标或注册商标,由各自的所有人拥有。
注意您购买的产品、服务或特性等应受华为公司商业合同和条款的约束,本文档中描述的全部或部分产品、服务或特性可能不在您的购买或使用范围之内。
除非合同另有约定,华为公司对本文档内容不做任何明示或默示的声明或保证。
由于产品版本升级或其他原因,本文档内容会不定期进行更新。
除非另有约定,本文档仅作为使用指导,本文档中的所有陈述、信息和建议不构成任何明示或暗示的担保。
华为技术有限公司地址:深圳市龙岗区坂田华为总部办公楼邮编:518129网址:客户服务邮箱:support@客户服务电话:4008302118目录1 概述 (5)1.1 华为OceanStor企业统一存储产品概述 (5)1.2 华为OceanStor企业统一存储可靠性概述 (1)2 系统可靠性设计 (2)2.1 架构可靠性设计 (2)2.2 基本可靠性设计 (3)2.3 模块级可靠性设计 (4)2.4 多重硬盘故障容错设计 (5)2.5 端到端的数据完整性保证设计 (6)2.6 创新的数据保护设计 (7)2.7 智能的QoS设计 (8)2.8 完善的数据备份和容灾方案 (9)3 精益的制造加工 (11)3.1 单板-整机制造全流程质量保证 (11)3.2 硬盘生产质量保证 (12)3.3 整柜制造及交付 (13)4 完善的运维流程 (14)4.1 在线维护 (14)4.2 高效及时的Cloud Service服务 (15)4.3 维保服务 (15)5 缩略语表/Acronyms and Abbreviations (16)修订记录/Change History1 概述1.1 华为OceanStor企业统一存储产品概述华为OceanStor企业统一存储产品是华为技术有限公司(以下简称华为)根据存储产品应用现状和存储技术未来发展趋势,推出的一系列统一存储产品,能够满足各类应用对海量数据存储、高速数据存取、高可用性、高利用率、绿色环保和易于使用等需求。
华为 OceanStor UltraPath 技术白皮书
OceanStor UltraPath V100R008技术白皮书华为科技有限公司版权所有侵权必究目录Revision record 修订记录............................................................. 错误!未定义书签。
1多路径软件概述. (4)1.1单点故障与多路径技术 (4)1.2主流多路径软件一览 (5)2UltraPath概述 (7)2.1典型组网 (7)2.1.1直连组网 (7)2.1.2双交换组网 (8)2.2UltraPath原理 (8)2.2.1UltraPath与OS集成方式 (8)2.2.2如何识别并管理路径 (10)2.2.3如何识别并管理路径组 (12)2.3UltraPath基本特性 (13)2.3.1故障转移(failover)和恢复(failback) (13)2.3.2路径例测 (14)2.3.3负载均衡 (14)2.4UltraPath高级特性 (16)2.4.1全路径闪断保护 (16)2.4.2间歇性故障路径隔离 (16)2.4.3误码链路隔离 (17)2.4.4路径异常告警 (18)2.4.5主机自动注册到阵列 (19)2.4.6手工禁用路径 (19)关键词Key words:UltraPath摘要Abstract:本文档主要描述华为公司UltraPath的概述、主要的功能特性等。
1 缩略语清单List of abbreviations2 多路径软件技术简介2.1 单点故障与多路径技术单点故障是指网络中的某一处发生故障,可能导致整个网络瘫痪。
按照这个标准,图1中的可能的单点故障包括:① 外网与应用服务器间的路径。
② 应用服务器本身。
③ 服务器与存储控制器间的路径。
④ 存储控制器本身。
⑤ 存储控制器与磁盘间的路径。
⑥存储磁盘本身。
图1 单条路径组网为了避免单点故障,高可靠系统对可能的单点故障设备都做了冗余备份,并将这种冗余尽可能的以交叉组网的方式来组织以达到最高的可靠性,同时利用冗余的路径还可以达到更高的性能,如下图所示:利用多路径技术可以实现冗余路径的可靠利用。
OceanStor Dorado全闪存存储产品技术白皮书
华为OceanStor Dorado V3全闪存存储系统产品技术白皮书目录1 摘要 (1)2 简介 (2)2.1 产品系列 (2)2.2 客户价值 (3)3 系统架构 (5)3.1 相关概念 (5)3.1.1 控制框 (5)3.1.2 控制器 (6)3.1.3 硬盘框 (7)3.1.4 硬盘域 (7)3.1.5 存储池 (9)3.1.6 RAID技术 (10)3.2 硬件架构 (14)3.2.1 设备形态 (15)3.2.2 自研HSSD (16)3.2.2.1 盘内磨损均衡 (17)3.2.2.2 坏块管理 (17)3.2.2.3 数据冗余保护 (17)3.2.2.3.1 后台巡检 (18)3.2.2.3.2 支持SAS和NVMe协议 (18)3.2.3 自研芯片 (19)3.2.4 硬件扩展能力 (20)3.2.5 硬件架构特征 (24)3.3 软件架构 (24)3.3.1 FlashLink (26)3.3.1.1 冷热数据分流 (27)3.3.1.2 端到端IO优先级 (27)3.3.1.3 ROW满分条写 (28)3.3.1.4 全局垃圾回收 (29)3.3.1.5 全局磨损均衡/反磨损均衡 (29)3.3.2 读缓存 (31)3.3.3 IO流程 (31)3.3.3.1 写流程 (31)3.3.3.2 读流程 (33)3.3.4 丰富软件特性 (34)3.3.5 软件架构特征 (35)4 精简高效Smart系列特性 (36)4.1 在线重删(SmartDedupe) (36)4.2 在线压缩(SmartCompression) (37)4.3 智能精简配置(SmartThin) (39)4.4 智能服务质量控制(SmartQoS) (39)4.5 异构虚拟化(SmartVirtualization) (41)4.6 智能数据迁移(SmartMigration) (42)4.7 多租户(SmartMulti-Tenant for File) (44)4.8 智能配额(SmartQuota for File) (46)5 数据保护Hyper特性 (48)5.1 快照(HyperSnap) (48)5.1.1 LUN快照(HyperSnap For Block) (48)5.1.2 FS快照(HyperSnap For File) (51)5.2 HyperCDP (52)5.3 HyperCopy (54)5.4 克隆(HyperClone) (57)5.4.1 LUN 克隆(HyperClone For Block) (57)5.4.2 FS克隆(HyperClone For File) (59)5.5 远程复制(HyperReplication) (61)5.5.1 LUN同步远程复制(HyperReplication/S For Block) (61)5.5.2 LUN异步远程复制(HyperReplication/A For Block) (64)5.5.3 FS异步远程复制(HyperReplication/A For File) (66)5.6 阵列双活(HyperMetro) (68)5.6.1 LUN双活(HyperMetro For Block) (68)5.6.2 FS双活(HyperMetro For File) (69)5.7 两地三中心(3DC) (72)5.8 一体化备份(HyperV ault for File) (72)5.9 WORM(HyperLock for File) (73)6 云灾备Cloud特性 (76)6.1 云复制(CloudReplication) (76)6.2 云备份(CloudBackup) (77)7 系统安全和数据加密 (80)7.1 系统数据加密(Data Encryption) (80)7.2 基于角色的访问控制管理 (81)8 系统管理及兼容性 (82)8.1 系统管理 (82)8.1.1 Device Manager (82)8.1.2 CLI (82)8.1.3 Call Home服务 (82)8.1.4 Restful API (83)8.1.5 SNMP (83)8.1.6 SMI-S (83)8.1.7 配套工具 (83)8.2 生态集成及兼容性 (83)8.2.1 VV ol(Virtual V olumes) (83)8.2.2 OpenStack集成 (84)8.2.3 虚拟机环境插件 (84)8.2.4 主机兼容性 (84)9 最佳实践 (85)10 更多参考信息 (86)11 如何反馈意见 (87)12 缩略语 (88)1 摘要华为公司OceanStor Dorado V3是面向企业关键业务打造的全闪存存储系统,采用专为闪存设计的FlashLink®技术,实现0.5ms稳定低时延;免网关双活技术,为客户提供端到端双活数据中心解决方案,并可平滑升级到两地三中心容灾方案,实现方案级99.9999%的可靠性;在线重删和压缩技术,提供更多的客户可用容量,减少TCO。
OceanStorN8500集群NAS存储系统产品技术白皮书
OceanStor N8500集群NAS存储系统产品技术白皮书Issue V2.1Date 2020-11-01华为技术所有©华为技术 2012。
保留一切权利。
非经本公司书面许可,任何单位和个人不得擅自摘抄、复制本文档容的部分或全部,并不得以任何形式传播。
商标声明和其他华为商标均为华为技术的商标。
本文档提及的其他所有商标或注册商标,由各自的所有人拥有。
注意您购买的产品、服务或特性等应受华为公司商业合同和条款的约束,本文档中描述的全部或部分产品、服务或特性可能不在您的购买或使用围之。
除非合同另有约定,华为公司对本文档容不做任何明示或默示的声明或保证。
由于产品版本升级或其他原因,本文档容会不定期进行更新。
除非另有约定,本文档仅作为使用指导,本文档中的所有述、信息和建议不构成任何明示或暗示的担保。
华为技术为客户提供全方位的技术支持,用户可与就近的华为办事处联系,也可直接与公司总部联系。
华为技术地址:市龙岗区坂田华为总部办公楼邮编:518129网址:.huawei.客户服务:00 4008302118客户服务传真:01客户服务:Supporthuawei.目录1 概述 (5)2 N8500集群NAS存储系统架构 (6)2.1 产品逻辑结构 (6)2.2 集群NAS软件 (6)2.3 集群NAS引擎 (7)2.4 交换设备配置 (8)2.5 存储单元配置 (8)2.6 管理子系统 (8)3 组网以及环境要求 (9)3.1 集群NAS存储系统 (9)3.2 NAS/SAN一体化典型组网 (10)3.3 数据备份组网 (10)3.4 系统运行环境 (12)4 软件特性 (13)4.1 集群文件系统 (13)4.1.1 技术背景 (13)4.1.2 技术原理 (13)4.1.3 技术特点 (19)4.2 快照技术 (19)4.2.1 技术背景 (19)4.2.2 技术原理 (19)4.2.3 技术特点 (21)4.3 动态分级存储技术 (22)4.3.1 技术背景 (22)4.3.2 技术原理 (22)4.3.3 技术特点 (26)4.4 远程复制技术 (26)4.4.1 技术背景 (26)4.4.2 技术原理 (27)4.4.3 技术特点 (28)4.5 配额管理技术 (29)4.5.1 技术背景 (29)4.5.2 技术原理 (29)4.5.3 技术特点 (31)图目录图 1 产品逻辑结构图 (6)图 2 FileStore 软件及应用架构示意图 (7)图 3 N8500集群NAS存储系统关系图 (9)图 4 SAN、NAS一体化典型组网 (10)图 5 使用NBU客户端备份方式组网 (11)图 6 使用NDMP备份组网 (11)图 7 数据通道全互联技术 (14)图 8 通信通道全互联技术 (14)图 9 全局存储空间管理技术 (16)图 10 高效的集群锁技术 (17)图 11 对称式元数据处理技术 (17)图 12 全局名字空间技术 (18)图 13 集群多节点并发访问技术 (18)图 14 主文件系统及其快照文件集 (20)图 15 新生成快照 (20)图 16 主文件系统数据更新 (21)图 17 对快照进行数据更新 (22)图 18 N8500多卷文件系统示意图 (23)图 19 N8500远程复制技术实现步骤 (27)图 20 N8500远程复制技术实现机制 (28)图29 配额管理逻辑架构 (30)图30 配额管理执行方式 (31)1 概述传统NAS系统存在扩展性差、可靠性差等缺陷。
华为BCManager管理操作手册
华为BCManager 基于策略的自动保护
配置容灾保护策略后,系统将自动根据设置的策略周期性执行 同时,可查看保护历史,以及历史保护状态,可反馈RPO是否满足 执行失败,将自动产生告警,并通过邮件短信等方式进行通知 第10页
华为BCManager 自定义容灾策略
清晰查看当前保护的策略组网方式,同 时 可以根据实际需要配置时刻表,满足 不同 的RPO需求。支持按照分钟、小时 、天、 周、月的时间配置。可配置一致 性策略。 Oracle可自定义空闲的归档空间
第2页
目录
1. 华为容灾产品BCManager配置流程图 2. 华为容灾产品BCManager操作管理
第3页
华为BCManager 配置前准备
Байду номын сангаас
在OceanStor BCManager上配置容灾保护之前,请根据您的数据保护方案完成生产 端和灾备端保护对象运行环境和存储侧环境的相关配置,以及一些准备工作
恢复计划测试报表,支持excel导出
第19页
华为BCManager 数据维护
支持手动和自动备份系统配置数据 支持操作日志、告警等的转储,节省数据库空间 支持数据导出 第20页
学习推荐
华为Learning网站
/learning/Index!toTrainIndex
华为BCManager 管理操作手册
技术创新,变革未来
前言
本章主要学习华为业务连续性灾备产品BCManager产品操作 管理界面的使用,为后面进一步学习场景化的灾备任务做铺
垫
第1页
目标
学完本课程后,您将能够:
描述华为容灾产品BCManager配置流程 熟悉华为容灾产品BCManager操作管理界面
- 1、下载文档前请自行甄别文档内容的完整性,平台不提供额外的编辑、内容补充、找答案等附加服务。
- 2、"仅部分预览"的文档,不可在线预览部分如存在完整性等问题,可反馈申请退款(可完整预览的文档不适用该条件!)。
- 3、如文档侵犯您的权益,请联系客服反馈,我们会尽快为您处理(人工客服工作时间:9:00-18:30)。
业务一体化
支持对虚拟化环境的保护与切换
支持对物理环境的保护与切换
支持对云环境的保护与切换
管理自动化应用自动识别提供Fra bibliotek板化的策略配置
支持可定制化的恢复流程
支持一键式容灾切换
支持一键式容灾测试
支持分权分域的用户权限管理
容灾可视化
提供可视化的容灾拓扑展示
提供可视化的容灾流程展示
容灾备份一体化融合管理
CDM
基于华为存储双活、异步复制和快照技术,实现业务主机应用、生产存储、灾备存储的灾备一体化管理;实现生产存储本地秒级备份和异地备份,实现基于策略定时按需生成副本并自动挂载。
私有云容灾
作为FusionCloud私有云的容灾引擎,提供租户虚拟机的高可用、主备容灾的保护能力。
高效备份
永久增量备份
无合成恢复技术,10倍效率提升
海量虚拟机备份
分布式可扩展64节点,保护10000虚拟机
任务自动负载均衡,1分钟内完成任务故障切换
简单易用
配置向导,4步完成虚拟机保护
图形化界面直观监控备份系统运行状态
租户级自动备份
1分钟完成备份服务申请
备份、恢复自动执行,无需人工干预
BCManager eBackup支持华为虚拟化备份、私有云备份、公有云备份场景:
秒级快照备份保护
本地快照和异地快照回滚与自动拉起
按时按需生成副本及副本自动挂载
BCManager eReplication支持企业自建数据中心、私有云等环境的各类容灾方案管理,包括:
传统容灾
包括双活、主备、两地三中心容灾方案的拓扑展示与端到端监控功能,能够提供应用感知、应用一致性保护、一键容灾测试与切换的功能特性。
虚拟化备份
面向传统数据中心,提供FusionSphere和VMware vSphere虚拟化环境下虚拟机的备份能力,提供海量虚拟机及磁盘的数据备份。
私有云备份
作为FusionCloud私有云的备份引擎,提供租户虚拟机数据备份恢复能力。
公有云备份
作为华为云和华为伙伴公有云的备份引擎,提供租户虚拟机数据备份恢复能力。