华为OceanStor9000大数据存储系统彩页

合集下载

华为OceanStor VTL6900彩页

华为OceanStor VTL6900彩页

领先的性能最大支持2304T B 裸容量(1690T B 可用),最大备份速度为 ■31TB/Hr可仿真256个磁带库,2048个磁带机以及50万盘磁带,兼容 ■所有主流厂商带库和带机支持所有主流操作系统平台下的主流备份软件■支持全局数据重删功能,可消除跨站点的重复数据,降低站 ■点间的带宽需求全面的可靠性在多节点架构下,VTL 引擎支持Active-Active 双机模式,SIR 引 ■擎支持2+1集群模式,确保系统稳定运行存储单元采用全冗余设计,确保读写过程可靠■采用双校验盘RAID6和Hot Spare 热备盘,确保数据安全保存 ■基于256位AES 算法进行仿真磁带加密,保证电子搬运的安 ■全性产品特性灵活的配置灵活的架构设计(一体化/单节点/多节点)以满足不同应用场景 ■灵活的重删方式(Inline 前端重删,后重删,无重删),可满足 ■客户不同需求全面的备份接口协议,同时支持NAS 、OST 、VTL 接口,灵活部 ■署于各种备份场景支持Host Backup 一体化备份方案,节省备份服务器,减少不 ■必要的空间占用和能耗支持磁盘休眠,能自动休眠没有I/O 任务的磁盘,显著降低备■份系统功耗便捷的维护性平滑替换物理磁带库或磁带机,已有备份软件和备份策略无 ■需变更支持ISM 统一管理■支持全局拓扑图,全面监控各引擎单元的状态 ■支持邮件告警,确保设备故障信息不会被忽视或遗漏■OceanStor VTL6900OceanStor VTL6900是华为推出的全新一代虚拟磁带库产品,能够为客户提供领先、可靠、灵活的数据保护功能。

VTL6900具有强大的仿真能力,能实现对所有主流物理磁带库和磁带机的虚拟,同时,VTL6900产品提供全局重复数据删除、远程复制等功能,在满足数据备份需求的基础上,实现低带宽下的异地数据容灾方案,以满足运营商、政府、银行、电力等价值行业的集中备份及数据容灾需求。

*备份性能按照1TB=1,000,000MB 计算,非重删VTL 最大性能双节点磁盘个数>300块,单节点磁盘数>80块*重删VTL 最大备份性能为Inline 重删性能,VTL-HAS 最大备份性能为两组集群对备份性能华为技术有限公司深圳市龙岗区坂田华为基地电话: (0755) 28780808邮编: 518129技术规格免责声明本文档可能含有预测信息,包括但不限于有关未来的财务、运营、产品系列、新技术等信息。

开源Ceph与华为OceanStor9000对比

开源Ceph与华为OceanStor9000对比
不支持
克隆
支持
不支持
复制
支持
不支持
Glance镜像管理
支持,与OpenStcak集成提供镜像管理服务。不来自持文件系统架构
非对称,有独立的MDS集群,使用动态子树,当前只有单MDS的版本是稳定的
全对称架构,节点同时提供MDS服务和数据存储服务,使用动态子树
私有客户端
主要方式,仅支持linux客户端,支持用户态和内核态
开源Ceph与华为OceanStor 9000的对比
Ceph
OceanStor 9000
服务类型
分布式块、文件、对象融合存储
分布式文件、对象融合存储
数据冗余
副本为主,支持EC
只支持EC
网络
GE、10GE
GE、10GE、IB
块服务
COW快照
支持,占用空间少
不支持
Cache和分级
支持SSD Cache和分级
少量场景使用,支持Linux和MAC私有客户端,内核态
协议
POSIX、HDFS、NFS、CIFS,NFS和CIFS通过外置网关实现
POSIX、NFS、CIFS、HDFS、FTP
配额
支持,依赖于客户端,有较多限制
支持,与客户端无关,更完善
增值
快照(未达生产环境要求)、负载均衡、动态扩容缩容、自动容量均衡
快照、负载均衡、动态扩容缩容、自动容量均衡、分级、远程复制、WORM、NDMP
对象
协议
S3、Swift、RADOS Lib
S3、Swift
多租户
Pool级别的租户隔离,支持并不完善
支持
多Region
支持
不支持
重删
不支持
支持,对象级重删

OceanStor混合闪存存储系统介绍

OceanStor混合闪存存储系统介绍

云计算
稳定性和性能的诉求永无止境
社交
移动
大数据
金融
运营商
心稳定性和性能 需持续提升以适应未来云架构
44 ZB预计2020年数据量
目 录
企业对IT系统的关键诉求
OceanStor V5,全新一代混合闪存系统
应用实践
1
23
华为OceanStor V5,全新一代融合闪存存储
CORE
协议解析
I/O读写
数据刷盘
专用
CORE
数据交换通道
Cache
Cache自适应算法智能识别workload业务特征,提供与匹配的Cache 预取、淘汰机制,Cache命中率提升100%,确保业 务快速处理
IO智能调度数据读写I/O永远第一优先级响应,其他I/O等数 据读写I/O完成后再重新启动,保障数据读写I/O 时延最低
多数据中心的融合
多数据中心的融合,伴随数据中心平滑演进
DC
双活DC1
3DC
DC
DC1
DC2
DC
业务不动,保护级别平滑升级
64:1集中灾备DC DC1
DC2
DC
DC
DC

多数据中心的融合
多数据中心融合,为用户提供多种级别的业务连续性保障从双活平滑升级到3DC,提供两地三中心最高级别的业务连续性从复制平滑升级到3DC,提供数据三重保险,保证数据永不丢失从3DC平滑升级到到多个DC,提供数据集中容灾与保障
HyperMetro多数据中心融合免网关一体化双活双活平滑升级到3DC
9
业界最全的闪存产品
5PB
15PB
45PB
25PB 35PB
0
All Flash Arrays

OceanStor9000存储系统技术白皮书

OceanStor9000存储系统技术白皮书

OceanStor 9000 V5华为OceanStor 9000 V5 横向扩展文件存储,采用全对称分布式架构,以其卓越性能、大规模横向扩展能力和超大单一文件系统为用户提供非结构化数据共享资源存储,能够应用于广电媒体、卫星测绘、基因测序、能源勘探、科研教育、视频监控、归档备份等多种业务应用及存储资源共享领域。

全对称分布式架构并行读写,性能领先⏹高性能的读写访问:单节点带宽最高可达2.8 GB/s,单盘性能业界领先⏹网络加速:支持10GE、25GE、40GE等多种组网形态,支持RDMA模式传输及TOE卸载,提高系统传输性能⏹线性增长:系统性能随节点增加线性增长,最高可达700GB/s带宽容量性能线性扩展,规模最大的单一文件系统⏹单一文件系统:140PB级存储容量,降低系统管理和维护的复杂度,并消除多个命名空间带来的数据孤岛⏹超强扩展:3节点到288节点的平滑扩展,容量、性能随节点增加而线性增长⏹数据均匀分布:Share-nothing全对称分布式架构,系统的数据和元数据均匀分布在各个节点上,消除单独的元数据节点访问瓶颈⏹超高利用率:高可靠性的同时,硬盘利用率最高可达95%开放融合,承载多种应用⏹多种接口:支持NFS,CIFS,NDMP,FTP,HDFS等多种接口,一个系统承载多业务应用,实现数据的全生命周期管理⏹多种节点类型:支持多种节点类型,支持不同应用承载⏹管理融合:实现对IT设备统一管理,提供分析报表,简化管理复杂度,提升运营效率全方位可视化,简化资源管理⏹可靠性灵活配置:支持基于目录的冗余配比策略,提供不同的数据保护级别⏹自动统计和分析:自动化的性能统计及分析,辅助合理利用资源⏹自动部署:软件平台自动化部署和配置,“一键式”快速扩容,单节点扩容60秒之内完成⏹权限管理:提供针对IP地址或用户/用户组的访问权限控制,创建安全、隔离的存储池Info系列软件,智能存储管理InfoEqualizer,客户端连接负载均衡⏹跨节点的客户端连接负载均衡,自动平衡容量和性能,优化集群资源⏹智能统一管理,支持节点故障切换(failover)和故障恢复(failback)⏹基于DNS域名的负载均衡技术,支持多种负载均衡策略配置InfoTier,动态分级存储⏹不同节点间动态分级存储,热点数据智能迁移,让不同性价比的存储发挥最大效益,降低TCO⏹支持多种数据迁移策略和优先级设置,无缝适应业务需求及变更InfoAllocator,空间配额管理⏹在目录、用户、用户组的级别对存储进行精简资源调配,满足不同客户所需⏹支持配额项的多层嵌套关系管理,为客户提供易用,弹性灵活的空间访问InfoProtector,高可靠数据保护⏹应用Erasure Code专利技术实现N+M数据保护–InfoProtector,业界最高水平的数据可靠性和可用性保护机制,可支持4个节点同时故障的数据保护⏹系统能够自动重构,多节点并行重构数据,重构速度高达2TB/小时InfoStamper,快照功能⏹目录级别快照,快速数据恢复⏹支持手动快照、定时快照(以天/周/月为粒度)InfoLocker,WORM功能⏹保护数据免遭意外、恶意更改和删除⏹支持设置WORM时钟,设置保护期InfoReplicator,异步远程复制⏹减少系统恢复时间,应用于灾难恢复,数据备份或远距离数据迁移⏹支持不同目录1:N复制,N:1复制InfoRevive视频监控图像修复功能硬盘故障损坏不影响视频流畅度,只对实际丢失数据进行空置处理技术规格。

华为OceanStor9000技术主打胶片(ppt 54页)

华为OceanStor9000技术主打胶片(ppt 54页)

Huawei Confidential
11
OceanStor 9000关键能力-简单
传统NAS存储 安装• (1管1步理)不同扩文展件(9系步统) <10管0理T(B7步)
上架及连线 配置HBA 规划RAID,热备盘 配置RAID,热备盘 规划LUN 配置LUN 格式化卷 安装文件系统 网络配置 数据共享 调整各FS数据量
HUAWEI TECHNOLOGIES CO., LTD.
Huawei Confidential
1
OceanStor 9000大数据存储系统主打胶片
融合扩展 简单高效
HUAWEI TECHNOLOGIES CO., LTD.
Huawei Confidential
2
目录
1 知易行难,大数据的挑战 2 打破陈规,华为应对之道 3 真知灼见,行业深度剖析 4 行以见效,华为应用实践
5
知易行难,大数据的挑战二
性能
成本
数据按照热、温、冷分级管理,带 来数据割裂,自动化程度低,数据 迁移代价高,时效性差,管理复杂
大数据处理中需要高性能系统 的支撑,而性能的提升往往带 来成本的压力
传统技术面临大数据生命周期管理的挑战
HUAWEI TECHNOLOGIES CO., LTD.
Huawei Confidential
上架及连线 点击扩容按钮
创建目录 数据共享
简单
HUAWEI TECHNOLOGIES CO., LTD.
Huawei Confidential
12
夯实的基础架构
控制器
硬盘框
• Scale-up架构 • 专用硬件 • 后端SAS专用网络
HUAWEI TECHNOLOGIES CO., LTD.

华为OceanStor存储产品全家福(Chinese)

华为OceanStor存储产品全家福(Chinese)

华为OceanStor 存储产品全家福华为技术有限公司OceanStor VTL69003TB NL SAS 或8*10GE iSCSI OceanStor HDP3500E存储服务器Intel 多核处理器OceanStor VIS6600T多节点集群,负载均衡Active-Active 节点,最大可扩展为8节点位多核OceanStor Dorado2100 G2OceanStor Dorado5100Active-Active8Gbps FC 10 Gbps iSCSI存以智用(智能):、智能弹性架构华为存储在产品架构上都将支持分布式弹性架构,可以根据业务的发展智能扩展,容量、性能线性增加,存储产品伴随业务成长而成长,并有年起发布的高端产品都采取了分布式架构,无论是面向企业关键应用的分布式SAN ,还是面向海量云存储领域的分布式对象存储UDS 。

由于三个产品的核心定位不同,相应地在分布式架构的华为存储在底层数据布局上采取两层虚拟化技术,不再是传统的基于物理磁盘的RAID 组,而是采用更小粒度的逻辑磁盘单位形成数据保护单元OceanStor S2600TOceanStor S5500TOceanStor S5600TOceanStor S5800T多核多处理器组多核多处理器组多核多处理器组多核多处理器组8GB/16GB/32GB 24GB/48GB 96GB/192GB 1.2TB 2.4TB 3.6TB228Gbps FC ,1Gbps iSCSI ,10Gbps iSCSI(TOE),10Gbps FCoE OceanStor S2200T存储处理器多核多处理器组OceanStor S6800T多核多处理器组192GB/384GB 4.8TB28 Gbps FC ,1 Gbps ISCSI 10 Gbps ISCSI(TOE)OceanStor 18500OceanStor 18800 Smart Matrix Architecture16多核多处理器768GB 3,072GB OceanStor N8500多节点全Active 集群架构16GB 24GB 48GB96GB ,可扩展至4 x GE ,可扩展至最大支持6 x 10GE智能弹性架构多协议融合智能数据布局高中低端融合智能管理调度全生命周期管理融合智能融合。

华为OceanStor 9000 大数据存储系统等

华为OceanStor 9000 大数据存储系统等

华为OceanStor 9000 大数据存储系统等作者:暂无来源:《计算机世界》 2013年第46期华为OceanStor 9000 大数据存储系统获奖理由:采用全对称分布式架构,集海量数据存储、归档、分析等功能于一体,适用于广电媒体、卫星测绘等多种大数据业务应用场景。

华为OceanStor 9000 大数据存储系统采用全对称分布式架构,集海量数据的存储、归档、分析等功能于一体,以业界领先的卓越性能、大规模横向扩展能力和超大单一文件系统为用户提供非结构化数据共享资源存储,适用于广电媒体、卫星测绘、基因测序、能源勘探、电信运营商、科研教育等多种大数据业务应用场景。

其集业界最大扩展能力的分布式文件系统及先进的全对称分布式架构于一体,单一文件系统容量最高可达40PB,且支持容量、性能的线性扩展,在以Scale-out 架构从3 个节点扩展到288 个节点时,其容量、性能能够随节点数量的增加而线性增长,在保证业界最高水平数据可靠性的同时,全方位实现可视化,做到资源的统一管理。

此外,华为OceanStor 9000 大数据存储系统还内置Wise 系列管理软件,帮助用户实现智能化的存储系统管理。

捷视飞通(iFreecomm)MT200 移动单兵智能终端获奖理由:采用“三防”工业设计标准,是应对复杂环境突发事故应急工作的必备利器。

捷视飞通倾力打造的业界惟一可以实现视频音频多方通讯的智能终端——MT200移动单兵智能终端能够实现多方高清视频音频的实时传输、显示、本地存储、拍照、文件自由下载、上传、远程共享等业务应用。

其支持Wi-Fi、3G、4G 网络接入,内置GPS定位系统可以精准定位机主所在位置,外接传感设备则能精确分享机主所在位置的环境信息,多方搜集和共享环境数据,有效辅助多角度的信息分析,保证指令分析全面、判断准确。

MT200 移动单兵智能终端专门针对复杂环境突发事故应急工作定制开发,采用“三防”工业设计标准,能手持、可背负、支持车载,可延伸到更复杂、更恶劣的环境中抓取现场信息,做到信息实时传输、全面共享。

华为OceanStor 5300 5500 5600 5800 V3中端存储系统彩页

华为OceanStor 5300  5500  5600  5800 V3中端存储系统彩页
资源效率提升
存储管理软件 虚拟化特性支持 异构虚拟化 块级虚拟化 计算虚拟化支持
5300 V3
5500 V3
5600 V3
5800 V3
多核多处理器组
32GB~256GB
48GB~512GB
64GB~512GB
8
8
8
FC、FCoE、iSCSI、InfiniBand、NFS、CIFS、HTTP、FTP
SmartQoS(智能服务质量控制),SmartPartition(智能分区),SmartCache(SSD智能缓存)
SmartTier(智能数据分级), SmartThin(智能精简配置),SmartMotion(智能数据迅移),SmartMulti-Tenant(多租户), SmartMigration(LUN迁移), SmartCompression(在线压缩),SmartDedupe(在线重删), SmartQuota(配额管理), SmartErase(数据销毁)
1Gbps Ethernet、10Gbps FCoE、10Gbps TOE、16Gbps FC、56Gbps InfiniBand
SAS3.0(单端口4*12Gbps)
2
2
8
12
12
28
500
750
1000
SSD、SAS、NL SAS
0, 1, 3, 5, 6, 10, 50
256
1024
2048
2048
■■高中低端的融合:业界唯一高中低端互联互通,无需借助第 三方系统,数据即可在不同型号设备中自由流动。
■■SSD和HDD的融合:集成传统存储和全固态存储双重优势,可 将不同类型介质的性能均发挥到极致,满足用户在性能和成 本上的最优均衡。

OceanStor9000横向扩展文件存储概述

OceanStor9000横向扩展文件存储概述

行业需求带来容量和性能的挑战
媒体娱乐
4K、8K时代,需要数倍 于传统影片的存储容量
视频监控
百万人口的平安城市建 设,需要存储数万路视频 存储
生命科学
每年2倍的数据增长
海量数据驱动存储创新
原始 分布式
• 写多份,利用率低,容 忍“单” 点故障
• 缺乏统一、图形化管理 • 未针对视频类应用优
化,性能差
7
全分布式架构,高可靠数据保护
+1 +2 +3 +4
N+1~N+4的数据保护,
最大允许4块硬盘/节点故障 磁盘利用率最高达95%
条带化存储,平衡利用率与可靠性
基于N+M构建冗余
均衡分发
文件切分为固定
1
大小的Chunk
N+M以6+2冗余为例
2
条带
3
4

5

6
……
7
8
……
9 元

10

卓越性能
易于扩展
可扩展至140PB单一文件系统,系统带宽可以达到 TB/s,性能随容量增加而线性增长
……
HPC——高效简单的存储解决方案
高性能
容量性能线性扩展,可预期; 私有客户端,全面提升系统带宽
高可靠
全对称架构,系统无单点故障, 长时间稳定运行,数据更安全;
快速数据恢复
简单易用
全方位可视化统一资源管理,包括后端 万兆交换机;
单节点图片性能最高可达7000张/秒
InfoRevive视频修复技术 可靠性达99.999%
突破海量文件存储性能瓶颈,千亿级图片秒级检索
文件聚合

华为 OceanStor T 系列统一存储系统说明书

华为 OceanStor T 系列统一存储系统说明书

OceanStor T Series Unified StorageHighlightscationUnified SAN and NAS: Supports SAN and NAS storage protocols, structured and non-structured data within one storage system Unified protocols: Compatible with various storage networks and protocols, including iSCSI, FC, NFS, CIFS, HTTP, and FTPGUI-based central storage management:Provides a graphical user interface for central management of fi les and data blocks. The wizards guide users through every con fi gurationFlexibility and ReliabilityUpgrade: Users can easily upgrade block-level storage to uni fi ed storage Hot swapping modules: Users can hot-swap controllers, fans, power supplies, I/O modules, and hard disks without compromising ongoing user servicesDiversified disk types: Supports SAS, NL SAS, SATA, FC and SSD disks, tting into various scenariosReliable architecture: Full component redundancy prevents single points of failure. Data coffer and fi le system mirror improve system reliability Advanced I/O port scalability and flexibility: Supports up to 12ModelS2600TS5500TS5600TS5800TBlock Storage Component Storage processor Multi-core processors Cache size8GB/16GB 8GB/16GB/32GB 24GB/48GB 96GB/192GB Extended cache1.2TB 1.2TB2.4TB3.6TBNumber of controllers 2Front-end port types 8Gbps FC, 1Gbps iSCSI, 10Gbps Iscsi(TOE)8Gbps FC, 1Gbps iSCSI, 10Gbps iSCSI (TOE), 10Gbps FCoE Back-end port types 6Gbps SAS 2.0 wide port 6Gbps SAS 2.0 wide port 4Gbps FC,6Gbps SAS 2.0 wide port 4Gbps FC,6Gbps SAS 2.0 wide port Number of onboard I/O ports Front end: 12 x 1 Gbps iSCSI ports;Back end: 4 x SAS 2.0 wide ports Front end: 8 x 8 Gbps Fibre Channel ports;Back end: 4 x SAS 2.0 wide ports 00Maximum. number of I/O modules221012Maximum number of disk slots 27652811521440Supported disk types SAS, NL SAS, SATA, SSD SAS, NL SAS, SATA, SSD SAS, NL SAS, SATA, SSD,FC SAS, NL SAS, SATA, SSD,FC RAID levels0,1, 3, 5, 6, 10, 50Maximum number of snapshots 256102420482048Maximum number of LUNs 2048409640968192Mobile Management Supported.N/A N/A N/A TurboModule Supported.Functional software HyperImage (snapshot),HyperCopy (LUN copy), HyperClone (split mirror), HyperMirror (synchronous/asynchronous remote replication), HyperThin (thin provisioning), UltraPath (multipathing), DiskGuard (host-side data protection), SmartCache (dynamic data caching in TurboBoost)File Storage Component Number of file engine nodes 22, 42, 4, 62, 4, 6, 8Cache size per node 16GB 16GB 24GB 24GB File softwareDST (dynamic storage tiering), Snapshot (file system snapshot), Mirror (file system mirror),Replication (file system remote replication), Symantec NetBackup Client (embedded Symantec network backup client)ProtocolFC, iSCSI, NFS, CIFS, FTP , HTTPCompatible operating system Including AIX, HP-UX, Solaris, Linux, WindowsVirtual Environment Virtual machine VMware, Citrix, Hyper-VValue-added feature VMware VAAI support for VSphere and VCenter integrationPhysical Specifications Power supplyAC: 100 V to 127 V, or 200 V to 240 V DC: –60 V to –48 VArray power consumption 2 U controller enclosure: ≤380W4 U controller enclosure: ≤527W2 U controller enclosure: ≤ 539W2 U disk enclosure: ≤307W4 U disk enclosure: ≤ 527W4 U controller enclosure: ≤598W 2 U disk enclosure: ≤307W 4 U disk enclosure: ≤527W File engine power consumption 4 U file engine: ≤ 800WArray dimensions (H x W x D)2 U controller enclosure: 86.1mm x 446mm x 582mm 4 U controller enclosure: 175mm x 446mm x 502mm 4 U disk enclosure: 175mm%446mm%412mm 2 U disk enclosure: 86.1mm x 446mm x 412mm 4 U disk enclosure: 175mm x 446mm x 412mm File engine dimensions (H x W x D) 4 U, 175mm x 446mm x 502mmWeight2U Controller enclosure≤ 22.98kg4U Disk enclosure ≤ 25.2kgController enclosure ≤ 23.9kg 2 U SAS disk enclosure ≤ 14.9kg 4 U SAS disk enclosure≤ 25.2kg Controller enclosure ≤ 43.6kg2 U SAS disk enclosure ≤ 14.9kg4 U SAS disk enclosure ≤ 25.2kg4 U FC disk enclosure ≤ 24.9kgTechnical Speci ficationsHUAWEI TECHNOLOGIES CO., LTD.Huawei Industrial BaseBantian LonggangShenzhen 518129, P .R. ChinaTel: +86-755-28780808Copyright © Huawei Technologies Co., Ltd. 2013. All rights reserved.THIS DOCUMENT IS FOR INFORMATION PURPOSE ONLY, AND DOES NOT CONSTITUTE ANY KIND OF WARRANTIES.。

华为海洋星9000扩展NAS产品说明书

华为海洋星9000扩展NAS产品说明书
The OceanStor 9000 is ideal for Big Data service scenarios, such as film and TV, satellite mapping, gene sequencing, energy exploration, and scientific research, education, and provider services. With advanced processing features and data lifecycle management, the OceanStor 9000 helps customers build industry's most efficient Big Data storage capabilities.
Multiple interface support
NFS, CIFS, NDMP, FTP, HDFS, Amazon S3/OpenStack Swift, and other interfaces to allow the system to support diversified applications and achieve data management throughout the entire lifecycle.
Fully symmetrical distributed architecture featuring impressive parallel read-write capabilities
High-performance read/write access
Exclusive InfoTurbo acceleration technology achieves up to 2.5 GB/s in bandwidth over a single client.

OceanStor 9000 大数据存储系统

OceanStor 9000 大数据存储系统

数据源
数据导入
中间数据
数据分析
分析结果
数据保存
数据应用
存储系统
分析系统
归档系统
如何构建高效的大数据存储架构是CIO面临的共同挑战
HUAWEI TECHNOLOGIES CO., LTD.
Huawei Confidential
5
目录
1 知易行难,大数据的挑战 2 打破陈规,华为应对之道 3 行以见效,华为应用实践
10TB 员工a
10TB 员工b
10TB 员工c
10TB 员工d
容量配额 软配额 用户配额 用户组配额
文件数配额 硬配额 目录配额
匹配复杂的“组织架构”,空间灵 活分配
多种配额策略,存储空间精打细算
HUAWEI TECHNOLOGIES CO., LTD.
Huawei Confidential
3
基因分析机构CIO的IT挑战
人/动物/植物
基因序列
基因测序
基因对比
分析结果
基因保存
基因数据应用
数据存储
测序系统(30台高速测序仪)导入数据需要 24GB/s以上的存储吞吐能力,是传统存储的 12倍。
需要高吞吐、高并发的 存储系统
数据分析
分析一个人体样本基因,传统HPC集群需要 346小时,大规模Hadoop集群仅需24小时, 不同的分析平台,效率相差14倍。
系统容量 业界第一
华为
40PB
VS 业界最高
20PB
(EMC isilon)
2倍
扩展能力 业界第一
40PB 华为
容量 288个
VS 业界最高
144个
(EMC isilon)

华为 OceanStor 云存储服务方案彩页

华为 OceanStor 云存储服务方案彩页
ξႅ‫ו‬
ࠒऑ˔̡Ὁ ஝૶Տ൦nj‫֗͋ܬ‬Ѭ̚
̉ᤌᎪ*41*$1͍ˊὉ ቇᫎምᠨἻߛϲடՌ
ࠒऑ˔̡
͍ˊὉ஝૶‫͋ܬ‬nj ॆೂnjप‫ࠔڡ‬༫ ԣѬ̚njල঴
̉ᐏᎪ*41*$1 ܸ‫ˊ͍ی‬
产品特性
多领域的业务交付能力
在电信运营商、公共事业、教育等多个行业实现商用部署,方 案成熟;可提供多种数据接入手段,支持在线存储、在 开发。
子特性 访问方式
虚拟网络硬盘方式
WEB页面方式
手机客户端方式
备份与恢复 重复数据删除 加密 访问方式 租户管理 资源管理
备份
恢复 NAS共享 存储服务接口 外部接口 浏览器兼容性
客户端兼容性
并发能力 存储吞吐能力
描述 支持虚拟网络硬盘、WEB页面及手机客户端方式访问 文件/目录管理:支持文件批量/断点上传、下载,以及文件/文件夹的新建、删除、重命名等操作 支持txt、doc、xls、ppt文件的编辑,支持虚拟盘中的文件保存或传输状态显示 用户可设置数据上传到云的同步策略 支持流量控制,用户可调节上传/下载占用带宽 支持txt、doc、xls、ppt文件的编辑 支持jpg、jpeg、gif、bmp和png格式图片的预览和放映 支持好友的信息管理及群组管理 支持多种数据共享方式:帐号间共享、群组共享(共享时可设置读/写权限属性) 支持文档版本管理(版本生成、查看、下载和删除),系统默认提供最近的10个版本 支持从云端下载、复制、粘贴、移动、重命名和删除文件 支持视频和音频播放器播放媒体文件 支持JPG / JPEG、GIF、PNG、TIFF、BMP、TGA格式的图片浏览 支持图片文件上传到sina、QQ微博,以及调用系统相机拍照后直接上传云端 支持每天、每周、每月和一次性任务策略配置,支持目录/文件备份与恢复,并支持任务级的断点续传 支持上传时文件内容级的重复数据删除 支持HTTPS通道加密,支持数据在备份前用户对数据本身加密 支持REST方式的接口调用 支持租户信息以及租户关联的空间管理 支持添加、修改存储域和资源组信息 支持文件及应用的备份 支持打开的文件或应用的备份 支持将需要备份主机的数据备份到CSA,并将CSA中的数据上传到云 支持网页方式进行备份策略设置,包括手动、定时备份策略设置,支持全量、增量和差异备份 支持从云存储系统上恢复备份数据到CSA,并从CSA将备份数据恢复到需要恢复的主机 支持CIFS方式文件目录共享,并可设置多个共享目录;支持将NAS共享数据备份上云以及从云中恢复

第三章 大数据存储系统

第三章 大数据存储系统

交换机
S5700-52C-SI/S5352C-SI
IS5023
8口KVM控制器
调制解调器
说明
提供42U内部安装空间。 2U 12数据盘(典型配置:12 SATA硬盘,或1 SSD+11 SATA硬盘) 2U 25数据盘(典型配置:1 SSD+24 SAS硬盘) 4U 36数据盘(典型配置:1 SSD+35 SATA硬盘) 4U 36数据盘(典型配置:36 SATA硬盘) 4U 72数据盘(典型配置:72 SATA硬盘) 10GE以太网交换机。 GE以太网交换机。 IB(InfiniBand)交换机 提供8路键盘、鼠标和视频端口。 用于提供告警的短信通知功能。
视频监控
HPC
网盘
话单查询
上网行为分析
精准营销
商业推广
应用层
文件
NFS
CIFS
对象
HDFS
Object
数据处理层
分布式文件系统 OceanStor DFS
检索查询
SQL
分布式数据库 WushanSQL
数据分析
MR/Hbase
企业级Hadoop FusionInsight Hadoop
归档
硬件节点层 Node
风扇配置 CPU 内存 保电内存 操作系统 硬盘
支持1+1风扇冗余 2×Intel Xeon 6核 2.2GHz 48GB 2GB NVDIMM
2×300GB 10K rpm 2.5寸 SAS (RAID1)
P36(Capacity)节点(续)
支持硬盘类型
36+2 个硬盘槽位 支持1个3.5 英寸的业务硬盘(SSD),插入0号槽位 支持35个3.5 英寸的业务硬盘(SATA),插入1号~35号槽位 支持2 个2.5 英寸的后置操作系统硬盘(SAS)

华为OceanStor 9000 Data Sheet(详版)

华为OceanStor 9000 Data Sheet(详版)
OceanStor 9000 大数据存储系统
华为技术有限公司
OceanStor 9000
华为OceanStor 9000是面向大数据的存储系统,采用全 对称分布式架构,以其业界领先的卓越性能、大规模横 向扩展能力和超大单一文件系统为用户提供非结构化数 据和结构化共享资源存储,能够应用于广电媒体、卫星 测绘、基因测序、能源勘探、科研教育、视频监控等多 种大数据业务应用及存储资源共享领域的需求。
载,提高系统传输性能 ■■内 部 高 速 互 联 : 系 统 组 网 冗 余 , 全 I P 互 联 , 支 持 1 0 G E
Ethernet、GE Ethernet或Infiniband网络互联 ■■全局缓存:最大可支持55TB全局缓存,提高数据访问命
中率
容量性能线性扩展,规模最大的单一文件系统 ■■单一文件系统:容量高达60PB,降低系统管理和维护的
不构成任何要约或承诺。华为可能不经通知修改上述信息,恕不另行通知。

复杂度,并消除多个命名空间带来的数据孤岛 ■■超强扩展:3节点到288节点的平滑扩展,容量、性能随
节点增加而线性增长
■■数据均匀分布:Share-nothing全对称分布式架构,系统的 数据和元数据均匀分布在各个节点上,消除单独的元数 据节点访问瓶颈
■■超 高 利 用 率 : 高 可 靠 性 的 同 时 , 硬 盘 利 用 率 最 高 可 达 95%
系统管理
物理特性 电源 尺寸 (高×宽×深) 节点重量 典型功耗 工作环境温度 工作湿度
节点 机柜
Insight node
全对称分布式架构 3~32节点 2×Intel E5系列 标配96GB,可扩展至192GB 支持2.5寸600GB SAS硬盘 标配25×2.5" 600GB SAS或无硬盘 1GE Ethernet 或10GE Ethernet 10GE Ethernet 非结构化和半结构化数据分析场景

OceanStor N9000存储设备测试方案

OceanStor N9000存储设备测试方案

华为OceanStor N9000存储设备测试方案目录1.项目背景 (4)2.测试目的 (4)3.测试人员和职责 (4)3.1.人员分配 (4)3.2.职责划分 (4)3.3.测试计划 (5)4.测试安排 (5)4.1.时间 (5)4.2.地点 (5)5.测试项目 (6)5.1.架构 (6)5.2.基本性能 (6)5.3.业务性能 (7)5.4.云存储特性 (7)5.5.企业存储特性 (8)5.6.系统可靠性 (8)6.测试环境 (8)6.1.测试设备 (8)6.2.网络基础设施 (8)6.3.拓扑和配置 (8)6.4.测试工具 (9)7.测试过程 (9)7.1基本功测试 (9)7.1.1NFS基本功能 (9)7.1.2 CIFS基本功能 (10)7.1.3 FTP基本功能 (11)7.2扩展功能测试 (12)7.2.1配额测试 (12)7.2.2配额空间管理测试 (13)7.2.3业务隔离测试 (14)7.2.4认证和权限管理 (16)7.2.5InfoStamper快照功能 (18)7.2.6NDMP归档备份 (19)7.2.7远程复制 (20)7.3可靠性测试 (22)7.3.1硬盘故障 (22)7.3.2节点故障 (23)7.4数据恢复性能测试 (24)数据恢复性能测试 (24)7.5业务性能测试 (25)7.5.1极限读写性能测试 (25)7.5.2时延性能测试 (25)7.5.3稳定写性能测试 (26)7.5.4稳定读性能测试 (26)7.6基本性能测试 (26)7.6.1使用物理客户端性能测试 (26)7.6.2使用虚拟机客户端性能测试 (27)7.7扩展能力测试 (27)7.7.1删除节点测试 (27)7.7.2扩容节点测试 (28)1.项目背景2.测试目的本次测试的主要目的是为了更好的云计算系统了解各厂家存储满足应用的关键特性功能和性能,为云计算平台的存储系统提供完善可行的解决方案。

OceanStor9000海量存储产品介绍

OceanStor9000海量存储产品介绍

智能负载均衡(InfoEqualizer)
OceanStor 9000 V5
OceanStor DFS
InfoEqualizer InfoEqualizer InfoEqualizer InfoEqualizer
node
192.168.0.20
node
192.168.0.22
node
192.168.0.24
Node 1
Node 2
Node 3
一级缓存:文件分条 二级缓存:SSD
三级缓存:保电缓存
全局缓存
应用服务器
A
B
C
CPU Memory
CPU 全M局em缓o存ry
CPU Memory
storage
storage
storage
全局缓存使所有存储节点上的内存空间在逻辑上组成一个统一内存资源池
任何存储节点都可以命中全局缓存中的数据,同时所有用户数据在整个系统中只缓存一份且不缓 存校验数据
OceanStor 9000 V5 交换单元
GE Switch
25GE Switch
10GE Switch
Infiniband Switch
华为自研,管理交换机 1U,48*GE RJ45
华为自研,业务交换机 1U,48个25GE SFP28 接口,8个100GE
QSFP28接口
华为自研,业务交换机 1U,48口万兆SFP
Node A
Node B
Node C
①主机E向Node C的客户端发出数据读请求
②Node C的客户端向分布式锁服务器申请分条资源读锁
③系统检查所读数据的缓存是否在全局缓存中以及缓存 在哪个节点上,左图显示该文件分条资源在Node A节点 上的缓存中

华为OceanStor 9000技术建议书(纯方案,17页)

华为OceanStor 9000技术建议书(纯方案,17页)

目录1.1 项目背景.............................................................................................................. 错误!未定义书签。

1.2 建设规模及目标.................................................................................................. 错误!未定义书签。

2设计依据及原则 . (2)2.1 方案设计原则 (2)3系统设计方案 (4)3.1 客户面临问题及典型需求.................................................................................. 错误!未定义书签。

3.2 系统设计方案 (4)3.3 拓扑结构 (5)3.4 软硬件配置说明 (6)4方案特点及优势 (7)4.1 弹性扩展 (7)4.2 卓越性能 (8)4.3 数据可靠 (9)4.4 简化管理 (11)5相关产品介绍 (12)5.1 产品概述 (12)5.2 产品形态介绍 (12)5.3 产品规格表 (14)6缩略语表 (17)1 设计依据及原则1.1 方案设计原则通过对用户需求的了解,结合音频中心媒资系统的应用特点,建议用户存储系统在建设过程中应当遵循如下原则进行:安全可靠性原则●系统支持分布式架构●系统支持从硬件层面,数据层面到业务层面高可用,满足可用性原则;●系统支持存储系统集群,满足高可靠性需求;●系统具备充分的数据冗余,数据容错能力;●系统具有专业的技术保障体系以及数据可靠性保证机制;●系统在存储节点损坏时(包括硬盘,机柜的故障),不会丢失数据;●系统在发生数据损坏时,有数据自愈能力;●对工作环境要求较低,环境适应能力强;●确保系统具有高度的安全性,提供安全的登录和访问措施,防止系统被攻击;●异常掉电后不丢失数据,供电恢复后自动重新启动并自动恢复正常连接;●系统器件选择要考虑能支持7×24小时连续长时间大压力下工作;扩展性原则●系统易于扩展,支持10PB级数据存储;●系统在容量扩展时,性能得到提升;●系统选择标准化的部件,利于灵活替换和容量扩展;先进性原则●系统必须严格遵循国际标准、国家标准和国内通信行业的规范要求;●需符合存储技术以及IT行业的发展趋势,所选用的产品型号已规模上量;●所有的系统处于先进的技术水平,确保较长时间内技术上不落伍;●系统的处理能力要达到业内领先,对于本次业务的使用要留有一定的余量,以满足后续升级的需求;开放性原则●系统必须支持国际上通用的标准网络存储协议、国际标准的应用开放协议;●与主流服务器之间保持良好的兼容性;●兼容各主流操作系统及应用程序;●可以与第三方管理平台集成,提供给客户定制化的管理维护手段;●满足今后的发展,留有充分的扩充余地;易维护性原则●系统支持简体中文,通俗易懂,操作方便、简单;●系统具有充分的权限管理,日志管理、故障管理,并能够实现故障自动报警;●系统设备安装使用简单,无需专业人员维护;●系统容量可按需要在线扩展,无需停止业务;●系统功能扩充需要升级时,支持不中断业务升级;●支持图形化界面管理方式;经济性原则●综合考虑集中存储系统的性能和价格,最经济最有效地进行建设,性能价格比在同类系统和条件下达到最优。

  1. 1、下载文档前请自行甄别文档内容的完整性,平台不提供额外的编辑、内容补充、找答案等附加服务。
  2. 2、"仅部分预览"的文档,不可在线预览部分如存在完整性等问题,可反馈申请退款(可完整预览的文档不适用该条件!)。
  3. 3、如文档侵犯您的权益,请联系客服反馈,我们会尽快为您处理(人工客服工作时间:9:00-18:30)。
相关文档
最新文档