存储优化解决方案

统一存储 FC/IP/NAS
集群存储 分布式/Lustre
存储池
存储节点
集群文件系统消冗解决方案
数据消冗特点
由消冗设备执行 不占用业务服务器资源 仅有元数据通过网络进行传输
数据读取特点
业务服务器上的消冗客户端 从元数据服务中获取文件元数据信息 从数据服务中获取索引数据 蓝鲸客户端读取对应的数据 只有元数据和索引通过网络进行传输
联机处理
1. 无需额外磁盘空间 2. 可预测，保证SLA 3. 管理简单 1. 算法较为复杂 2. 性能依赖CPU
后处理方式消重
消重
联机处理方式消重
消重
存储
存储
重复数据消除 – 文件级 vs. 数据块级
文件级 优点 缺点
1. 算法简单 1. 低消重率
数据块级
1. 高消重率 1. 算法较为复杂
文件级消重
赛思消冗网关适用场景
典型应用场景：
数据量巨大，并且需要长期保留，但数据在留存期的访问 量不大
档案 备份
典型用户：
安全、运营商、互联网、媒体等多个行业用户
安全
电信
互联网
媒体
赛思消冗网关特点
赛思信安存储优化产品
产品特点:
先进的数据消冗技术，降低用户存储设备投资 异构阵列资源整合，提升用户存储利用率 架构先进，完美融合FC、IP、SAS架构 绿色环保，降低数据能耗
进入存储优化市场，建立研发体系 成为国内拥有自主知识产权的消冗系统研发第一家；
赛思信安简介(continue)
数项软件 公安部销 ISO900 双软 认证 企业 1质量管 理体系 认证 2011年度 数项软 件产品 5项注 登记证 册商标 书 中国行业 信息化创 新产品奖
数项发 明专利
著作权
赛思信安数据块的切分技术
服务应用
数据流
第一次数据 A B C B D
第二次数据
A B E
第三次数据 A B C
F
D
E
赛思消冗存储: 冗余数据汇聚, 重复数据删除
A
B
C
D
E F
= 可变长数据段
= 冗余数据段 = 经过消冗的数据段
赛思消冗网关核心技术
索引分为两个层次 一级索引放到内存 二级索引放到外存 优势：减少了数据块 查询IO，提高了重复
整合挖掘数据价值，提高客户投资回报
愿景
实现人与数据沟通，提升客户潜在价值
赛思信安简介(continue)
进军大数据应 用领域，深化消冗 核心技术； 进一步完善全国7大 营销和服务中心的建设； 形成存储优化系列、大数据管理系统、通用 存储、数据安全与管理、高性能计算五大产品 线，并推出诸多行业解决方案； 在政府、公安、军队、教育、互联网等行业 广泛应用； 分布式存储消冗产品上市,布局大数据,形成赛思消冗系列 产品线和行业解决方案 获得工信部及国家发改委信息安全产业化项目支持； 公司通过了ISO9001质量管理体系认证和双软企业认证； 面向单节点的数据消冗产品的面世； 消冗率达到国际同类产品的先进水平;
Primary Disk SATA Tape
Storage 3.0
Primary Dedupe SATA
Before After
Tape
Storage 4.0
Flash Dedupe SATA
Before After
赛思信安数据消冗原理
赛思信安数据消冗原理简述
消冗后数据
+
数据消冗引擎 正常情况下的数据形态 指针数据 消冗后数据形态
缺点
1. 只支持IP网络 2. 重新布署备份架构 3. 对源端的影响
1. 传输数据量不变 2. 备份链路无节省 3. 加速备份？
源端重复数据消除
备份设备
目标端重复数据消除
网络
备份客户端
网络
备份客户端
备份设备
重复数据消除 – 后处理 vs. 联机处理
后处理 优点 缺点
1. 算法简单 2. 写入速度不受影响 1. 2. 3. 4. 额外磁盘空间，增加成本 性能依赖磁盘 无法预测，不保证SLA 管理复杂
SS8600系列
数据应用
数据中心的困境
数据中心 耗能日趋紧张 面临越来越多的困扰 日益增多的困扰
数据存储 维护成本 剧增
数据中心
设备存放 空间不足
解决之道：赛思数据消冗！
远程传输需求增 加，带宽压力大
数据消冗支撑下一代存储架构
Storage 1.0
Primary Disk Tape
Storage 2.0
3.备机服务和备件库 通过备件无法解决的重 大故障，公司将向用户 提供备机，供用户应急 使用；
3.现场服务 进行现场故障解决、备 件更换、维护保养等服 务；
目 录
赛思信安简介
赛思信安存储优化产品线
赛思信安存储优化解决方案
典型案例分享
赛思信安产品线概览
高性能产品 存储优化产品
SD 消冗系列
数据安全与存储管理
售许可
2012年中 国存储软 件领军企 业奖
2012年 SNW世 界存储大 会优秀解 决方案奖
赛思信安简介(continue)
赛思信安简介(continue)
服务架构
1.北京总部技术支持中 心 负责产品研发、技术培 训、方案设计、维修保 养、跟踪反馈及技术疑 难解答等； 2.各地办事处 辐射全国，负责全国用 户售后服务及技术支持；
备份一体机 SV系列虚拟带库
大数据管理系统
数 据 管 理
众核云服务器
SR1000系列
数据处理卡 虚拟化管理平台 持续数据保护
入门级
部门级
企业级
数据中心级
SN1000系列
SS2000系列
SS3000系列 SN8000系列
SS1600系列
SS2600系列 SN2600系列
SS5600系列 SS6000系列
SD800
可用容量<100TB 逻辑容量 200TB-500TB 4个千兆、1个4GbFC 可用容量< 50TB 逻辑容量 100TB-250TB 2个千兆、1个4GbFC
性能
存储优化(消冗网关)产品
低端
目 录
赛思信安简介
赛思信安存储优化产品线
赛思信安存储优化解决方案
典型案例分享
赛思信安存储优化解决方案
主要为备份、归档领域
可支持PCI-e扩 展卡 容量 处理速度 成本 管理
如：DD160可支持1Gbps 网口(铜或光) 3个PCI-e x8插槽 可支持4Gbps FC VTL 卡 DD160可用容量3.98TB 667 GB/小时 价格昂贵 配置复杂 •每台设备配备一个命令行界面 •Web只有基本的报告 支持mail，短信，SNMP等告警方式 30
报告
150 人的团队， 中国专业的存 研发人员占 储技术与服务 70% 以上 供应商
全国7大销售 与服务基地 150人的团队， 研发人员占 70%以上
赛思信安简介(continue)
文化
专注：专注优化、持续创新 文化 执著：执着追求、实现理想 诚信：为人以诚、待人以信
使命
持续数据存储优化，降低总体拥有成本
NameNode
DataNode
DataNode
目 录
赛思信安简介
赛思信安存储优化产品线
赛思信安存储优化解决方案
典型案例分享
重复数据消除 – 源端 vs. 目标端
源端 优点
全局
1. 2. 3. 4. 减少备份空间需求 传输数据量减少 减少备份链路需求 加速备份 1. 2. 3. 4.
目标端
减少备份空间需求 兼容现有备份环境 高吞吐量 协议独立
数据块级消重
消重
消重
赛思消冗网关VS友商产品
技术指标 核心技术 赛思消冗网关 SD800 线内重复数据删除 多重索引机制 并行层次消冗 数据一致性检验 可变长度、数据块级的全局消重技术技 主要为备份、归档领域 适用领域 缓存 内置磁盘 8GB 系统磁盘做raid1镜像保护 (赛思消冗网关可后接各种SAN架构存储做容量扩充 ) 可支持1Gbps,10Gbps网口 可支持4Gbps,8Gbps,16Gbps接口 SD800可用容量50TB 1.5TB/小时 性价比高 配置简单 透明部署方式 系统稳健与内容清楚 支持mail，短信，SNMP等告警方式 6GB 例如：DD160可内置7或12块SATA磁盘 EMC Data domain DD160 线内重复数据删除 数据一致性检验 可变长度、数据块级的全局消重技术技术
文件级索引
…
文件级索引项 文件块索引集合
内 存 缓 存
文件块索引项
. . .
块级索引
…
...
…
块的查询效率
…
…
外 存 缓 存
采用了两层索引组织机制，可有效的提升存储管理能力。
赛思存储消冗效果
赛思信安存储消冗效果简述
一般存储方式~1 压缩存储方式~1/2 定长消冗存储~1/5 赛思消冗存 储~1/10以下
应用服务器 应用服务器 应用服务器 应用服务器 需求特点 数据需要长期留存的应用环境
LAN网络
数据量大且数据量不断增长 NFS /CIFS 协议
现有存储压力巨大
存储消冗网关集群 支 持 多 种 存 储 架 构
方案优势特点 支持多种数据类型消冗 支持多种存储架构 支持PB级数据量 多级索引机制 可变长、数据块级、全局消冗
存储优化产品线
容量
SD5800
高端
SD3800
可用容量< 500TB 逻辑容量1PB-2.5PB 2个万兆 2个16GbFC
SD2800
可用容量< 300TB 逻辑容量 600TB-1.5PB 10个千兆/1个万兆、2个 8GbFC
SD1800
可用容量 < 200TB 逻辑容量 400TB-1PB 6个千兆、1个8GbFC
赛思信安存储优化解决方案
北京赛思信安技术有限公司
目 录
赛思信安简介
赛思信安存储优化产品线
赛思信安存储优化解决方案
典型案例分享
赛思信安简介
多项工信部 及国家发改 委项目资金 支持
多项专利、 软件著作权 和注册商标
6年积淀，成 为国内数据 消冗领航者
国内唯一专 注数据消冗 及大数据管 理的研发厂 商
服务方式
1. 400服务热线 进行远程电话支持、收 集用户的反馈与Leabharlann Baidu见， 服务质量跟踪和管理； 2.网络服务 客户可以登录赛思网站， “技术解答”获取所需 信息；
服务承诺
1.立即响应： 7*24 小时的电话支持, 15 分钟电话响应；
2.迅速处理： 一般故障工作日当天解 决。重大故障3个工作日 内解决；
分布式文件系统消冗解决方案
数据消冗特点
在归档中，DataNode将数据归档到本地消冗 系统中，并建立相应的链接
业务服务器1
业务服务器2 以太网 索引流
业务服务器3
数据存储到本地，索引通过网络传输
索引流
分布式 消冗客户端
...
分布式 消冗客户端
消冗网关
消冗网关 消冗网关集群
数据读取特点
DataNode从消冗集群中获取相应的索引数据 根据索引从本地文件系统中读取数据