存储基本知识及行业分析

合集下载
  1. 1、下载文档前请自行甄别文档内容的完整性,平台不提供额外的编辑、内容补充、找答案等附加服务。
  2. 2、"仅部分预览"的文档,不可在线预览部分如存在完整性等问题,可反馈申请退款(可完整预览的文档不适用该条件!)。
  3. 3、如文档侵犯您的权益,请联系客服反馈,我们会尽快为您处理(人工客服工作时间:9:00-18:30)。

存储基本知识及行业分析
1存储架构分析
目前存储市场上,根据服务器类型分为:封闭系统的存储和开放系统的存储,封闭系统主要指大型机,AS400等服务器,开放系统指基于包括Window、UNI某、Linu某等操作系统的服务器;开放系统的存储分为:内置存储和外挂存储。

开放系统的外挂存储分为:DAS存储(Direct-AttachedStorage)和NAS存储(Network-AttachedStorage)和存储区域网络(StorageAreaNetwork)。

1.1DAS存储
DAS存储已经有数十年的使用历史,随着用户数据的不断增长,其在数据读写、扩展、备份等方面的问题变得日益困扰系统管理员。

DAS存储依赖服务器主机操作系统进行数据的IO读写和存储维护管理,数据读写等任何操作都要占用服务器主机资源(包括CPU、系统IO 等)。

DAS存储的数据量越大,对服务器硬件的依赖性和影响就越大。

通道将会成为IO瓶颈;同时服务器主机SCSIID资源有限,能够建立的SCSI通道连接有限。

DAS存储的共享性和扩展性很差。

每个服务器直连的JBOD只能供其独自使用。

任何形式的扩展都会造成业务系统的停机,对于7某24小时服务的关键业务系统,这是不可接受的。

并且直连式存储或服务器主机的升级扩展,只能由原设备厂商提供,往往受原设备厂商限制。

1.2NAS存储
网络附加存储(Network-AttachedStorage,)采用网络(TCP/IP、ATM、FDDI)技术,通过网络交换机连接存储系统和服务器主机,存储设备作为
网络标准件连入局域网中,本身具有文件系统,直接为服务器提供文件级
存储服务。

由于NAS存储采用IT业界标准协议TCP/IP进行数据交换,不同厂商
的产品(服务器、交换机、NAS存储)只要满足协议标准就能够实现互连互通,无兼容性的要求。

NAS存储特点:
首先,NAS存储可以将设备通过标准的网络拓扑结构连接,摆脱了服
务器和异构化构架的桎梏;
其次,在企业数据量飞速膨胀中,NAS存储在解决足够的存储和扩展
空间的同时,还提供极高的性价比。

因此,无论是从适用性还是TCO的角
度来说,NAS自然成为多数企业,尤其是大中小企业的最佳选择;
1.3SAN存储
存储局域网络SAN是目前最为先进的海量数据存储架构,是建立在服
务器集群和存储设备之间的网络,给服务器集群提供集中式的共享的存储
空间,便于管理。

SAN存储模式中,磁盘阵列只提供块级裸盘存储空间,
文件系统分部在各个应用服务器上,这是SAN和NAS的最本质区别。

SAN的优点可归纳为下几点:
SAN存储系统扩展性好、升级能力强,投资保护性好。

存储系统支持数据集中式管理,相关业务数据存储系统或全部的应用
数据存储系
统合并为统一的存储系统。

采用开放式的体系结构,支持多种系统平台的接入,亦即实现跨平台
操作。

提供包括存储介质、接口设备及连接链路的冗余支持。

向网络客户端和应用服务器提供高效可靠的数据存储服务时,同时对
应用系统的
运行效率和网络的速度不会产生明显影响。

1.3.1FCSAN
SAN存储模式总根据网络介质不同,分为FCSAN和IPSAN。

在SAN存
储技术应用之初,SAN基本上就是指的FCSAN。

开放的、标准化的光纤通道技术使得FCSAN非常灵活。

FCSAN克服了
传统上与SCSI相连的线缆限制,极大地拓展了服务器和存储之间的距离,从而增加了更多连接的可能性。

改进的扩展性还简化了服务器的部署和升级,保护了原有硬件设备的投资。

(1)通用性。

FCSAN是在iSCSI标准产生的前4年出现的存储区域
网架构,带有相当程度的应用催生特点。

FCSAN大多应用在性能要求较高
的金融、电信等领域,随着Brocade等厂家低端光纤交换机价格的下调,FCSAN也开始应用于低端。

(2)高效性。

目前光纤通道普遍是4Gb的,后续会出现8Gb光纤,
在整个系统性能方面十分优越,用户访问时非常快捷。

(3)灵活性。

光纤网络存储的组建也非常的灵活,只要有通光纤的
地方,都可以将其应用的服务器通过光纤进行连接,做到真正的数据大集中。

(4)稳定性。

由于光纤性能较高,在其运行过程中稳定性较好。

但是,FCSAN也存在很多不足之处。

FCSAN的传输距离通常不超过50
公里。

这样容易形成存储孤岛;虽然光纤通道(FibreChannel)技术有统
一的标准,但各家厂商却有不同的解释;互操作性仍是FCSAN实施过程中
存在的主要问题;SAN本身缺乏标准,在管理上更是如此;FCSAN的存储
设备价格仍居高不下,建设成本过高。

FCSAN的缺点:
(1)成本高。

光纤交换机、HBA光纤卡、光纤硬盘等设备都较昂贵,这是FCSAN的最大缺点。

(2)管理难度大。

FCSAN的另一个问题是它与应用网络的异构性,
这种异构性使得占市场大多数的中低端客户,因面对相对陌生、复杂的
FC技术望而却步。

一般来说,FCSAN多半需要特定的工具软件来操作管理,所以需要对人员进行一定时间的教育训练,而且费用不低。

(3)容易形成存储孤岛。

由于FCSAN受它的物理机理决定,它无法
使存储设备随它在Internet上运行,从而无法满足应用前端对存储数据\
无时不有、无处不在\的要求。

FCSAN的物理覆盖有限,不超过50公里,
这样容易形成存储孤岛。

(4)设备的兼容性问题。

由于标准的不统一,各个FCSAN产品的生
产厂家所生产的设备之间不兼容。

1.3.2IPSAN
iSCSI(InternetSCSI,互联网小型计算机系统接口)是一种在Internet协议网络上,特别是以太网上进行数据块传输的标准。

它是由
多家存储厂商发起的,并且得到了IP存储技术拥护者的大力支持。

iSCSI
是一个供硬件设备使用的,可以在IP协议上运行的SCSI指令集。

简单地说,iSCSI是可以在IP网络上运行的SCSI协议。

iSCSI存储技术实际上是针对FCSAN存储技术的缺点进行改进,它主
要具有以下几方面明显的特征及优势。

在IPSAN中,千兆以太网交换机代
替了价格昂贵且只有FCSAN专用的光纤交换机,客户端的Initiator或iSCSI卡代替了价格较高的主机HBA卡,具有iSCSI接口的高性价比的存
储设备代替了光纤磁盘阵列。

当然,两者的区别还不仅如此。

FCSAN具有良好的扩展性,IPSAN的
扩展性更加出色。

我们可以在IPSAN中使用SCSI、FC、SATA、SAS等多种
磁盘阵列来扩展IPSAN的容量。

如果比较大数据块传输的性能,基于千兆
以太网的IP技术与基于4Gb/光纤的FCSAN还有一定差距。

但是,从发展
趋势看,万兆以太网已蓄势待发,相信IPSAN的性能会得到很快提升。

在安全性方面,iSCSI规范包含了Initiator和目标验证(使用CHAP、SRP、Kerbero和SPKM),以防止未经授权的访问,同时只允许可信赖的节
点访问。

作为补充,IPSec可以提供安全保证,防止侦听。

光纤通道是工
作在第二层的协议,原本并没有建立相应的安全机制以及安全通用协议,
只不过是基于逻辑上的数据通道绑定。

由于IP技术的普及和发展,利用iSCSI技术搭建的IPSAN可以随着
网络延伸至全球任意一个角落,从根本上解决了信息孤岛的问题。

我们甚
至可以通过IPSAN来连接各个FCSAN的孤岛。

利用标准化的数据传输通道、标准的接口以及虚拟存储管理技术,IPSAN
存储网络几乎可与所有种类的磁盘阵列兼容。

产品互操作性的问题迎
刃而解。

优点:
(1)成本投入小。

iSCSI所使用的适配卡、交换机和缆线这些产品
的价格比FCSAN所选用的硬件产品价格要低,并且iSCSI可以在现有的网
络上直接安装,并不需要更改企业的网络体系,这样就大量节约资金投入。

(2)管理门坎及维护成本更低。

一般来说,FCSAN多半需要特定的
工具软件来操作管理,所以需要对人员进行一定时间的教育训练,而且费
用不低。

iSCSISAN乃透过IP网络来传输数据及分配存储资源,所以只要
使用网络现有的管理功能即可,比较起来,的确可以省下大笔管理人力及
训练成本。

(3)无距离限制。

由于iSCSISAN是一种基于IP网络的存储技术,
它会随着IP网络的延生而将存储距离不断扩大,因此iSCSISAN是无距离
限制的。

(4)组建方式灵活,可扩展性高。

由于iSCSISAN存储系统可以直接
在现有的网络系统中进行组建,并不需要改变网络体系,加上运用交换机
来连接存储设备,对于需要增加存储空间的图书馆来说,只需要增加存储
设备就可完全满足,因此,iSCSISAN存储系统的可扩展性高。

(5)传输速度快。

拜GBE以太网络之赐,理论上,iSCSISAN的速度
可达1GB,虽然速度仍比不上FCSAN的2GB,但效能上已超越大部分的NAS。

更重要的是,一旦下世代的10GB以太网络普及的时候,iSCSISAN
就可能以10GB的高速狂飙,比FCSAN的下世代版本———4GB还要快。

(6)人才较多。

随着因特网的日益兴盛,造就了取之不尽、用之不
竭的TCP/IP网络人才,比起门坎较高的FCSAN来说,这对于专走IP网络Bae的iSCSISAN而言,可说是一大优势。

iSCSISAN的缺点
天底下没有十全十美的事物。

虽然iSCSISAN的优点不少,而且十分
抢眼,但仍有许多待解决的缺点。

(1)扰人的噪声碰撞;
(2)有待改进的效能瓶颈:①传输频宽问题;②流量控制问题;
③I/O端的速度限制;④软件iSCSIInitiator会耗费掉大量的CPU资源,效能不彰。

(3)令人质疑的安全性。

IP网络环境复杂,再加上懂IP的人较多,所以安全性也相对地令人质疑。

1.3.3监控应用中选择IPSAN的底层原因
除了上节分析的系统架构和成本方面的区别外,从性能方面分析,IPSAN也比FCSAN更适合应用于监控存储中。

在监控应用中,由于多路并发等应用特殊性,决定了性能瓶颈往往在
硬盘上,而不是主机接口上。

以3Gb/SATA盘为例,在监控模拟应用中的测试性能约为40MB左右,
实际可以支持500路CIF码流;考虑的做RAID后性能的提升,实际应用
中也仅可以支持到的1000-1500路CIF码流,换算成带宽也就是65-
95MB/之间。

单4Gb/的FC主机接口带宽为500MB,2个千兆主机接口带宽
为250MB,主机接口带宽均远大于65-95MB,即使按照主机接口应用带宽
约为理论带宽的50%,也大于硬盘在监控应用中的实际性能,即采用FC
或者IP接口对整体性能几乎没有什么影响。

因此,考虑性能要求和投入
成本,在监控应用中我们推荐使用IP存储设备,完全没必要采用价格昂
贵的FC或者万兆存储系统。

2市场情况分析
2.1《中国企业级外部存储市场季度跟踪报告》
根据IDC最新发布的《中国企业级外部存储市场季度跟踪报告》显示,2022年前三个
季度(1-9月)中国企业级外部存储市场的总规模达到685.7百万美元,同比增长18.4%;存储总容量达到480102.2TB,同比增长80.9%。


数据表明,存储市场已由2022年的平势转为涨势。

究其原因,IDC认为:政府对经济建设的投资推动了IT基础架构设备的采购;第二是海量数据
尤其是非结构数据的爆炸增长导致的存储需求缺口;第三是各企业及政府
机构对存储建设的认识提高,投资加码。

FC接口仍然是存储市场的主流,2022年前三个季度其市场份额为
70.0%,iSCSI市场增长最快,同比增长达到31.1%,其中Dell的EqualLogic系列、EMC的CLARiiON系列、HP的P4000系列与H3C产品表
现突出,iSCSI开放兼容、价格低容量大、传输速度高等优点使其在视频
监控领域以及政府的异地灾备等项目中获得良好发展,也开始被用作云底
层架构中;NAS市场的增长紧随其后,同比增长达到27.7%,尤其是
Scale-outNAS在低成本高容量的HPC中心与动漫渲染等媒体领域的应用
越来越广泛。

接口的另一趋势可以通过EMC最新发布VN某产品抗衡NetApp系列产品中看出,多协议存储由于其高存储利用率、支持服务器
虚拟化等特征导致客户端的需求日益高涨,随之也将带来对存储管理软件
的挑战。

政府、电信与金融依然是驱动中国存储市场增长的三大主力行业,其
前三个季度的市场份额之和达到60.9%。

政府行业的存储采购呈现出集中
采购与分散采购相结合、从打包采购向单独采购过渡、应用与需求多样化
等特征,2022年既有平安城市、文化共享、电子政务等原有项目的持续
分省采购,上海世博会的激烈竞标,又有超算中心、异地灾备中心、金税
工程、数字化城市等大型项目的相继启动,IDC相信政府行业将在未来几
年内保持较快速度的增长。

相比于2022年BOSS系统的大规模铺建,电信
行业在2022年上半年出现了集采的滞后,并从第三季度起得到释放,除
了BOSS系统的升级改造,存储开始逐步应用于BI分析,CRM等核心业务
以及彩铃彩信等增值业务。

除此之外,媒体行业的市场份额上扬了两个百
分点,主要是几大互联网的大规模进货,以及三网融合所带动的IPTV架
构整合十分旺盛;另外,制造业、流通业、以电力为代表的能源业以及医
疗业均呈现出较强的同比增长。

广大的中小企业在信息化进程中越来越明
显的表现出对高灵活性、低成本的中小企业解决方案和相关存储产品的投
入以及对存储虚拟化的关注。

IDC预测,2022年中国企业级外部存储市场将继续保持超过15%的同
比增长,市场总规模有望突破1300百万美元,存储总容量有望达到950000TB,存储市场前景乐观。

2.2《TechTarget中国2022年存储应用意向调查报告》
2022年存储类型采购意向:iSCSI最受欢迎
关于存储类型的采购是一项多选题,40.7%的受访者都选择了iSCSI;接下来的四个为NAS阵列37.4%;FC和多协议统一存储均为36.3%;固态
存储占23.1%。

的确,iSCSI
在数据中心的应用越来越广泛,iSCSI存储一直以来都被认为是更适
合中小企业的存储架构而不是企业级的数据中心。

但事实上,它的性能已
经超过了FC。

根据IDC2022年的官方数据,在存储整体萎缩(下滑了
7.6%)的前提下,iSCSI仍然出现了增长(增长25%)。

在数据中心开始
实施虚拟化以来,NAS的应用愈加广泛,因为在一个虚拟化环境中,NAS
设备可以作为虚拟机在服务器之间迁移的一个交换空间,作为一个备份介质,或者作为所有虚拟磁盘镜像的中央知识库。

2.3视频监控将成为iSCSIIPSAN的重要市场
根据ESG去年年底对最终用户的调查,有28%的受访公司已经在使用iSCSI,而计划使用iSCSI的公司则达到了52%。

ESG的分析师MarkPeter表示:\对于一个存储协议来说,拥有良好的通用性并非一件坏事。

\
ESG调查的受访公司总数位1488家,其规模从100人到20000人不等。


Peter表示,服务器虚拟化开发和IT预算压力的不断增加政治推动着基于iSCSI的IPSAN市场份额的扩大。

不过这也要考虑到iSCSI的适用范围能否随之增长。

IPSAN最热门的领域之一是视频监控。

IMS最近完成的一份报告《全球企业级和IP存储视频监控市场报告》表示,预计在2022年至2022年之间,IPSAN视频监控市场的复合年增长率将达到66.7%。

从报告中我们可以看到,IP监控视频一般被用于商业非机架式(COTS)服务器,数字视频录像机(DVR)或网络视频录像机(NVR)。

尽管视频监控会对NVR做出优化,不过在拥有众多摄像机的环境下其并不能很好地工作。

数字录像机(DVR)也是一样。

COTS服务器价格低廉,并且是可扩展的,但服务器并没有针对视频监控做出优化。

IMSReearch的分析师WilliamRhode表示,有三个理由能证明IPSAN系统将在视频监控市场占据一席之地:
-IPSAN在RAID,故障恢复以及虚拟化等功能上超越了COTS服务器-iSCSI比光纤通道SAN要便宜
-IPSAN能够被用来替代COTS服务器和NVR,这是由于存储厂商正在整合服务器和视频管理软件来形成统一的产品
3业界厂家情况
无论是以HP与Dell竞购3PAR为代表的一系列并购,还是以EMC、VMware、Cico为代表的一系列联盟,国际厂商在保持领先市场份额的同时,都在部署至少未来五年的存储战略。

IDC预计各厂商新的结合类解决方案将陆续在2022年中旬开始发布。

国际厂商如EMC和IBM,除了在中高端市场依旧占据主导地位,也开始加大对低端市场的渗透;HP的某9000,EMC的Iilon,IBM的SoNAS是业内顶级集群na系统,但不适合监控存储应用。

国内厂商如浪潮与同有,则除了发挥在政府、军工等行业的传统优势以外,也开始加大研发或OEM,向中高端市场挺进。

海康存储2022年国内监控存储市场占有率12%。

借重庆项目海康首先推出了可以实用的监控云存储系统。

华赛的存储系统跟海康存储十分相像;中科蓝鲸的主要优势在广电行业,核心是BWFS文件系统;Uit主要在监控和广电行业。

《电子信息产业调整和振兴规划》已把大容量存储的核心技术研发与产业突破列为重要任务,此举将给国内厂商带来跨越式的发展机会。

相关文档
最新文档