大数据下的存储变革——聚焦SNW 2013中国大会

合集下载
  1. 1、下载文档前请自行甄别文档内容的完整性,平台不提供额外的编辑、内容补充、找答案等附加服务。
  2. 2、"仅部分预览"的文档,不可在线预览部分如存在完整性等问题,可反馈申请退款(可完整预览的文档不适用该条件!)。
  3. 3、如文档侵犯您的权益,请联系客服反馈,我们会尽快为您处理(人工客服工作时间:9:00-18:30)。

大数据下的存储变革——聚焦SNW 2013
中国大会
作者:暂无
来源:《计算机世界》 2013年第26期
本报记者郭平
从什么时候开始我们被数据包围了?环顾四周,想想我们每天的工作和生活,数据俨然已
经成了其中的一部分。

在刚刚结束的以“数据驱动业务,存储创造价值”为主题的一年一度的SNW中国大会上,
大数据成为最大热点,而由此引发的对数据的存储、基础设施建设以及未来的融合趋势的讨论,也吸引了众多听众的关注。

SNW(StorageNetworkingWorld)中国大会是由计算机世界报社和SNIA(全球网络存储工
业协会)共同主办的存储领域最大规模的技术大会,该会议最早源于美国,从21世纪初进入中国后,至今已经举办了近10年。

今年的大会除了精彩纷呈的大会主题演讲、分论坛技术讲座以及新产品和解决方案展示外,以讨论创新技术为目的的“技术沙龙”和以分析中国存储市场发
展趋势为话题的“虚拟化和云计算沙龙”,成了会议的新亮点,气氛热烈。

大数据带来新思维
大数据有多火?这恐怕从SNW大会上就可见一斑,会上几乎所有的主题演讲都不能“免俗”,开讲必谈大数据。

数据的增长趋势已经毋庸置疑,而大数据的重要性也已经成为业界共识。

华为存储产品线Marketing部长经宁认为,大数据是国家重要的战略资源,目前各国政府都不敢掉以轻心,他
举例说,联合国在去年7月发布了政务白皮书《大数据促发展:挑战和机遇》,建议联合国成
员国开发大数据潜在价值,对失业率增加、区域开支、疾病暴发进行预测;同样,奥巴马政府
也在去年发布了《大数据研究和发展倡议》,启动“大数据研究和发展计划”,其六大联邦部
门年投资2亿美元;今年1月,英国宣布投资1.89亿英镑发展大数据,这一数字将占英国新技术发展资金的31.5%;在中国,前不久的6月21日,中科院发表了由200多位专家耗时1年研
究得出的战略报告,将大数据作为国家七大研究领域之一。

大数据的兴起为各行业带来了新的机遇,同时,也促使IT架构的改变。

经宁认为,大数据实际上给IT创造了一个新机会,IT从一个简单的成本中心开始向利润中心和运营中心转移,
使IT从定位上就发生了很大变化。

他认为,首先,数据的增长推动了IT架构从集中式架构向
分布式架构演进;其次,从以计算为中心的架构开始逐步走向以数据为中心的架构;第三,从
典型的水平式的层次化的架构,走向上下整合纵向拉动的架构。

大数据带来的变化是多方面的。

SNIA中国技术委员会主席、天云大数据CEO雷涛说:“在
大数据时代,作为一个存储人,从存储的角度看,我们的思维和技术方向无疑将发生变化。


他认为,由于数据量的猛增,一个应用每天产生的数据动辄几百GB甚至上TB,而现在的IT架
构是计算与存储分离,数据需要从存储端搬移到计算端,而这对于一些更大数据量的业务来说
几乎很难完成。

因此,雷涛说,新的IT架构的趋势是存储与计算融合,从而产生一个新的词:Storver,即Storage+Server,或者将计算做到存储里,或者将存储纳入计算设备中,总之使
数据更靠近CPU。

“未来我们可能不但要考虑管理数据和存储数据,还要考虑怎么计算数据。


雷涛说,存储和计算的融合,使以前做不了的事情成为可能,并将使计算和存储的性能得到大
的改善。

这种大数据下计算与存储的融合观点其实与许多厂商的看法不谋而合。

对于大数据,用户的想法是什么?科技部信息中心总工程师胡少华说:“说到大数据,我
们可以考虑一下什么是中数据、小数据。

传统IT发展这么多年,在我们的信息系统中,有很多是小数据,也就是数据是片段的或一个时段的数据,而大数据的价值,是以前这些小数据和中
数据不能发现的,大数据就是要把这些片段串起来,从全局发挥IT和信息对整个人类的贡献。

”胡少华认为,所谓大数据不可能是每个行业用户都建一个巨无霸的数据中心。

构筑大数据解决
方案,一是集中一个点的方案,二是把不同散构的数据中心集成起来,实现一致、分布、高效率。

SNIA在大数据方面也正加紧部署。

在SNW大会上,SNIA宣布成立SNIAChina合作实验室及大数据工作组。

SNIAChina合作实验室由云存储实验室和大数据实验室组成,其中云存储实验
室由SNIA与中科院信息工程研究所共同创办;大数据实验室则由SNIA与天云大数据公司合作
建立。

同时,SNIA宣布在中国成立由本地技术力量支持和组织的大数据工作组,进行技术研究,推动技术的普及与发展。

大数据驱动数据中心变革
有一个词最近正在走红,那就是“软件定义”,从最初的软件定义网络,到之后的软件定
义数据中心,直到软件定义基础架构和软件定义存储。

其实,不难推断,正是数据量的高速增
长和大数据时代的到来,才使得软件定义变成了“时尚”。

英特尔公司通信和存储基础架构事业部存储部市场总监ChristineM.Rice女士用一串数字
来说明数据量之大和增长速度之快:2011年,全球的数据量是1.8ZB,如果将其全部存入4TB
容量的硬盘中,需要4.5亿块硬盘;到2015年,数据量将达到8ZB;而到2020年,数据量则
将达到40ZB,相当于100亿块4TB的硬盘。

对于如此高涨的数据量,可以想像,如果存储系统
不发生变革,又如何应对如此严峻的挑战?
ChristineM.Rice女士认为,建立可动态满足工作负载需求的数据中心是解决大数据问题
的根本,其中包括从逻辑环境中提取物理硬件、优化所有数据中心资产的使用、自动化管理数
据中心资源,而这些所仰仗的正是软件定义基础架构。

Rice女士进一步解释说,软件定义基础
架构可能采用的先进技术包括:在服务器端,需提高应用程序的性能、可靠性、可扩展性和可
维护性;在存储端,需要采用面向低延迟和高带宽需求的SSD,以及智能存储优化技术;在网
络端,需采用统一网络,以及可编程的开关和管理API;在安全性方面,需要基于硬件的数据
和多租户工作负载完整性技术;在协调性方面,需要通过深度电源与资源使用来调整数据中心
效率和密度。

面对大数据的挑战,西部数据高级工程师武罡认为,改变数据中心的效率和效能是他们的
目标,而其中的关键是拥有正确的存储基础部件。

什么是正确的存储基础部件?他举例说,就
像一辆车配什么样的轮胎,要根据负载、耐磨损、速度、牵引力和成本来综合判断所需轮胎的
型号一样,对于“热”数据,则需要快速、可靠的存储,而“冷”数据需要的则是大容量、高
性价比的存储。

中桥国际调研咨询公司首席分析师王丛通过对600多位中国用户的调查,并结合她在北美
的经验认为,虚拟化、云计算和融合架构是实现大数据的基础,而中国企业对于虚拟化的部署
往往停留在测试和开发环境阶段,不仅制约了通过虚拟化提高整个IT效率,同时也阻碍中国企业从虚拟化到云计算的进程。

闪存加快大数据处理
闪存近年来可谓异军突起,不但直面挑战传统的旋转式磁盘,甚至还将带来存储架构的变革。

说起闪存,人们最为津津乐道的就是一个字:快!恰恰是这一特点,满足了人们对大数据处理的需求。

Fusion-io大中国区技术总监艾昆说,当闪存做成一块PCIe卡插到服务器中作为存储设备时,它就更靠近CPU,而带来的无疑是性能上的提高,这也是Fusion-io的产品受到包括Apple 和Facebook等用户欢迎的原因。

艾昆说,除了这种模式外,当存储容量需求较大时,PCIe卡还可作为读缓存,以提高系统性能。

另外,闪存还可作为共享存储,并具有较强的扩展能力。

英特尔非易失性存储方案事业部业务开发经理倪锦峰也认为,PCIe固态硬盘提供了更高的带宽、更低的延迟、更好的扩展性,因此能实现更好的TCO。

他同时表示,可维护性对加速PCIe的广泛采用至关重要。

NetApp公司同样提供全套的闪存解决方案,其北方区及电信事业部技术总监刘炜认为,NetApp的闪存解决方案是为适应不同的工作环境而制定的,闪存放在不同的位置,所带来的IT 架构的改变也不相同。

存储需要创新
由于大数据和云计算时代的来临,存储面临突破性的创新,以适应不断增加的数据量和不断提高的应用需求。

“流动数据”是戴尔存储的创新,在这次SNW大会上,戴尔亚太区存储业务部技术总监许良谋进一步表达了戴尔的“流动”理念:“流动即发展。

”许良谋说,戴尔存储发展的理念就是围绕着流动数据架构,通过收购、集成、创新,为中端产品提供高端功能,用中端产品改变企业存储的经济性。

也就是说,用两级闪存优化技术实现快速,用横向扩展的多动力节点实现大数据容量。

他同时说,存储不能“忘本”,最重要的是保护好数据。

NetApp一直是统一存储架构的倡导者,而近来在统一存储架构的基础上,NetApp又推出了可扩展的概念,即存储集群。

NetApp刘炜说,NetApp的存储集群更强调的是不中断的数据服务能力。

过去一直以磁带见长的昆腾公司在大数据时代果断地选择了创新和变革。

昆腾公司亚太区存储专家刘松涛认为,目前市面上90%的存储都不是大数据存储,客户依然在用数据库存储来加工大数据,而80%以上的大数据用户都在金融业、电信业。

他说,昆腾除了用磁带库和磁盘系统承载海量的数据外,其最新的StorNext软件就是面向大数据块而开发,并针对视频大数据块、顺序读写的特点设计,其性能优于数据库存储。

创新是SNW的主旋律。

为了鼓励创新,并营造SNW大会的技术氛围,今年的大会特别设立了技术沙龙,英特尔云计算和大数据系统架构师朱海峰、华为大数据存储技术专家黄克骥、天云融创数据科技公司高级咨询顾问冯大志,分别介绍了在大数据领域的创新技术,得到了SNIA 专家的点评,并引发了与听众互动的讨论。

同样为鼓励创新,SNW大会组委会面向所有存储厂商征集了存储产品和解决方案,并从中评选出6款产品获得SNW2012优秀产品奖,4款解决方案获得SNW2012优秀解决方案奖。

获奖名单见下表。

W。

相关文档
最新文档